技术能力:
1、精通ETL基本数据清洗方法,熟练使用主流ETL工具进行数据清洗、格式转换、聚合、去重、数据类型转换等操作。
2、精通SQL语言,包括复杂查询、存储过程、视图、索引和进行SQL调优。
3、熟悉主流数据库,如Oracle、MySQL、PostgreSQL、Hive、spark等。
掌握至少一种编程语言,如Python、Shell等,用于开发ETL脚本和数据分析处理能力。
4、能够通过脚本实现数据预处理、任务调度等功能。
5、熟悉数据治理的基本框架和流程,包括数据标准、数据安全、数据生命周期管理等,能够与数据治理团队协作,确保ETL流程符合数据治理要求。
6、数据仓库知识:了解数据仓库建模的设计与优化,熟悉数据仓库架构(如星型模型、雪花模型),能够将ETL流程与目标架构紧密结合。
任职要求:
1、沟通能力:具备良好的沟通能力和团队合作精神,能够与业务部门、数据分析师等有效协作。
2、教育背景:专科及以上学历,计算机科学、信息管理、统计学等相关专业。
3、工作经验:具备2至5年以上ETL开发经验,有银行或金融行业项目经验者优先。
4、其他:可以接受出差。
...