作为一名ETL开发人员,您将设计、开发和维护稳健的数据摄取管道和ETL流程,以支持企业数据集成和分析计划。您将与跨职能团队密切合作,提供可靠、可扩展和高质量的数据解决方案。
???? 主要职责
- 使用SSIS、Informatica BDM和本地工具设计和实施ETL管道
- 使用如Control-M等编排工具构建和管理数据工作流
- 确保多个系统之间的数据质量、完整性和一致性
- 开发和优化复杂的T-SQL和PL/SQL查询、存储过程和脚本
- 监控ETL性能并建议调优或基础设施改进
- 排查和解决高影响的数据和集成问题
- 设计与企业架构对齐的逻辑和物理数据模型
- 定义和执行ETL编码、测试和部署标准
- 与业务和技术利益相关者合作以收集数据需求
- 支持BI和ETL团队的数据提取、转换和分析用例
???? 必需资格
- 计算机科学、MIS或相关领域的学士学位
- 8-10年ETL开发和数据工程经验
- 丰富的经验包括:SSIS、Informatica BDM、SQL Server、Oracle、半结构化和非结构化数据
- 拥有编排工具(如Control-M)的实际操作经验
- 熟悉数据建模和解决方案工程
- 高级T-SQL和PL/SQL技能,具备性能调优专长
- 熟悉数据质量框架
- 接触过Hadoop生态系统(Cloudera、Map R、Hortonworks)者优先
???? 技术技能
- ETL工具:SSIS、Informatica BDM
- 数据库:SQL Server、Oracle、Vertica、NoSQL
- 数据建模:逻辑和物理
- 大数据和云:Azure、Snowflake、Cloudera、Spark、HDFS
- BI工具:Power BI、IBM Cognos
???? 软技能
- 强大的分析和问题解决能力
- 出色的沟通和利益相关者协作能力
- 能够在快节奏环境中管理多个优先事项
- 积极主动的心态,注重细节和文档
???? 优选认证(可选)
- Microsoft Certified: Azure Data Engineer Associate
- Informatica BDM / Cloud Professional Certification