数据工程师 III
成为一个充满活力的团队的一员,发挥您的独特技能,助力打造一个成功的文化和团队。在摩根大通的消费者和社区银行及数据技术部门担任数据工程师 III,您将作为敏捷团队的资深成员,设计并交付可信的数据收集、存储、访问和分析解决方案,以安全、稳定和可扩展的方式进行。作为核心技术贡献者,您负责在多个技术领域内进行关键技术解决方案,以支持公司的业务目标。
工作职责
• 开发安全的高质量生产代码,并审查和调试他人编写的代码
• 执行创造性的软件解决方案、设计、开发和技术故障排除,能够超越常规或传统方法思考以构建解决方案或分解技术问题
• 识别消除或自动化重复问题修复的机会,以提高软件应用和系统的整体操作稳定性
• 与跨职能团队密切合作,开发高效的数据管道以支持各种数据驱动的计划
• 实施数据工程最佳实践,确保数据质量、可靠性和性能
• 通过利用云解决方案和优化数据处理工作流,为数据现代化努力做出贡献
• 执行数据提取并实施复杂的数据转换逻辑以满足业务需求
• 利用高级分析技能改进数据管道,确保数据交付在各项目中保持一致
• 监控并执行数据质量检查,以主动识别和解决异常
• 确保数据的可用性和准确性以用于分析目的
• 向技术和非技术利益相关者传达技术概念
所需资格、能力和技能
• 具有使用ETL工具的经验,如Ab Initio、Informatica、Data Pipeline和工作流管理工具(如Airflow等)
• 拥有PySpark、Python和AWS的强大编码经验
• 具有现代数据湖的工作经验:(如Snowflake、Databricks等)
• 拥有系统设计、应用开发、测试和操作稳定性的实践经验
• 具备很强的问题解决能力
• 熟练掌握自动化和持续交付方法
优先资格、能力和技能
• 精通一种或多种编程语言,如SQL、Java等
• 熟悉软件开发生命周期的各个方面
• 高级理解敏捷方法,如CI/CD、应用弹性和安全性
• 在技术领域(如云、人工智能、机器学习等)中展示出对软件应用和技术流程的熟练掌握
• 深入了解金融服务行业及其IT系统的实际云原生经验
• 拥有不同级别软件工程师的领导和指导经验