角色简介
作为技术履行团队中的产品支持工程师，您将配置、操作和监控我们基于谷歌云构建的大批量批处理数据交付平台。您将在处理和丰富客户的财务数据中发挥关键作用，确保无缝且精确的执行，重点关注质量和可靠性，在动态和不断发展的技术环境中获得宝贵的经验。
您的职责
平台配置与操作：
- 根据既定程序和客户规格，在我们的批处理交付平台上配置和执行数据处理工作流。
- 部署和管理通过Apache Airflow编排的复杂数据管道。
- 利用和扩展标准Airflow DAG模板，以确保在各个环境中的部署一致性和快速迭代。
- 监控数据处理作业的执行，识别并解决任何问题，确保及时和准确的交付。
- 执行数据质量检查和验证，以确保处理信息的完整性和准确性。
- 诊断并解决GCP平台及其相关基础设施中的复杂配置、调度和依赖性问题。
- 遵循既定的安全协议，并在所有配置活动中保持最高的数据安全和隐私标准。
- 遵循SDLC指南进行任何配置部署或更改。
- 维护配置、流程和遇到问题的准确记录。
- 及时了解平台更新、新功能和相关技术信息。
- 与其他团队成员（包括配置专家）有效协作，并在需要时提供支持。
- 持续改进和文档化：
- 参与识别配置工作流中流程改进和自动化的机会。
- 协助创建和维护我们的配置文档和知识库文章。
- 参加团队会议，并为流程优化和最佳实践的讨论做出贡献。
客户导向：
- 理解准确和及时的数据交付对客户的重要性。
- 支持团队解决客户查询和履行相关问题。
- 负责直接影响客户信任和业务成果的精确、高风险数据配置。
- 与跨职能合作伙伴（包括工程和数据运营）合作解决问题并改善交付流程。
您需要的经验
- 计算机科学、信息技术或同等学历的学士学位。
- 强大的分析能力、注重细节和积极主动的问题解决方法。
- 熟悉数据处理概念和批处理交付系统。
- 具有配置文件（例如YAML）工作经验。
- 理解云计算概念，理想情况下对GCP有一定的了解。
- 熟悉不同的文件编码格式。
- 具有使用API工具进行测试和理解数据接口的经验。
- 基本的脚本编写技能（例如shell脚本）是一个优势。
- 优秀的英语书面和口头沟通能力。
- 能够准确遵循团队程序并有效管理多个优先事项。
- 能够独立工作并作为协作团队的一部分有效工作。
可能让您脱颖而出的特质
- 能够通过在更高环境中测试来验证问题，根据需要提供生产事件的待命支持。
- 具有使用GCP服务（如Dataflow、Composer、Cloud Storage或Big Query）的经验。
- 熟悉云环境中的监控和日志工具（例如：谷歌云日志和监控）。
- 接触过金融服务数据，并理解其敏感性和重要性。
- 精通脚本编写（Python）或面向对象编程语言（Java）。
这是一个现有职位。
