业务咨询 - 使用Pyspark的ETL GCP技术分析师

新加坡 26天前全职 网络
32.8万 - 43.7万 / 年
概述 地点:印度浦那 类别:咨询和顾问服务 职位编号:335230 NTT DATA 力求招聘优秀、创新和充满激情的个人,与我们共同成长。如果您希望成为一个包容、适应性强和具有前瞻性思维的组织的一部分,请立即申请。 我们目前正在寻找一名具备 ETL 和 GCP 使用 PySpark 技术的业务咨询技术分析师加入我们在印度马哈拉施特拉邦(IN-MH)浦那的团队。 职责 - 您具备系统设计经验,能够架构和解释复杂的系统交互、数据流、常见接口和 API。 - 您对软件开发和编程语言(如 Java/Kotlin 和 Shell 脚本)有深入的理解和经验。 - 作为高级软件开发人员,您拥有以下技术的实践经验:Java/Kotlin、Spring、Spring Boot、Wiremock、Docker、Terraform、GCP 服务(Kubernetes、CloudSQL、Pub/Sub、Storage、Logging、Dashboards)、Oracle 和 Postgres、SQL、PgWeb、Git、Github 和 Github Actions、GCP 专业数据工程认证。 - 数据管道开发:使用 PySpark 在 GCP 上设计、实施和优化数据管道,以实现高效和可扩展的数据处理。 - ETL 工作流开发:构建和维护 ETL 工作流,以将数据提取、转换和加载到各种 GCP 服务中。 - GCP 服务利用:利用 GCP 服务如 BigQuery、Cloud Storage、Dataflow 和 Dataproc 进行数据存储、处理和分析。 - 数据转换:利用 PySpark 进行数据操作、清洗、丰富和验证。 - 性能优化:确保 GCP 上数据处理作业的性能和可扩展性。 - 协作:与数据科学家、分析师和其他利益相关者合作,了解数据需求并将其转化为技术解决方案。 - 数据质量和治理:在 GCP 上实施和维护数据质量标准、安全措施,并遵循数据治理政策。 - 故障排除和支持:诊断和解决与数据管道和基础设施相关的问题。 - 保持更新:跟踪最新的 GCP 服务、PySpark 功能和数据工程最佳实践。 所需技能 - GCP 专业知识:对 GCP 服务如 BigQuery、Cloud Storage、Dataflow 和 Dataproc 有深入理解。 - PySpark 熟练度:在使用 PySpark 进行数据处理、转换和分析方面有丰富经验。 - Python 编程:扎实的 Python 编程技能,用于数据操作和脚本编写。 - 数据建模和 ETL:具备数据建模、ETL 过程和数据仓库概念的经验。 - SQL:熟练使用 SQL 查询和操作关系数据库中的数据。 - 大数据概念:理解大数据原理和分布式计算概念。 - 沟通与协作:能够有效沟通技术解决方案并与跨职能团队合作。 关于 NTT DATA NTT DATA 是一家价值 300 亿美元的全球领先商业和技术服务创新者。我们为 75% 的《财富》全球 100 强企业提供服务,并致力于帮助客户创新、优化和转型以实现长期成功。作为全球顶级雇主,我们在 50 多个国家拥有多元化的专家团队和由成熟公司和初创公司组成的强大合作伙伴生态系统。我们的服务包括业务和技术咨询、数据和人工智能、行业解决方案,以及应用程序、基础设施和连接性的开发、实施和管理。我们是全球领先的数字和 AI 基础设施提供商之一。NTT DATA 是 NTT 集团的一部分,NTT 集团每年在研发方面投资超过 36 亿美元,以帮助组织和社会自信且可持续地迈向数字未来。访问我们的网站 us.nttdata.com 我们尽可能在 NTT DATA 办公室或客户现场进行本地招聘。这确保我们能够提供及时和有效的支持,以满足每个客户的需求。虽然许多职位提供远程或混合工作选项,但这些安排可能会根据客户要求而改变。对于靠近 NTT DATA 办公室或客户现场的员工,可能需要根据业务需求参加会议或活动。NTT DATA 致力于保持灵活性,满足客户和员工不断变化的需求。NTT DATA 招聘人员绝不会要求支付费用或提供银行信息,并且只会使用 @nttdata.com 和 @talent.nttdataservices.com 的电子邮件地址。如果您被要求付款或披露银行信息,请提交联系我们表单,https://us.nttdata.com/en/contact-us。 NTT DATA 努力使 https://us.nttdata.com 对所有用户可访问。如果您想联系我们关于我们网站的可访问性或需要帮助完成申请过程,请通过 https://us.nttdata.com/en/contact-us 联系我们。此联系信息仅用于住宿请求,不能用于查询申请状态。NTT DATA 是一个机会均等的雇主。合格的申请人将不考虑种族、肤色、宗教、性别、性取向、性别认同、国籍、残疾或受保护的退伍军人身份而获得就业机会。有关我们的 EEO 政策声明,请点击此处。如果您想了解更多关于法律下的 EEO 权利的信息,请点击此处。有关薪酬透明度的信息,请点击此处。