AWS 数据工程师 -- DWIDC5535373

多伦多 9天前合同 网络
面议
8 年以上的 数据工程师 经验,熟悉 AWS、Glue、Lambda、SQL、Python、Redshift。 必须具备设计和实施 数据管道 的工作知识,能够在任何云服务提供商上进行操作(优先考虑 AWS)。能够处理来自各种来源的大量数据。进行 数据清洗、数据验证等工作。 2. 熟练的 ETL 开发人员,擅长 Python、SQL。熟悉 AWS 服务,如 Glue、Glue 爬虫、Lambda、Redshift、Athena、S3、EC2、IAM、监控和日志机制 - AWS CloudWatch,设置警报。 3. 具备云上的 部署 知识。集成 CI/CD 管道以构建工件并将更改部署到更高的环境。 4. 调度框架:Airflow、AWS Step Functions。 5. 优秀的沟通能力,能够与其他团队协作工作。