职位描述
8年以上AWS、Glue、Lambda、SQL、Python、Redshift数据工程师经验。
- 必须具备在任何云服务提供商（首选AWS）上设计和实施数据管道的工作知识。必须能够处理来自各种来源的大量数据。执行数据清洗、数据验证等。
- 熟练掌握ETL开发，擅长Python、SQL。熟悉AWS服务，如Glue、Glue Crawlers、Lambda、Redshift、Athena、S3、EC2、IAM、监控和日志机制-AWS CloudWatch、设置警报。
- 具备云端部署知识。集成CI/CD管道以构建工件并将更改部署到更高环境。
- 调度框架：Airflow、AWS Step Functions。
- 出色的沟通能力，能够与其他团队协作工作。
