数据工程师(IR35之外)已通过安全审查
• 使用AWS MSK构建流式数据摄取管道,使用API构建批量数据摄取管道
• 为预测和预测建模准备数据
• 具有使用各种数据格式(例如Parquet、Avro、JSon)的经验
• 使用Lambda、Step Functions和Glue构建ETL管道-构建入站/出站数据管道(使用API)
• 基于业务转换规则构建数据处理管道。
• 具有使用各种AWS数据库服务的经验(例如RDS、DynamoDB和Redshift)
• 具有各种数据建模技术的技术专长
• 具有Python和SQL的实际操作经验
• 需要当前有效的SC安全审查