Dice是每个职业阶段的技术专家的首选职业目的地。我们的客户CodeMax Consulting, LLC正在寻找以下职位。立即通过Dice申请!
主要职责
• 在AWS上设计、构建和优化数据管道、架构和数据集。
• 实施和管理AWS服务,包括EC2、S3、EMR、RDS、Redshift、Lambda和Kinesis。
• 在复杂的多TB数据环境中开发和维护可扩展和可靠的数据解决方案。
• 与跨职能团队合作,将业务需求转化为技术规范。
• 确保数据质量和可访问性,并在数据管理中实施最佳实践。
• 利用Hadoop、Spark或Kafka等大数据技术进行实时数据处理。
• 创建高效且可扩展的数据模型和结构。
• 使用AWS工具和Python或Scala等脚本语言自动化数据处理过程。
• 为数据分析平台提供支持和维护。
• 保持对最新的AWS功能和数据工程实践的了解。
资格要求:
• 计算机科学、工程学或相关领域的学士/硕士学位。
• 4-5年数据工程经验,最好有AWS技术方面的经验。
• 对SQL有深入的理解,并有关系数据库的经验。
• 熟练掌握Python、Scala或Java。
• 有Hadoop、Spark或Kafka等大数据技术经验。
• 了解数据建模、ETL流程和数据仓库。
• 有AWS认证(如AWS认证数据分析-专业)者优先考虑。
• 出色的问题解决能力和注重细节。
• 良好的沟通和协作能力。
AWS数据工程师