大数据工程师
职位描述:
大数据工程师将是现场服务BI团队的重要成员。您将与Hadoop管理员、数据科学家和业务利益相关者密切合作。工作职责/责任:
• 维护和优化准确提取、转换和加载来自各种数据源的数据所需的数据基础设施
• 努力识别差距并改善平台的质量、可靠性、稳健性、可维护性和速度
• 为管理数据摄取、实时流处理、批处理、数据提取、转换和加载等多个系统的组件贡献设计、代码、配置和文档
• 通过调试、建议、实施变更和/或改进遵循业务准则和程序来管理服务台查询
关键资格/能力:
• 培训/教育
• 工程、计算机科学、运筹学科学、数学或等值经验和/或教育的学士学位
• 技能
• 自主、足智多谋、对模糊性有很强的容忍度
• 强大的分析、沟通和时间管理能力
• 强大的故障排除能力
• 出色的表达和文档技巧
• 技术知识
• 有使用分布式数据技术(例如Hadoop、MapReduce、Spark、Kafka)的经验
• 在Spark中构建流式和批处理作业的经验
• 有使用IBM DataStage等企业级ETL工具的经验
工作条件:
• 能够在地理分散的团队中高效工作
• 快节奏、持续学习的环境中使用新技术
• 提供良好的工作/生活平衡机会
#J-18808-Ljbffr