我们正在寻找一位高技能且经验丰富的大数据工程师加入我们的团队。理想的候选人应具有至少 4 年在大数据环境(例如 Cloudera 数据平台)中管理数据工程工作的经验。成功的候选人将负责设计、开发和维护数据摄取和处理工作。候选人还将整合数据集,以便为用户提供无缝的数据访问。
1. 职责
• 分析机构的数据需求并记录需求。
• 通过将数据收集迁移到更高效的渠道来优化数据收集/消费。
• 规划、设计和实施数据工程工作及报告解决方案,以满足分析需求。
• 制定系统测试的测试计划和脚本,支持用户验收测试。
• 根据用户要求构建报告和仪表板。
• 与机构的技术团队合作,确保新解决方案的顺利部署和采用。
• 确保 IT 解决方案的顺利运行和服务水平。
• 支持生产问题。
2. 我们寻找的候选人
• 对使用瀑布/敏捷方法完成项目有良好的理解。
• 必须具备强大的 SQL、数据建模和数据分析技能。
• 在使用 Python、Pyspark、Linux 和 ETL 工具(如 Informatica)的大数据工程工作中有实践经验。
• 在报告或可视化工具(如 SAP BO 和 Tableau)方面有实践经验是必须的。
• 在 DevOps 部署和数据虚拟化工具(如 Denodo)方面的实践经验将是一个优势。
• 有使用 Hive、Impala 和 Cloudera 数据平台实施系统的成功记录者优先。
• 对分析和数据仓库实施有良好的理解。
• 能够排除从系统资源到应用程序堆栈跟踪的复杂问题。
• 有在各种数据中心或混合云环境中实施高可用性、高性能、高安全性系统的成功记录将是额外的优势。
• 对自动化、标准化和最佳实践充满热情。
工作类型:全职
薪资:每月 $6,000.00 - $9,000.00