这是一份为期18个月的合同。
作为一名数据工程师,您将设计、构建和维护可扩展的数据管道和分析解决方案,以支持业务决策。您将与业务和技术利益相关者密切合作,将数据需求转化为稳健的数据模型、ETL管道和BI仪表板,同时确保数据质量、安全性和治理。
职责
• 设计和维护大规模数据集的ETL管道和数据模型
• 分析复杂数据,并通过BI仪表板和报告提供见解
• 与利益相关者合作,将业务需求转化为技术解决方案
• 构建和维护数据平台的CI/CD管道
• 确保数据质量、安全性和合规性
• 解决数据问题并优化管道性能
要求
• 5年以上数据工程和SQL经验。
• 对大数据技术有深入了解或实际操作经验(例如Hadoop、Spark、Hive)。
• 具有使用Python编程的经验。
• 对数据仓库、ETL设计模式和数据建模有扎实的理解
• 具有云数据平台经验(例如GCP、BigQuery、AWS、Azure)
• 熟悉BI工具(Tableau、Power BI、Looker)