数据工程师 - Azure Databricks

香港 6天前全职 网络
面议
作为数据工程师,您将在使用 Microsoft Azure 开发和增强我们的云数据平台中发挥关键作用。您的工作将涉及设计数据管道、处理大量数据,并使用 Azure Databricks 等工具将原始数据转化为有价值的见解。 职责: - 使用 Azure Databricks、Azure 数据工厂和其他云工具设计、开发和维护可扩展的数据管道。 - 自动化数据摄取、转换和存储过程,以确保数据流的可靠性和效率。 - 与数据分析师合作,为 Power BI 中的报告和仪表板准备、清洗和建模数据。 - 为新的云数据解决方案执行概念验证和测试。 - 记录数据架构、工作流程和操作程序,以便持续支持和故障排除。 - 与外部供应商合作进行平台增强和升级。 必备技能和经验: - 计算机科学、信息技术、数据科学或相关领域的学士学位。 - 至少 3 年数据平台工作经验。 - 拥有 Azure Databricks、SQL、Python、Spark 和 Azure 数据工厂的实际操作经验。 - 拥有 Azure 数据平台或 Databricks 认证者优先。 - 负责任、积极主动且注重细节。