商业数据工程师 网络运营

渥太华 10天前全职 网络
40.5万 - 76.0万 / 年
我们正在寻找一位积极进取的商业数据工程师,拥有 2 至 5 年的湖屋环境经验。这个混合角色结合了数据工程师的技术严谨性和数据分析师的商业洞察力,构建可靠的数据管道,同时与利益相关者合作,提供有影响力的分析和报告。 理想的候选人具有 Databricks、PowerBI、高级 SQL、Fivetran、本地和云系统(包括 Workday 和 Salesforce)数据集成的实际经验,并对 Python 和 Databricks 笔记本有扎实的理解。 主要职责 • 设计、开发和维护数据管道和工作流,以便获取、转换和交付用于分析和报告的干净、可靠的商业数据。 • 与业务团队合作,收集需求,执行数据验证,并支持用户验收测试/演示。 • 从包括 Workday、Salesforce、本地和 SaaS 应用程序在内的多种系统中提取、集成和转换数据,使用 API、JDBC/ODBC 和原生/直接连接。 • 编写和优化高级 SQL 用于数据建模、转换和成本高效的查询执行。 • 构建和优化 Power BI 数据集、模型和仪表板,以获取商业洞察和绩效跟踪。 • 使用 Python 和/或 Scala 在 Databricks 笔记本中进行数据准备、自动化和分析。 • 监控和优化计算资源和作业性能,以控制成本和提高效率。 • 记录数据管道、转换逻辑和架构,以确保透明性和可维护性。 教育和经验 • 在数据工程或商业数据分析领域有 2 至 5 年的工作经验。 • 对 Databricks(包括 Delta Lake、Spark SQL 和笔记本)有强大的实际经验。 • 对 Power BI 有扎实的工作知识(数据建模、DAX、仪表板设计、发布)。 • 具备用于大规模数据转换和优化的高级 SQL 技能。 • 精通 Python 和/或 Scala 用于 Databricks 中的数据处理。 • 具有使用 Fivetran 或类似 ETL/ELT 工具进行自动化数据摄取的经验。 • 有将数据从商业应用程序(如 Workday 和 Salesforce)集成的经验(通过 API、报告或连接器)。 • 能够管理和转换来自本地和云系统的数据。 • 具备良好的沟通能力,具有收集业务需求和数据讲述的经验。 • 计算机科学、数据工程、信息系统、统计学或相关领域的学士学位。 • 相关证书(如 Databricks 认证数据工程师、Microsoft Power BI 数据分析师、Workday 报告专家)者优先。 优先考虑/附加条件 • 对 Apache Spark(架构、RDD、DataFrames、优化)的基本知识。 • 在 Databricks 或类似平台中进行查询和计算成本优化的经验。 • 熟悉数据治理、安全性和元数据管理。 • 使用 Git 或 DevOps 工具进行数据管道的 CI/CD 经验。 • GenAI 代理和/或机器学习经验。 决策和监督 • 在既定程序内进行分析和解释,做出决策和建议。 工作条件 • 一般舒适的工作条件,包括搬运和现场安装。 • 使用视频显示终端时需要适度的视觉集中。 成功的候选人必须能够在加拿大工作并获得加拿大受控商品计划(CGP)的许可。 承诺:全职雇佣 - (带福利的全职员工)