Azure Databricks 开发人员
Apex Systems 是一家全球性的 IT 服务提供商,我们的咨询业务现正招聘一名具有 Azure Data Factory 和 Data Bricks 经验的 Databricks 开发人员,以推动为一家五大银行设计、开发和维护解决方案。
• 客户:五大银行
• 地点:多伦多,每周工作时间1-2天混合办公
• 合同期限:6个月,有很大可能延长或转正
• 工作时间:每周37.5小时,周一至周五
所需技能:
• 8年以上 Azure ADF 和 Azure Datafactory 经验。
• 主要需要 ADF 和 Data bricks ADLS。
• 在 Azure 数据工厂、Azure databricks、Python、Pyspark 等方面具有8年以上设计和开发自定义 ETL 流程和自动化脚本的实际经验。
• 熟悉 AZURE 云平台服务栈 - Azure 数据工厂、Azure SQL 数据库、AZURE 数据仓库、Azure databricks、Azure Blob 存储、HD Insight 等。
• Azure DevOps 构建和发布流水线
• 数据仓库、数据湖商业智能概念
• 使用 SQL Server(T-SQL)、SQL 和存储过程进行开发
• 在 Azure 数据工厂上进行端到端流水线开发
• 故障排除
角色/职责:
• 与开发团队和高级设计师合作,收集需求
• 与业务方进行影响评估,根据需求确定高层设计和工作量。
• 与团队合作,确保遵循标准和模式。
• 发现新的架构倡议的机会,对平台和解决方案的可扩展性和稳健性提出建议。
• 通过提供技术支持、故障排除和替代开发解决方案来支持 Azure 开发人员。
• 在指导其他员工方面发挥关键作用,并在向其他团队成员和部门进行知识转移方面具有良好的记录。
• 发现对当前业务流程的必要更改。
• 沟通风险并确保对这些风险的理解。
• 负责领导原型设计并确定最终设计,以确保客户对产品满意。