大数据开发者

15个月前合同
Agilus Work Solutions

Agilus Work Solutions

location 多伦多
unsaved
Agilus正在密西沙加,安大略省的金融服务行业中为大数据开发人员招聘一个混合工作环境。 Agilus工作解决方案为大数据开发人员提供了一个令人兴奋的机会,加入排名前5的银行之一,签订为期6个月的合同。该开发人员将支持全球银行与市场工程部门,重构Spark代码和Shell脚本,利用HQL和Python,同时支持两个核心数据应用程序从本地迁移到GCP的迁移活动。理想的候选人将具备使用Airflow/Composer的工作经验,编写高级HQL查询,并将代码迁移到Python的能力。 职责 • 在云环境(GCP、Hive)、Python和生态系统中设计和交付复杂的软件组件和应用程序 • 重构Spark代码,利用HQL和Python编写Shell脚本 • 从Hadoop集群迁移到Google Cloud Platform • 支持GCP迁移活动 • 分析复杂的业务需求,并将其转化为稳健的技术规范 • 将使用Java提供支持 要求 • 5年以上的Hadoop/Hive/BigQuery经验 • 5年以上的高级HQL查询编写经验 • 3年以上的Airflow/Composer经验 • 7年以上的开发经验,使用相关技术栈 • 5年以上的Python实际使用经验(将代码迁移到Python的能力较强) • 优先考虑:对GCP生态系统和Java/Scala的了解 对您有何好处 • 有机会与加拿大领先的金融机构之一合作 有兴趣吗? 请直接在线申请,发送电子邮件至otamburro@agilus.ca Agilus感谢所有对此机会表示兴趣的候选人。由于我们收到的简历数量很多,我们可能只能直接回复那些被选中进行面试的候选人。 我们鼓励您经常访问agilus.ca网站,或在agilus.ca/Account/Register订阅我们的电子邮件提醒,以获取每日更新的令人兴奋的就业机会。