大数据负责人

蒙特利尔 2天前全职 网络
面议
**职位名称:大数据负责人** • *工作地点:蒙特利尔(现场)** 我们在寻找谁? 寻找一位具有技术敏锐度的专业人士,拥有至少10年的行业经验。至少8年的大数据技术负责人工作经验。应具备系统性思维和优秀的时间管理能力。作为负责人,还应利用您的沟通技巧与各个团队有效合作。 技术技能: 大数据负责人(Spark 结构化流 + Spark SQL + Kafka) • *资格要求**: - 8年以上经验(内部/外部) - Spark与Scala,Kafka,SQL,Azure/AWS Databricks - 具有Spark与Scala、Spark流、使用Kafka的结构化流、Spark性能优化、SQL、Azure Databricks的经验。 - 在Databricks、Azure Data Factory、Azure Datalake服务方面的经验是额外的优势, - 从Kafka(或任何消息代理)使用Spark结构化流构建实时数据流管道的经验 - 在Spark中使用函数式编程语言如Scala进行开发和单元测试的实践经验是必须的。 - 在设计和领导大数据项目、为高性能和存储设计Hive和HBase数据模型方面的经验。 - 执行过至少一个端到端的大数据项目(流式实时数据)并领导开发团队。 - 必须具备敏捷方法论的经验。 - 了解大数据环境中的标准方法、概念、最佳实践和流程 - 自我驱动,能够独立实施解决方案。 - 良好的问题解决技巧和沟通能力 - 担任大数据负责人的实操经验(Spark结构化流) - 积极参与Scrum会议、故事点、估算并负责开发部分。 - 为团队提供技术支持,并参与高效的设计 - 分析用户故事,理解需求并根据设计开发代码 - 开发测试用例,进行单元测试和集成测试 - 支持QA测试、用户验收测试和生产部署 - 从各种数据源开发批处理和实时数据加载作业到Hadoop,并设计ETL作业以从Hadoop读取数据并传递给各种消费者/目标。 - 对大量数据存储进行分析并发现洞察。 - 分析长时间运行的查询和作业,通过使用查询优化技术和Spark代码优化来进行性能调优。 流程技能: - 熟练使用项目管理软件,如MS Project 行为技能: - 优秀的口头和书面沟通能力 - 优秀的组织和时间管理能力 资格: - 计算机科学学士(BE) 您能获得什么? - 在Mphasis,我们承诺为您提供建立技术卓越的完美机会,理解业务绩效和细微差别,跟上技术世界的最新动态,并享受令人满意的工作与生活平衡。 - 在当前机会中,您将与一个始终为其他交付设定基准的团队合作,确保高客户满意度、按时完成项目,并成为组织中最好的团队之一。 - 您将获得开放和透明的文化,以及实验和创新的自由 关于该实践/项目: - 企业/集成架构师在项目中将发挥关键作用,为框定业务需求提供架构支持。 我们是谁? Mphasis是一家领先的IT解决方案提供商,通过技术知识、领域和流程专业知识,全球提供应用程序、业务流程外包(BPO)和基础设施服务。多年来,我们在IT解决方案领域留下了不可磨灭的印象,拥有令人印象深刻的客户群和广泛的全球存在。我们所获得的荣誉可以归因于我们在各个垂直领域提供质量解决方案的坚定关注,以满足我们尊贵客户的挑战性需求。我们的综合解决方案旨在为客户创造价值,帮助他们以最小的麻烦和资本支出改善业务流程。 • *福利**: - 牙科护理 - 带薪休假 - 视力护理 工作时间: - 8小时轮班 工作地点:现场