大数据开发者

16个月前全职
Saxon Global

Saxon Global

location 纽约
unsaved
主要职责: • 与跨职能团队合作,了解业务需求,并将其转化为大数据解决方案的技术规格。 • 使用Java、Python和其他相关技术设计、开发和实施高效可扩展的大数据应用程序。 • 利用Apache Spark、HIVE和相关工具构建、优化和维护数据管道和工作流程。 • 具有Apache Spark DataFrames、Datasets、MapReduce、Hive查询语言、HDFS和PySpark的实际经验。 • 参与敏捷开发实践,包括冲刺计划、站立会议和回顾会议。 • 书写整洁、易维护且有良好文档的代码,遵循最佳编码实践。 • 对开发的解决方案进行彻底测试,包括单元测试、集成测试和性能测试。 • 在大数据应用程序中进行故障排除和调试,确保在生产环境中的顺利运行。 资格和技能: • 计算机科学、软件工程或相关领域的学士学位。 • 5年以上软件开发实践经验,重点是构建大数据应用程序。 • 在敏捷开发团队中工作并在快节奏环境中交付高质量软件的成功记录。 • 熟练掌握Java、Python,最好还会Scala编程语言。 • 广泛的Apache Spark经验,包括DataFrames、Datasets和PySpark。 • 扎实的HIVE查询语言、MapReduce和HDFS理解。 • 较强的问题解决能力,能够优化和调整大数据工作流程以提高性能。 • 出色的沟通能力,包括书面和口头沟通,能够向非技术利益相关者传达复杂的技术概念。 • 具备金融行业知识者优先考虑。 • 相关技术认证是一个优势。 最后更新日期:2023年12月29日