大数据工程师

15个月前远程全职
75K - 82K GBP Morgan McKinley

Morgan McKinley

location 伦敦
unsaved
地点:英国远程工作 永久 薪资:高达82,000英镑 公司简介 我们的客户是跨国综合企业领域的强大力量,拥有房地产开发、酒店业务和基础设施投资的多样能力。在远东地区占据着相当大的市场份额,并在全球范围内留下了深刻的印记,该公司以打造标志性地标建筑而闻名,并在欧洲、澳大利亚、加拿大和英国拓展其专业知识。 除了房地产领域,该集团的子公司还在英格兰、威尔士和苏格兰进行多样化的酒店业务。此外,其庞大的投资组合还包括基础设施和公用事业资产,包括澳大利亚的能源公用事业、欧洲的尖端能源管理服务以及加拿大和英国的各种企业。这个综合企业在全球商业领域中具有重要影响力和多样化的业务,是一股强大的力量。 职位描述 我们的客户正在寻找一名大数据工程师,加入组织,负责设计、建设、安装和维护大规模数据处理系统的协调工作。将架构工作与业务目标和行业最佳实践相结合,确保效率和最佳实践的无与伦比的融合。利用Hadoop、Spark和Kafka等大数据技术,打造具有弹性和可扩展性的数据处理系统,能够无缝处理海量数据。 • 与数据架构师、分析师和科学家等各类专家无缝合作,为项目特定需求优化数据交付架构。 • 为先进的数据建模和挖掘流程铺平道路,利用尖端技术从复杂而庞大的数据集中提取深入的业务洞察。 • 提出并实施策略,提高数据可靠性、效率和质量,以应对不断变化的业务需求,加强数据基础设施的弹性和可扩展性。 • 对数据安全和合规性负责,采取严格措施防止未经授权的访问,维护数据完整性。 • 严格记录过程、系统和配置,确保团队成员和利益相关者全面了解。 • 通过树立数据架构理解和遵守最佳实践的文化,推动团队前进。 要求 • 6年以上的大数据经验 • 熟练掌握Hadoop、Spark、Kafka等大数据工具和技术 • 扎实的编程技能,最好是Java或Scala。 • 有数据仓库解决方案和关系数据库(SQL)的经验 • 熟悉AWS等云平台 • 强大的问题解决能力和处理复杂数据操作的能力 • 数据建模和数据挖掘的知识 • 熟悉ETL工具和流程 • 对算法和数据结构有深入的理解。 • 能够在快节奏、动态的环境中工作。 • 强大的沟通能力,与其他团队合作。 • 对数据安全和隐私法规和最佳实践有了解。 • 持续学习的心态,跟上新兴的大数据技术的发展。