职责:1. 测量数据处理流程的速度和效率。包括评估数据摄取、转换和存储过程。2. 评估基础设施的可扩展性以处理不断增加的数据量。3. 监测系统对不断增长的需求的适应能力,同时保持性能不受影响。确保系统内存储和处理的数据的完整性和准确性。跟踪数据清洗、验证和错误处理的速度。4. 测量用于数据分析的算法和模型的有效性。包括评估预测模型或分析算法的效率和准确性。5. 监测系统的正常运行时间和可用性。跟踪停机事件并测量系统的可靠性,以确保数据处理不中断。6. 评估安全协议和行业规定的实施和遵守情况。监测数据保护标准的合规性并减轻安全风险。7. 评估数据查询和检索过程的效率。测量查询响应时间和数据可访问性,用于分析和报告。8. 跟踪资源利用情况(CPU、内存、存储)以优化基础设施成本。在保持性能的同时确保资源的高效使用。9. 测量数据工程工作对产生可行的商业洞察力的影响。评估数据处理对决策的有效支持程度。10. 评估对团队或组织内协作努力和知识共享的贡献。评估对提高团队能力的影响。
最低资格要求:1. 需要计算机科学、数据工程或相关领域的学士学位。2. 熟悉阿拉伯语和英语。3. 阿联酋国籍者优先考虑。4. 8年以上的工作经验。5. 高经验的专业人士,对大数据技术和最佳实践有深入了解。6. 熟悉设计和构建复杂数据解决方案,并对数据基础设施做出战略决策。7. 熟悉监测基础设施并及时了解领域内新兴技术和趋势。
职位特定技能:1. 熟练掌握Python、Java或Scala等编程语言。2. 有大数据技术和框架的经验。熟悉数据处理和查询语言。3. 理解统计分析、机器学习和数据挖掘技术。4. 最好具有ICT或电信知识背景。