职位概述:
我们正在寻找一位熟练的大数据管理员来管理和维护我们组织的大数据基础设施。您将负责部署和配置Hadoop、Spark和相关技术,监控系统性能,实施安全措施,并解决技术问题。您的专业知识将确保高效的数据处理、存储和检索,同时保障数据完整性和可访问性。
职责:
• 部署、配置和维护组织的大数据基础设施(Hadoop、Spark等)。
• 监控系统性能,优化数据处理、存储和检索。
• 实施安全措施,保护数据并确保符合监管要求。
• 故障排除和解决技术问题,以最小化停机时间并保持数据可用性。
• 与跨职能团队合作,了解数据需求并提供技术支持。
• 有效与利益相关者沟通,提供系统状态和潜在风险的更新。
资格要求:
• 计算机科学或相关领域的学士学位。
• 在管理大规模环境下担任大数据管理员的经验。
• 对Hadoop、Spark、Hive和相关工具有深入的了解。
• 对数据安全原则和实施有较强的理解。
• 熟练掌握用于自动化和监控的脚本语言。
• 具有大数据系统性能调优和故障排除经验。
• 熟悉基于云的大数据平台者优先考虑。
• 出色的问题解决和沟通能力。