大 数据 顾问 ( 芝 加 哥 )

芝加哥 2天前全职 网络
面议
职位 名称: 大 数据 工程师 工作 地点: 芝 加 哥, IL 60601 ( 现场 ) 雇佣 类型: W2 合同 详细 职位 描述: 我们 正在 寻找 一位 技术 精湛 和 经验 丰富 的 大 数据 平台 工程师, 具备 7 年 以上 的 经验, 在 大 数据 生态 系统 的 开发 和 管理 方面 有 着 扎实 的 背景。 理想 的 候选人 将 负责 设计、 建设、 维护 和 优化 可 扩展 的 数据 平台, 以 支持 高级 分析、 机器 学习 和 实时 数据 处理。 主要 职责: 平台 工程 与 管理: 安装、 配置 和 管理 大 数据 工具, 如 Hadoop、 Spark、 Kafka、 Hive、 HBase 等。 监控 集群 性能, 排查 问题, 确保 高 可用性 和 可靠性。 实施 安全 政策、 访问 控制 和 数据 治理 实践。 管理 大 数据 基础 设施 的 升级、 补丁 和 容量 规划。 开发 与 数据 工程: 使用 Apache Spark、 Flink、 NiFi 或 Airflow 等 工具 设计 和 开发 可 扩展 的 数据 管道。 构建 ETL/ELT 工作流, 从 各种 来源 获取、 转换 和 加载 数据。 优化 数据 存储 和 检索, 以 提高 性能 和 成本 效率。 与 数据 科学家 和 分析师 合作, 支持 模型 部署 和 数据 探索。