**职位描述和要求**
• *职责**
(a) 大数据摄取
- 提取(从当前位置获取数据)。
- 转换(清洗和规范化数据)。
- 加载(将数据放入可分析的数据库中)。
(b) 大数据聚合。
(c) 应用程序部署和测试。
(d) 安全漏洞修复。
• *大数据摄取**
- 转换:需要分析来自不同平台的不同数据结构,并将其摄取到适当的结构中,以便实现数据聚合。
- 加载:需要开发计划任务,以便在不同时间运行不同平台的每日摄取。
- 需要进行性能调优以平衡系统资源和MongoDB数据库。
• *大数据聚合**
- 需要对MongoDB有高水平的熟练度和深入的知识。
- 必须具备MongoDB聚合管道知识,以执行各种数据源的大数据聚合。
- 复杂的BI业务逻辑需要转换为MongoDB聚合管道。
- 需要进行性能调优,以优化编译大数据每日聚合数据所需的时间。
- 必须确保编译的聚合数据的准确性。
• *应用程序部署和测试**
- 需要进行性能和功能测试。在发布前,任何发现的问题都需要修复或进行微调。
- 需要在我们的云解决方案提供商AWS上进行部署。
• *安全漏洞修复**
- 所有安全漏洞都需要在实际发布前修复。
• *要求**:
需求规格包括后端开发和大数据聚合管道开发。
所需编程技能
- Node JS
- Bootstrap
- AngularJS/ReactJS
- HTML5/CSS3
- MongoDB
• *薪资**:每月$7,000.00 - $8,000.00
工作时间:
- 周一至周五
工作地点:现场