职位描述:
我们邀请您加入我们最大的银行客户的全球信息安全组织中的数据战略与工程团队,担任大数据平台开发人员/工程师。我们是一个紧密团结、互相支持的社区,热衷于为客户提供最佳体验,同时对其独特需求保持敏感。
在这个职位上,您将帮助构建新的数据管道,识别现有的数据缺口,并提供自动化解决方案,以提供先进的分析能力和丰富的数据给支持运营团队的应用程序。您还将负责从记录系统获取数据,并建立实时数据源,以自动方式进行分析。
例如,负责处理第三方风险评估的网络安全保证组使用这些分析仪表板进行评估,负责监控和恶意软件问题的网络安全防御组也使用这些分析。这些组织来到这个团队,并对他们需要的内容/需要帮助的分析类型提出要求,这个团队将根据这些要求在Hadoop中创建,并将其转移到UI以供分析用途。
他们正在寻找具有使用Kafka、Connect、HBASE、ApacheSpot等经验的候选人,以增加集群的功能。他们正在构建和确保集群的功能非常强大。首选具有强大的hbase和SPARK经验的人。他们正在寻找具有将hbase经验与应用程序和API联系起来以提取数据的人。他们将要处理的另一个项目是数据摄取。他们将使用Flume、Spark和Hive。
顶级技能详细信息:
Hadoop、HBASE、Hive、Impala、SPARK、Kafkaconnect、Apachespot、erpss、Cloud Apps、Cloud DE
额外的技能和资格:
- 强大的SQL技能-使用MySQL、HIVE、Impala、SPARK SQL中的一个或多个
- 使用Spark/MapReduce或SQL作业进行性能调优经验
- 具有近实时和批处理数据管道的端到端设计和构建过程的经验
- 使用SVN、Git、Bit Bucket等源代码和版本控制系统的经验
- 使用Jenkins和Jar管理的经验
- 在Hadoop/大数据相关领域工作的经验
- 在Hive、Spark、HBase、Sqoop、Impala、Kafka、Flume、Oozie、MapReduce等工具上的工作经验
- 具有Java、Scala、Python或Shell脚本等编程经验
- 具有强大的SQL和数据建模经验
- 在敏捷开发过程中工作的经验,并对软件开发生命周期的各个阶段有深入理解
- 对Hadoop生态系统有深入了解,对Hadoop架构组件有强大的概念知识
- 自我激励,能够在最少的监督下工作,并能够与具有不同技能的团队合作
- 能够理解客户需求并提供正确的解决方案
- 强大的分析能力,帮助解决复杂问题
- 渴望解决问题并深入研究潜在问题
- 能够适应并继续学习新技术是重要的
经验水平:
专家级别
关于TEKsystems:
我们是转型的合作伙伴。我们帮助客户激活想法和解决方案,以利用新的机遇世界。我们是一个拥有8万人的强大团队,与超过6000个客户合作,其中包括80%的财富500强企业,在北美、欧洲和亚洲开展业务。作为全栈技术服务、人才服务和实际应用的行业领导者,我们与进步的领导者合作推动变革。这就是真正合作的力量。TEKsystems是Allegis Group公司的一部分。
该公司是一家平等机会雇主,将在不考虑种族、性别、年龄、肤色、宗教、国籍、退伍军人身份、残疾、性取向、性别认同、遗传信息或任何受法律保护特征的情况下考虑所有申请。