大数据开发者

16个月前全职
Web Synergies

Web Synergies

location 新加坡
unsaved
技术技能 团队架构(大数据) • 在大数据生态系统中进行应用开发的经验(如Cloudera、ElasticSearch、Spark、Presto、Hive、Impala、Kibana、Logstash、Hbase、Kafka)超过5年 • 精通大型数据库,如Teradata、Oracle • 精通高级SQL(Teradata BTEQ、Fact Load、GCFR、Oracle PL-SQL) • 精通使用Scala、Java、Python、Shell脚本、Go构建云原生框架和playbooks • 在大数据生态系统中使用Spark、Hive、Impala、Apache Kudu、Ozone、Presto、Tez、Iceberg等进行大规模实施和性能优化的经验 • 了解Spring、Struts、Hibernate等框架 • 了解面向对象编程、多线程、容器化等知识 • 了解Informatica等数据集成工具 • 了解元数据工具、数据质量工具是一个加分项 • 精通与Devops工具集成应用 至少具备以下任何技术的2到3个技术认证: • SQL - Teradata、Oracle • 编程语言 - SQL、Java、Python、Scala、Javascript、node.js • 自动化/脚本 - CtrlM、Shell脚本、Groovy • Cloudera Hadoop分布式 - Hive、Impala、Spark、Kudo、Kafka、Flume 所有团队都需要额外的经验以获得优势: • CI/CD软件、测试工具 - Jenkins、SonarQube • 版本控制工具 - Aldon+LMe、CA Endeavor • 部署工具包 - Jenkins • 服务或事故管理(IcM)工具 - Remedy • 源代码存储库工具 - Bitbucket • 调度工具 - Control-M • 缺陷管理工具 - JIRA • 应用测试工具 - QuerySurge • 云认证 • FICO、Experian、SAS提供的用于信用和投资组合管理的平台