职位名称:具有Abinitio经验的GCP数据工程师
地点:新泽西州泽西城(现场)
职位类型:合同
职责
· 需要具备AbInitio背景的GCP领导者
· 这是一个从AbInitio迁移到GCP的项目,所以他们需要具备这方面的背景。
· 在使用GCP组件(例如BigQuery、Composer、Dataflow、Dataproc、DLP、BigTable、Pub/Sub、Cloud Function等)进行架构、开发、测试和实施大数据项目方面具有3年以上的总体经验。
· 必备技能- BigQuery、Composer、Python/Java、GCP基础知识、Teradata/Hadoop
· 次要技能- Abinitio、Dataproc、Kubernetes、DLP、Pub/Sub、Dataflow、Shell脚本、SQL、安全(平台和数据)概念。
· 数据建模专业知识
· 对数据湖和企业数据仓库原理有详细了解
· 从本地迁移到GCP云的ETL迁移专业知识
· 熟悉Hadoop生态系统、HBase、Hive、Spark或新兴的数据网格模式