云数据工程师

15个月前合同
Cybernetic Search

Cybernetic Search

location 纽约
unsaved
云数据工程师 混合型,3天面对面 泽西城 12个月合同,可能延长 首选C2C 作为云数据工程师加入一个充满活力的团队,在AWS云中塑造数据架构的未来,发挥关键作用。 我代表一家全球知名的数据分析公司,为公共和私营部门组织提供有价值的风险评估和洞察力。 主要职责: 领导数据集成、数据湖和数据仓库项目的数据架构、模型和管道的规划、设计和开发。 确保新功能和主题领域与现有结构的无缝集成,提供一致的视图。 推动云技术(Redshift、Postgres、Snowflake)和数据湖和仓库架构的行业最佳实践的采用。 在大型企业级项目上提供技术领导力,展示您的专业知识。 您的影响: 成功完成多个复杂的数据工程项目,展示高级设计和架构技能。 有效地向关键利益相关者传达解决方案架构策略和价值主张。 开发和呈现概念验证(POCs),同时进行引人入胜的展示和讲解。 使用EMR、Databricks、Spark、Pyspark和Shell脚本设计、构建和部署数据管道。 分析、建模和管理数据,确保数据血统和安全框架健壮。 所需技能: 7年以上IT经验,专注于数据工程。 具有EMR、Databricks、Spark、Pyspark、Jupyter笔记本和Shell脚本的实际经验。 3年以上数据仓库和ETL项目经验。 在云数据仓库(Redshift、Postgres、Snowflake)的端到端实施专业知识。 精通Postgres SQL、RedShift、AWS Glue、Athena、Snowflake等。 在数据迁移到Redshift/Snowflake云数据仓库方面具有丰富经验。 在数据建模、使用Snowflake SQL进行ELT和实施复杂存储过程方面具有专业知识。 深入理解关系型和NoSQL数据存储,具有高级概念的专业知识。 具有AWS或Azure数据存储和管理技术的经验。 如果有兴趣,请通过kdodson@cyberneticsearch.com或646-437-7717与我联系。如果您认识任何适合的人,请告诉我,我们还有丰厚的推荐奖金。