大数据运营主管

15个月前合同
Alstra Technologies

Alstra Technologies

location 洛杉矶
unsaved
Alstra是一家“智能人力资源解决方案”提供商平台,允许各个领域的专家为全球的公司工作,具有灵活性和高于传统市场的收入! 招聘职位:大数据运营负责人 工作地点:美国科罗拉多州混合型工作 临时合同:6个月,可扩展 薪酬:美元 要求: • 在各种数据仓库、大数据和云数据平台上提供数据解决方案方面具有10年以上相关经验。 • 实施慢变化维度(类型1、类型2和类型3)的SCD技术。 • 有使用分布式数据技术(如Spark、Kafka等)构建高效、大规模大数据流水线的经验。 • 具备扎实的软件工程经验,熟练掌握以下至少一种编程语言:PYspark、Python、Scala或等效语言。·具备使用AWS S3和Snowflake云数据仓库的经验。 • 具备在Redshift/Snowflake中转换/集成数据的经验。 • 处理来自AWS S3等各种来源的JSON、ORC、PARQUET、CSV等大型和复杂数据集。 • 对Snowflake云架构、SnowSQL和SNOWPIPE进行了深入了解,用于连续数据摄入。 • 具备将数据批量加载和卸载到Snowflake表的实际经验。 • 具备使用统计聚合函数和分析函数编写复杂SQL脚本以支持Snowflake云数据仓库中的ETL的经验。·使用COPY/INSERT、PUT、GET命令将数据从内部、外部阶段加载到Snowflake表中。 • 具备使用查询分析器、缓存和虚拟数据仓库扩展对SnowFlake数据仓库进行性能调优的经验 • 在由数据转换、数据源、映射、转换和加载组成的ETL过程中有丰富的实际经验。 • 具备向snowflake加载的实际经验。 • 了解Redshift(有优势) • 了解AWS EC2、lambda • 具备强大的数据仓库经验 • 了解Python(有优势) • 对SQL查询有扎实的掌握能力 • Kafka非必需,有优势 如果您对此职位感兴趣,请在我们的平台上免费注册(始终如此)。 • 欢迎来到未来的工作。Alstratech.com