关于我们:我们是一家提供创新、变革性IT服务和解决方案的公司。我们热衷于帮助客户实现目标并超越他们的期望。我们努力为客户和员工提供最佳的体验。我们致力于持续改进和创新,并始终寻找改进服务和解决方案的方法。我们相信与客户和员工协作工作以实现成功。
DS Technologies Inc正在为我们的一位重要客户寻找工程师II - 大数据/ETL工程师(Apptio)职位。
职位名称:工程师II - 大数据/ETL工程师(Apptio) 工作地点:纽约,NY(仅限纽约大都会区)(混合办公) 职位类型:仅限合同W2
职位概要:我们正在寻找一位高技能的大数据/ETL工程师,他能够作为独立开发人员工作并从头编写生产就绪的代码。理想的候选人需具备Python、SQL、ETL开发和数据仓库的强大专业知识,并在企业环境中构建可扩展数据管道方面有实际经验。
主要职责:
从头设计、开发和维护使用Python的ETL管道
编写高效、可重用和可扩展的代码,遵循面向对象编程原则
开发和优化复杂的SQL查询、存储过程和数据库对象
执行数据建模,包括模式和实体关系
构建和管理Airflow DAGs
从大数据平台摄取、清洗、管理和报告数据
使用多种SQL方言(SQL Server、Oracle、DB2、PostgreSQL)
在独立操作的同时与利益相关者协作
所需技能和资格:
强大的Python(从头开发ETL管道)
精通SQL和RDBMS概念
MS SQL Server(SSIS, SSRS)
Oracle PL/SQL
对面向对象编程原则的扎实理解
Apptio经验
Airflow(DAG开发)
数据仓库和大数据经验
Node.js、JSON和NoSQL数据库
能够作为独立贡献者工作
必须是纽约大都会区的本地居民
加分项:
PySpark / Apache Spark
Databricks Delta Lakehouse或BigQuery
接触过基于云的业务工具和平台
提供灵活的居家办公选项。