工程师 II 大数据 ETL 工程师 Apptio

纽约 2天前全职 网络
面议
关于我们:我们是一家提供创新、变革性IT服务和解决方案的公司。我们热衷于帮助客户实现目标并超越他们的期望。我们努力为客户和员工提供最佳的体验。我们致力于持续改进和创新,并始终寻找改进服务和解决方案的方法。我们相信与客户和员工协作工作以实现成功。 DS Technologies Inc正在为我们的一位重要客户寻找工程师II - 大数据/ETL工程师(Apptio)职位。 职位名称:工程师II - 大数据/ETL工程师(Apptio) 工作地点:纽约,NY(仅限纽约大都会区)(混合办公) 职位类型:仅限合同W2 职位概要:我们正在寻找一位高技能的大数据/ETL工程师,他能够作为独立开发人员工作并从头编写生产就绪的代码。理想的候选人需具备Python、SQL、ETL开发和数据仓库的强大专业知识,并在企业环境中构建可扩展数据管道方面有实际经验。 主要职责: 从头设计、开发和维护使用Python的ETL管道 编写高效、可重用和可扩展的代码,遵循面向对象编程原则 开发和优化复杂的SQL查询、存储过程和数据库对象 执行数据建模,包括模式和实体关系 构建和管理Airflow DAGs 从大数据平台摄取、清洗、管理和报告数据 使用多种SQL方言(SQL Server、Oracle、DB2、PostgreSQL) 在独立操作的同时与利益相关者协作 所需技能和资格: 强大的Python(从头开发ETL管道) 精通SQL和RDBMS概念 MS SQL Server(SSIS, SSRS) Oracle PL/SQL 对面向对象编程原则的扎实理解 Apptio经验 Airflow(DAG开发) 数据仓库和大数据经验 Node.js、JSON和NoSQL数据库 能够作为独立贡献者工作 必须是纽约大都会区的本地居民 加分项: PySpark / Apache Spark Databricks Delta Lakehouse或BigQuery 接触过基于云的业务工具和平台 提供灵活的居家办公选项。