数据工程师 / 支持分析师

纽约 4天前合同 网络
459 - 494 / 时
请求 ID: 40301-1 账单费率: $65-70/小时 MSP 拥有者: Kelly Gosciminski 地点: 纽约, NY / 汉密尔顿镇, NJ - 现场 持续时间: 6 个月 GBaMS ReqID: 10373751 数据工程师 / 支持分析师 - Databricks 职位描述 我们正在寻找一位经验丰富的数据工程师 / 支持分析师,具备 Databricks、Azure 云服务和批处理作业支持的强大专业知识。理想候选人应具有金融市场或交易系统的背景,并拥有管理数据管道、FTP 文件传输和实时/批处理在生产环境中的实际经验。 主要职责: 管理和支持 Azure Databricks 和 Azure Data Factory 中的批处理流程和数据管道。 将 Bloomberg 市场数据流和文件集成到交易或分析平台中。 监控、排除故障并解决与交易应用程序和市场数据摄取相关的数据和系统问题。 使用 Python、Spark 和 SQL 开发、自动化和优化 ETL 管道。 管理内部系统与外部供应商之间的 FTP/SFTP 文件传输。 确保下游交易和报告系统的数据质量、完整性和及时性。 与运营、应用支持和基础设施团队合作,解决事件并增强数据工作流程。