职位描述:
我们正在寻找一位实干型数据工程师,以构建和扩展支持研究和交易的数据基础。您将设计关系型、NoSQL和向量数据库中的模式、管道和存储层;在公共云上将ETL/ELT投入生产;并与研究人员紧密合作,建模复杂的金融数据集。
工作内容:
• 设计、实施并负责从数据摄取到特征交付的端到端ETL/ELT管道(批处理和流处理)。
• 建模金融数据集,并为分析和实时用例定义模式、分区、索引和SLA。
• 操作和优化OLTP/OLAP、搜索和向量存储;调优性能、成本和可靠性。
• 构建数据质量检查、数据沿袭和可观测性;自动化管道的测试和部署。
• 与量化/AI团队合作,将新的数据源和特征投入生产。
所需资格:
• 高级SQL;具有丰富的MySQL和PostgreSQL经验。
• 熟练使用非关系型和向量数据库:MongoDB、Elasticsearch、Chroma(或类似)。
• 在AWS / Azure / GCP上有数据层的生产经验(例如,S3/GCS/ADLS,Redshift/BigQuery/Synapse,Glue/Dataproc/Data Factory)。
• 已构建端到端的ETL/ELT管道(在生产中编排、监控和支持)。
• 熟悉金融数据模式和数据建模(tick/trade/quote,基本面数据,替代数据,供应商格式)。
在Vatic,我们对工作非常认真——但我们也相信在过程中保持平衡、成长和乐趣。以下是您可以期待的:
• 扁平结构,直接接触高管——与领导层紧密合作,从第一天起就产生影响。
• 全面的健康福利——为员工及其家属提供全面的健康保险。