高级工程师,数据平台

16个月前全职
TRM Labs

TRM Labs

location 旧金山
unsaved
在TRM,我们的使命是建立对数字资产的信任,因为加密货币的承诺太有价值,不能被不良分子阻碍。我们为执法机构、金融机构和加密货币公司提供区块链情报平台,以协助检测和预防加密货币欺诈和金融犯罪。我们的愿景是建立一个能够持续实现我们使命的公司,为数十年来使消费者能够在区块链上安全地进行交易。 数据平台团队与一群经验丰富的数据科学家、工程师和产品经理合作,为TRM的产品和服务构建高可用性和可扩展性的数据基础设施。作为数据平台团队的软件工程师,您将负责执行关键任务的系统和数据服务,分析以PB级规模的区块链交易活动,并最终努力为数十亿人建立一个更安全的金融系统。 您在这里将产生的影响: • 构建高可靠性的数据服务,与数十个区块链集成。 • 开发复杂的ETL流水线,实时转换和处理PB级结构化和非结构化数据。 • 设计和构建复杂的数据模型,以实现最佳存储和检索,支持对区块链数据的亚秒级查询延迟。 • 监督部署和监控大型数据库集群,始终专注于性能和高可用性。 • 跨部门合作,与数据科学家、后端工程师和产品经理合作,设计和实施增强TRM产品的新颖数据模型。 我们寻找的人才: • 计算机科学或相关领域的学士学位(或同等学历)。 • 具有成功从最初构思到成功投入生产的5年以上分布式系统架构实践经验。 • 出色的Python编程技能,熟练掌握SQL或SparkSQL。 • 在以下一个或多个领域的数据工程全谱的适应能力: • 深入了解ClickHouse、ElasticSearch、Postgres、Redis和Neo4j等数据存储。 • 精通Airflow、DBT、Luigi、Azkaban和Storm等数据管道和工作流编排工具。 • 熟练掌握Spark、Kafka和Flink等数据处理技术和流式工作流。 • 具备在公共云平台上部署和监控基础设施的能力,利用Docker、Terraform、Kubernetes和Datadog等工具。 • 具备加载、查询和转换大规模数据集的能力。 在TRM的职业页面了解更多信息:https://www.trmlabs.com/careers-list?gh_jid=4953326004