高级人工智能工程师;向量数据库

3个月前全职
144.2万 - 180.3万 / 年 Stealth AI Startup

Stealth AI Startup

location 旧金山
unsaved
职位:高级人工智能工程师(向量数据库) 您是否对生成式人工智能充满热情,并渴望在网络安全领域产生重大影响?加入我们位于旧金山湾区的前沿人工智能初创公司,我们正在组建一支世界级团队,以应对网络安全领域的一些最紧迫的挑战。 为什么加入我们? • 2500万美元的种子融资: 我们资金充足,在种子轮融资中筹集了2500万美元,提供了快速创新和扩展的资源。 • 与财富500强客户的早期成功: 我们已开始与财富500强公司合作,标志着早期成功并增强了对我们创新解决方案的信任。这突显了我们基于人工智能的网络安全产品的巨大潜力和可靠性。 • 经验丰富的领导团队: 我们的创始团队由第二次和第三次创业者组成,每位成员在网络安全行业拥有超过25年的经验。他们是成功网络安全公司的所有者,之前的企业估值超过30亿美元。他们的专业知识和远见推动了我们的雄心目标,使我们在基于人工智能的网络安全领域处于领先地位。 • 世界级的领导团队: 我们的人工智能、工程和产品负责人来自一些全球最具影响力的公司,确保提供顶级的指导、方向和愿景。 • 前沿的人工智能解决方案: 我们的团队利用最先进的人工智能技术,包括大型语言模型(LLMs)和生成式人工智能。 • 优厚的薪酬: 我们提供具有竞争力的薪资、股权选择和支持性的工作环境。随着我们共同成长,您的贡献将得到重视和奖励。 • 网络安全知识优先但不要求: 虽然有网络安全经验是一个加分项,但我们主要寻求在人工智能/机器学习和数据科学领域的顶尖人才,他们热衷于解决复杂问题。 关于角色 我们正在招聘一名高级数据工程师,负责开发、扩展和维护支持我们基于人工智能的网络安全平台的基本数据基础设施。高级数据工程师确保可靠和集成的数据流、强大的存储系统和全面的管道解决方案,使我们的应用科学家和机器学习工程师能够获得及时、高质量的数据。 您将做什么 • 创建和支持嵌入向量数据库(Milvus、Pinecone)的基础设施,这对检索、搜索操作和支持机器学习工作流至关重要。 • 设计、构建和维护可扩展的ETL/ELT管道,促进高效的数据摄取、转换和交付,满足基于人工智能的网络安全分析和建模所需的多样化数据集。 • 设置和管理可扩展的数据存储解决方案,包括数据湖、数据仓库和数据库(Snowflake、Redshift、Databricks、Azure Data Lake),以优化大规模分析和人工智能工作负载。 • 实施严格的数据转换、清理、标准化和嵌入过程(使用Unsloth、Databricks和Google GenAI进行文本、代码、图像嵌入),以确保数据集为分析和人工智能模型训练有效准备。 • 优化数据存储和处理工作流,以提高性能、可扩展性和效率,采用索引、分区和分布式计算策略。 • 集成多种内部和外部数据源,包括API、数据库、事件驱动流(Kafka)和第三方网络安全数据服务,确保一致的高质量数据交付。 • 与应用科学家、机器学习工程师和网络安全利益相关者紧密合作,以满足模型开发、分析和实验所需的复杂和不断变化的数据要求。 • 通过强大的数据治理实践确保数据质量、完整性和安全性,利用Apache Airflow等编排和监控工具进行异常检测和管道管理。 • 使用Apache Kafka、Spark Streaming和Flink开发和维护实时数据流管道,以实现响应和动态的网络安全威胁检测。 • 管理关系型和非关系型数据库,以维护性能、可扩展性和安全的数据检索,这对基于人工智能的决策过程至关重要。 我们的文化和团队 • 协作环境: …