高级大数据工程师

15个月前全职
Integral Ad Science

Integral Ad Science

location 芝加哥
unsaved
Integral Ad Science(IAS)是一家全球技术和数据公司,为广告行业构建验证、优化和分析解决方案,我们正在寻找一位高级数据工程师加入我们的团队。如果您对能够每秒处理数十万次交易,每天收集数十亿个事件,并在几毫秒内实时评估数千个数据点的技术感到兴奋,那么IAS就是适合您的地方! 您将会做什么: • 架构、设计、编码和维护每天聚合数十亿条交易的组件 • 使用Spark、Spark Streaming、Kafka、NoSql、EMR和其他AWS技术栈等大数据技术 • 在整个软件生命周期中提供领导力,包括实际开发、代码审查、测试、部署和流式ETL和RESTful API的文档 • 在一个令人敬畏的团队中提供领导力、合作和指导 如果您具备以下大部分条件,请申请: • 计算机工程、计算机科学、电气工程或相关领域的学士或硕士学位 • 近5年的面向对象语言(Java、Scala)的实际操作经验 • 5年以上的数据管道和数据密集型应用设计和构建经验 • 使用大数据框架(如Spark、Flink)、数据库(如NoSql、Delta Tables、Mysql / Postgres)进行复杂数据组装和转换的经验 • 对集合、多线程、JVM内存模型等有深入了解 • 在大数据环境中对算法、性能、可扩展性和可靠性有深入了解 • 对OLTP和OLAP系统、数据库基础知识有扎实的理解 • 扎实的SQL知识 • 具备全面的软件开发、敏捷和CI/CD经验 • 在AWS云环境中构建生产级系统的经验 以下因素将使您更具竞争力: • 有Spark Streaming或Flink的经验 • 熟悉Kafka等消息传递框架和/或NoSql数据库(Aerospike、Cassandra) • 使用Airflow等工具编排数据管道 关于Integral Ad Science Integral Ad Science(IAS)是一家领先的全球媒体测量和优化平台,为全球最大的广告商、发布商和媒体平台提供行业最具操作性的数据,以实现卓越的结果。IAS的软件提供全面且丰富的数据,确保广告在真实人群中在安全和适宜的环境中展示,同时提高广告主的广告支出回报和发布商的收益。我们的使命是成为数字媒体质量的全球标杆。欲了解更多信息,请访问integralads.com。 平等机会雇主: IAS是一家平等机会雇主,致力于多样性和包容性。我们将考虑所有合格的申请人,不论其种族、肤色、国籍、性别、性别认同或表达、性取向、宗教、残疾或年龄。我们强烈鼓励妇女、有色人种、LGBTQIA社群成员、残疾人士和退伍军人申请。 加利福尼亚州申请人预收集通知: 我们在与您的就业申请或与IAS的合作中从您那里收集个人信息(PI),包括以下类别的PI:标识符、个人记录、商业信息、专业或就业或合作信息、非公开教育记录以及从您的PI中推断出的信息。我们收集您的PI用于我们的目的,包括执行与您的潜在就业或合作相关的服务和操作。如需更多详细信息或有疑问,请通过compliance@integralads.com与我们联系。 要了解更多关于我们的信息,请访问http://integralads.com/和https://muse.cm/2t8eGlN 注意代理机构/第三方招聘人员:IAS不接受任何未经请求的简历或候选人简介。如果您有兴趣成为IAS的招聘合作伙伴,请发送一封电子邮件介绍您的公司到recruitingagencies@integralads.com。如果对合作有兴趣,我们会与您联系。