在LightBox,我们努力不仅为各个领域提供自信的、数据驱动的决策,而且通过将人、信息和技术联系起来来丰富生活。作为一家拥有广泛客户群的公司,我们相信多样化的员工队伍对于成功至关重要。我们致力于在种族、性别、年龄、宗教、身份和经验等方面实现包容,这是我们运营和与客户以及所在社区联系的基础。
凭借我们的专业知识,我们正在为每个做出房地产决策的人提供最佳数据、工作流工具、技术和分析支持。现在是产生影响的最佳时机,我们邀请您加入我们的旅程。
LightBox是商业房地产和位置智能领域数据和工作流解决方案的领先提供商。我们的解决方案提供深度、速度和准确性,为超过5万名经纪人、1000家银行和贷款机构、1000家律师事务所和5000家环境咨询和工程公司提供洞察力。
职位概述
我们目前正在寻找一位创新的数据工程经理加入我们的LightBox数据集成团队。LightBox每天摄取数千个数据集,处理来自PB级别数据的数十亿个数据元素,并通过数百亿个API交易提供服务。您将在架构、开发和维护数据密集型应用程序和流水线方面发挥关键作用。您在关系型数据库、云基础设施和流水线编排方面的专业知识将对推动我们组织的成功数据驱动解决方案至关重要。
您将做什么和取得什么成就
向数据集成总监汇报工作,数据工程经理的职责包括但不限于:
• 建模和设计数据以解决业务问题。
• 分析和解决技术和应用问题。
• 创建数据流水线以准备和维护解决特定用例的数据。
• 在按时和按预算交付解决方案的同时遵循高质量的开发原则。
• 将现有工作流迁移到更新的基础设施上。
• 分析用例并提出满足业务目标的解决方案。
• 指导和领导一支专注且有才华的数据工程师和GIS分析师团队。
这是一份免税职位,根据每周40小时工作时间,薪资范围在10万到14万美元之间。
您是谁
教育背景
• 计算机科学或类似专业的学士学位或更高学历
• 必须具有良好的学业记录,对至少一种现代编程语言的软件工程理论有扎实的基础
• 熟悉计算机科学领域的标准、概念、实践和程序
经验
• 3至5年数据工程师经验
• 3年以上领导数据工程团队的经验
关键知识和技能
• 领导设计、开发和实施可扩展和可维护的数据密集型应用程序。
• 出色的沟通和领导能力,能够有效地领导和与多样化团队合作。
• 能够指导和培养强大的数据工程文化和团队。
• 运用扎实的关系型数据库技能,高效有效地使用Postgres和MSSQL数据库。
• 设计、构建和维护数据流水线,为特定用例和应用程序准备和整理数据。
• 使用Prefect、Luigi或Airflow等流水线编排技术来编排和自动化数据工作流程。
• 利用AWS云基础设施工具和服务,如S3、Athena和RDS,有效地管理和处理数据。
• 实施数据建模技术,以确保各种业务需求的最佳数据组织和存储。
• 与跨职能团队合作,分析业务问题并设计数据驱动的解决方案。
• 识别和解决与数据工程和处理相关的技术和应用问题。
• 在按时和预算交付解决方案的同时,确保遵循高质量的开发原则。
• 对用例进行全面分析,并提出满足业务目标的数据工程解决方案。
核心能力
• 计算机科学、工程或相关领域的学士学位。
• 作为数据工程师或类似职位的经验(3年以上)。
• 熟练掌握关系型数据库,使用MS-SQL或Postgres数据库。
• 对于Prefect、Luigi或Airflow等流水线编排技术有深入了解。
• 熟悉AWS云基础设施工具和服务,包括S3、Athena和RDS。
• 具备地理空间处理和处理基于位置的数据的经验是一个加分项。
• 熟练掌握数据建模和设计数据解决方案以解决业务问题。
• 能够有效地分析和解决与技术和应用相关的问题。
• 具备强大的项目管理技能,能够按时并在预算内交付解决方案。
其他可取的特点
• 位置 - 空间数据
• 分布式系统 - 存储、计算和访问模式
LightBox的多样性承诺:
LightBox完全致力于雇佣多元化的员工队伍,并创造一个包容性的工作环境,欢迎每个人独特的贡献、经验和价值观。我们相信团结在多样性中,提供一个鼓励创造力、主动性和专业成长的合作工作环境,并提供有竞争力的薪资和福利待遇。当我们支持、认可和接纳我们的差异时,我们更加强大。
此工作描述是对职位所需任务和期望的概括性描述,不意味着上述职责是员工唯一的责任。员工应按照主管的指示执行其他任务、职责和培训。职责和要求可能随时变化,恕不另行通知。
为了满足截止日期或满足客户需求,此职位可能需要在标准工作时间之外的额外工作时间,包括偶尔的节假日、晚上和/或周末工作时间。
LightBox及其所有控股公司均为平等机会/肯定行动雇主。LightBox及其所有控股公司的政策是禁止任何形式的歧视,并为员工和申请人提供平等的就业机会,无论种族、肤色、宗教、性别、国籍、年龄、残疾或退伍军人身份如何。
请勿打电话或代理机构招聘。