职位描述
特定细节
职位名称
大数据工程师
职位级别
高级级别/经验专业人士
行业
信息技术
职位总数
01
工作类型
全职
公司
Alivia Analytics
关于公司
Alivia Analytics™致力于通过使用分析应用和数据科学来识别欺诈、浪费和滥用案例(FWA)来弯曲医疗保健成本曲线。通过将大量数据转化为可行的答案,Alivia Analytics™承担了繁重的工作-提供您解决医疗保健支付完整性挑战所需的准确性、信心和速度。通过将强大、易于使用、先进的技术交付给支付完整性业务领导者和专家,Alivia Analytics™赋予用户在几天内实现从恢复到预防和模拟的能力。Alivia自豪地宣称,Alivia在行业中观察到最低的误报率。
目前,全球每年在医疗保健上的支出约为8万亿美元,其中FWA占每个美元支出的10%。这相当于每年损失近8000亿美元。FWA是一个不断增长的问题-随着提供者找到逃避传统规则型欺诈检测形式的方法,我们的客户需要增强他们的火力,使用先进的分析系统。我们的开发团队和数据科学团队使用JavaScript构建应用程序,利用Python、R和SQL构建算法来识别这些不良行为者。
职位描述
我们有机会邀请一位积极进取的高级级别数据工程师加入我们快速发展的团队。您将有广泛的机会在技术和非技术方面取得成功和成长。我们的开发团队是我们企业结构的关键,直接将业务问题转化为我们全球客户的技术解决方案。这使得沟通技巧与开发技能同样重要。作为一家初创公司,我们希望您能与我们一起成长。您将能够从管理团队中学习,他们拥有60多年的技术和医疗专业知识以及成功退出的历史。我们的创始人在其职业生涯中开发了70多个系统,其中2个至今仍然是世界第一。
职位职责
我们正在寻找一位技术娴熟的云数据工程师,至少拥有5年的设计、开发、文档编制和集成应用程序的经验,使用Snowflake、Databricks、Hadoop和Hive等大数据平台。成功的候选人应具备将这些数据管道部署到托管在AWS或Azure的云基础设施中的专业知识。
职位描述/职责重点领域
• 从业务/用户群体中收集需求,根据客户要求分析、设计、开发和实施数据管道。
• 使用Databricks和Snowflake处理Azure/AWS数据存储中的数据
• 优化表设计和索引,以便用户可以轻松使用,并提高工作负载性能。
• 处理各种输入文件格式,包括分隔文本文件、日志文件、Parquet文件、JSON文件、XML文件、Excel文件等。
• 开发自动化的ETL程序,将数据从各种来源加载到我们的应用程序数据仓库中。
• 确保管道结构在不同客户之间标准化,每个客户可能有自己独特的输入数据格式。
• 配置监控系统以检测ETL管道的故障和性能下降。
• 与DevOps团队合作设计CI/CD管道进行ETL升级。
• 部署和利用云基础设施和服务,协助定义和自动化ETL管道。
• 理解数据建模(维度和关系)概念,如星型模型建模、模式建模、事实和维度表。
• 具有SQL和NoSQL数据库的深厚知识。
• 与业务合作伙伴、运营、高级管理层等日常运营支持。
• 处理大量数据,具备严格的性能要求
• 使用Python等编程语言在处理之前清理原始数据(例如,删除字段内的换行符/分隔符)
• 定义数据质量和验证检查,预先检测潜在问题。
• 确保ETL管道符合HIPAA合规要求,以最低权限运行,并安全管理用于身份验证的任何密码和密钥。
• 为技术和非技术人员审查ETL管道逻辑、结构和字段血统提供文档
• 熟练处理使用Databricks和Snowflake的Azure/AWS数据存储中的数据。
关键技术技能:
数据建模:了解数据建模概念,包括星型模型建模、模式建模、事实和维度表。
数据库知识:熟悉SQL和NoSQL数据库。
ETL开发:开发自动化的ETL程序,将数据从各种来源加载到数据仓库中。
确保ETL管道符合HIPAA合规要求,并安全管理身份验证凭据。
文件格式:处理各种输入文件格式,包括分隔文本文件、日志文件、Parquet文件、JSON文件、XML文件、Excel文件等。
性能优化:优化表设计和索引,以便用户可以轻松使用,并提高工作负载性能。
监控和CI/CD:配置监控系统以检测管道故障和性能下降。
与DevOps团队合作设计ETL升级的CI/CD管道。
数据质量和验证:定义数据质量和验证检查,预先检测数据中的潜在问题。
编程语言:熟练掌握Python(用于数据清理和预处理)、R、Java和Scala等编程语言。
版本控制:具备使用Git等版本控制系统管理代码和配置的经验。
解决问题:出色的解决问题的能力,包括在数据管道中进行故障排除和解决问题。
文档编制:为技术和非技术人员提供ETL管道逻辑、结构和字段血统的文档。
沟通与协作:具备与来自不同背景和专业水平的利益相关者合作的强大沟通和协作能力。
数据工程师要求
• 计算机科学或相关领域的学士学位
• 在设计、开发、文档编制和集成使用Snowflake和Databricks等大数据平台的应用程序方面拥有5年以上的经验
• 在Azure和AWS上的工作经验丰富,最好使用本地ETL工具(例如Azure Data Factory)
• 在清理、管道化和分析大型数据集方面具有丰富的经验。
• 熟练掌握R、Python、Java和Scala等编程语言
• 具有使用Git进行版本控制的经验
• 出色的解决问题的能力,能够独立工作和团队合作。
• 出色的沟通和协作能力,能够与来自不同背景和专业水平的利益相关者合作。
公司简介
Alivia Analytics正在帮助客户实现医疗保健支付完整性。通过将大量数据转化为可行的答案,Alivia Analytics承担了繁重的工作-提供客户解决医疗保健支付完整性挑战所需的准确性、信心和速度。通过Alivia Analytics Healthcare Payment Integrity Suite TM,我们帮助私人和公共医疗保健支付者在全球范围内实现支付完整性。仅在美国,每花费一美元中有多达10%归因于欺诈、浪费或滥用,这相当于每年损失高达3700亿美元。如果您的目标是在为社会做出巨大贡献的同时扩大您的责任和职业生涯,并构建世界一流的分析SaaS系统并解决一个巨大的问题,请加入我们。