数据工程师

15个月前全职
Prospa

Prospa

location 悉尼
unsaved
在Prospa,我们的存在是为了释放每个小企业的潜力。我们正在构建小企业的未来,并通过构建领先的平台来简化现金流,帮助客户进行付款、资金增长和减少行政工作。 职位描述 作为数据工程师,您将支持我们关于数据的愿景,即利用我们的信息、云原生平台和工具,成为我们业务决策的中心,同时为客户提供量身定制的服务。 您将负责的工作内容包括: • 改进和优化信息模型,以满足多个团队、系统和产品的商业智能和数据科学需求,并考虑到自助服务和可重用性。 • 扩展和优化Prospa的数据流水线、数据湖和数据仓库,以满足不断增长的数据来源、流式处理和批处理需求。 • 使用适当的软件和/或语言创建可重用工具,使团队能够快速交付价值。 • 在与高级团队成员合作的情况下,在Prospa的云环境中构建和实施适当的技术,开发端到端的数据解决方案,采用最佳实践。 • 对我们的数据平台的可用性、可靠性和数据质量负责。 • 通过对等编程、有效的代码审查和技术咨询与数据科学家、数据分析师和数据用户密切合作。 • 与工程、产品、业务利益相关者合作,并参与构建满足业务目标的技术解决方案。 • 积极与其他数据工程师合作,审查和批准拉取请求。 成功所需的条件包括: • 具有现代数据技术栈的实际操作经验。 • 熟练掌握SQL、Python、数据库、集成、主数据管理、质量保证、数据整理和数据治理技术。 • 熟悉Databricks/Notebooks、Airflow/Orchestration、Spark、Python、SQL、DBT及其相关生态系统和数据基础设施(数据库、CD/CD流水线、自动化测试)。 • 在构建、扩展和维护以下方面具有丰富经验: • 适用于生产环境的稳健且可扩展的数据流水线。 • 安全、高性能和良好建模的数据存储。 • 可靠高效的流式处理和批处理数据环境。 • 企业级数据仓库和数据湖。 • 具有构建、扩展和监控弹性分布式系统的经验。 • 参与创建高度技术的架构、概念、用例、设计和方法,以便各种技术素养的利益相关者能够理解。 • 对Azure云环境有深入了解,了解GCP和AWS的知识更佳。 • 具备人工智能和机器学习技术和原理的知识更佳。 • 具备敏捷框架的知识,包括Scrum和看板。 不要让自信的差距妨碍您提交申请。 我们提供的福利包括: 作为一个忙碌的成长者,我们的福利旨在帮助您在实现目标的过程中势不可挡。无论是远大的职业目标、投资于家庭、拯救地球还是简单地感到满足: • 成长:每个人都有机会参与学习日、学习津贴、领导力计划、绩效辅导和数字学习等活动。 • 健康:健身计划、季节性计划(包括按摩、皮肤检查、家庭野餐和咖啡车)、额外的"我日"和全面的EAP辅导等。 • 生活方式:灵活的工作选择、一流的办公设施和多样化的远程/差旅工作选择。您还可以购买额外的休假并享受长达18周的带薪产假。 • 影响力:加入一个已承诺在2024年6月前实现零碳排放的企业。您还可以参与志愿者活动、我们与Kiva的合作,并加入各种员工资源群体。 为什么选择Prospa? 我们是2023年澳大利亚最佳工作场所!我们欢迎多样性的人才和思维方式。您将发现一个总有新事物等待着您的环境。这是一个协作、包容和尊重的地方。一个我们自然而然地庆祝您的个性的地方。 我们正在构建小企业金融的未来。加入我们吧。