数据工程师

15个月前全职
CareCone Group

CareCone Group

location 悉尼
unsaved
职位名称:数据工程师 地点:墨尔本 职位描述: 必备条件是具有GDW(全球数据仓库)经验。其他应用如企业数据仓库(EDW)、全球数据仓库(GDW)也是必要的。 • 在数据工程、BI/软件开发领域拥有扎实的经验、知识和技能,如ELT/ETL、数据提取和操作等。 • 具备数据建模、分析和分析能力的实践经验。 • 在多样化数据领域工作的经验。 • 持续改进和性能优化实践,确保高性能、可用性和数据完整性。 • 具备咨询和指导经验。 • 在敏捷环境中工作的经验。 • 应用DevOps实践、软件生命周期管理(SDLC)、持续集成/持续部署(CI/CD)原则,构建自动化流程和部署的经验。 • 对数据工程实践和大数据技术有深入理解。 • 熟练使用SQL及其大数据变体(Hive-QL、Snowflake ANSI、Redshift SQL)。 • 熟练使用Python和Spark及其API之一(PySpark、Spark SQL、Scala),以及Bash/Shell脚本。 • 具备源代码控制经验 - GitHub、VSTS等。 • 熟悉大数据技术Hadoop堆栈(如HDFS、Hive、Impala、Spark等)以及云端大数据仓库RedShift、Snowflake、Databricks等。 • 具备UNIX命令行工具的使用经验。 • 接触过AWS技术,包括EMR、Glue、Athena、Data Pipeline、Lambda等。 有兴趣的候选人可以将更新后的简历发送至Dhivya.Natarajan@carecone.com.au,或者联系我,电话:61281982279。