职位描述
计算机科学、工程或相关领域的学士学位。
具有数据工程师或类似职位的工作经验,能够处理大规模数据处理和ETL管道。
在Python、Java或Scala等编程语言方面具备强大的编程技能,并具有使用Apache Spark等数据处理框架进行数据操作和处理的经验。
具备SQL和数据库技术(例如,关系数据库、SQL查询、数据建模)的经验。
熟练使用大数据技术,如Hadoop、Hive,并具有分布式系统和云计算平台(例如,AWS、Azure、GCP)的知识。
熟悉数据集成和工作流管理工具,如Apache Airflow。
了解数据仓库概念并具有数据仓库解决方案经验者优先。
具备强大的分析和解决问题的能力,能够分析复杂的数据相关问题并提出有效的解决方案。