数据工程师

15个月前远程全职
Psychology Today

Psychology Today

location 纽约
unsaved
关于我们: 我们是Psychology Today——全球每月访问量超过3000万的心理学网站。我们每天都会将成千上万的治疗师与客户匹配。想象一下Airbnb,但是用于心理治疗。(是的,我们仍然出版杂志) 如果你是一位有才华和经验丰富的数据工程师,希望将心理健康和治疗带给世界,那么我们希望能听到你的声音! 我们提供: • 工作与生活的平衡。 • 一个能激励你的产品和团队——这样你就可以与让你开心的人一起做有意义的工作。 • 一个健康、盈利和稳定的公司,团队成员在这里工作多年。 • 从家中的任何地方远程工作的自由。 • 一个支持性的平台和扁平化的结构,以进行创新工作,得到认可并产生影响。 • 有机会将数据解决方案应用于重大业务挑战和机遇。 数据工程师的日常工作包括: • 与其他数据团队工程师一起参与敏捷仪式。 • 与业务利益相关者、产品负责人和开发团队合作,确定应用程序的数据/分析应如何结构化。 • 创建和维护最佳数据流水线架构。 • 将大型且可能复杂的数据集转化为可用于仪表板/报告的结构化数据。 • 确定、设计和实施内部流程改进:自动化手动流程、优化数据传递、重新设计基础设施以提高可扩展性等。 • 编写并测试使用Python编写的AWS Glue作业,该作业将从源表中获取数据、处理数据,并将其发布到其他数据存储进行分析。 • 编写干净、结构良好、易于维护的Terraform代码以启动基础设施组件。 • 与团队成员合作,完善解决商业智能问题的数据产品需求,同时保持技术上的合理性。 要求: • 3年以上相关经验,具有详细的数据仓库技术架构、基础设施组件、ETL/ELT和报告/分析工具的知识。 • 使用AWS Glue设计、构建和维护ETL作业的经验。 • 具备Python编程经验,包括使用PySpark、Pandas和NumPy等数据科学库。 • 具备Redshift或类似的基于云的数据仓库系统的经验。 • 能够创建自动化大数据操作的脚本和程序。 • 使用行业最佳实践设计和实施数据解决方案的经验。 • 对数据结构和算法有深入的理解。 • 对SQL和NoSQL数据库技术和管理系统(如RDS和DynamoDB)有深入的理解和经验。 • 对如何以响应式报告和查询的方式构建大型数据集有良好的理解。 • 有使用CI/CD流程(如Gitlab CI/CD等)和源代码控制工具(如Git等)的经验。 • 具备使用Datadog、CloudWatch等监控工具的经验。 福利: • 高竞争力的薪水。 • 没有政治:只有一个鼓励创造性解决方案的合作、专注、充满活力的工作环境。 • 我们是一家远程工作的企业:自由和独立地在任何地方工作。 • 一个令人惊叹的、充满才华的友好团队。