AWS数据云顾问

纽约 7天前全职 网络
面议
Vertical Relevance正在寻找一名AWS数据顾问,以全职员工的身份加入我们的团队并远程工作。此人负责软件系统的端到端规划、构建和部署。他/她将能够推动编写结构良好、可测试的代码。 作为AWS数据顾问,您将作为团队的一部分为客户参与实施技术解决方案。此角色需要强大的团队合作、沟通、耐心和组织技能,以推动客户成功。 在Vertical Relevance,我们通过团队合作、自动化一切、不断学习并对客户体验的结果负责来实现卓越。您准备好加入我们的团队了吗? 职责 - 帮助客户规划其云采用之旅,并在其“云之旅”中为客户提供技术和战略指导。 - 咨询、规划、设计和实施云上的数据解决方案 - 设计AWS数据湖实施方案 - 设计和开发AWS数据质量和治理解决方案 - 成为赢得客户信任的深度技术资源 - 开发高质量的技术内容,如自动化工具、参考架构和白皮书,以帮助客户在云上构建 - 代表客户进行创新,并将您的想法转化为行动,产生可衡量的结果。 - 通过传达客户需求和反馈作为技术路线图的输入来支持解决方案开发。分享实际实施挑战,并通过增强和新产品推荐扩展能力。 - 协助撰写记录解决方案的技术简报 - 协助参考架构实施 - 通过思想领导支持内部和外部品牌发展: - 与市场营销/联盟合作撰写博客文章 - 与市场营销/联盟合作开发内部案例研究 资格 - 7年以上在AWS上构建数据/DevOps解决方案的专业经验 - 具有软件/技术面向客户的经验 - 您必须被合法授权在美国工作,而无需雇主担保,无论现在还是将来。 您将进行的示例活动 AWS数据架构和数据湖实施 协助客户构建数据收集、数据摄取和目录、数据存储和数据服务的框架,旨在优化信息的访问、策划、服务和分析效率,最多来自两个本地数据源。 - 协助客户实施Amazon虚拟私有云(Amazon VPC)、账户、Amazon简单存储服务(Amazon S3)桶策略,并捕获引入关键数据对数据湖的影响。 - 协助客户实现现代大数据lambda架构,提供一个环境以消费和利用来自批处理或流媒体源的数据。 - 协助客户定义详细的数据架构,包括原始数据、符合、结构化、丰富和聚合的数据。 - 为客户提供构建生产质量数据管道以进行摄取、转换和通过服务层消费到下游应用程序的一般最佳实践。 - 如果需要,通过应用程序接口(API)协助客户定义数据目录和数据服务层的详细信息。 - 为客户提供Amazon S3数据存储方法的一般最佳实践。 构建摄取和编排摄取 根据客户提供的摄取要求。协助客户基于一个数据源示例构建可重用的摄取框架,以快速引入新数据。 - 协助客户设计和构建使用监控、日志记录和警报服务的强大数据摄取解决方案,具有重试功能。 - 在适用的情况下,协助客户采用无服务器方法进行摄取。 - 协助客户构建框架以管理存储在Amazon S3对象中的数据更新。 编排 根据客户的摄取、编排和操作要求。为客户提供实施可扩展和可支持的编排框架以将数据引入代表性数据源的lambda架构的一般最佳实践。 - 建议客户利用AWS服务工具进行数据摄取,包括Amazon Kinesis、Amazon EMR、AWS Lambda或评估中定义的其他工具。 - 建议客户在AWS服务上进行编排选项,包括但不限于AWS Glue、AWS Step Functions、AWS Batch、Amazon EMR、AWS Data Pipeline、AWS Lambda或其他AWS本地编排工具。 - 必须具备:Apache Iceberg Sagemaker、SageMaker Lakehouse、SageMaker Catalog、Terraform - 应具备:Athena、Redshift、EMR、Glue、DataBricks和/或Snowflake、REDIS - 协助客户构建编排和状态管理流程,以支持数据处理而不丢失数据和异常,并识别错误处理。 - 建议客户如何通过编排工具向支持组织提供操作反馈,以防发生故障。 存储和目录Amazon S3数据存储构建 根据客户的使用要求。协助客户为代表性数据源构建数据湖存储方法。 - 协助客户构建数据存储,包括桶、前缀、加密、文件类型、分区。 - 协助客户构建自动化数据分区策略。 - 协助客户构建Amazon S3桶策略、日志记录和监控。 - 协助客户构建数据生命周期管理。 - 如有需要,协助客户构建跨区域复制。 相关技术工具 - 主要语言 - Python - 工具、服务和库 – Airflow、Kafka、Parquet、Spark、Metaflow、Git、Hadoop 相关AWS服务 - AWS基础设施脚本 – CloudFormation、AWS CLI、AWS CDK - AWS存储服务 – S3 - AWS计算服务 – Lambda、Batch - AWS数据库服务 – RDS、DynamoDB、Redshift、Aurora、Neptune - AWS网络服务 – VPC - AWS管理和治理服务 – CloudTrail、Service Catalog - AWS分析服务 – Athena、EMR、Kinesis、Glue、Lake Formation、Data Pipeline - AWS安全、身份、合规服务 – IAM - AWS应用集成服务 – Step Functions 公司简介 Vertical Relevance成立的目的是通过设计和交付有效的转型计划,在人员、流程和系统方面帮助企业领导者创造价值。我们的使命是帮助任何阶段的公司开发定制解决方案,以实现成功和增长。我们提供从战略和设计到实施和培训的全方位服务。我们的集体行业专业知识是我们最大的资产 - 我们的专业人员在金融服务领域平均拥有20年以上的经验,涵盖财富管理、资产管理、保险和银行业务。在我们的客户体验实践中,我们添加了互补的行业专业知识(技术和媒体),协同最相关和成功的客户趋势。我们完全专注于您的成功,首先严格评估您的业务和技术挑战,然后量身定制提供有意义的投资回报的解决方案。随着我们的行业专家迅速投入工作并专注于灵活、高质量的交付,我们可以在生产力和效率方面与客户一起看到快速、切实的改进。当对您的公司有意义时,我们在CRM、销售加速、预测分析、数字知识管理和云转型领域利用我们的产品合作伙伴关系。 Vertical Relevance是一个平等机会的雇主。所有合格的申请者将获得就业考虑,不论性别、性别认同、性取向、种族、肤色、宗教、国籍、残疾、受保护的退伍军人身份、年龄或任何其他受法律保护的特征。