职位描述
设计和实现Databricks与企业关键业务系统(Netsuite、Workday、SalesForce)之间稳健且可扩展的集成方案。将业务需求转化为技术规范和集成工作流程。结合使用低代码工具和自定义AWS解决方案(Lambda、Step Functions、S3、CloudWatch、VPC、IAM)来开发并维护自动化数据管道。通过运用Terraform的基础设施即代码原则,负责集成基础设施的配置和管理。指导工程师并在Github仓库中推广软件工程、源代码控制(Gitflow)和DevOps工作流程的最佳实践。与数据科学家、产品经理和利益相关者密切合作,确保集成方案带来变革性的商业价值。主动监控、排查问题,并确保分布式系统中集成解决方案的可靠性和可观测性。
主要职责
- 设计和实施Databricks与企业系统的集成方案
- 将业务需求转化为技术规范和工作流程
- 使用低代码工具和AWS服务开发自动化数据管道
- 运用Terraform管理集成基础设施
- 指导团队成员并推广最佳工程实践
- 跨部门协作确保集成方案创造商业价值
- 监控和维护集成系统的可靠性
职位要求
- 计算机科学、工程或相关领域的学士学位,或同等专业经验
- 至少6年以上软件工程实践经验
- 精通Terraform和现代DevOps实践,包括CI/CD和基础设施生命周期自动化
- 熟练掌握Python或Node.js
- 具有AWS服务使用经验:Lambda、Step Functions、S3、CloudWatch、VPC、IAM
- 具备Databricks、Snowflake或类似平台的数据仓库、建模或管道优化经验
- 熟悉现代源代码控制工作流程(Gitflow),能熟练使用Github
优先考虑条件
- 具有Databricks或Snowflake的实际操作经验,特别是在数据仓库、建模或管道优化方面
福利待遇
暂无相关信息


