AD系统部署/平台工程师

该职位来源于猎聘 岗位使命： 负责AD数据平台及其支撑基础设施的部署、配置、发布、升级、基础设施集成和运维就绪。 主要职责： 1.使用Docker、Kubernetes、Helm、部署脚本和配置管理实践，为平台应用开发可重复的部署和发布机制。 2.部署、配置和维护共享平台组件，如Kafka、PostgreSQL、MongoDB、Redis、Elasticsearch、Airflow、Prefect、Argo Workflows、Kubeflow、Ray、Spark和Flink。 3.将平台应用和分布式工作负载与HDFS、OSS、CPU资源、GPU资源、网络、DNS、TLS、认证和监控服务集成。 4.维护开发、集成、测试、预发布和生产环境，确保环境配置保持可重现性。 5.标准化平台组件的安装、配置、升级、回滚和发布流程。 6.支持Alpha、Beta和GA部署活动，并与开发团队协调生产环境上线。 7.为关键平台组件制定备份、恢复、灾难恢复和回滚流程。 8.诊断并解决基础设施、部署、兼容性、性能和资源利用问题。 9.开发和维护部署文档、操作流程、故障排查指南和运维手册。 10.改进部署自动化、发布可靠性、基础设施可观测性和运维效率。 11.与应用和基础设施工程师协作，为新平台功能定义资源需求和部署架构。 任职要求： 1.4年以上DevOps、平台工程、SRE或部署工程经验。 2.较强的Linux管理能力。 3.扎实的Docker和Kubernetes经验。 4.具有部署分布式应用的经验。 5.对网络、DNS、TLS、存储和安全基础有深入理解。 6.具有CI/CD系统和自动化部署经验。 7.具有生产环境基础设施故障排查经验。 优先条件 1.具有部署Spark、Flink、Kafka、Airflow、Prefect、Argo Workflows、Ray或Kubeflow经验。 2.具有部署PostgreSQL、MongoDB、Redis和Elasticsearch经验。 3.具有运维HDFS和对象存储支撑系统的经验。 4.具有运维GPU工作负载的经验。 5.具有支持数据平台或ML平台的经验。 6.具有合规管控或私有云环境经验。