岗位职责:
1、负责企业级大数据中心的容器集群、CDH集群的实施部署、系统运维及优化工作，定期出具巡检报告；
2、负责Hadoop平台及各服务组件的规划、部署、扩容、运维、变更、安全设计；
3、负责各类故障及事务的应急响应和性能调优，保证容器集群及大数据平台正常运行；
4、负责大数据各类组件、中间件的监控方案调研，构建数据库系统和集群相关的监控体系；
5、参与设计、开发稳定性保障方案及相关工具，包括但不限于容量规划、资源管理、成本优化、监控设计、弹性计算、故障分析、流量分配、性能调优等方面；
6、参与Devops工作流的设计与优化，监控体系的持续建设与完善；
7、积累运维实践，为大数据架构设计与组件选型提供参考，输出运维技术文档。
任职要求:
1、本科以上学历，具备3-5年大数据运维相关领域经验，熟悉CDH常用组件的故障诊断及调优；
2、掌握并熟练使用Linux操作系统，具备扎实的编程功底，精通至少一门编程语言（如：python、shell、java)，对操作系统原理及网络有一定的了解；
3、熟悉容器集群kubernetes；熟悉kubernetes的各种资源对象的处理及维护；熟悉kubernetes上应用的部署及监控；
4、熟悉大数据常见组件HDFS、Yarn、Flume、Sqoop、Hive、HBase、Spark、Flink、Kafka、Doris、ES等，了解其原理，能实现集群的基础参数配置；
5、具备PB规模数据处理以及百节点以上的大数据集群运维经验优先；
6、能够独立完成数据库服务的备份、恢复；熟悉全链路压测、降级、流控、熔断等稳定性保障手段；
7、熟悉基于常见运维设施Jenkins/ELK/Grafana/Influxdb/prometheus的运维开发模式，自动化运维工具（如Saltstack/Ansible/Puppet等）。