岗位职责:
- 负责公司大数据业务集群（Hadoop/Hbase/Hive/Yarn/Spark/Flink/Kafka等）的建设与运维保障工作，保障服务的稳定性和可用性；
- 深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技术及发展方向；
- 负责和参与自动化运维系统及平台的建设；
- 负责优化部门运维流程提升运维效率；
任职要求:
- 三年以上大数据运维经验，有混合云环境部署、维护大数据系统经验者优先；
- 精通Linux操作系统的配置，管理及优化，能够独立排查及解决操作系统层的各类问题；
- 熟悉Hadoop/Hbase/Hive/Yarn/Spark/Storm/Flink/Kafka/ELK等系统部署、升级、扩容、优化等，有阅读源码能力和patch源代码经验者优先；
- 至少熟悉一种脚本语言：Shell、Python 等
- 熟悉 Docker、K8S 等容器技术和工具者优先；
- 能够利用各种开源监控工具、运维工具，HA、负载均衡软件完成工作任务
