1、负责公司大数据平台（cdh）的部署、管理、优化、监控报警，保障平台服务7*24稳定可靠高效运行；

2、深入理解公司大数据平台架构，发现并解决性能瓶颈，为业务应用提供支持和服务；

3、负责hadoop/yarn/hbase/hive/kafka/spark等大数据相关组件的底层运维与调优工作；

4、开发大数据自动化运维、监控报警、故障处理相关脚本和工具；

5、负责hadoop/spark/flink／kafka/redis/hbase/es等集群服务、业务监控、持续交付、应急响应、容量规划等。

6、保障大数据相关业务平台的数据安全，网络完全以及存储安全；

任职资格：

1、本科及以上学历，5年以上大数据平台运维相关工作经验；

2、熟练掌握大数据生态技术如storm、spark、scala、flume、yarn、flink、cdh、impala、hive、hbase、kerberos、hdfs等运行机制和体系架构;

3、熟悉cdh、hdp发行版或hadoop社区版，有实际部署、维护及优化经验；

4、熟悉掌握常用的安全协议和组件服务，对hadoop各组件的权限、安全、kerberos进行配置管理。熟悉ssl、acl、kerberos等在大数据环境场景的使用；

5、具备一定的故障排查能力，有良好的技术敏感度和风险识别能力，精通一门以上脚本语言(shell/python等)，熟悉http/https、tcp/ip、smtp等协议；

6、熟悉linux(redhat/centos)软硬件环境、系统管理和优化，熟练部署、优化各种常用服务。熟练使用linux 命令和常用的ssh、ftp、git、maven等开发工具；

7、工作积极主动，责任心强，吃苦耐劳，抗压能力强，具有良好的沟通能力和团队协作能力，持续学习，善于深入研究新技术；

8、有大数据开发经验和阅读源码能力者优先。