フレームワークHadoop要員 2名 30万円~35万円
工作内容:
1、Hadoop集群的安装、运用保守、扩容等
2、DBA:SQL Server MySQL,redis等数据库的安装、备份和恢复
必要技能:
1、精通Hadoop大数据平台框架和原理,精通Hadoop架构的设计和开发。
2、精通Hadoop架构、hdfs、yarn、hive、spark的操作原理,熟悉源代码的优先级、组件升级编译更改和发布、组件参数调整等。
3、特通Linux、Shell/Python脚本,精通脚本/工具的开发,对自动化运用和保守有深刻的理解。
4、精通hdfs、yarn、hive、spark、clickhouse、kylin等大数据组件的日常维护如计划部署监视优化等。
5、理解Hadoop生态技术(HBase、Hive等),熟悉Hadoop集群环境的运用和保守经验。
6、精通TCP/IP、HTTP协议和iptables。
7、熟悉常见的监视软件,熟练使用Prometheus和Grafana。
8、掌握Docker容器技术的原理,款悉配置和使用。有Kubernetes运用保守经验。
9、熟悉MySQL、MongoDB、Redis和其他数据库的部署、管理和优化。
10、熟悉Nginx、Kafka、ELK和其他常见服务的群集架构、部署和配固。
11、精通DevOps持续集成的知识和工具。
12、熟悉MySQL、Redis数据库的基础理论、操作机制、架构、高可用性解决方案、远程灾难恢复等技术。
13、精通数据库架构和操作原理,熟练优化和维护Oracle、SQL、MySQL、Redis和其他数据库的性能。
14、丰富的数据库备份和恢复经验。