大数据系统运维专项职业能力考核规范
一、定义
运用大数据框架、产品、脚本等解决大数据平台出现的运维相关问题。
二、适用对象
运用或准备运用本项能力求职、就业的人员。
三、能力标准和鉴定内容
|
能力名称:大数据系统运维 职业领域:信息通信信息化系统管理员S |
|||
|
工作任务 |
操作规范 |
相关知识 |
考核比重 |
|
(一) 大数据集群安装部署 |
1.能够规划大数据集群高可用、高可靠架构 2.能够使用Linux系统基础命令完成Hadoop伪分布式或完全分布式集群安装操作 3.能够根据开源大数据技术进行脚本的编写 |
1.常见大数据组件功能特性 2.常见大数据组件应用场景 3.常见大数据组件安装部署 4.开源大数据技术解决方案 |
35% |
|
(二) 常见大数据组件故障处理、性能监控和优化 |
1.能够熟练使用Hadoop生态圈各组件的命令行 2.能够解决Hadoop生态圈各组件的故障及报错 3.能够完成Hadoop生态圈各组件在不同场景下的性能监控优化策略 |
1.常见大数据组件基本操作和使用 2.常见大数据组件故障排除 3. 常见大数据组件故障处理方法 4.常见大数据组件性能监控和优化 |
40% |
|
(三) 大数据迁移 |
1.能够熟练使用常用的大数据采集工具 2.能够熟练使用常用的大数据迁移工具 3. 能够完成大数据平台升级 |
1.Chukwa、Flume、Scribe、Kafka、等数据采集工具。2.使用Sqoop、Kettle、DataX、Talend等工具进行数据迁移。 3.大数据平台软件升级 |
15% |
|
(四) 典型厂商大数据产品和数据安全 |
1.了解典型厂商大数据解决方案的优缺点 2.能够运用典型厂商大数据解决方案解决大数据平台架构问题 3.能够使用典型厂商大数据产品 4.能遵守大数据安全相关法律法规,能完成三层组网设计和数据权限设置 |
1.华为大数据解决方案 2.星环大数据解决方案 3.永洪大数据解决方案 4.其他厂商大数据解决方案 5.大数据安全问题、数据保护原则、数据安全和隐私保护对策 |
10% |
四、鉴定要求
(一)申报条件
达到法定劳动年龄,具有相应技能的劳动者均可申报。
(二)考评员构成
考评员应具备一定的技术支持能力,包括考试系统的安装、调试及常见网络问题的解决能力;每个考评组中不少于3名考评员。
(三)鉴定方式与鉴定时间
技能操作考核采取上机操作考核,技能操作考核时间不低于90分钟。
(四)鉴定场地设备要求
每间考核机房面积约50平方米,至少配备1台服务器、1台管理机和30台考试机,2个高清摄像头(或1个摄像头,1个录像设备)。还需配备主考室及候考室。
设备最低配置如下:
1.服务器配置及设置:CPU:最低主频2.4GHz,四核心,支持虚拟化;内存:16G以上;硬盘500G以上。
2.管理机配置:CPU:最低主频1.8GHz,四核心;内存:16G以上;硬盘500G以上。
3.考试机配置及设置:CPU:最低主频2.4GHz,四核心;内存:16G以上;硬盘500G以上。(考试机提前安装VMware Worrkstation软件和CentOS7,安装好Flume或Chukwa或Scribe或Kafka等软件,安装好Sqoop或Kettle或DataX或Talend等软件,预制考核所需的Hadoop生态圈中各组件安装包)
4.摄像头配置:高清摄像头,即插即用。