大数据系统运维专项职业能力考核规范

一、定义

运用大数据框架、产品、脚本等解决大数据平台出现的运维相关问题。

二、适用对象

运用或准备运用本项能力求职、就业的人员。

三、能力标准和鉴定内容

能力名称:大数据系统运维       职业领域:信息通信信息化系统管理员S

工作任务

操作规范

相关知识

考核比重

(一)

大数据集群安装部署

1.能够规划大数据集群高可用、高可靠架构

2.能够使用Linux系统基础命令完成Hadoop伪分布式或完全分布式集群安装操作

3.能够根据开源大数据技术进行脚本的编写

1.常见大数据组件功能特性

2.常见大数据组件应用场景

3.常见大数据组件安装部署

4.开源大数据技术解决方案

35%

(二)

常见大数据组件故障处理、性能监控和优化

1.能够熟练使用Hadoop生态圈各组件的命令行

2.能够解决Hadoop生态圈各组件的故障及报错

3.能够完成Hadoop生态圈各组件在不同场景下的性能监控优化策略

1.常见大数据组件基本操作和使用

2.常见大数据组件故障排除

3. 常见大数据组件故障处理方法

4.常见大数据组件性能监控和优化

40%

(三)

大数据迁移

1.能够熟练使用常用的大数据采集工具

2.能够熟练使用常用的大数据迁移工具

3. 能够完成大数据平台升级

1.Chukwa、Flume、Scribe、Kafka、等数据采集工具。2.使用Sqoop、Kettle、DataX、Talend等工具进行数据迁移。

3.大数据平台软件升级

15%

(四)

典型厂商大数据产品和数据安全

1.了解典型厂商大数据解决方案的优缺点

2.能够运用典型厂商大数据解决方案解决大数据平台架构问题

3.能够使用典型厂商大数据产品

4.能遵守大数据安全相关法律法规,能完成三层组网设计和数据权限设置

1.华为大数据解决方案

2.星环大数据解决方案

3.永洪大数据解决方案

4.其他厂商大数据解决方案

5.大数据安全问题、数据保护原则、数据安全和隐私保护对策

10%


四、鉴定要求

(一)申报条件

达到法定劳动年龄,具有相应技能的劳动者均可申报。

(二)考评员构成

考评员应具备一定的技术支持能力,包括考试系统的安装、调试及常见网络问题的解决能力;每个考评组中不少于3名考评员。

(三)鉴定方式与鉴定时间

技能操作考核采取上机操作考核,技能操作考核时间不低于90分钟。

(四)鉴定场地设备要求

每间考核机房面积约50平方米,至少配备1台服务器、1台管理机和30台考试机,2个高清摄像头(或1个摄像头,1个录像设备)。还需配备主考室及候考室。

设备最低配置如下:

1.服务器配置及设置:CPU:最低主频2.4GHz,四核心,支持虚拟化;内存:16G以上;硬盘500G以上。

2.管理机配置:CPU:最低主频1.8GHz,四核心;内存:16G以上;硬盘500G以上。

3.考试机配置及设置:CPU:最低主频2.4GHz,四核心;内存:16G以上;硬盘500G以上。(考试机提前安装VMware Worrkstation软件和CentOS7,安装好FlumeChukwaScribeKafka等软件,安装好SqoopKettleDataXTalend等软件,预制考核所需的Hadoop生态圈中各组件安装包)

4.摄像头配置:高清摄像头,即插即用。