分布式数据库管理专项职业能力考核规范
一、定义
运用将集中式数据库的数据分散存储到多个通过网上连接的数据存储节点上的基本思想,对分布式数据库进行管理维护的能力。
二、适用对象
运用或准备运用本项技能求职、就业的人员。
三、能力标准与鉴定内容
|
能力名称:分布式数据库管理 职业领域:数据分析处理工程技术人员 |
|||
|
工作任务 |
操作规范 |
相关知识 |
考核比重 |
|
(一)管理数据库 |
1.能安装和搭建Mysql、SQLServer、Oracle环境 2.能启用Mysql、SQLServer、Oracle 3.能熟练使用SQL语句 4.会数据库的增删改查操作 |
1.常用数据库区别描述 2.MySQL数据库基础 3.MySQL常用查询语句 4.SQLServer数据库基础 5.Oracle数据库基础 |
20% |
|
(二)搭建和使用大数据与分布式集群架 |
分布式集群搭建和部署 掌握Linux系统基本命令 能利用多节点安装Hadoop集群 会使用Hadoop生态其他常用组件 |
1.Windows、Linux操作系统基础知识及安装步骤操作 2.虚拟机原理 3.Linux基本命令使用 4.Hadoop的基础架构与组成 5.Hadoop的运行方式 |
30% |
|
(三)使用Hbase存储数据 |
1.能对分布式数据仓库Hbase进行安装部署 2.能启用分布式数据仓库Hbase 3.能使用Hbase Shell基本操作 4.使用HQL操作Hbase中数据 5.利用Spark编程读取Hbase 中数据 6.能对上述1-5中出现的错误指令进行处理及解决 |
1.Hbase核心原理 2.Hbase的工作原理及运用 3.Hbase配置文件与修改方法 4.Hbase基本操作方法 5.Hbase Shell常用命令 6.Hbase和其他组件集成方法 |
20% |
|
(四)使用Hive 存储数据 |
1.能对分布式数据仓库Hive进行安装部署 2.能启用分布式数据仓库Hive 3.能利用Hive做日志分析的查询 4.能对上述1-3中出现的错误指令进行处理及解决 |
1.数据仓库的背景与原理 2.Hive的原理及核心特性 3.Hive部署与访问方法 4.视图和索引的创建、修改和删除 |
20% |
|
(五)掌握数据迁移工具Sqoop |
1.能安装部署Sqoop 2.能利用Sqoop进行关系型数据库和hive、hdfs,hbase之间数据的相互导入 3.能对上述1、2中出现的错误指令进行处理及解决 |
1.Sqoop组件特性及核心功能 2.Hadoop生态中的数据转化方法 3.Linux中安装Sqoop方法 4.基本关系型数据库知识 |
10% |
四、鉴定要求
(一)申报条件
达到法定劳动年龄,取得大专(含尚未取得毕业证书的应届毕业生)及以上学历,具有计算机操作能力的人员。
(二)考评员构成
考评员具备分布式数据库管理的理论知识和实践操作能力;每个考评组不少于3名考评员。
(三)鉴定方式与鉴定时间
技能操作考核采取现场上机操作方式。
技能考试时间为120min。
(四)鉴定场地设备要求
考场面积不小于60㎡,操作场地光线充足,整洁无干扰,满足技能鉴定需要的软硬件环境,包括台式计算机(内存16GB,至少具备两套操作系统)、光纤交换机、核心交换机、边界防火墙,水电等基础设施良好。