熟悉常用的HBase操作.doc

厦门大学 《》 主讲教师：林子雨 二零一年月 目录 1 实验目的 1 2 实验平台 1 3 实验内容和要求 1 4 实验报告 1 附录1:任课教师介绍 2 附录2：课程教材介绍 2 附录3：中国高校大数据课程公共服务平台介绍 3 厦门大学林子雨编著《》 主讲教师：林子雨 E-mail: ziyulin@ 个人主页：/linziyu 目的实验平台 操作系统：Linux Hadoop版本：.6.0或以上版本 HBase版本： JDK版本：1.6或以上版本 Java IDE：Eclipse 实验内容和要求 编程实现指定功能，并用adoop提供的HBase hell命令完成相同任务： 列出HBase所有的表的相关信息，例如； 在终端打印出指定的表的所有记录数据； 向已经创建好的表添加和删除指定的列族或列； 清空指定的表的所有记录数据； 统计表的行数 现有以下关系型数据库中的表和数据，要求将其转换为适合于HBase存储的表并插入数据： 学生表（Student） 学号（S_No） 姓名（S_Name） 性别（S_Sex） 年龄（S_Age） 2015001 Zhangsan male 23 2015003 Mary female 22 2015003 Lisi male 24 课程表（Course） 课程号（C_No） 课程名（C_Name） 学分（C_Credit） 123001 Math 2.0 123002 Computer Science 5.0 123003 English 3.0 选课表（SC） 学号（SC_Sno） 课程号（SC_Cno） 成绩（SC_Score） 2015001 123001 86 2015001 123003 69 2015002 123002 77 2015002 123003 99 2015003 123001 98 2015003 123002 95 编程完成以下指定功能： （1）createTable(String tableName, String[] fields) 创建表，参数tableName为表的名称，字符串数组fields为存储记录各个域名称的数组。要求当HBase已经存在名为tableName的表的时候，先删除原有的表，然后再创建新的表。 （2）addRecord(String tableName, String row, String[] fields, String[] values) 向表tableName行row（用S_Name表示）字符串数组files指定的添加对应的数据values。其中fields中每个元素如果对应的列族下还有相应的列符的话，用“columnFamily:column”表示。 （3）scanColumn(String tableName, String column) 浏览表tableName某一列的数据，如果某一行记录中该列数据不存在，则返回null。要求当参数column为某一列族名称时，如果底下有若干个列限定符，则要列出每个代表的列的数据；当参数column为某一列具体名称（例如“Score:Math”）时，只需要列出该列的数据。 （4）modifyData(String tableName, String row, String column) 修改表tableName，行row（可以用学生姓名S_Name表示），列column指定的单元格的数据。 （5）deleteRow(String tableName, String row) 删除表tableName中row指定的行的记录。 利用HBase和MapReduce完成如下任务： 假设HBase有2张表，表的逻辑视图及部分数据如下所示： 逻辑视图及部分数据 书名（bookName） 价格（price） Database System Concept 30$ Thinking in ava 60$ Data Mining 25$ 要求：从HBase读出上述两张表的数据，对“price”的排序，并将结果存储到HBase中。 《大数据技术原理与应用》课程机房上机实验报告 题目： 姓名 日期 实验环境： 实验内容与完成情况： 出现的问题： 解决方案（列出遇到的问题和解决办法，列出没有解决的问题）： 附录1:任课教师介绍 林子雨(1978－),男,博士,厦门大学计算机科学系助理教授,主要研究领域为数据库,实时主动数据仓库,数据挖掘. 主讲课程：《》 办公地点：厦门大学海韵园科研2号楼 E-mail: ziyulin@ 个人页：/linziyu 附录2：课程教材介绍 《大