廈門大學林子雨編著

廈門大學林子雨編著《大數(shù)據(jù)技術原理與應用》教材配套機房上機實驗指南實驗3第四章熟悉常用的HBase操作（版本號：2016年5月14日版本）主講教師：林子雨廈門大學數(shù)據(jù)庫實驗室二零一六年五月目錄

目錄1 實驗目的 12 實驗平臺 13 實驗內(nèi)容和要求 14 實驗報告 1附錄1:任課教師介紹 2附錄2：課程教材介紹 2附錄3：中國高校大數(shù)據(jù)課程公共服務平臺介紹 3廈門大學林子雨編著《大數(shù)據(jù)技術原理與應用》教材配套機房上機實驗指南實驗3第四章熟悉常用的HBase操作 主講教師：林子雨/linziyu第1頁

廈門大學林子雨編著《大數(shù)據(jù)技術原理與應用》教材配套機房上機實驗指南實驗3第四章熟悉常用的HBase操作主講教師：林子雨E-mail:ziyulin@個人主頁：/linziyu實驗目的1. 理解HBase在Hadoop體系結構中的角色；2. 熟練使用HBase操作常用的Shell命令；3. 熟悉HBase操作常用的JavaAPI。實驗平臺操作系統(tǒng)：LinuxHadoop版本：2.6.0或以上版本HBase版本：1.1.2或以上版本JDK版本：1.6或以上版本JavaIDE：Eclipse實驗內(nèi)容和要求編程實現(xiàn)以下指定功能，并用Hadoop提供的HBaseShell命令完成相同任務：列出HBase所有的表的相關信息，例如表名；在終端打印出指定的表的所有記錄數(shù)據(jù)；向已經(jīng)創(chuàng)建好的表添加和刪除指定的列族或列；清空指定的表的所有記錄數(shù)據(jù)；統(tǒng)計表的行數(shù)。現(xiàn)有以下關系型數(shù)據(jù)庫中的表和數(shù)據(jù)，要求將其轉換為適合于HBase存儲的表并插入數(shù)據(jù)：學生表（Student）學號（S_No）姓名（S_Name）性別（S_Sex）年齡（S_Age）2015001Zhangsanmale232015003Maryfemale222015003Lisimale24課程表（Course）課程號（C_No）課程名（C_Name）學分（C_Credit）123001Math2.0123002ComputerScience5.0123003English3.0選課表（SC）學號（SC_Sno）課程號（SC_Cno）成績（SC_Score）201500112300186201500112300369201500212300277201500212300399201500312300198201500312300295同時，請編程完成以下指定功能：（1）createTable(StringtableName,String[]fields) 創(chuàng)建表，參數(shù)tableName為表的名稱，字符串數(shù)組fields為存儲記錄各個域名稱的數(shù)組。要求當HBase已經(jīng)存在名為tableName的表的時候，先刪除原有的表，然后再創(chuàng)建新的表。 （2）addRecord(StringtableName,Stringrow,String[]fields,String[]values) 向表tableName、行row（用S_Name表示）和字符串數(shù)組files指定的單元格中添加對應的數(shù)據(jù)values。其中fields中每個元素如果對應的列族下還有相應的列限定符的話，用“columnFamily:column”表示。例如，同時向“Math”、“ComputerScience”、“English”三列添加成績時，字符串數(shù)組fields為{“Score:Math”,”Score；ComputerScience”,”Score:English”}，數(shù)組values存儲這三門課的成績。 （3）scanColumn(StringtableName,Stringcolumn) 瀏覽表tableName某一列的數(shù)據(jù)，如果某一行記錄中該列數(shù)據(jù)不存在，則返回null。要求當參數(shù)column為某一列族名稱時，如果底下有若干個列限定符，則要列出每個列限定符代表的列的數(shù)據(jù)；當參數(shù)column為某一列具體名稱（例如“Score:Math”）時，只需要列出該列的數(shù)據(jù)。 （4）modifyData(StringtableName,Stringrow,Stringcolumn) 修改表tableName，行row（可以用學生姓名S_Name表示），列column指定的單元格的數(shù)據(jù)。（5）deleteRow(StringtableName,Stringrow) 刪除表tableName中row指定的行的記錄。利用HBase和MapReduce完成如下任務：假設HBase有2張表，表的邏輯視圖及部分數(shù)據(jù)如下所示：表邏輯視圖及部分數(shù)據(jù)書名（bookName）價格（price）DatabaseSystemConcept30$ThinkinginJava60$DataMining25$要求：從HBase讀出上述兩張表的數(shù)據(jù)，對“price”的排序，并將結果存儲到HBase中。實驗報告《大數(shù)據(jù)技術原理與應用》課程機房上機實驗報告題目：姓名日期實驗環(huán)境：實驗內(nèi)容與完成情況：出現(xiàn)的問題：解決方案（列出遇到的問題和解決辦法，列出沒有解決的問題）：附錄1:任課教師介紹林子雨(1978－),男,博士,廈門大學計算機科學系助理教授,主要研究領域為數(shù)據(jù)庫,實時主動數(shù)據(jù)倉庫,數(shù)據(jù)挖掘.主講課程：《大數(shù)據(jù)技術基礎》辦公地點：廈門大學海韻園科研2號樓E-mail:ziyulin@個人主頁：/linziyu數(shù)據(jù)庫實驗室網(wǎng)站：附錄2：課程教材介紹《大數(shù)據(jù)技術原理與應用——概念、存儲、處理、分析與應用》，由廈門大學計算機科學系教師林子雨博士編著，是中國高校第一本系統(tǒng)介紹大數(shù)據(jù)知識的專業(yè)教材。本書定位為大數(shù)據(jù)技術入門教材，為讀者搭建起通向“大數(shù)據(jù)知識空間”的橋梁和紐帶，以“構建知識體系、闡明基本原理、引導初級實踐、了解相關應用”為原則，為讀者在大數(shù)據(jù)領域“深耕細作”奠定基礎、指明方向。全書共有13章，系統(tǒng)地論述了大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫HBase、NoSQL數(shù)據(jù)庫、云數(shù)據(jù)庫、分布式并行編程模型MapReduce、流計算、圖計算、數(shù)據(jù)可視化以及大數(shù)據(jù)在互聯(lián)網(wǎng)、生物醫(yī)學和物流等各個領域的應用。在Hadoop、HDFS、HBase和MapReduce等重要章節(jié)，安排了入門級的實踐操作，讓讀者更好地學習和掌握大數(shù)據(jù)關鍵技術。本書可以作為高等院校計算機專業(yè)、信息管理等相關專業(yè)的大數(shù)據(jù)課程教材，也可供相關技術人員參考、學習、培訓之用。歡迎訪問《大數(shù)據(jù)技術原理與應用——概念、存儲、處理、分析與應用》教材官方網(wǎng)站：/post/bigdata掃一掃訪問教材官網(wǎng)附錄3：中國高校大數(shù)據(jù)課程公共服務平臺介紹中國高校大數(shù)據(jù)課程公共服務平臺，由中國高校首個“數(shù)字教師”的提出者和建設者——林子雨老師發(fā)起，由廈門大學數(shù)據(jù)庫實驗室全力打造，由廈門大學云計算與大數(shù)據(jù)研究中心、海峽云計算與大數(shù)據(jù)應用研究中心攜手共建。這是國內(nèi)第一個服務于高校大數(shù)據(jù)課程建設的公共服務平臺，旨在促進國內(nèi)高校大數(shù)據(jù)課程體系建設，提高大數(shù)據(jù)課程教學水平，降低大數(shù)據(jù)課程學習門檻，提升學生課程學習效果。平臺服務對象涵蓋高校、教師和學生。平臺為高校開設大數(shù)據(jù)課程提供全流程輔助，為教師開展教學工作提供一