2023學(xué)年完整公開課版創(chuàng)建Hive表

創(chuàng)建Hive表學(xué)習(xí)目標(biāo)2知識(shí)目標(biāo)●Hive表格的建立●表格的類型能力目標(biāo)●掌握表格的建立●內(nèi)部表與外部表的區(qū)別●表格導(dǎo)入的數(shù)據(jù)學(xué)習(xí)任務(wù)3表格的建立導(dǎo)入數(shù)據(jù)表格的類型內(nèi)部表外部表的區(qū)別4內(nèi)部表外部表內(nèi)部表外部表的區(qū)別目錄內(nèi)部表5

建表創(chuàng)建完成后使用

showtables;查看是否創(chuàng)建成功.6導(dǎo)入數(shù)據(jù)

提前準(zhǔn)備好一個(gè)txt文件，文件內(nèi)容如下

接下來(lái)導(dǎo)入數(shù)據(jù)7查看表中的數(shù)據(jù)

數(shù)據(jù)已經(jīng)導(dǎo)入成功

在導(dǎo)入數(shù)據(jù)的過(guò)程中，如果在建表的過(guò)程中沒(méi)有指定location，那么就會(huì)在hive.metastore.warehouse.dir指定的路徑下，以表名創(chuàng)建一個(gè)文件夾，之后所有有關(guān)該表的數(shù)據(jù)都會(huì)存儲(chǔ)到此文件夾中。8

hive.metastore.warehouse.dir是在HIVE_HOME/conf/hive-site.xml中配置的，如下，我配置的路徑為/user/hive/warehouse查看表中的數(shù)據(jù)9

現(xiàn)在去HDFS中就可以看到該路徑下有個(gè)文件夾名為fz，fz下有個(gè)文件就是我們?cè)趯?dǎo)入數(shù)據(jù)時(shí)，從本地文件系統(tǒng)拷貝到HDFS中的fz.txt。查看表中的數(shù)據(jù)10刪除該表

該表刪除后，再去HDFS中看一下還有沒(méi)有之前創(chuàng)建的文件夾。

結(jié)果顯示該文件夾已經(jīng)沒(méi)有了，也就是說(shuō)當(dāng)我們?cè)趧h除內(nèi)部表的時(shí)候，不僅刪除了表中的數(shù)據(jù)，還刪除了數(shù)據(jù)文件。11外部表建表

建外部表時(shí)要加external關(guān)鍵字，我在建表時(shí)指定了location，當(dāng)然也可以不指定，不指定就默認(rèn)使用hive.metastore.warehouse.dir指定的路徑。12導(dǎo)入數(shù)據(jù)

提前準(zhǔn)備好數(shù)據(jù)文件fz_external.txt,數(shù)據(jù)同上，只是換了個(gè)名。

接下來(lái)進(jìn)行導(dǎo)入數(shù)據(jù)的操作13查看表內(nèi)數(shù)據(jù)現(xiàn)在數(shù)據(jù)已經(jīng)導(dǎo)入成功，接下來(lái)去HDFS中查看以下，在location指定的路徑下14

從數(shù)據(jù)可以看到，往外部表中導(dǎo)入數(shù)據(jù)的時(shí)候，本地文件系統(tǒng)中的數(shù)據(jù)文件也被拷貝到了HDFS中。現(xiàn)在來(lái)刪除外部表，看一下HDFS中文件有沒(méi)有被刪除。查看表內(nèi)數(shù)據(jù)15

外部表已經(jīng)刪除成功，看下HDFS中

可以看到，HDFS中數(shù)據(jù)文件在表被刪除的情況下，還是存在的，也就是說(shuō)刪除外部表，只能刪除表數(shù)據(jù)，并不能刪除數(shù)據(jù)文件。查看表內(nèi)數(shù)據(jù)163.內(nèi)部表與外部表的不同

創(chuàng)建外部表需要添加external字段。而內(nèi)部表不需要。