提示:文章寫完后,目錄可以自動生成,如何生成可參考右邊的幫助文檔
前言
提示:這里可以添加本文要記錄的大概內(nèi)容:
書接上回,傳聞昔日數(shù)據(jù)導(dǎo)入有五大派別,一時(shí)之間數(shù)碼武林局勢動蕩,可憐的碼農(nóng)處于水深火熱之中。亂世出英雄,打著劫富濟(jì)貧,替天行道大旗的六大幫派(數(shù)據(jù)導(dǎo)出)橫空出世。
提示:以下是本篇文章正文內(nèi)容,下面案例可供參考
一、數(shù)據(jù)導(dǎo)出是什么?
hive是一個(gè)依賴Hadoop集群的數(shù)據(jù)處理平臺,我們不僅需要對數(shù)據(jù)進(jìn)行篩選處理,更需要進(jìn)行導(dǎo)出,供我們多次重復(fù)使用。
二、六大幫派
1.insert
insert有兩種形式,加local上傳到本地路徑,不加local上傳到集群
代碼如下(示例):
insert加local
insert overwrite local directory '/root/export/data/student' select * from student;
insert不加local(并將數(shù)據(jù)格式化)
insert overwrite directory '/student' row format delimited fields terminated by ',' select * from student;
2.Hadoop命令導(dǎo)出到本地
代碼如下(示例):
hadoop dfs -get /user/hive/warehouse/hive.db/student/student.txt /root/export/data/student/
3.Hive shell命令導(dǎo)出
一個(gè) > 是覆蓋,兩個(gè)>是追加
代碼如下(示例):
bin/hive -e 'select * from hive.student' >> /root/export/data/student/student.txt
4.export導(dǎo)出到HDFS上
當(dāng)該hdfs路徑下有文件時(shí)或表存在,都不可導(dǎo),與import連用。
代碼如下(示例):
export table hive.student to '/user/hive/warehouse/hive.db/student';
5.Sqoop導(dǎo)出
將數(shù)據(jù)導(dǎo)出到window系統(tǒng)的mysql,并進(jìn)行可視化操作
6.清除表中的數(shù)據(jù)(Truncate)——?jiǎng)h庫跑路
Truncate只能刪除管理表,不能刪除外部表的數(shù)據(jù)(但可以將外部表轉(zhuǎn)為內(nèi)部表哦,嘿嘿嘿)
只是刪除內(nèi)部表的hdfs數(shù)據(jù),元數(shù)據(jù)還在文章來源:http://www.zghlxwxcb.cn/news/detail-418164.html
內(nèi)部轉(zhuǎn)為外部表
alter table student set tblproperties('EXTERNAL'='TRUE')一定大寫
截?cái)啾?Truncate table student;
總結(jié)
六大派別與五大幫派共同統(tǒng)治著數(shù)碼武林,俠義精神深入人心,hive語句婦孺皆知。街頭小巷上談?wù)撝麄兊挠⑿凼论E,再一次掀起了學(xué)習(xí)hive秘籍的狂潮?;蛟S現(xiàn)在人們學(xué)習(xí)的已經(jīng)不再是傍身之計(jì),更多的是對天下武功,為快不滅的熱愛。有人的地方就會就有江湖,大數(shù)據(jù)時(shí)代亦是如此。文章來源地址http://www.zghlxwxcb.cn/news/detail-418164.html
到了這里,關(guān)于Hive數(shù)據(jù)導(dǎo)出的文章就介紹完了。如果您還想了解更多內(nèi)容,請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!