前言

hive默認(rèn)使用的是內(nèi)嵌據(jù)庫(kù)derby，Derby 是一個(gè)嵌入式數(shù)據(jù)庫(kù)，可以輕松地以庫(kù)的形式集成到應(yīng)用程序中。它不需要獨(dú)立的服務(wù)器進(jìn)程，所有的數(shù)據(jù)存儲(chǔ)在應(yīng)用程序所在的文件系統(tǒng)中。為了支持hive服務(wù)更方便的使用，我們使用mysql數(shù)據(jù)庫(kù)的方式，使得服務(wù)部署更加靈活。數(shù)據(jù)庫(kù)是分開(kāi)部署的，使用十分靈活，性能也相對(duì)更高。

正文

• 上傳mysql安裝包和驅(qū)動(dòng)到服務(wù)器/opt/softeware目錄

• 創(chuàng)建一個(gè)mysql5.7-inst目錄，將mysql安裝包解壓到mysql目錄?

- mkdir mysql5.7-inst

-?tar -xf mysql-5.7.28-1.el7.x86_64.rpm-bundle.tar -C mysql5.7-inst/

• ?卸載系統(tǒng)自帶的mariadb數(shù)據(jù)庫(kù)，沒(méi)有則跳過(guò)此步驟

命令：sudo rpm -qa | grep mariadb | xargs sudo rpm -e --nodeps

• 安裝mysql?

- 安裝mysql依賴

sudo rpm -ivh mysql-community-common-5.7.28-1.el7.x86_64.rpm
sudo rpm -ivh mysql-community-libs-5.7.28-1.el7.x86_64.rpm
sudo rpm -ivh mysql-community-libs-compat-5.7.28-1.el7.x86_64.rpm

- 安裝mysql客戶端

sudo rpm -ivh mysql-community-client-5.7.28-1.el7.x86_64.rpm

- 安裝mysql服務(wù)

sudo rpm -ivh mysql-community-server-5.7.28-1.el7.x86_64.rpm

• 啟動(dòng)mysql服務(wù)，查看mysql狀態(tài) ，驗(yàn)證mysql是否安裝完成

- 啟動(dòng)mysql服務(wù)：sudo systemctl start mysqld

- mysql設(shè)置為開(kāi)機(jī)自啟動(dòng)：sudo systemctl enable mysqld

• 修改mysql密碼?

- 查看mysql密碼：sudo cat /var/log/mysqld.log | grep password

- 使用臨時(shí)密碼登錄mysql：sudo mysql -uroot -p'TGZ.#v4fDqLJ'

- 更改mysql密碼策略，并修改mysql密碼

set global validate_password_policy=0;
set global validate_password_length=4;
set password=password("root");

?

- 進(jìn)入mysql數(shù)據(jù)庫(kù)，將root訪問(wèn)權(quán)限改為%

use mysql；
#查看訪問(wèn)權(quán)限
select user, host from user;
#修改訪問(wèn)權(quán)限
update user set host="%" where user="root";
#刷新權(quán)限
flush privileges;

• ?刪除derby數(shù)據(jù)庫(kù)默認(rèn)的元數(shù)據(jù)庫(kù)信息

• 連接mysql數(shù)據(jù)庫(kù)，創(chuàng)建metastore數(shù)據(jù)庫(kù)用于hive使用

• 將mysql的數(shù)據(jù)庫(kù)驅(qū)動(dòng)拷貝至hive安裝目錄下的lib目錄

?- 命令：cp /opt/software/mysql-connector-java-5.1.37.jar $HIVE_HOME/lib

• 使用vi編輯器，創(chuàng)建hive-site.xml文件用于mysql連接等相關(guān)hive的配置

- hive-site.xml

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
    <!-- jdbc連接的URL -->
    <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://hadoop101:3306/metastore?useSSL=false</value>
    </property>

    <!-- jdbc連接的Driver-->
    <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>

    <!-- jdbc連接的username-->
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
    </property>

    <!-- jdbc連接的password -->
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>root</value>
    </property>

    <!-- Hive默認(rèn)在HDFS的工作目錄 -->
    <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/hadoop/hive/warehouse</value>
    </property>
</configuration>

• ?初始化hive元數(shù)據(jù)庫(kù)

- 命令：bin/schematool -dbType mysql -initSchema -verbose

- 啟動(dòng)hive,驗(yàn)證是否安裝成功

結(jié)語(yǔ)

至此，關(guān)于使用mysql作為數(shù)據(jù)源存儲(chǔ)的hive服務(wù)安裝部署到這里就結(jié)束了，我們下期見(jiàn)。。。。。。。文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-636898.html

到了這里，關(guān)于（十六）大數(shù)據(jù)實(shí)戰(zhàn)——安裝使用mysql版的hive服務(wù)的文章就介紹完了。如果您還想了解更多內(nèi)容，請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！