更新時間:2021-03-04 來源:黑馬程序員 瀏覽量:
本地和遠程模式安裝配置方式大致相同,本質(zhì)上是將Hive默認的元數(shù)據(jù)存儲介質(zhì)由自帶的Derby數(shù)據(jù)庫替換為MySQL數(shù)據(jù)庫,這樣無論在任何目錄下以任何方式啟動Hive,只要連接的是同一臺Hive服務,那么所有節(jié)點訪問的元數(shù)據(jù)信息是一致的,從而實現(xiàn)元數(shù)據(jù)的共享。下面就以本地模式為例,講解安裝過程。
本地模式的Hive安裝主要包括兩個步驟:首先安裝MySQL服務,再安裝Hive。具體步驟如下:
1.安裝MySQL服務
MySQL安裝方式有許多種,可以直接解壓安裝包進行相關配置,也可以選擇在線安裝,本節(jié)選用在線安裝MySQL方式。在線安裝MySQL的具體指令和說明如下:
// 下載安裝MySQL $ yum install mysql mysql-server mysql-devel// 啟動MySQL服務 $ /etc/init.d/mysqld start// MySQL連接并登錄MySQL服務 $ mysql
上述指令中,首先通過“yum install”命令下載并安裝MySQL程序,并且啟動MySQL服務,然后就可以使用MySQL命令連接到MySQL客戶端。
接下來,進入MySQL客戶端后,分別對MySQL數(shù)據(jù)庫密碼進行修改(可選),并設置允許遠程登錄權限,具體指令如下:
// 修改登錄MySQL用戶名及密碼 mysql> USE mysql; mysql> UPDATE user SET Password=PASSWORD('123456') WHERE user='root'; // 設置允許遠程登錄 mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION; // 強制寫入 mysql> FLUSH PRIVILEGES;
2.Hive的配置
(1)修改hive-env.sh配置文件,配置Hadoop環(huán)境變量
進入Hive安裝包下的conf文件夾,將hive-env.sh.template文件進行拷貝并重命名為hive-env.sh,具體指令如下:
$ cd /export/servers/apache-hive-1.2.1-bin/conf $ cp hive-env.sh.template hive-env.sh
然后修改hive-env.sh配置文件,添加Hadoop環(huán)境變量,具體內(nèi)容如下:
export HADOOP_HOME=/export/servers/hadoop-2.7.4
上述操作是設置Hadoop環(huán)境變量,作用是無論系統(tǒng)是否配置Hadoop環(huán)境變量,在Hive執(zhí)行時,一定能夠通過hive-env.sh配置文件去加載Hadoop環(huán)境變量,由于在部署Hadoop集群時已經(jīng)配置了全局Hadoop環(huán)境變量,因此可以不設置該參數(shù)。
(2)添加hive-site.xml配置文件,配置MySQL相關信息
由于Hive安裝包conf目錄下,沒有提供hive-site.xml文件,這里需要創(chuàng)建并編輯一個hive-site.xml配置文件,具體內(nèi)容如下所示:
<configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value> <description>Mysql連接協(xié)議</description> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> <description>JDBC連接驅動</description> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value> <description>用戶名</description> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>123456</value> <description>密碼</description> </property> </configuration>
完成配置后,Hive就會把默認使用Derby數(shù)據(jù)庫方式所覆蓋。這里需要注意的是,由于使用了MySQL數(shù)據(jù)庫,那么就需要上傳MySQL連接驅動的Jar包到Hive安裝包的lib文件夾下,本教材使用mysql-connector-java-5.1.32.jar,使用rz命令上傳即可。至此就完成了本地模式的安裝。
如果使用遠程模式的安裝方式,只需要將hive-site.xml配置文件中的localhost修改為具有MySQL服務的節(jié)點IP即可,這樣無論用戶通過什么路徑下啟動Hive客戶端,都可以訪問相同的元數(shù)據(jù)信息。
猜你喜歡:
Redis、傳統(tǒng)數(shù)據(jù)庫、HBase和Hive幾種數(shù)據(jù)存儲的區(qū)別
RDD如何分區(qū),各種模式下的分區(qū)數(shù)目是怎樣的?