Hive數(shù)據(jù)倉庫應用項目5目錄CONTENTS01.Hive安裝配置02.Hive基本操作01Hive安裝配置環(huán)境搭建解壓到`/opt/module`，重命名為`hive-3.1.3`。命令：`tar-zxfapache-hive-3.1.3-bin.tar.gz-C/opt/module`。安裝Hive從官網(wǎng)下載`hive-3.1.3`版本安裝包，如`apache-hive-3.1.3-bin.tar.gz`。下載Hive修改`/etc/profile.d/my_env.sh`，添加`exportHIVE_HOME=/opt/module/hive-3.1.3`和`exportPATH=$PATH:$HIVE_HOME/bin`。添加環(huán)境變量123修改`hive-site.xml`，配置元數(shù)據(jù)存儲到MySQL。環(huán)境搭建配置Hive創(chuàng)建`zkData`目錄并設置`myid`，如`mkdirzkData`和`echo"1">zkData/myid`。創(chuàng)建zkData目錄和myid文件啟動Hive使用`hive--version`確認Hive版本，使用`hive`命令進入Hive。創(chuàng)建數(shù)據(jù)庫使用`CREATEDATABASEIFNOTEXISTStest_database;`創(chuàng)建數(shù)據(jù)庫。查看數(shù)據(jù)庫使用`SHOWDATABASES;`查看所有數(shù)據(jù)庫。使用數(shù)據(jù)庫使用`USEtest_database;`切換到指定數(shù)據(jù)庫。Hive基本操作Hive基本操作使用`ALTERDATABASEtest_databaseSETDBPROPERTIES('creator'='me','date'='2024-08-25');`修改數(shù)據(jù)庫屬性。修改數(shù)據(jù)庫屬性使用`DESCRIBEDATABASEtest_database;`查看數(shù)據(jù)庫詳細信息。查看數(shù)據(jù)庫詳細信息使用`DROPDATABASEmy_database;`刪除數(shù)據(jù)庫。刪除數(shù)據(jù)庫12302Hive基本操作數(shù)據(jù)倉庫分層概念Hive數(shù)據(jù)倉庫分為ODS層、DWD層、DWM層、DWS層、ADS層和DIM層。分層數(shù)據(jù)模型分層提高數(shù)據(jù)管理效率、查詢性能，簡化數(shù)據(jù)管理，確保數(shù)據(jù)一致性，降低存儲成本，提高數(shù)據(jù)安全性，支持數(shù)據(jù)整合。數(shù)據(jù)倉庫分層原因0102Hive創(chuàng)建表詳解內(nèi)部表由Hive管理生命周期，刪除表時刪除數(shù)據(jù)；外部表不刪除數(shù)據(jù)，數(shù)據(jù)存儲位置可自定義。Hive內(nèi)部表和外部表包括TextFile、SequenceFile、RCFile、ORC、Parquet、Avro等，各有優(yōu)缺點。Hive表文件存儲格式使用`JOIN`連接兩個表，只返回匹配的行。內(nèi)連接使用`LEFTJOIN`，返回左表所有數(shù)據(jù)，右表未匹配的用NULL填充。左連接使用`RIGHTJOIN`，返回右表所有數(shù)據(jù)，左表未匹配的用NULL填充。右連接Hive表連接操作Hive表連接操作使用`FULLOUTERJOIN`，返回左右表所有數(shù)據(jù)，未匹配的用NULL填充。全外連接使用`LEFTSEMIJOIN`，返回左表中匹配的記錄。左半開