溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

hive與hadoop有什么聯系

發布時間:2021-08-19 21:55:11 來源:億速云 閱讀:174 作者:chen 欄目:網絡安全

這篇文章主要講解了“hive與hadoop有什么聯系”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“hive與hadoop有什么聯系”吧!

解析:

1、提交sql 交給驅動
2、驅動編譯:解析相關的字段表信息
3、去metastore查詢相關的信息 返回字段表信息
4、編譯返回信息 發給驅動
5、驅動發送一個執行計劃 交給執行引擎
6、執行計劃 (三種形式: metastore、namenode、metastore+namenode+mapreduce)

形式一 > DDL 對數據庫表的操作的 直接和metastore交互 。 比如:create table t1(name string);
形式二 > dfs ops 直接和namenode取數據 。 比如: select * from t1;
形式三 > 把job交給job tracker,讓task tracker執行 返回執行信息 + 完成job返回數據信息、找namenode查數據 。 
比如:select * from t1 where col=X ;

7、返回結果信息集

總結: hive 運行在 hadoop 之上, 某些操作需要調用 hdfs 中的 mapreduce 。 hive 元數據存儲在 matestore 中, 而非元數據(如 table 里的數據)存儲在hdfs之上。

感謝各位的閱讀,以上就是“hive與hadoop有什么聯系”的內容了,經過本文的學習后,相信大家對hive與hadoop有什么聯系這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女