hive與hadoop有什么聯(lián)系

這篇文章主要講解了“hive與hadoop有什么聯(lián)系”，文中的講解內容簡(jiǎn)單清晰，易于學(xué)習與理解，下面請大家跟著(zhù)小編的思路慢慢深入，一起來(lái)研究和學(xué)習“hive與hadoop有什么聯(lián)系”吧！

解析：

1、提交sql 交給驅動(dòng)
2、驅動(dòng)編譯：解析相關(guān)的字段表信息
3、去metastore查詢(xún)相關(guān)的信息 返回字段表信息
4、編譯返回信息 發(fā)給驅動(dòng)
5、驅動(dòng)發(fā)送一個(gè)執行計劃 交給執行引擎
6、執行計劃 (三種形式: metastore、namenode、metastore+namenode+mapreduce)

形式一 > DDL 對數據庫表的操作的 直接和metastore交互 。 比如：create table t1(name string);
形式二 > dfs ops 直接和namenode取數據 。 比如： select * from t1;
形式三 > 把job交給job tracker,讓task tracker執行 返回執行信息 + 完成job返回數據信息、找namenode查數據 。 
比如：select * from t1 where col=X ;

7、返回結果信息集

總結： hive 運行在 hadoop 之上， 某些操作需要調用 hdfs 中的 mapreduce 。 hive 元數據存儲在 matestore 中， 而非元數據（如 table 里的數據）存儲在hdfs之上。