亚洲视频二区_亚洲欧洲日本天天堂在线观看_日韩一区二区在线观看_中文字幕不卡一区

公告:魔扣目錄網(wǎng)為廣大站長(zhǎng)提供免費(fèi)收錄網(wǎng)站服務(wù),提交前請(qǐng)做好本站友鏈:【 網(wǎng)站目錄:http://www.430618.com 】, 免友鏈快審服務(wù)(50元/站),

點(diǎn)擊這里在線咨詢客服
新站提交
  • 網(wǎng)站:51998
  • 待審:31
  • 小程序:12
  • 文章:1030137
  • 會(huì)員:747

大數(shù)據(jù)中Hive與HBase的區(qū)別與聯(lián)系

二者區(qū)別

Hive:Hive是基于Hadoop的一個(gè)數(shù)據(jù)倉(cāng)庫(kù)工具,可以將結(jié)構(gòu)化的數(shù)據(jù)文件映射為一張數(shù)據(jù)庫(kù)表,并提供簡(jiǎn)單的sql查詢功能。

  • Hive本身不存儲(chǔ)和計(jì)算數(shù)據(jù),它完全依賴于HDFS和MapReduce,Hive中的表純邏輯。hive需要用到hdfs存儲(chǔ)文件,需要用到MapReduce計(jì)算框架。
  • hive可以認(rèn)為是map-reduce的一個(gè)包裝。hive的意義就是把好寫(xiě)的hive的sql轉(zhuǎn)換為復(fù)雜難寫(xiě)的map-reduce程序。

HBase:HBase是Hadoop的數(shù)據(jù)庫(kù),一個(gè)分布式、可擴(kuò)展、大數(shù)據(jù)的存儲(chǔ)。

  • hbase是物理表,不是邏輯表,提供一個(gè)超大的內(nèi)存hash表,搜索引擎通過(guò)它來(lái)存儲(chǔ)索引,方便查詢操作
  • hbase可以認(rèn)為是hdfs的一個(gè)包裝。他的本質(zhì)是數(shù)據(jù)存儲(chǔ),是個(gè)NoSql數(shù)據(jù)庫(kù);hbase部署于hdfs之上,并且克服了hdfs在隨機(jī)讀寫(xiě)方面的缺點(diǎn)。

二者聯(lián)系

Hbase和Hive在大數(shù)據(jù)架構(gòu)中處在不同位置,Hbase主要解決實(shí)時(shí)數(shù)據(jù)查詢問(wèn)題,Hive主要解決數(shù)據(jù)處理和計(jì)算問(wèn)題,一般是配合使用。

在大數(shù)據(jù)架構(gòu)中,Hive和HBase是協(xié)作關(guān)系,數(shù)據(jù)流一般如下圖:

  1. 通過(guò)ETL工具將數(shù)據(jù)源抽取到HDFS存儲(chǔ);
  2. 通過(guò)Hive清洗、處理和計(jì)算原始數(shù)據(jù);
  3. HIve清洗處理后的結(jié)果,如果是面向海量數(shù)據(jù)隨機(jī)查詢場(chǎng)景的可存入Hbase
  4. 數(shù)據(jù)應(yīng)用從HBase查詢數(shù)據(jù);

分享到:
標(biāo)簽:數(shù)據(jù)
用戶無(wú)頭像

網(wǎng)友整理

注冊(cè)時(shí)間:

網(wǎng)站:5 個(gè)   小程序:0 個(gè)  文章:12 篇

  • 51998

    網(wǎng)站

  • 12

    小程序

  • 1030137

    文章

  • 747

    會(huì)員

趕快注冊(cè)賬號(hào),推廣您的網(wǎng)站吧!
最新入駐小程序

數(shù)獨(dú)大挑戰(zhàn)2018-06-03

數(shù)獨(dú)一種數(shù)學(xué)游戲,玩家需要根據(jù)9

答題星2018-06-03

您可以通過(guò)答題星輕松地創(chuàng)建試卷

全階人生考試2018-06-03

各種考試題,題庫(kù),初中,高中,大學(xué)四六

運(yùn)動(dòng)步數(shù)有氧達(dá)人2018-06-03

記錄運(yùn)動(dòng)步數(shù),積累氧氣值。還可偷

每日養(yǎng)生app2018-06-03

每日養(yǎng)生,天天健康

體育訓(xùn)練成績(jī)?cè)u(píng)定2018-06-03

通用課目體育訓(xùn)練成績(jī)?cè)u(píng)定