91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Hbase的基礎(chǔ)性介紹與入門

汽車玩家 ? 來源:今日頭條 ? 作者:不一樣的程序猿 ? 2020-03-15 17:21 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

無論是 NoSQL,還是大數(shù)據(jù)領(lǐng)域,HBase 都是非常"炙熱"的一門數(shù)據(jù)庫。本文將對 HBase 做一些基礎(chǔ)性的介紹,旨在入門。

一、簡介

HBase 是一個開源的、面向列的非關(guān)系型分布式數(shù)據(jù)庫,目前是Hadoop體系中非常關(guān)鍵的一部分。在最初,HBase是基于谷歌的 BigTable 原型實現(xiàn)的,許多技術(shù)來自于Fay Chang在2006年所撰寫的Google論文"BigTable"。與 BigTable基于Google文件系統(tǒng)(File System)一樣,HBase則是基于HDFS(Hadoop的分布式文件系統(tǒng))之上而開發(fā)的。

HBase 采用 Java 語言實現(xiàn),在其內(nèi)部實現(xiàn)了BigTable論文提到的一些壓縮算法、內(nèi)存操作和布隆過濾器等,這些能力使得HBase 在海量數(shù)據(jù)存儲、高性能讀寫場景中得到了大量應(yīng)用,如 Facebook 在 2010年11 月開始便一直選用 HBase來作為消息平臺的存儲層技術(shù)。HBase 以Apache License Version 2.0開源,這是一種對商業(yè)應(yīng)用友好的協(xié)議,同時該項目當(dāng)前也是Apache軟件基金會的頂級項目之一。

有什么特性

基于列式存儲模型,對于數(shù)據(jù)實現(xiàn)了高度壓縮,節(jié)省存儲成本

采用 LSM 機制而不是B(+)樹,這使得HBase非常適合海量數(shù)據(jù)實時寫入的場景

高可靠,一個數(shù)據(jù)會包含多個副本(默認(rèn)是3副本),這得益于HDFS的復(fù)制能力,由RegionServer提供自動故障轉(zhuǎn)移的功能

高擴展,支持分片擴展能力(基于Region),可實現(xiàn)自動、數(shù)據(jù)均衡

強一致性讀寫,數(shù)據(jù)的讀寫都針對主Region上進行,屬于CP型的系統(tǒng)

易操作,HBase提供了Java API、RestAPI/Thrift API等接口

查詢優(yōu)化,采用Block Cache 和 布隆過濾器來支持海量數(shù)據(jù)的快速查找

與RDBMS的區(qū)別

對于傳統(tǒng) RDBMS 來說,支持 ACID 事務(wù)是數(shù)據(jù)庫的基本能力,而 HBase 則使用行級鎖來保證寫操作的原子性,但是不支持多行寫操作的事務(wù)性,這主要是從靈活性和擴展性上做出的權(quán)衡。

ACID 要素包含 原子性(Atomicity)、一致性(Consistency)、隔離性(Isolation)以及持久性(Durability)

總體來說, HBase 與傳統(tǒng)關(guān)系數(shù)據(jù)庫的區(qū)別,如下表所示:

Hbase的基礎(chǔ)性介紹與入門

二、數(shù)據(jù)模型

下面,我們以關(guān)系型數(shù)據(jù)庫的一個數(shù)據(jù)表來演示 HBase 的不同之處。

先來看下面這張表:

Hbase的基礎(chǔ)性介紹與入門

這里記錄的是一些家庭設(shè)備上報的狀態(tài)數(shù)據(jù)(DeviceState),其中包括設(shè)備名、狀態(tài)、時間戳這些字段。

在 HBase 中,數(shù)據(jù)是按照列族(Column Family,簡稱CF)來存儲的,也就是說對于不同的列會被分開存儲到不同的文件。那么對于上面的狀態(tài)數(shù)據(jù)表來說,在HBase中會被存儲為兩份:

列族1. 設(shè)備名

Hbase的基礎(chǔ)性介紹與入門

列族2. 狀態(tài)

Hbase的基礎(chǔ)性介紹與入門

這里Row-key是唯一定位數(shù)據(jù)行的ID字段,而Row-key 加上 CF、Column-Key,再加上一個時間戳才可以定位到一個單元格數(shù)據(jù)。其中時間戳用來表示數(shù)據(jù)行的版本, 在HBase中默認(rèn)會有 3 個時間戳的版本數(shù)據(jù),這意味著對同一條數(shù)據(jù)(同一個Rowkey關(guān)聯(lián)的數(shù)據(jù))進行寫入時,最多可以保存3個版本。

在查詢某一行的數(shù)據(jù)時,HBase需要同時從兩個列族(文件)中進行查找,最終將結(jié)果合并后返回給客戶端。 由此可見如果列族太多,則會影響讀取的性能,在設(shè)計時就需要做一些權(quán)衡。

由此可見,HBase的使用方式與關(guān)系型數(shù)據(jù)庫是大不相同的,在使用 HBase 時需要拋棄許多關(guān)系型數(shù)據(jù)庫的思維及做法,比如強類型、二級索引、表連接、觸發(fā)器等等。

然而 HBase 的靈活性及高度可伸縮性卻是傳統(tǒng) RDBMS 無法比擬的。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    9063

    瀏覽量

    143743
  • Hbase
    +關(guān)注

    關(guān)注

    0

    文章

    27

    瀏覽量

    11706
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    車載OBC電磁兼容測試必要分析報告

    車載OBC的電磁兼容測試需滿足從國際到企業(yè)的多層級法規(guī)要求,且標(biāo)準(zhǔn)換版與實施節(jié)點直接影響產(chǎn)品上市周期及合規(guī)。法規(guī)要求呈現(xiàn)明確的層級遞進結(jié)構(gòu):國際標(biāo)準(zhǔn)為基礎(chǔ)框架,區(qū)域標(biāo)準(zhǔn)為市場準(zhǔn)入門檻,企業(yè)標(biāo)準(zhǔn)則進一步細化技術(shù)要求。
    的頭像 發(fā)表于 01-28 16:31 ?147次閱讀
    車載OBC電磁兼容<b class='flag-5'>性</b>測試必要<b class='flag-5'>性</b>分析報告

    BlackBerry QNX與Vector發(fā)布Alloy Kore基礎(chǔ)性車輛軟件平臺

    BlackBerry有限公司(紐約證券交易所代碼:BB;多倫多證券交易所代碼:BB)旗下業(yè)務(wù)部門QNX與Vector今日發(fā)布Alloy Kore基礎(chǔ)性車輛軟件平臺(Foundational
    的頭像 發(fā)表于 01-10 09:45 ?2460次閱讀

    電池連接器氣密檢測儀操作入門指南-岳信儀器

    電池連接器的氣密對于電池的性能和安全至關(guān)重要,而電池連接器氣密檢測儀能有效檢測其氣密。下面為大家?guī)碓摍z測儀的操作入門指南。檢測前準(zhǔn)
    的頭像 發(fā)表于 09-26 11:29 ?482次閱讀
    電池連接器氣密<b class='flag-5'>性</b>檢測儀操作<b class='flag-5'>入門</b>指南-岳信儀器

    labview入門手冊

    電子發(fā)燒友網(wǎng)站提供《labview入門手冊.pdf》資料免費下載
    發(fā)表于 09-23 17:15 ?2次下載

    新手必看:電池包氣密檢測儀操作入門指南-岳信儀器

    對于剛接觸電池包氣密檢測儀的新手來說,了解其操作方法至關(guān)重要。下面就為大家詳細介紹電池包氣密檢測儀的操作入門知識。(1)操作前準(zhǔn)備在開啟檢測儀前,要確保設(shè)備放置于平穩(wěn)、干燥且通風(fēng)良
    的頭像 發(fā)表于 09-12 11:39 ?660次閱讀
    新手必看:電池包氣密<b class='flag-5'>性</b>檢測儀操作<b class='flag-5'>入門</b>指南-岳信儀器

    【PZ7020-StarLite 入門級開發(fā)板】——FPGA 開發(fā)的理想起點,入門與工業(yè)場景的雙重優(yōu)選

    對于初入 FPGA 與嵌入式系統(tǒng)開發(fā)領(lǐng)域的工程師而言,一款兼具專業(yè)與易用入門級開發(fā)板是快速建立技術(shù)認(rèn)知、提升實踐能力的關(guān)鍵工具。璞致電子科技(上海)有限公司深耕 SDR 及 ARM/FPGA
    的頭像 發(fā)表于 08-08 14:53 ?1217次閱讀
    【PZ7020-StarLite <b class='flag-5'>入門</b>級開發(fā)板】——FPGA 開發(fā)的理想起點,<b class='flag-5'>入門</b>與工業(yè)場景的雙重優(yōu)選

    CAN入門應(yīng)用手冊

    電子發(fā)燒友網(wǎng)站提供《CAN入門應(yīng)用手冊 .pdf》資料免費下載
    發(fā)表于 07-14 14:45 ?2次下載

    DSP從入門到精通全集

    這是一本循序漸進介紹DSP的書籍,從DSP的入門知識介紹到DPS的硬件,接口,應(yīng)用,從DSP的ADC/DAC到數(shù)字濾波器處理。本文除了對DSP的各種軟硬件知識進行介紹后,還結(jié)合實際,接
    發(fā)表于 07-12 14:36

    DeepSeek:從入門到精通

    電子發(fā)燒友網(wǎng)站提供《DeepSeek:從入門到精通.pdf》資料免費下載
    發(fā)表于 05-28 14:12 ?5次下載

    【「零基礎(chǔ)開發(fā)AI Agent」閱讀體驗】總體預(yù)覽及入門

    基礎(chǔ)知識有所補充,另外書本后面的案例也會對Ai的應(yīng)用產(chǎn)生一些啟發(fā). 首先老規(guī)矩,先看一下目錄結(jié)構(gòu) 包含3大主題: 入門篇:介紹了Agent的概念、發(fā)展、與Prompt和Copilot的區(qū)別
    發(fā)表于 04-20 21:53

    分布式存儲數(shù)據(jù)恢復(fù)—虛擬機上hbase和hive數(shù)據(jù)庫數(shù)據(jù)恢復(fù)案例

    分布式存儲數(shù)據(jù)恢復(fù)環(huán)境: 16臺某品牌R730xd服務(wù)器節(jié)點,每臺服務(wù)器節(jié)點上有數(shù)臺虛擬機。 虛擬機上部署Hbase和Hive數(shù)據(jù)庫。 分布式存儲故障: 數(shù)據(jù)庫底層文件被誤刪除,數(shù)據(jù)庫不能使用。要求恢復(fù)hbase和hive數(shù)據(jù)庫。
    的頭像 發(fā)表于 04-17 11:05 ?718次閱讀

    典型電路原理、電路識圖從入門到精通等資料

    1、電路識圖從入門到精通高清電子資料 由淺入深地介紹了電路圖的基礎(chǔ)知識、典型單元電路的識圖方法,通過“入門篇”和“精通篇”循序漸進、由淺入深地介紹了電路圖的基礎(chǔ)知識、典型單元電路的識圖
    的頭像 發(fā)表于 04-15 15:53 ?2.4w次閱讀
    典型電路原理、電路識圖從<b class='flag-5'>入門</b>到精通等資料

    電路識圖從入門到精通高清電子資料

    由淺入深地介紹了電路圖的基礎(chǔ)知識、典型單元電路的識圖方法,通過“入門篇”和“精通篇”循序漸進、由淺入深地介紹了電路圖的基礎(chǔ)知識、典型單元電路的識圖方法,以及典型小家電、電動車、洗衣機、電冰箱、空調(diào)器
    發(fā)表于 04-10 16:22

    矩陣混音技術(shù)快速入門

    A&H矩陣混音技術(shù)快速入門Live_Matrix_MixingChinese
    發(fā)表于 03-26 14:12 ?0次下載

    2025年氣密測試設(shè)備使用教程:入門必看,氣密測試儀使用方法

    在2025年的現(xiàn)代制造業(yè)中,氣密測試儀已成為確保產(chǎn)品品質(zhì)不可或缺的工具。無論是新能源汽車的電池包、精密醫(yī)療器械,還是高端消費電子產(chǎn)品,氣密測試都是生產(chǎn)流程中的關(guān)鍵環(huán)節(jié)。本文將詳細介紹如何正確操作
    的頭像 發(fā)表于 03-10 11:46 ?1716次閱讀
    2025年氣密<b class='flag-5'>性</b>測試設(shè)備使用教程:<b class='flag-5'>入門</b>必看,氣密<b class='flag-5'>性</b>測試儀使用方法