成人免费观看网欧美片-成人免费观看视频-成人免费观看男女羞羞视频-成人免费观看的视频黄页-成人免费高清视频-成人免费福利片在线观看

千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機(jī)構(gòu)

手機(jī)站
千鋒教育

千鋒學(xué)習(xí)站 | 隨時(shí)隨地免費(fèi)學(xué)

千鋒教育

掃一掃進(jìn)入千鋒手機(jī)站

領(lǐng)取全套視頻
千鋒教育

關(guān)注千鋒學(xué)習(xí)站小程序
隨時(shí)隨地免費(fèi)學(xué)習(xí)課程

當(dāng)前位置:首頁  >  技術(shù)干貨  > 為什么沒有以hbase作為存儲(chǔ)引擎的關(guān)系型數(shù)據(jù)庫實(shí)現(xiàn)?

為什么沒有以hbase作為存儲(chǔ)引擎的關(guān)系型數(shù)據(jù)庫實(shí)現(xiàn)?

來源:千鋒教育
發(fā)布人:xqq
時(shí)間: 2023-10-13 01:19:16 1697131156

一、為什么沒有以hbase作為存儲(chǔ)引擎的關(guān)系型數(shù)據(jù)庫實(shí)現(xiàn)

SQL引擎都可以作為hbase的SQL層。但是作為關(guān)系型數(shù)據(jù)庫,支持多表事務(wù),的確基于hbase沒有很好的解決方案。首先目前hbase的事務(wù)是針對(duì)單機(jī)region server單表行級(jí)事務(wù),也就是客戶端一次請(qǐng)求,將多筆記錄作為一條日志針對(duì)一個(gè)region進(jìn)行處理。成功則寫入memstore,失敗則wal回滾,所以事務(wù)操作并不復(fù)雜,但是若要在一次事務(wù)中實(shí)現(xiàn)多表寫入,多機(jī)region一致性協(xié)同,這在hbase設(shè)計(jì)之初并沒有考慮。

因此,若按照目前hbase的設(shè)計(jì),寫入不同hregionserver,再寫入不同region的memstore記錄,包括各個(gè)wal的記錄,必須保證一致性,這就是region分布式一致性的名列前茅難,必須要有集群一致性機(jī)制,例如paxos或者raft,可是hbase沒有,只有一個(gè)簡單的master解決region分片后的遷移平衡問題。必須要具備表表之間,列簇之間的ACID特性,hbase并沒有設(shè)計(jì)此處,他的master和region server在這些問題上基本沒有任何前期預(yù)留的分布式擴(kuò)展機(jī)制。

其次每次事務(wù)必然會(huì)有多次查詢請(qǐng)求,如果用tps代表事務(wù)吞吐,那么qps就代表了一次tps內(nèi)可能涉及數(shù)百次的查詢,我們可以忍受1秒1個(gè)事務(wù)操作,但是查詢不行,每次查詢必須能在毫秒內(nèi)完成,甚至更短周期,那么這就存在優(yōu)化問題了,如果查詢是熱點(diǎn)數(shù)據(jù)在memstore或者blockcache中,這還好說,但是在多個(gè)hfiile的磁盤中掃描這就慢了,例如:hbase的lsm-tree的刪除和更新都只是一條新紀(jì)錄的標(biāo)識(shí),這種用空間換取寫入性能的設(shè)計(jì),另外的副作用就是增加查詢量,過期數(shù)據(jù)在查詢中都掃描出來,由掃描器自己去過濾。那么為了解決查詢問題,就必須加大內(nèi)存和使用固態(tài)磁盤來解決查詢速度,這就是第二難,實(shí)際上hbase類lsm樹的查詢機(jī)制復(fù)雜度遠(yuǎn)高于寫入,而且提升基礎(chǔ)資源成本改善性能并不具有普適性,這就是另一個(gè)問題了!

或許LevelDB,rocksdb,這些輕量級(jí)的kv的查詢性能比起hbase會(huì)更適合事務(wù)單元內(nèi)的高密度kv查詢,但hbase還是傾向于大吞吐kv寫入和熱點(diǎn)數(shù)據(jù)查詢用于支撐實(shí)時(shí)流處理過程的流庫連接。因此我認(rèn)為hbase要是考慮在未來支持分布式rdbms,必須得徹底升級(jí)master服務(wù)支撐region server的分布式一致性,并且實(shí)現(xiàn)跨表的ACID特性支持,最后就是region級(jí)別的讀優(yōu)化。

延伸閱讀:

二、MongoDB是什么

非關(guān)系型數(shù)據(jù)庫(nosql ),屬于文檔型數(shù)據(jù)庫。MongoDB采用類JSON的documents來存儲(chǔ)數(shù)據(jù)。數(shù)據(jù)結(jié)構(gòu)由鍵值(key=>value)對(duì)組成。

MongoDB采用動(dòng)態(tài)數(shù)據(jù)模型schema,這意味著不需要預(yù)先定義表的數(shù)據(jù)類型和字段名。當(dāng)MongoDB需要更新文檔documents的時(shí)候,可以輕松增加新的字段名或者刪除舊的字段。MongoDB讓數(shù)據(jù)結(jié)構(gòu)更加層級(jí)化,因而存儲(chǔ)數(shù)組等復(fù)雜數(shù)據(jù)結(jié)構(gòu)。 在同一個(gè)集合collection中,文檔document對(duì)字段也沒有強(qiáng)約束,因此更容易設(shè)計(jì)差異化的數(shù)據(jù)結(jié)構(gòu)。

聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
10年以上業(yè)內(nèi)強(qiáng)師集結(jié),手把手帶你蛻變精英
請(qǐng)您保持通訊暢通,專屬學(xué)習(xí)老師24小時(shí)內(nèi)將與您1V1溝通
免費(fèi)領(lǐng)取
今日已有369人領(lǐng)取成功
劉同學(xué) 138****2860 剛剛成功領(lǐng)取
王同學(xué) 131****2015 剛剛成功領(lǐng)取
張同學(xué) 133****4652 剛剛成功領(lǐng)取
李同學(xué) 135****8607 剛剛成功領(lǐng)取
楊同學(xué) 132****5667 剛剛成功領(lǐng)取
岳同學(xué) 134****6652 剛剛成功領(lǐng)取
梁同學(xué) 157****2950 剛剛成功領(lǐng)取
劉同學(xué) 189****1015 剛剛成功領(lǐng)取
張同學(xué) 155****4678 剛剛成功領(lǐng)取
鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
董同學(xué) 138****2867 剛剛成功領(lǐng)取
周同學(xué) 136****3602 剛剛成功領(lǐng)取
相關(guān)推薦HOT
文件系統(tǒng)和數(shù)據(jù)庫是由于什么原因才選擇B樹或B+樹建立?

一、文件系統(tǒng)和數(shù)據(jù)庫是由于什么原因才選擇B樹或B+樹建立索引的索引的目標(biāo)是要找到數(shù)據(jù)所在的物理位置,因此用樹去實(shí)現(xiàn)搜索數(shù)據(jù)所在物理位置,...詳情>>

2023-10-13 03:03:02
系統(tǒng)運(yùn)維、IT運(yùn)維、網(wǎng)絡(luò)運(yùn)維、數(shù)據(jù)庫運(yùn)維有哪些區(qū)別?

一、系統(tǒng)運(yùn)維、IT運(yùn)維、網(wǎng)絡(luò)運(yùn)維、數(shù)據(jù)庫運(yùn)維區(qū)別網(wǎng)絡(luò)運(yùn)維,數(shù)據(jù)庫運(yùn)維,Linux運(yùn)維,window運(yùn)維,桌面運(yùn)維,根底架構(gòu)運(yùn)維,信息體系運(yùn)維,ERP體...詳情>>

2023-10-13 02:58:27
QQ數(shù)據(jù)庫是怎樣設(shè)計(jì)的?

一、QQ數(shù)據(jù)庫是怎樣設(shè)計(jì)的1、對(duì)于群成員上限的問題,不是從數(shù)據(jù)庫層面解決的,而應(yīng)該有專門的“配額檢查”服務(wù)/邏輯,在群成員人數(shù)變化時(shí)用來判...詳情>>

2023-10-13 02:36:05
RESTful API的命名有什么講究?

一、RESTful API的命名有什么講究和目錄沒關(guān)系,通常是框架路由接管的 request uri解析出來的(v1、v2有可能是實(shí)際的目錄)restful規(guī)范/資源名/...詳情>>

2023-10-13 02:32:10
mysql為什么需要undo log?

一、mysql為什么需要undo logMySQL是原地更新記錄的,事務(wù)的更新是直接作用到舊有記錄,舊有記錄被寫到undo。同時(shí),它又是steal的,意味著未提...詳情>>

2023-10-13 02:26:50
快速通道