久久精品国产亚洲高清|精品日韩中文乱码在线|亚洲va中文字幕无码久|伊人久久综合狼伊人久久|亚洲不卡av不卡一区二区|精品久久久久久久蜜臀AV|国产精品19久久久久久不卡|国产男女猛烈视频在线观看麻豆

    1. <style id="76ofp"></style>

      <style id="76ofp"></style>
      <rt id="76ofp"></rt>
      <form id="76ofp"><optgroup id="76ofp"></optgroup></form>
      1. 千鋒教育-做有情懷、有良心、有品質的職業(yè)教育機構

        手機站
        千鋒教育

        千鋒學習站 | 隨時隨地免費學

        千鋒教育

        掃一掃進入千鋒手機站

        領取全套視頻
        千鋒教育

        關注千鋒學習站小程序
        隨時隨地免費學習課程

        當前位置:首頁  >  技術干貨  > OceanBase的memtable設計成key為主鍵,value為行操作鏈表的目的是什么?

        OceanBase的memtable設計成key為主鍵,value為行操作鏈表的目的是什么?

        來源:千鋒教育
        發(fā)布人:xqq
        時間: 2023-10-13 08:30:34 1697157034

        一、OceanBase的memtable設計成key為主鍵,value為行操作鏈表的目的

        這是MVCC多版本并發(fā)控制的一種實現(xiàn)方式,寫不阻塞讀,并且讀可以讀到一個快照版本。實現(xiàn)MVCC可以有多種方法,下面我解釋一下幾種可能的實現(xiàn)方法,并分析一下各方法的優(yōu)劣

        B+tree是索引,可以通過一行的key,索引到其value,索引還可以是其它的,比如Rocksdb和MemSQL用的是skiplist,還可以是Hashtable,還有一些新的數(shù)據(jù)結構微軟Hekaton用的bw-tree,HyPer用的adaptive radix tree等。B+tree是非常合適的,對范圍查詢和點查詢都不錯,對于CPU Cache非常友好,可以做到很高的性能,至于用skiplist的數(shù)據(jù)庫,看了一他們選擇這個的理由,文檔里基本都是說因為實現(xiàn)起來比較簡單,B+tree實現(xiàn)起來太復雜了。不過OceanBase的前輩們把內存B+tree實現(xiàn)的非常好,可以看到實力非常強,不需要因為某些東西簡單而去選擇用那個東西。

        下面說一下幾種實現(xiàn)方法,主要說的是MVCC,就不說B+tree了

        1. 完整數(shù)據(jù)直接存Row里,新版本在前

        讀的時候,有一個snapshot version,比如是7,就需要找到名列前茅個小于7的版本,v=6的那個數(shù)據(jù)

        優(yōu)點:如果更新不頻繁,大部分查詢所需的數(shù)據(jù)版本都是最新的,通過索引找到某一行,直接通過指針就可以找到所需數(shù)據(jù)。通過指針就是一次內存的隨機訪問,100ns,當然還有其它處理數(shù)據(jù)的開銷。

        缺點:更新數(shù)據(jù)的時候,需要申請一塊新的內存空間存儲數(shù)據(jù),由于它需要被放鏈表首位置,索引就需要指向它,因此需要更新一下索引的指針,使其指向新的數(shù)據(jù)。

        2. 完整數(shù)據(jù)直接存Row里,老版本在前

        優(yōu)點:更新的時候,直接插到鏈表的最后就好了,不需要再更新索引的指針

        缺點:查詢的時候,可能需要順著鏈表找很多結點才能找到所需版本的數(shù)據(jù),而每一次都是一次內存隨機訪問,需要(n*100)ns。

        3. 更新數(shù)據(jù)存在Node里,然后通過Row指向Node,定期做壓縮

        優(yōu)點:更新的時候,直接插入Row的指針指向的名列前茅個位置就好了,而且不需要像第1種方法那樣更新索引。另一個優(yōu)點是,由于只存儲增量數(shù)據(jù),能節(jié)省很多內存,尤其是當一個表的列數(shù)非常多的時候

        缺點:查詢的時候,就算是需要查詢最新的版本,也可能需要遍歷多個node才能得到完整的數(shù)據(jù)。不過當更新過多時,可以通過壓縮,將多個更新合并成完整數(shù)據(jù),存到一個新的node中,一定程度上緩解這個問題

        4. 數(shù)據(jù)存到一塊連續(xù)的內存中

        前面幾種方法都是,當插入一行新的數(shù)據(jù)時,申請一塊內存,存數(shù)據(jù),或者存更新node,這會導致做scan的時候比較慢。因為做scan的時候,需要通過索引中的指針才能找到數(shù)據(jù),做scan是先對索引進行scan,再找到相應的數(shù)據(jù),而每一次內存隨機訪問是100ns,也就是每秒掃描的數(shù)據(jù)量不可能超過1s/100ns=1000萬

        所以可以申請一塊大內存,類似一個存struct的數(shù)組,然后把每一行存到這個數(shù)組里,定長數(shù)據(jù)直接存,變長數(shù)據(jù)用指針,對于小字符串,可以做一個優(yōu)化,將字符串分成2部分,前面小的一部分可以直接存數(shù)據(jù)里,然后通過指針指向另一部分

        至于多版本和增量數(shù)據(jù),可以按照前面幾種方法做選擇

        做點查詢的時候,通過索引查,做scan的時候,看查詢的數(shù)據(jù)情況,當數(shù)據(jù)量大時,直接scan數(shù)組是更快的,數(shù)據(jù)量小時,仍然通過索引做范圍查找

        優(yōu)點:一些情況下,scan的性能更高

        缺點:由于是原地更改row里的數(shù)據(jù),讀寫的時候都需要加鎖(latch),更新多的時候,對讀不友好

        延伸閱讀:

        二、網絡附加存儲(NAS)

        NAS指Network Area Storage,即網絡附加存儲。它一般是將本地的存儲空間共享給其他主機使用,一般通過C/S架構實現(xiàn)通信。它實現(xiàn)的是文件級別的共享,計算機通常將共享的設別識別為一個文件系統(tǒng),其文件服務器會管理鎖以實現(xiàn)并發(fā)訪問。網絡文件系統(tǒng),以文件模塊的形式進行共享,工作在應用層上,常見的NAS有NFS和CIFS(FTP)。

        聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
        10年以上業(yè)內強師集結,手把手帶你蛻變精英
        請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
        免費領取
        今日已有369人領取成功
        劉同學 138****2860 剛剛成功領取
        王同學 131****2015 剛剛成功領取
        張同學 133****4652 剛剛成功領取
        李同學 135****8607 剛剛成功領取
        楊同學 132****5667 剛剛成功領取
        岳同學 134****6652 剛剛成功領取
        梁同學 157****2950 剛剛成功領取
        劉同學 189****1015 剛剛成功領取
        張同學 155****4678 剛剛成功領取
        鄒同學 139****2907 剛剛成功領取
        董同學 138****2867 剛剛成功領取
        周同學 136****3602 剛剛成功領取
        相關推薦HOT
        app的啟動流程都包括哪些步驟?

        一、app的啟動流程包括的步驟1、創(chuàng)建進程App發(fā)起進程:當從桌面啟動應用,則發(fā)起進程便是Launcher所在進程;當從某App內啟動遠程進程,則發(fā)送進...詳情>>

        2023-10-13 10:03:27
        怎么理解Mongodb是介于關系型和非關系型的數(shù)據(jù)庫?

        一、怎么理解Mongodb是介于關系型和非關系型的數(shù)據(jù)庫MongoDB被稱為介于關系型數(shù)據(jù)庫(RDBMS)和非關系型數(shù)據(jù)庫(NoSQL)之間,這是因為它在以下...詳情>>

        2023-10-13 09:55:50
        DBeaver怎么保持數(shù)據(jù)庫連接?

        一、DBeaver保持數(shù)據(jù)庫連接的方法1、連接到數(shù)據(jù)庫打開DBeaver并選擇連接到您的目標數(shù)據(jù)庫。選擇適當?shù)臄?shù)據(jù)庫類型,輸入必要的連接信息,如主機...詳情>>

        2023-10-13 09:05:04
        Kettle連接MySQL為什么會報錯?

        一、Kettle連接MySQL會報錯的原因1、驅動程序缺失Kettle需要使用MySQL的JDBC驅動程序來連接MySQL數(shù)據(jù)庫。如果沒有正確配置或提供JDBC驅動程序,...詳情>>

        2023-10-13 08:53:41
        wait()、sleep()、join()和yield()區(qū)別是什么?

        一、wait()wait()方法是Object類中的方法,主要用于線程間的同步和協(xié)作。當一個線程調用某個對象的wait()方法時,它會釋放該對象的鎖,并進入等...詳情>>

        2023-10-13 08:45:29
        托克逊县| 上栗县| 望江县| 石首市| 普格县| 彩票| 舞钢市| 长葛市| 邢台市| 康乐县| 华亭县| 宾阳县| 阜新市| 大田县| 东阳市| 富裕县| 大田县| 天祝| 凭祥市| 濮阳县| 镇赉县| 宁陕县| 怀宁县| 惠来县| 张家港市| 新和县| 万山特区| 五家渠市| 洞头县| 商河县| 北流市| 遂川县| 阿尔山市| 余干县| 柏乡县| 兰州市| 五常市| 广元市| 嘉峪关市| 高台县| 张家界市|