資料介紹
軟件簡介
LogDevice 是 Facebook 開源的一個(gè)可擴(kuò)展,具備容錯(cuò)性的分布式日志系統(tǒng)。
LogDevice 是專為日志設(shè)計(jì)的分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)。一般的文件系統(tǒng)會(huì)將數(shù)據(jù)儲(chǔ)存為文件,LogDevice 會(huì)將數(shù)據(jù)存儲(chǔ)為日志,這些日志可被視為記錄式的,追加式的和可修剪的文件。
-
記錄式的(record-oriented)意味著數(shù)據(jù)作為不可分割的記錄寫入日志,而不是單個(gè)字節(jié)。日志實(shí)質(zhì)上是問題的最小單元,用戶也一定是讀取整行日志。日志的存儲(chǔ)原則是按照日志序列號(hào)(LSN)來存放,且編號(hào)不保證是連續(xù)的,可能存在間隙。作者不會(huì)事先知道成功寫入后將為其日志分配什么 LSN ,這樣日志系統(tǒng)就可以優(yōu)先高寫入需求,對(duì)寫入失敗容錯(cuò)。
-
日志是追加式的(append-only),不支持修改現(xiàn)有記錄。
-
日志在被刪除之前預(yù)計(jì)會(huì)存在相對(duì)較長一段時(shí)間:幾天、幾月甚至幾年。日志的主要空間回收機(jī)制是修剪(trimming),根據(jù)基于時(shí)間或基于空間的保留策略,刪除最舊的記錄,或響應(yīng)修剪日志的請(qǐng)求。
LogDevice 從頭開始設(shè)計(jì),可提供大規(guī)模、高可靠性和高效率的多種日志類型。它還具備高度可調(diào)性,允許對(duì)每個(gè)用例進(jìn)行優(yōu)化,以便在從耐久性到效率性,一致性到可用性中進(jìn)行恰當(dāng)?shù)臋?quán)衡取舍。
?LogDevice 支持的一些 workload 示例:
-
預(yù)寫式日志
-
在分布式數(shù)據(jù)庫中記錄日志
-
事件日志
-
流處理
-
ML 訓(xùn)練流程
-
復(fù)制狀態(tài)機(jī)
-
延期工作項(xiàng)目進(jìn)度
- 分布式電源對(duì)配電系統(tǒng)的影響分析
- 基于Simulink的電子對(duì)抗分布式仿真系統(tǒng) 26次下載
- 基于KingSCADA的分布式運(yùn)動(dòng)控制監(jiān)測(cè)系統(tǒng) 10次下載
- 分布式存儲(chǔ)系統(tǒng)的局部修復(fù)碼分析 19次下載
- 分布式存儲(chǔ)系統(tǒng)中的糾刪碼容錯(cuò)方法綜述 4次下載
- 一種基于區(qū)塊鏈的日志安全存儲(chǔ)方法 7次下載
- Ceph分布式存儲(chǔ)系統(tǒng)性能優(yōu)化研究綜述 5次下載
- 基于分布式數(shù)據(jù)Cache的實(shí)時(shí)動(dòng)態(tài)遷移機(jī)制 20次下載
- 一種可行的分布式存儲(chǔ)系統(tǒng)安全構(gòu)造方法 21次下載
- 云存儲(chǔ)中的Ceph分布式文件系統(tǒng)及節(jié)點(diǎn)選擇 13次下載
- 一種面向高性能計(jì)算的分布式對(duì)象存儲(chǔ)系統(tǒng) 0次下載
- 基于再生碼的分布式存儲(chǔ)節(jié)點(diǎn)修復(fù)優(yōu)化 1次下載
- 基于高清視頻數(shù)據(jù)的高性能分布式存儲(chǔ)系統(tǒng) 1次下載
- 集群環(huán)境下分布式索引的實(shí)現(xiàn) 0次下載
- 網(wǎng)絡(luò)取證日志分布式安全管理
- Ceph分布式存儲(chǔ)系統(tǒng)解析 828次閱讀
- 分布式存儲(chǔ)架構(gòu)面臨的挑戰(zhàn) 2.8k次閱讀
- 如何使用分布式存儲(chǔ)系統(tǒng)促進(jìn)AI模型訓(xùn)練 1.3k次閱讀
- 一文參透分布式存儲(chǔ)系統(tǒng)Ceph的架構(gòu)設(shè)計(jì)、集群搭建 2k次閱讀
- 應(yīng)對(duì)海量圖片存儲(chǔ)的分布式存儲(chǔ)解決方案 4.3k次閱讀
- 關(guān)于騰訊的開源分布式存儲(chǔ)系統(tǒng)DCache 2.3k次閱讀
- 分布式存儲(chǔ)的系統(tǒng)架構(gòu) 2.4k次閱讀
- 淺談分布式存儲(chǔ)的六大優(yōu)點(diǎn) 9.4k次閱讀
- 存儲(chǔ)分布式系統(tǒng)中如何從CAP轉(zhuǎn)到PACELC 3k次閱讀
- 基于單機(jī)存儲(chǔ)系統(tǒng)故障恢復(fù) 1.2k次閱讀
- 分布式存儲(chǔ)運(yùn)維系統(tǒng)構(gòu)架簡析 2.9k次閱讀
- 淺談分布式塊存儲(chǔ)的元數(shù)據(jù)服務(wù)設(shè)計(jì) 5.4k次閱讀
- 分布式存儲(chǔ)集群設(shè)計(jì),集群網(wǎng)絡(luò)規(guī)劃方案 3.2k次閱讀
- 深度解讀分布式存儲(chǔ)技術(shù)之分布式剪枝系統(tǒng) 2.2k次閱讀
- 分布式存儲(chǔ)系統(tǒng)技術(shù)解讀 4.2k次閱讀
下載排行
本周
- 1矽力杰 Silergy SY7215A 同步升壓調(diào)節(jié)器 規(guī)格書 Datasheet 佰祥電子
- 1.12 MB | 5次下載 | 免費(fèi)
- 2HT81696H 內(nèi)置升壓的30W立體聲D類音頻功放數(shù)據(jù)手冊(cè)
- 1.21 MB | 1次下載 | 免費(fèi)
- 3HTA6863 3W超低噪聲超低功耗單聲道D類音頻功率放大器數(shù)據(jù)手冊(cè)
- 0.87 MB | 次下載 | 免費(fèi)
- 4南芯 Southchip SC8802C 充電控制器 規(guī)格書 Datasheet 佰祥電子
- 88.16 KB | 次下載 | 免費(fèi)
- 5矽力杰 Silergy SY7065 同步升壓轉(zhuǎn)換器 規(guī)格書 Datasheet 佰祥電子
- 910.67 KB | 次下載 | 免費(fèi)
- 6矽力杰 Silergy SY7066 同步升壓轉(zhuǎn)換器 規(guī)格書 Datasheet 佰祥電子
- 989.14 KB | 次下載 | 免費(fèi)
- 7WD6208A產(chǎn)品規(guī)格書
- 631.24 KB | 次下載 | 免費(fèi)
- 8NB685 26 V,12 A,低靜態(tài)電流,大電流 同步降壓變換器數(shù)據(jù)手冊(cè)
- 1.64 MB | 次下載 | 2 積分
本月
- 1EMC PCB設(shè)計(jì)總結(jié)
- 0.33 MB | 12次下載 | 免費(fèi)
- 2PD取電芯片 ECP5702規(guī)格書
- 0.88 MB | 5次下載 | 免費(fèi)
- 3矽力杰 Silergy SY7215A 同步升壓調(diào)節(jié)器 規(guī)格書 Datasheet 佰祥電子
- 1.12 MB | 5次下載 | 免費(fèi)
- 4氮化鎵GaN FET/GaN HEMT 功率驅(qū)動(dòng)電路選型表
- 0.10 MB | 3次下載 | 免費(fèi)
- 5PD取電芯片,可取5/9/12/15/20V電壓ECP5702數(shù)據(jù)手冊(cè)
- 0.88 MB | 3次下載 | 免費(fèi)
- 6SY50655 用于高輸入電壓應(yīng)用的偽固定頻率SSR反激式穩(wěn)壓器英文資料
- 1.01 MB | 3次下載 | 免費(fèi)
- 7怎么為半導(dǎo)體測(cè)試儀選擇精密放大器
- 0.65 MB | 2次下載 | 免費(fèi)
- 8SY52341 次級(jí)側(cè)同步整流英文手冊(cè)
- 0.94 MB | 2次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233095次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191469次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183360次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81606次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73832次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問
發(fā)資料
發(fā)視頻
上傳資料賺積分
評(píng)論