軟件系統(tǒng)的數(shù)據(jù)檢索設(shè)計(jì)
軟件系統(tǒng)的數(shù)據(jù)檢索設(shè)計(jì)
隨著業(yè)務(wù)量加大，數(shù)據(jù)檢索量也會(huì)日益增多，為了減輕數(shù)據(jù)庫壓力，本系統(tǒng)采用ElasticSearch來實(shí)現(xiàn)數(shù)據(jù)檢索功能。
簡單來說，Elasticsearch 是一個(gè)實(shí)時(shí)的分布式存儲(chǔ)、搜索、分析的引擎，它可以近乎實(shí)時(shí)的存儲(chǔ)、檢索數(shù)據(jù)，本身擴(kuò)展性很好，可以擴(kuò)展到上百臺(tái)服務(wù)器，處理PB級別(大數(shù)據(jù)時(shí)代)的數(shù)據(jù)，ElasticSearch的檢索流程如下：
數(shù)據(jù)檢索流程圖
1) 執(zhí)行refresh操作將mem buffer中的數(shù)據(jù)寫入到新的segment并寫入os cache，然后打開本segment以供search使用，最后再次清空mem buffer。
2) 一個(gè)commit point被寫入磁盤，這個(gè)commit point中標(biāo)明所有的index segment。
3) filesystem cache(os cache)中緩存的所有的index segment文件被fsync強(qiáng)制刷到磁盤os disk，當(dāng)index segment被fsync強(qiáng)制刷到磁盤上以后，就會(huì)被打開，供查詢使用。
translog被清空和刪除，創(chuàng)建一個(gè)新的translog。
審核編輯 黃宇
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問題，請聯(lián)系本站處理。
舉報(bào)投訴
-
數(shù)據(jù)
+關(guān)注
關(guān)注
8文章
7332瀏覽量
94637 -
軟件系統(tǒng)
+關(guān)注
關(guān)注
0文章
70瀏覽量
9801
發(fā)布評論請先 登錄
相關(guān)推薦
熱點(diǎn)推薦
RAG(檢索增強(qiáng)生成)原理與實(shí)踐
，顯著提升了AI系統(tǒng)的準(zhǔn)確性和實(shí)用性。
關(guān)鍵要點(diǎn)回顧
向量檢索是基礎(chǔ) ：選擇合適的Embedding模型和向量數(shù)據(jù)庫至關(guān)重要
上下文注入是關(guān)鍵 ：精心設(shè)計(jì)的Prompt能大幅提升答案質(zhì)量
優(yōu)化是持續(xù)
發(fā)表于 02-11 12:46
在線測徑儀是否配備測控軟件分析系統(tǒng)？
主流工業(yè)級在線測徑儀均標(biāo)配專業(yè)測控軟件分析系統(tǒng)，這是實(shí)現(xiàn)實(shí)時(shí)監(jiān)測、數(shù)據(jù)追溯、質(zhì)量管控的核心組成部分，也是金屬加工等高精度生產(chǎn)場景中不可或缺的功能模塊。但也有些廠家對分析功能要求不高，而沒有配置測控
發(fā)表于 12-03 14:10
電能質(zhì)量在線監(jiān)測裝置歷史波形回放的操作流程是怎樣的
電能質(zhì)量在線監(jiān)測裝置的歷史波形回放操作需結(jié)合設(shè)備類型、存儲(chǔ)方式及訪問權(quán)限，通常分為本地操作和遠(yuǎn)程訪問兩類流程。以下是基于主流設(shè)備特性的詳細(xì)步驟說明，涵蓋數(shù)據(jù)檢索、波形查看、分析及導(dǎo)出全流程，并附典型
數(shù)據(jù)采集系統(tǒng)GM10標(biāo)配軟件功能亮點(diǎn)
支持把橫河GM10數(shù)據(jù)采集系統(tǒng)內(nèi)存文件復(fù)制到本地，并直接調(diào)用軟件分析，升級后的iDAQAnywhere軟件，可以直接獲取GM10主機(jī)內(nèi)存文件(GEV等)，并復(fù)制到本地計(jì)算機(jī)。用戶只要雙
孔夫子舊書網(wǎng)開放平臺(tái)接口實(shí)戰(zhàn)：古籍圖書檢索與商鋪數(shù)據(jù)集成
本文詳解孔夫子舊書網(wǎng)古籍數(shù)據(jù)接口的實(shí)戰(zhàn)調(diào)用，涵蓋認(rèn)證簽名、古籍檢索、商鋪集成與特色數(shù)據(jù)處理四大場景，提供可復(fù)用的Python代碼及避坑指南，助力學(xué)術(shù)研究、舊書商管理與古籍?dāng)?shù)字化落地。
后臺(tái)系統(tǒng)顯示 “數(shù)據(jù)亂碼”，是通信問題還是軟件問題？
后臺(tái)系統(tǒng)顯示 “數(shù)據(jù)亂碼” 的核心原因是 **“數(shù)據(jù)的編碼格式與解碼格式不匹配”** 或 “數(shù)據(jù)在傳輸 / 處理過程中被破壞” ，通信問題和軟件
怎樣確保數(shù)據(jù)管理平臺(tái)的軟件系統(tǒng)穩(wěn)定性？
確保電能質(zhì)量在線監(jiān)測裝置 數(shù)據(jù)管理平臺(tái)軟件系統(tǒng)的穩(wěn)定性 ，需圍繞 “架構(gòu)設(shè)計(jì)、數(shù)據(jù)處理、容錯(cuò)災(zāi)備、性能優(yōu)化、安全防護(hù)、測試驗(yàn)證、運(yùn)維保障”7 大核心維度構(gòu)建體系化方案，結(jié)合電能質(zhì)量監(jiān)測
電磁環(huán)境數(shù)據(jù)庫管理系統(tǒng)平臺(tái)軟件解析
電磁環(huán)境數(shù)據(jù)庫管理平臺(tái)軟件解析(精簡版)
【干貨速遞】嵌入式數(shù)據(jù)可靠性，軟件設(shè)計(jì)的這些細(xì)節(jié)不能忽視！
問題。軟件設(shè)計(jì)軟件設(shè)計(jì)在嵌入式數(shù)據(jù)存儲(chǔ)可靠性中扮演著至關(guān)重要的角色。它不僅包括系統(tǒng)驅(qū)動(dòng)的開發(fā)，還涉及應(yīng)用層面的優(yōu)化。一個(gè)精心設(shè)計(jì)的軟件
產(chǎn)品列表獲取API接口詳解
? 在現(xiàn)代軟件開發(fā)中，API（應(yīng)用程序編程接口）是獲取產(chǎn)品列表的核心工具，它允許開發(fā)者從遠(yuǎn)程服務(wù)器高效地檢索數(shù)據(jù)。本文將逐步介紹如何設(shè)計(jì)和使用產(chǎn)品列表獲取API接口，包括核心概念、實(shí)現(xiàn)步驟、代碼示例
Microchip擴(kuò)展連接、存儲(chǔ)與計(jì)算產(chǎn)品組合
與數(shù)據(jù)檢索的先進(jìn)技術(shù)，以滿足不斷演進(jìn)的市場需求。Microchip的數(shù)據(jù)中心生態(tài)系統(tǒng)包含工作負(fù)載加速、電源管理、設(shè)備性能優(yōu)化與控制等全方位賦能技術(shù)組合，助力數(shù)據(jù)中心應(yīng)對當(dāng)今技術(shù)需求日益
電磁數(shù)據(jù)展示系統(tǒng)軟件平臺(tái)全面解析
電磁數(shù)據(jù)展示系統(tǒng)軟件平臺(tái)全面解析
將NXP RT1166更換為RT1064，可以使用JTAG/SWD存儲(chǔ)和檢索其閃存上的數(shù)據(jù)嗎？
我在我的項(xiàng)目中使用了 RT1166，但是，其中一個(gè)要求是芯片應(yīng)該具有可被 JTAG/SWD 訪問的內(nèi)部閃存。 RT1166 有，但 RT1064 有 4MB 的內(nèi)部 Flash。
我可以使用 JTAG/SWD 存儲(chǔ)和檢索其閃存上的數(shù)據(jù)嗎？
發(fā)表于 04-07 06:29
《AI Agent 應(yīng)用與項(xiàng)目實(shí)戰(zhàn)》閱讀心得3——RAG架構(gòu)與部署本地知識庫
則將檢索到的內(nèi)容與原始查詢結(jié)合，生成最終響應(yīng)。這種設(shè)計(jì)使得AI系統(tǒng)能夠突破訓(xùn)練數(shù)據(jù)的限制，實(shí)現(xiàn)知識的動(dòng)態(tài)更新。書中詳細(xì)介紹了RAG的完整工作流程：從數(shù)據(jù)提取開始，通過文本分割將長文檔切
發(fā)表于 03-07 19:49
工商網(wǎng)監(jiān)
評論