DingoDB多模數(shù)據(jù)庫(kù)：融合SQL、向量和文檔的多路召回?cái)?shù)據(jù)庫(kù)

DingoDB多模數(shù)據(jù)庫(kù)融合SQL、向量和文檔的多路召回?cái)?shù)據(jù)庫(kù)胡宗星｜北京九章云極科技有限公司 01AGI時(shí)代的數(shù)據(jù)架構(gòu)演進(jìn) AGI時(shí)代的數(shù)據(jù)演進(jìn)數(shù)據(jù)架構(gòu)的演進(jìn)OLAP、統(tǒng)計(jì)、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、自助分析、分析建議、AIGC、AutoMLGPTOLAP、統(tǒng)計(jì)、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、自助分析、分析建議、AIGC、AutoMLGPTNewDataStack時(shí)代的數(shù)據(jù)地圖…VectorOcean……NewDataStack時(shí)代的數(shù)據(jù)地圖………VectorOcean時(shí)代的數(shù)據(jù)底座多模數(shù)據(jù)庫(kù)DingoDB的技術(shù)架構(gòu)多模數(shù)據(jù)庫(kù)的技術(shù)挑戰(zhàn)多種模態(tài)的數(shù)據(jù)高效存儲(chǔ)簡(jiǎn)介的訪問(wèn)方式多種模態(tài)數(shù)據(jù)的召回能力數(shù)據(jù)的一致性問(wèn)題提供亞秒級(jí)點(diǎn)查的能力數(shù)據(jù)的穩(wěn)定性和隔離性問(wèn)題DingoDB多模數(shù)據(jù)庫(kù)——邏輯架構(gòu)StructuredStructuredDataUnstructuredUnstructuredDataMulti-modalMulti-modalExecute多模數(shù)據(jù)庫(kù)DingoDB多模數(shù)據(jù)庫(kù)——技術(shù)能力DingoDB多模數(shù)據(jù)庫(kù)——全面統(tǒng)一的訪問(wèn)接口我想要一款類(lèi)似圖‘20003000’之間的‘具備防水功能’手表。FeatureExtraction↓SQL我想要一款類(lèi)似圖‘20003000’之間的‘具備防水功能’手表。FeatureExtraction↓SQLTextQueryFeatureVectorDingoDB標(biāo)量檢索向量檢索標(biāo)量檢索向量檢索文本檢索DingoDB“價(jià)格”versatility.DingoDB多模數(shù)據(jù)庫(kù)——特點(diǎn)總結(jié)支持支持MySQL協(xié)議支持多語(yǔ)言原生SDK直接訪問(wèn)高可用、高可擴(kuò)展性、Share-Nothing的分布式架構(gòu)支持標(biāo)量、文檔和向量聯(lián)合檢索開(kāi)源開(kāi)放（產(chǎn)品開(kāi)源、擁抱社區(qū)生態(tài)：LangChain）業(yè)界唯一同時(shí)支持SQL和VectorFirst-ClassCitizen的多模數(shù)據(jù)庫(kù)單一軟件方案，無(wú)需引入其他軟件系統(tǒng)?既是關(guān)系數(shù)據(jù)庫(kù)：支持SQL，支持事務(wù)，符合用戶使用關(guān)系型數(shù)據(jù)庫(kù)的習(xí)慣?也是向量數(shù)據(jù)庫(kù)：支持多種語(yǔ)言的SDK，可以像使用大多數(shù)純向量數(shù)據(jù)庫(kù)一樣，無(wú)縫對(duì)接LLM應(yīng)用?同時(shí)具備強(qiáng)大的文檔檢索能力：支持關(guān)鍵詞搜索、正則表達(dá)式搜索等多種搜索方式，無(wú)縫實(shí)現(xiàn)多模態(tài)的數(shù)據(jù)檢索。NO.01DingoDB多模數(shù)據(jù)庫(kù)——多模+向量的信通院權(quán)威測(cè)試NO.01NO.02NO.02基于DingoDB的RAG實(shí)踐企業(yè)級(jí)RAG應(yīng)用的困境企業(yè)私有數(shù)據(jù)通常包含高度敏感的信息，如何在使用大模型時(shí)保護(hù)這些數(shù)據(jù)的隱私和安全，防止數(shù)據(jù)泄露，是一個(gè)重大企業(yè)私有數(shù)據(jù)通常包含高度敏感的信息，如何在使用大模型時(shí)保護(hù)這些數(shù)據(jù)的隱私和安全，防止數(shù)據(jù)泄露，是一個(gè)重大傳統(tǒng)向量檢索依賴(lài)內(nèi)存空間進(jìn)行召回，導(dǎo)致資源消耗巨大并傳統(tǒng)向量檢索依賴(lài)內(nèi)存空間進(jìn)行召回，導(dǎo)致資源消耗巨大并企業(yè)級(jí)應(yīng)用要求系統(tǒng)需要具有高可靠性和冗余設(shè)計(jì)，以應(yīng)對(duì)企業(yè)級(jí)應(yīng)用要求系統(tǒng)需要具有高可靠性和冗余設(shè)計(jì)，以應(yīng)對(duì)DingoDB多模數(shù)據(jù)庫(kù)——RAG基本流程知識(shí)源知識(shí)處理向量化存儲(chǔ)知識(shí)管家（Agent知識(shí)源知識(shí)處理向量化存儲(chǔ)知識(shí)管家（Agent）非結(jié)構(gòu)內(nèi)容及歸檔存儲(chǔ)非結(jié)構(gòu)化處理數(shù)據(jù)解析處理結(jié)構(gòu)化處理文件塊數(shù)據(jù)三元組化結(jié)構(gòu)化數(shù)據(jù)存量數(shù)據(jù)或API非結(jié)構(gòu)化數(shù)據(jù)知識(shí)文檔、Wikit模型及數(shù)據(jù)映射非結(jié)構(gòu)內(nèi)容及歸檔存儲(chǔ)非結(jié)構(gòu)化處理數(shù)據(jù)解析處理結(jié)構(gòu)化處理文件塊數(shù)據(jù)三元組化結(jié)構(gòu)化數(shù)據(jù)存量數(shù)據(jù)或API非結(jié)構(gòu)化數(shù)據(jù)知識(shí)文檔、Wikit模型及數(shù)據(jù)映射向量化編碼與數(shù)據(jù)存儲(chǔ)多模數(shù)據(jù)庫(kù)LLM4Chunk作為上下文，組合用戶提問(wèn)請(qǐng)求LLM答復(fù)提問(wèn)3高精度語(yǔ)義檢索返回答案知識(shí)助手2向量化及對(duì)齊1用戶5LLM4Chunk作為上下文，組合用戶提問(wèn)請(qǐng)求LLM答復(fù)提問(wèn)3高精度語(yǔ)義檢索返回答案知識(shí)助手2向量化及對(duì)齊1用戶5數(shù)據(jù)處理流程知識(shí)問(wèn)答流程DingoDB多模數(shù)據(jù)庫(kù)——RAG的收益多模數(shù)據(jù)支持自動(dòng)彈性數(shù)據(jù)分片緩存加速能力+分級(jí)存儲(chǔ)能力基于SQL的打通多種模態(tài)完善的多租戶機(jī)制企業(yè)級(jí)高可用與一致性DingoDB多模數(shù)據(jù)庫(kù)