免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

GraphRAG開(kāi)源項(xiàng)目橫向?qū)Ρ龋毫蠓桨概c選型指南

GraphRAG開(kāi)源項(xiàng)目橫向?qū)Ρ龋毫蠓桨概c選型指南 這兩年的RAG賽道熱鬧程度堪比早年的微服務(wù)架構(gòu)之爭(zhēng)。就算你不專(zhuān)門(mén)刷開(kāi)源資訊也大概率聽(tīng)過(guò)了GraphRAG這個(gè)關(guān)鍵詞。它要解決的問(wèn)題很直接傳統(tǒng)RAG把文檔切成碎片存進(jìn)向量庫(kù)遇到需要跨文檔、多跳推理甚至全局總結(jié)的問(wèn)題時(shí)召回質(zhì)量經(jīng)常撐不住。而GraphRAG的思路是把大模型抽取出來(lái)的實(shí)體和關(guān)系整理成知識(shí)圖譜再在圖上做檢索和總結(jié)。過(guò)去一年里微軟、螞蟻集團(tuán)、香港大學(xué)研究團(tuán)隊(duì)等陸續(xù)把各自方案開(kāi)源社區(qū)里一夜間冒出幾十個(gè)相關(guān)項(xiàng)目。這篇文章不做概念科普直接挑6個(gè)最有代表性的開(kāi)源項(xiàng)目逐個(gè)拆開(kāi)看再橫向PK一輪最后給你一套能直接抄作業(yè)的選型方法。1. 先弄清楚GraphRAG到底在解決什么問(wèn)題再談選型很多人在對(duì)比GraphRAG項(xiàng)目之前最先問(wèn)的是“我到底要不要上GraphRAG”。我的回答通常是別急著上先弄清楚自己是不是真的遇到了傳統(tǒng)RAG解決不了的問(wèn)題。如果只是做一個(gè)簡(jiǎn)單的FAQ機(jī)器人文檔量小、問(wèn)題也集中那傳統(tǒng)向量檢索加上普通RAG完全夠用硬上GraphRAG只會(huì)給自己增加成本和運(yùn)維負(fù)擔(dān)。但如果你處理的是企業(yè)內(nèi)部知識(shí)庫(kù)、技術(shù)文檔、法律合同、研究資料這類(lèi)文本就會(huì)發(fā)現(xiàn)向量召回有幾個(gè)繞不過(guò)去的坎。1.1 傳統(tǒng)RAG的三大老毛病切碎、丟全局、單跳傳統(tǒng)RAG的流程大家都很熟了文檔切塊、向量化、存進(jìn)向量庫(kù)查詢(xún)時(shí)用相似度召回TopK塊再拼進(jìn)Prompt交給大模型回答。這套流程在單點(diǎn)事實(shí)問(wèn)答上表現(xiàn)不錯(cuò)比如“A產(chǎn)品的發(fā)布日期是哪天”“B模塊的配置項(xiàng)有哪些”。但稍微復(fù)雜一點(diǎn)問(wèn)題就來(lái)了。第一個(gè)毛病是切塊會(huì)切斷邏輯關(guān)系。一份技術(shù)文檔講“權(quán)限體系”前半部分在第一章定義角色后半部分在第四章說(shuō)明角色和API Key的綁定方式中間隔了幾十頁(yè)。向量化之后這兩個(gè)塊在語(yǔ)義空間里可能離得很遠(yuǎn)但問(wèn)題恰恰需要同時(shí)看到兩者才能回答。第二個(gè)毛病是“全局性問(wèn)題”完全無(wú)從下手。比如你問(wèn)“這份文檔集里團(tuán)隊(duì)對(duì)數(shù)據(jù)保留策略一共提過(guò)哪些不同的說(shuō)法”或者“過(guò)去一年的項(xiàng)目總結(jié)中反復(fù)出現(xiàn)的主題有哪些”。這類(lèi)問(wèn)題不針對(duì)某一個(gè)塊而是要遍歷整個(gè)語(yǔ)料庫(kù)做歸納向量召回天然不擅長(zhǎng)。第三個(gè)毛病是多跳推理。用戶(hù)問(wèn)“哪些權(quán)限變更是由合規(guī)要求引起的”解決這個(gè)問(wèn)題可能需要先定位“合規(guī)要求”相關(guān)文檔再找到對(duì)應(yīng)“權(quán)限設(shè)計(jì)”的章節(jié)最后回到“變更記錄”里確認(rèn)。每一步單獨(dú)看都能用向量召回但把整條鏈路串起來(lái)普通RAG沒(méi)有這個(gè)能力因?yàn)樗緵](méi)有“圖”這種關(guān)系結(jié)構(gòu)。1.2 知識(shí)圖譜補(bǔ)的不是檢索是“記憶結(jié)構(gòu)”GraphRAG的核心轉(zhuǎn)變是不再把文檔看成一塊一塊的獨(dú)立文本而是讓大模型先抽取出文檔里的實(shí)體人、系統(tǒng)、概念、事件和關(guān)系“屬于”“依賴(lài)”“導(dǎo)致”“修改”整理成一張知識(shí)圖譜。這張圖本身就是一個(gè)結(jié)構(gòu)化記憶它保存的不是文本片段而是事物之間的連接方式。有了圖之后“權(quán)限體系”和“API Key綁定”之間無(wú)論相隔多少個(gè)章節(jié)只要在抽取時(shí)形成了“角色-綁定-API Key”的邊回答多跳問(wèn)題時(shí)就能沿著關(guān)系路徑逐步回溯。而像“數(shù)據(jù)保留策略有哪些不同說(shuō)法”這種全局問(wèn)題GraphRAG會(huì)先把圖劃分成若干個(gè)社區(qū)直觀理解就是把聯(lián)系緊密的實(shí)體和關(guān)系圈成一組再按社區(qū)做摘要和歸納。這比逐段拼答案可靠得多。這也是為什么GraphRAG真正有價(jià)值的場(chǎng)景往往是“文檔量大、關(guān)系復(fù)雜、需要綜合提煉”的知識(shí)庫(kù)而不是一句話(huà)就能答出來(lái)的知識(shí)問(wèn)答。1.3 為什么2024到2025年開(kāi)源項(xiàng)目會(huì)集中爆發(fā)GraphRAG不是2024年才提出的概念但真正形成開(kāi)源生態(tài)是最近一年多的事。背后有三個(gè)推力一是大模型能力跟上來(lái)了實(shí)體抽取和關(guān)系分類(lèi)的質(zhì)量到了一個(gè)能用的臨界點(diǎn)抽出來(lái)的圖不再是一團(tuán)亂七八糟的線二是企業(yè)級(jí)知識(shí)庫(kù)的長(zhǎng)期維護(hù)需求太普遍大家都需要一種比“定期重建向量庫(kù)”更長(zhǎng)效的結(jié)構(gòu)性方案三是圖算法工具鏈成熟了社區(qū)檢測(cè)、最短路徑、PageRank這類(lèi)經(jīng)典算法可以直接套用。于是我們看到一個(gè)很有意思的局面大廠、高校、圖數(shù)據(jù)庫(kù)廠商各自帶著不同的基因沖進(jìn)這個(gè)賽道。要說(shuō)清楚它們的差別不能只看功能列表得看它們各自把成本花在了哪個(gè)環(huán)節(jié)。這一塊我在下一章逐個(gè)拆。2. 六個(gè)開(kāi)源項(xiàng)目逐個(gè)拆解各家打法和定位差異這里先說(shuō)明一點(diǎn)社區(qū)里GitHub上掛著GraphRAG名號(hào)的項(xiàng)目不下幾十個(gè)LlamaIndex的圖譜索引、LangChain的GraphCypherQAChain也都有相關(guān)能力。但我這次只聚焦“獨(dú)立成型的開(kāi)源項(xiàng)目”也就是從文檔索引到查詢(xún)問(wèn)答形成完整鏈路、能被別人直接部署使用的方案。篩下來(lái)最值得展開(kāi)的是這6個(gè)。2.1 微軟GraphRAG定義了“索引-社區(qū)-雙模式查詢(xún)”的基準(zhǔn)范式微軟的GraphRAG是2024年年中開(kāi)源的社區(qū)里絕大多數(shù)人第一次接觸GraphRAG就是從它開(kāi)始的。它的工作流現(xiàn)在基本成了這個(gè)方向的行業(yè)基準(zhǔn)文檔切塊后讓LLM從每個(gè)chunk里抽取實(shí)體和關(guān)系構(gòu)建起一張全局知識(shí)圖譜接著用Leiden算法對(duì)圖做分層社區(qū)檢測(cè)把聯(lián)系緊密的節(jié)點(diǎn)圈成一個(gè)社區(qū)再讓LLM對(duì)每個(gè)社區(qū)生成摘要形成“社區(qū)報(bào)告”。查詢(xún)時(shí)提供兩種模式局部搜索以問(wèn)題命中的實(shí)體為中心沿圖譜擴(kuò)展鄰居節(jié)點(diǎn)找回上下文全局搜索則把社區(qū)報(bào)告按map-reduce的方式逐一歸納適合回答“整個(gè)語(yǔ)料庫(kù)層面的趨勢(shì)和主題”。優(yōu)點(diǎn)很清晰功能覆蓋最全、文檔最完善、社區(qū)討論最多后來(lái)者幾乎都在和它對(duì)標(biāo)。但它的代價(jià)也最明顯——貴。構(gòu)建階段每個(gè)chunk都要調(diào)用一次LLM做實(shí)體抽取而且提示詞設(shè)計(jì)得很重輸出的是結(jié)構(gòu)化JSON。部署成本這件事我后面會(huì)專(zhuān)門(mén)算一筆賬這里先記住一個(gè)結(jié)論微軟GraphRAG是最能打地基的方案但不是最便宜的方案。2.2 港大LightRAG雙層圖加增量更新把索引成本打下來(lái)LightRAG由香港大學(xué)的研究團(tuán)隊(duì)開(kāi)源倉(cāng)庫(kù)掛在港大數(shù)據(jù)科學(xué)實(shí)驗(yàn)室下。它和微軟方案最大的區(qū)別在兩點(diǎn)一是圖的結(jié)構(gòu)從一層變成了兩層底層是具體的實(shí)體和關(guān)系頂層是抽象出來(lái)的主題概念?;卮鸺?xì)粒度問(wèn)題時(shí)用底層回答全局性問(wèn)題時(shí)直接走頂層主題層不用把整個(gè)社區(qū)的摘要都map一遍所以全局查詢(xún)便宜很多。二是增量更新被設(shè)計(jì)成了默認(rèn)能力。新文檔加入時(shí)只需要抽取出新實(shí)體、找到與已有圖之間的關(guān)聯(lián)邊并入現(xiàn)有圖譜即可不需要全量重建索引。這對(duì)企業(yè)知識(shí)庫(kù)太重要了因?yàn)槲臋n是持續(xù)增長(zhǎng)的每次更新都重建一次圖成本和時(shí)間都耗不起。LightRAG整體給人的感覺(jué)是輕、快、省。缺點(diǎn)也真實(shí)存在它更多是學(xué)術(shù)團(tuán)隊(duì)的作品生態(tài)和運(yùn)維工具不如大廠項(xiàng)目成熟真到了千萬(wàn)級(jí)節(jié)點(diǎn)、需要分布式存儲(chǔ)和監(jiān)控告警的場(chǎng)景得自己補(bǔ)不少工程化工作。2.3 螞蟻集團(tuán)GraphRAGGraphScope加持走企業(yè)級(jí)圖計(jì)算路線螞蟻集團(tuán)開(kāi)源的這個(gè)GraphRAG項(xiàng)目另一個(gè)繞不開(kāi)的關(guān)鍵詞是GraphScope——螞蟻內(nèi)部的圖計(jì)算引擎也已開(kāi)源多年。這套方案的定位和微軟、港大都不太一樣它不追求“在一個(gè)Python腳本里跑完全流程”而是把GraphRAG建在真正的圖數(shù)據(jù)庫(kù)和圖計(jì)算平臺(tái)之上。在我理解里它有兩條核心能力值得關(guān)注。一是Text2GQL把用戶(hù)自然語(yǔ)言轉(zhuǎn)換成圖查詢(xún)語(yǔ)言讓大模型直接在圖數(shù)據(jù)庫(kù)里做精確查詢(xún)比如“找出所有依賴(lài)A模塊并且由B團(tuán)隊(duì)負(fù)責(zé)的系統(tǒng)”這類(lèi)帶復(fù)雜約束的問(wèn)題用文本召回很吃力但用圖查詢(xún)語(yǔ)言可以按條件準(zhǔn)確圈定。二是檢索融合先用向量召回候選實(shí)體再回到圖里做子圖擴(kuò)展和關(guān)系推理兼顧了模糊語(yǔ)義和結(jié)構(gòu)化關(guān)系。這個(gè)項(xiàng)目是最“重”的一個(gè)組件多、依賴(lài)多上手門(mén)檻明顯高于前面兩個(gè)。但如果你面對(duì)的是百萬(wàn)級(jí)甚至更大規(guī)模的企業(yè)知識(shí)圖譜需要跑圖算法、需要和現(xiàn)有圖基礎(chǔ)設(shè)施打通那它是六個(gè)項(xiàng)目里最接近“生產(chǎn)系統(tǒng)”的一個(gè)。2.4 Neo4j LLM Graph Builder圖數(shù)據(jù)庫(kù)老牌廠商的“傻瓜式”入口Neo4j是圖數(shù)據(jù)庫(kù)領(lǐng)域的老牌玩家LLM Graph Builder是它官方開(kāi)源的GraphRAG落地工具。它最大的特點(diǎn)是可視化程度極高提供一個(gè)Web界面上傳本地文檔或連接數(shù)據(jù)源在界面上配置實(shí)體類(lèi)型、關(guān)系類(lèi)型和抽取規(guī)則點(diǎn)幾下按鈕系統(tǒng)就會(huì)用LLM把知識(shí)抽取出來(lái)寫(xiě)入Neo4j庫(kù)之后你既可以用自然語(yǔ)言對(duì)話(huà)也可以直接在Neo4j的可視化面板里探索這張知識(shí)圖譜。對(duì)于團(tuán)隊(duì)里沒(méi)有專(zhuān)職算法工程師、但業(yè)務(wù)上又需要知識(shí)圖譜的業(yè)務(wù)分析師來(lái)說(shuō)這套方案的入門(mén)體驗(yàn)是最好的。它不需要從零寫(xiě)編排代碼圖譜的質(zhì)量也可以直接在畫(huà)布上看出來(lái)。但它同樣有取舍所有能力都依賴(lài)Neo4j數(shù)據(jù)庫(kù)如果公司沒(méi)有部署Neo4j或者不想額外引入一套圖數(shù)據(jù)庫(kù)基礎(chǔ)設(shè)施門(mén)檻就不低了。另外知識(shí)圖譜的數(shù)據(jù)模型設(shè)計(jì)哪些算實(shí)體、哪些算關(guān)系、要不要做關(guān)系類(lèi)型歸一仍然需要人來(lái)做判斷工具只是讓這個(gè)過(guò)程更直觀并不能替你決定領(lǐng)域建模。2.5 NebulaGraph GraphRAG用圖算法社區(qū)檢測(cè)省掉一大筆LLM總結(jié)費(fèi)NebulaGraph是國(guó)內(nèi)團(tuán)隊(duì)開(kāi)源的一款分布式圖數(shù)據(jù)庫(kù)它同樣推出了自己的GraphRAG項(xiàng)目。這個(gè)項(xiàng)目讓我眼前一亮的地方是它在社區(qū)檢測(cè)和社區(qū)描述上走了完全不同的一條路不是讓LLM把每個(gè)社區(qū)從頭到尾精讀一遍再總結(jié)而是先用圖算法識(shí)別出社區(qū)結(jié)構(gòu)再基于社區(qū)里實(shí)體的統(tǒng)計(jì)信息、關(guān)系分布、節(jié)點(diǎn)重要度用模板化方式生成社區(qū)描述。什么意思呢傳統(tǒng)方案里全局搜索的成本幾乎全部消耗在“讓LLM總結(jié)社區(qū)”上NebulaGraph把這一步換成了可計(jì)算的圖統(tǒng)計(jì)量token消耗大幅下降。構(gòu)建階段同樣用LLM抽取三元組但后續(xù)的社區(qū)匯總不再需要逐條調(diào)用大模型這一點(diǎn)在生產(chǎn)環(huán)境里是實(shí)打?qū)嵉念A(yù)算節(jié)省。它還配套了Text2Cypher的能力把自然語(yǔ)言問(wèn)題轉(zhuǎn)換成Cypher查詢(xún)?cè)贜ebulaGraph上執(zhí)行。它的短板是生態(tài)整體偏小社區(qū)里的案例、教程和踩坑記錄比微軟GraphRAG少一個(gè)量級(jí)遇到冷門(mén)問(wèn)題能搜到的答案不多。2.6 FastGraphRAG不用LLM抽實(shí)體構(gòu)建速度最快的“異類(lèi)”FastGraphRAG的定位和前面所有項(xiàng)目都不同。它干脆不做實(shí)體抽取而是把每個(gè)文檔塊作為一個(gè)圖節(jié)點(diǎn)用embedding相似度來(lái)建邊。成本和速度優(yōu)勢(shì)是碾壓性的沒(méi)有LLM抽取環(huán)節(jié)索引構(gòu)建幾乎就等于“向量化加算相似度”跑一個(gè)幾百篇文檔的庫(kù)只需要幾分鐘token消耗可以忽略不計(jì)。查詢(xún)時(shí)它會(huì)在圖上做遍歷和排序再結(jié)合向量檢索召回相關(guān)塊最后交給LLM生成答案。它把LLM的調(diào)用集中在生成階段并且會(huì)緩存頁(yè)面級(jí)摘要后續(xù)查詢(xún)同一個(gè)區(qū)塊時(shí)可以復(fù)用長(zhǎng)期運(yùn)行成本控制得相當(dāng)好。當(dāng)然這種設(shè)計(jì)的代價(jià)也很明確它的“圖”表達(dá)的是文檔間的關(guān)聯(lián)強(qiáng)度而不是實(shí)體間的語(yǔ)義關(guān)系可解釋性弱、做不了精確的關(guān)系查詢(xún)。它的定位在我看來(lái)就是“敏捷試水”——快速驗(yàn)證GraphRAG是不是適合你的場(chǎng)景如果驗(yàn)證完發(fā)現(xiàn)需要更強(qiáng)的結(jié)構(gòu)能力再遷移到其他更重的方案。3. 同臺(tái)PK構(gòu)建成本、查詢(xún)模式、更新機(jī)制、上手門(mén)檻的橫向?qū)Ρ软?xiàng)目單個(gè)看都不錯(cuò)放在一起比才有意思。下面這張表是我自己整理的核心差異不涉及具體版本的細(xì)枝末節(jié)重點(diǎn)看設(shè)計(jì)取向。3.1 一張表看清六家底牌項(xiàng)目代表組織核心思路索引構(gòu)建成本查詢(xún)模式增量更新主要依賴(lài)上手難度微軟GraphRAG微軟LLM抽實(shí)體Leiden社區(qū)社區(qū)報(bào)告最高LLM調(diào)用密集局部搜索、全局搜索、DRIFT偏重改建成本高自帶圖結(jié)構(gòu)向量索引外部依賴(lài)少中等LightRAG香港大學(xué)雙層圖實(shí)體/主題中等統(tǒng)一抽取流程局部、全局、混合設(shè)計(jì)友好天然支持本地圖向量索引外部依賴(lài)少簡(jiǎn)單螞蟻GraphRAG螞蟻集團(tuán)圖計(jì)算Text2GQL較高依賴(lài)LLM抽取向量召回子圖展開(kāi)GQL查詢(xún)支持依賴(lài)圖數(shù)據(jù)庫(kù)圖數(shù)據(jù)庫(kù)/圖計(jì)算引擎較難Neo4j LLM Graph BuilderNeo4j可視化工坊LLM入庫(kù)中等自然語(yǔ)言轉(zhuǎn)Cypher查詢(xún)支持圖數(shù)據(jù)庫(kù)upsertNeo4j數(shù)據(jù)庫(kù)簡(jiǎn)單NebulaGraph GraphRAGNebulaGraph團(tuán)隊(duì)圖算法社區(qū)檢測(cè)模板化總結(jié)較低社區(qū)匯總不用LLMText2Cypher圖檢索一般NebulaGraph圖數(shù)據(jù)庫(kù)中等FastGraphRAG開(kāi)源社區(qū)文檔塊建圖不做實(shí)體抽取最低幾乎不用LLM圖遍歷向量召回天然適合本地圖向量索引簡(jiǎn)單從表格里能明顯看出兩個(gè)極端微軟和螞蟻是“重結(jié)構(gòu)、重關(guān)系”FastGraphRAG是“輕結(jié)構(gòu)、快迭代”LightRAG、Neo4j和NebulaGraph處在中間帶上。選哪個(gè)本質(zhì)上是在“語(yǔ)義結(jié)構(gòu)精度”和“構(gòu)建運(yùn)維成本”之間做權(quán)衡。3.2 索引構(gòu)建開(kāi)銷(xiāo)拆解最燒錢(qián)的地方在“讓LLM抽實(shí)體”六個(gè)項(xiàng)目里除FastGraphRAG外幾乎都要經(jīng)歷“LLM抽取實(shí)體關(guān)系”這一步而這恰恰是整個(gè)GraphRAG流程里最燒token的環(huán)節(jié)。為什么因?yàn)長(zhǎng)LM不是只讀一遍文本它要理解每個(gè)chunk的語(yǔ)境輸出格式固定的實(shí)體列表、關(guān)系列表、屬性列表還要處理實(shí)體歸一化——比如“蘋(píng)果”和“Apple Inc.”出現(xiàn)在不同文檔里必須合并成同一個(gè)實(shí)體。這個(gè)過(guò)程涉及的輸入輸出token數(shù)量遠(yuǎn)大于傳統(tǒng)RAG里單純做一次embedding的消耗。按我的經(jīng)驗(yàn)粗算同樣是索引一份幾千頁(yè)的文檔集傳統(tǒng)RAG可能只需要跑一遍向量化而標(biāo)準(zhǔn)的GraphRAG構(gòu)建階段在每個(gè)文檔塊上都要額外觸發(fā)一次甚至多次LLM完整調(diào)用。整體成本差出兩個(gè)數(shù)量級(jí)是常有的事。很多人在小數(shù)據(jù)集上跑著沒(méi)感覺(jué)一上生產(chǎn)語(yǔ)料就發(fā)現(xiàn)賬單漲瘋了原因就在這里。NebulaGraph的聰明之處就在這個(gè)環(huán)節(jié)它避開(kāi)了“讓LLM逐社區(qū)寫(xiě)報(bào)告”的高昂操作用圖統(tǒng)計(jì)量生成模板化描述等于把最貴的部分?jǐn)D出去了一大塊。而LightRAG的做法是壓縮提示詞和輸出結(jié)構(gòu)用更簡(jiǎn)潔的抽取格式來(lái)降本。3.3 查詢(xún)模式差異全局搜索是GraphRAG的靈魂也是最難控制成本的一環(huán)GraphRAG之所以區(qū)別于普通RAG很大程度是因?yàn)樗峁┝恕叭忠暯恰钡牟樵?xún)模式。但六家實(shí)現(xiàn)全局視角的方式完全不同成本也差得很遠(yuǎn)。微軟GraphRAG的全局搜索實(shí)行的是map-reduce把上一階段生成的所有社區(qū)報(bào)告逐一讓LLM歸納再做整體合并。答案質(zhì)量確實(shí)高但token消耗與社區(qū)數(shù)量成正比數(shù)據(jù)量一大就很?chē)樔?。LightRAG走了巧路用高層級(jí)主題節(jié)點(diǎn)近似“全局”查詢(xún)時(shí)只對(duì)相關(guān)主題層做歸納理論上便宜很多。NebulaGraph直接不依賴(lài)LLM總結(jié)社區(qū)用統(tǒng)計(jì)信息回答“什么樣的話(huà)題最集中”“哪些實(shí)體聯(lián)系最緊密”。FastGraphRAG因?yàn)闆](méi)有實(shí)體圖嚴(yán)格說(shuō)沒(méi)有傳統(tǒng)意義的全局搜索只能通過(guò)全圖遍歷給出近似。這里我想給一個(gè)很實(shí)際的建議你要先分辨用戶(hù)問(wèn)題到底屬于“事實(shí)查詢(xún)”“局部關(guān)系查詢(xún)”還是“全局趨勢(shì)查詢(xún)”。只做前兩類(lèi)根本不需要上全局搜索只有第三類(lèi)需求占比較高時(shí)花高昂的token成本才值得。這個(gè)問(wèn)題我見(jiàn)過(guò)太多人搞反了一上來(lái)就追求全局搜索實(shí)際上業(yè)務(wù)里90%的問(wèn)題都是查具體事實(shí)。3.4 增量更新企業(yè)長(zhǎng)期使用最容易忽視的維度做POC的時(shí)候大家都用靜態(tài)文檔集很少考慮更新。但真實(shí)的知識(shí)庫(kù)是活的每周都有新文檔、修訂和刪除。這時(shí)候增量更新能力直接決定你愿意多頻繁地刷新索引。微軟GraphRAG在這塊歷來(lái)是最被吐槽的。修改一批文檔后相關(guān)圖結(jié)構(gòu)和社區(qū)劃分很可能需要重新計(jì)算實(shí)踐中不少團(tuán)隊(duì)的策略是定期全量重建。LightRAG和FastGraphRAG由于設(shè)計(jì)之初就考慮了增量并入更新體驗(yàn)要順暢得多。Neo4j和NebulaGraph因?yàn)榈讓邮钦嬲膱D數(shù)據(jù)庫(kù)做局部更新有天然優(yōu)勢(shì)只是操作入口在數(shù)據(jù)庫(kù)這邊需要順手維護(hù)數(shù)據(jù)一致性。螞蟻GraphRAG的更新能力同樣依賴(lài)圖數(shù)據(jù)庫(kù)的upsert語(yǔ)義生產(chǎn)環(huán)境用起來(lái)問(wèn)題不大。所以如果你知道自己短期內(nèi)文檔會(huì)有持續(xù)更新請(qǐng)把“增量更新”放在和“回答質(zhì)量”同等重要的位置來(lái)評(píng)估。4. 我實(shí)際跑下來(lái)的幾個(gè)關(guān)鍵結(jié)論與避坑點(diǎn)這一章講的都是我在本地和測(cè)試環(huán)境里跑這幾個(gè)項(xiàng)目時(shí)總結(jié)出來(lái)的實(shí)操體會(huì)有些和官方文檔寫(xiě)的不完全一樣。4.1 別被“全局搜索”帶偏先算清token賬我第一次跑微軟GraphRAG時(shí)用的是公司里一個(gè)約800篇文檔的知識(shí)庫(kù)只建了一次索引token消耗量比我預(yù)想的高出好幾倍。原因之一是實(shí)體抽取階段不是只調(diào)用一次模型某些復(fù)雜chunk可能觸發(fā)重試和多輪解析而且實(shí)體歸一化階段為了處理同名實(shí)體會(huì)追加額外調(diào)用。所以我的建議是任何項(xiàng)目在上生產(chǎn)之前先拿50篇文檔跑一遍把構(gòu)建期的token量摸清楚再按總文檔量線性外推算算月成本會(huì)不會(huì)超預(yù)算。如果超了要么合并到更小的chunk、精簡(jiǎn)抽取提示詞要么直接考慮NebulaGraph或FastGraphRAG這類(lèi)降本設(shè)計(jì)更激進(jìn)的方案。這一步千萬(wàn)別省。4.2 數(shù)據(jù)預(yù)處理比選哪個(gè)項(xiàng)目更重要六個(gè)項(xiàng)目跑下來(lái)我的一個(gè)強(qiáng)烈感受是幾乎所有項(xiàng)目對(duì)“臟文本”的容忍度都很低。同一份文檔里如果同一個(gè)產(chǎn)品既有英文名、縮寫(xiě)又有中文名LLM抽取時(shí)很容易把它們當(dāng)成三個(gè)不同實(shí)體。如果文檔里還夾雜表格、頁(yè)眉頁(yè)腳、亂序章節(jié)圖的質(zhì)量會(huì)肉眼可見(jiàn)地變差。動(dòng)手抽實(shí)體之前一定要做幾件事統(tǒng)一格式、用正則清理頁(yè)眉頁(yè)腳、拆分復(fù)合文檔、把明顯同義的稱(chēng)呼做歸一化。這是純體力活但它對(duì)最終答案質(zhì)量的影響比在六個(gè)項(xiàng)目之間反復(fù)橫跳選哪個(gè)都大。我見(jiàn)過(guò)不少團(tuán)隊(duì)花了兩周做選型論證最后死在數(shù)據(jù)沒(méi)清洗上太可惜了。4.3 依賴(lài)圖數(shù)據(jù)庫(kù)的項(xiàng)目先把環(huán)境坑填平再評(píng)估性能Neo4j和NebulaGraph這兩個(gè)項(xiàng)目都強(qiáng)依賴(lài)自身圖數(shù)據(jù)庫(kù)所以有一類(lèi)問(wèn)題避不開(kāi)部署。Neo4j社區(qū)版相對(duì)省心起一個(gè)容器就能連NebulaGraph涉及的組件多一些啟動(dòng)參數(shù)和網(wǎng)絡(luò)配置也比單機(jī)工具復(fù)雜。螞蟻GraphRAG則更接近一套分布式系統(tǒng)組件編排、資源規(guī)劃都是額外成本。我的建議是把“環(huán)境準(zhǔn)備時(shí)間”也當(dāng)成項(xiàng)目選型的評(píng)價(jià)指標(biāo)。如果你團(tuán)隊(duì)里沒(méi)人熟悉目標(biāo)圖數(shù)據(jù)庫(kù)一個(gè)項(xiàng)目光是部署調(diào)通可能就要花上一兩天這部分隱形成本常常被忽略。4.4 本地小模型用在抽取階段效果會(huì)明顯打折很多人為了省API費(fèi)用會(huì)想用Ollama部署本地小模型跑全套流程。我的實(shí)測(cè)結(jié)論是生成階段用小模型還能接受抽取階段千萬(wàn)不要省。實(shí)體抽取和關(guān)系分類(lèi)對(duì)指令跟隨能力要求非常高小模型容易漏實(shí)體、抽錯(cuò)關(guān)系、輸出的JSON格式不穩(wěn)定這些問(wèn)題不會(huì)讓程序報(bào)錯(cuò)但會(huì)讓整張圖的質(zhì)量悄悄劣化最后問(wèn)答階段返工排查非常痛苦。如果預(yù)算有限折中方案是抽取階段用能力較強(qiáng)的大模型API社區(qū)總結(jié)和答案生成階段用便宜模型或本地模型。這是一條很實(shí)用的成本優(yōu)化路徑六個(gè)項(xiàng)目里絕大多數(shù)都支持分開(kāi)配置不同環(huán)節(jié)的模型前提是你愿意花時(shí)間把配置拆開(kāi)。5. 選型框架按你的業(yè)務(wù)場(chǎng)景去挑而不是按熱度去挑最后一章講選型。我不打算給一個(gè)“哪個(gè)最好”的答案因?yàn)楸緛?lái)就不存在。下面這套框架是我自己做項(xiàng)目評(píng)估時(shí)固定用的按這個(gè)順序走一遍基本不會(huì)選錯(cuò)。5.1 六類(lèi)典型場(chǎng)景對(duì)應(yīng)的推薦方案場(chǎng)景A要做全局趨勢(shì)分析、周期性總結(jié)報(bào)告文檔量大、預(yù)算充足、更新不頻繁。選微軟GraphRAG。它的全局搜索模式和社區(qū)報(bào)告機(jī)制就是為此設(shè)計(jì)的。場(chǎng)景B做一個(gè)中小規(guī)模的企業(yè)知識(shí)庫(kù)問(wèn)答機(jī)器人文檔量在幾千篇以?xún)?nèi)、每周有更新。選LightRAG。成本低、增量友好、上手快絕大多數(shù)團(tuán)隊(duì)?wèi)?yīng)該從這里起步。場(chǎng)景C企業(yè)已經(jīng)有圖計(jì)算或圖數(shù)據(jù)庫(kù)基礎(chǔ)設(shè)施知識(shí)圖譜規(guī)模大、查詢(xún)條件復(fù)雜。選螞蟻GraphRAG。它能扛住真正的生產(chǎn)規(guī)模但前提是你養(yǎng)得起對(duì)應(yīng)的工程團(tuán)隊(duì)。場(chǎng)景D業(yè)務(wù)方希望自己能維護(hù)圖譜不想每次改數(shù)據(jù)模型都找算法工程師。選Neo4j LLM Graph Builder??梢暬缑婧团渲没鞒汤土耸褂瞄T(mén)檻適合業(yè)務(wù)團(tuán)隊(duì)直接參與。場(chǎng)景E預(yù)算緊張但又有跨文檔綜合問(wèn)答需求。選NebulaGraph GraphRAG。圖算法社區(qū)檢測(cè)代替LLM總結(jié)是成本控制最聰明的一刀。場(chǎng)景F只是想快速驗(yàn)證“GraphRAG適不適合我的業(yè)務(wù)”或者給領(lǐng)導(dǎo)做Demo。選FastGraphRAG。低成本、高速度先證明方向再談深度。5.2 一套可復(fù)用的七步評(píng)估法第一步列出業(yè)務(wù)里最常見(jiàn)、最頭疼的10個(gè)真實(shí)問(wèn)題標(biāo)注每一題是事實(shí)查詢(xún)、局部關(guān)系查詢(xún)還是全局趨勢(shì)查詢(xún)。這步做完基本就知道要不要上全局搜索了。第二步統(tǒng)計(jì)語(yǔ)料規(guī)模、更新頻率和單次更新量。哪怕是“每周新增200篇”這種粗略數(shù)字也比沒(méi)有強(qiáng)它可以用來(lái)直接推導(dǎo)增量更新的重要性。第三步估算成本上限。按第4章的方法拿小樣本先跑通再線性外推把每月token賬單和管理成本寫(xiě)進(jìn)決策文檔。第四步盤(pán)團(tuán)隊(duì)的技術(shù)棧。有沒(méi)有人熟悉圖數(shù)據(jù)庫(kù)有沒(méi)有人搞過(guò)向量檢索Python和API調(diào)用的工程經(jīng)驗(yàn)是否足夠這直接決定了“重方案”可不可行。第五步選兩個(gè)候選項(xiàng)目在同一份小語(yǔ)料上各跑一遍。不要只跑官方示例要用自己的真實(shí)文本甚至最好用業(yè)務(wù)里實(shí)際問(wèn)得最多的那10個(gè)問(wèn)題來(lái)評(píng)測(cè)。第六步對(duì)比答案質(zhì)量時(shí)不光看“說(shuō)得對(duì)不對(duì)”還要看“找不到信息時(shí)會(huì)不會(huì)亂編”。GraphRAG因?yàn)槎嗔藞D譜約束整體上比普通RAG更穩(wěn)但不同項(xiàng)目的圖譜質(zhì)量差異很大這一輪要著重觀察。第七步給生產(chǎn)環(huán)境做一次壓力評(píng)估查詢(xún)并發(fā)量、索引構(gòu)建時(shí)間、更新耗時(shí)、運(yùn)維干預(yù)次數(shù)。這一步?jīng)Q定項(xiàng)目能不能從Demo走到上線。5.3 如果讓我現(xiàn)在從頭搭一套我會(huì)怎么做結(jié)合我自己的經(jīng)驗(yàn)最務(wù)實(shí)的路徑是混搭而不是單選。先用FastGraphRAG跑通一個(gè)最小原型驗(yàn)證業(yè)務(wù)問(wèn)題類(lèi)型確認(rèn)值得投入后再把正式索引遷到LightRAG上利用它的輕量和增量更新維持日常運(yùn)轉(zhuǎn)。等到某一天用戶(hù)需求里真正大量出現(xiàn)“跨文檔綜合分析”這類(lèi)任務(wù)再考慮引入微軟GraphRAG的全局模塊作為補(bǔ)充。不用指望一步到位GraphRAG生態(tài)還在快速演進(jìn)今天的最優(yōu)解可能半年后就變成次優(yōu)解。保持對(duì)這幾個(gè)項(xiàng)目的關(guān)注尤其是它們?cè)诔杀究刂粕系男聞?dòng)作比死抱著某個(gè)框架要?jiǎng)澦愕枚唷?
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产免费一区二区三州老师F1F1| 五月婷婷视频| 婷婷开心久久| 先锋五月婷婷丁香草草| 色播激情| 亚洲V国产V欧美V久久久久久| 五月天婷婷在线播放| 综合网色| 久久色五月天| 激情性爱婷婷| 久久受www免费人成| 婷婷综合五月天| 五月婷婷花| 超碰99资源站| 开心婷婷五月| 夜夜操天天爽| 思思久久96热在精品国产,| 美女网黄| 人人操人| 9 7总站超级碰免费视频| 91久久综合亚洲鲁鲁五月天| 久久精品人妻| 九九99视频| 激情美女五月天| 99小视频在线观看| 色五月婷婷激情基地| 国产av一区二区三区| 91九色在线| 囯产精品久久欠久久久久久九大| 婷婷五月情| 婷婷五月色网| 人人舔人人| 狠狠擼综合| 伊人网欧美在线男人天堂五月丁香 | 亚洲色五月| 九九精品少妇| 超碰人人99| 就去色色五月丁香婷婷久久久| 97色吧| 激情五月综合网| 六月丁香啪啪啪| 日韩综合久| 玖玖热视频| 久久久精品人妻录| 久久99热这里只有精品| 日本一毛片| 亚洲精品永久久久久久| 六月撸婷婷| 丁香六月激情| 超碰免费在线| 亚洲精品又粗又大又爽A片| 91久久久久久| 伊人色综合网| 香蕉久日夜| 国产精产国品一二三在观看 | 婷婷五月丁香久久| 青青草激情网| 夜精品无码A片一区二区蜜桃| 久久99综合| 97啪啪| 99色热| 国产精品18久久久| 伊人天堂婷婷| 五月丁香六月婷婷啪啪| 包操45分钟网站| 五月婷婷视频啪啪美女| 丁香婷婷视频| 色五月天在线观看| 久久婷婷老| 天天影院色| 五月色天情| 人人草开心五月天| 亚洲热视频| 色色无码| www.激情com| 婷婷欧美激情| 婷婷久久夜| 婷婷五月免费在线| 五月丁香综合激情网| 色婷婷五月色| 精品成人无码A片观看香草视频| 日韩在线看AV| 色婷婷www| 免费AV黄在线播放| 天天狠狠夜夜狠狠2023| 97色在线| 色一情一乱一乱91Av| 久综合网| 五月婷婷久| 伊人五月综合网| 久久五月激情综合| 99热黄| 五月开心久久| 丁香久久激情俄| 成人av在线电影| 亚洲视频在线观看99| 五月色欧美| 五月婷婷五月丁香| 欧美日本免费一道免费视频 | 激情亚洲色图片丁香综合| 五月丁香六月婷婷综合| 丁香婷婷久久 | 丁香五月六月婷婷自拍| 婷婷欧美综合| 手机在线视频观看9| 久操干| 欧洲亚洲免费视频区| 青青色com久久| 成人Av在线大片| 久久只有精品| 91久久久久久久久18| 日本精品人妻无码77777| 性爱五月婷婷| 日日夜夜噜噜爽爽| 涩五月婷婷| 97伊人综合婷婷| 色五月无码| 日本五月婷婷| 97成人丁香| 亚洲最大在线| 五月天婷婷在线视频| 99热亚洲| 日本综合久| 亚洲激情97五月天| 9久久狠狠的| 色婷婷888| site:publishdd.com| 91九色首页| 久久99草五月婷婷| 久久这里有精品99| 亚洲亚洲人成综合网络| 少妇丁香婷婷 | 亚洲美女网Va| 精品九九久久| 国产片色| 婷婷五月色综合香五月| 丁香五月老师| 欧美日韩成人在线| 深爱 五月天| 久9视频免费播放| 六六久久黄色| 成人丁香婷婷五月天| 激情99| 久久大香蕉同僚| 婷婷五月天综合色| 久久这里只有精品视频15| 婷婷色五月婷婷姐妹| 亚洲操操操| 丁香五月天久久| 99色啊| 免费黄色片子| 无码se| 99久久久久久| 亚洲综合五月天婷婷丁香| 狠狠色噜噜狠狠狠888| 爱穴久久| 激情文学五月丁香六月婷婷| 日韩精品电影| 激情四射婷婷| 五月丁香综合| 婷婷色综合| 中文精品在| 色激情五月天| 丁香五月婷婷基地| 99视频这里只有免费精品| 色五月欧美| 丁香花操逼| 婷婷久久综合久色| 超碰国产av| 亚洲情欲| 婷婷五月丁香啪啪| 色五月天电影| 五月社区婷婷激情| 极品嫩草| 亲子乱AV一区二区三区下载| 色久婷婷五月| 七七婷婷综合| 婷婷五月激情视频在线| av在线激情| 亚洲愉拍99热成人精品| 天天弄天天爽| 婷婷五月丁香激情| 五月花婷婷| 丁香五月网| 午夜大香蕉| 久久久精品色| 色情一区二区播放| 免费亚洲成人电影AV| 色五月涩涩婷婷| 香蕉97碰碰碰超视精品| www.色综合| 久热这里只有精品3| 久久小视频| 天天操天天操综合| 丁香花婷婷五月天| 五月天com| 激情的五月| www婷婷色| 天天操夜夜橾| 亚洲激情AV| 国产精品一区在线观看你懂的| 婷婷五月天深爱| 4399无码视频二区| 色99在线| 综合网五月天123| 五月婷婷97| 97碰碰在线看视频免费| 开心五激情网| 激情四射网| 亚洲黄色影视| 欧美色性色好| 亚洲 精品 综合 精品| 两性婷婷丁香五月| 日本三级黄色大片| 五月天激情无码专区| 丁香五月777| 五月丁香婷婷综合| 玖玖热视频| 色色五月婷| 国外亚洲成AV人片在线观看| 97在线刺激| 99色最新在线视频| 婷婷色五月大香蕉在线观看| 三级毛片视频| 婷婷五月天开心网| 丁香五月婷婷香| 丁香丁婷五月激情| 大香蕉Av在线| 国内一级片| www.天天干| 人妻内射麻豆视频| 9191avse| 99色免费在线观看| 亚洲综合成人网| 99啪| 操操啪| 激情五月婷婷色综合| 99热人人| 五月婷婷天天| 好激情在线综合网| 久色姿源| 色很很96| 99热综合在线| 丁香五月婷婷亚洲另类| 婷婷5月久久综合网站| 日本一级黄色电影| 日本在线99| 九九婷婷五月天影视| 久久婷婷色情7777网站| 日韩大片艹艹| 五月丁香狠狠爱婷婷综合| 99热精品在线| 丁香五月首页| 天堂久久性| 丁香五月,激情五月,深爱五月| 天天操天天日天天爱| 亚洲欧洲小视频9| 丁香五月影院| 丁香五月性| 99热1| 日日操天天| 五月天激情小说电影| www.91操| 亚洲男女激情| 丁香五月婷婷激情网| 五月天色社区| 亚洲成人黄色网| 丁香五月第九色| 9久精品| 久久久婷丁香五月天激情综合| AV在线免费观看不卡| 国产一区二区三区影院| 五月婷婷丁香六月| 久草五月| 亚洲乱码日产精品BD在线观看| 丁香五月综合婷婷| 丁香六月在线| 天天干,天天日| 婷婷丁香六月| 久久99视频| 99无码黄色视频| 久久伦乱| 99碰超| 婷婷人人操| 可以免费观看的av| 九月丁香亭亭| 五月天综合久久| 色播六月| 91性高潮久久久久久久久| 九九热AV| 婷婷五月丁香五月| 日韩av变天就操逼不卡区| 丁香激情五月| 国产一级黄色影片,| 日本人人超碰| 国产第99页| 一起草日本| 色综合色色色色色色综合| 久久久亚洲成人无码A片| 丁香桃色网| 婷婷五月天美女视频| 久久这里只有精品无码| 丁香五月激情啪啪| 99狠狠色| 激情五月综合婷婷| 亚洲亚洲人成综合网络| 亚洲第一成人AV| 国产亚洲99久久精品熟| 亚洲AV无码一区二| 婷婷在线播放av| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 欧美 日韩 成人在线| 四虎成人精品永久免费AV九九| 久久东京热婷婷五月| 久久久久久久久久8888| AV五月丁香| 青青草六月丁香| 美英法精品无码免费视频| 五月开心深深爱激情综合| 欧美VA在线| 五月婷婷亚洲色视频| 五月婷婷啪啪网| 99在线精品观看99| 色五月亚洲| 99re视频在线| 日韩黄在免| 久久久久久久久久久久久久久久一道本| 久热伊人91| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 狠狠色婷婷综合开心影视| 天天做天天爱天天爽夜夜揉| 9有码中文| 万月丁香狠狠爱| 2050人人操免费工开爱| 人妻啪啪啪| 婷婷五月天亚洲综合| 开心五月激情五月丁香五月婷婷| 国产精品国产成人国产三级 | 欧美一区二区三区不卡影视| 色婷婷九月| 玖玖在线视| 日韩丰满少妇无码内射| 久青操| 青青夜夜狠狠夜夜狠狠| 激情综合区| 五月天激情小说电影| 亚洲天码视频www蛋播视频| 99九九99九九九视频精彩| 99热在线观看| 婷婷激情人妻| 热99精品视频| 丁香五月婷婷啪啪| 成人Av在线大片| 最新午夜理论片| 熟女激情五月天| AA丁香综合激情| 婷婷丁香综合色AV| 五月色情婷婷开心五月色情| 天天摸天天肏| 日韩精品无码AV| 婷婷五月综合激情| 久操激情| 日本成人噜噜噜| 99色在线| www久久久| 激情五月色在线播放| 五月综合视频| 在线中文字幕av| 久久综合久色欧美综合狠狠| wuyuedingxiang99| 欧美久久一级内射wwwwww.| 婷婷五月天中文字幕.| 五月天成人综合| 日韩一区二区在线播放| 96自拍视频九色在线观看| 亚洲性爱日韩无码| 99热99精品| 91视频一起草| 亚洲综合网激情小说| 无码激情AAAAA片-区区| 停停六月 综合| 丁香五月成人社区| 在线播放成人网站| 一本色综合色| 夜夜爽天天爽| 色五月丁香五月激情五月激情| 色色色综合| 色九月激情综合网| 亚洲爱婷婷| 久久婷五月婷| 国产另类综合| 天天色丁香| 久久99综合| 五月婷婷激清网| 99热69| 久婷五月| 天天插天天插天天插| 激情九色| 丁香五月婷婷免费视频| 久久久久亚洲AV无码网影音先锋| 有码人妻久久| 999精品乱码77777| 激情丁香五月激情婷婷| 97精品自拍| 欧亚成人A片一区二区| 五月丁查人人| 五月天色婷婷av| 色月丁| 六月婷婷中文字幕| 丁香婷婷六月男男| 婷婷色5月天在线。| 操婷婷基地| www色婷婷| 亚洲热久久| 丁香5月激情网| 狠狠色狠狠色综合日日91| 九色91国产| 五月丁香色婷婷基地| 玖玖综合色| 五月丁香六月欧美综合| 日本久久婷婷| 天天做 天天爱| 可以免费观看的av| 丁香六月 人妻| 日本人妻伦在线中文字幕| 另类图片五月天婷婷| 五月天婷婷激情| 婷婷丁香五月激情中文字幕版| 成人精品一区日本无码网| 婷婷五月天在线综合导航| www.婷婷五月天| 亚洲五月天综合| 91碰免费视频| 91久久九久久九久久九久久九久久| 日韩在线观看亚洲| 免费观看的av| 99热日韩| 99热在线精品播放| 国产亚洲精品久久久久久牛牛| 日韩av大全| 禁片二区| 99久久极情精品一区| 欧美色播综合在线观看| 999九九九久久久99HD| 久久婷婷五月综合| 最新日本A片| 影音先锋自拍网| 激情五月天啪啪| 婷婷99狠狠| 五月香蕉婷婷| 嫩草国产| 欧美肉大捧一进一出免费视频| 色狠狠图片| 激情婷婷网| 色9999日韩国产| 天天做天天干天天综合网| 欧美久久久中文字幕| 色婷婷先锋| 五月天天天操天天爽夜夜操| 五月婷无码| 99干日本| 九九九九九九九热| 久热综合| 久久婷婷青青| 一起草av| 99亚州综合精品成人网| 欧洲亚洲最新精品| 亚洲啪啪网| 欧美电影在线播放| 97在线刺激| 色婷婷丁香五月丁香| 久久 无毛。| 欧洲色| 婷婷五月天天爽| 婷婷丁香高潮了| 丁香五月天啪啪| 偷拍视频五月天| 九九色综合网| 97超碰99热99| 亚洲国产精品SUV| 99久超碰| 激情婷婷五月社区| 婷婷六月网| 亚洲免费观看高清完整版AV线| 欧美内射AAAAAAXXXXX| 97色97干| 丁香六月五月天| 这里只有精品视频在线观看免费| 九热久| 综合网精品99| 大地9中文在线观看免费高清| 欧洲一区二区| 婷婷天天色| 在线五月色播| 九九热在线观看6| 久久码久久无清| 久久caop| 中国丰满熟女A片免费观| 亚洲婷婷基地| 婷婷色五天| 国精产品一区二区三区| 国产六月婷婷| 久久99激情| 婷婷五月丁香六月| 久久香蕉网| 色综合色综合色综合色综合| 色综合综合网| 狠狠干伊人| 美臀自射自家人妻| 天天婷婷综合| 天天综合网、天天综合色| 碰碰操91| 奇米网大香蕉| 99热在线看| 日韩一级| 久久九九激情五月天 | 九九这里是免费的视频5| 东北熟女高潮99综合99| 99亚洲精品综合在线| 在线观看免费视频| 天天综合精品| 婷婷五月综合激情| 五月丁香久久| 中文成人在线| 六月成人网| 性无码专区无码| 99热亚洲| 亚洲精品又粗又大又爽A片 | 婷婷欧美激情综合| 激情综合4月| 荫道BBWBBB高潮潮喷| 99热只有这里有精品| 色婷婷av在线观看| 色偷偷综合| 亚洲热综合| 五月天狠狠| 99热国产免费| 粉嫩AV久久一区二区三区| 婷婷久久综合久| 激情五月天婷婷| 国产精品涩涩涩视频网站| 免费观看18视频网站| 无码AV免费精品一区二区三区| 99热这里只有精| 性做久久久久久久免费看| 亚洲视频在线观看| 国产成人AV不卡| 精品九九九久| 亚洲AV无码成人精品区电影网| 色五月婷婷AV| av在线观看免费| 中文网AV| 五月婷婷之六月丁香| 一本综合丁香日日狠狠色| 丁香九月婷婷色| 天天干天干| 国产精品日日躁夜夜躁| 天天搞天天爽| 婷婷.com| 丁香久久| 婷婷丁香社区| 欧美婷婷丁香五月| 色婷婷丁香五月| 丁香五月另类小说在线阅读| 五月色丁香视频精品| 天天综合精品| 成人短视频在线观看| 99人妻碰碰久久久禁片| 婷婷五月色惰| 五月天婷婷三级黄| www激情五月天| 最新久久网址| 九九视频在线观看视频6| 亚洲啪啪自拍| 丁香婷最新动态| 丁香五月久久综合| 综合久久高清| 国产69精品久久久久999小说| 欧美日本不卡黄色片| 天天插天天射天天干| 婷婷丁香色五月亚洲| 亚洲小说欧美激情| 超碰资源在线| 极品人妻VIDEOSSS人妻| 婷婷五月天午夜激情影院| 超碰免费在线| 色丁香影院| 激情综合色| 中文字幕无码AV| 婷婷中文字幕网| 精品人妻午夜一区二区三区四区| 综合久久伊人| 婷婷五月天激情偷拍| 五月天啪啪啪| 国产乱妇无乱码大黄AA片| 色婷婷最新域名| 开心久久xxx色| 激情丁香五月天图片| 久久久久久人妻| 欧美成综合在线观看| 国产欧美日韩性爱| 天天透天天爱| 国产免费性爱| 狠狠操狠狠爱| 激情网婷婷五月天| 婷婷五月激情黄色| 人人干天天舔| www,超碰| 黄色高清无码| 丁香五月婷婷姐| www.色综合.com| 午夜成人av在线| 亚洲美女婷婷五月天| 天天人人人人人人人人人人人| 日日操夜夜擼| 在线国产精品色| 思思99热| 人人97操| 日本AAAAAAAAAAAAAA片| 天天综合网站| AA丁香综合激情| 好看的国产精品| 夜夜爽天操| 八戒青柠影视剧在线观看| 久久五月天视频| 丁香五月婷婷激情蜜桃| 国产精品久久久久久妇女6080| 无码人妻激情| 国产成人高清| 久久综合播放| 色爱亚洲| 婷婷丁香五月天色色| 色五月婷婷激情五月| 五月天开心网| 日韩色色网| 超碰亚洲天堂| 97干欧美| 久久久久久综合88| 九九色之九九色88| 五月丁香六月天| 日韩小视频在线99| 婷婷射婷婷舔| 丁香婷婷久| 丁香五月天成人| 丁香狠狠干| 欧美综合婷婷网| 五月色综合| 色婷婷丁香六月| 五月天久久婷婷| 久久色情| 伊人五月综合网| WWW.天天日| av色色国产| 婷婷五月大| 嫩草综合网| 色色色99| 婷婷五六日| 欧美性色A片免费免费观看的| 久久99热这里| 色欲一区二区三区精品A片| 久久在这里有精品| 国产精品第一国产精品| 色婷婷丁香五月天激情综合网| 日产精品一线二线三线芒果| 五月丁香色婷婷熟女| 99久99久| 丁香五月天综合| 亚洲综合另类| 大香蕉久久| 综合激情五月丁香9999久久精| 婷婷五月天小说| 视频这里只有精品16| 色欲五月丁香| 五月丁香六月综合激情| 婷婷五月电影| 中文激情网| 久久久婷丁香五月| 激情五月瑟瑟| 成人五月天丁香婷| 久青青久| 五月婷三级片| 99爱精品| 久热只有这里有精品| 无码免费人妻A片AAA毛片西瓜| 日日操,天天操| 涩 五月 婷婷 狠狠| 亚洲婷婷丁香| 久久久er热| 噜噜色婷婷| 色热久| 99热综合| 五月丁六月香| 婷婷五月丁香久久| 免费无码毛片一区二区A片| 五月天婷婷在线播放免费| 九九色色色| 亚洲另类电影| 色情五月婷婷| 26UUU| av在线婷婷| 婷婷色片| 丁香五月日啪| 超碰AV成人| 精品人妻伦一二三区久| 天天天天爽爽天干| 五月丁香色色网| 成人丁香婷婷| 另类图片色五月| 激情五月六月丁香| 婷婷五月丁香啪啪| 亚洲五月六月婷婷| 五月伊人网| 国产熟女日日骚五月丁香爱| 大香蕉五月天婷婷丁香91| EEUSS鲁片一区二区三区| 欧美成人色婷婷| 婷婷六月丁香在线| 伊人五月婷婷国产视频| 精品人妻伦九区久久AAA片| 综合网五月| 婷婷五月天视| 婷婷午夜综合| 色综合久久之分久久| 另类小说五月天| 91人妻人人操| 五月天婷婷色| 亚欧州精品视频| 久久机热这里只有精品| 欧洲永久精品| 97极品在线| 丁香8月手机综合| 狠狠狠狠狠狠狠狠| 色五月婷婷一二| 丁香5月啪啪| 91天天操天天干天天射| 99在线视频喷水| 裸体做A爰片毛片A片免费| 大香蕉久久久| 五月婷婷影| 色亭亭五月天网扯| 婷婷激情九月| 99色视| WW婷婷五月天com| 亭亭玉月丁香| 99在线免费视频| 婷婷香五月天| 欧美综合五月丁香五月天| 亚洲99综合| 五月婷婷激情久久| 五月丁香六月婷婷激情四射| 97精品人人A片免费看| 激情综合无码| 婷婷丁香五月婷婷| 啪到高潮激情丁香五月| 先锋男人99资源| 五月丁香美女| 婷婷综合欧美| 97人人超| av色婷婷| 五月丁香啪综合| 丁香五月社区| www夜夜| 久久这里有精品视频| 少妇口诉沐足视频播放器网址| 亚洲国产精品成人免费一区久久久在线观看AAAA | 五月色色激情网| 中文字幕 久久9999| 久久99热这里| 最新午夜理论片| 人人草成人视频| 久久综合99| 五月天堂色| www.99婷婷| 97视频91| 国产激情综合五月久久| 五月天堂婷婷| 久久婷婷激情| 色综合久久综合| 色播五月丁香婷婷| 青青草免费公开视频| 亚洲久久视频| 国产小精品| 停停色综合伊人| 无码日本精品XXXXXXXXX| 凹凸探花电影| 国产午夜精品AV一区二区麻豆| 九九无码| 99精品无码网站| 级人人91| 激情综合色婷婷六月天| 91操在线观看| 久操大| 色五月婷婷婷婷婷婷婷婷婷婷| 97人人射| www.精品99| 狠狠干.com| 99热在线免费| 欧美性久| 亚洲综合色网| 99在线视频在线观看| 91在线资源| 日日夜夜干| 99久久9| 777影视理论片大全在线观看| 丁香五月婷婷六月婷婷| 激情久久五月天| 五月丁香六月色婷婷综合五月天| 99超在线| 99在线精品视频免费观看20| 99精品视频在线观看| 91 九色 熟女| 国产一区二区三区影院| 精品综合网在线| 色婷婷五月影院| 五月色网| 99热精品9| 激情丁香五月天| 亚洲丁香花色| 熟妇内谢69XXXXXA片| 31色区视频免费看| 久久狠狠干| 九九综合精品| 超碰熟女拍拍| 99久久九九| 丰满人妻妇伦又伦精品国产| 1024你懂的欧美曰韩| 91丨九色丨白浆秘| 婷婷 激情 五月| 六月婷婷在线| 99色综合| 有码一区二区三区| 九九AV在线| 激情狠狠丁香月| 女人天堂AV| 成人无码精品1区2区3区免费看| 超碰69天堂| 欧洲毛片基地c区| 日本成人噜噜噜噜噜| 久久小视频| 国产又粗又大又爽又黄| 在线超碰91| 成人必爱视| 国产欧美va| 色五月婷婷五月天| 97电影99热| 午夜性爱影视一区77| 五月丁香婷婷深深爱| 色五月av| 久色激情| 丁香综合网| 亚洲六月色| 色综合99色| 成人精品一区二区三区四区五区| 婷婷五月丁香五月综合网| 超碰人人色| 色香久久| 五月综合婷婷久久在线| 久热这里只有精品99re| 久草视频大香蕉99| 99热这是里只有精品| 夜夜干天天操| www.色五月| 久操人妻| 日本色婷婷| 欧美黄色一级录像| 26uuu青青| 丁香婷婷激情五月天无毒不卡蜜桃| 另类图片五月天| 色色狼人综合| 深情五月天| 欧美肉大捧一进一出免费视频| 色婷婷88| 思思热高清在线观看| 成人无码精品1区2区3区免费看| 99热1| 五月婷婷六月丁香综合在线| 日韩精品无码一区二区| 欧美一级色| 婷婷色在线视频| 日比视频91| 午夜九九电影| 99在线观看精品视频| 黑人熟妇一区二区三区| 亚洲色无码| 一级AV片| 无码毛片992367| 色噜噜狠狠色综合日日| 久久天堂网| 丁香五月欧美| 91精品久| 99性爱视频网站| 97亚洲视频在线| site:jszngf.com| 91碰碰碰| 久激情网| 久久久婷婷婷| 色九月婷婷综合| 丁香五月人妻| 色五月婷婷自拍| 丁香成人五月天| 国产亚洲成人综合| 亚洲欧美另类在线23p| 久久久久久久11111111111| 天天摸天天舔天天爽| 99∨VTV| 天天日日夜夜爽| 婷婷五月天丁香| 婷婷在线精品| 色色色综合网| 伊人91| 色色日本| 九月丁香婷婷综合激情| 天天草天天爽| 六月丁香成人| 99这里有精品| 精品综合久久久久久五月天| 极品人妻VIDEOSSS人妻| 婷婷丁香五另类网站| 国产又粗又大又爽又黄| 婷婷五月天少妇| 蜜桃五月天| 五月丁香婷中文字幕 | 玖玖资源站国产| av在线资源| 激情精品久久| 高潮毛片又色又爽免费| 五月天婷婷深深爱| 91丁香色五月| 久久丁香五月天| 色婷婷AV在线| 六月婷婷激情| 97五月天婷婷午夜| 国产精品久久久久9999小说| 99福利视频| 99热亚州综合| 欧美丁香五月| 久久99久久99精品免视看婷婷| 婷婷欧美| 伊人丁香婷婷东京| www91色网站| 五月天成人综合| 91热久久| 狠狠操狠狠| 婷婷综合在线观看视频| 99ri国产精品| 无码人妻激情| 99热99思午夜精品| 婷婷五月五月丁香| 久草热在线视频| 91操熟女| 亚洲V国产V欧美V久久久久久| 五月天激情久色| 成人AV综合在线| www99精品| 色婷婷婷综合五月天| 99久久97| www.婷婷亚洲基地| 99热这里只有精品在线免费| 婷婷5月久久综合网站| 色婷婷六月| 久久这里只有精品5| 激情人妻蜜夜系列区| 亚洲视频色婷婷| 五月丁香久久| 99热每日| 婷婷丁香97| 午夜九九电影| 亚洲XX网| 性无码专区无码| 五月天伊人网| 激情五月天婷婷免费观看| 不卡成人免费| 大香网伊人久久综合| www激情网| 五月激情婷婷综合| 免费无码毛片一区二区A片| 婷婷六月色| 99热 在线观看| 超碰在线观看成人视| 久久激情网| 五月天天天色| 26uuu视频欧美| 色五月婷婷91在线| 91操人视频| 婷婷综合网| 激情综合五月色在线| 亚洲精品网址| AA片在线观看视频在线播放| www.五月丁香| 九九热这里只有国产精品| 六月婷婷久久| 激情综合网激情五月丁香五月俺也去| 色射影院| 99re思思久久| 青青草伊人婷婷| 日本三级中国三级99| 天天草天天爽| 亚洲av无码影院| 五月婷婷AV| 6 9式性爱视频在线播放| WWW.桔色成人.COM| 99国产精品白浆在线观看免费| 99精品视频在线观看免费| 天天操B| 婷婷五月色影视先锋| 涩婷婷五月天在线精品视频| 国产超碰av| 激情深爱五月| txt五月激情四射网综合俺也来了| 婷婷成人综合五月| 五月婷婷色欲| 五月丁香六月综合激情网| 中文字幕1区2区。| 天天爽曰日爽| 九九精品9| 91精品综合久久久久久五月丁香 | 另类的婷婷| 国产成人网址| 天天草天天爱| 狠狠婷婷色| 99日这里只有精品| 4399精品一区二区| 久久这里都是精品| 久人操| 99热大香蕉| 九九热精品| 99热这里只有精品9| AV天堂淫乩| 丁香花大香蕉婷婷综合| 婷婷情色激情| 日本理论久久| 中文资源在线a| 91狠狠综合久久久| 欧美经典片免费观看大全| 五月综合在线婷婷图片| 色婷婷五月综合激情中文字幕| 婷婷香五月| 十区AV| 狠狠狠狠狠狠狠狠| 五月婷婷色综图片| 日韩av在线播放综合网| 六月丁香婷婷综合在线| 玖玖无码中文| 性av| 人人草开心五月天| 日本熟妇精品99| 色色色网站| 五月丁香啪啪伦理电影| 蜜臀av粉嫩av懂色av| 夜夜爽天天爽| 五月天激情婷婷小说| 97人操| 97色色色| 一级操逼内射在线视频| 亚洲旡码| 五月丁久久| 免费观看的av| www.99热视频在线观看| www.夜夜爱.com| 色婷婷香蕉| 婷婷丁香五月天亚洲| 91精产一区三区免费观看| 免费观看的av| 亚洲五月色| 久久久久久久丁香五月天婷婷| 婷婷五月丁香亚洲| 五月丁香亭亭操逼| 蜜臀九九九九| 婷婷人人操| 伊人丁香五月天丁香在线婷| 久大香蕉| Jh7Uf088VHafNm| 丁香五月六月综合激情| 在线18av | 性色婷婷| 久久 视频这里只有精总| 久九色| av一区免费看| AV九九| 在线观看av网站| 五月丁香婷婷激激激综合网色播| 久久免费操| 色五月天 丁香| 夜夜谢天天干| 99热色精品| 无码激情精品色婷婷久久久久| 六月婷婷七月丁香| 狠狠爱深色婷婷综合| 超碰免费人人| 婷婷免费视频| 丁香五月天五码婷婷| 成人网站在线观看视频| 色综合久久无码| 国产欧美精品AAAAAA片| 九九热九九| 99综合| 久久人妻高清中文| 亚洲另类婷婷五月丁香在线播放| 色激情五月| 婷婷九月久久| 97高清国语自产拍| 激情综合在线观看| 超碰中文字幕在线| 丁香六月婷婷操逼网| 人人操AV| 久久538| 亚洲综合视频在线| 成人免费va| 99性爱精品| 婷婷六月插屄激情| 99热欧美在线观看| 激情AV| 激情性爱五月天| 五月天久久网站| 日韩成人综合| 九九99九九精品视频| 狠狠爱深色婷婷综合| 免费视频WWW在线观看网站| 久久九九综合| www.色综合| 婷婷的久久网站| 综合色影| 激情五月天综合网| 久久玖玖综合| 天天干天天干天天| www婷婷| 99无吗| 99热网站| 五月天色区| 婷婷激情图片| 五月婷在线| 婷婷的色色五月天| 六月婷婷五月丁香| 久9免费视频| 婷婷五月综合色拍| 久热69| 色综合综合色| 色激情五月| 99无码视频| 色婷婷成人做爰A片免费看网站| 97人妻碰碰中文无码久热丝袜| 激情色色| 亚洲熟妇AV乱码在线观看| 欧美顶级少妇做爰HD| 99久久户外勾搭| 在线中文字幕免费视频| 亚洲精品无码A片一区二区| 91伦| 91啪啪网| 婷婷久久网| 一区二区中文字幕| 五月激情偷拍婷婷| 五月丁香婷婷激情澎湃四射| 国产日韩欧美| 日良久久| 久久激情视频| 91妻人人爽人人看片| 五月丁香婷婷激情爱爱| 97在线/日本| 亚洲在线操| 色噜噜伊人| 麻豆五月丁香婷婷| 久久天天| 婷婷社区五月天| 成人无码精品1区2区3区免费看| 婷婷丁香五月综合网| 黄色毛片精品| 成人网址在线观看| 五月丁香少妇A| 狠狠干综合网| 欧美久久婷婷| 欧美成人猛片AAAAAAA| 在线sebiav精品视频| 情色婷婷五月天| 综合xx网| 五月天久久91| 婷婷六月久久综合导航| 久爱综合| WWW色色色COm| 深爱婷婷色| 婷婷五月色播| 色婷婷激情| 啪啪啪丁香五月| 久久99久久久久久| 99精品在线下载| 久超超碰| 久久综合九色综合97婷婷| 亚洲AV无码影院| 996er在线观看| 五月激情综合美女久久| 久久久久人妻网址| 97成人丁香| 六月丁香久久| 久久五月综合| 99热成人| 人人搡人人| 五月天色婷婷小说| 99热日| 1024国产在线| 超碰人人操在线| 五月激情婷婷女| 99re在线观看| 停停六月 综合| 激情网 五月天| 丁香伊人网| 九九九九九九热| 久久这里只精品66| 久久五月天婷婷| 六月丁香激情网| 亚洲成人av在线观看| 99在线精品视频免费| 一级黄色尤物综合视频手机在线观看| 色色无码| 日本激情91| 久久久久久久合一狠狠做深爱| 久久久久人妻精品| 99热狠狠操| 久久五月婷天天干| 婷婷视频网| 91干视频| 日韩啊啊啊| www.wuyuetian啪啪| 伊人春天av| 日韩狠狠色| 91日精品| 欧美激情综合色丁香婷婷五月天 | 一起草无码| 婷婷综合五月天亚洲综合| 久久精品一区二区三区四区| 五月婷婷av| 丁香五月先锋| 亚洲在线播放| 狠狠色婷婷六月激情网| 亚洲精品无码一区二区| 欧美日朝成人| 久草视频一,二三四| 色婷婷成人久久| 日韩久久这里只有精品| 国产亚洲99久久精品| 五月丁香久久综合| 色色五月天婷婷丁香| 综合 蜜月 婷婷| 人人草人人视| 天天综合天综合久久网| 玖玖精品视频99| 国产精品涩涩涩视频网站| a网站免费观看| 伊人婷婷五月天| 99激情网| 丁香五月久久| 五月丁香激情四射| 久久婷婷色综合| 肏屄色播伊人97婷婷| 久久婷婷五月综合色丁香| 久久精品女人天堂AAA| 五月激情综合美女久久| 婷婷五月欧美| 终合激情网| 婷婷色五月天色| 婷婷六月亚洲综合| 激情婷婷九月| 一区二区免费看| 人人操AV| 五月天国产| 色六月丁香婷婷狠狠干| 99精彩视频网站在线|