簡(jiǎn)介這是2025年P(guān)ackt出版的英文原版PDF系統(tǒng)講述如何結(jié)合大語(yǔ)言模型LLMs、檢索增強(qiáng)生成RAG與知識(shí)圖譜KGs構(gòu)建現(xiàn)代AI智能體適合具備機(jī)器學(xué)習(xí)與自然語(yǔ)言處理基礎(chǔ)、熟悉Python的開發(fā)者、研究人員及技術(shù)負(fù)責(zé)人。全書從Transformer架構(gòu)與注意力機(jī)制講起闡述AI Agent的“大腦—感知—行動(dòng)”范式及分類并梳理RAG從樸素檢索到高級(jí)優(yōu)化分層索引、查詢轉(zhuǎn)換、重排序再到模塊化RAG的演進(jìn)路徑進(jìn)一步引導(dǎo)讀者利用LLM自動(dòng)構(gòu)建知識(shí)圖譜并與Agent集成以支撐多跳查詢、關(guān)系挖掘和可解釋推理緩解幻覺問(wèn)題。書中還探討了強(qiáng)化學(xué)習(xí)在Agent行為決策中的應(yīng)用以及RAG與KG融合的HybridRAG架構(gòu)方向可為醫(yī)療、法律、金融等高精度領(lǐng)域的可解釋知識(shí)增強(qiáng)問(wèn)答提供落地參考。資源包含1個(gè)PDF文件大小約46.39MB已有163人學(xué)習(xí)下載尤其適合希望將AI系統(tǒng)落地真實(shí)業(yè)務(wù)場(chǎng)景的技術(shù)人員對(duì)照實(shí)踐。1. 智能體不是套殼提示詞為什么這屆 AI Agent 要把 RAG 和知識(shí)圖譜綁在一起A 同學(xué)把一個(gè)內(nèi)部工單系統(tǒng)接給 LLM做了一個(gè)能查庫(kù)存、能改狀態(tài)的 Agent。跑了兩周發(fā)現(xiàn)它經(jīng)常把兩個(gè)同名料號(hào)的庫(kù)存搞混追問(wèn)時(shí)一本正經(jīng)說(shuō)出一個(gè)根本不在庫(kù)里的批次號(hào)。這類問(wèn)題不是提示詞能救的——LLM 不擅長(zhǎng)精確事實(shí)與多跳關(guān)系給再多上下文也會(huì)在關(guān)系鏈條上失真。把知識(shí)圖譜當(dāng)作事實(shí)底盤讓 RAG 去召回圖譜子圖而不是碎片文本Agent 的每一步推理才真正有據(jù)可依。這個(gè)方向解決的是當(dāng)前 Agent 落地的核心矛盾任務(wù)越具體越依賴可控的事實(shí)和關(guān)系路徑。適合已經(jīng)跑通過(guò)基礎(chǔ) RAG、現(xiàn)在想提升準(zhǔn)確率與可解釋性的工程師也適合做知識(shí)密集型場(chǎng)景企業(yè)搜索、風(fēng)控核查、設(shè)備運(yùn)維的團(tuán)隊(duì)。你需要知道的是知識(shí)圖譜怎么接進(jìn) RAG、Agent 如何調(diào)度這兩層、以及哪些坑會(huì)讓整個(gè)系統(tǒng)看起來(lái)聰明實(shí)則脆弱。2. Agent 編排的本質(zhì)把 LLM 從“答案生成器”改造成“任務(wù)分解器”2.1 為什么單獨(dú)叫 LLM 接口不算 Agent從 ReAct 到規(guī)劃-執(zhí)行-反思很多團(tuán)隊(duì)把“能調(diào)用工具”當(dāng)作 Agent 的起點(diǎn)這其實(shí)只是第一步。Agent 的核心不是調(diào)用而是對(duì)任務(wù)的拆解和對(duì)結(jié)果的判斷先理解目標(biāo)再把目標(biāo)拆成可執(zhí)行的步驟每一步調(diào)用模型或工具最后根據(jù)中間結(jié)果修正下一步。ReAct 模式推理行動(dòng)交替之所以成為主流是因?yàn)樗选跋胍徊健⒆鲆徊健憋@式地寫進(jìn)循環(huán)讓模型的思考過(guò)程可被記錄、可被干預(yù)。如果你只是在 LLM 前面套一層工具調(diào)用封裝模型大概率會(huì)在多步任務(wù)里繞圈它不知道先查什么、后查什么也不知道兩個(gè)結(jié)果之間存在依賴。更實(shí)用的做法是顯式的規(guī)劃器讓 LLM 先輸出一個(gè)步驟列表每個(gè)步驟標(biāo)注依賴關(guān)系再由一個(gè)確定性調(diào)度器按依賴順序執(zhí)行。常見做法是借鑒經(jīng)典工作流引擎的思路把每一步的輸出 schema 固定下來(lái)這樣即使模型在某一環(huán)出錯(cuò)也能定位到具體節(jié)點(diǎn)而不是整條對(duì)話報(bào)廢。2.2 控制器、工具層、記憶層三件套Agent 最少需要哪幾個(gè)組件一個(gè)能落地的 Agent 骨架至少包含三塊控制器決定下一步做什么、工具層真實(shí)操作與查詢的出口、記憶層短期對(duì)話上下文 長(zhǎng)期事實(shí)緩存。控制器既可以是 LLM 本身也可以是一個(gè)規(guī)則與模型混合的調(diào)度器工具層把數(shù)據(jù)庫(kù)查詢、API 調(diào)用、圖譜查詢、向量檢索統(tǒng)一成同一個(gè)接口簽名記憶層則決定哪些信息需要在多輪中保留避免每輪都重復(fù)檢索。記憶層的設(shè)計(jì)最容易被人忽略。很多實(shí)現(xiàn)把對(duì)話歷史整個(gè)塞進(jìn)上下文token 很快耗盡且舊信息污染新決策。我一般會(huì)把記憶分成兩層工作內(nèi)存當(dāng)前任務(wù)相關(guān)的結(jié)果摘要和長(zhǎng)期存儲(chǔ)已完成任務(wù)的結(jié)論按實(shí)體或主題組織。每一輪行動(dòng)結(jié)束后讓模型輸出“本輪結(jié)論 影響下一步的事實(shí)點(diǎn)”由控制器決定哪些進(jìn)入工作內(nèi)存、哪些歸檔。這樣既控制 token 消耗也讓 Agent 在中途換方向時(shí)不至于丟失關(guān)鍵事實(shí)。2.3 三條技術(shù)路線怎么選原生函數(shù)調(diào)用、LangChain 式編排、還是自研狀態(tài)機(jī)選型時(shí)先把需求想清楚任務(wù)鏈路是否固定、是否需要人工審批節(jié)點(diǎn)、對(duì)可觀測(cè)性要求多高。原生函數(shù)調(diào)用適合單輪或淺多輪的工具選擇部署輕量但很難表達(dá)循環(huán)和條件分支LangChain 這類編排框架提供了現(xiàn)成的 Agent 抽象上手快但抽象層級(jí)多排錯(cuò)時(shí)要翻幾層封裝自研狀態(tài)機(jī)適合任務(wù)模式固定、流程長(zhǎng)、需要強(qiáng)管控的團(tuán)隊(duì)代碼量更大但每一步都可控、可測(cè)試。我自己的偏好是如果團(tuán)隊(duì)已有明確的業(yè)務(wù)流程定義優(yōu)先用狀態(tài)機(jī)思路把 Agent 當(dāng)作狀態(tài)轉(zhuǎn)移的決策器而不是讓模型自由發(fā)揮整條鏈路。如果業(yè)務(wù)還處于探索期先用框架快速驗(yàn)證再逐步把穩(wěn)定的部分改造成確定性模塊。項(xiàng)目中常見的失敗模式是——開始用框架做了個(gè) Demo 跑得很順上線后發(fā)現(xiàn)某一步的提示詞或參數(shù)稍微變化就全鏈路出錯(cuò)最后不得不重構(gòu)。別讓框架幫你決定架構(gòu)。3. 讓 RAG 從“文本碎片檢索”進(jìn)化為“知識(shí)子圖檢索”3.1 樸素 RAG 的兩大阿喀琉斯之踵語(yǔ)義近似與信息孤島樸素 RAG 的流程大家都熟文檔切塊、向量化、Top-K 召回、拼接上下文交給 LLM。它在回答“xx 是什么”這類單點(diǎn)問(wèn)題上表現(xiàn)不錯(cuò)但遇到兩個(gè)典型場(chǎng)景就露怯。第一是語(yǔ)義近似用戶問(wèn)“A 設(shè)備的保修期”向量檢索召回的是“保修政策包含 A 設(shè)備”的段落而非真正關(guān)聯(lián)到 A 設(shè)備實(shí)例的記錄模型只能靠猜。第二是信息孤島答案需要跨多個(gè)文檔推理比如“某供應(yīng)商供應(yīng)的零件是否用于某型號(hào)產(chǎn)品”單純文本檢索很難把你引向那條跨文檔的關(guān)系路徑。知識(shí)圖譜補(bǔ)的正是這兩塊它不存碎片存實(shí)體、屬性和關(guān)系。一旦把文檔里的核心實(shí)體抽取出來(lái)建圖回答多跳問(wèn)題時(shí)就不再依賴“哪段文本恰好提到”而是沿著圖譜路徑逐步查詢。把圖譜子圖序列化后拼進(jìn) RAG 上下文LLM 拿到的是一條條明確的“實(shí)體-關(guān)系-實(shí)體”三元組而不是一整段可能包含干擾信息的文本。這一步改動(dòng)不大但能顯著壓住幻覺尤其是在事實(shí)型問(wèn)題上。3.2 圖查詢作為檢索器Cypher 模板、向量召回與圖采樣的組合策略知識(shí)圖譜進(jìn) RAG 的常見姿態(tài)不是替換向量檢索而是疊加先用向量檢索找到種子實(shí)體再以種子實(shí)體為中心做圖擴(kuò)展。這個(gè)組合分四步第一步用 embedding 在文本索引里找出候選段落第二步從段落中抽取實(shí)體名去圖譜中精確匹配節(jié)點(diǎn)第三步在圖譜上做 1~2 跳的鄰居擴(kuò)展第四步把擴(kuò)展得到的子圖序列化成文本與向量查到的段落一起拼進(jìn)上下文。圖譜查詢我一般用 Cypher 模板做參數(shù)化而不是讓 LLM 直接生成完整查詢。因?yàn)?LLM 寫 Cypher 的準(zhǔn)確率在生產(chǎn)環(huán)境里不夠穩(wěn)一旦語(yǔ)法錯(cuò)誤或匹配到錯(cuò)誤屬性名整條鏈路就斷了。常見做法是預(yù)先把高頻查詢寫成模板只讓 LLM 填充實(shí)體名和關(guān)系類型。例如查“某節(jié)點(diǎn)的直接關(guān)聯(lián)關(guān)系”MATCH (e:Entity {name: $entityName})-[r]-(neighbor) RETURN e.name AS source, type(r) AS relation, neighbor.name AS target LIMIT $limit這段查詢的含義是按實(shí)體名精確匹配一個(gè)節(jié)點(diǎn)沿任意關(guān)系類型向外擴(kuò)展一層返回源節(jié)點(diǎn)、關(guān)系類型和目標(biāo)節(jié)點(diǎn)三元組。注意這里的$entityName和$limit是參數(shù)化占位符由上層控制器注入不允許模型直接拼接查詢字符串。這樣做的原因是防止模型生成非法語(yǔ)法也便于緩存相同參數(shù)的查詢結(jié)果減少圖譜庫(kù)的壓力。3.3 實(shí)體鏈接的準(zhǔn)確性決定 RAG 的準(zhǔn)確性別名表與消歧規(guī)則子圖擴(kuò)展的前提是實(shí)體鏈接得準(zhǔn)而這一步往往是整個(gè)系統(tǒng)里最容易被低估的環(huán)節(jié)。文本里提到的“蘋果”可能是水果、是某公司、也可能是某設(shè)備型號(hào)的代號(hào)。如果鏈接出錯(cuò)后續(xù)圖查詢?cè)倬_也沒有意義。實(shí)踐中至少要維護(hù)一張別名表把文本中高頻出現(xiàn)的別名、簡(jiǎn)稱、歷史叫法映射到圖譜中的標(biāo)準(zhǔn)實(shí)體 ID并給每個(gè)實(shí)體標(biāo)注類型消除歧義時(shí)把類型作為硬約束。除了別名表還要處理一種更隱蔽的情況實(shí)體名在文本里是模糊指代例如“這個(gè)零件”“上述供應(yīng)商”。我一般的做法是在進(jìn)入圖譜查詢前用最近一輪對(duì)話或最近一次檢索結(jié)果做指代消解先把指代詞替換成明確實(shí)體名再做鏈接。這一步可以用 LLM 完成但要給模型提供候選實(shí)體列表而不是讓它自由發(fā)揮——把候選實(shí)體與其類型列出來(lái)讓模型做選擇或拒絕比開放生成穩(wěn)定得多。4. 搭一個(gè)最小可用的 LLMRAG知識(shí)圖譜 Agent從零到能跑4.1 系統(tǒng)架構(gòu)與數(shù)據(jù)流一條查詢?nèi)绾未┻^(guò)三層落地實(shí)現(xiàn)前先畫清楚數(shù)據(jù)流。用戶輸入先進(jìn)入控制器控制器判斷任務(wù)是否需要事實(shí)檢索如果需要先走向量檢索定位候選文檔再?gòu)奈臋n中抽取實(shí)體名實(shí)體名經(jīng)鏈接后去圖譜查詢擴(kuò)展子圖子圖和候選文檔一起被壓成上下文最后 LLM 基于這個(gè)上下文生成回答和下一步行動(dòng)。整個(gè)過(guò)程里圖譜查詢結(jié)果和向量檢索結(jié)果都要保留原始引用便于后面排查。組件的選擇上向量庫(kù)和圖譜庫(kù)可以分開部署也可以合并。常見做法是向量庫(kù)承擔(dān)語(yǔ)義召回圖譜庫(kù)承擔(dān)關(guān)系擴(kuò)展兩者之間靠實(shí)體名搭橋。為了讓橋穩(wěn)一點(diǎn)我在實(shí)踐中會(huì)讓圖譜庫(kù)同時(shí)存一份“實(shí)體名到向量”的索引也就是說(shuō)向量召回階段直接在圖譜庫(kù)內(nèi)部完成省去兩套系統(tǒng)的數(shù)據(jù)同步和延遲損耗。這個(gè)取舍適合實(shí)體規(guī)模在百萬(wàn)級(jí)以下的項(xiàng)目如果實(shí)體量上億再考慮拆分。4.2 關(guān)鍵代碼骨架控制器、檢索器、圖譜查詢器的最小實(shí)現(xiàn)下面給一套最小可運(yùn)行的骨架用 Python 偽代碼表達(dá)核心流程你可以替換成自己熟悉的框架from dataclasses import dataclass, field dataclass class AgentContext: task: str user_input: str memory: list field(default_factorylist) evidence: dict field(default_factorydict) def retrieve_seed_entities(text: str, entity_index) - list: 從文本中抽取候選實(shí)體名返回 [(name, type), ...] candidates [] # 先用實(shí)體鏈接模型抽取再與實(shí)體索引做匹配 for mention in link_entities(text): # link_entities 是本地或遠(yuǎn)程模型 if mention.name in entity_index: candidates.append((entity_index[mention.name], mention.type)) return candidates def expand_subgraph(entity_ids: list, kg_client, hops: int 1) - str: 以種子實(shí)體為中心擴(kuò)展 hops 跳子圖并序列化為文本 if not entity_ids: return query MATCH path (e:Entity)-[*1..{hops}]-(neighbor) WHERE e.id IN $entity_ids RETURN path LIMIT $limit results kg_client.run(query, entity_idsentity_ids, hopshops, limit50) return serialize_graph_results(results) def run_agent(user_input: str, ctx: AgentContext) - str: entities retrieve_seed_entities(user_input, ctx.entity_index) subgraph_text expand_subgraph([eid for eid, _type in entities], ctx.kg_client) passages vector_search(user_input, top_k5) # 向量召回候選段落 context assemble_context(user_input, passages, subgraph_text) answer llm_generate(context, ctx.memory) ctx.memory.append({role: assistant, content: answer}) return answer這段骨架體現(xiàn)了幾個(gè)關(guān)鍵設(shè)計(jì)檢索器返回的是“候選實(shí)體 類型”而不是直接返回摘要因?yàn)閳D譜擴(kuò)展需要精確 ID圖譜查詢的結(jié)果被序列化成純文本因?yàn)?LLM 不擅長(zhǎng)讀圖結(jié)構(gòu)上下文組裝函數(shù)assemble_context負(fù)責(zé)把引用來(lái)源塞進(jìn) prompt這樣模型被追問(wèn)時(shí)可以給出出處。hops參數(shù)控制了擴(kuò)展深度多數(shù)業(yè)務(wù)場(chǎng)景 1 跳夠用2 跳開始噪音明顯增加。4.3 圖譜構(gòu)建的投入產(chǎn)出比schema 設(shè)計(jì)、抽取質(zhì)量與更新頻率圖譜不是一蹴而就的建議從最小 schema 起步先定義節(jié)點(diǎn)類型如設(shè)備、供應(yīng)商、訂單和關(guān)系類型如“屬于”“供應(yīng)”“包含”把高頻查詢涉及的實(shí)體先入庫(kù)。常見錯(cuò)誤是一開始就設(shè)計(jì)幾十種節(jié)點(diǎn)和上百種關(guān)系結(jié)果抽取模型根本填不滿圖譜稀疏得像篩子。我一般會(huì)先梳理真實(shí)查詢?nèi)罩菊页?Top 20 的高頻問(wèn)題反推需要哪些實(shí)體和關(guān)系再動(dòng)手建 schema。抽取質(zhì)量的把控也有規(guī)律可循。先讓 LLM 從文檔里抽取三元組再用規(guī)則校驗(yàn)類型合法性關(guān)系兩端節(jié)點(diǎn)的類型是否匹配、必填屬性是否缺失、日期格式是否正確。校驗(yàn)不通過(guò)的三元組進(jìn)人工復(fù)核隊(duì)列而不是直接入庫(kù)。更新頻率取決于數(shù)據(jù)變動(dòng)速度——如果底層文檔每周更新抽取任務(wù)就每周跑一次變更檢測(cè)可以用文檔哈希做增量判斷不必每次全量重抽。5. 避坑指南LLM × RAG × 圖譜組合里的 5 個(gè)翻車現(xiàn)場(chǎng)5.1 圖譜子圖太大把上下文沖垮Limit 必須分級(jí)現(xiàn)象 擴(kuò)展 2 跳之后子圖序列化文本達(dá)到幾千行LLM 上下文被淹沒回答反而比不用圖譜時(shí)更差。原因 圖譜擴(kuò)展是指數(shù)增長(zhǎng)的一個(gè)節(jié)點(diǎn) 10 個(gè)鄰居2 跳就是 100 條路徑再疊加 3 跳就是 1000 條。無(wú)差別全量擴(kuò)展是上下文災(zāi)難。解決 按跳數(shù)分級(jí)控制 limit。1 跳可以取 30~50 條關(guān)系2 跳只取 10~20 條并且優(yōu)先保留與種子實(shí)體類型相關(guān)的路徑。還要在序列化時(shí)按實(shí)體重要性截?cái)喟押诵墓?jié)點(diǎn)的屬性放在前面邊角關(guān)系直接丟棄。5.2 實(shí)體鏈接把同名詞映射到錯(cuò)誤節(jié)點(diǎn)類型約束沒有進(jìn)檢索現(xiàn)象 用戶問(wèn)“XX 系統(tǒng)的延遲指標(biāo)”系統(tǒng)把“系統(tǒng)”鏈接到了某個(gè)軟件系統(tǒng)的標(biāo)準(zhǔn)實(shí)體而業(yè)務(wù)語(yǔ)境里它指的是某個(gè)硬件子系統(tǒng)。原因 實(shí)體鏈接只做了字符串匹配沒有把對(duì)話語(yǔ)境里的類型線索用起來(lái)。圖譜里同一名字有多個(gè)節(jié)點(diǎn)類型不同文本里沒有明確寫出“軟件”還是“硬件”模型默認(rèn)選了頻次最高的。解決 鏈接階段把類型約束作為硬條件。先讓 LLM 輸出候選實(shí)體時(shí)附帶類型標(biāo)簽再與圖譜節(jié)點(diǎn)的類型字段比對(duì)不一致的直接拒絕并提醒模型重新選擇。別名表里也要給高頻歧義詞標(biāo)注“默認(rèn)上下文”并留出人工糾正入口。5.3 向量檢索召回相關(guān)段落但實(shí)體抽取抽了個(gè)寂寞現(xiàn)象 圖譜查詢返回空結(jié)果因?yàn)橄蛄空倩孛辛艘欢盐谋緦?shí)體抽取卻沒有一個(gè)實(shí)體鏈接得上。原因 文本里大量使用縮寫、代號(hào)、表格結(jié)構(gòu)抽取模型要么沒識(shí)別出來(lái)要么識(shí)別出的文本和圖譜里的標(biāo)準(zhǔn)名對(duì)不上。解決 兩招并用。第一招是在抽取前先做文本規(guī)范化把表格轉(zhuǎn) text、把代號(hào)轉(zhuǎn)全稱用別名表預(yù)替換。第二招是增加一個(gè)維基式鏈接兜底召回結(jié)果里如果存在與圖譜節(jié)點(diǎn)高度相似的模糊匹配返回候選列表讓用戶或上層模型確認(rèn)不確認(rèn)就不進(jìn)圖譜查詢。5.4 Agent 在正反饋循環(huán)里打轉(zhuǎn)工具結(jié)果沒有被真正消化現(xiàn)象 Agent 查完圖譜得到子圖然后基于同一個(gè)子圖反復(fù)發(fā)起查詢上下文里積累了十幾輪相似結(jié)果回答卻沒變好。原因 控制器沒有把子圖內(nèi)容抽象成結(jié)論只把原始結(jié)果堆進(jìn)上下文。模型每次看到的都是同樣的原始數(shù)據(jù)無(wú)法形成新的中間判斷于是停在原地。解決 給每一輪工具調(diào)用加一個(gè)“生成結(jié)論”的必經(jīng)步驟拿到子圖后先讓 LLM 輸出結(jié)構(gòu)化結(jié)論比如“設(shè)備 A 的供應(yīng)商是 BB 還供應(yīng) C”把結(jié)論存入工作內(nèi)存后續(xù)步驟只引用結(jié)論而不引用原始子圖。這樣既能壓縮上下文也能讓控制器根據(jù)結(jié)論判斷是否繼續(xù)擴(kuò)展還是終止。5.5 圖譜更新滯后導(dǎo)致 Agent 給出“過(guò)時(shí)的事實(shí)”現(xiàn)象 圖譜里的關(guān)系已經(jīng)變更Agent 卻根據(jù)舊數(shù)據(jù)給出肯定式回答且因?yàn)闆]有引用來(lái)源用戶直到對(duì)賬時(shí)才發(fā)現(xiàn)問(wèn)題。原因 圖譜查詢結(jié)果沒有帶時(shí)間戳和更新批次信息LLM 無(wú)法感知數(shù)據(jù)新鮮度更新任務(wù)也沒有對(duì)查詢結(jié)果做失效標(biāo)記。解決 在序列化子圖時(shí)把每個(gè)三元組的更新時(shí)間一并輸出并在 prompt 里要求模型對(duì)超過(guò)閾值時(shí)間的數(shù)據(jù)標(biāo)注“可能過(guò)時(shí)”。同時(shí)把圖譜更新做成事件驅(qū)動(dòng)源文檔一旦變更涉及實(shí)體及其一跳鄰居立即標(biāo)記待刷新而不是等定期全量任務(wù)。6. 讓 Agent 的每一次決策都可審計(jì)把追蹤日志變成調(diào)優(yōu)抓手最后想分享一個(gè)一直在用的習(xí)慣給 Agent 做一套結(jié)構(gòu)化的追蹤日志把每一輪的輸入、檢索結(jié)果、圖譜擴(kuò)展、最終回答全部落盤。格式上用一個(gè) JSON 文件記錄完整的決策鏈包括實(shí)體鏈接的結(jié)果與置信度、圖譜查詢語(yǔ)句與返回條數(shù)、上下文拼裝后的 token 數(shù)。這樣不僅能在用戶投訴時(shí)快速?gòu)?fù)現(xiàn)問(wèn)題還能批量統(tǒng)計(jì)哪一環(huán)是準(zhǔn)確率瓶頸。如果鏈路里出現(xiàn)錯(cuò)誤回答把當(dāng)時(shí)的追蹤日志喂給模型做反思式的二次分析往往能找到是提示詞、圖譜數(shù)據(jù)還是檢索排序的問(wèn)題。追蹤日志的另一個(gè)價(jià)值在回歸測(cè)試。每次修改提示詞或圖譜 schema 后把歷史真實(shí)查詢跑一遍對(duì)比新舊回答的引用完整性和事實(shí)一致性。不要只比答案文本相似度要比“是否引用到正確實(shí)體”“是否沿正確路徑推理”。這套做法讓 Agent 的優(yōu)化從玄學(xué)變成了可量化過(guò)程每一步的失敗率、每個(gè)圖譜查詢的成功率、每種實(shí)體鏈接錯(cuò)誤的占比都是具體的數(shù)。某開發(fā)者的項(xiàng)目里單靠把日志檢索成功率與回答準(zhǔn)確率聯(lián)動(dòng)調(diào)整誤答率在兩周內(nèi)下降了四成。希望你也能把同樣的方法用起來(lái)少走我踩過(guò)的那些彎路。本文還有配套的精品資源點(diǎn)擊獲取