亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

treg:Agent執(zhí)行鏈路可觀測(cè)性CLI工具實(shí)戰(zhàn)指南

treg:Agent執(zhí)行鏈路可觀測(cè)性CLI工具實(shí)戰(zhàn)指南 1. 從“treg”這個(gè)標(biāo)題說(shuō)起一個(gè)被低估的CLI工具鏈入口第一次看到“treg”這個(gè)詞很多人會(huì)以為是某個(gè)拼寫(xiě)錯(cuò)誤或者某個(gè)小眾庫(kù)的縮寫(xiě)。但如果你最近在折騰 AI Agent 開(kāi)發(fā)、CLI 工具鏈、MCP 協(xié)議這些東西大概率已經(jīng)在某個(gè) GitHub issue、Discord 頻道或者技術(shù)群里見(jiàn)過(guò)它。treg 本質(zhì)上是一個(gè)圍繞 Agent 執(zhí)行鏈路做“注冊(cè)、追蹤、回放”的輕量級(jí) CLI 工具它的定位不是替代 Codex CLI、Claude CLI 這類(lèi)交互式終端而是補(bǔ)上它們?nèi)笔У哪且画h(huán)——把一次 Agent 執(zhí)行過(guò)程變成可復(fù)現(xiàn)、可審計(jì)、可對(duì)比的結(jié)構(gòu)化記錄。我最初接觸 treg 是因?yàn)橐粋€(gè)很具體的痛點(diǎn)用 Codex CLI 跑一個(gè)多步驟任務(wù)中間某一步工具調(diào)用失敗了終端里刷過(guò)去幾百行日志想回頭定位到底是哪個(gè) MCP Server 返回了異常、當(dāng)時(shí)傳給模型的上下文是什么、重試了幾次幾乎不可能。Agent 執(zhí)行不像傳統(tǒng)程序它有隨機(jī)性、有外部工具依賴(lài)、有上下文窗口的裁剪出了問(wèn)題光靠翻 scrollback 根本不夠。treg 解決的正是這個(gè)問(wèn)題它在 Agent 和底層 CLI 之間插一層薄薄的記錄層把每次執(zhí)行的輸入、工具調(diào)用、返回、耗時(shí)、token 消耗落成結(jié)構(gòu)化文件之后你可以用treg replay回放、用treg diff對(duì)比兩次執(zhí)行的差異。這篇文章適合三類(lèi)人看一是正在用 Codex CLI、Claude CLI 或者自研 Agent 框架做開(kāi)發(fā)被調(diào)試和復(fù)現(xiàn)問(wèn)題折磨的工程師二是想理解 MCP 協(xié)議在實(shí)際工具鏈里怎么落地、Agent 執(zhí)行鏈路到底長(zhǎng)什么樣的進(jìn)階學(xué)習(xí)者三是需要給團(tuán)隊(duì)搭建 Agent 可觀測(cè)性方案的技術(shù)負(fù)責(zé)人。我會(huì)從設(shè)計(jì)思路、核心機(jī)制、實(shí)操步驟、踩坑經(jīng)驗(yàn)四個(gè)層面把 treg 講透所有命令和配置都是我實(shí)際跑過(guò)的你可以直接抄。2. treg 的整體設(shè)計(jì)與思路拆解2.1 為什么要在 CLI 和 Agent 之間加一層記錄要理解 treg 的價(jià)值先得理解現(xiàn)在 Agent 執(zhí)行鏈路的典型結(jié)構(gòu)。以 Codex CLI 為例一次任務(wù)大致是這樣流轉(zhuǎn)的用戶(hù)在終端輸入自然語(yǔ)言指令CLI 把指令和當(dāng)前工作目錄的上下文打包成 prompt 發(fā)給模型模型返回一個(gè)或多個(gè)工具調(diào)用請(qǐng)求比如讀文件、執(zhí)行 shell、調(diào)用 MCP ServerCLI 執(zhí)行這些調(diào)用把結(jié)果再喂回模型循環(huán)直到模型認(rèn)為任務(wù)完成。這個(gè)循環(huán)里每一次模型往返都是一個(gè)潛在的故障點(diǎn)而終端默認(rèn)只展示最終結(jié)果和部分中間輸出。問(wèn)題在于Agent 的失敗往往不是“崩了”而是“悄悄跑偏了”。比如模型第三次調(diào)用某個(gè) MCP 工具時(shí)傳錯(cuò)了參數(shù)工具返回了一個(gè)空結(jié)果模型沒(méi)意識(shí)到異常繼續(xù)往下走最后產(chǎn)出一個(gè)看起來(lái)合理但實(shí)際錯(cuò)誤的結(jié)論。這種問(wèn)題在終端里幾乎看不出來(lái)因?yàn)槊恳徊蕉肌俺晒Α绷?。treg 的思路很直接把每一次模型往返和工具調(diào)用都當(dāng)成一條事件記錄下來(lái)形成一條完整的時(shí)間線(xiàn)。這條時(shí)間線(xiàn)不是給人看的日志而是結(jié)構(gòu)化的 JSON Lines可以被程序讀取、過(guò)濾、對(duì)比。這個(gè)設(shè)計(jì)選擇背后有一個(gè)關(guān)鍵判斷Agent 調(diào)試的核心不是“看日志”而是“復(fù)現(xiàn)現(xiàn)場(chǎng)”。傳統(tǒng)日志是線(xiàn)性的、易失的而 treg 記錄的是可重放的事件流。你可以把一次失敗的執(zhí)行導(dǎo)出在另一臺(tái)機(jī)器上重放甚至把兩次執(zhí)行的同一階段拿出來(lái)做 diff看是哪一步的輸入變了導(dǎo)致結(jié)果不同。這是純終端 scrollback 做不到的。2.2 與 OpenRouter、MCP 的關(guān)系定位熱詞里出現(xiàn)了 OpenRouter、MCP、agent、CLI 這些詞說(shuō)明 treg 的使用場(chǎng)景和它們高度重疊。我實(shí)際用下來(lái)的理解是treg 不綁定任何特定的模型提供商或 Agent 框架。你可以用它記錄通過(guò) OpenRouter 調(diào)用的模型請(qǐng)求也可以記錄本地直連的模型可以記錄 Codex CLI 的執(zhí)行也可以記錄你自己寫(xiě)的 Agent 循環(huán)。它的接入方式是在你的 Agent 執(zhí)行入口處調(diào)用 treg 的 SDK 或者用treg wrap包裹一個(gè) CLI 命令。和 MCP 的關(guān)系更微妙一些。MCP 協(xié)議定義的是模型和工具之間的通信標(biāo)準(zhǔn)它管的是“怎么調(diào)用工具”但不管“調(diào)用過(guò)程怎么記錄”。treg 恰好補(bǔ)上這一塊當(dāng)你的 Agent 通過(guò) MCP 調(diào)用一個(gè) Server 時(shí)treg 可以記錄下請(qǐng)求的 method、params、返回的 content、以及這次調(diào)用的耗時(shí)。如果你在調(diào)試一個(gè)自定義的 MCP Server這些記錄能直接告訴你模型傳了什么參數(shù)進(jìn)來(lái)、你的 Server 返回了什么、模型拿到之后做了什么決策。這比在 Server 里打 print 要系統(tǒng)得多。提示treg 的記錄層是旁路式的它不改變 Agent 的執(zhí)行邏輯只是觀察和落盤(pán)。這意味著你可以在生產(chǎn)環(huán)境低風(fēng)險(xiǎn)地開(kāi)啟它出問(wèn)題時(shí)再分析記錄而不是一開(kāi)始就侵入式地改造代碼。2.3 方案選型為什么是 CLI 而不是 GUI 或 SaaS市面上做 Agent 可觀測(cè)性的方案不少有 SaaS 平臺(tái)也有 IDE 插件。treg 選擇 CLI 形態(tài)我認(rèn)為有幾個(gè)務(wù)實(shí)的原因。第一Agent 開(kāi)發(fā)者的工作流本來(lái)就在終端里Codex CLI、Claude CLI、各種 shell 腳本CLI 工具能無(wú)縫嵌入現(xiàn)有流程不需要切換窗口。第二記錄文件落在本地?cái)?shù)據(jù)不出機(jī)器對(duì)于處理敏感代碼庫(kù)的場(chǎng)景更可控。第三CLI 天然適合腳本化和 CI 集成你可以在自動(dòng)化測(cè)試?yán)锱躷reg replay來(lái)驗(yàn)證 Agent 行為是否回歸。這個(gè)選型也有代價(jià)CLI 的可視化能力弱看復(fù)雜時(shí)間線(xiàn)不如 GUI 直觀。treg 的應(yīng)對(duì)方式是提供treg view命令在終端里用 TUI 展示事件流同時(shí)支持導(dǎo)出成 HTML 報(bào)告。我個(gè)人的習(xí)慣是日常調(diào)試用treg view快速掃深度分析時(shí)導(dǎo)出 JSON 用 jq 或者寫(xiě)腳本處理。這種“CLI 為主、導(dǎo)出為輔”的組合在靈活性和效率之間取得了不錯(cuò)的平衡。3. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)3.1 安裝與環(huán)境準(zhǔn)備treg 的安裝方式取決于你的運(yùn)行環(huán)境。目前主流的是通過(guò)包管理器安裝macOS 上可以用 HomebrewLinux 上可以用官方提供的安裝腳本W(wǎng)indows 建議在 WSL2 里跑因?yàn)椴糠?Agent CLI 本身對(duì) Windows 原生支持就不完整。我實(shí)測(cè)下來(lái)最穩(wěn)的方式是用 Node.js 生態(tài)的包管理器全局安裝因?yàn)?treg 的很多集成點(diǎn)比如 MCP 記錄依賴(lài) Node 運(yùn)行時(shí)。# 通過(guò) npm 全局安裝推薦版本更新最快 npm install -g treg-cli # 驗(yàn)證安裝 treg --version # 初始化配置目錄 treg inittreg init會(huì)在你的用戶(hù)目錄下創(chuàng)建~/.treg/配置目錄里面包含默認(rèn)的配置文件config.toml和記錄存儲(chǔ)目錄records/。配置文件里最關(guān)鍵的幾個(gè)參數(shù)是記錄存儲(chǔ)路徑、單次記錄的最大事件數(shù)、以及是否默認(rèn)開(kāi)啟脫敏。脫敏這個(gè)功能值得單獨(dú)說(shuō)Agent 執(zhí)行過(guò)程中可能會(huì)把 API Key、數(shù)據(jù)庫(kù)連接串、用戶(hù)隱私數(shù)據(jù)帶進(jìn)上下文treg 默認(rèn)會(huì)對(duì)常見(jiàn)敏感模式做正則替換但你不能完全依賴(lài)它涉及真實(shí)敏感數(shù)據(jù)時(shí)建議在隔離環(huán)境里跑。注意如果你用的是公司內(nèi)網(wǎng)環(huán)境npm 安裝可能走私有 registry需要提前確認(rèn) treg-cli 這個(gè)包在你們的鏡像源里可用。我遇到過(guò)私有源同步延遲導(dǎo)致裝到舊版本的情況用npm view treg-cli versions確認(rèn)一下最新版本號(hào)再裝。3.2 記錄格式與事件模型treg 的記錄文件是 JSON Lines 格式每行一個(gè)事件。這個(gè)選擇很務(wù)實(shí)JSON Lines 既能流式追加寫(xiě)入又能被 jq、Python、Go 等各種工具直接處理不需要額外的解析庫(kù)。一個(gè)典型的事件長(zhǎng)這樣{ event_id: evt_01HX..., trace_id: trc_01HX..., timestamp: 2025-01-15T10:23:45.123Z, type: tool_call, source: mcp, payload: { server: filesystem, method: read_file, params: {path: /src/main.py}, result: {content: ..., truncated: false}, duration_ms: 45 }, parent_event_id: evt_01HX... }事件類(lèi)型主要有幾種model_request發(fā)給模型的請(qǐng)求、model_response模型返回、tool_call工具調(diào)用、tool_result工具返回、error異常。每個(gè)事件都有trace_id和parent_event_id這樣就能還原出完整的調(diào)用樹(shù)。我特別喜歡parent_event_id這個(gè)設(shè)計(jì)它讓你能精確知道某個(gè)工具調(diào)用是被哪次模型響應(yīng)觸發(fā)的排查“模型為什么調(diào)這個(gè)工具”時(shí)特別有用。記錄文件按 trace 分目錄存儲(chǔ)路徑是~/.treg/records/date/trace_id.jsonl。這個(gè)按日期分目錄的設(shè)計(jì)方便清理舊記錄你可以寫(xiě)個(gè) cron 任務(wù)定期刪掉 N 天前的記錄。我一般保留最近 7 天因?yàn)?Agent 調(diào)試通常集中在開(kāi)發(fā)階段太久遠(yuǎn)的記錄參考價(jià)值不大。3.3 與 Codex CLI 的集成方式把 treg 和 Codex CLI 結(jié)合使用有兩種方式。第一種是treg wrap直接包裹 Codex CLI 的啟動(dòng)命令treg wrap -- codex-cli run 重構(gòu) src/utils.py 里的日期處理函數(shù)這種方式最省事treg 會(huì)攔截 Codex CLI 的標(biāo)準(zhǔn)輸入輸出和子進(jìn)程調(diào)用自動(dòng)記錄模型往返和工具調(diào)用。但它的局限是只能記錄到 CLI 層面的交互如果 Codex CLI 內(nèi)部有更細(xì)粒度的 MCP 調(diào)用wrap 方式可能抓不全。第二種方式是在 Codex CLI 的配置里顯式指定 treg 作為記錄后端這需要 Codex CLI 支持自定義 hook 或者插件機(jī)制。我實(shí)測(cè)下來(lái)wrap 方式對(duì)大多數(shù)調(diào)試場(chǎng)景夠用只有在深度分析 MCP 交互時(shí)才需要第二種方式。# 查看某次執(zhí)行的記錄 treg list --since 1h # 回放指定 trace treg replay trc_01HX... # 對(duì)比兩次執(zhí)行 treg diff trc_01HX... trc_01HY...treg diff是我用得最多的命令。比如我改了一版 prompt想確認(rèn)改動(dòng)是否影響了 Agent 的工具調(diào)用序列直接 diff 兩次執(zhí)行的 trace就能看到哪些工具調(diào)用多了、哪些少了、參數(shù)有什么變化。這比人肉對(duì)比終端輸出高效太多。3.4 MCP Server 調(diào)用的記錄要點(diǎn)MCP 是當(dāng)前 Agent 工具調(diào)用的主流協(xié)議treg 對(duì) MCP 的支持是它區(qū)別于普通日志工具的關(guān)鍵。當(dāng)你的 Agent 通過(guò) MCP 調(diào)用一個(gè) Server 時(shí)treg 記錄的不只是“調(diào)用了什么”還包括完整的請(qǐng)求和響應(yīng) payload。這對(duì)調(diào)試自定義 MCP Server 特別有價(jià)值你可以看到模型實(shí)際傳進(jìn)來(lái)的參數(shù)結(jié)構(gòu)而不是靠猜。配置 MCP 記錄需要在 treg 的 config.toml 里指定 MCP Server 的啟動(dòng)命令[[mcp_servers]] name filesystem command npx args [-y, modelcontextprotocol/server-filesystem, /workspace] record_payload true max_payload_size 1048576record_payload true會(huì)記錄完整的請(qǐng)求和響應(yīng)內(nèi)容max_payload_size限制單條 payload 的最大字節(jié)數(shù)防止大文件讀取把記錄撐爆。我建議把這個(gè)值設(shè)在 1MB 左右超過(guò)的部分會(huì)被截?cái)嗖?biāo)記truncated: true。如果你在調(diào)試一個(gè)返回大 JSON 的 MCP Server可以臨時(shí)調(diào)大這個(gè)值但記得調(diào)試完改回去否則記錄文件會(huì)膨脹得很快。提示MCP Server 的啟動(dòng)命令如果依賴(lài)環(huán)境變量比如 API Keytreg 默認(rèn)會(huì)繼承當(dāng)前 shell 的環(huán)境變量。但如果你在 CI 里跑需要顯式在配置里聲明 env 字段否則 Server 可能啟動(dòng)失敗而 treg 只會(huì)記錄一個(gè)啟動(dòng)錯(cuò)誤事件不會(huì)告訴你具體缺了哪個(gè)變量。4. 實(shí)操過(guò)程與核心環(huán)節(jié)實(shí)現(xiàn)4.1 從零搭建一個(gè)可記錄的 Agent 執(zhí)行環(huán)境我拿一個(gè)真實(shí)場(chǎng)景來(lái)演示用 Codex CLI 加一個(gè)自定義 MCP Server完成“讀取項(xiàng)目里的配置文件根據(jù)配置生成一份報(bào)告”的任務(wù)全程用 treg 記錄。這個(gè)場(chǎng)景覆蓋了模型調(diào)用、MCP 工具調(diào)用、文件讀寫(xiě)三類(lèi)事件比較有代表性。第一步準(zhǔn)備 MCP Server。我用一個(gè)簡(jiǎn)單的 Python 腳本模擬它提供一個(gè)read_config工具讀取指定路徑的 YAML 文件并返回解析后的內(nèi)容。實(shí)際項(xiàng)目中你可能是連接數(shù)據(jù)庫(kù)、調(diào)用內(nèi)部 API 的 Server但記錄原理是一樣的。# mcp_server.py import yaml from mcp.server import Server from mcp.types import Tool, TextContent app Server(config-reader) app.list_tools() async def list_tools(): return [Tool( nameread_config, description讀取 YAML 配置文件, inputSchema{ type: object, properties: {path: {type: string}}, required: [path] } )] app.call_tool() async def call_tool(name, arguments): if name read_config: with open(arguments[path]) as f: data yaml.safe_load(f) return [TextContent(typetext, textstr(data))]第二步在 treg 配置里注冊(cè)這個(gè) Server然后啟動(dòng) Codex CLI 并讓它使用這個(gè) MCP Server。Codex CLI 的 MCP 配置通常在它的配置文件里你需要把 Server 的啟動(dòng)命令加進(jìn)去。treg 這邊只需要在 config.toml 里聲明同一個(gè) Server它就能在記錄時(shí)關(guān)聯(lián)上。第三步執(zhí)行任務(wù)并觀察記錄。跑完之后用treg list找到這次 trace再用treg view看事件流。你會(huì)看到類(lèi)似這樣的序列model_request用戶(hù)指令→model_response模型決定調(diào)用 read_config→tool_callread_configpathconfig.yaml→tool_result返回配置內(nèi)容→model_response模型生成報(bào)告→ 結(jié)束。每一步的耗時(shí)、payload 大小都記錄在案。4.2 參數(shù)計(jì)算與記錄體積控制記錄體積是個(gè)容易被忽視的問(wèn)題。一次復(fù)雜的 Agent 執(zhí)行可能產(chǎn)生幾百個(gè)事件如果每個(gè)事件的 payload 都完整記錄單個(gè) trace 文件可能達(dá)到幾十 MB。我做過(guò)一個(gè)粗略的估算一次包含 50 次模型往返、每次往返上下文 8K token 的執(zhí)行如果完整記錄請(qǐng)求和響應(yīng)文本量大約是 50 × 8K × 2 800K token按每 token 約 4 字節(jié)算就是 3.2MB 左右。加上工具調(diào)用的 payload輕松超過(guò) 5MB。treg 提供了幾個(gè)控制手段。max_payload_size限制單條 payloadmax_events_per_trace限制單次 trace 的事件總數(shù)超過(guò)后新事件會(huì)被丟棄并記錄一個(gè)truncated標(biāo)記。我的經(jīng)驗(yàn)值是日常調(diào)試設(shè)max_payload_size 262144256KB、max_events_per_trace 500足夠覆蓋絕大多數(shù)場(chǎng)景深度調(diào)試時(shí)臨時(shí)調(diào)大但記得手動(dòng)清理記錄目錄。[recording] max_payload_size 262144 max_events_per_trace 500 retention_days 7 compress_after_days 1compress_after_days 1會(huì)讓 treg 在記錄生成一天后自動(dòng) gzip 壓縮能省不少磁盤(pán)空間。我實(shí)測(cè)下來(lái)JSON Lines 的壓縮比通常在 8:1 到 12:1 之間5MB 的記錄壓完不到 500KB。4.3 用 replay 復(fù)現(xiàn)問(wèn)題現(xiàn)場(chǎng)replay 是 treg 最有價(jià)值的功能之一但它的實(shí)現(xiàn)方式需要理解清楚。treg 的 replay 不是“重新執(zhí)行一遍 Agent”而是按記錄的事件流重新播放把當(dāng)時(shí)模型返回的內(nèi)容、工具返回的結(jié)果原樣重放出來(lái)。這意味著 replay 是確定性的不會(huì)因?yàn)槟P碗S機(jī)性產(chǎn)生不同結(jié)果。這對(duì)于復(fù)現(xiàn)“當(dāng)時(shí)到底發(fā)生了什么”非常關(guān)鍵。# 基礎(chǔ)回放按時(shí)間順序輸出事件 treg replay trc_01HX... # 只回放工具調(diào)用事件 treg replay trc_01HX... --filter typetool_call # 回放到指定事件為止 treg replay trc_01HX... --until evt_01HX...我常用的一個(gè)技巧是--until配合--filter當(dāng)我知道問(wèn)題出在第 N 次工具調(diào)用時(shí)先 replay 到那一步仔細(xì)看當(dāng)時(shí)的輸入輸出再?zèng)Q定是改 prompt、改工具實(shí)現(xiàn)還是改 Agent 邏輯。這比從頭跑一遍快得多也不消耗模型 token。注意replay 依賴(lài)記錄文件的完整性。如果某次執(zhí)行因?yàn)檫M(jìn)程被 kill 導(dǎo)致記錄文件不完整最后一行 JSON 可能被截?cái)鄏eplay 會(huì)在截?cái)嗵巿?bào)錯(cuò)。treg 對(duì)這種情況的處理是跳過(guò)最后一行不完整的記錄并在輸出里警告。如果你發(fā)現(xiàn) replay 結(jié)果和記憶中的執(zhí)行不一致先檢查記錄文件最后幾行是否完整。4.4 在 CI 里做 Agent 行為回歸測(cè)試把 treg 集成到 CI 里可以做一件很有價(jià)值的事Agent 行為回歸測(cè)試。傳統(tǒng)單元測(cè)試驗(yàn)證的是確定性代碼而 Agent 的輸出有隨機(jī)性很難用斷言直接判斷對(duì)錯(cuò)。但 Agent 的工具調(diào)用序列相對(duì)穩(wěn)定可以作為回歸的錨點(diǎn)。我的做法是在 CI 里跑一個(gè)固定的 Agent 任務(wù)用 treg 記錄然后把這次 trace 的工具調(diào)用序列和基線(xiàn)序列做 diff。如果序列發(fā)生了非預(yù)期的變化比如多了一次不該有的文件刪除調(diào)用就判定回歸失敗。這個(gè)方案不能覆蓋所有問(wèn)題但能抓住“Agent 行為漂移”這類(lèi)最危險(xiǎn)的回歸。# 在 CI 腳本里 treg wrap --output /tmp/ci-trace.jsonl -- codex-cli run $TASK treg diff --baseline ./baselines/expected.jsonl /tmp/ci-trace.jsonl --fail-on-diff--fail-on-diff會(huì)讓 diff 發(fā)現(xiàn)差異時(shí)返回非零退出碼CI 就能據(jù)此判定失敗?;€(xiàn)文件需要人工審核后提交到倉(cāng)庫(kù)每次 Agent 邏輯有意變更時(shí)更新基線(xiàn)。這個(gè)流程跑順之后我對(duì) Agent 改動(dòng)的信心提升了很多至少不會(huì)出現(xiàn)“改了一個(gè) prompt結(jié)果 Agent 開(kāi)始亂刪文件”這種事故。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 記錄為空或只有部分事件這是最常見(jiàn)的入門(mén)問(wèn)題。原因通常有三類(lèi)一是 treg 沒(méi)有正確攔截到 Agent 的執(zhí)行入口比如你用treg wrap包裹的命令本身是個(gè) shell 腳本腳本里又 fork 了子進(jìn)程treg 可能只記錄到腳本層面二是 Agent 使用了獨(dú)立的網(wǎng)絡(luò)請(qǐng)求庫(kù)繞過(guò)了 treg 的攔截點(diǎn)三是記錄目錄權(quán)限問(wèn)題treg 寫(xiě)不進(jìn)去但沒(méi)報(bào)錯(cuò)。排查順序建議這樣先treg doctor檢查環(huán)境它會(huì)驗(yàn)證記錄目錄可寫(xiě)、依賴(lài)版本匹配、攔截點(diǎn)是否生效。然后手動(dòng)跑一個(gè)最小任務(wù)用treg list --since 5m確認(rèn)有沒(méi)有生成 trace。如果 trace 存在但事件很少檢查 Agent 是否用了 treg 不認(rèn)識(shí)的 HTTP 客戶(hù)端。我遇到過(guò)用 Go 寫(xiě)的 Agent 直接用net/http發(fā)請(qǐng)求treg 的 Node 層攔截不到這種情況需要在 Agent 代碼里顯式調(diào)用 treg 的 SDK?,F(xiàn)象可能原因排查方法完全沒(méi)有 trace攔截未生效treg doctor檢查trace 存在但事件少部分請(qǐng)求繞過(guò)攔截檢查 Agent 網(wǎng)絡(luò)庫(kù)記錄文件為空權(quán)限或磁盤(pán)滿(mǎn)檢查目錄權(quán)限和磁盤(pán)空間事件時(shí)間戳亂序多進(jìn)程并發(fā)寫(xiě)入確認(rèn) trace_id 是否混用5.2 MCP Server 啟動(dòng)失敗導(dǎo)致記錄中斷MCP Server 啟動(dòng)失敗是另一個(gè)高頻問(wèn)題。treg 記錄到的是一個(gè)error事件但錯(cuò)誤信息往往只有“Server exited with code 1”具體原因需要看 Server 自己的 stderr。treg 會(huì)把 Server 的 stderr 也記錄到事件里但默認(rèn)只在record_payload true時(shí)記錄。如果你在調(diào)試 MCP Server建議臨時(shí)開(kāi)啟這個(gè)選項(xiàng)。我踩過(guò)的一個(gè)坑是MCP Server 依賴(lài)的環(huán)境變量在 treg 啟動(dòng)的子進(jìn)程里沒(méi)有繼承。比如 Server 需要DATABASE_URL我在 shell 里 export 了但 treg 的配置里沒(méi)聲明 env子進(jìn)程就啟動(dòng)失敗。解決辦法是在 config.toml 的[[mcp_servers]]里顯式加env [DATABASE_URL]treg 會(huì)從當(dāng)前環(huán)境讀取并傳給子進(jìn)程。提示MCP Server 的啟動(dòng)超時(shí)默認(rèn)是 10 秒如果你的 Server 啟動(dòng)時(shí)需要加載大模型或者連接慢速數(shù)據(jù)庫(kù)可能超時(shí)??梢栽谂渲美镎{(diào)大startup_timeout_ms但別設(shè)太大否則 Agent 會(huì)卡住等 Server。5.3 replay 結(jié)果與預(yù)期不符replay 是確定性的所以如果結(jié)果和預(yù)期不符通常是記錄本身有問(wèn)題而不是 replay 邏輯有問(wèn)題。常見(jiàn)情況有兩種一是記錄文件被手動(dòng)修改過(guò)JSON 格式損壞二是記錄時(shí) payload 被截?cái)喑^(guò)max_payload_sizereplay 時(shí)只能看到截?cái)嗪蟮膬?nèi)容。排查方法是用treg validate trace_file檢查記錄文件的完整性它會(huì)逐行解析 JSON 并報(bào)告格式錯(cuò)誤。如果是截?cái)鄦?wèn)題檢查事件里的truncated字段如果為 true說(shuō)明當(dāng)時(shí)記錄就不完整需要調(diào)大max_payload_size重新跑一次。我建議在調(diào)試關(guān)鍵問(wèn)題時(shí)臨時(shí)把max_payload_size設(shè)成 10MB確保記錄完整問(wèn)題定位后再改回默認(rèn)值。5.4 記錄文件膨脹過(guò)快如果你頻繁跑 Agent 任務(wù)記錄目錄可能幾天就漲到幾個(gè) GB。除了前面說(shuō)的retention_days和compress_after_days還有一個(gè)技巧是按 trace 類(lèi)型選擇性記錄。treg 支持在配置里定義過(guò)濾規(guī)則比如只記錄包含工具調(diào)用錯(cuò)誤的 trace或者只記錄特定 MCP Server 的調(diào)用。[[filters]] name errors-only condition has_error true action keep [[filters]] name drop-healthcheck condition tool_name health_check action drop這個(gè)過(guò)濾機(jī)制在配置里是聲明式的treg 在寫(xiě)入記錄前會(huì)先過(guò)一遍過(guò)濾器。我一般會(huì)加一條規(guī)則把心跳類(lèi)、健康檢查類(lèi)的工具調(diào)用直接丟掉這些調(diào)用量大但調(diào)試價(jià)值低。實(shí)測(cè)下來(lái)這條規(guī)則能減少 30% 到 40% 的記錄量。5.5 與 OpenRouter 等模型網(wǎng)關(guān)配合時(shí)的注意事項(xiàng)如果你的 Agent 通過(guò) OpenRouter 這類(lèi)模型網(wǎng)關(guān)調(diào)用模型treg 記錄的是網(wǎng)關(guān)層面的請(qǐng)求和響應(yīng)。這里有個(gè)細(xì)節(jié)網(wǎng)關(guān)可能會(huì)對(duì)請(qǐng)求做改寫(xiě)比如注入系統(tǒng)提示、調(diào)整參數(shù)treg 記錄的是改寫(xiě)后的版本還是改寫(xiě)前的取決于你在哪一層接入。我建議在網(wǎng)關(guān)的客戶(hù)端側(cè)接入 treg這樣記錄的是你實(shí)際發(fā)出的請(qǐng)求便于對(duì)比網(wǎng)關(guān)行為。另外通過(guò)網(wǎng)關(guān)調(diào)用時(shí)響應(yīng)里通常包含網(wǎng)關(guān)自己的元數(shù)據(jù)如實(shí)際路由到的模型、計(jì)費(fèi)信息treg 會(huì)把這些一并記錄。這些信息在排查“為什么同一個(gè)請(qǐng)求兩次結(jié)果差異很大”時(shí)很有用因?yàn)榭赡苁蔷W(wǎng)關(guān)路由到了不同的后端模型。我遇到過(guò)這種情況同一個(gè) prompt一次路由到 A 模型一次路由到 B 模型輸出風(fēng)格完全不同看 treg 記錄里的網(wǎng)關(guān)元數(shù)據(jù)才定位到原因。6. 我在實(shí)際使用中積累的幾個(gè)經(jīng)驗(yàn)treg 這類(lèi)工具的價(jià)值很大程度上取決于你怎么用它。我用了幾個(gè)月有幾個(gè)體會(huì)比較深。第一記錄要趁早開(kāi)。很多人是出了問(wèn)題才想起來(lái)加記錄但 Agent 的問(wèn)題往往需要對(duì)比“正常時(shí)”和“異常時(shí)”的記錄才能定位如果正常時(shí)沒(méi)記錄排查效率會(huì)大打折扣。我現(xiàn)在是默認(rèn)開(kāi)著 treg只在確認(rèn)不影響性能的場(chǎng)景下才關(guān)。第二trace_id 要透?jìng)鞯綐I(yè)務(wù)日志里。treg 的 trace_id 是它自己生成的但如果你能在 Agent 的業(yè)務(wù)日志里也打上這個(gè) id兩邊就能關(guān)聯(lián)起來(lái)。比如 Agent 在處理某個(gè)用戶(hù)請(qǐng)求時(shí)打了一條業(yè)務(wù)日志你可以用 trace_id 找到對(duì)應(yīng)的 treg 記錄看到當(dāng)時(shí)模型和工具的完整交互。這個(gè)關(guān)聯(lián)在排查線(xiàn)上問(wèn)題時(shí)特別有用。第三不要過(guò)度依賴(lài)自動(dòng)記錄關(guān)鍵節(jié)點(diǎn)手動(dòng)打點(diǎn)。treg 的自動(dòng)攔截能覆蓋大部分場(chǎng)景但有些關(guān)鍵決策點(diǎn)比如 Agent 在多個(gè)方案里選了哪個(gè)、為什么選是模型內(nèi)部的自動(dòng)記錄抓不到。我習(xí)慣在 Agent 代碼的關(guān)鍵分支里手動(dòng)調(diào)用 treg 的annotate接口打一個(gè)自定義事件把決策依據(jù)記下來(lái)。這些手動(dòng)打點(diǎn)的事件在 replay 時(shí)會(huì)和自動(dòng)事件混在一起形成更完整的敘事。第四定期清理和歸檔。記錄文件是調(diào)試資產(chǎn)但不是永久資產(chǎn)。我現(xiàn)在的策略是最近 3 天的記錄保留完整3 到 7 天的壓縮保留7 天以上的只保留包含錯(cuò)誤的 trace其余刪除。這個(gè)策略在磁盤(pán)占用和可追溯性之間取得了平衡。如果你在團(tuán)隊(duì)里用建議把歸檔策略寫(xiě)進(jìn)文檔避免每個(gè)人都按自己的習(xí)慣清理導(dǎo)致需要時(shí)找不到記錄。最后分享一個(gè)我最近才用上的技巧treg 的記錄文件可以直接喂給一些分析工具做可視化。比如把 JSON Lines 轉(zhuǎn)成 CSV用 pandas 做耗時(shí)分布分析找出哪些工具調(diào)用是性能瓶頸。我用這個(gè)方法發(fā)現(xiàn)某個(gè) MCP Server 的search工具平均耗時(shí) 2.3 秒占了整個(gè)任務(wù)耗時(shí)的 60%后來(lái)優(yōu)化了它的索引策略整體任務(wù)時(shí)間降了一半。這種基于記錄的量化分析是純靠感覺(jué)調(diào)試做不到的。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久久久久久久久久免费精品| 人妻精品4K4K4K4K4| 国产精品成久久久久午夜午夜| 久久AV色| 91色图片| 亚洲日韩AV视色| 国产精品视频一区二区三区八戒| 伊人久久综合影院精品久久久| 人妻少妇无码| 精品乱码在线观看| 国产美女mm131爽爽爽爽| 亚洲欧美电影| 青青草国产一区二区三区| 第二页中文字幕| 男人的天堂不卡一区二区| 国内亚洲精彩视频在线| 午夜精品久久一区二区| 日本 情色 1区| 亚洲人综合| 五十路熟女工口 | 亚洲精品一二牛牛| 好属操| 男女性扦B| 99999久久久久9国产精品| 亚洲最大无码中文字幕网站| 亚洲成a人在线观看久| 一区在线精品中文字幕| 欧美性高潮在线| 欧美 亚洲 大香| 在线观看AV不卡| 久久99亚洲精品久久99果| Sekablack无码一区| 午夜在线播放| 久久是精品| 亚洲吊色| 亚洲激情色片| 国产超碰在线一区| 九九九久千久久激情蜜桃在线看| 亚洲日本加勒比在线| av资源在线观看少妇| 成人激情无码在线视频| 人妻系列无码专区中文有码 | 精品无码久久久| 91操人视频| 2024人人操人人摸| 999国产精品999| 国产探花精品在线| 国产激情av女片自拍| 翔田千里AⅤHD无码| 亚洲欧美人妻| 午夜操一操| 欧美色图综合网| 天天天干977| 日韩特一级久久| 国产精品一级二级在线| 亚洲精品 欧美97色色| 亚洲熟妇AV日韩熟妇在线| 日韩天堂av电影在线观看| 欧美日韩国产中文超碰| 色妹子A V| 91oumei| 熟女精品一区二区三区| 91精品综合久久久久久五月丁香| 男人天堂久久精品| 国产日本熟女顶级一区二区三区视频| 乱理日韩中文| 欧美一二三区四五区| 日本天堂网| 欧美一区二区情色| 亚洲色图加勒比| 在线视频一区二区传媒| 亚洲欧美日韩电影网站一区 | 中国一级特黄大片护士| www.色操逼| 日韩人妻资源在线看| www.超碰| 情侣开房子拍 日韩无码 女的很漂亮| 日韩无码嘿咻黑热久| 欧美在线官网| 久久嫩草国产成人一区| 久噜噜| 熟女网站最新| 久热这里只有精品9| 中文字幕三四五区| 无码久久亚洲高清,| 天天草夜夜草高潮片| 日日日日做夜夜夜夜无码| 欧美亚洲另类在线蜜桃| 91麻豆天美国产欧美| 淫色网综合| 久久久久9999妇女| 91模特在线观看| 九九九国产| 国产成人久久精品蜜臀| 一类av片在线看| 久久AV无码网址| 五月丁香婷婷啪啪| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 91操熟女| 乱欲一区二区| 啊啊啊啊啊操我视频| 天天干天天日天天射黄色片| 婷婷20月天青娱乐| 日韩欧美日韩| 蜜乳AV网址| 中文字幕av乱伦| 国模限制级电影| 素颜老阿姨乱情色| 91青青草| 亚欧Av| 麻豆国产尤物AV| 中文字幕免费观看| 精品免费囯产一区二区三区| 大黄片做爱的大的| 国产原创自拍| 91天美传媒在线观看| 青青草原成人| 日本精品中文字幕视频| 国产懂色精品国产av| 玖色AV| 天堂射| 久久久久久九九九九九| 手机在线视频国内精品| julia高潮后不停追击中出| 国产久久日韩网站导航| 青青青在线高清视频在线一二三四区 | 久久9精品视频| 久久久久久久久久久久欧美日| 91亚洲网站| 亚洲 欧美 制服 另类 自拍| 激情综合五月丁香| 久久夜夜夜| 日本天天干天天操一区| 欧美性巨大╳╳╳╳╳高跟鞋| 欧美亚洲综合色| 日韩欧美天天爽爽爽天天爽爽| 日韩熟女精一区二区三区不卡| 精品无码久久久久久国产浪潮| 国产精品久久久久久久久AV大片| 欧美日本久久精品一区 | AV在线资源| 色吊丝 日日骚 清纯唯美| 综合伊人激情| 性爱综合网| 一区二区三区色综合| 不卡日本一区二区| 亚洲欧洲国产综合av| 狠狠操一区二区| 青青草色AV| 日本免费中文字幕在线| 男人天堂综合| 亚洲成人激情小说视频| 狠狠狠狠狠狠| 超碰色大香蕉| 口爆吞精在线观看| 97天天做| 亚州一区二区| 91 刺激在线| 亚洲自拍青操视频| 伊人精品久久网站| 黑人中出21连凳花野真衣| 国产又粗又长视频| 日本熟妇人妻中出视频| 蜜臀99999| 国产辣妈在线视频福利| 伊人久久国产免费观看视频| 九九亚洲| 不卡人妻少妇精品毛片一区23区视频 | 五月开心网| 日韩精品一区二区三区色欲| 伊人丁香五月婷婷| 内射中出日韩在线观看视频| 不卡二三区人妻少妇| 探花在线免费观看视频国产一区| 日韩精品熟妇| 欧美18老人禁| 中文字幕日产av人| 免费操逼91| 欧美亚洲综合色| 色综合大香蕉| 91黑丝在线播放| 青青草在线视频播放器| 两性综合网| 伊人在线大香蕉视频久久| 免费观看国产不卡av| 9久久美女首页| 免费A片三p视频| 6080yy午夜理论三级一区二区三区无码| 国产精品一区二区麻豆| 欧美啪啪女女| 999熟女精品| 家庭乱伦性爱av| 91天天爱| 在线观看AV片| 国产精彩女在线观看视频| 性色av蜜臀av色欲aV| 五月开心久久AV官网| 不卡av在线中文字幕| 亚洲淫乱骚妇AV| 亚洲国产一级黄色视频| 九九拍拍精品视频在线播放| 一本精品日本在线视频精品| 97精品97久久| 亚洲午夜福利视频| 青青草中出视频| 国产成人精品亚洲日本| 青青五月天| 免费精品99| 射综合网| 欧美18禁91| 欧美区亚洲区偷拍区 | 蜜臀99久久精品久久久久| 玖色AV| 欧美色就是色| 观看视频图片一区二区三区| 国产黄色在线播放观看| 久久亚洲天堂| 日本黄 R色 成 人网站| 超碰色97| 国产精品熟女AV中文字幕在线播放| 高清有码一区二区| 色老牛| 国产一区二区三区影片| 91激情| 大香蕉中文aV在线| 日日操丁香五月天| 超碰美女97| 天天淫人人妻日日色| 欧美高清无码免费视频高清版| 东京热av男人的天堂| 老熟妇一区二区三区…| chaopen97久久| 天堂岛av| 亚洲?V无码专区在线电影| 五十路人妻在线| 五月丁香激情综合| 97爱爱| 北京美女一区二区| 不卡啪啪视频| 91春色| 91久久18禁| 啪一啪免费视频| 欧美丝袜中文字幕07在线| 久操99| 国产毛片在线| 国产精品一区二区三区四区五区| 97色诱| 强奸乱伦动态污图免费| 亚洲天堂男人天堂| 中文久久96| 五月丁香网站| 国产av波波国产精品| 国产精品一区二区麻豆| 大香蕉伊人亚洲| 特级毛片特黄久久免费看| 99999久久精| 久久仑合| 99热伊人| 欧美日韩 强奸乱伦| 九九热九九| 日韩欧美水蜜桃人妻| 99色婷婷| 超碰在线香蕉| 日韩成人私密一级精品av| 97爱b| 激情网五月天| 午夜无码精品免费看性色| 一二三四区电影| av天天在线观看| 性色av蜜臀av色欲aV| 一区二区无码视频| 嗯嗯嗯啊啊啊操的我好爽 | 久久久久久久强迫| 国产嫩草精品A88AV| 亚洲精品一区二区三区新线路| 免费作爱一级视频| 啪啪性爱免费视频| 91欧美网| 天天躁夜夜躁狠狠躁AV| 亚洲AO在线| 久久久久久AV无码免费网站| 熟妇xxxxx性春色| 91美| 99精品无码| 国产亚洲色婷婷99精品91| 婷婷五月天福利| 老熟妇一区二区三区…| 中国AAAAAA黄色片| 色香av| 亚洲鸥美色图| 天天享受天天看| 色婷婷五月天| 久久一区二区三区入口| 无码免费在线观看黄色片| 夜夜高潮夜夜爽夜夜爱爱一区| 性性欧美| 超碰人妻中文在线| 涩爱AV在线| 五月婷婷六月激情| 99久久综合网| 一个人免费HD91视频| 大香蕉视频一二三区| 国产精品自拍视频| 丰满人妻一区二区三区免费| 欧美亚洲韩国视频十五区| 精品96久久| 国产视频一区二区三区久久亚洲天堂| 日本在线一二| 99在线精品视频| 久久久久久AV无码免费网站| 岛国片国产成人亚洲播放| 秋霞一集毛片观看| 84YTCOM性无码| 日韩小电影| 亚洲天天自拍| 校园春色美腿丝袜 | 91美| 国际精品久久久| 大屁股熟女一区二区三区| 韩国女主播青草在线| 熟妇最新先锋一二三区| 97超碰美国| 大香蕉123| 我爱大香蕉| 青青草天天亲夜夜操网| 立川理惠无码一区二区| 欧美麻豆成人同性GⅤ在线| 视频黄色国产一级| 熟女人妇一区二区三区| 国产精品999zyz| 多毛小伙内射老太婆| 国产成人无码a| 国产v片在线免费观看| 在线日韩日本亚洲国产| 久久的免费性爱视频| 久久久久少妇| 精品视频一区二区| 乱伦一二三| 亚洲色婷婷久久91| 欧美一级美片在线观看免费| 不卡av在线中文字幕| 亚洲天堂一区二区久久| 日韩人妻一二三区视频| 太久视频| 探花激情视频| 色五月激情网| 大香蕉AV丝袜| 一区二区首页| 欧美专区第一页| 校园春色欧美色图| 国产精品久久久久久久久久久久久久久久久久| 神马久久久久久久久久久久| 国内97干免费看| 少妇第一页| 麻豆区久久久久亚| 九九热av| 9色国产精品一区粉嫩| 五月丁香六月综合缴清无码| 久久久久免费看少妇A片特黄| 95自拍视频在线观看| 亚洲国产麻豆一区二区三区| 人妻久久久| 后入 亚洲 美女 射| 啊啊啊啊啊啊好湿好爽视频| 试看60秒| 日本熟妇人妻一区二区三区| 国产精品一区二区a| 人人干黄色| 国产男人又猛又粗又爽| 九九色色| 国产精品高潮久久AV| 天堂综合| 日本欧美不卡| 秋霞网—男女啪啪亚洲免费体验区| 日韩在线一区高清在线| 欧美日韩操逼嗦吊| 曰韩欧美国产传媒麻豆第一区| 亚洲美欧999| 中国熟女91| 午夜啊啊| 日本人妻伦在线中文字幕| 日韩精品碰碰| 国产av尤物| 天天综合欧美综合| 九草九九九| 99热在线观看| 国产久久av| AV大香蕉| 天天操人人操骚逼网站| 欧美色另类| 在线综合 亚洲 欧美中文字幕| 无码在线亚洲| 九九九九九九九九九九九免费国产| 黄网站黄视频网站进入口| 97综合久第一页| 97在线视频免费| 国产三级中文有码在线视频| 黑操B| 精品一国2| 99国产女人| 操www| julia高潮后不停追击中出| 国产农村妇女精品1区二区| 天天操天天7| 久久91| 丝袜美腿制服人妻二区中文字幕 | 人人看人人插| 99色色网| 日韩视频小说在线观看| 五月丁香激情四射| 把腿张开老子CAO烂你| 欧美精品另类人妖xxxx| 色五月AV在线| www.亚洲成人一区| 女优视频第10页| 亚洲欧美色综合| 农村少妇久久久久久久| 2018天天日天天日| 六月丁丁香| 啊啊啊啊二区好大| 啊啊啊好大好深| 久久久久久电影| 国产精品久久久亚洲一区| 亚州色阁| 成人无码在线视频网站| 91亚洲人电影| 日本 情色 1区2区3区| 欧美人与动性人交a| 婷婷性爱| 青青草中出视频| 日韩欧美午夜一区二区| 日韩人妻少妇中文字幕| 国产精品久久久久久久久久二区三区| 人妻少妇久久中文字幕一区二区 麻豆| 少妇高潮特黄A片| 日韩一级二级| 久久久9 9 9精品| 香伊人在线| 日韩偷拍色图| 大香蕉淫人网| 色五月丁香五月| 91无码人妻| 一级片视频啪啪| 韩日精品四区| 91bbbbbb| 人妻22p| 2019亚洲男人天堂| 亚洲色色探花| 97欧美精品综合| 中文字幕一区二区无码成人| 探花一区在线| 久久綜合很很很| 水多多映视AV| 理论久久婷婷网 8| 外站AV在线| www.婷婷| 亚洲九九视频| 人妻激情偷乱视三区频一区二区| 97天天在线| 久操网视频| 亚洲永久永久永久永久一级一级一级精品| 麻豆国产97在线| 欧美熟妇视频| TS人妖另类精品视频系列| 丝袜美腿诱惑亚洲欧美视频在线观看| 国产激情在线| 久久精品99| 一区二区播放| 日欧操屄视频| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 91高潮喷水美女| 五月婷婷六月丁香网址| av一区二区三区四区五区久草臀| 欧美一区二区日韩三区| 嗯嗯,好大,好爽,好骚| 亚洲 小说 欧美 激情 另类| www.操| 亚洲成人激情小说视频| 青青草吊丝| 久久性爱视频免费看| 国产久久久9999| 亚洲不卡三级手机播放| 97超碰无码网| 国产精品嫩草久久久久| 中文欧丝袜诱惑| 欧美日韩性爱操大逼| 精品9999| 97色干| 欧美天堂在线| 二区熟妇韩日| 伊人黄色片| 91 亚洲情侣偷拍 久久| 福利在线黄片| 精品97久久| 中文字幕老熟妇黄色视频| 啊啊啊好多水| 求求你操操我| 婷婷激情五月天小说网| 变态另类专区| 97人妻色| 精品国产91内射久久| ai欧美亚洲小说| 91成人久久| 大香蕉2017| 亚洲精品丝袜-不卡成人免费……| 一区二区影视| 欧美成人AⅤ大片在线观看| 97视频在线观看网站| 91精品黄在线观看| 亚欧色图在线激情| av麻豆啪啪| 久久婷婷综合国际产色怕| 96超碰网| 亚洲中文字幕乱码无码一区二区| 性久久| 97在线/亚洲| 久久久com| 黄色视频60分钟| 97chaopenrihan| 69超碰综合| 无码区蜜乳| www.acm成人黄色毛片| www.夜夜| 吖在线不卡一区二区国产剧情| 久草线上视频免费看| 五月激情影院| 亚洲av无码成电影在线播放| 安微少妇操BBB| 色色操| 国产免费一区2区3区| 求求你操操我| av网页一区二区三区| av日韩中文字幕| 精品一区二区三区蜜桃臀赵总 | 青青青草原| 青娱乐亚洲热| 亚洲精品中文字幕一区在线视频| 国产极品馒头逼| 欧美少妇高潮久久91| 99re久久| 天天躁日日躁AAAAXXXX国产 | 成人一道本免费视频| 蜜桃香蕉久草精品在线| 91色综合激情| 99久久网站| 欧美大香蕉久| 激情在线青青操| 久久亚洲熟妇在线视频| 国产激情久久久| 翔田千里一区二区三区奶水| 密臀在线一区尤物| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 日韩久久超碰色| 亚洲精品美女久久久久久久久| 超碰在线人人射| 亚洲女人毛茸茸91| 99re8超碰| 思思热在线观看| 99国产在线 精品 视频| 超碰97人妻| 日日玩天天干| 久操在97| 这里是精品| 亚洲黄色影视| 亚洲中文日韩欧美大香蕉视频| 天天澡天天爽日日AV| 97在线亚洲| 亚洲欧美setu| 青娱乐导航AV| 午夜色婷婷| 乱伦图av| 性爱视频免费网址| 免费观看一区| 国产日韩美女小穴视频网站不卡| 天堂资源站| 亚洲伊人久久精品狠狠在线| 婷婷综合视频| 国产原创剧情在线丝袜 | 日本欧美国内在线| 中文字幕日韩人妻视频一区二区三区| 中文操逼字幕| 搡老女人老91二区| 96国产精品| 视频二区熟女人妻| 亚洲天堂情色| 色爱综合网欧美| 久久侵犯人妻爽爽爽| 日韩精品一区二区三区色欲 | 国模精品娜娜一二三区| AV网站高清无码在线观看| jizz啪啪| 欧美一区二区男人天堂| 久久精品店| 人妻娇喘 激情视频| 九九人妻| 国产风韵犹存熟妇三区| 国产精品久久久久久久久久久久久久久| 国产精品久久久久久夜夜夜| 69精品在线| 啊…啊…操我用力操我| 色色丁香| 五月天综合网| 久久激情五月| 激情九月婷婷| 日韩无码成人电影| 免费一级视频特黄色大片| 亚洲成A∨人影院在线欢看| 免费精品人妻一区二区三| 国产精品午夜福利亚洲综合网| 日本一级特级毛片视频| 中文字幕在线观| 婷婷五月天激情四射| 偷拍视频青青草在线视频| 亚洲天堂资源在线| 精品日日人妻| 91制服丝袜中文字幕| 日日不卡av| 蜜臀网 一区| 女优大全 - 91n| 啊啊啊啊好爽好舒服一区二区易域| 国产999精品久久久| 国产区在线| 欧美激情在线观看视频| 久久久四区| 天天插网| 免费视频在线一区二区不卡| 手机午夜电影神马久久| 老司机深夜18禁污污网站| 色操逼网| 国产欧美岛国精品一区| 黄色高清无码无码破解免费暗网| 国产福利第一视频| 色色色综合网| 精品国产少妇高潮视频| 国产老熟女| 四虎视频在线观看| 97精品97久久| 久久有码视频| 亚洲欧美不卡线| 91免费看一区二区三区| 国产精品99精品视频网站| 成人一级性爱| 无码聚合| 婷色五月天| 毛片视频白嫩| 大香蕉男人的天堂| chaopen97久久| 超碰在线91| 精品欧美不卡在线播放| 中国一级操逼视频| 入口操逼网站| 亚洲丝袜色| 黑人天8A∨高清网站| 超碰1997| 婷婷人妻激情| 色综合国产在线观看| 亚洲国产精品有声| 激情五月天色色网| 国产欧美一区二区| 男人的天堂在线| 青青草在线视频美女| 久久精品一区二区| www.91人妻.com| 久久欧美性爱视频| 超碰爽人妻熟女Av| 亚洲鸥美色图| 久久黄人人爽视频| 中文字幕日韩专区精品系列| 国产综合永久精品日韩鬼片| caorenqi shipin| 超碰在线人妻不卡| 骚鸭AV| 9久在线视频只有精品| 26uuu性| 色婷五月天| 亚洲三级网址久久最新| 骚妻少妇精品性色无码四色A V| 夜夜爽夜夜高潮夜夜爽| 北约熟女超碰| 99re视频在线观看这里只有精品| 69视频福利导航| 大香蕉手机在线| 人妻性爱一区二区| 韩国一级做A片免费的| 精精夜夜| 舔舔啊| 我要去看2个日本美女.com曹逼| 久久久免费的精品| 搡老女人老妇女老妇老熟女怎么读| 成人天天爽| 久久久久国产精品久久久| 日韩一性一交一A片俄罗斯| 成人欧美一区二区三区黑人一| 黄呦呦在线| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 国产精品久久妻无码网站| 人妻99p| 97色论| 无人区高清电影免费观看一区二区三 www.qmcai2.com | 夜夜嗨av午夜成人| 亚洲欧洲美腿丝袜| 玖玖资源视频一区二区三区| 日韩免费一级性爱视频| 色色综合网站| 欧美熟女丝袜| 日韩一级欧美一级国产一级台湾 | 秋霞色色影院| 久久婷婷热| 亚州中文字幕超碰97| 97天堂| 最新国产亚洲精品精品国产亚洲综合| 青青草吊丝| 清纯唯美激情| 欧美性爱一级操| 久热久一区二区三区| 色天使AV天堂| 日本国产欧美一区三区二区| 亚洲最大网站av| 日韩中文字幕熟妇人妻| 91老妇女| 国产精品白丝在线播放 | 亚洲精品影视老司机| 成人无码专区精品视频| 国产精品不卡少妇白| 日韩乱伦影音先锋| 久久男人网| 天天澡天天狠天天天做| 99操视频| 9997se| 91精品女厕偷拍视频| 中文字幕丝袜美腿| 搡老女人老91二区| 秋霞视频一区二区| 免费97视频| 亚洲国产91精品一区二区久久| 天天色悠悠激情| 96久久久久久久| 亚洲色诱惑| 亚洲综合色在线| 欧美精品99久久久**| 老熟女熟妇| 五月丁香激情四射| 亚洲操逼网| 亚洲97资源| 99老司机精品视频在线观看| 人人综合| 激情熟女12P| 人人操天天爽| 中文字幕丰满人妻日本| 久久久草成人网站久久久草成人久久久草久久久 | 无码国产精品久久久久| 综合av影片| 日韩在线一区高清在线| 丝袜天堂| 免费福利视频中文字幕| AV老汉| 亚洲久久久久| 久久久网站| 欧美专区17页| 男女真人网18| 淫穴高潮色图| 青青草天天亲夜夜操网| 亚洲欧美内射| 国产高潮AA片免费看| 91痴汉| 另类专区在线观看| 亚洲色图欧美色18直播在线| 91碰碰碰| 国产精品一区二区三区免费视频| 色色色综合| 亚洲自拍97| 久久超碰爱| 91狠狠| www.97在线| 久久国产在线一区二区| 亚洲天堂自拍| 亚洲乱色熟女一区| 欧美少妇色综合| 国产操偷| 国产三级中文字幕粉嫩| 亚洲国产欧美中日韩成人综合视频| 蜜臀在线网站| 狠狠狠狠狠狠| 搡老女人老熟女91| 婷婷情色综合网| 日本成人免费一区二区三区| 北京专精特新企业招聘信息| 天天综合网~91| 91 手机在线播放 绯色| 91少妇| 国产视频一区二区三区久久亚洲天堂| 欧美性爱综合,免费| 国产精品密臀网在线观看| 极品尤物自安慰| 91精品国产长腿丝袜美女| 成人电影一区| 大肥女高潮bbwbbwhd视频| 久操操| 久久久精品无码亚免费| 免费视频观看60秒| 亚洲精品久久久久久久久豆丁网| 97精品一区二区视频| 亚洲涩涩| 看一级黄色视频| 91成人18| 久久久久元码视频| 亚洲精品视频在线播放| 日韩在线观看三级电影| 天天日天天屌天天操| 亚洲精品精品一区二区| 婷婷五月天激情四射| 5252色欧美在线| 亚洲精品亚洲人成在线麻豆| 久草这里只有精品| 成人日韩中文字幕| 日逼国产| 97综合国产| 国产乱码精品久久久久久| 色官网在线| 日韩欧无码一区二区三区免费不卡 | 97精品国产97久久久| 中文字幕av亚洲精品| 五月开心久久AV官网| 五月婷婷啪啪| 免费一级性爱久久| 伊人欧美大香蕉视频| 午夜情侣自拍网站| 奇米狠999| 久久九色| 天天射夜夜| 蜜臀久久99精品久久久久久久久| 啪啪啪东京| 国语精品对白| 日本蜜桃| 成人国产精品三级A片| 夜夜精品视频| 中国小夫妻勾搭露脸淫荡对白| 久久精品色欧美aⅴ一区二区| 亚洲高清综合网| 大香伊人在线一区| 乱伦系列一区二区| 可以免费看黄片的视频| 精品少妇一区二区| 超碰人妻中文在线| 激情婷婷五月天| AV网站高清无码在线观看| 久热热| 色九九综合AV| 欧美 中文字幕 一区| 日韩不卡a级视频专区| 看全色黄大色大片免费视频| 日韩有码回春沙龙第一页| 久久久久9久久久久| 91干熟女| 曰韩操B| 东北女人操逼| 91大香蕉伊人| 好舒服视频| 久久熟女人| 亚洲啪啪性视频| 高清无码一区二区三区| 91色花堂| 97视频免费在线| 大香蕉伊人亚洲| 五月丁香综合啪啪| 黑人白女精品一区| 91精品老女人| 亚洲春色欧美| 大屁股国产在线视频| 欧美亚综合色图| 九九性视频| 国产一级作爱毛片| 国产真乱mangent| 亚洲风情在线观看| 久久久久九九九九九| 97碰碰日本乱偷人妻中文的| 强奸少妇AV导航网| 亚洲一区二区三区春色| 欧美亚洲手机在线| 久久精品无码不卡| 加勒比伊人影院| 一区二区精品更新提醒| 插入综合网| 婷婷综合激情| 日韩中文字幕视频在线观看| 国产精品999zyz| 天天射天天| 91社区伊人| 校园春色五月天| 欧美性高潮| 久久久久久无码人妻中文字幕| ai欧美亚洲小说| 青久操| 亚洲天堂综合AV| 无遮挡猛进视频免费无限观看| 高清在线不卡一区二区 视频| 久久久久国产精品久久久| 久久久久熟女| 校园春色 亚洲| 色九九九综合| 国产精品2020| 国产精品女同| 亚州情色j区| 熟妇在线视频一区二区| 激情综合色| 丁香六月激情综合| 午夜男女爽爽爽在线视频| 天天色综亚洲91污| 国产精品色片一区二区| 天天操夜夜嗨| 91社操逼| a天堂视频| 欧美日韩性爱无码| 色久桃花影院在线观看| 自拍偷拍 高清无码| av天堂天堂av日韩| 欧美色视频在线| 久久成人午夜精品影院| 双插性欧美一二三区| 脫衣舞一区二区三区| 欧美精品一区二区少妇免费A片 | 亚洲成a人在线观看久| 国产精品嫩草影院免费| 欧美一区二区三区蜜桃| 午夜福利精品| 午夜精品久久久久久久99蜜桃一| 午夜久久无码1000合集| 7777欧美成是人在线观看| 日韩乱插| 操人91| 中亚精品极乱| 久妇网| 天美av在线观看| 丝袜熟女2P| 激情露脸爱| 亚洲黄日韩无码专区| 天天澡天天爽日日av| 少妇专区一二三四五| 9精品久久| 乱色老一区二区三区的观看方式| 91男人综合| 男同专区一区二区三区在线| 东京热天堂网| 超碰在线人妻中文字幕| 蜜乳AV.COM| 亚洲成人福利电影免费| 中文一区二区三区影院| 男女性无套 免费九一| 性久久久| jizzjizz欧美| 丁香九月激情| 1区2区3区在线视频| 超碰97男人| 欧美天堂第二区| 国产诱惑| 精品人妻视频一区二区在线播放| 67914在线兔费成人视频| 国产精品乱码久久| 三级日本一区二区三区| 看一级特黄a大一片| 91麻豆va国产精品| 校园春色制服丝袜中文字亚洲| 久久av色| 九九av| 蜜臀99久| 欧美区亚洲区偷拍区| 玖玖爱免费观看视频| 午夜大香蕉| 麻豆区99999| 任你干在线视频| 大香蕉人妻久久| 免费观看日本操逼视频| 啪啪资源网| 婷婷色色五月天| 熟女中出视频| 91 亚洲情侣偷拍 久久| 日韩人妻有码免费视频| 干干干天天| 国产又大又粗又长视频在线| 涩涩五月天| 两性综合网| 超97在线精品视频| 99老司机精品视频在线观看| 17c嫩草51久久91嫩草| 日韩九九九| 蜜臀久久99精品久久久久久成人小说 | 久久一区二区三区入口| 性影在线视频| 日本免费人成视频播放120秒| 日韩成人高清一区二区| 99re超碰| 好爽视频在线观看视频| 欧美精品激情| 极品少妇久久久| 亚洲美女精品九九视频| 蜜桃臀一区二区aV| 欧美人妻另类在线| 欧美精品亚洲精品日韩传电影| 男人的天堂一区三区| 午夜欧美女人操逼| 国语国产操逼伊人AV网| 国产精品无码在线| 熟女人妇一区二区三区| 国产精选三级在线观看| 国语对白在线播放视频| 亚洲欧美日韩综合在线尤物| 免费观看啪视频| 久热99| 免费看美国人人爽,人人操| 久久久9品一区二区三区| 熟妇亚洲一区二区三区| 91N五十路| 91总综合网| 日本熟妇色熟妇在线视频播放| 日韩青久久| 综合第一页| 中文字幕青青草| 在线中文字幕视频| 日韩精品字幕| 操逼逼中文字幕| 丁香五月久久| 欧洲免费一区二| 91真人天天在线| 亚洲双插| 欧洲在线性爱视频| 眼镜人妻101.com| 精品v日韩欧美国产| www…国产操逼| 97亚洲一区| 91超碰在线播放| 九九九九精品九九九九| 国产一级特黄大片处女| 丁香九月激情| av操操不卡| 国产91丝袜 在线播放| 亚洲国产美女久久久久| 精品人妻中文字幕4399| 天天操天天插| 欧天美中出| 高潮精品| 日本色色色色色视频| 日韩素人无码一区二区三区三州| 久久国语| 欧美v日韩v亚洲v最新在线| 亚洲精品第一| 久久一区,青青青青草视频在线播放| 亚洲图片偷拍欧美| 国产精品亚洲色婷婷久久久| 大香蕉啪啪啪| 麻豆人妻偷人精品无码视频| 南澳成人一级片在线播放| 日本操逼视频免费| 国产精品宅男免费| 美女超碰978| 射丝袜大香蕉| 97爱| 91丨九色丨43老版熟女| 欧美大干日韩| 91免费看一区二区三区| 91精品久久久久久综合五月天| 欧美论理片| 国产精品一区av在线| 亚洲少妇色| 国产精品成人午夜福利| 8050午夜少妇无码| 欧美天堂亚洲电影院一区在线播放 | 欧美色九九| 国产精品久久久久综合| 欧美大色交| 狠狠中文字幕| 懂色AV中文| 天天看精品动漫视频一区| 激情视频网址| 蜜臀久久99精品久久久久久成人小说 | 丝袜美女诱惑 91 视频| 午夜福利无毒不卡| 情色五月天久久久| 精品午夜福利导航| 久久精品亚洲婷婷| 97色碰| 性色乱AV一区二区| 精品人妻一区二区免费看| 蜜臀操逼黄色视频操的好爽| 人人九九精| 婷婷亚洲综合| 欧美色九九| 91黑丝露脚| 91精片| 99自拍B亚洲 | 日本 成 人 小说 电影 一区二区| 国产麻豆91欧美一区二区久久婷婷国产精品| 日本日逼高清| 美国三级日本三级久久99| 国产粉嫩出水在线播放| 人妻精品一区二区三区| 大香交伊人网| 精品国产一区探花在线观看| AV高清一区| 人人艹亚洲| 色偷偷2020免费视频播放| 免费看A片毛毛片在线播| 我爱搞逼综合网| 五月丁香婷婷啪啪| 国产品精品自在在线午夜免费| 狠狠图片青青草| 91超碰人人操| 激情抓乳插进去啪啪啪日韩| 骚妻少妇精品性色无码四色A V| 国产av白丝| 色牛牛AV| 香蕉综合网| 狠狠久久亚洲欧美专区| 欧美草草高清日韩视频| wwwss在线观看| 69国产对白刺激| 高清不卡 中文 人妻| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 国产高清精品福利| 蜜乳视频网站| 欧美日韩在线小说| 2020中文字幕在线| 99在线观看无大码| 天天综合日韩网| 97爱爱爱综合| 自拍偷拍 高清无码| 人妻丝袜日本| 白丝在线一区| 国产精品情侣啪啪| 欧日a| 亚洲熟女人妻中文字幕一区二区 | 久久99视频| 亚洲天堂精品日韩电影| 久久九九精品一区二区| 欧美性战999| 久久ww| 亚洲AV秘 精品久久老牛影视| 日本不卡在线二区三区| 久久激情视频| 亚洲久久东京热一二三四五区视频| 67194无码不卡| 婷婷中文字幕| 日产狠狠干| 人妻嗯啊啊在线播放| 91站街按摩店老熟女熟女| 亚洲欧美日韩精品久| 人妻乱仑一区二区三区| 欧美日本一区二区a人| 久热影视| 欧美日韩另类在线播放| 91搞逼视频| 亚洲精品无码成人久久久99| 99这里只有精品国产| 日本一区二区三区午夜观看| 亚洲另类欧美精品| 99.色网| 亚欧美色| 国产成年女黄特黄| 日韩偷拍一区二区三区| 岛国毛片在线观看免费| 思思热免费在线视频|