llms.txt 檢查

API 與 MCP 說明

重點摘要:llms.txt 檢查工具提供 5 個免費、免註冊的 JSON API 與 4 個 MCP 工具,可檢查網站、查 13 種 AI 爬蟲設定、產生與驗證 llms.txt;付費端點以 x402 收費,可讀最多 45 頁產生較完整草稿。

免費 JSON API,不用註冊。同一網站 1 小時內重複檢查會回傳快取結果。

端點說明
GET /api/check?url=example.com完整檢查:llms.txt 格式、llms-full.txt、Markdown 頁面、AI 爬蟲設定、sitemap、分數與建議
GET /api/robots?url=example.com只看 robots.txt 對 13 種 AI 爬蟲是允許還是封鎖
GET /api/generate?url=example.com讀 sitemap 前 15 頁,產生 llms.txt 草稿
POST /api/validate直接貼 llms.txt 內容(純文字 body)驗證格式
GET /api/directory有 llms.txt 的網站名錄
POST /mcpMCP 工具:check_llms_txt、check_ai_crawler_access、generate_llms_txt、validate_llms_txt

付費端點(x402,USDC)

GET /api/pro/generate?url= 讀取最多 45 頁產生較完整的草稿。沒有付款時回 HTTP 402。

常見問題

有哪些免費 API?

GET /api/check 完整檢查、GET /api/robots 只看 AI 爬蟲設定、GET /api/generate 產生草稿、POST /api/validate 驗證貼上的 llms.txt 內容、GET /api/directory 取得名錄。

MCP 工具有哪些?

透過 POST /mcp 提供 4 個工具:check_llms_txt、check_ai_crawler_access、generate_llms_txt、validate_llms_txt,功能分別對應完整檢查、爬蟲設定、產生草稿與格式驗證。

付費草稿和免費草稿差在哪?

免費的 /api/generate 讀取 sitemap 前 15 頁;付費的 /api/pro/generate 讀取最多 45 頁,以 x402 用 USDC 付款(0.05 USDC),沒有付款時回應 HTTP 402。

驗證 llms.txt 會檢查哪些問題?

會檢查是否缺少 H1 或有多個 H1、H1 是否在第一行、有無引言摘要行與 ## 分區、有無連結、連結是否為完整網址,以及內容是否誤為 HTML。

參考來源