Sitemcp
S

Sitemcp

sitemcp是一個能夠抓取整個網站內容並將其作為MCP服務器使用的工具,支持自定義匹配頁面、內容選擇器等功能,適用於文檔和博客類網站的快速檢索。
5分
7.4K

什麼是 Site MCP?

Site MCP 是一個工具,它可以抓取整個網站的內容,並將其轉化為 MCP(Model Context Protocol)服務器。這意味著你可以通過這個服務器輕鬆獲取網頁中的文本內容,而無需手動處理每個頁面。

如何使用 Site MCP?

只需輸入目標網站的 URL,Site MCP 會自動抓取並生成 MCP 服務器。你可以直接在你的 MCP 客戶端中配置它來使用。

適用場景

適用於需要快速獲取大量網頁內容的場景,例如構建知識庫、數據分析或快速原型開發。

主要功能

抓取整個網站
Site MCP 能夠抓取整個網站的內容,包括多個頁面。
可配置的工具名策略
可以通過選項指定工具名稱的策略,比如基於域名、子域名或路徑名。
控制內容長度
設置最大內容長度,避免過長內容影響性能。
匹配特定頁面
可以指定要抓取的頁面路徑模式,提高效率。
基於選擇器的內容提取
支持通過 CSS 選擇器提取網頁上的具體內容。
優勢
簡單易用,只需輸入網址即可開始抓取。
支持多種匹配策略,靈活性高。
內置緩存機制,提升重複抓取效率。
支持多種安裝方式,適合不同開發環境。
侷限性
對於非常大的網站可能需要較長時間抓取。
某些複雜的網頁可能無法正確提取內容。
依賴於第三方庫進行頁面解析,可能存在兼容性問題。

如何使用

安裝 Site MCP
你可以通過 npm 或其他包管理工具全局安裝 Site MCP。
啟動抓取任務
輸入目標網站的 URL 開始抓取。
配置 MCP 客戶端
在你的 MCP 客戶端中配置 Site MCP 服務器。

使用案例

抓取文檔網站
抓取一個技術文檔網站並用於生成知識庫。
抓取組件庫
抓取一個 UI 組件庫並用於快速原型開發。

常見問題

Site MCP 是否支持 HTTPS 網站?
抓取過程中出現錯誤怎麼辦?
是否可以限制抓取的頁面數量?

相關資源

GitHub 項目主頁
訪問 GitHub 項目主頁獲取更多信息。
文檔
閱讀詳細的使用說明。
演示視頻
觀看 Site MCP 的操作演示。

安裝

複製以下命令到你的Client進行配置
{
  "mcpServers": {
    "daisy-ui": {
      "command": "npx",
      "args": [
        "-y",
        "sitemcp",
        "https://daisyui.com",
        "-m",
        "/components/**"
      ]
    }
  }
}
注意:您的密鑰屬於敏感信息,請勿與任何人分享。

替代品

M
MCP
微軟官方MCP服務器,為AI助手提供最新微軟技術文檔的搜索和獲取功能
9.7K
5分
A
Aderyn
Aderyn是一個開源的Solidity智能合約靜態分析工具,由Rust編寫,幫助開發者和安全研究人員發現Solidity代碼中的漏洞。它支持Foundry和Hardhat項目,可生成多種格式報告,並提供VSCode擴展。
Rust
5.9K
5分
D
Devtools Debugger MCP
Node.js調試器MCP服務器,提供基於Chrome DevTools協議的完整調試功能,包括斷點設置、單步執行、變量檢查和表達式評估等
TypeScript
5.4K
4分
S
Scrapling
Scrapling是一個自適應網頁抓取庫,能自動學習網站變化並重新定位元素,支持多種抓取方式和AI集成,提供高性能解析和開發者友好體驗。
Python
8.9K
5分
M
Mcpjungle
MCPJungle是一個自託管的MCP網關,用於集中管理和代理多個MCP服務器,為AI代理提供統一的工具訪問接口。
Go
0
4.5分
C
Cipher
Cipher是一個專為編程AI代理設計的開源記憶層框架,通過MCP協議與各種IDE和AI編碼助手集成,提供自動記憶生成、團隊記憶共享和雙系統記憶管理等核心功能。
TypeScript
0
5分
N
Nexus
Nexus是一個AI工具聚合網關,支持連接多個MCP服務器和LLM提供商,通過統一端點提供工具搜索、執行和模型路由功能,支持安全認證和速率限制。
Rust
0
4分
S
Shadcn Ui MCP Server
一個為AI工作流提供shadcn/ui組件集成的MCP服務器,支持React、Svelte和Vue框架,包含組件源碼、示例和元數據訪問功能。
TypeScript
12.1K
5分
M
Markdownify MCP
Markdownify是一個多功能文件轉換服務,支持將PDF、圖片、音頻等多種格式及網頁內容轉換為Markdown格式。
TypeScript
20.5K
5分
B
Baidu Map
已認證
百度地圖MCP Server是國內首個兼容MCP協議的地圖服務,提供地理編碼、路線規劃等10個標準化API接口,支持Python和Typescript快速接入,賦能智能體實現地圖相關功能。
Python
26.3K
4.5分
F
Firecrawl MCP Server
Firecrawl MCP Server是一個集成Firecrawl網頁抓取能力的模型上下文協議服務器,提供豐富的網頁抓取、搜索和內容提取功能。
TypeScript
65.1K
5分
S
Sequential Thinking MCP Server
一個基於MCP協議的結構化思維服務器,通過定義思考階段幫助分解複雜問題並生成總結
Python
20.8K
4.5分
M
Magic MCP
Magic Component Platform (MCP) 是一個AI驅動的UI組件生成工具,通過自然語言描述幫助開發者快速創建現代化UI組件,支持多種IDE集成。
JavaScript
16.5K
5分
N
Notion Api MCP
已認證
一個基於Python的MCP服務器,通過Notion API提供高級待辦事項管理和內容組織功能,實現AI模型與Notion的無縫集成。
Python
13.4K
4.5分
E
Edgeone Pages MCP Server
EdgeOne Pages MCP是一個通過MCP協議快速部署HTML內容到EdgeOne Pages並獲取公開URL的服務
TypeScript
16.4K
4.8分
C
Context7
Context7 MCP是一個為AI編程助手提供即時、版本特定文檔和代碼示例的服務,通過Model Context Protocol直接集成到提示中,解決LLM使用過時信息的問題。
TypeScript
45.1K
4.7分
AIBase
智啟未來,您的人工智慧解決方案智庫
© 2025AIBase