Sitemcp
什麼是 Site MCP?
Site MCP 是一個工具,它可以抓取整個網站的內容,並將其轉化為 MCP(Model Context Protocol)服務器。這意味著你可以通過這個服務器輕鬆獲取網頁中的文本內容,而無需手動處理每個頁面。如何使用 Site MCP?
只需輸入目標網站的 URL,Site MCP 會自動抓取並生成 MCP 服務器。你可以直接在你的 MCP 客戶端中配置它來使用。適用場景
適用於需要快速獲取大量網頁內容的場景,例如構建知識庫、數據分析或快速原型開發。主要功能
抓取整個網站Site MCP 能夠抓取整個網站的內容,包括多個頁面。
可配置的工具名策略可以通過選項指定工具名稱的策略,比如基於域名、子域名或路徑名。
控制內容長度設置最大內容長度,避免過長內容影響性能。
匹配特定頁面可以指定要抓取的頁面路徑模式,提高效率。
基於選擇器的內容提取支持通過 CSS 選擇器提取網頁上的具體內容。
優勢與侷限性
優勢
簡單易用,只需輸入網址即可開始抓取。
支持多種匹配策略,靈活性高。
內置緩存機制,提升重複抓取效率。
支持多種安裝方式,適合不同開發環境。
侷限性
對於非常大的網站可能需要較長時間抓取。
某些複雜的網頁可能無法正確提取內容。
依賴於第三方庫進行頁面解析,可能存在兼容性問題。
如何使用
安裝 Site MCP
你可以通過 npm 或其他包管理工具全局安裝 Site MCP。
啟動抓取任務
輸入目標網站的 URL 開始抓取。
配置 MCP 客戶端
在你的 MCP 客戶端中配置 Site MCP 服務器。
使用案例
抓取文檔網站抓取一個技術文檔網站並用於生成知識庫。
抓取組件庫抓取一個 UI 組件庫並用於快速原型開發。
常見問題
Site MCP 是否支持 HTTPS 網站?
抓取過程中出現錯誤怎麼辦?
是否可以限制抓取的頁面數量?
相關資源
GitHub 項目主頁
訪問 GitHub 項目主頁獲取更多信息。
文檔
閱讀詳細的使用說明。
演示視頻
觀看 Site MCP 的操作演示。
精選MCP服務推薦

Baidu Map
已認證
百度地圖MCP Server是國內首個兼容MCP協議的地圖服務,提供地理編碼、路線規劃等10個標準化API接口,支持Python和Typescript快速接入,賦能智能體實現地圖相關功能。
Python
702
4.5分

Markdownify MCP
Markdownify是一個多功能文件轉換服務,支持將PDF、圖片、音頻等多種格式及網頁內容轉換為Markdown格式。
TypeScript
1.7K
5分

Firecrawl MCP Server
Firecrawl MCP Server是一個集成Firecrawl網頁抓取能力的模型上下文協議服務器,提供豐富的網頁抓取、搜索和內容提取功能。
TypeScript
3.8K
5分

Sequential Thinking MCP Server
一個基於MCP協議的結構化思維服務器,通過定義思考階段幫助分解複雜問題並生成總結
Python
259
4.5分

Context7
Context7 MCP是一個為AI編程助手提供即時、版本特定文檔和代碼示例的服務,通過Model Context Protocol直接集成到提示中,解決LLM使用過時信息的問題。
TypeScript
5.2K
4.7分

Magic MCP
Magic Component Platform (MCP) 是一個AI驅動的UI組件生成工具,通過自然語言描述幫助開發者快速創建現代化UI組件,支持多種IDE集成。
JavaScript
1.7K
5分

Edgeone Pages MCP Server
EdgeOne Pages MCP是一個通過MCP協議快速部署HTML內容到EdgeOne Pages並獲取公開URL的服務
TypeScript
252
4.8分

Notion Api MCP
已認證
一個基於Python的MCP服務器,通過Notion API提供高級待辦事項管理和內容組織功能,實現AI模型與Notion的無縫集成。
Python
121
4.5分