MCP Server Webscan

🚀 MCP 網頁掃描服務器

MCP 網頁掃描服務器是一個基於 Model Context Protocol (MCP) 的服務器，主要用於網頁內容的抓取、分析和信息提取。它提供了一系列實用工具，能有效獲取、分析並提取網頁中的關鍵信息。

🚀 快速開始

MCP 網頁掃描服務器為網頁信息處理提供了便捷的解決方案，你可以按照以下步驟進行安裝和使用。

✨ 主要特性

• 頁面抓取：能夠將網頁轉換為 Markdown 格式，極大地方便了後續的分析工作。
• 鏈接提取：可以從網頁中精準提取並深入分析鏈接。
• 網站爬取：支持遞歸爬取網站內容，有助於全面發現信息。
• 錯誤處理：具備全面的錯誤處理機制，可處理無效參數、網絡錯誤、內容解析錯誤、URL 驗證等多種問題。

📦 安裝指南

使用 Smithery 安裝

# 使用Smithery進行安裝的命令

構建

npm run build

💻 使用示例

開發模式

npm run dev

服務器啟動

node index.ts

基礎用法

安裝說明

使用 Smithery 安裝

# 使用Smithery進行安裝的命令

手動安裝

1. 克隆倉庫：git clone <repository-url>
2. 進入目錄：cd mcp-webscan-server
3. 安裝依賴：npm install

高級用法

工具列表

1. fetch-page：

   • 用途：將網頁轉換為 Markdown 格式。
   • 參數：URL（必填）。
   • 返回值：提取的 Markdown 內容。

2. extract-links：

   • 用途：從網頁中提取所有鏈接。
   • 參數：URL（必填）。
   • 返回值：提取的所有鏈接列表。

3. crawl-site：

   • 用途：遞歸爬取網站內容。
   • 參數：起始 URL（必填）、深度限制（可選）。
   • 返回值：爬取到的所有網頁鏈接列表。

🔧 技術細節

項目結構圖

├── src/
│   ├── initialize.ts
│   └── index.ts    # 主服務器入口文件
├── build/          # 編譯後的 JavaScript（已更正）
├── node_modules/
├── .clinerules
├── .gitignore
├── Dockerfile
├── LICENSE
├── mcp-consistant-servers-guide.md
├── package.json
├── package-lock.json
├── README.md
├── RFC-2025-001-Refactor.md
├── smithery.yaml
└── tsconfig.json

🤝 貢獻指南

步驟

• Fork 倉庫
• 創建功能分支（例如：git checkout -b feature/amazing-feature）
• 提交更改（例如：git commit -m 'Add some amazing feature'）
• 推送到分支（例如：git push origin feature/amazing-feature）
• 提交 Pull Request

代碼規範

• 遵循項目現有的編碼風格。
• 確保新增功能通過現有測試用例。
• 提供詳細的提交說明。

📄 許可證

本項目採用 MIT 許可證，詳情請參閱 LICENSE 文件。