Tanevanwifferen Usescraper MCP Server

🚀 使用UseScraper MCP服務器

這是一個基於TypeScript的MCP服務器，藉助UseScraper API提供強大的網絡抓取功能。它僅暴露了一個名為 'scrape' 的工具，卻能輕鬆提取網頁內容，還支持多種格式，為您的網頁數據獲取提供便利。

點擊此處

✨ 主要特性

工具

• scrape - 從網頁中精準提取內容
  • 參數：
    • url（必填）：您要抓取的網頁地址
    • format（可選）：保存內容的格式，支持 text、html、markdown ，默認採用 markdown 格式
    • advanced_proxy（可選）：開啟高級代理，有效規避反爬蟲檢測，默認關閉
    • extract_object（可選）：指定您要提取的數據對象

📦 安裝指南

克隆倉庫

git clone https://github.com/your-repo/usescraper-server.git
cd usescraper-server

安裝依賴項

npm install

構建服務器

npm run build

📚 詳細文檔

配置說明

若要與Claude Desktop搭配使用，請進行如下配置：

• 在 MacOS 上：配置文件路徑為 ~/Library/Application Support/Claude/claude_desktop_config.json
• 在 Windows 上：配置文件路徑為 %APPDATA%/Claude/claude_desktop_config.json%

{
  "mcpServers": {
    "usescraper-server": {
      "command": "node",
      "args": ["/path/to/usescraper-server/build/index.js"],
      "env": {
        "USESCRAPER_API_KEY": "your-api-key-here"
      }
    }
  }
}

請將 /path/to/usescraper-server 替換為服務器的實際路徑，並把 your-api-key-here 替換為您的UseScraper API密鑰。

使用示例

配置完成後，您就能通過MCP界面使用 scrape 工具啦。以下是示例用法：

{
  "name": "scrape",
  "arguments": {
    "url": "https://example.com",
    "format": "markdown"
  }
}

開發環境

若您需要在開發環境下實現自動重建，可使用以下命令：

npm run watch

調試建議

由於MCP服務器通過標準輸入輸出進行通信，調試可能頗具挑戰。我們強烈推薦使用 MCP Inspector ，您可以通過以下命令將其作為程序腳本運行：

npm run inspector

Inspector會提供一個可在瀏覽器中訪問的調試工具URL，助您輕鬆調試。