Usescraper MCP Server

🚀 UseScraper MCPサーバーの使用

これはTypeScriptベースのMCPサーバーで、UseScraper APIを使用したウェブページのスクレイピング機能を提供します。'scrape'という単一のツールを公開しており、複数の形式でウェブページからコンテンツを抽出することができます。

✨ 主な機能

ツール

• scrape - ウェブページからコンテンツを抽出します。
  • パラメータ：
    • url（必須）：スクレイピングするウェブページのURLです。
    • format（オプション）：コンテンツを保存する形式（text, html, markdown）。デフォルトはmarkdownです。
    • advanced_proxy（オプション）：高度なプロキシを使用して反スクレイピング検出を回避します。デフォルトはfalseです。
    • extract_object（オプション）：抽出するデータのオブジェクトを指定します。

📦 インストール

Smithery経由でのインストール

Claude DesktopにUseScraperを自動インストールするには、Smitheryを通じて以下のコマンドを実行してください。

npx -y @smithery/cli install usescraper-server --client claude

手動インストール

1. リポジトリをクローンします。

   git clone https://github.com/your-repo/usescraper-server.git
   cd usescraper-server
   

2. 依存関係をインストールします。

   npm install
   

3. サーバーをビルドします。

   npm run build
   

🔧 設定

Claude Desktopと一緒に使用するには、サーバーの設定を追加してください。

MacOSの場合：~/Library/Application Support/Claude/claude_desktop_config.json
Windowsの場合：%APPDATA%/Claude/claude_desktop_config.json%

{
  "mcpServers": {
    "usescraper-server": {
      "command": "node",
      "args": ["/path/to/usescraper-server/build/index.js"],
      "env": {
        "USESCRAPER_API_KEY": "your-api-key-here"
      }
    }
  }
}

/path/to/usescraper-server をサーバーの実際のパスに置き換え、your-api-key-here をあなたのUseScraper APIキーに置き換えてください。

💻 使用例

基本的な使用法

設定が完了したら、MCPインターフェースを通じて 'scrape' ツールを使用できます。以下は使用例です。

{
  "name": "scrape",
  "arguments": {
    "url": "https://example.com",
    "format": "markdown"
  }
}

🔧 開発

自動再構築付きの機能開発

npm run watch

デバッグ

MCPサーバーは標準入出力を通じて通信するため、デバッグは難しい場合があります。MCP Inspector の使用をおすすめします。これはパッケージスクリプトとして提供されています。

npm run inspector

Inspectorは、ブラウザでデバッグツールにアクセスするためのURLを提供します。