Tanevanwifferen Usescraper MCP Server

🚀 UseScraper MCPサーバーの使用

このサーバーはTypeScriptベースのMCPサーバーで、UseScraper APIを利用したWebスクレイピング機能を提供します。'scrape'という単一のツールを公開しており、ウェブページの内容を抽出し、複数の形式をサポートします。

✨ 主な機能

ツール

• scrape - ウェブページから内容を抽出します。
  • パラメータ：
    • url（必須）：スクレイピングするウェブページのURL
    • format（任意）：内容を保存する形式（text, html, markdown）。デフォルト：markdown
    • advanced_proxy（任意）：高度なプロキシを使用して、反スクレイピング検出を回避します。デフォルト：false
    • extract_object（任意）：抽出するデータのオブジェクトを指定します。

📦 インストール

1. リポジトリをクローンします：

   git clone https://github.com/your-repo/usescraper-server.git
   cd usescraper-server
   

2. 依存関係をインストールします：

   npm install
   

3. サーバーをビルドします：

   npm run build
   

📚 ドキュメント

Claude Desktopと一緒に使用するには、以下の設定を追加してください。

MacOSでは：~/Library/Application Support/Claude/claude_desktop_config.json
Windowsでは：%APPDATA%/Claude/claude_desktop_config.json%

{
  "mcpServers": {
    "usescraper-server": {
      "command": "node",
      "args": ["/path/to/usescraper-server/build/index.js"],
      "env": {
        "USESCRAPER_API_KEY": "your-api-key-here"
      }
    }
  }
}

/path/to/usescraper-server をサーバーの実際のパスに置き換え、 your-api-key-here をあなたのUseScraper APIキーに置き換えてください。

💻 使用例

基本的な使用法

設定が完了したら、MCPインターフェイスを通じて'scrape'ツールを使用できます。使用例：

{
  "name": "scrape",
  "arguments": {
    "url": "https://example.com",
    "format": "markdown"
  }
}

🔧 技術詳細

開発環境での自動再構築

開発環境で自動再構築を行うには、以下のコマンドを実行します。

npm run watch

デバッグ

MCPサーバーは標準入出力を通じて通信するため、デバッグが難しい場合があります。MCP Inspector を使用することをおすすめします。以下のコマンドでプログラムスクリプトとして実行できます。

npm run inspector

Inspectorは、ブラウザでアクセスできるデバッグツールのURLを提供します。