Fetch MCP Server Y8a

🚀 モデルコンテキストプロトコル（MCP）サーバーの取得

このサーバーは、ブラウザ自動化、OCR技術、および複数の抽出方法を利用して、ネットワーク上のコンテンツを取得する機能を提供するモデルコンテキストプロトコル（Model Context Protocol）サーバーです。このサーバーにより、大規模言語モデル（LLMs）は、JavaScriptレンダリングが必要なページや、簡単なスクレイピングを防ぐ技術を使用しているページからでも、インターネットページのコンテンツを検索し、処理することができます。

✨ 主な機能

利用可能なツール

• fetch - ブラウザ自動化と複数の抽出方法（OCRを含む）を使用して、インターネットからURLをスクレイピングします。
  • url (文字列、必須)：スクレイピングするURL
  • raw (ブール値、オプション)：簡略化された内容ではなく、実際のHTMLコンテンツを取得します（デフォルト: false）

サーバーは、以下の複数の方法を使用してコンテンツを抽出します：

1. undetected-chromedriverを使用したブラウザ自動化
2. pytesseractとレイアウト検出を使用したOCR
3. requests/BeautifulSoupを使用したHTML抽出
4. ドキュメント解析（PDF、DOCX、PPTX）
5. 生のMarkdown変換方法

サーバーは、sophisticated scoring systemを使用して、以下の要素を考慮して最適な結果を選択します：

1. 基本コンテンツスコア（満点50点）

   • コンテンツの長さに応じてポイントを付与します（100文字ごとに1点、最大50点）
   • 極端に短いコンテンツ（<100文字）には減点します

2. 構造ボーナス（満点20点）

   • 構造が良好なコンテンツにポイントを付与します
   • コンテンツの段落が多いほど、組織性が高いと判断します

3. 品質ペナルティ

   • エラーメッセージを検出してペナルティを与えます
   • エラーインジケータを含むコンテンツのスコアを下げます
   • コンテンツの構造と読みやすさを検証します

この評価システムにより、どの抽出方法を使用した場合でも、最も信頼性が高く、品質の高いコンテンツが選択されます。評価の決定を追跡するためのデバッグログも提供されます。

ヒント

• fetch
  • ブラウザ自動化を使用して、URLをスクレイピングし、そのコンテンツをMarkdown形式で抽出します。

パラメータ：

• url (文字列、必須)：スクレイピングするURL

📦 インストール

Dockerを使用する場合

mcp-server-fetchをDockerを使用してインストールし、実行するには、以下の手順に従ってください：

1. Dockerイメージを構築する：

   docker build -t mcp-server-fetch .
   

2. Dockerコンテナを実行する：

   docker run --rm -i mcp-server-fetch
   

📚 ドキュメント

設定

Roo CodeまたはClaude Appの設定

以下の内容をClaudeの設定に追加してください：

{
  "mcpServers": {
    "fetch": {
      "command": "docker",
      "args": [
        "run",
        "--rm",
        "-i",
        "mcp-server-fetch"
      ],
      "disabled": false,
      "alwaysAllow": []
    }
  }
}

ユーザーエージェントのカスタマイズ

デフォルトでは、リクエストがモデル（ツール経由）からのものか、ユーザーが直接行ったものかに応じて、サーバーは以下のユーザーエージェントを使用します：

ModelContextProtocol/1.0 (Autonomous; +https://github.com/modelcontextprotocol/servers)

または

ModelContextProtocol/1.0 (User-Specified; +https://github.com/modelcontextprotocol/servers)

argsリストに--user-agentパラメータを追加することで、ユーザーエージェント文字列をカスタマイズすることができます。

ブラウザ自動化の設定

ブラウザ自動化を設定する必要がある場合は、以下の例を参考にしてください：

{
  "mcpServers": {
    "fetch": {
      "command": "docker",
      "args": [
        "run",
        "--rm",
        "-i",
        "mcp-server-fetch"
      ],
      "customHeaders": {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.121 Safari/537.36"
      },
      "disableCache": true,
      "screenshots": {
        "enabled": true,
        "path": "/screenshots"
      }
    }
  }
}

高度な設定

以下の高度なオプションを使用することができます：

• proxy：プロキシを設定します
• timeout：リクエストのタイムアウト時間を設定します
• maxRedirects：最大リダイレクト回数を設定します
• retry：リトライ回数を設定します
• delay：スクレイピングの遅延時間を設定します

📄 ライセンス

このプロジェクトは、MIT Licenseの下でライセンスされています：

MIT License

Copyright (c) 2023 Your Name

Permission is hereby granted, free of charge, to any person obtaining a copy
of this software and associated documentation files (the "Software"), to deal
in the Software without restriction, including without limitation the rights
to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
copies of the Software, and to permit persons to whom the Software is
furnished to do so, subject to the following conditions:

The above copyright notice and this permission notice shall be included in all
copies or substantial portions of the Software.

THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
SOFTWARE.

🔗 コンタクト

• メール：contact@example.com
• GitHub：あなたのGitHubリンク

Fetch MCPサーバーをご利用いただき、ありがとうございます！何か問題や提案があれば、いつでもご連絡ください。