MCP Server Scraper

🚀 MCPサーバー構成情報スクレイピングスクリプト

このスクリプトは、'https://github.com/modelcontextprotocol/servers/tree/main/src' からMCPサーバーの構成情報をスクレイピングするためのもので、主にLiteLLMプロジェクトで使用されます。

🚀 クイックスタート

スクリプトの実行手順

• コンパイルtypescript：npm run build
• スクリプトの実行：npm start

✨ 主な機能

• GitHubからMCPサーバーの構成情報をスクレイピングする。
• Docker、npx、uvxの各構成情報を取得する。

🔧 技術詳細

実装アプローチとロジックの推論

主な実行可能関数は、GitHubページに移動してオブジェクトを構築する役割を担っています。 ほとんどのスクレイピングロジックは scrapeServerConfiguration 関数に集約されています。MCPサーバーの構成情報はJSON形式で提供され、一部のページ（サーバーディレクトリ）では、ユーザーがこれらの内容を直接ブラウザのクリップボードにコピーすることができます。他のページでは、構成情報は「dockerを使用する」などのドロップダウンメニューに隠されています。このスクレイパーは、主にDocker構成を優先的に取得し、次にnpx構成、最後にuvx構成（存在する場合）を取得します。Playwrightのセレクターがnpx構成を選択する傾向があるため（これはコードロジックの問題かもしれません）、Docker構成を取得するために追加のforループが追加されています（詳細は作者に問い合わせてください）。

デバッグ用にコンソールログが追加されています。必要に応じてコンソールログを削除またはコメントアウトしてください。