Atla MCP Server

🚀 Atla MCP サーバー

大規模言語モデル（LLM）がAtla APIと相互作用できるようにする標準化されたインターフェースを提供するMCPサーバーの実装です。これにより、最先端のLLM評価を行うことができます。

詳細情報については、こちらをご覧ください。モデルコンテキストプロトコルについて詳しく知りたい場合は、こちらをご覧ください。

✨ 主な機能

• evaluate_llm_response：与えられた評価基準に基づいて、大規模言語モデルのプロンプトに対する応答を評価します。この関数は、基礎となるAtla評価モデルを使用し、モデル応答のスコアとテキストフィードバック（モデル応答に対する意見を含む）を含む辞書を返します。
• evaluate_llm_response_on_multiple_criteria：複数の評価基準の観点から、大規模言語モデルのプロンプトに対する応答を評価します。この関数は、基礎となるAtla評価モデルを使用し、各要素がある基準の評価スコアとフィードバックを含む辞書であるリストを返します。

🚀 クイックスタート

MCPサーバーを使用するには、Atla APIキーが必要です。既存のキーはこちらで確認でき、新しいキーはこちらで作成できます。

📦 インストール

Python環境の管理にはuvの使用をおすすめします。インストール方法については、こちらをご覧ください。

サーバーの手動実行

uvをインストールし、Atla APIキーを取得したら、MCPサーバーを手動で実行できます。

ATLA_API_KEY=<your-api-key> uvx atla-mcp-server

サーバーへの接続

問題が発生した場合や、他のクライアントへの接続に関するヘルプが必要な場合は、質問を投稿するか、こちらまでお問い合わせください。

OpenAI エージェント SDK

OpenAI エージェント SDKを使用してMCPサーバーとやり取りする詳細については、公式ドキュメントをご覧ください。

1. OpenAI エージェント SDKをインストールします。

pip install openai-agents

2. OpenAI エージェント SDKを使用してサーバーに接続します。

import os

from agents import Agent
from agents.mcp import MCPServerStdio

async with MCPServerStdio(
        params={
            "command": "uvx",
            "args": ["atla-mcp-server"],
            "env": {"ATLA_API_KEY": os.environ.get("ATLA_API_KEY")}
        }
    ) as atla_mcp_server:
    ...

Claude Desktop

Claude DesktopでMCPサーバーを構成する詳細については、公式クイックスタートガイドをご覧ください。

1. 以下の内容をclaude_desktop_config.jsonファイルに追加します。

{
  "mcpServers": {
    "atla-mcp-server": {
      "command": "uvx",
      "args": ["atla-mcp-server"],
      "env": {
        "ATLA_API_KEY": "<your-atla-api-key>"
      }
    }
  }
}

2. Claude Desktopを再起動して変更を適用します。

これで、利用可能なMCPツールのリストにatla-mcp-serverオプションが表示されるはずです。

Cursor

CursorでMCPサーバーを構成する詳細については、公式ドキュメントをご覧ください。

1. 以下の内容を~/.config/cursor.jsonファイルに追加します。

{
  "mcpServers": {
    "atla-mcp-server": {
      "command": "uvx",
      "args": ["atla-mcp-server"],
      "env": {
        "ATLA_API_KEY": "<your-atla-api-key>"
      }
    }
  }
}

🤝 貢献

このプロジェクトへの貢献を歓迎します！参加方法については、こちらをご覧ください。

📄 ライセンス

このプロジェクトはMIT Licenseの保護を受けています。