Scraper.is

🚀 Scraper.is MCP 整合包

Scraper.is MCP 整合包是一款专为 AI 助手打造的强大网络抓取工具。它基于 模型上下文协议 (MCP) 与 Scraper.is 集成，能让 AI 助手通过网络获取实时信息，极大地拓展了 AI 助手的信息获取能力。

🚀 快速开始

Scraper.is MCP 整合包允许 AI 助手通过网络获取实时信息。使用前，你需要获取 Scraper.is API 密钥，具体步骤如下：

1. 在 scraper.is 注册或登录。
2. 访问仪表板中的 API Keys 部分：https://www.scraper.is/dashboard/apikeys。
3. 创建新密钥或复制现有密钥。
4. 安全地保存此密钥，因为你需要它来使用此包。

✨ 主要特性

• 🌐 网页抓取：可从任意网站提取内容。
• 📸 截图：能够捕获网页的视觉表示。
• 📄 多种格式：支持以 Markdown、HTML 或 JSON 格式获取内容。
• 🔄 进度更新：能实时报告抓取操作的进展。
• 🔌 MCP 整合：可与支持 MCP 的 AI 助手无缝集成。

📦 安装指南

你可以使用以下命令进行安装：

使用 npm 安装

npm install -g scraperis-mcp

使用 yarn 安装

yarn global add scraperis-mcp

💻 使用示例

基础用法

环境设置

创建一个 .env 文件并添加你的 Scraper.is API 密钥：

SCRAPERIS_API_KEY=your_api_key_here

Claude Desktop 整合

要与 Claude Desktop 一起使用此包，可按以下步骤操作：

1. 全局安装该包：

npm install -g scraperis-mcp

2. 在 claude_desktop_config.json 文件中添加以下配置：

{
  "mcpServers": {
    "scraperis_scraper": {
      "command": "scraperis-mcp",
      "args": [],
      "env": {
        "SCRAPERIS_API_KEY": "your-api-key-here",
        "DEBUG": "*"
      }
    }
  }
}

3. 将 your-api-key-here 替换为你的实际 Scraper.is API 密钥。
4. 重启 Claude Desktop 以应用更改。

使用 MCP Inspector 进行开发和测试

npx @modelcontextprotocol/inspector scraperis-mcp

高级用法

与 AI 助手集成

此包专为支持模型上下文协议（MCP）的 AI 助手设计。配置完成后，AI 助手可以使用以下工具：

scrape 工具

从网页中抓取内容。

📚 详细文档

API 参考

参数

• url：要抓取的 URL。
• output_format：输出格式，支持 text, html, 或 json。
• proxy：可选代理服务器地址。

示例响应

{
  "content": "...",
  "status": "success"
}

🔧 技术细节

开发

安装依赖

npm install

启动服务

npm start

📄 许可证

本项目采用 MIT License。

贡献

欢迎贡献！请查看 GitHub 仓库 的贡献指南。

此文档提供了 Scraper.is MCP 整合包的完整使用和配置指南，适用于开发者和技术爱好者。