Webscraper

🚀 MCP网络爬虫

MCP网络爬虫可助力Claude桌面版的MCP服务器，通过提供链接抓取网站文本。它不仅能从YouTube链接抓取字幕，还能从PDF链接提取内容，功能十分强大。

🚀 快速开始

Claude桌面版的MCP服务器借助本网络爬虫，可实现对不同类型链接内容的抓取。无论是网页文本、YouTube字幕，还是PDF文档，都能轻松获取。

✨ 主要特性

• 支持从网页链接抓取文本内容。
• 可以从YouTube链接中提取视频字幕。
• 能够将PDF链接转换为Markdown文本。

📚 详细文档

可用工具：

get_pdf

• 功能：将指向PDF文件的URL转换为Markdown文本。
• 参数：input_url (str)：要转换的PDF文件路径。
• 返回：str：转换后的markdown_text。

get_webpage_content

• 功能：根据提供的链接返回网页上的文本内容。当用户提供的链接不是YouTube或GitHub链接，且基于该链接提出问题时，应调用此函数。
• 参数：url：要从中提取文本的URL。

get_youtube_transcript

• 功能：当从用户那里收到YouTube链接时使用此工具，它将从YouTube视频中提取字幕并返回。若用户在提供链接后询问与该视频相关的问题，可使用此工具回答。
• 参数：url：要从中提取文本的URL。