Webscraper

🚀 MCP網絡爬蟲

MCP網絡爬蟲可助力Claude桌面版的MCP服務器，通過提供鏈接抓取網站文本。它不僅能從YouTube鏈接抓取字幕，還能從PDF鏈接提取內容，功能十分強大。

🚀 快速開始

Claude桌面版的MCP服務器藉助本網絡爬蟲，可實現對不同類型鏈接內容的抓取。無論是網頁文本、YouTube字幕，還是PDF文檔，都能輕鬆獲取。

✨ 主要特性

• 支持從網頁鏈接抓取文本內容。
• 可以從YouTube鏈接中提取視頻字幕。
• 能夠將PDF鏈接轉換為Markdown文本。

📚 詳細文檔

可用工具：

get_pdf

• 功能：將指向PDF文件的URL轉換為Markdown文本。
• 參數：input_url (str)：要轉換的PDF文件路徑。
• 返回：str：轉換後的markdown_text。

get_webpage_content

• 功能：根據提供的鏈接返回網頁上的文本內容。當用戶提供的鏈接不是YouTube或GitHub鏈接，且基於該鏈接提出問題時，應調用此函數。
• 參數：url：要從中提取文本的URL。

get_youtube_transcript

• 功能：當從用戶那裡收到YouTube鏈接時使用此工具，它將從YouTube視頻中提取字幕並返回。若用戶在提供鏈接後詢問與該視頻相關的問題，可使用此工具回答。
• 參數：url：要從中提取文本的URL。