MCP Smart Crawler
M

MCP Smart Crawler

MCP Smart Crawler 是一個基於Playwright的網頁內容爬取工具,專門用於提取小紅書帖子的元數據和下載媒體資源。
2.5分
7.0K

什麼是MCP Smart Crawler?

MCP Smart Crawler是一個智能網頁內容抓取工具,專門設計用於從社交媒體平臺(如小紅書)提取帖子的標題、描述、圖片等元數據,並能下載視頻和圖片資源。

如何使用MCP Smart Crawler?

通過簡單的配置將服務器添加到您的MCP客戶端,然後發送包含小紅書鏈接的消息即可自動獲取內容。

適用場景

適合需要收集社交媒體內容進行分析、存檔或展示的用戶,如市場研究人員、內容創作者或數據分析師。

主要功能

小紅書元數據提取
自動識別並提取小紅書帖子的標題、描述和圖片信息
多媒體資源下載
支持下載小紅書分享鏈接中的視頻和圖片
瀏覽器自動化
使用Playwright實現可靠的瀏覽器自動化操作
優勢
無需手動操作即可獲取完整內容
支持中文社交媒體平臺
可配置下載存儲位置
侷限性
目前主要支持小紅書平臺
需要安裝Playwright環境
可能受網站反爬機制影響

如何使用

配置MCP客戶端
在您的MCP客戶端設置中添加服務器配置
發送請求
向服務器發送包含小紅書鏈接的消息

使用案例

獲取小紅書內容
提取小紅書帖子的文字內容和圖片
下載小紅書視頻
從分享鏈接下載視頻文件

常見問題

需要安裝哪些軟件才能使用?
支持哪些網站?
下載的文件存儲在哪裡?

相關資源

Playwright官方文檔
瀏覽器自動化工具文檔
Node.js下載
運行環境下載
MCP協議說明
Model Context Protocol詳細介紹

安裝

複製以下命令到你的Client進行配置
注意:您的密鑰屬於敏感信息,請勿與任何人分享。

替代品

K
Klavis
Klavis AI是一個開源項目,提供在Slack、Discord和Web平臺上簡單易用的MCP(模型上下文協議)服務,包括報告生成、YouTube工具、文檔轉換等多種功能,支持非技術用戶和開發者使用AI工作流。
TypeScript
9.2K
5分
S
Scrapling
Scrapling是一個自適應網頁抓取庫,能自動學習網站變化並重新定位元素,支持多種抓取方式和AI集成,提供高性能解析和開發者友好體驗。
Python
8.9K
5分
A
Apple Health MCP
一個用於通過SQL查詢蘋果健康數據的MCP服務器,基於DuckDB實現高效分析,支持自然語言查詢和自動報告生成。
TypeScript
7.5K
4.5分
M
MCP Server Airbnb
已認證
Airbnb房源搜索與詳情查詢的MCP服務
TypeScript
11.0K
4分
F
Firecrawl MCP Server
Firecrawl MCP Server是一個集成Firecrawl網頁抓取能力的模型上下文協議服務器,提供豐富的網頁抓取、搜索和內容提取功能。
TypeScript
66.5K
5分
R
Rednote MCP
RedNote MCP是一個為小紅書內容訪問提供服務的工具,支持認證管理、關鍵詞搜索筆記、命令行初始化等功能,可通過URL訪問筆記內容。
TypeScript
9.8K
4.5分
P
Perplexity MCP
已認證
一個基於Perplexity AI API的MCP服務器,為Claude桌面客戶端提供網頁搜索功能。
Python
11.1K
4.1分
E
Exa Web Search
已認證
Exa MCP Server是一個為AI助手(如Claude)提供網絡搜索功能的服務器,通過Exa AI搜索API實現實時、安全的網絡信息獲取。
TypeScript
25.2K
5分
M
Markdownify MCP
Markdownify是一個多功能文件轉換服務,支持將PDF、圖片、音頻等多種格式及網頁內容轉換為Markdown格式。
TypeScript
19.6K
5分
B
Baidu Map
已認證
百度地圖MCP Server是國內首個兼容MCP協議的地圖服務,提供地理編碼、路線規劃等10個標準化API接口,支持Python和Typescript快速接入,賦能智能體實現地圖相關功能。
Python
27.5K
4.5分
F
Firecrawl MCP Server
Firecrawl MCP Server是一個集成Firecrawl網頁抓取能力的模型上下文協議服務器,提供豐富的網頁抓取、搜索和內容提取功能。
TypeScript
66.5K
5分
S
Sequential Thinking MCP Server
一個基於MCP協議的結構化思維服務器,通過定義思考階段幫助分解複雜問題並生成總結
Python
21.9K
4.5分
N
Notion Api MCP
已認證
一個基於Python的MCP服務器,通過Notion API提供高級待辦事項管理和內容組織功能,實現AI模型與Notion的無縫集成。
Python
13.4K
4.5分
E
Edgeone Pages MCP Server
EdgeOne Pages MCP是一個通過MCP協議快速部署HTML內容到EdgeOne Pages並獲取公開URL的服務
TypeScript
16.4K
4.8分
M
Magic MCP
Magic Component Platform (MCP) 是一個AI驅動的UI組件生成工具,通過自然語言描述幫助開發者快速創建現代化UI組件,支持多種IDE集成。
JavaScript
15.5K
5分
C
Context7
Context7 MCP是一個為AI編程助手提供即時、版本特定文檔和代碼示例的服務,通過Model Context Protocol直接集成到提示中,解決LLM使用過時信息的問題。
TypeScript
45.5K
4.7分
AIBase
智啟未來,您的人工智慧解決方案智庫
© 2025AIBase