返回市场
智能爬虫

智能爬虫

作者:loo-y3 星标更新:2025-04-28

项目介绍

MCP Smart Crawler

MCP Smart Crawler 是一个使用 Playwright 抓取网页内容、提取元数据并下载视频和图像等资源的 Model Context Protocol (MCP) 服务器。

主要功能

  • 从小红书帖子中提取元数据(标题、描述、图像)。
  • 从小红书分享链接下载视频和图像。
  • 使用 Playwright 进行浏览器自动化。

使用方法(MCP 客户端配置)

要在您的 MCP 客户端中使用此服务器,请在客户端的 MCP 服务器设置中添加以下配置。您需要根据服务器脚本的运行模式调整 commandargs

示例配置:

{
  "mcpServers": {
    "mcp-smart-crawler": {
      "command": "npx",
      "args": [
        "-y",
        "mcp-smart-crawler",
        "--download-folder", // 可选
        "c:\\downloads" // 可选
      ],
    }
  }
}

示例对话:

帮我查看这条小红书的内容和图片,并告诉我图片里面是什么
59 XXX发布了一篇小红书笔记,快来看吧! 😆 OfTOBst2PsxctaX 😆 http://xhslink.com/a/xxaabbcczz,复制本条信息,打开【小红书】App查看精彩内容!