Sitemcp：将网站变成MCP服务器的一个开源项目

sitemcp是什么？

sitemcp能够抓取网站内容并缓存，支持使用micromatch指定抓取的页面路径以及 CSS 选择器来精细化选择页面内容，并把抓取的内容用作MCP服务器的数据源，也就是说它把静态网站变成了一个可交互的知识库，配合MCP客户端进行提问，获取更精准的信息。

sitemcp功能

内容抓取与缓存：可以抓取指定网站的全部或部分页面，并将其缓存起来。支持使用 micromatch 来指定抓取的页面路径，例如：

内容选择器：在某些页面中，mozilla/readability 提取的内容可能不够准确，此时可以通过指定 CSS 选择器来精确提取可读内容：

与 MCP 客户端配合使用：sitemcp 可以与 MCP 客户端（如 Claude Desktop）配合使用。通过配置文件，可以在客户端中启动 sitemcp 服务器。例如：

缓存机制：默认会在 ~/.cache/sitemcp 中缓存抓取的页面。如果不需要缓存，可以通过 --no-cache 标志来禁用。

sitemcp应用

sitemcp 等于是把静态网站变成了一个可交互的知识库，配合 MCP 客户端进行提问，解锁了更丰富的应用场景。例如，用户可以将抓取的网站内容作为知识库，通过 MCP 客户端进行提问，获取更精准的信息。

sitemcp使用教程

安装：sitemcp 支持多种安装方式。可以使用以下命令进行一次性安装：

或者，也可以将其全局安装：

使用：使用时只需指定目标网站的 URL：

还可以通过 --concurrency 参数指定并发数，以提高抓取效率：

github地址：https://github.com/ryoppippi/sitemcp