nataliwhite20534-droid/dsh-xhs-collector
XHS batch collector via CDP Chrome + residential IP. Real case study: 8 keywords, 500+ notes. docs/case-study.md
Project Overview项目介绍
This repository is a DSH-native plugin built specifically for DeepSeek Harness that enables public data collection from Xiaohongshu. It is based on version 0.5.0 of the cn-scraper-mcp library, and all core functionality has been verified both through source code review and end-to-end real-world testing. It includes a complete error code reference table, and supports common actions like keyword search, fetching note details, and pulling public comments. To install the required dependency, you run pip install cn-scraper-mcp>=0.5.0 before adding the plugin to your DSH instance.
This plugin is designed for DSH users who need to collect bulk public Xiaohongshu data for market research, content analysis, or trend tracking. The typical workflow starts with installing the required dependency via the recommended pip command, then configuring a valid logged-in Xiaohongshu cookie stored in the correct directory. Once set up, you can call the plugin’s pre-verified APIs to collect data, and any errors will include a clear error code and step-by-step guidance for resolving the issue. If you hit an error like expired cookies or IP risk, you can quickly fix it and restart your collection job without extensive debugging.
This plugin requires Python 3.11 or newer to run correctly, and you need to have either Chrome or Obscura browser installed on your system to enable anti-detection browsing functionality. On first run, you must provide a valid logged-in Xiaohongshu cookie stored at ~/.cn-scraper-cookies/xiaohongshu.json; without this, the plugin cannot collect content from Xiaohongshu. The project is distributed under the open-source MIT license, so it is free to use and modify. The main limitation is that it cannot collect data reliably without a valid cookie, so you need to update your cookie periodically when it expires.
本仓库是专为DeepSeek Harness(DSH)开发的原生小红书数据采集插件,基于cn-scraper-mcp 0.5.0版本开发,核心功能是提供经过源码和实跑双重验证的小红书公开数据采集能力,包含完整的错误码对照表,支持关键词搜索、笔记详情获取、评论获取等多种采集操作,所有接口调用都经过端到端验证,可直接在DSH中调用。
这款插件面向需要批量采集小红书公开数据的DSH用户,典型工作流程为:先通过pip安装指定版本的依赖,再配置登录后的有效小红书Cookie,之后就可以根据业务需求调用对应接口采集数据。如果采集过程中遇到错误,插件会返回明确的错误码和处理提示,用户可以根据提示快速排查问题,调整采集参数或网络环境后重新执行采集。
本插件依赖Python 3.11以上版本,需要系统预先安装Chrome或Obscura浏览器,首次使用需要配置有效的小红书登录Cookie,存放在~/.cn-scraper-cookies/xiaohongshu.json路径下,项目采用MIT开源协议免费使用,目前不支持未登录状态下的稳定采集,Cookie过期后需要重新更新获取。
请帮我安装这个 DSH 插件。安装前先完成【兼容性检查 + 安全性检查】,检查通过再动手。
插件:dsh-xhs-collector(nataliwhite20534-droid/dsh-xhs-collector)
仓库:https://github.com/nataliwhite20534-droid/dsh-xhs-collector
本站详情页:https://www.yhbd.top/plugins/nataliwhite20534-droid-dsh-xhs-collector/
本站登记:类型 plugin · 归类 原生 DSH 插件 · 许可证 MIT · ⭐ 2 · 最近提交 2026-09-03 · 主语言 Python · 未检测到 DSH 插件清单
按下面顺序执行,每步先把结论告诉我,再进入下一步:
【1 兼容性检查】
① 我这边:DSH 版本、Node 版本、操作系统、当前 profile(web / desktop)。
② 读它的 README、package.json、插件 manifest,列出它要求的 DSH 版本 / Node 版本 / 操作系统 / 外部依赖 / 需要另外先装的运行时。
③ 逐条比对,结论只写「满足 / 不满足 / 未知」三种;不满足的给出可行替代方案。
④ 检查是否和我已装的插件冲突:命令名重复、skill / tool 重名、端口占用、重复注册的 MCP server。
【2 安全性检查】
① 仓库可信度:和上面「本站登记」是否一致;star / fork 数、创建时间、最近提交,是否归档或长期停更。
② 安装脚本:逐行看 package.json 的 preinstall / install / postinstall,以及 install.sh、setup.ps1 之类脚本。出现 curl|bash、下载后直接执行、混淆代码、访问与插件功能无关的域名,立刻停下来告诉我,不要继续装。
③ 依赖:列出新增依赖,标出无人维护、或与知名包拼写近似的可疑包(typosquatting)。
④ 权限与副作用:它会读写哪些目录、访问哪些域名、需要哪些 DSH 权限(filesystem / network / shell / clipboard 等),以及怎么卸载和回滚。
⑤ 如果它要求 sudo / 管理员权限,或权限明显超出功能所需,先停下来问我。
【3 安装】
上面两步没有「不满足」和「高危项」时才执行;用官方推荐方式安装,不要自行提权。
【4 汇报】
用表格输出:检查项 / 结论 / 依据 / 是否需要我决策。拿不准的一律写「未知」并说明要我怎么确认——不要猜,也不要替我决定。
Send this message to DSH in your current session: it verifies compatibility and security first (answering met / not met / unknown item by item) and only installs once everything checks out — it will stop and ask you if it finds a high-risk item. The box scrolls; the copy is the full prompt. CLI install commands may not be accurate across systems, so DSH is the safer route.把上面这条消息直接发给当前会话里的 DSH:它会先核对兼容性与安全性(逐条给「满足 / 不满足 / 未知」),确认没问题再安装,有高危项会停下来问你。框内可滚动,复制到的是完整提示词;安装命令不一定准确,发给 DSH 更稳。
- Only 2 stars - very few users, little community feedback星标只有 2,几乎没人在用,遇到问题缺少社区反馈
- No DSH plugin manifest detected - it may only carry the dsh-plugin topic, so the install method must be confirmed on the spot未检测到 DSH 插件清单:可能只是打了 dsh-plugin 话题,安装方式要现场确认
DSH walks through these 9 checksDSH 会逐条核对这 9 项
Compatibility兼容性
- DSH, Node, OS and profile requirementsDSH 版本 / Node 版本 / 操作系统 / profile 是否满足要求
- External dependencies and runtimes (Electron / Python / Docker, ...)外部依赖与运行时(Electron / Python / Docker 等)是否齐备
- Conflicts with installed plugins: command names, skill / tool names, ports, duplicate MCP registration与已装插件是否冲突:命令名、skill / tool 重名、端口占用、重复 MCP 注册
Security安全性
- Repo matches the facts registered here; archived or abandoned?仓库是否与页面登记一致,是否归档或长期停更
- Safety of preinstall / install / postinstall and install.sh / setup.ps1preinstall / install / postinstall 与 install.sh、setup.ps1 是否安全
- curl|bash, download-then-execute, obfuscation, unrelated domains → stop immediatelycurl|bash、下载即执行、混淆代码、无关域名 → 立刻停止
- Typosquatting or unmaintained packages among the new dependencies新增依赖里有没有 typosquatting 或无人维护的包
- Requested permissions vs. what the feature actually needs申请了哪些权限、是否超出功能所需(filesystem / network / shell / clipboard)
- Any sudo / admin requirement, plus uninstall and rollback是否要求 sudo / 管理员权限,以及卸载与回滚方式
Anything uncertain must be marked unknown with a note on how to confirm it. This site's signal screen is a static snapshot, not a security audit.拿不准的必须标「未知」并说明要我怎么确认。本站的信号筛查是静态快照,不能替代安全审计。
Or use CLI install (for developers)或使用命令行安装(适合开发者)
CLI Install命令行安装
dsh plugin --profile web add github:nataliwhite20534-droid/dsh-xhs-collector
把 nataliwhite20534-droid/dsh-xhs-collector 加入你的 DSH 配置(web profile)即可启用。
READMEREADME
dsh-xhs-collector
小红书 XHS 数据采集工具,基于
cn-scraper-mcp0.5.0, 源码 + 实跑双重验证,错误码对照表完备。
验证状态
不是设计文档,是真实跑通的输出。
| 验证项 | 结果 |
|---|---|
| `pip install cn-scraper-mcp==0.5.0` | ✅ 成功 |
| `from cn_scraper_mcp.engines import XiaohongshuEngine` | ✅ 成功 |
| `XiaohongshuEngine()` 实例化 | ✅ 成功 |
| `engine.search('完美日记', 5)` 调用 | ✅ 真实执行 |
| `engine.ensure_browser()` 启动 Chrome | ✅ 成功(系统已有 Chrome) |
| 无 Cookie 触发 XHS_LOGIN_EXPIRED 错误码 | ✅ 符合预期 |
真实返回(端到端)
from cn_scraper_mcp.engines import XiaohongshuEngine
engine = XiaohongshuEngine(port=9251)
result = engine.search('完美日记', 5)
无登录态返回(关键词无结果):
{
"keyword": "完美日记",
"state": "empty",
"count": 0,
"items": [],
"error_code": "XHS_EMPTY",
"error_message": "未找到相关笔记。非风控问题,可能是关键词无结果。"
}
Chrome 启动后,无 Cookie 返回:
{
"keyword": "完美日记",
"state": "login_expired",
"count": 0,
"items": [],
"error_code": "XHS_LOGIN_EXPIRED",
"error_message": "检测到登录页面,cookies 可能已过期。请更新 ~/.cn-scraper-cookies/xiaohongshu.json"
}
已知事实 vs 文档差异
| 误区 | 正确做法 |
|---|---|
| `from cn_scraper_mcp import XiaohongshuEngine` | `from cn_scraper_mcp.engines import XiaohongshuEngine` ✅ |
| 必须装 playwright | 不需要,cn-scraper-mcp 用 curl_cffi + CDP 直接连 |
| 用 Chrome | Obscura 首选(内置反检测),Chrome 作为 fallback |
安装
pip install cn-scraper-mcp>=0.5.0
完整 API 签名(源码验证)
class XiaohongshuEngine:
def __init__(self, cookies_path: str | None = None, port: int = 9251): ...
def ensure_browser(self) -> bool: ... # Obscura → Chrome fallback
def search(self, keyword: str, limit: int = 10) -> dict: ...
def get_note(self, note_id: str, xsec_token: str | None = None) -> dict: ...
def get_comments(self, note_id: str, xsec_token: str | None = None) -> dict: ...
def cleanup(self): ...
错误码对照表
| error_code | 触发条件 | 处理 |
|---|---|---|
| `XHS_EMPTY` | 关键词无结果 | 换关键词 |
| `XHS_LOGIN_EXPIRED` | Cookie 过期 | 重新扫码登录 |
| `XHS_IP_RISK` | IP 风险 | 换住宅 IP |
| `XHS_CAPTCHA` | 验证码 | 人工或 Obscura stealth |
| `XHS_NOTE_NOT_FOUND` | 笔记不存在 | 跳过 |
| `XHS_BROWSER_UNAVAILABLE` | 无法启动浏览器 | 检查 Chrome/Obscura 安装 |
Cookie 配置
首次使用需要登录:
# 在 DSH 中调用 cn-scraper-mcp 的 guided_login
# 或手动配置:
mkdir -p ~/.cn-scraper-cookies
# 放入 xiaohongshu.json(格式见 cn-scraper-mcp 文档)
配套工具
- dsh-4-role-workflow — 4 角色协作工作流(用 xhs-cli)
- dsh-china-research-notes — 中国平台踩坑经验合集
Jesseovo/last30days-skill-cn
yyyyukari/dsh-plugin-workshop
UncleK/dsh-think-translate
tingfeng347/dsh-vscode-workbench
beancookie/dsh-plugin-anydoc
PHoenixs57/deepseek-aix
ParticleLight/dsh-browser-plus