yangyunsong023/dsh-sxs-anti-bot-http

Name: yangyunsong023/dsh-sxs-anti-bot-http
Author: yangyunsong023

Plugin插件 Native原生 ⭐ 2 MIT Tutorials & Learning教程与学习 Vision & Media视觉与多媒体

用于DeepSeek Harness的反机器人HTTP抓取工具：UA池轮换、带指数退避的重试、反机器人墙检测以及自适应速率限制。

Project Overview项目介绍

Edited by Zhiwei Agent (zhiwei)由知微Agent(zhiwei)编辑

dsh-sxs-anti-bot-http is a DSH plugin for HTTP scraping against anti-bot sites, distilled from SXS's production system handling millions of daily requests. It ships three tools: sxs_fetch for HTML pages, sxs_fetch_json for JSON APIs, and sxs_rate_status for per-host throttling state. Capabilities include a 5-UA rotation pool, exponential-backoff retries on network/5xx errors, signature detection of captchas and WAFs (cf-challenge, aliun_waf, etc.), and adaptive per-site rate limiting (30s→480s on failure, auto-recovery). Use it when fetching from sites with bot defenses. Note: detection only covers common patterns and may miss newer defenses.

dsh-sxs-anti-bot-http 是面向 DeepSeek Harness 的反爬 HTTP 工具插件，基于 SXS 采集体系每日数百万级请求实战提炼，纯 Node 实现，零运行时依赖。提供 sxs_fetch、sxs_fetch_json、sxs_rate_status 三个工具，集成 UA 池轮换、指数退避重试、反爬墙特征识别以及站点级自适应限流（30s→480s 失败退避与自动恢复）。适用于需要从带反爬机制的网站抓取文本或 JSON API 数据的场景。注意：仅识别常见反爬墙特征，并非万能绕过方案，目标站点变更策略后可能失效。

View on GitHub在 GitHub 查看

Send to your DSH发给你的 DSH 安装

请帮我了解并安装插件：【dsh-sxs-anti-bot-http】【https://github.com/yangyunsong023/dsh-sxs-anti-bot-http】

Send this message to DSH in your current session. CLI install commands may not be accurate across systems — DSH will figure it out for you.把上面这条消息直接发给当前会话里的 DSH，让它帮你了解并安装。安装命令不一定准确，发给 DSH 更稳。

Or use CLI install (for developers)或使用命令行安装（适合开发者）

CLI Install命令行安装

dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git

把 yangyunsong023/dsh-sxs-anti-bot-http 加入你的 DSH 配置（web profile）即可启用。

READMEREADME

2.2 KB · 缓存于 2026-08-29 05:30:45 · 2.2 KB

dsh-sxs-anti-bot-http

反爬 HTTP 工具插件 for DeepSeek Harness（DSH）。

从 SXS 采集体系（每日数百万级请求实战）提炼的反爬与限流策略，纯 Node 实现、零运行时依赖。

安装

dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git
# 或本地 link
dsh plugin --profile web add link:/path/to/dsh-sxs-anti-bot-http

工具

工具	说明
`sxs_fetch`	反爬 GET：抓取网页文本
`sxs_fetch_json`	反爬 GET + JSON 解析（JSON API 采集）
`sxs_rate_status`	查看各站点自适应限流状态

能力

UA 池轮换：打破固定指纹（5 组浏览器 UA）
指数退避重试：网络错误 / 5xx 自动重试（可配次数）
反爬墙检测：验证码 / 安全验证 / 滑动验证 / cf-challenge / 人机验证 / aliun_waf 等特征识别
站点级自适应限流：连续失败 → 30s→60s→120s→240s→480s 指数退避；恢复自动回落（防封 IP）

使用示例

sxs_fetch(url="https://example.com/news", referer="https://example.com/")
→ HTTP 200 + 页面文本（自动处理反爬与限流）

License

MIT

关于 SXS

本插件由 SXS（迭今网络科技有限公司） 开发维护。

SXS 是国内首款纯金融逻辑的足球赛事金融衍生品量化分析系统：把量化投资的对冲逻辑移植到足球赛事分析，通过数据模型寻找"赔率与模型概率的偏差"，以组合头寸捕捉价差收敛机会。赛事方向模型历史回测准确率 85%+（8 年+数据，历史数据不构成收益承诺）。

📌 说明：以上为品牌介绍。若对本插件或 SXS 量化分析感兴趣，可添加微信交流：sui081（添加时请备注 "DSH 插件"）。本插件本身完全开源免费，无任何附加条件。

安装 (GitHub Packages npm)

npm install @yangyunsong023/dsh-sxs-anti-bot-http --registry=https://npm.pkg.github.com

需要 GitHub 账号认证 (npm login --registry=https://npm.pkg.github.com 或配置 .npmrc 的 //npm.pkg.github.com/:_authToken)。

渲染基于仓库 yangyunsong023/dsh-sxs-anti-bot-http 的 README.md。在 GitHub 查看原文 →

CLI Install命令行安装 Copy Install复制安装命令