leaveimagination/dsh-qwen-voice

DeepSeek Harness 的语音控制与多会话任务调度,由 Qwen Audio Agent 驱动

Project Overview项目介绍

This is a native experimental voice control plugin built specifically for DeepSeek Harness Web, based on the open source Qwen Audio Agent project. It adds a floating voice ball to the bottom right corner of the DSH web interface, and maintains a consistent active real-time voice connection even when users switch between different DSH sessions. Users can create, continue, and schedule multiple named DSH sessions entirely via natural language voice commands, and check the live execution status of each task directly in the floating panel.

This plugin is designed for DSH users who want to control their workflow hands-free using voice. It lets users spin up multiple parallel tasks from natural language prompts, assigns each task to its own independent DSH session, and automatically announces when each task completes, so users don’t have to wait for all tasks to finish before getting updates. After installation and starting the runtime, users just refresh their DSH web page to see the floating voice ball, and must bind a coordinator session on first use to handle task routing.

The project is released under the open source MIT license, and requires Node.js version 22.22.2 or newer, pnpm 10 or newer, and a running instance of DeepSeek Harness Web version 0.1.0-rc.6 or higher hosted at 127.0.0.1:3080. Currently, this plugin only supports DSH Web and does not work with the DSH Desktop app. Cloud voice integration is only verified for DashScope Qwen Realtime, so users must provide their own valid DashScope API key to use the cloud voice feature.

这是一个基于通义千问音频Agent构建、专为DeepSeek Harness Web设计的实验性语音控制原生插件。它会在DSH网页界面右下角添加一个悬浮语音球,支持切换DSH会话时保持实时语音连接不断开,用户可通过语音创建、继续和调度多个带名称的DSH会话,还能在悬浮面板查看各任务的执行状态,支持中断语音播放和异常任务处理。

本插件面向需要使用语音控制DSH的用户,支持通过自然语言创建多个并行任务,每个任务分配独立会话,任务完成后会自动播报结果,不会要求用户等待全部任务结束。用户安装启动后,只需刷新DSH网页即可看到悬浮球,首次使用需要绑定一个协调会话来调度所有语音任务。

本项目遵循MIT许可证,依赖Node.js 22.22.2+、pnpm 10+和运行在127.0.0.1:3080的DSH Web 0.1.0-rc.6以上版本。当前仅支持DSH Web,不支持DSH桌面版,云端语音仅适配DashScope通义千问实时语音,用户需要自行提供DashScope API密钥。

Pre-install check安装前体检Compatibility · Security兼容性 · 安全性 1 warning1 项注意
  • Only 2 stars - very few users, little community feedback星标只有 2,几乎没人在用,遇到问题缺少社区反馈
DSH walks through these 9 checksDSH 会逐条核对这 9 项

Compatibility兼容性

  • DSH, Node, OS and profile requirementsDSH 版本 / Node 版本 / 操作系统 / profile 是否满足要求
  • External dependencies and runtimes (Electron / Python / Docker, ...)外部依赖与运行时(Electron / Python / Docker 等)是否齐备
  • Conflicts with installed plugins: command names, skill / tool names, ports, duplicate MCP registration与已装插件是否冲突:命令名、skill / tool 重名、端口占用、重复 MCP 注册

Security安全性

  • Repo matches the facts registered here; archived or abandoned?仓库是否与页面登记一致,是否归档或长期停更
  • Safety of preinstall / install / postinstall and install.sh / setup.ps1preinstall / install / postinstall 与 install.sh、setup.ps1 是否安全
  • curl|bash, download-then-execute, obfuscation, unrelated domains → stop immediatelycurl|bash、下载即执行、混淆代码、无关域名 → 立刻停止
  • Typosquatting or unmaintained packages among the new dependencies新增依赖里有没有 typosquatting 或无人维护的包
  • Requested permissions vs. what the feature actually needs申请了哪些权限、是否超出功能所需(filesystem / network / shell / clipboard)
  • Any sudo / admin requirement, plus uninstall and rollback是否要求 sudo / 管理员权限,以及卸载与回滚方式

Anything uncertain must be marked unknown with a note on how to confirm it. This site's signal screen is a static snapshot, not a security audit.拿不准的必须标「未知」并说明要我怎么确认。本站的信号筛查是静态快照,不能替代安全审计。

Or use CLI install (for developers)或使用命令行安装(适合开发者)

CLI Install命令行安装

dsh plugin --profile web add github:leaveimagination/dsh-qwen-voice

把 leaveimagination/dsh-qwen-voice 加入你的 DSH 配置(web profile)即可启用。

READMEREADME

DSH Qwen Voice

简体中文 | English

这是一个基于 Qwen Audio Agent 构建的 DeepSeek Harness Web 实验性语音控制插件。

当前 1.0.0 只连接 DeepSeek Harness Web: http://127.0.0.1:3080。可以从 GitHub 独立安装,但首次使用仍需提供 DashScope API Key,并在网页中选择一个真实会话作为 Coordinator。

如果没有 Qwen Audio Agent,就不会有这个项目。本项目使用 Qwen Audio Agent 作为实时语音引擎,并在其基础上增加 DeepSeek Harness 插件界面、 ACP 桥接和多会话任务路由。衷心感谢 Qwen Audio Agent 的维护者和所有贡献者, 感谢他们将优秀的实时语音 Agent 能力开源给社区。

插件会在 Harness 页面加入一个悬浮语音球。切换 DSH 会话时,实时语音连接不会 断开。用户可以在同一个浏览器标签页中,通过语音创建、继续和调度多个有名称的 DSH 会话,并在悬浮面板中查看任务状态。

主要功能

  • 切换 Harness 会话时保持实时语音连接;
  • 通过自然语言创建、继续和调度多个 DSH 会话;
  • 在一个浏览器标签页中并行安排多个任务;
  • 显示最新任务及其执行状态;
  • 支持中断语音播放;
  • 中断任务时显示处理中状态,并根据 Gateway 返回结果确认成功或报告失败;
  • 任务完成后及时播报,不必等待全部任务结束;
  • 通过播放状态回执减少重复播报;
  • 根据任务目标生成更容易识别的侧边栏会话名称。

运行环境

  • DeepSeek Harness Web 0.1.0-rc.6(当前开发环境也验证过 0.1.0-rc.7)
  • Node.js 22.22.2+、24.15.0+ 或 26+
  • npm 10+ 与 pnpm
  • 提供 Windows 启动脚本;插件和 ACP 桥接本身使用跨平台 Node.js

本项目是社区集成,不是 DeepSeek 或 Qwen 的官方版本。两个上游项目仍在快速 迭代。项目已经内置并锁定经过验证的 Qwen Audio Agent Runtime,用户不需要 另外安装、升级或选择 Qwen Audio Agent 版本。

当前支持范围

本项目把“实时语音前台”和“后台任务 Agent”分开处理。目前正式支持:

  • 实时语音前台:DashScope Qwen-Audio-Realtime,包括 qwen-audio-3.0-realtime-plus(默认)、 qwen-audio-3.0-realtime-flash、qwen3.5-omni-flash-realtime 和 qwen3.5-omni-plus-realtime;
  • 可选实时语音前台:Qwen Audio Agent 上游提供的 Hugging Face speech-to-speech 本地前台;
  • 后台任务 Agent:DeepSeek Harness Web,通过本项目的 ACP Bridge 创建、继续、 查询、取消和重定向 DSH 会话任务。整条链路固定使用 127.0.0.1:3080, 不会自动探测或连接同时运行的 Desktop 实例,避免会话状态分裂。

当前不支持直接使用 OpenAI Realtime、Gemini Live 或其他未在上游注册的 云端实时语音 Provider。后台 Agent 支持某个模型供应商,不代表实时语音前台也支持该供应商。

安装

Windows 一键安装(推荐)

先启动 DSH Web 并确认能打开 http://127.0.0.1:3080,然后执行:

git clone https://github.com/leaveimagination/dsh-qwen-voice.git
cd dsh-qwen-voice
.\scripts\install.cmd

安装器会检查 Node.js、按需安装 pnpm 11、安装依赖、应用 Qwen 兼容补丁、 构建并注册两个 DSH 插件,然后以隐藏输入方式询问 DashScope API Key,最后启动 语音 Runtime。真实 Key 只会写入本机 %USERPROFILE%\.config\qwaudio\config.env,不会进入仓库。

需要只安装、不立即启动时:

.\scripts\install.cmd -SkipStart

前置要求

依赖 版本
Node.js 22.22.2+、24.15.0+ 或 26+
pnpm 10+(推荐 11.x)
DeepSeek Harness Web 0.1.0-rc.6(已安装并运行在 127.0.0.1:3080)

Showing the opening section of the README — the full document lives in the repository以上为 README 开头摘要,完整文档在仓库内 · View the full README on GitHub →在 GitHub 查看完整 README →

← 上一个 Prev deepseek-harness-gui 下一个 Next dsh-visibridge →