ToClaw语音控制:通过语音指令操控电脑

浅婷同学_7839

浅婷同学_7839

2026-04-30

874人浏览

原创

toclaw语音控制通过nanobot对接+whisper.cpp本地asr+openclaw技能映射+edge-tts反馈实现闭环。需配置nanobot通信、部署中文whisper模型、定义指令动作映射、启用离线tts,并按序启动多进程服务栈。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

toclaw语音控制:通过语音指令操控电脑

如果您希望摆脱键盘鼠标依赖,仅通过语音指令完成电脑操作,则可能是由于现有交互方式在特定场景下存在物理限制。以下是实现ToClaw语音控制的具体路径:

一、配置ToClaw核心服务与nanobot对接

ToClaw作为ToDesk的AI增强层,需与nanobot建立稳定通信以解析语音意图并触发系统动作。该步骤确保语音输入能被准确转化为可执行指令流。

1、以管理员权限打开PowerShell,执行全局安装命令:npm install -g toclaw @qingchencloud/nanobot

2、运行初始化向导:toclaw onboard --mode VoiceControl

3、在生成的~/.toclaw/config.json中启用nanobot通道,并将端口设为18790,同时开启voiceFeedback选项

4、确认Windows系统中“设置 > 隐私与安全 > 麦克风”已授予toclaw和nanobot应用访问权限

二、部署本地Whisper.cpp语音识别引擎

使用Whisper.cpp替代云端ASR服务,可消除网络延迟与隐私泄露风险,同时适配ToClaw的低延迟语音控制需求。

1、从GitHub releases下载对应平台的Whisper.cpp预编译二进制文件(推荐whisper.cpp-v1.18.0-win-x64.zip)

2、解压至%USERPROFILE%.toclawengineswhisper目录

3、在~/.toclaw/config.json中添加语音识别配置段:{"asr": {"engine": "whisper-cpp", "model": "ggml-base-zh.bin", "beam_size": 5}}

4、将中文优化模型ggml-base-zh.bin放入engines/whisper/models/子目录

三、定义语音指令到OpenClaw动作的映射规则

ToClaw本身不直接执行系统操作,而是通过调用OpenClaw技能模块完成底层控制。该步骤建立自然语言指令与具体操作之间的确定性绑定。

1、在~/.toclaw/skills/voice_commands/index.js中编写指令解析逻辑

openclawkit-excel
openclawkit-excel

Excel操作工具,支持读写、数据处理和报表生成。

下载

2、为“打开微信”指令添加映射:{ "pattern": "打开微信", "action": "open_app", "params": { "app": "WeChat" } }

3、为“截取当前屏幕”添加映射:{ "pattern": "截取当前屏幕", "action": "screenshot", "params": { "save_to": "%USERPROFILE%\Pictures\Screenshots\" } }

4、保存后执行toclaw reload skills使新规则生效

四、启用离线TTS语音反馈模块

为形成完整人机闭环,需在无网络环境下提供操作结果的语音播报。Edge-TTS本地化封装可满足此要求,且避免调用外部API。

1、安装Edge-TTS Python包:pip install edge-tts

2、在~/.toclaw/config.json中配置TTS参数:{"tts": {"engine": "edge-tts", "voice": "zh-CN-XiaoxiaoNeural", "rate": "1.2"}}

3、验证TTS可用性:运行toclaw tts "测试语音反馈正常"

4、确保系统声音输出设备已正确选择,且音量未被静音

五、启动多进程协同服务栈

ToClaw语音控制系统由多个独立进程协同工作,必须按特定顺序启动以保障依赖关系正确建立。

1、先启动nanobot服务:nanobot --port 18790 --model qwen3-4b-instruct

2、再启动Whisper.cpp监听进程:whisper-cpp --port 18791 --threads 4

3、最后启动ToClaw主服务:toclaw start --no-browser

4、观察终端日志中是否连续出现[ASR] Ready、[NANOBOT] Connected、[OPENCLAW] Skills loaded三类就绪标识

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

qwen openclaw

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
C语言变量命名
C语言变量命名

c语言变量名规则是:1、变量名以英文字母开头;2、变量名中的字母是区分大小写的;3、变量名不能是关键字;4、变量名中不能包含空格、标点符号和类型说明符。php中文网还提供c语言变量的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2929

3

c语言入门自学零基础
c语言入门自学零基础

C语言是当代人学习及生活中的必备基础知识,应用十分广泛,本专题为大家c语言入门自学零基础的相关文章,以及相关课程,感兴趣的朋友千万不要错过了。

2023.07.25

2208

9

c语言运算符的优先级顺序
c语言运算符的优先级顺序

c语言运算符的优先级顺序是括号运算符 > 一元运算符 > 算术运算符 > 移位运算符 > 关系运算符 > 位运算符 > 逻辑运算符 > 赋值运算符 > 逗号运算符。本专题为大家提供c语言运算符相关的各种文章、以及下载和课程。

2023.08.02

1180

5

c语言数据结构
c语言数据结构

数据结构是指将数据按照一定的方式组织和存储的方法。它是计算机科学中的重要概念,用来描述和解决实际问题中的数据组织和处理问题。数据结构可以分为线性结构和非线性结构。线性结构包括数组、链表、堆栈和队列等,而非线性结构包括树和图等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.09

1118

4

c语言random函数用法
c语言random函数用法

c语言random函数用法:1、random.random,随机生成(0,1)之间的浮点数;2、random.randint,随机生成在范围之内的整数,两个参数分别表示上限和下限;3、random.randrange,在指定范围内,按指定基数递增的集合中获得一个随机数;4、random.choice,从序列中随机抽选一个数;5、random.shuffle,随机排序。

2023.09.05

1316

5

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

2058

7

c语言get函数的用法
c语言get函数的用法

get函数是一个用于从输入流中获取字符的函数。可以从键盘、文件或其他输入设备中读取字符,并将其存储在指定的变量中。本文介绍了get函数的用法以及一些相关的注意事项。希望这篇文章能够帮助你更好地理解和使用get函数 。

2023.09.20

3240

8

c数组初始化的方法
c数组初始化的方法

c语言数组初始化的方法有直接赋值法、不完全初始化法、省略数组长度法和二维数组初始化法。详细介绍:1、直接赋值法,这种方法可以直接将数组的值进行初始化;2、不完全初始化法,。这种方法可以在一定程度上节省内存空间;3、省略数组长度法,这种方法可以让编译器自动计算数组的长度;4、二维数组初始化法等等。

2023.09.22

14375

6

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

2023.09.22

529

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程