FastGPT 语音交互实战:4 步配好语音输入与语音播报
FastGPT 语音交互实战4 步配好语音输入与语音播报【免费下载链接】FastGPTFastGPT is a knowledge-based platform built on the LLMs, offers a comprehensive suite of out-of-the-box capabilities such as data processing, RAG retrieval, and visual AI workflow orchestration, letting you easily develop and deploy complex question-answering systems without the need for extensive setup or configuration.项目地址: https://gitcode.com/GitHub_Trending/fa/FastGPT在手机上、在车间里、在开车途中打字总是不方便。你只需要对着一句话说话AI 就能听懂并回答回答完了还能直接用语音念给你听。FastGPT 的语音交互功能就是干这件事的语音输入负责把录音转成文字问题语音播报负责把 AI 的文字回复念出来。下面带你从零把它跑起来。️ 先搞懂它是怎么工作的语音输入的路径很简单浏览器把麦克风录到的音频交给一个语音识别STT模型比如官方示例里用的 SenseVoiceSmall模型返回识别出的文字填入输入框。你可以让它自动发送录完直接问出去也可以关掉让用户先看看识别得准不准再发。语音播报有两条路。一条是调用 TTS 语音模型比如 fish-speech-1.5服务端把音频流式返回前端边收边播——回答还没生成完前面的句子已经先读出来了另一条是直接用浏览器内置的语音合成零配置但音色比较普通。模型方式下系统会按句号、问号等标点把长文拆成短句逐段合成避免憋着全文才开口的尴尬。上手教程4 步配置语音功能配置语音模型。到设置 → 模型里添加 TTS 和 STT 模型并创建对应渠道。可以参照 硅基流动接入示例里面演示了选 fish-speech-1.5 做语音模型、SenseVoiceSmall 做语音输入模型。完成后到模型测试页点一下看到全部通过即可。开启语音播报。进入要配语音的应用在应用配置里找到语音播报选择刚才配好的 TTS 模型。做完后弹窗里能直接试听听到朗读声说明通了。开启语音输入。在应用配置里打开语音输入按需勾选自动发送和自动语音回复。保存后前台对话的输入框里会多出一个麦克风图标这就是验证点。发布并实测。应用改完记得点发布再到聊天页按住麦克风说一句话。看到文字自动出现在输入框、AI 回答后自动念出来整条链路就跑通了。更多细节可以看 语音输入官方文档。实际用起来是什么体验移动端和现场场景。用户单手操作、戴着工牌手套语音输入把打字这个门槛直接抹掉了。关掉自动发送让对方确认一下识别文字再发出能明显减少识别偏差带来的来回纠正。连续语音对话的客服场景。把自动发送和自动语音回复同时打开用户说一句、AI 答一句、答完直接念出来全程不用碰屏幕节奏接近真实对话。给不方便看屏幕的用户。语音播报让视障或临时没法看屏幕的用户也能完整获得 AI 的回答内容配合知识库问答效果就是问一句、听一段。常见问题Q提示您的浏览器不支持语音输入怎么办先检查麦克风权限浏览器要允许本站使用麦克风并选对设备另外麦克风只在有 SSL 证书的站点https可用。排查步骤见 聊天框常见问题。Q开了自动语音回复为什么 AI 没有念出来自动语音回复依赖语音播报功能两个必须同时开启。只开了语音输入而没配 TTS 模型回答就只有文字。Q语音播报选模型还是选浏览器合成想音色自然、可控就配 TTS 模型只是内部简单用、不想额外申请模型额度浏览器合成开箱即用无需任何配置。Q配完语音功能聊天里怎么没生效应用配置修改后需要点发布前台聊天才会用上新配置。到这里你的应用已经具备了能听、能答、能念的完整语音能力。想继续深入建议顺着 语音输入文档 和 模型配置说明 把 STT、TTS 模型换成更贴合自己业务的版本再按场景调好自动发送的开关。【免费下载链接】FastGPTFastGPT is a knowledge-based platform built on the LLMs, offers a comprehensive suite of out-of-the-box capabilities such as data processing, RAG retrieval, and visual AI workflow orchestration, letting you easily develop and deploy complex question-answering systems without the need for extensive setup or configuration.项目地址: https://gitcode.com/GitHub_Trending/fa/FastGPT创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考