此项目是 虾哥 小智ai 后端的golang版本,实现了asr输入, llm输出, tts输入输出 全流式处理,依托于golang的高性能可以支撑大并发的请求
- 全流式数据处理
- 实现了小智ai websocket
- 实现了mqtt和udp服务器
- 外部资源连接池复用,减少耗时
- 支持 全局mcp、websocket接入点mcp、端侧mcp
- 支持 视觉mcp
实现了silvero vad声音检测
对接了funasr的websocket服务接口,部署地址 https://github.com/modelscope/FunASR/blob/main/runtime/docs/SDK_advanced_guide_online_zh.md
实现了 openai 格式兼容的接口
已实现
- doubao websocket
- edgetts
- cosyvoice
go build cmd/mqtt/*.go
个人微信:hackers365