Commit Graph

20 Commits

Author SHA1 Message Date
xszyou
ba6972a647 周末愉快
1、唇型计算的视音素更换成33毫秒;
2、内置rwkv_api nlp可以直接使用;
3、降低情绪性向数字人端推送的频度;
4、非数字人连接状态不产生接口消息;
5、修复因mp3格式错误而导致一定概率不推送播放信息给数字人端的问题;
6、修复静音等指令执行时提前结束nlp逻辑,而导致用户提问消息不推送数字人端问题;
7、补充wav文件启动清理;
8、websocket工具类升级完善。
2023-08-04 19:13:28 +08:00
xszyou
f8ff5a2187 周末愉快
+ 增加运行时自动清理ui缓存;
+ 增加gpt代理设置可为空;
+ 提高灵聚对接的稳定性。
2023-07-28 18:22:44 +08:00
xszyou
c99ee0cc5a 今天星期三
+ 修复连接数字人之前产生大量ws信息问题;
+ 增加数字人(ue、live2d、xuniren)通讯接口:实时日志;
+ 更新数字人(ue、live2d、xuniren)通讯接口:音频推送。
2023-07-26 18:11:52 +08:00
xszyou
5d4bac29b8 20230714
1、修复linux及mac运行出错问题;
2、修复因唇型出错无法继续执行问题;
3、提供rwkv对接方案。
2023-07-14 23:34:53 +08:00
xszyou
8a4c9d7329 重构nlp模块逻辑
+ 重构NLP模块管理逻辑,便于自由扩展;
+ gpt:拆分为ChatGPT及GPT、更换新的GPT接口、可单独配置代理服务器;
+ 指定yolov8包版本,解决yolo不兼容问题;
+ 修复:自言自语bug、接收多个待处理消息bug。
2023-06-28 19:44:34 +08:00
xszyou
750e77e8b1 集成灵聚NLP api及UI修正
1、集成灵聚NLP api(支持GPT3.5及多应用);
 2、ui修正。
2023-06-21 17:54:26 +08:00
xszyou
ae1d2ae292 多模态的支持
+ 修复多个bug:消息框换行及空格问题、语音识别优化;
+ 彩蛋转正,Fay沟通与ChatGPT并行;
+ 加入yolov8姿态识别;
+ 加入VisualGLM-6B多模态单机离线大语言模型。
2023-05-27 17:03:43 +08:00
xszyou
3373a9f56f 修复多个bug
1、修复feifei重复创建导致商端口冲突的bug;
2、更换pygame初始化方式;
3、修复chatgpt(彩蛋)多论对话逻辑;
4、修复js "s"未定义bug。
2023-05-23 00:49:31 +08:00
xszyou
81bb80c638 修复ChatGPT无法使用相同会话的bug
修复ChatGPT无法使用相同会话的bug
2023-05-22 13:58:27 +08:00
xszyou
023df4deb1 上传彩蛋
1、上传chatgpt彩蛋;
2、修复音频合成过长不播放问题。
2023-05-19 18:12:02 +08:00
xszyou
524e4d0e65 提供funasr集成
1、修正语音和文字的交互逻辑;
2、提供funasr的可选集成。
2023-05-17 18:38:47 +08:00
xszyou
d90d699b58 Fay数字人助理版提交
+ 打出Fay数字人助理版作为主分支(带货版移到分支[`fay-sales-edition`]);
+ 添加Fay助理的文字沟通窗口(文字与语音同步);
+ 添加沟通记录本地保存功能;
+ 升级ChatGLM-6B的应用逻辑,长文本与语音回复分享;
2023-05-12 18:56:36 +08:00
xszyou
80c37694c3 更新ue5工程包地址及chatgpt接口 2023-04-28 21:28:41 +08:00
xszyou
604cab787b 20230427
1、 更新gpt接口:局部接入代理、prompt上补充角色模拟及简化回复内容(感谢 江湖墨明);
2、修复控制台输入测试消息的bug;
3、 补充推荐两个优秀仓库:chatglm、全平台的抖音抓包。
2023-04-27 22:52:00 +08:00
xszyou
a42a72081d 3月更新
1、web socket接口增加数字人文字内容同步,以便数人字可以远程运行;
2、优化数字人数据web socket同步逻辑;
3、更改gpt 3.5对接方式.
2023-03-29 17:30:26 +08:00
xszyou
2dca3ad6db 20230315
1、增加edge-tts语音合成(免费)可替换azure-tts(支持情绪化语音);
2、替换flask发行版运行方式。
2023-03-15 02:22:50 +08:00
xszyou
77b2c0a479 2023.02.10
1、加入了NLP三选一:xfaiui、yuan、chatgpt;
2、修复由pyaudio bug导致的录音错误;
3、修改远程音频输入输出设备同时只允许连1个;
2023-02-10 19:50:47 +08:00
xszyou
55fb0896b8 2023.01
Fay2.0:
1、控制器pc内网穿透,音频输入输出设备远程直连;
2、提供android 音频输入输出工程示例代码;
3、提供python音频输入输出工程示例代码(远程PC、树莓派等可用);
4、补传1.0语音指令音乐播放模块(暂不支持远程播放);
5、重构及补充若干工具模块:websocket、多线程、缓冲器、音频流录制器等;
6、修复1.x版本的多个bug。
2023-01-31 12:40:36 +08:00
xszyou
b1c78fd260 2022.10.17
1、更新语音指令;
2、修正微软key的配置项;
3、提供q&a模版;
2022-10-17 11:32:51 +08:00
Ram
338917fdf7 Update 2022-06-20 11:05:10 +08:00