Commit Graph

24 Commits

Author SHA1 Message Date
guo zebin
341d045375 Update fay_booter.py
去掉调试信息
2024-10-30 18:44:28 +08:00
guo zebin
4cfad5ae0f 年翻更新
- 全新ui
- 全面优化websocket逻辑,提高数字人和ui连接的稳定性及资源开销
- 全面优化唤醒逻辑,提供稳定的普通唤醒模式和前置词唤醒模式
- 优化拾音质量,支持多声道麦克风拾音
- 优化自动播放服务器的对接机制,提供稳定和兼容旧版ue工程的对接模式
- 数字人接口输出机器人表情,以适应新fay ui及单片机的数字人表情输出
- 使用更高级的音频时长计算方式,可以更精准控制音频播放完成后的逻辑
- 修复点击关闭按钮会导致程序退出的bug
- 修复没有麦克风的设备开启麦克风会出错的问题
- 为服务器主机地址提供配置项,以方便服务器部署
2024-10-26 11:34:55 +08:00
莣仔
64e4213cae 恢复 2024-02-21 16:12:00 +08:00
莣仔
b39a2e0eb2 首次上传 2024-02-21 15:44:42 +08:00
xszyou
16f8d599d7 工作愉快
删库跑路了?
2024-01-08 18:32:23 +08:00
xszyou
01c19c13e8 工作愉快
*实现agent ReAct与LLM chain自动切换逻辑✓

聊天窗区分任务消息✓

修复删除日程bug✓

优化远程音频逻辑✓

等待处理引入加载中效果✓

优化prompt以解决日程任务递归调用问题✓

修复一次性日程清除的bug✓
2023-12-25 22:13:09 +08:00
xszyou
a27ab9dfba 第3次更新
更换ReAct agent✓
修复Thread.timer管理逻辑✓
优化提示词减小返回格式出错概率(格式出错会导致重复执行)✓
消息窗里加上执行任务标记✓
更换gpt 3.5模型测试✓
2023-12-14 10:38:08 +08:00
xszyou
d68e759873 紧急修复
1、修复agent run的结果文字显示、保存DB✓
2、区分文字输入和语音输入✓
3、修复Speech.close bug✓
4、增加个人信息存入向量库✓
5、修复处理时间计算不准确✓
6、修复gpt key出错✓
2023-12-12 18:23:43 +08:00
xszyou
875ed28b58 初始上传
初始上传
2023-12-12 00:03:36 +08:00
xszyou
894a9b6ea4 提交Fay AI Agent版计划
提交Fay AI Agent版计划
2023-09-18 10:17:31 +08:00
xszyou
ba6972a647 周末愉快
1、唇型计算的视音素更换成33毫秒;
2、内置rwkv_api nlp可以直接使用;
3、降低情绪性向数字人端推送的频度;
4、非数字人连接状态不产生接口消息;
5、修复因mp3格式错误而导致一定概率不推送播放信息给数字人端的问题;
6、修复静音等指令执行时提前结束nlp逻辑,而导致用户提问消息不推送数字人端问题;
7、补充wav文件启动清理;
8、websocket工具类升级完善。
2023-08-04 19:13:28 +08:00
xszyou
fb8caf7645 20230719
1、修复远程语音不识别问题;
2、修复asr时有不灵问题;
3、去除唱歌指令;
2023-07-19 22:45:03 +08:00
xszyou
b53bc6e124 修复麦克风&文字回复问题
1、修复助理版文字输入不读取人设回复问题;
2、修复助理版文字输入不读取qa回复问题;
3、增强麦克风接入稳定性。
2023-07-12 18:56:17 +08:00
xszyou
5c5e9d08bd 修复声音播放问题
1、修复唇形算法运行出错而导致的声音不播放问题。
2023-07-05 22:21:20 +08:00
xszyou
7c67bb5858 助理版多处优化
1、解决多声道麦克风兼容问题;
2、重构fay_core.py及fay_booter.py代码;
3、ui适应布局调整;
4、恢复男女声音选择;
5、”思考中...“显示逻辑修复。
2023-06-14 20:34:36 +08:00
xszyou
ae1d2ae292 多模态的支持
+ 修复多个bug:消息框换行及空格问题、语音识别优化;
+ 彩蛋转正,Fay沟通与ChatGPT并行;
+ 加入yolov8姿态识别;
+ 加入VisualGLM-6B多模态单机离线大语言模型。
2023-05-27 17:03:43 +08:00
xszyou
604cab787b 20230427
1、 更新gpt接口:局部接入代理、prompt上补充角色模拟及简化回复内容(感谢 江湖墨明);
2、修复控制台输入测试消息的bug;
3、 补充推荐两个优秀仓库:chatglm、全平台的抖音抓包。
2023-04-27 22:52:00 +08:00
xszyou
57b362fa6b 提高抖音字幕监听的稳定性及包兼容性
1、清除旧逻辑代码;
2、优化监听逻辑;
3、调整包版本的兼容性python3.8、3.9、3.10。
2023-04-24 12:46:17 +08:00
xszyou
cfd4a3fbbd 2023.02.09
1、降低音量识别阈值;
2、修改ngrok是否开启判断逻辑;
3、修改js uuid 生成方式;
4、优化android demo:破音问题、服务运行状态判断问题。
2023-02-09 12:55:16 +08:00
xszyou
88ed6984f0 2022.02
1、集成live2d看板娘;
2、更新ngrok是否开启判断;
2023-02-03 19:27:55 +08:00
xszyou
732e7e3b61 2023.02
1、集成live2d看板娘;
2、修改ngrok穿透是否开启的判断逻辑;
2023-02-03 18:46:12 +08:00
xszyou
55fb0896b8 2023.01
Fay2.0:
1、控制器pc内网穿透,音频输入输出设备远程直连;
2、提供android 音频输入输出工程示例代码;
3、提供python音频输入输出工程示例代码(远程PC、树莓派等可用);
4、补传1.0语音指令音乐播放模块(暂不支持远程播放);
5、重构及补充若干工具模块:websocket、多线程、缓冲器、音频流录制器等;
6、修复1.x版本的多个bug。
2023-01-31 12:40:36 +08:00
xszyou
7f535686ef 2022.10.27
1、更新mac上的麦克风参数;
2、解决mac上无法重启问题;
3、上传brew安装脚本。
2022-10-27 14:58:48 +08:00
Ram
338917fdf7 Update 2022-06-20 11:05:10 +08:00