English

FAY

Fay数字人框架 助理版

助理版是Fay 数字人框架最常用的版本。它提供了灵活的模块化设计，使开发人员能够定制和组合各种功能模块，包括情绪分析、NLP处理、语音合成和语音输出等。助理版构建的是一问（远程或本地，移动或PC，语音或文字）一答（数字人或机器，移动或PC，语音或文字或RPA）的标准模式。

如果你需要是一个线上线下的销售员，请移步带货完整版

如果你需要是一个可以自主决策、主动联系主人的agent，请移步agent版

Fay数字人助理版

助理版使用：语音沟通，语音和文字回复；文字沟通，文字回复;对接UE、live2d、xuniren，需关闭面板播放。

一、模块的组成

Remote Android　　　　　　Local PC　　　　　Remote PC

　　　　　└─────────────┼─────────────┘

　　　　　　Aliyun API ─┐　　　│

　　　　　 　　　　　　├── ASR　　　

　 　　 　　　 FunASR ─┘ 　　 │　　 　 ┌─ Yuan 1.0

　　　　　　　　　　　　　　　│　　 　 ├─ LingJu

　　　 　　　　　　　　　　　NLP ────┼─ GPT/FastGPT

　　　　　　　　　　　　　　　│　　 　 ├─ Rasa+ChatGLM-6B

　　　　　　　　 Azure ─┐　 　 │　　 　 ├─ VisualGLM

　　　　　 　 Edge TTS ─┼── TTS 　 　 └─ RWKV

　 　　 　 　　开源 TTS ─┘　 　│　　 　

　　　　　　　　　　　　　　　│　　 　

　　　　　　　　　　　　　　　│　　 　

　　　 ┌──────────┬────┼───────┬─────────┐

Remote Android　　Live2D　　 UE　　　 xuniren　　　Remote PC

重要：Fay（服务端）与数字人（客户端）的通讯接口: ws://127.0.0.1:10002（已接通）

消息格式: 查看 WebSocket.md

二、安装说明

环境

• Python 3.9、3.10
• Windows、macos、linux

安装依赖

pip install -r requirements.txt

配置应用密钥

• 将应用密钥填入 ./system.conf 中

启动

启动Fay控制器

python main.py

启动数字人（非必须）

启动数字人xszyou/fay-ue5: 可对接fay数字人的ue5工程 (github.com)

启动android 连接器（非必须）

代码地址：https://github.com/xszyou/fay-android

三、使用说明

使用说明

• 语音助理：Fay（麦克风输入源开启）；
• 远程语音助理：Fay + 远程设备接入；
• 数字人互动：Fay（麦克风输入源开启、填写性格Q&A）+ 数字人；

语音指令

联系

商务QQ: 467665317

交流群及资料教程关注公众号 fay数字人（请先star本仓库）