分享
使用指引
输入“/”快速插入内容
使用指引
飞书用户4698
飞书用户4653
9月11日修改
1、数字人交互
这种实现方式最为简单,在Fay框架基础上,你只需要考虑用什么皮肤和llm,以及在什么地方接收用户的信息,然后又把信息输出到那里。
2、为fay提供“眼睛”
我们将智能硬件、摄像头、手机等外部终端设备视为眼睛。终端设备把识别的数据和文本交互信息一起发给Fay,Fay根据数据进行处理及回应。
3、为fay提供“手”
通过MCP协议补充更丰富的工具,可以让数字人的手为我们工作。
4、调度三方系统
构建以数字人为中心的高度智能系统,只需要“让眼看见,让手触达”
加载知识库说明:
把docx、pptx、txt文档放到llm/data目录,再启动fay,将自动加载知识库。
唤醒模式说明:
“前置词”
:每句话都必须带上唤醒词,Fay才会作出回答,不带唤醒词则丢弃不回复。例如:唤醒词“你好”,“你好,今天天气怎么样?”;“你好,你是谁”。
“普通”
:对话中说出唤醒词后,在60s内说话都会回复,按照最后一次对话时间顺延60s。
自动播放说明:
想要实现数字人自动播放(如:虚拟教师、虚拟主播、新闻主播、广告机等),需自主搭建自动播放服务器并实现自动播放服务器接口,参考接口说明:
自动播放服务器接口(6000)
。使用时fay需要正确填写并开启自动播放(支持热启动)。
Q&A文件
用于配置csv文件的路径。csv文件使用utf-8编码,从第二行开始使用,第1列是问题,第2列是答案,第3列是脚本,脚本可为空。命中问题会使用固定答案,触发指定脚本。在fay聊天窗口上点击采纳会自动记录到csv文件的末尾。命中q的聊天也会在聊天窗口点亮采纳标记的。
性格克隆
参考
认知模型(流式)