"); //-->
本篇文章主要介绍基于聆思CSK6大模型开发板的语音交互多模态实例进行二次开发,实现在语音唤醒后在屏幕展示GIF动画表情。
● 通过LGVL官网的工具将GIF转换为适合嵌入式系统使用的格式
● 基于SDK源代码进行修改
● 开发板编译与烧录
在开始实操之前,我们部署开发环境以及SDK工程拉取到本地目录,可以参考聆思文档中心环境搭建 | 聆思文档中心与获取大模型套件SDK | 聆思文档中心。
SDK下载完成后,通过VScode打开audio_recognition_online示例模板 (D:\LISTENAI\duomotai_ap\apps\audio_recognition_online)根据自己的SDK保存路径打开
打开src\app_ui\demo_ui\images\ui_img_anim_speak_gif_c
这里原示例中是语音唤醒之后加载语音唤醒“小聆”之后用来模拟声音的波浪型gif动画,如果我们想要它加载其他GIF动画,例如“会动的眼睛”,只需要将你想要替换的GIF动画的格式在LVGL官网转换为C语言数组,然后将这部分替换即可。(这里的使用的GIF分辨率为96×36)
打开LVGL官网(Image Converter — LVGL),
(我这里是翻译了****,若网页为英文版,按照顺序点击即可)点击低电压保护器v8,选择你想要转换的GIF,选择颜色格式。这里demo中支持的GIF颜色格式为CF_RAW_CHROMA
转变之后打开下载的c文件,复制全部代码粘贴到audio_recognition_online\src\app_ui\demo_ui\images\ui_img_anim_speak_gif_c路径下,粘贴之后需要检查以下三个地方:
这里我们示例模板中的GIF储存名称为ui_img_anim_speak_gif ,所以要将代码中名称的部分与GIF.C文件名称统一。可以直接复制替换对应位置即可
#ifndef LV_ATTRIBUTE_IMG_ANIM_SPEAK
#define LV_ATTRIBUTE_IMG_ANIM_SPEAK
#endif
const LV_ATTRIBUTE_MEM_ALIGN LV_ATTRIBUTE_LARGE_CONST LV_ATTRIBUTE_IMG_ANIM_SPEAK uint8_t anim_speak_map[] = {
const lv_img_dsc_t ui_img_anim_speak_gif= {
.header.cf = LV_IMG_CF_RAW_CHROMA_KEYED,
.header.always_zero = 0,
.header.reserved = 0,
.header.w = 96,
.header.h = 36,
.data_size = 6028,
.data = anim_speak_map,
};
本文使用的聆思CSK6大模型开发板,详细信息可参考线上文档https://docs2.listenai.com/x/nTn9kMMCU
1、 打开 windows powershell/cmd
2、在LISTENAI\duomotai_ap路径下输入,开始编译固件
lisa zep build -b csk6_duomotai_devkit apps\audio_recognition_online -p
3、固件编译成功之后,输入进行烧录
lisa zep exec cskburn -s \\.\COM串口号 -C 6 -b 1500000 0x000000 --verify-all .\build\zephyr\zephyr.bin
专栏文章内容及配图由作者撰写发布,仅供工程师学习之用,如有侵权或者其他违规问题,请联系本站处理。 联系我们
相关推荐
简单人工智能的温度控制电路
仿人机器人
STC-人工智能二维生命探测仪
三菱携手Tallgrass布局怀俄明州 AI 专属能源枢纽
中国硅片国产化提速 带动奕斯伟产能大幅扩张
机器里的大脑:一位“隐士”开发者的人工智能梦(上篇)
具有人工智能的温度控制电路设计
本科毕业设计:一种基于发育思想的语音识别系统实现
个人-口罩识别系统项目采访
硬件革新:借助稀疏计算让AI算力提质降耗
人工智能历史
光电路交换何以成为 AI 数据中心刚需
机器里的大脑:一位“隐士”开发者的人工智能梦(下篇)
ADI公司:工业4.0——人工智能的端
AOS 推出 SmartClamp 智能功率级 适配 AI 高动态电流应力工况
东南大学人工智能03
东南大学人工智能01
人工智能与机器人
AI 全域数字孪生加速半导体与电子系统研发落地
个人-窗口卫士项目采访
莱迪思联手英伟达推出 Sensor Bridge 方案 加速边缘 AI 产品落地
Omdia大幅上调预期:2026年半导体行业增速飙升至62.7%
东南大学人工智能02
未来的人工智能世界:技术与人文的和谐还是斗争?
软银宣布已在日本正式启动电池业务 满足AI电力需求
有简单人工智能的温度控制电路
具有人工智能的温度控制电路图
微软X英特尔黑客松大赛
2026 全球半导体产业冲刺 1 万亿美元规模
有简单人工智能的温度控制电路图