资讯专栏INFORMATION COLUMN

关于AI视觉-如何连接使用智能语音开发套件(USB语音开发套件)

tigerZH / 2981人阅读

摘要:用户在使用语音开发套件的时候,可接入开放平台利用其提供的丰富接口,自定义地实现诸如语音唤醒,语音识别,语音降噪,语义理解,语音合成,内容信源,回声消除需搭配与硬件来实现全双工交互需搭配与硬件来实现等功能。

智能语音开发套件 ,又可称为 USB语音开发套件,可适配于不同的软硬件平台,为用户提供完整的语音开发解决方案,加快产品的落地
目前 Firefly 支持 USB语音开发套件的平台为目前主流的rk3399,rk3288,rk3328,rk3128,rk3566,rk3568平台(Android5.1,Android7.1,Android9.0,Android10.0,Android11 等)

阵列适配
MOD-MIC-4XAnalog (4MIC阵列)
产品视图
_images/4MIC_FRONT.jpg _images/4MIC_BACK.jpg**

产品参数
唤醒距离:3~5m
识别距离:3~5m
声源定位:4mic水平180度
定位精度:±15°

XFM-USBMEMS-6MIC (6MIC阵列)


产品参数
唤醒距离:3~5m
识别距离:3~5m
声源定位:6mic360度定位
定位精度:±15°

PABasic 产品参数
PABasic为基础版功放板,帮助客户产品快速获得模拟音频信号放大、DSP音效调节的能力。


XFM-AEC 产品视图

XFM-AEC 产品参数
⽀持5~12V 回采信号输⼊切换,主要是对回采信号接入后做分压处理,再输出分压电路处理后的音频数据。

AIUI 演示
AIUI 提供以语音交互为核心的交互解决方案,将讯飞强大的单点交互能力(前端声学处理,语义理解,语音合成,丰富的内容信源)整合为全链路的交互方案提供给广大开发者,开发者可以根据实际的业务需求,利用热词、静态实体、动态实体、所见即可说等特性,进行个性化的优化和改进,提升交互准确率,让人机交互更加流畅,真正的满足和解决用户实际使用中所遇到的问题。

用户在使用 USB语音开发套件 的时候,可接入 AIUI 开放平台 ,利用其提供的丰富API接口,自定义地实现诸如语音唤醒,语音识别,语音降噪,语义理解,语音合成,内容(信源),回声消除(需搭配 XFM-AEC 与 PABasic 硬件来实现)、全双工交互(需搭配 XFM-AEC 与 PABasic 硬件来实现)等功能。

CAEDemo 演示2 (含 XFM-AEC && PABasic 部件)
当我们在拿到 XFM-USBMEMS-6MIC 麦克风阵列的时候,可使用测试APK(CAEDemo),来进行6MIC阵列的使用和验证,若搭配 了 XFM-AEC && PABasic 部件,可适用于需要具备唤醒、降噪、回声消除、人机交互全链路能力的使用场景。

验证回声消除
硬件接法
在XFM-USBMEMS-6MIC 搭配上 XFM-AEC && PABasic 部件 的时候,除了 前面的MOD-MIC-4XAnalog 所需的 网络,Tyet-C(6MIC使用的是 Micro USB 接口) 之外,还需要一对 SPeaker 以及 一条双头Linein线,连接如图所示


如果是含有XFM-AEC 和PABasic部件的MOD-MIC-4XAnalog 阵列的话

通过 PC端软件查看 /sdcard/cae/CAEAsrAudio文件夹内的PCM格式音频 ,可以看到,发送到AIUI平台进行语音交互的音频只有使用者的语音,歌曲的声音是消除掉了。然后就可以运行了。#有些资料是网上搜寻,有些是自己想法,如有雷同纯属巧合

#欢迎留言及讨论。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/124759.html

相关文章

  • YodaOS开发套件征集活动

    摘要:为了能让感兴趣的开发者小伙伴第一时间体验到,联合社区赶在春节前发起开发套件试用征集活动,该套件是基于自研语音解决方案平台打造而成。与此同时,我们也同样提供高度定制化模块化的整体架构,开发者亦可方便地选择想要集成的模块对整个操作系统重新组装。 1月28日,Rokid为人机交互设备开发的开源人工智能操作系统——YodaOS正式上线,可用于智能音箱、智能家居、智能穿戴和车载等多种设备和场景。...

    canger 评论0 收藏0
  • YodaOS开发套件征集活动

    摘要:为了能让感兴趣的开发者小伙伴第一时间体验到,联合社区赶在春节前发起开发套件试用征集活动,该套件是基于自研语音解决方案平台打造而成。与此同时,我们也同样提供高度定制化模块化的整体架构,开发者亦可方便地选择想要集成的模块对整个操作系统重新组装。 1月28日,Rokid为人机交互设备开发的开源人工智能操作系统——YodaOS正式上线,可用于智能音箱、智能家居、智能穿戴和车载等多种设备和场景。...

    call_me_R 评论0 收藏0
  • Rokid(全栈语音开发套件)评测---优雅篇

    摘要:元旦宅在家里,刚好收到了寄来的开发板,激动的去公司拿回快递,动手拆拆拆。看了几篇其他人的评测,感觉需要从另一个角度来看这块开发板,那就先从优雅的角度看吧。接口插上耳机开发套件默认不配备扬声器,可以听到开发套件的语音反馈。 元旦宅在家chuang里shang,刚好收到了Rokid寄来的开发板,激动的去公司拿回快递,动手拆拆拆。 先简单做个自我介绍吧,我是工科测控专业毕业,还没毕业就一直在...

    DC_er 评论0 收藏0
  • 【LeCun台大演讲】AI最大缺陷是缺乏常识,无监督学习突破困境

    摘要:无监督式学习是突破困境的关键,采用无监督学习的对抗训练让拥有真正自我学习的能力。如何让拥有人类的常识认为要用无监督式学习。强化学习是蛋糕上不可或缺的樱桃,所需要资料量可能大约只有几个,监督式学习 6 月 29 日,台湾大学。卷积神经网络之父、FacebookAI 研究院院长 Yann LeCun 以「Deep Learning and the Path to AI」为题,对深度学习目前的发展...

    villainhr 评论0 收藏0
  • Rokid(全栈语音智能开发套件)开箱记

    摘要:今天下午快递小哥给我打电话说是有我的快递我想应该是期待已久的若琪到了回家之后迫不及待的开箱了拆开快递盒子是一个别致的黑色圆桶盒子很有科技感还有一个的数据线供电用打开盒子可以看到两块板子一块是开发板子一块是板子开发板子是透明的塑料壳子应有的简 今天下午快递小哥给我打电话 说是有我的快递,我想应该是期待已久的Rokid(若琪)到了回家之后迫不及待的开箱了. 拆开快递盒子是一个别致的黑色圆桶...

    CarterLi 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<