【开发教程13】疯壳·AI语音人脸识别-语音传输与解析显示

FutureX

CC3200AI实验教程

——疯壳·开发板系列

语音传输与解析显示

* G, s9 O1 T5 I

7 ?( {/ \. {" |6 R; b% |( F& S6 N    TLV320AIC3254支持I2C和SPI接口，这里用到I2C对TLV320AIC3254的寄存器进行配置，用IAR打开AI_ASR里面的工程，如图1.0.1所示为CC3200初始化I2C部分代码。
9 X! i  {+ h3 M9 D- S( r9 X
' Y! u( E7 M& B4 Q/ D/ W    
    图1.0.1 初始化I2C部分代码
    图1
  o- u- ~7 v3 Z7 B    对TLV320AIC3254的初始化函数，如图1.0.2所示。

% I1 U8 F# [" g' i# q    
    图1.0.2 TLV320AIC3254初始化
6 L( s6 \- ]2 U- c! i' s' g6 t/ C    图2
2 ~: `8 v$ f, V' e* I+ F    通过该函数可以设置设备的ID、采样位数、采样速率、音频通道、音频输出以及音频输入的增益。
    本次实验使用UDP连接的方式进行通信。使用CC3200配置为UDP模式的代码如图1.0.3所示。

* m4 ^9 @; Z$ o  V# |) I4 ~9 O
    图1.0.3 CC3200U配置UDP模式
5 @  X$ |  e( ^: W5 k    图3
5 d( H/ h7 p+ u+ J    打开common.h，连接的路由器名称及密码如图1.0.4所示，特别注意的是要修改加密方式OPEN、WEP或者WPA。

   
" _" V# |) N9 ?. h1 A    图1.0.4 路由器相关信息
    图4
    连接服务器的IP地址及端口如图1.0.5所示。在network.c找到HOST_IP_ADDR可在宏定义中修改IP地址，修改usPort的值可以修改端口。
% b* n* j6 j! V# z4 }1 b. q" W2 h
) V  }) x# u- C" v4 i( i# h
    图1.0.5 服务器的IP地址及端口
    图5
5 \: a8 ~  p; Z* E# @    IP地址用16进制来表示，例如：“192”对应16进制的“0xc0”、“168”对应16进制的“0xa8”、“05”对应16进制的“0x05”、“05”对应16进制的“0x05”，合起来就是0xc0a80505（192.168.5.5）。
9 t- K2 r; Q1 V    Network任务主要是实现网络连接，所以该任务主要实现CC3200连接上路由器，建立UDP。任务如图1.0.6所示。
7 K$ l! x1 J8 N, V: X4 m

    图1.0.6 Network任务
    图6
    在ConnectToNetwork()函数内有一个函数WlanConnect()通过该函数可以连接上Common.h的宏定义中的路由器，WlanConnect()函数如图1.0.7所示。


/ v' M7 c, D* e& K    图1.0.7 WlanConnect函数
' L* L, o& k/ `; v    图7
, }8 ^; ^! u  C    CreateUdpServer()函数则是建立udp服务器，该函数如图1.0.8所示。
3 i, h$ \8 {( d' w+ j, _- l
5 `2 h" y- ]9 R/ M" C+ g% w$ A
( Y5 n6 y$ x3 W2 C4 h    图1.0.8 CreateUdpServer函数
3 q" n7 v/ G/ O4 o* [; [# w    图8
     Microphone任务主要是为了实现音频板卡语音的采集以及把语音信号通过udp发送出去的事项。
- b* G3 F/ b# g% _7 |8 F    通过该任务下的GetBufferSize(pRecordBuffer)函数便可以把音频板卡的驻极体上的声音信号采集回来存储在pRecordBuffer这个缓冲区中。GetBufferSize()函数如图1.0.9所示。
* k0 T, x; m" u) H" Q% T
   
4 s1 l4 u- i% S! p! T8 M* ]. h$ g    图1.0.9 GetBufferSize函数
. O" e8 Z6 z+ v' j0 b    图9
1 a7 |* n) s; y    通过该任务下的sendto()函数可以把采集到语音信号发送到服务器端。
    通过Speaker任务可以把由服务器端识别回来的字符串接收回来，并显示在12864液晶屏幕上。Speaker任务如图1.1.0所示。
4 X. y* U2 i* V) O3 N
% y3 B( J  N' [! S% y7 A% \    
  x+ _  N8 V% _- |1 U& t    图1.1.0 Speaker任务
' G( q) L! z2 @7 P5 B; n. T& @5 D    图10
    通过sl_RecvFrom便可接收到解析好的语音字符串，然后通过12864液晶屏显示出来。
; K4 L7 ~3 C0 U$ a    如图1.1.1为12864的初始化部分代码
/ ?5 ~- K  S; T
3 S  _7 C$ z' o     
8 o$ n9 R0 O" T  T2 F    图1.1.1 12864初始化代码
) ^2 u& `9 E% V# K% C    图11
  Q" u# [( Z& R& I- n& p- H    通过该函数可以初始化设定12864的对比度、扫屏方向等。如图1.1.2为12864的显示GB2312字库的代码。
( j3 ~3 ^: {0 S& s5 [, x0 W
   
    图1.1.2 12864显示GB2312字库的代码
    图12
    编译代码下载Bin文件到CC3200上（具体可参考GPIO小节），下载成功之后将拨码开关再拨回去，由于用到串口UART1调试的接收，需要把USB转TTL电平的CH340的供电端以及收发端接上，把CH340G_VCC拨到ON，接收端RXD拨到ON如图1.1.3所示。

! g9 Z/ g, C, B    
    图1.1.3 下载完成的后的拨码开关示意图
    图13
; A- a- W1 Z' d. N  l    由于该实验需要用到音频板卡，故需要把音频板卡插在板子左下方的双排针处，同时还需要把排针连接CC3200的拨码开关拨上，即需要把板子中间靠右的8路拨码的6、7、8（LED灯）拨到ON（1在上一步中已经拨到了ON）。除此之外，本次实验还用到了12864液晶显示器，还需要把配套的液晶显示器接上，配套的液晶显示器的引脚与板子IO的连接关系如表1.0.1所示。
    表1.0.1 12864与开发板连接关系
: q0 P7 t  A& k; c
& t6 G; ]. q& [3 x" s/ c
    表1
    最后插上USB线。最后板子上的拨码及接线状态如图1.1.4所示。

: p& G, i' C$ T3 B* ]- D
    图1.1.4 接线示意图
    图14
    把USB接上电脑，打开串口调试助手，选择相应的串口号（不同的电脑不同），波特率选择115200，打开串口，按下复位。收到如图1.1.5所示信息则代表音频板卡初始化通过。

; X' m. w" C, s  @% {2 T
    图1.1.5 音频板卡初始化通过
    图15
    当接收到如图1.1.6所示的串口打印信息时，则代表CC3200已经连上了指定的路由器。
& d5 }* O+ w0 ?: }' A, k

1 d: v9 b! N# B" p' l( h    图1.1.6 连接上路由器
1 p: ^" N2 D& e3 M$ Z6 ]    图16
0 w  e( V  k! ?$ y- a    拿起板卡对着驻极体说出想要识别的语音（普通话），等待一会后12864液晶，便会显示出相应的字符。
    在本次实验中是以不断地采集驻极体处的声音待服务器解析后回传字符串的方式进行的，故需要等待的时间较长（约10s~20s）。
    如图1.1.7所示，对驻极体说出“明天天气怎么样”，等待一会后12864液晶屏幕便会显示出由服务器的识别返回的字符。
2 Y9 P' }: b: i" J7 t
: E. L- Y/ B  m* q" p" d; @' R
    图1.1.7 实验现象
; f4 w( ~, \* [; U; Z! b+ d' g6 U    图17
& n# u, n4 }3 _, B% n% y


部分图片由于过大无法上传，有兴趣的伙伴请点击下载下方的原文件查看

文件下载请点击：   【3】语音传输与解析显示.pdf (949.5 KB, 下载次数: 0)

2022-8-9 14:32 上传

点击文件名下载附件
下载积分: 威望 -5

) o7 Z7 \) \( J! z

+ o( ~$ W) v4 Z9 N9 r, A) H6 j4 M0 l5 P

Blah

有没有相关的一些资料