1、直播介绍
机器视觉是AI技术的主要研究和应用领域,不仅广泛应用于自动驾驶、智能制造和航空航天等高大尚领域,同样应用于你身边的身份确认、安全监控和物品识别,其影响已经渗透到我们生活的各个角落。如果您是一位传统的硬件工程师,又觉得AI技术离你太远,不知如何入手,似乎遥不可及,这门课就是为您准备的。我本人也是硬件工程师出身,以我的亲身经历,从零基础开始学起。这是本系列第三集进阶篇,学习视频处理工具GStreamer框架和参数、FPGA AI Python程序、yolov3改yolov3_tiny要点、KV260设置和使用。欢迎入群交流(QQ群号:435717099)
5 _0 l; K; q$ I, _2、讲师介绍: M$ F: B) w9 u# ]1 v( \1 b
刘振宇博士
中国科学院工学博士
FPGA芯片中国区
技术支持经理/市场营销经理
资深电子系统研发背景,芯片供应链长期工作经验,长期担任FPGA芯片中国区技术支持经理/市场营销经理。拥有十余年FPGA及相关系统研发及实现经验,在传感器整合、视觉算法、AI算法加速及软硬件系统整合上拥有深厚背景。
王伟博士
华为光通信资深研发工程师、中兴光通信SDH大项目研发经理
国家深圳轨道交通实验室技术总监、美资Oplink通讯公司研发总监、特发信息公司研发总工、美资 Lumentum公司(原JDSU)高级研发经理、
中国高科技产业化研究会智能信息处理产业化分会理事
二十余年一流大企业一线研发和管理经验
近三年所带学生竞赛队伍均晋级国家级决赛
# z* X9 x! T9 P* T2 m5 g$ _/ e
3、直播要点
《基于FPGA的汽车AI设计》
直播内容:
本次主要向各位介绍各FPGA厂商针对汽车AI应用的最新动向(包括Xilinx, Intel,Lattice和各国产FPGA厂商),并针对FPGA的主要AI相关汽车应用领域做相关介绍。使各位对基于FPGA的汽车领域AI当前和未来趋势有一定的了解。
直播要点:
* z. E9 q5 u# \+ Z; b0 l: x6 C- W
1、基于FPGA的汽车领域AI应用
2、各FPGA厂商的努力:
a、Xilinx的汽车AI方案。
b、Intel PSG/ Lattice的汽车AI方案
c、国产FPGA的机遇
3、FPGA vs AI ASIC
a、FPGA的独特优势
b、有所为,有所不为
4、日新月异、快速迭代的汽车电子应用呼唤FPGA!
; v% a" v: V- J3 X《FPGA AI 进阶篇 GStreamer+Python+AI》
直播要点:
我们用FPGA AI + Python做的人体姿态识别,基于KV260开发板单板
单鞭
左移步
姿态识别可以用于安防、护理、医学、安全和体育等领域,FPGA具有最高的性价比。
7 c7 B3 s5 q- c: |+ C2 {4 J
我们用FPGA AI + GStreamer分析各种参数带来的图像效果,基于KV260开发板单板。
实际用时兴趣区分辨率高,其余区域分辨率低,下面是为分析明显起见反其道而行之。
蓝框ROI兴趣区QP值高
蓝框ROI兴趣区QP值低
GStreamer框架安装、概念和使用
GStreamer的安装、管道和各种插件。
GStreamer测试、文件播放、转换和存贮例程。
FPGA 视频GSteamer专用套件VVAS
VVAS视频处理流程图和硬核加速原理
逐级展开解析VVAS功能图与对应管道程序
编解码重要参数码率控制control-rate、渐近刷新GDR 、假定参考解码器HRD等
: w: R, q8 ?4 H9 I% j
FPGA AI Python程序重要调整参数
目标判断阈值nms_thresh
非最大值抑制score_thresh
/ K6 N% J- y1 K通过yolov3改为yolov3_tiny来认识后处理程序要点
输入模型的分辨率
分类class文件
锚定anchor文件
DPU多线程处理
4 R6 a/ Y( j* e% E4 C
4、适合对象
电子专业、信息专业、自动化专业、计算机专业大学生和研究生
直播主题:《从硬件走向人工智能Ⅲ FPGA 进阶篇》
直播老师:王伟博士 刘振宇博士
直播时间:4月28日晚20:00
回帖提出相关技术问题,老师将在直播中进行答疑~~~