AI语音与机器视觉开发应用系统
型号:LPKT036
一、产品介绍
AI语音与机器视觉开发应用系统是一款集成AI语音、机器视觉、深度学习基础、嵌入式Linux于一体的高端教学科研实验平台。
整个教学平台由实验箱高性能嵌入式主板够成,高性能嵌入式核心板采用瑞芯微高性能64位ARM处理器RK3399,标配4GB DDR3内存和16GB闪存,可运行Ubuntu、Android、Linux qt等多种操作系统,可满嵌入式Linux和AI应用开发。
提供多种应用外设与丰富的机器视觉、AI语音、深度学习实战应用案例,如语音前处理(声源定位、语音增强、语音降噪、回声消除、声音提取)、语音唤醒、语音识别、手写字识别、目标检测、人脸识别门禁控制、车牌道闸控制、手势识别等,通过案例教学让学生掌握计算机视觉与深度学习的基本原理和典型应用开发。
二、产品特色
本平台采用CPU+NPU双处理器架构,是一款集成AI语音、机器视觉、深度学习基础、嵌入式Linux于一体的高端教学科研实验平台。提供多种应用外设与丰富的机器视觉、AI语音、深度学习实战应用案例,如语音前处理(声源定位、语音增强、语音降噪、回声消除、声音提取)、语音活体检查、语音唤醒、语音识别、语音合成、自然语言处理、声纹识别门锁、语音智能家居、手写字识别、人脸识别、目标检测、端侧推理框架、图像识别、人体分析 、文字识别、人脸门禁控制、车牌道闸控制、手势家居控制等,通过案例教学让学生掌握计算机视觉与深度学习的基本原理和典型应用开发。
三、部分功能演示
人工智能教学实验箱--- 人工智能语音案例演示视频:
四、经典案例
AI高清摄像头 | l 1/1.8" SONY Exmor CMOS l 有效像素200万像素,30帧@1920*1080 l C/CS镜头接口,最低照度0.001 Lux,120dB TWDR l 提供基于实验平台的人脸识别系统等案例。 | |
AI麦克风阵列 | l 7路麦克风阵列,提供声源定向、声场成像、波束形成、语音唤醒、语音识别等功能。 l 带硬件浮点运算的RISC-V 双核64位处理器,主频最高800MHz。 l 具备机器听觉能力和语音识别能力,内置语音处理单元(APU)。 l 具备卷积人工神经网络硬件加速器KPU,可高性能进行卷积人工神经网络运算。 l 硬件快速傅里叶变换加速器 (FFT Accelerater)。 l 内置ARM STM32 USB音频驱动芯片,提供USB声卡驱动,开放源代码。 l 采用USB接口输出,需能够接入到eAIOT平台使用。 l 支持语音识别、语义理解、语音合成、人机对话等功能,可与硬件进行语音交互。 |
(一)人工智能实验列表-基础
神经网络的基本工作原理、线性反向传播实验、非线性反向传播实验、梯度下降实验、损失函数实验、单变量线性回归、多变量线性回归、线性二分类、线性多分类、神经网络非线性二分类、神经网络非线性多分类、测试训练结果实验、查看模型文件实验、ONNX模型文件制作实验、模型部署和测试实验、深度神经网络框架设计、深度神经网络应用、神经网络优化、神经网络过拟合问题、卷积神经网络概述、卷积的前向计算、卷积的反向传播、池化的前向计算与反向传播、经典的卷积神经网络模型、MNIST分类实验、Fashion-MNIST分类实验、普通循环神经、通用的循环神经网络模型实验网络、两个时间步的循环神经网络实验、四个时间步的循环神经网络、不定长时序的循环神经网络实验、深度循环神经网络、双向循环神经网络、高级循环神经网络
(二)人工智能实验列表-图像
图像采集:USB摄像头图像采集
图像处理:图片显示、色彩空间、像素运算、ROI与泛洪填充、滤波与模糊操作、图像直方图、模板匹配、图像二值化、图像金字塔、图像梯度、Canny边缘检测、直线检测、圆检测、轮廓发现
传统机器视觉:手写字识别、人脸检测、目标检测
深度学习机器视觉:手写字识别、人脸检测、目标检测、 端侧推理框架
云端机器视觉应用:图像识别实验、文字识别、人体分析
图像视觉综合应用:人脸门禁控制、车牌道闸控制、手势识别
(三)人工智能实验列表-语音
语音处理 :语音采集和播放实验、语音编码和解码实验、语音变速变调实验、语音活性检测实验、语音唤醒实验、语音识别实验、语音合成实验
自然语言处理:中文分词实验、关键词提取实验、文本可视化实验、文本向量化实验、文本分类实验、文本聚类实验、文本情感分析实验、句法依存分析实验、构建聊天机器人实验
云端语音语言应用:云端语音合成实验、云端语音识别实验、云端对话情绪识别实验、云端新闻摘要实验、云端短文本相似度实验、云端情感倾向分析实验、云端地址识别分析实验