在第二届拯救者杯OPENAIGC开发者大赛中,涌现出一批技术突出、创意卓越的作品。为了让这些优秀项目被更多人看到,我们特意开设了优秀作品报道专栏,旨在展示其独特之处和开发者的精彩故事。

无论您是技术专家还是爱好者,希望能带给您不一样的知识和启发。让我们一起探索AIGC的无限可能,见证科技与创意的完美融合!

创未来AI应用赛-高校组AI创作力

作品名称:智视臂传-AI视觉触感未来

参赛团队:海南科技职业大学AI正当时

作品简介

团队打造一款基于语音+AI智慧视觉的智能机械臂,该机械臂具有语音控制,多终端操作,视觉识别等功能,实现了高精度控制,操纵简单,灵敏度高,准度高的特点。这样使得机械臂的应用范围大大增加。机械臂在多种使用场景进行控制操作,视觉AI算法为我们《智视臂传》主要项目优势。

技术架构

机械臂运动学研究的是机械臂运动,而不考虑产生运动的力.本节仅考虑机械臂在静止的状态下的位姿关系。

典型的机械臂是由一些串行连接的关节和连杆组成。每个关节具有一个自由度,平移或旋转。对于具有n个关节的机械臂,关节的编号从1到n,有n+1个连杆,编号从0到n。连杆0是机械臂的基础,一般是固定的,连杆n上带有末端执行器。关节i连接连杆i和连杆i-1。一个连杆可以被视为一个刚体,确定与它相邻的两个关节轴之间的相对位置。一个连杆可以用两个参数描述,连杆长度和连杆扭矩,这两个量定义了与它相关的两个坐标轴在空间的相对位置。

系统架构

主要是采用智能高清摄像机,配合前置的边缘计算终端,利用计算机视觉的方法,对图像序列进行自动分析,具有对动态场景中目标定位(骨骼打点)、识别(识别手部动作)和跟踪、接入AI模型分析和判断目标的行为,并给与机械反馈。

应用实现成效

判断人体姿态:自动实现对人进行姿态识别,并输入数据库进行机械学习;

OPENCV:对图像进行处理和分析,为系统提供准确而高效的图像分析能力;

卷积神经网络:卷积神经网络对图像进行特征值的分析,通过卷积、池化、再进入CNN神经网络;

AI视觉识别骨骼技术:通过摄像头捕获的图像调用AI对骨骼进行打点并识别;

三维重建:存储和管理骨骼识别的相关信息,包括识别信息、三维重建;模拟学习运动;模拟学习后进行编辑,并进行零延迟操作反馈。

打开网易新闻 查看精彩图片