智视臂传-AI视觉触感未来丨OPENAIGC开发者大赛高校组AI创作力奖

在第二届拯救者杯OPENAIGC开发者大赛中，涌现出一批技术突出、创意卓越的作品。为了让这些优秀项目被更多人看到，我们特意开设了优秀作品报道专栏，旨在展示其独特之处和开发者的精彩故事。

无论您是技术专家还是爱好者，希望能带给您不一样的知识和启发。让我们一起探索AIGC的无限可能，见证科技与创意的完美融合！

创未来AI应用赛-高校组AI创作力奖

作品名称：智视臂传-AI视觉触感未来

参赛团队：海南科技职业大学AI正当时

作品简介

团队打造一款基于语音+AI智慧视觉的智能机械臂，该机械臂具有语音控制，多终端操作，视觉识别等功能，实现了高精度控制，操纵简单，灵敏度高，准度高的特点。这样使得机械臂的应用范围大大增加。机械臂在多种使用场景进行控制操作，视觉AI算法为我们《智视臂传》主要项目优势。

技术架构

机械臂运动学研究的是机械臂运动，而不考虑产生运动的力.本节仅考虑机械臂在静止的状态下的位姿关系。

典型的机械臂是由一些串行连接的关节和连杆组成。每个关节具有一个自由度，平移或旋转。对于具有n个关节的机械臂，关节的编号从1到n，有n+1个连杆，编号从0到n。连杆0是机械臂的基础，一般是固定的，连杆n上带有末端执行器。关节i连接连杆i和连杆i-1。一个连杆可以被视为一个刚体，确定与它相邻的两个关节轴之间的相对位置。一个连杆可以用两个参数描述，连杆长度和连杆扭矩，这两个量定义了与它相关的两个坐标轴在空间的相对位置。

系统架构

主要是采用智能高清摄像机，配合前置的边缘计算终端，利用计算机视觉的方法，对图像序列进行自动分析，具有对动态场景中目标定位（骨骼打点）、识别（识别手部动作）和跟踪、接入AI模型分析和判断目标的行为，并给与机械反馈。

应用实现成效

判断人体姿态：自动实现对人进行姿态识别，并输入数据库进行机械学习；

OPENCV：对图像进行处理和分析，为系统提供准确而高效的图像分析能力；

卷积神经网络：卷积神经网络对图像进行特征值的分析，通过卷积、池化、再进入CNN神经网络；

AI视觉识别骨骼技术：通过摄像头捕获的图像调用AI对骨骼进行打点并识别；

三维重建：存储和管理骨骼识别的相关信息，包括识别信息、三维重建；模拟学习运动；模拟学习后进行编辑，并进行零延迟操作反馈。