日本创新公司Next System将NVIDIA高性能嵌入式计算机“ Jetson AGX Xavier”添加到“ Standard”的兼容平台中,成为其自主开发得AI骨架检测引擎“ VisionPose”支持的平台之一。
“ VisionPose”是该公司开发的人工智能引擎,可以从相机图像和图像/视频文件中检测人体骨骼信息。“ VisionPose”系列包括“ Standard”和“ Single3D”,“ Standard”可实现高精度的骨骼检测,而“ Single3D”可通过单个摄像机在3D坐标中进行骨骼检测,
现有的VisionPose SDK在整个系列中都支持多种平台,例如Windows(C#,C ,Unity),Linux(C ),iOS / iPadOS(Swift)。
添加了“ Jetson AGX Xavier”后,通过扩展紧凑且易于嵌入的平台,其应用程序扩展到了无人驾驶机器(如无人机和机器人)的开发以及涉及人为检测的开发(如工厂系统)。该公司打算继续扩展其支持的边缘设备,并对其进行开发,以使其能够广泛用作骨骼检测领域的核心技术之一。
VisionPose根据应用开发三个系列
“ VisionPose”仅使用摄像机即可进行运动动作分析,工厂工人工作分析,康复医疗行为分析,游戏角色和化身操作等。
特色:
1.使用3D坐标实时检测骨骼信息 2. 检测多个人的骨骼 3.行业中最多30个测量点 4.从图像和视频中进行分析可能 5.与多设备兼容
VisionPose Standard SDK随附示例应用程序“ BodyAndColor”以及可用于开发的视频和静止图像姿势估计工具“ VP Analyzer”。
实时骨架可视化示例应用程序“ Body And Color”
可以使用示例应用程序,该应用程序可以根据从WEB摄像机图像获取的骨骼坐标数据,使用针对每个零件进行颜色编码的线条来可视化。所获取的骨架信息也可以作为CSV输出。
视频和静止图像姿势估计工具“ VP分析器”
可以从您拥有的视频和静止图像中以2D坐标(30个位置)检测骨骼。将影片或静止图像加载到“ VP Analyzer”时,将输出具有骨骼信息和CSV的影片/静止图像。
一个经典案例
NextSystem 公司为丰田汽车公司开发的“ Welwalk WW-2000”机器人提供了自己的人工智能引擎“ VisionPose”,该机器人可以检测人体骨骼,以帮助中风等导致下肢瘫痪的康复。
Wellwalk WW-2000采用“ VisionPose”检查患者的姿势是否正确。通过实时检测患者的步行状况,做步态分析指导和游戏功能的实现 。
支持判断患者的步行状况并检查改善措施,因此可以在减轻治疗师工作量的同时为患者提供更有效的步行练习.
更多关于NVIDIA AGX Xavier