远程医疗中使用AR眼镜,内窥镜,视频远程诊疗方案

2021-07-23 18:11:16 浏览数 (3)

随5G网络有应用深入,在远程医疗中多使用的更多的现代设备,要对接一个医院客户中,就有使用AR设备,内窥镜之类的设备,集入在Android等主机系统中中实现远程诊疗中实现对医生远程面对面诊断治疗。

1,远程诊疗中需要接入AR和内窥镜之类设备。接入的摄像头一般是有sdk和uvc

2, 视频远程系统基于目前Webrtc技术,实现终端和浏览器双兼容。

3,诊疗中实现远程音视频交互,远程实时标注。

方案架构:

方案架构方案架构

方案难点1,是硬件设备接入,目前各种硬件摄像头接入并不是标准的,如AR,内窥镜如是uvc的设备,主流的android内置并不是完全兼容,要自行调试接入驱动,目前非官方的有一个开源UVCCamera,要自行处理各种异常和兼容。

方案难点2,设备视频转换成webrtc视频远程传输,我们知道webrtc封装有自有规则,要取的设备一般只有rgb之类图像,要自等封装和传输,参考webrtc对cam的封装是学习的捷经。

内窥镜效果:

内窥镜效果内窥镜效果
客户端效果客户端效果

演示:https://w.ovmeet.com:9301/ovmeetar/login.html

0 人点赞