必一运动「CHINA」官方网站 -必一运动必须快乐

公司动态

地址:陕西省汉中市勉县定军山镇左所村76号
电话:029-89351255
公司动态

当前位置: 首页 > 新闻资讯 > 公司动态

基于视线估计的VR交互式双眼视功能训练系统

2026-10-26 06:18:13

  

基于视线估计的VR交互式双眼视功能训练系统(图1)

  本发明属于视觉训练,具体涉及一种基于视线估计的vr交互式双眼视功能训练系统。

  1、弱视是一种较为常见的由大脑发育和视觉体验之间异常相互作用,从而引起视觉系统神经发育障碍,导致空间视觉发育混乱的眼科临床疾病。弱视对大脑的视觉输入有明显的影响,破坏正常的视功能发育,并进而引发不同的视力缺陷。

  2、双眼视功能分为三级,第一级为同时视,建立正常的同时视功能,不仅可以平衡优、劣势眼之间的抑制现象,更是为双眼高级视功能建立稳固的先决条件。第二级为融合视,辅助形成正常的视网膜对应关系,协调双眼运动,增加融合范围。第三级为立体视,允许大脑将两只眼睛观察到的图像,融合为一个完整的具有立体感知的印象,以分辨景物远近形态。第一级视功能完善才有机会建立第二级视功能;第二级视功能完善才能奠定第三级视功能的发展基础,三级视功能环环相扣,依次作用,才能让我们清晰、持久、舒服地观察世界。人类日常生活、学习和工作场景中都离不开正常、完善的双眼视功能。但由于一些先天病理原因、生活中的不当用眼、用眼疲劳等情况,越来越多的人患上不同程度的弱视甚至斜视,不仅时常感到视疲劳,眼酸、眼胀,视近困难,困倦感等,还会丧失部分视觉功能,极大地影响了正常生活。目前的视功能训练方式主要采用反转拍、立体图册;遮盖疗法;同视机训练等等,这些训练方式不仅形式、内容单一,容易造成麻木记忆,削弱训练效果,而且不能充分调动患者积极性,特别是对于年龄小的患者。

  1、为了克服已有弱视训练方式的体九游体育,九游体育股份有限公司,九游体育官方网站,九游Sports积较大、训练模式单一、针对弱视眼视觉功能训练的同时忽视优势眼的正常视觉功能、忽视双眼视觉信息的平衡等缺点,本发明提供了一种基于视线估计的vr交互式双眼视功能训练系统,结合实时视线估计技术,以解决如何平衡双眼视觉信息输入作为视功能训练的优化媒介的技术问题,从而提高用户训练的效果和适配度。

  2、为实现上述技术目的,本发明采用了一种基于视线估计的vr交互式双眼视功能训练系统,包括光学系统和处理控制系统,所述光学系统包括左侧红外led光源、右侧红外led光源、左眼微型红外摄像头和右眼微型红外摄像头,所述左侧红外led光源对准左眼,所述右侧红外led光源对准右眼;

  3、所述处理控制系统包括左眼vr显示屏、右眼vr显示屏、双眼视功能训练模块、人眼注视点预测模块和优势眼抑制模块,所述左眼微型红外摄像头位于左眼vr显示屏外侧下方,所述右眼微型红外摄像头位于右眼vr显示屏外侧下方,所述双眼视功能训练模块包括针对vr头戴式显示屏为终端显示设备的视功能训练游戏;所述人眼注视点预测模块对红外摄像头获取的人脸部姿态图像进行存储、双眼及面部图像分割和分析得出注视点预测坐标,同时与双眼视功能训练模块进行多软件交互;所述优势眼抑制模块包括遮挡模型的生成和实时显示,所述的遮挡模型的生成是指利用三维建模软件生成虚拟遮挡模型;所述的遮挡模型的实时显示是指在基于视线估计的深度学习神经网络输出的用户注视点坐标位置上叠加显示虚拟遮挡模型,且仅叠加显示在预设的优势眼终端显示设备屏幕上。

  4、进一步,所述的人眼注视点预测模块包括深度学习神经网络,所述的深度学习神经网络是基于视线估计的深度学习神经网络模型的基础上,通过更改数据的加载方式以及坐标生成方式改进训练的:通过调用微型红外摄像头获取用户当前的注视信息,实时预测注视点的坐标数据;

  5、所述的微型红外摄像头在以针对vr头戴式显示为终端显示设备的系统中处于双眼透镜外侧下方的两个微型红外摄像头,与双眼显示屏中心水平线°,其获取的用户实时注视信息具体为:双眼瞳孔信息,通过对左眼、右眼图片做特征提取,通过直接调用微型红外摄像头达到实时生成预测点坐标的效果,利用全连接层回归实现注视点的预测;

  14、整合包含的所有数据信息通过全连接层预测,得到实时注视点的标准坐标,

  17、所述双眼视功能训练模块中,所述的针对vr头戴式显示为终端显示设备的视功能检测游戏和视功能训练游戏是通过vr设备构建三维虚拟环境场景、视功能检测图片、gabor视标和空间频率光栅,符合左手柄控制角色移动、右手柄切换视角画面,游戏过程始终保持第一视角显示画面,完成游戏要求得分或条件完成通关,游戏结束后保存游戏时长、得分记录。

  18、优选的,所述的视功能检测游戏包括基于vr头戴式显示为终端显示设备的同时视检测游戏、融合视检测游戏和立体视检测游戏,通过unity 3d软件进行vr端检测游戏开发:同时视检测游戏利用vr设备实现双眼分视效果,对左、右vr显示屏进行单独交替渲染呈现给用户观察;融合视检测游戏利用随机算法调用符合左、右眼视差的两张图像,用户通过观察图像聚合关系以判断感觉性融合和运动性融合能力范围;立体视检测游戏利用随机算法调用符合色差原理的随机点立体视觉检查图,用户通过辨别立体图形以判断立体视觉锐度值。

  19、优选的,所述的视功能训练游戏包括基于vr头戴式显示为终端显示设备的同时视训练游戏、融合视训练游戏和立体视训练游戏,通过unity 3d软件进行vr端游戏开发:卡牌游戏利用随机排列算法gabor视标刺激用户大脑皮层从而训练用户的视觉,通过集中注视和分辨gabor视标的方位性和相邻性以达到同时视训练;gabor对对碰游戏利用随机排列算法和移动组件交互算法以知觉训练的准则调动手、眼、脑协作,从而训练用户的双眼对物像同时接受能力,以达到同时视训练;动物聚散分类游戏利用随机排列算法和移动组件交互算法以感知两只眼睛单眼融合距离范围为原则,调动大脑调整双眼去维持感觉性融合和运动性融合能力,以训练融合视;马斯登躲避球游戏利用随机下落算法和刚体碰撞检测算法以模拟马斯登球在多种现实场景下的运动轨迹,满足远近左右纵向移动空间从而训练用户的感知深度觉,以达到立体视训练;步步登楼游戏利用物理力学和计算机图形学原理模拟不同踏步高度的楼梯空间,以模仿真实生活场景中的不同楼梯道路,从而训练用户对横纵方向上的感知深度觉,达到立体视训练;迷宫游戏利用操纵视角算法和刚体碰撞检测算法以不同空间频率的光栅刺激用户的大脑皮层训练用户视觉功能,通过视知觉训练调动手、眼、脑协作来识别抓取gabor视标,改善单、双眼视知觉缺陷通路,观察空间中远近深度不一的移动条纹光栅训练深度运动知觉,加强立体感知建立。

  20、所述的同时视检测游戏、融合视检测游戏和立体视检测游戏的图像类型可以根据用户的训练计划进行调整,包括图像的大小尺寸、对比度、清晰图、色相和立体视锐度数值对应的图片类型。

  21、所述的同时视训练游戏、融合视训练游戏和立体视训练游戏的难度和类型可以根据用户的训练计划进行调整,分为gabor视标参数和障碍物参数调节,包括gabor视标的数量、gabor视标的方向、gabor视标的空间频率、gabor视标的相邻性、障碍物的数量、障碍物的速度、障碍物的大小尺寸、障碍物的对比清晰度和障碍物的横向和纵向距离参数的调节。

  22、所述优势眼抑制模块中,所述的虚拟遮挡模型是根据用户具体的视觉功能和制定的训练方案而有针对地进行设计和构建的,并且可以随着用户训练反馈的结果进行调整,可调整的参数包括虚拟遮挡模型的颜色、形状、材质、大小、对比度、清晰度、出现频率和速度。

  23、进一步地,所述的仅叠加显示在预设的优势眼终端显示设备屏幕在以针对vr头戴式显示为终端显示设备的系统中对视功能训练游戏进行vr游戏开发,设计并建立符合双眼视差的视功能训练游戏场景,分别对vr的左、右显示屏进行渲染,通过三维建模生成虚拟遮挡模型并对预设优势眼的显示屏进行单一渲染,实现对优势眼的抑制效果。

  24、优选的,所述的左眼微型红外摄像头与左眼vr显示屏中心水平线°,所述的右眼微型红外摄像头与右眼vr显示屏中心水平线、所述处理控制系统还包括用户信息管理模块,所述的用户信息管理模块包括用户信息录入系统和用户信息查询系统,所述的用户信息录入系统包括获取用户个人信息、诊断数据和游戏训练数据,需要用户在使用双眼视功能模块训练时进行注册或登录账号,以方便存储信息数据;所述的用户信息查询系统包括独立于双眼视功能模块训练之外用户查看用户训练效果,需要用户注册或登录同一账号;

  26、所述的个人信息包括用户的年龄、性别、名字、弱视情况;所述弱视情况包括双眼裸眼视力、验光、矫正视力、是否斜视(度数)、优/弱视眼位置、立体视和制定的训练方案强度参数;所述的游戏训练数据通过在双眼视功能训练模块中的三级视功能游戏完成后及时保存训练时长、训练周期和游戏得分信息到系统中。

  27、本发明的技术构思为:gabor视标是一种基于视觉刺激和促进负责视觉的神经连接的神经视觉或知觉视觉训练。在轮廓觉察任务中,因为gabor视标没有边缘的提示,对比度、大小、空间频率、方位和空间位置均可被利用和处理,被视为合适的刺激元素,有利于弱视眼对空间整合能力的掌握,在知觉训练中担任举足轻重的作用。同时,方位信息是视觉刺激信号的重要属性, 在知觉学习研究中方位辨别通常采用对正弦条栅方位差的分辨能力来表示。而知觉学习可以明显提高用户方位辨别能力。因此采用本发明的系统来训练患者弱视眼的视觉功能,平衡双眼接受信息和图像处理融合能力是非常必要的。本发明提出了一种新系统,克服了上述已有技术存在的问题,与传统单眼修复训练有所不同,直接针对双眼视功能进行训练,不仅可以取得良好的训练效果,也有利于双眼视功能提高与训练效果的保持。

  28、视线估计是通过眼睛的状态、头部姿态预测人的视线方向或者注视点位置的过程,在神经科学、心理学、计算机科学等领域具有重要价值。视线估计的目标是从人脸图像或者眼睛图像中推导出视线方向。虽然视线估计技术现在应用于多个领域,包括游戏交互、虚拟现实、医疗、辅助驾驶和网页分析等,但截至目前,尚无关于视线估计在视功能训练领域中的应用。基于视线估计对人关注点捕捉和可视化的重要特征,本发明首次提出了基于视线估计的交互式双眼视功能训练系统,在vr中,通过视线跟踪算法可以对人眼关注的局部区域进行高精度渲染,从而提升视功能训练的依从性,并节省能耗并降低硬件成本,也能辅助医生更好地掌握病人的训练情况。

  30、1)光学与眼科交叉融合创新:本发明依据弱视训练原理,与多媒体技术、虚拟现实技术相融合,根据医学训练要求和光学基础知识,巧妙地将光学和眼科学高效地结合在一起,自主设计了全新的符合三级视功能的双眼训练游戏,并发明了训练系统进行视力训练。

  31、2)平衡双眼视觉信息输入:相比传统视功能训练的方式,本发明避免了完全遮盖疗法中对优势眼视功能造成遏抑现象,培养了用户双眼协作习惯,不仅完成了对劣势眼有针对性的单、双眼视功能训练,同时在训练过程保护了优势眼的正常视觉功能,创造了优、劣势眼共同协作的特殊条件,刺激了视觉皮层中的特定神经元并训练其更加高效地处理图像信息,从而逐渐形成新的神经连接,实现持久的视力改善。

  32、3)训练依从性高,操作简单方便:本发明结合游戏的趣味性和弱视训练的严谨性开发的视功能训练游戏种类众多,训练内容丰富、符合儿童心理特点,提高用户训练依从性。使用方便,在家也可以开始双眼视功能训练,更容易长时间坚持训练。

地址:陕西省汉中市勉县定军山镇左所村76号 Copyright © 2026 必一运动商业有限公司 版权所有