CN107067856B - 一种医学模拟训练系统和方法 - Google Patents
一种医学模拟训练系统和方法 Download PDFInfo
- Publication number
- CN107067856B CN107067856B CN201611266712.3A CN201611266712A CN107067856B CN 107067856 B CN107067856 B CN 107067856B CN 201611266712 A CN201611266712 A CN 201611266712A CN 107067856 B CN107067856 B CN 107067856B
- Authority
- CN
- China
- Prior art keywords
- data
- dimensional
- user
- model
- dimensional model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004088 simulation Methods 0.000 title claims abstract description 77
- 238000012549 training Methods 0.000 title claims abstract description 66
- 238000000034 method Methods 0.000 title claims abstract description 35
- 238000012545 processing Methods 0.000 claims abstract description 44
- 239000011521 glass Substances 0.000 claims description 17
- 230000004886 head movement Effects 0.000 claims description 11
- 210000001835 viscera Anatomy 0.000 claims description 8
- 230000004424 eye movement Effects 0.000 claims description 5
- 238000012937 correction Methods 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 claims description 4
- 230000001133 acceleration Effects 0.000 claims description 3
- 238000012795 verification Methods 0.000 claims description 2
- 238000010253 intravenous injection Methods 0.000 abstract description 16
- 230000008569 process Effects 0.000 abstract description 11
- 238000007654 immersion Methods 0.000 abstract description 4
- 238000001356 surgical procedure Methods 0.000 abstract description 2
- 238000005516 engineering process Methods 0.000 description 19
- 210000004204 blood vessel Anatomy 0.000 description 15
- 230000000694 effects Effects 0.000 description 13
- 238000002347 injection Methods 0.000 description 11
- 239000007924 injection Substances 0.000 description 11
- 230000033001 locomotion Effects 0.000 description 11
- 210000000056 organ Anatomy 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 9
- 230000009471 action Effects 0.000 description 7
- 210000004072 lung Anatomy 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000011888 autopsy Methods 0.000 description 4
- 210000005252 bulbus oculi Anatomy 0.000 description 4
- 210000001508 eye Anatomy 0.000 description 4
- 238000007405 data analysis Methods 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 108010001267 Protein Subunits Proteins 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000004438 eyesight Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000007918 intramuscular administration Methods 0.000 description 2
- 238000010255 intramuscular injection Methods 0.000 description 2
- 239000007927 intramuscular injection Substances 0.000 description 2
- 238000001990 intravenous administration Methods 0.000 description 2
- 230000004060 metabolic process Effects 0.000 description 2
- 230000000474 nursing effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000003759 clinical diagnosis Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000002503 metabolic effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011158 quantitative evaluation Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
- G09B23/28—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Business, Economics & Management (AREA)
- Computational Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Algebra (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Medicinal Chemistry (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种医学模拟训练系统和方法，系统包括：对象模型构建模块，采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象；模型数据库，存储三维虚拟模型对象数据；传感器追踪模块，采集用户对三维立体模型的操作数据；数据处理模块，对采集的数据处理得到三维立体模型的形状数据以及用户对三维立体模型的操作数据并输出；图像生成模块根据三维立体模型的形状数据以及用户的操作数据生成包括模拟操作结果信息的三维虚拟图像；显示模块，显示输出三维虚拟图像供用户查看模拟操作结果。本实施例的系统和方法沉浸感强、最大限度模拟真实医疗场景，降低了外科手术、静脉注射等临床教学训练成本。
Description
技术领域
本发明涉及虚拟现实技术领域，具体涉及一种医学模拟训练系统和方法。
背景技术
在医学领域，传统的医学模拟训练例如，外科手术实操教学非常简陋，基本达不到临床应用水平，一些医学院校及医院使用模拟器官橡皮进行教学，通过手术录像的演示播放,利用器官实物标本讲解,尸体解剖教学,以及专家手术观摩等形式,针对外科手术培训、手术预演、临床诊断、远程手术、康复治疗等医学辅助等教学环节。
这种方法存在有诸多不足：1、模拟器官进行教学,本身橡皮材料易老化,使用过多次后就需要更换,橡皮器官的价格比较高,经常更换教具大大增加了教学成本。2、尸体解剖教学，学生在实验室里通过尸体解剖教学,这种人体解剖教学方式，往往成本极高，且尸体与活体具有较大差距，不能起到使学生完成直观、轻松学习和动手操作。3、专家手术观摩形式,通过视听触觉等多种感官了解和学习各种手术实际操作,对于年轻医生或者实习学生而言,不能亲自操作及与专家操作方法及时进行比对,发现自己的错误和不足,无疑使得培训年轻医务人员浪费大量金钱和时间,不能获得良好的受训效果，也严重地影响了练习效率。
综上可知，现有医学模拟训练技术方案，训练成本较高，训练效果不佳并且效率较低。
发明内容
本发明提供了一种医学模拟训练系统和方法，以解决现有技术中现有医学模拟训练技术方案，训练成本较高，训练效果不佳并且效率较低的技术问题。
根据本发明的一个方面，提供了一种医学模拟训练系统所述系统包括：
对象模型构建模块，用于采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，将构建的三维虚拟模型对象发送至模型数据库；
模型数据库，用于存储三维虚拟模型对象数据；
传感器追踪模块，用于通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据，以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
数据处理模块，对传感器追踪模块采集的位置数据和压力数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据，并将三维立体模型的形状数据以及用户对三维立体模型的操作数据输出至图像生成模块；
图像生成模块，根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像，将生成的三维虚拟图像发送给显示模块；
显示模块，用于显示输出三维虚拟图像供用户查看模拟操作结果。
根据本发明的另一方面，提供了一种医学模拟训练方法，方法包括：
采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象；
存储构建的三维虚拟模型对象；
通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
对采集的位置数据和压力数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据；
根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像；
显示输出三维虚拟图像，供用户查看模拟操作结果。
本发明实施例的有益效果是：本发明实施例的这种医学模拟训练系统和方法，利用虚拟现实技术采集人体特定部位的三维立体模型数据并构建虚拟模型对象，接收用户对三维立体模型的操作数据并通过根据操作数据生成对应的虚拟现实图像，将生成的虚拟现实图像呈现在虚拟现实显示设备中，方便用户观看操作结果。由此，通过在现实空间中操作的器械和操作对象上设置传感器，实时采集用户的操作数据，并制作对应的三维虚拟现实图像，为用户提供模拟触觉感知和模拟视觉感知，提高用户的沉浸感，交互性强。可直接采集操作数据并实时更新，真实反馈操作结果，提高训练效果。满足了医疗教学及操作训练的需要，且简单、高效、易于操作，方便临床推广及普及，具有较高的应用价值。
附图说明
图1是本发明一个实施例的一种医学模拟训练系统的结构框图；
图2是本发明一个实施例的一种静脉注射模拟训练系统的结构框图；
图3是本发明一个实施例的一种外科手术模拟训练系统的结构框图；
图4是本发明一个实施例的一种医学模拟训练方法的流程图。
具体实施方式
虚拟现实(Virtual Reality)技术，也称灵境技术是近年来发展迅速的新技术。虚拟现实是利用计算机模拟产生一个三维空间的虚拟世界，提供用户关于视觉、听觉、触觉等感官的模拟，让用户如同身历其境一般，可以及时、没有限制地观察三度空间内的事物。该技术是利用计算机图形学、人机交互技术、3D建模等一系列计算机相关科学技术，通过对现实空间的模拟，并及时感应人在虚拟环境中的行为(如身体移动、头部转动等)，并对其行为进行及时的反馈，从而最大限度模拟真实的场景。
本发明的设计构思在于：将虚拟现实技术应用于医学模拟训练，通过虚拟现实技术，生成虚拟空间的三维图像，并实时采集用户对现实世界中人体特定部位的三维立体模型的操作数据，根据实时操作数据计算操作结果数据，并将操作结果数据与虚拟模型对象叠加，从而生成包括操作结果数据的虚拟图像，并显示输出给用户供用户查看。如此，提供用户视觉和触觉等感官的模拟，让用户如同身历其境一般，及时、没有限制地观察三维空间内的模型对象，提高了医疗训练的效果，并且不需要购买昂贵的训练设备，节省了成本。
实施例一
图1是本发明一个实施例的一种医学模拟训练系统的结构框图，参见图1，本实施例医学模拟训练系统10包括：
对象模型构建模块101，用于采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，将构建的三维虚拟模型对象发送至模型数据库104；
模型数据库104，用于存储三维虚拟模型对象数据；
传感器追踪模块103，用于通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据，以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
数据处理模块102，对采集的数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据，并将三维立体模型的形状数据以及用户对三维立体模型的操作数据输出至图像生成模块105；
图像生成模块105，根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像，将生成的三维虚拟图像发送给显示模块106；
显示模块106，用于显示输出三维虚拟图像供用户查看模拟操作结果。
由图1所示可知，本实施例的基于虚拟现实的医学模拟训练系统，通过采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，将构建的三维虚拟模型对象发送至模型数据库，然后用户可以对模型数据库中的三维虚拟模型对象进行选择，利用虚拟现实技术，当用户在现实世界中操作手术刀等器械对三维立体模型进行操作时，每一步的操作数据都可以通过手术刀等器械上的传感器以及三维立体模型上的传感器采集到，采集到的这些数据被传送到数据处理模块，数据处理模块计算并识别出用户的每一步操作数据(例如，操作力度数据，操作方向数据以及操作的部位的数据等)，然后发送给图像生成单元，图像生成单元根据操作数据生成对应的三维操作结果图像，再通过三维显示器的显示，用户即可看到每一步操作在虚拟模型对象上的操作结果，提高了医疗训练的效果并且降低了训练成本，方便大规模推广应用。
在本发明的一个实施例中，图像生成模块105，具体用于根据三维立体模型的形状数据，在预先设定的模型数据库中识别出形状数据对应的三维立体模型，并根据用户对三维立体模型的操作数据，调用三维图像处理库，生成包括模拟操作结果信息的三维图像。
在本发明的一个实施例中对象模型构建模块101，用于采集人体手臂和内脏器官的三维立体模型数据，并基于采集的人体手臂和内脏器官的三维立体模型数据构建人体手臂对应的三维虚拟模型对象，以及各内脏器官对应的三维虚拟模型对象。
在本发明的一个实施例中用户所持器械包括：虚拟现实手术刀或虚拟现实注射器，传感器追踪模块103，用于通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时操作位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
在本发明的一个实施例中，显示模块106中设置有摄像头，用于追踪用户眼球运动，或者，显示模块中设置有加速度传感器，用于实时采集用户头部运动数据跟踪用户的头部运动，并根据眼球运动或者头部运动实时确定用户的视点，
当接收到图像生成模块105发送的三维虚拟图像时，根据实时确定出的用户的视点，调整三维虚拟图像的显示输出位置。在本发明的一个实施例中显示模块106为虚拟现实眼镜或虚拟现实头盔。
在本发明的一个实施例中，图像生成模块105还用于根据虚拟现实眼镜或虚拟现实头盔中的镜片的光学特性，在发送三维虚拟图像至虚拟现实眼镜或虚拟现实头盔之前，对三维虚拟图像进行畸变校正。
以下结合两个具体的应用场景对本发明的这种基于虚拟现实的医学模拟训练系统结构进行具体说明。这两个具体的应用场景分别为：外科手术的模拟训练和护理静脉注射模拟训练。
实施例二
本实施例中提供了基于虚拟现实的护理静脉注射模拟训练，具体的，基于虚拟现实的静脉注射模拟训练系统应用时需要用到如下工具：
静脉注射模拟训练手臂三维立体模型，即，用户操作的对象；
注射器，即，用户所持器械；
计算机，计算机用于模型数据存储以及数据处理，图像生成，数据传输等；
VR显示设备(例如VR眼镜)，用于显示虚拟现实三维图像。
基于虚拟现实的静脉注射模拟训练系统实现的原理是：在手臂三维立体模型内模拟血管(或肌肉注射区域)布置传感器，采集手部血管走势动态数据，对采集的数据进行集中存储。本实施例中可以对手部血管走势动态数据按照不同年龄段分类，对采集的数据进行集中存储，构建完整手臂生理代谢模型数据库，将模型中肌肉注射区域及重要血管设置传感器，所有的传感器一经触碰，将采集到的数据传至VR眼镜中，然后通过编程实现虚拟注射操作的对象模型，操作者通过佩戴3D眼镜在虚拟现实空间内对手臂模型进行静脉注射模拟，除此之外，皮肤组织脂肪层厚薄、血管粗细也可自由在模型数据库中切换，通过传感器所相连的触觉，向VR眼镜真实反馈静脉(肌肉)注射效果。本发明实施例的技术方案沉浸感强、交互性强，且简单、高效、易于操作。
图2是本发明一个实施例的一种静脉注射模拟训练系统的结构框图，参见图2，本实施例的静脉注射模拟训练系统20包括：
对象模型构建单元201，利用虚拟现实技术采集手臂三维立体模型数据，设定一个符合情况的虚拟三维手臂模型，存入对象模型构建单元201所运行的计算机中用于模拟操作。另外，实际应用过程中还可以将3D模型提供给3D应用程序界面，用于静脉(肌肉)注射方案的设计。
数据处理单元202，用于处理数据传输单元204传来的数据，并获取其中的信息：例如：用户视点信息Viewport，操作对象位置信息Position，动作信息Motion，将识别出的信息传递给图像生成单元203进行三维虚拟图像的生成，根据相应的注射操作生成虚拟场景。
其中，视点信息Viewport，可通过如下方式采集：在VR头戴设备中设置有摄像头进行用户眼球运动的追踪，根据眼球的运动确定出用户的视点。
当用户佩戴该VR头戴设备处于静脉注射模拟训练虚拟场景时，利用人体手臂模型上的传感器感应、注射器上的传感器感应识别用户的动作，将动作指令传输到计算机的数据处理单元中。
图像生成单元203，接收数据处理单元202发送的视点信息、位置信息、运动信息等，并对信息进行处理，提取出用户操作的三维立体模型的形状(物体轮廓)信息，而后在预先设定的模型数据库中识别出该物体形状信息对应的物体模型数据，并调用3D图像处理库(例如，OpenGL或者Direct3D)，进行三维模型的构建和三维图像的生成渲染。
OpenGL(Open Graphics Library)是指定义了一个跨编程语言、跨平台的编程接口规格的专业的图形程序接口，它用于三维图像(二维的亦可)，是一个功能强大，调用方便的底层图形库。
Direct 3D是基于微软的通用对象模式COM(Common Object Mode)的3D图形API，可绕过图形显示接口(GDI)直接进行支持该API的各种硬件的底层操作，提高运行速度，适合多媒体、娱乐、即时3D动画等广泛和实用的3D图形计算。
数据传输单元204，实时接收对象传感追踪单元206发送的信息，并传送到数据处理单元202处理，跟踪注射器(注，这里的注射器即为设备接入单元中的设备，即，注射器需要接入到计算机中并与数据传输单元通信，以将注射器中的传感器数据传输给数据传输单元，使得数据传输单元将这些信息发送给数据处理单元)的操作信息，传到数据处理单元进行处理，供生成三维虚拟图像。
数据处理单元可设置在计算机中，该计算机提供设备接入接口方便注射器和三维立体模型中对象传感器追踪单元206传输数据。
对象传感器追踪单元206，设置在手臂三维立体模型和注射器中，实际操作时，由于手臂三维立体模型和注射器分布多个传感器，一旦注射器插入手臂三维立体模型上的血管，数据处理单元根据注射器中传感器以及手臂三维立体模型传感器提供的信息确定用户当前操作是否正确，如果用户当前的操作不正确，则将当前操作数据传至VR显示设备后，VR显示设备立即呈现血管破裂出血，红肿的三维虚拟图像，达到最真实注射模拟效果。此外，可以将各种形态手臂模拟效果数据存储至计算机的模型数据库当中，供用户练习时备用。
这里的传感器包括：位置传感器和压力传感器，实际应用时，通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时操作位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
显示单元207，用于接收图像生成单元203生成的3D图像数据并显示在显示设备中，例如VR眼镜，用户通过佩戴VR眼镜在虚拟现实互动操作平台上可查看操作模拟效果；这里的VR眼镜可替换为VR头盔，对此不做限制。
可选地，本实施例的基于虚拟现实的静脉注射模拟训练系统还包括：验证单元205，验证单元根据用户的操作数据，记录用户操作错误的次数，然后对用户的操作进行按照模型数据库中设定的权重赋值和量化考评信息对用户的操作进行评分和评级，供后续查看和参考，提高操作成功率。
本发明实施例的基于虚拟现实技术的静脉注射模拟训练系统的具体工作过程包括：
启动基于虚拟现实技术的静脉注射模拟训练系统，进入初始化工作，用户可以选择操作对象(即，具体的人体手臂模型)。
步骤201：用户拿起注射器进行操作，对象传感器追踪单元206传入位置信息和动作信息，实时感应，数据处理单元202进行手势识别等工作，根据识别出的相应操作，通知图像生成单元203生成三维图像。
步骤202：在注射操作过程中，对象传感器追踪单元207与数据传输单元204进行交互跟踪注射操作得到注射操作信息，并传到数据处理单元202进行处理。此外，还可以将所采集到的数据周期性发送更新请求至对象传感器追踪单元207，从而从对象传感器追踪单元207中获取最新的数据，以采集用户的动作指令，精准收集用户操作信息。
步骤203：数据处理单元202处理数据传输单元204传来的数据，并在用户对现实空间中的手臂三维立体模型执行注射操作后，图像生成单元203启动计算机中的虚拟环境子程序及调用手臂三维虚拟模型的数据，使三维虚拟模型对操作者的动作指令进行及时反馈，从而将模拟注射操作结果呈现于用户眼前。
步骤204：经过模拟注射操作完成后，根据记录的操作的总次数以及操作错误的次数对模拟注射操作进行评价，打出参考分值。
与现有的静脉注射模型相比，本实施例具有可重复利用率高、成本低，静脉模拟度高、静脉穿刺模拟结果直观的优点，解决了护士等医务人员静脉穿刺学习机会少，操作不熟练等问题。降低了教学成本和医疗风险，节约了培训资源，提高教学质量，且简单、高效、易于操作，方便临床推广及普及，具有较高的应用价值及意义。
实施例三
本实施例中提供了基于虚拟现实的外科手术模拟训练系统。具体的，基于虚拟现实的外科手术模拟训练系统应用时需要用到如下工具：
(1)虚拟现实VR手术刀(可选地还包括手术手套)，这里VR手术刀包含传感器，可以利用传感器进行数据采集和动作感应，以进行手势识别，识别出用户的手术动作。这里的传感器包括：位置传感器和压力传感器，实际应用时，通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时操作位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
(2)手术对象(即人体特定器官三维立体模型)，系统可以预先设定人体三维立体模型数据，供用户选择人体器官立体模型作为手术对象，并且在该模型器官的主要位置以及各大血管分布多个传感器。如此，在用户操作过程中，一旦手术刀触碰到某个血管，则传感器将发送感应信息到数据处理单元进行进一步的数据分析处理。
(3)计算机，计算机用来实现模型数据存储以及数据处理，图像生成，数据传输等功能；
(4)VR显示设备(例如VR眼镜或VR头盔)，用于显示虚拟现实三维图像。
本发明将虚拟技术应用于外科手术模拟训练具有三大优点：第一，真实呈现生理代谢动态过程，调节不同年龄段器官代谢数据速率，高度模拟外科手术现场。第二，实时反馈手术进展，利用模型感技术感应操作者的手术结果，真实反馈手术过程，为操作者奠定良好的实操技术，提高手术成功率。第三，降低临床手术教学成本。
图3是本发明一个实施例的一种外科手术模拟训练系统的结构框图，参见图3，该外科手术模拟训练系统30包括：
视点确定单元301，这里的视点确定单元包括两个子单元，分别是眼球运动跟踪确定视点子单元和头部运动跟踪确定视点子单元，在虚拟现实显示设备中，例如，VR头盔中设置摄像头，利用摄像头进行眼球追踪，根据用户眼球的实时运动数据确定用户当前的视点；或者，在VR头盔中设置摄像头以及特定的传感器(例如，加速度传感器)，进行头部运动位置追踪，从而确定视点。需要说明的是，本实施例的确定视点的方式可以采用现有技术来实现，因而有关如何确定视点的更详细的实现方式本实施例中不再重复说明，可参见现有技术中的相关描述。
手术对象模型302，这里的手术对象模型是计算机中的图像处理单元根据用户选择的人体器官立体模型对应生成的。例如，用户在现实空间中选择了一个肺器官模型进行外科手术，则，本实施例的基于虚拟现实的外科手术模拟训练系统中的图像生成单元从手术模型数据库中选择对应的肺器官的模型数据，构建三维虚拟模型，并呈现在虚拟现实显示设备中。
手部动作采集单元303，这里的手部动作采集单元即利用手术刀或手术手套上的传感器完成用户手部动作的采集，例如，用户手部当前所处的位置，用户操作的方向信息，力度信息等，根据这些信息以及人体特定部位的三维立体模型中的传感器采集的信息即可确定出用户操作的手术对象模型的位置。接上例，用户当前对肺器官进行外科手术，则在现实空间中的三维立体肺器官模型上的传感器采集用户所持手术刀是否接触了该肺部器官上的血管，如果有接触，则传感器能够立即采集到这一数据并将这一操作数据发送给数据处理单元，然后数据处理单元进行数据后发送给图像生成单元，图像生成单元根据用户对血管的操作，生成相应的虚拟现实三维图像，呈现在用户眼前。
手术模型数据库304，在手术模型数据库中存储有各种人体特定部位的器官模型数据，供用户选择。
数据处理单元305，数据处理单元利用器官(如，肺部)模型中分布的多个传感器以及手术刀上分布的传感器传输的数据进行数据分析处理。一旦手术刀触碰到传感器相应位置，根据传感器提供的信息确定当前手术操作是否正确，传感器感应到的数据传至该数据处理单元进行数据分析：例如，一旦触碰到肺部血管，数据处理单元获知触碰到血管的操作数据，发送给图像生成单元，图像生成单元生成血管破裂的三维图像并发送给显示单元呈现。
图像生成单元306，用于生成三维虚拟器官模型，并根据数据处理单元305发送的数据生成和渲染相应的三维虚拟图像。
另外，由于VR头戴设备中镜片的光学特性(均为凹透镜，显示时会产生图像畸变)，本实施例中图像生成单元306对生成的图像进行畸变处理，即在将生成的三维虚拟图像发送给显示单元前对图像进行畸变校正，以达到预期显示效果。
虚拟现实显示单元307，用于对图像生成单元306生成的三维虚拟图像进行显示，用户通过佩戴该虚拟现实显示单元307看到真实操作的模拟操作效果和VR手术场景。
本发明实施例的基于虚拟现实技术的外科手术模拟训练系统的具体工作过程包括：
步骤301：用户戴上VR头戴设备，拿起手术刀。
步骤302：计算机中的图像处理单元根据现实空间中的手术对象生成对应的手术虚拟模型图像传入VR显示设备。
步骤303：用户进行手术操作，进行手术动作识别。
步骤304：VR头戴设备判定用户头部位置或对用户的眼球进行追踪，确定视点。
步骤305：手术操作过程中，手术刀和人体立体三维模型上的传感器感应用户所持手术刀对手术对象的手术切割点，并进行反馈。
步骤306：根据反馈的信息进行三维图像生成后传入VR头戴设备显示。
至此，本实施例的基于虚拟现实技术的外科手术模拟训练系统通过虚拟现实技术提供视觉、触觉模拟感知，模拟真实的手术操作，交互性强。降低了教学成本和医疗风险，节约了医疗培训资源，提高了教学质量，并且简单、高效、易于操作，方便推广普及。
实施例四
图4是本发明一个实施例的一种医学模拟训练方法的流程图。参见图4，本实施例的基于虚拟现实的医学模拟训练方法包括如下步骤：
步骤S401，采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，存储构建的三维虚拟模型对象；
步骤S402，通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
步骤S403，对采集的位置数据和压力数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据；
步骤S404，根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像；
步骤S405，显示输出三维虚拟图像，供用户查看模拟操作结果。
在本发明的一个实施例中，步骤S404，根据三维立体模型的形状数据以及用户的操作数据生成包括模拟操作结果信息的三维虚拟图像包括：
根据三维立体模型的形状数据，在预先设定的模型数据库中识别出形状数据对应的三维立体模型，并根据用户对三维立体模型的操作数据，调用三维图像处理库，生成包括模拟操作结果信息的三维图像。
在本发明的一个实施例中，步骤S401，采集人体特定部位的三维立体模型数据包括：
采集人体手臂和内脏器官的三维立体模型数据，
用户所持器械包括：虚拟现实手术刀或虚拟现实注射器，
通过用户所持器械上设置的传感器以及该器械作用的三维立体模型中的传感器跟踪采集用户对三维立体模型的操作数据包括：
通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时操作位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
在本发明的一个实施例中，图4所示方法进一步包括：追踪用户眼球运动，或者，实时采集用户头部运动数据跟踪用户的头部运动，并根据眼球运动或者头部运动实时确定用户的视点，当接收到三维虚拟图像时，根据实时确定出的用户的视点，调整三维虚拟图像的显示输出位置。
显示输出三维虚拟图像包括通过虚拟现实眼镜或虚拟现实头盔显示输出三维虚拟图像。
在本发明的一个实施例中步骤S404，根据三维立体模型的形状数据以及用户的操作数据生成包括模拟操作结果信息的三维虚拟图像还包括：根据虚拟现实眼镜或虚拟现实头盔中的镜片的光学特性，在发送三维虚拟图像至虚拟现实眼镜或虚拟现实头盔之前，对三维虚拟图像进行畸变校正。
综上所述，本实施例的医学模拟训练方法，利用虚拟现实技术采集人体特定部位的三维立体模型数据并构建虚拟模型对象，接收用户对三维立体模型的操作数据并通过根据操作数据生成对应的虚拟现实图像，将生成的虚拟现实图像呈现在虚拟现实显示设备中，方便用户观看操作结果。由此，通过在现实空间中操作的器械和操作对象上设置传感器，实时采集用户的操作数据，并制作对应的三维虚拟现实图像，为用户提供模拟触觉感知和模拟视觉感知，提高用户的沉浸感，交互性强。可直接采集操作数据并实时更新，真实反馈操作结果，提高训练效果。满足了医疗教学及操作训练的需要，且简单、高效、易于操作，方便临床推广及普及，具有较高的应用价值。
以上所述，仅为本发明的具体实施方式，在本发明的上述教导下，本领域技术人员可以在上述实施例的基础上进行其他的改进或变形。本领域技术人员应该明白，上述的具体描述只是更好的解释本发明的目的，本发明的保护范围以权利要求的保护范围为准。
Claims (10)
1.一种医学模拟训练系统，其特征在于，所述系统包括：
对象模型构建模块，用于采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，将构建的三维虚拟模型对象发送至模型数据库；
模型数据库，用于存储三维虚拟模型对象数据；
传感器追踪模块，用于通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据，以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
数据处理模块，对传感器追踪模块采集的位置数据和压力数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据，并将三维立体模型的形状数据以及用户对三维立体模型的操作数据输出至图像生成模块；
图像生成模块，根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像，将生成的三维虚拟图像发送给显示模块；
显示模块，用于显示输出三维虚拟图像供用户查看模拟操作结果；
还包括验证模块，用于根据用户的操作数据，记录用户操作错误的次数，对用户的操作进行评分和评级；
所述传感器追踪模块，具体用于通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
2.根据权利要求1所述的系统，其特征在于，所述图像生成模块，具体用于根据三维立体模型的形状数据，在预先设定的所述模型数据库中识别出所述形状数据对应的三维立体模型，并根据用户对三维立体模型的操作数据，调用三维图像处理库，生成包括模拟操作结果信息的三维图像。
3.根据权利要求1所述的系统，其特征在于，对象模型构建模块，具体用于采集人体手臂和内脏器官的三维立体模型数据，并基于采集的人体手臂和内脏器官的三维立体模型数据构建人体手臂对应的三维虚拟模型对象，以及各内脏器官对应的三维虚拟模型对象。
4.根据权利要求1所述的系统，其特征在于，用户所持器械包括：虚拟现实手术刀或虚拟现实注射器。
5.根据权利要求1所述的系统，其特征在于，所述显示模块中设置有摄像头，用于追踪用户眼球运动，或者，所述显示模块中设置有加速度传感器，用于实时采集用户头部运动数据跟踪用户的头部运动，并根据所述眼球运动或者头部运动实时确定用户的视点，
当接收到所述图像生成模块发送的三维虚拟图像时，根据实时确定出的用户的视点，调整三维虚拟图像的显示输出位置。
6.根据权利要求5所述的系统，其特征在于，所述显示模块为虚拟现实眼镜或虚拟现实头盔。
7.根据权利要求6所述的系统，其特征在于，所述图像生成模块，还用于根据虚拟现实眼镜或虚拟现实头盔中的镜片的光学特性，在发送三维虚拟图像至虚拟现实眼镜或虚拟现实头盔之前，对三维虚拟图像进行畸变校正处理。
8.一种医学模拟训练方法，其特征在于，所述方法包括：
采集人体特定部位的三维立体模型数据，并基于采集的三维立体模型数据构建对应的三维虚拟模型对象，存储构建的三维虚拟模型对象；
通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据；
对采集的位置数据和压力数据进行处理，得到三维立体模型的形状数据以及用户对三维立体模型的操作数据；
根据三维立体模型的形状数据以及用户对三维立体模型的操作数据生成包括模拟操作结果信息的三维虚拟图像；
显示输出三维虚拟图像，供用户查看模拟操作结果；
还包括根据用户的操作数据，记录用户操作错误的次数，对用户的操作进行评分和评级；
所述通过用户所持器械上设置的传感器采集所持器械的实时位置数据和压力数据以及通过该器械作用的三维立体模型中的传感器跟踪采集三维立体模型的位置数据和压力数据包括：
通过位置传感器采集用户所持器械的实时位置数据，并通过位置传感器采集器械作用的三维立体模型的实时位置数据；以及，通过压力传感器采集用户所持器械的实时压力数据，并通过压力传感器采集器械作用的三维立体模型的实时压力数据。
9.根据权利要求8所述的方法，其特征在于，所述根据三维立体模型的形状数据以及用户的操作数据生成包括模拟操作结果信息的三维虚拟图像包括：
根据三维立体模型的形状数据，在预先设定的模型数据库中识别出形状数据对应的三维立体模型，并根据用户对三维立体模型的操作数据，调用三维图像处理库，生成包括模拟操作结果信息的三维图像。
10.根据权利要求8所述的方法，其特征在于，所述采集人体特定部位的三维立体模型数据包括：
采集人体手臂和内脏器官的三维立体模型数据，
用户所持器械包括：虚拟现实手术刀或虚拟现实注射器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611266712.3A CN107067856B (zh) | 2016-12-31 | 2016-12-31 | 一种医学模拟训练系统和方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611266712.3A CN107067856B (zh) | 2016-12-31 | 2016-12-31 | 一种医学模拟训练系统和方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107067856A CN107067856A (zh) | 2017-08-18 |
| CN107067856B true CN107067856B (zh) | 2020-03-27 |
Family
ID=59624651
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611266712.3A Active CN107067856B (zh) | 2016-12-31 | 2016-12-31 | 一种医学模拟训练系统和方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107067856B (zh) |
Families Citing this family (54)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9792836B2 (en) | 2012-10-30 | 2017-10-17 | Truinject Corp. | Injection training apparatus using 3D position sensor |
| BR112015009608A2 (pt) | 2012-10-30 | 2017-07-04 | Truinject Medical Corp | sistema para treinamento cosmético ou terapêutico, ferramentas de teste, aparelho de injeção e métodos para treinar injeção, para usar ferramenta de teste e para classificar injetor |
| EP3111438B1 (en) | 2014-01-17 | 2018-12-19 | Truinject Medical Corp. | Injection site training system |
| US10290231B2 (en) | 2014-03-13 | 2019-05-14 | Truinject Corp. | Automated detection of performance characteristics in an injection training system |
| BR112017011443A2 (pt) | 2014-12-01 | 2018-02-27 | Truinject Corp | instrumento de treinamento de injeção emitindo luz omnidirecional |
| US10500340B2 (en) | 2015-10-20 | 2019-12-10 | Truinject Corp. | Injection system |
| WO2017151441A2 (en) | 2016-02-29 | 2017-09-08 | Truinject Medical Corp. | Cosmetic and therapeutic injection safety systems, methods, and devices |
| US10849688B2 (en) | 2016-03-02 | 2020-12-01 | Truinject Corp. | Sensory enhanced environments for injection aid and social training |
| US10648790B2 (en) | 2016-03-02 | 2020-05-12 | Truinject Corp. | System for determining a three-dimensional position of a testing tool |
| CN107066082B (zh) * | 2016-12-30 | 2018-10-02 | 百度在线网络技术（北京）有限公司 | 显示方法和装置 |
| WO2018136901A1 (en) | 2017-01-23 | 2018-07-26 | Truinject Corp. | Syringe dose and position measuring apparatus |
| CN107393390A (zh) * | 2017-08-25 | 2017-11-24 | 江苏嘉纳宝医疗科技有限公司 | 虚拟现实急救训练模型人和培训系统 |
| CN107591074A (zh) * | 2017-09-05 | 2018-01-16 | 杭州市第三人民医院 | 一种基于3d打印制作的输尿管软镜模拟学习方法 |
| CN107527542B (zh) * | 2017-09-18 | 2020-09-08 | 南京梦宇三维技术有限公司 | 基于动作捕捉的叩诊训练系统 |
| CN107633724B (zh) * | 2017-09-18 | 2021-04-20 | 南京梦宇三维技术有限公司 | 基于动作捕捉的听诊训练系统 |
| CN107657881B (zh) * | 2017-10-17 | 2020-07-03 | 天津大学 | 基于虚拟现实的近距离粒子植入手术训练方法 |
| CN109841135A (zh) * | 2017-11-29 | 2019-06-04 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实的手术训练方法及系统 |
| CN109903660A (zh) * | 2017-12-11 | 2019-06-18 | 重庆海扶医疗科技股份有限公司 | 影像生成方法及装置、医疗设备的培训方法及培训系统 |
| CN107862966A (zh) * | 2017-12-14 | 2018-03-30 | 江苏农牧科技职业学院 | 针灸穴位动物模型及其组件 |
| CN108053709A (zh) * | 2017-12-29 | 2018-05-18 | 六盘水市人民医院 | 一种心脏外科深部缝合操作训练系统及模拟成像方法 |
| CN108320645B (zh) * | 2018-01-19 | 2020-02-07 | 中南大学湘雅二医院 | 医学模拟训练方法 |
| CN108335599B (zh) * | 2018-01-19 | 2020-02-04 | 聊城市人民医院 | 基于三维建模图像技术的手术模型训练方法 |
| CN108510939A (zh) * | 2018-04-24 | 2018-09-07 | 中航大（天津）模拟机工程技术有限公司 | 一种基于柔性oled显示屏的仿真成像系统 |
| CN108538095A (zh) * | 2018-04-25 | 2018-09-14 | 惠州卫生职业技术学院 | 基于虚拟现实技术的医学教学系统及方法 |
| WO2019207170A1 (en) * | 2018-04-27 | 2019-10-31 | Crisalix Sa | Medical platform |
| CN110610632A (zh) * | 2018-06-15 | 2019-12-24 | 刘军 | 血管介入手术虚拟体内导航系统 |
| CN109064817A (zh) * | 2018-07-18 | 2018-12-21 | 杭州行开科技有限公司 | 基于ct三维重建模型的手术模拟系统 |
| CN109064819B (zh) * | 2018-07-24 | 2020-12-18 | 贝利尔科技发展南京有限公司 | 一种虚拟教学的方法 |
| CN108922300A (zh) * | 2018-07-24 | 2018-11-30 | 杭州行开科技有限公司 | 基于数字化人体模型的手术模拟3d系统 |
| CN109065147A (zh) * | 2018-07-30 | 2018-12-21 | 广州狄卡视觉科技有限公司 | 医学数字化3d模型人体手术模拟人机互动系统及方法 |
| CN109061892A (zh) * | 2018-09-27 | 2018-12-21 | 广州狄卡视觉科技有限公司 | 整形外科医学影像模型重建互动裸眼立体显示系统及方法 |
| CN109410721A (zh) * | 2018-10-30 | 2019-03-01 | 深圳市墨优科技开发有限公司 | 一种急救护理训练方法及终端 |
| CN109935313A (zh) * | 2019-03-04 | 2019-06-25 | 苏州达辰医疗科技有限公司 | 三维可视化和混合现实的医学应用 |
| CN109767681A (zh) * | 2019-03-28 | 2019-05-17 | 福建水立方三维数字科技有限公司 | 海姆立克急救操作模拟装置 |
| US12067678B2 (en) * | 2019-06-11 | 2024-08-20 | Intuitive Surgical Operations, Inc. | Detecting and representing anatomical features of an anatomical structure |
| CN110335516B (zh) * | 2019-06-27 | 2021-06-25 | 王寅 | 一种采用vr心脏手术模拟系统进行vr心脏手术模拟的方法 |
| CN110353771B (zh) * | 2019-07-10 | 2020-07-10 | 解涛 | 一种脑外科手术用vr模拟训练手术刀 |
| EP3771449A1 (de) | 2019-07-31 | 2021-02-03 | Siemens Healthcare GmbH | Verfahren zur verformungssimulation und vorrichtung |
| CN110556031A (zh) * | 2019-09-06 | 2019-12-10 | 重庆大学附属肿瘤医院 | 造口患者用医疗指导系统 |
| CN110930804A (zh) * | 2019-12-19 | 2020-03-27 | 郑州工业应用技术学院 | 一种基于云平台的临床医学教育系统 |
| CN111127991B (zh) * | 2020-02-27 | 2024-06-04 | 无锡市妇幼保健院 | 一种3d医学教学系统 |
| CN111243413B (zh) * | 2020-03-06 | 2021-07-02 | 吉林大学 | 一种颜面部解剖教学的建模方法及教学系统 |
| CN113450448B (zh) * | 2020-03-25 | 2025-09-12 | 阿里巴巴集团控股有限公司 | 图像的处理方法、装置和系统 |
| CN111613122A (zh) * | 2020-05-19 | 2020-09-01 | 威爱医疗科技(中山)有限公司 | 虚实融合的血管介入手术模拟系统 |
| CN112120908A (zh) * | 2020-08-12 | 2020-12-25 | 厦门立方幻境科技有限公司 | 一种多模式交互性关节松动训练设备与训练方法 |
| CN112535533B (zh) * | 2020-12-06 | 2022-08-05 | 西安交通大学 | 一种利用3d打印病灶模型帮助远程手术的配套装置 |
| CN112951014A (zh) * | 2021-01-29 | 2021-06-11 | 中南大学湘雅三医院 | 集教学与实训一体的智能医学教育系统、方法、终端、介质 |
| CN112820376A (zh) * | 2021-01-30 | 2021-05-18 | 天津体育学院 | 一种基于虚拟现实技术划船运动的偏瘫康复训练系统 |
| CN113269995B (zh) * | 2021-05-28 | 2023-05-02 | 黑龙江拓盟科技有限公司 | 一种基于mr的b超引导下穿刺法腹膜透析置管术模拟训练系统 |
| CN113257387B (zh) * | 2021-06-07 | 2023-01-31 | 上海圻峰智能科技有限公司 | 一种用于康复训练的可穿戴设备、康复训练方法和系统 |
| CN113823172A (zh) * | 2021-09-18 | 2021-12-21 | 安徽声谷智能科技有限公司 | 一种机器视觉系统应用实验开发平台 |
| CN116246505A (zh) * | 2022-12-28 | 2023-06-09 | 杭州悦马爱赏科技股份有限公司 | 一种基于虚拟现实的医疗手术训练系统及方法 |
| CN117012065A (zh) * | 2023-08-01 | 2023-11-07 | 中南大学 | 一种集训练和考核一体的仿真婴儿的应用及系统 |
| CN117253409A (zh) * | 2023-11-16 | 2023-12-19 | 成都泰盟软件有限公司 | 一种海姆立克急救教学系统 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120251991A1 (en) * | 2004-11-30 | 2012-10-04 | Eric Savitsky | Peripheral Probe with Six Degrees of Freedom Plus Compressive Force Feedback |
| CN101923799A (zh) * | 2010-09-26 | 2010-12-22 | 天津信仁科技发展有限公司 | 一种头颈部中医诊疗及穴位按摩教学训练系统 |
| US8992230B2 (en) * | 2012-01-23 | 2015-03-31 | Virtamed Ag | Medical training systems and methods |
| CN103106348A (zh) * | 2013-03-08 | 2013-05-15 | 上海交通大学医学院附属第九人民医院 | 虚拟外科手术模拟方法及其装置 |
| CN204029245U (zh) * | 2014-08-01 | 2014-12-17 | 卓思生命科技有限公司 | 一种手术模拟系统 |
| CN105395252A (zh) * | 2015-12-10 | 2016-03-16 | 哈尔滨工业大学 | 具有人机交互的可穿戴式血管介入手术三维立体图像导航装置 |
| CN106157776A (zh) * | 2016-08-12 | 2016-11-23 | 北京大学人民医院 | 交互式虚拟分段诊刮术教学系统和教学方法 |
-
2016
- 2016-12-31 CN CN201611266712.3A patent/CN107067856B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN107067856A (zh) | 2017-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107067856B (zh) | 一种医学模拟训练系统和方法 | |
| Coles et al. | Integrating haptics with augmented reality in a femoral palpation and needle insertion training simulation | |
| US20250017656A1 (en) | Sensory enhanced environments for injection aid and social training | |
| CN105788390A (zh) | 基于增强现实的医学解剖辅助教学系统 | |
| CN110335516B (zh) | 一种采用vr心脏手术模拟系统进行vr心脏手术模拟的方法 | |
| CN106327983A (zh) | 一种针灸定穴辅助教学系统 | |
| CN106909771A (zh) | 用于输出增强现实信息的方法和系统 | |
| Li et al. | Design and evaluation of personalized percutaneous coronary intervention surgery simulation system | |
| CN104778894A (zh) | 一种虚拟仿真正骨手法培训系统及其建立方法 | |
| CN106293082A (zh) | 一种基于虚拟现实的人体解剖交互系统 | |
| CN108154778B (zh) | 基于运动捕捉和混合现实的眼科手术培训系统及方法 | |
| Smith et al. | Mixed reality interaction and presentation techniques for medical visualisations | |
| CN114038259A (zh) | 一种5g虚拟现实医学超声实训系统及其方法 | |
| CN111317665A (zh) | 一种针灸引导方法及装置 | |
| CN115328317A (zh) | 一种基于虚拟现实的质控反馈系统及方法 | |
| Ribeiro et al. | Techniques and devices used in palpation simulation with haptic feedback | |
| Greenleaf | Developing the tools for practical VR applications [medicine] | |
| Camporesi et al. | The effects of avatars, stereo vision and display size on reaching and motion reproduction | |
| Soto et al. | Ar stereoscopic 3d human eye examination app | |
| Sun et al. | Design and development of a mixed reality acupuncture training system | |
| CN116453715A (zh) | 一种远程触诊方法和系统 | |
| CN120072196A (zh) | 一种基于虚拟现实的烧伤患者康复训练方法及系统 | |
| CN111276022A (zh) | 一种基于vr技术的胃镜模拟操作系统 | |
| KR102444058B1 (ko) | 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템 | |
| Wagner et al. | Intraocular surgery on a virtual eye |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20201015 Address after: 261031 north of Yuqing street, east of Dongming Road, high tech Zone, Weifang City, Shandong Province (Room 502, Geer electronic office building) Patentee after: GoerTek Optical Technology Co.,Ltd. Address before: 266104 Laoshan Qingdao District North House Street investment service center room, Room 308, Shandong Patentee before: GOERTEK TECHNOLOGY Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20221215 Address after: 266104 No. 500, Songling Road, Laoshan District, Qingdao, Shandong Patentee after: GOERTEK TECHNOLOGY Co.,Ltd. Address before: 261031 north of Yuqing street, east of Dongming Road, high tech Zone, Weifang City, Shandong Province (Room 502, Geer electronics office building) Patentee before: GoerTek Optical Technology Co.,Ltd. |