在毫秒内捕获手和手指运动对于许多应用来说，从虚拟现实到人机互动和行业4.0，越来越重要。到目前为止，其巨大的技术要求具有有限的应用。Max Planck信息学研究所的计算机科学家现在已经开发出一种涉及各种神经网络的交互的软件系统，该系统只需要一台笔记本电脑的内置摄像头。
研究人员将首次在27号展厅的G75展位上展示该项目计算机公平的CEBIT，将于6月11日在汉诺威开始前进。
当计算机科学家FranziskaMüller抱着她手在笔记本电脑前相机，对应的手就会出现在屏幕上。这是由一个彩色虚拟手骨架覆盖。无论Müller的手在摄像头前做什么动作，模特的彩色骨骼也会做同样的动作。穆勒演示了软件她与斯坦福大学萨尔布吕肯和西班牙国王Juan Carlos大学的Max Planck计算机科学研究所和其他研究人员一起开发了基督教科学专家和其他研究人员。到目前为止，没有其他软件可以用这种低成本的相机进行这件事。
由于它在几乎各种拍摄场景中工作，因此可以在任何地方使用，因此胜过先前需要深度摄像机或多个摄像机的方法。该算法系统使用实时将视频图像的二维信息转换为手骨骼的三维运动模型。它基于所谓的“卷积神经网络，简称CNN。研究人员训练它来检测手的骨骼。他们用另一个神经网络生成了必要的训练数据。结果是:软件能在几毫秒内计算出手部骨骼的精确三维姿态。即使其中一些被挡住了，比如被用户手中的苹果挡住了，软件也会进行补偿。然而，该系统在处理多手协同工作时仍然存在问题，解决这一问题是研究人员的下一个目标。
提交：工业自动化那虚拟现实
