在虚拟现实中，使用者处在电脑模拟产生一个三维虚拟世界。该虚拟世界提供了视觉、听觉、触觉等感官的模拟，让使用者如同身历其境一般。在工业自动化领域，如果多点触摸屏也提供了一个加工生产过程的三维模型，并且允许用户在这个虚拟场景中进行操作，比如同时操作多个机械手臂进行完成零部件的组装或者拆卸，还可以通过旋转等动作来完成一些复杂的多dimension的操作。在触摸屏上不存在诸如按钮、滚动条等控件，模型本身就可以通过触摸来控制，就好像操作实物一样。

（以下图片摘自网络，仅供描述示例使用）





请大家针对这个构思展开讨论。可以参照以下问题进行回答，同时也欢迎发表其他与该主题相关的建议或看法。
（1）对您而言，这样的构思具有吸引力吗？
（2）人机交互界面该如何设计？
（3）实现这个构想会遇到什么样的问题？
（4）该如何解决这些困难？
（5）您的其他建议或者看法......

（1）对您而言，这样的构思具有吸引力吗？
肯定具有吸引力，其实我们现在都是一种想象当时的情景，如果自己能够体验一下多点触控，比如控制多个机器臂执行一个非常复杂的任务，做成功后会有很大的成就感。
（2）人机交互界面该如何设计？
应该是使用简单、安全、且安装方便，界面上的控件颜色应该分明，避免视觉疲劳
（3）实现这个构想会遇到什么样的问题？
假设：需要在一个核辐射比较大的工作区作业，可以使用机器人机型作业，使用多点触控，控制机器人操作，同时调节核辐射区一些其他参数，如控制环境温度，冷却水流量等，通过视觉产品采集视频信号，传输到屏幕，供操作者监控现场的情况。
优点：同时进行多项工作、效率高、安全性高。
（4）该如何解决这些困难？
使用多点触控本身多触屏要求很高，如果把触屏的做小，按照现在的处理器速度，处理这么多任务同时进行，可能达不到反应速度快得功能。

个人感觉还是从系统的稳定性上来考虑吧，过于繁琐的操作容易在作业过程中产生误操作。我认为在引入多点触控的前提下可以增加针对于操作员的个性化菜单，让操作员可以根据自己的喜好来定义常用按键的位置。这样可以减少在多级菜单中频繁切换的操作。
另一个方面可以制作虚拟场景对机床或者系统进行实时监控，比如说根据实际情况模拟加工使操作员在HMI上就可以比较直观的看到活件加工情况。并可以通过三维变换多角度来进行观测。当机床出现NC报警或者PLC报警时能够通过预先的设定对故障位置进行提醒也是很不错的选择。

无论多么好的技术都有满足实际应用的需要。
这个技术很有吸引力，但在使用时要分场合。对于大型的生产线来说，整体上并不适合该技术的使用，因为这样的话，抽象化不够，不能满足操作员直观的了解整体的运行状况。但是在局部这样的设计会很有吸引力，因为具体而形象的操作，非常容易让监控员了解系统的构成，能加快监控员从不熟悉到熟悉的过程。