机械网--视线跟踪技术在人机交互中的研究

摘要：人们在视察外部世界时眼睛总是与其它人体活动自然调和地工作,并且眼动所需的认知负荷很低,人眼的注视包括着当前的任务状态和人的内部状态等信息,因此眼注视是1种非常好的能使人机对话变得简便、自然的候选输入通道.本文介绍了视野跟踪的基本原理、方法,对视野跟踪作为人机交互通道所具有的特点进行了讨论,并指出了其在人机交互领域中的利用及前景.关键词：人机交互;视野跟踪;多通道用户界面目前用户界面所使用的任何人机交互技术几近都有视觉参与。早期的视野跟踪技术首先利用于心理学研究(如阅读研究)，后被用于人机交互。眼动在人的视觉信息加工进程中，起侧重要的作用。它有3种主要情势：跳动(Saccades), 注视(Fixations)和平滑尾随跟踪( Smooth Pursuit)。在正常的视觉视察进程中，眼动表现为在被视察目标上1系列的停留及在这停留点之间的飞速跳动，这些停留1般最少延续100ms以上，称为注视。绝大多数信息只有在注视时才能获得并进行加工。注视点间的飞速跳跃称为眼跳动。眼跳动是1种联合眼动（即双眼同时移动），其大小为1到40 度视角，延续时间为30到120ms，最高运动速度为400⑹00度/秒。视野跟踪精度与在丈量时对用户的限制和干扰就是1对矛盾.在多通道用户界面设计中，减少这类限制和干扰是非常重要的,视野作为交互装置最直接的用处就是代替鼠标器作为1种指点装置。1、视野跟踪的基本原理、方法视野跟踪技术及装置有逼迫式（intrusiveness）与非逼迫式(non-intrusiveness)、穿着式与非穿着式、接触式（如Eyeglass-mounted）与非接触式(Remote)之分；其精度从0.1°至1°或2°不等，制造本钱也有巨大差异。在价格、精度与方便性等因素之间作出权衡是1件困难的事情，例如视野跟踪精度与对用户的限制和干扰就是1对尖锐的矛盾。有关视觉输入的人机界面研究主要触及两个方面:1是视野跟踪原理和技术的研究;2是在使用这类交互方式后,人机界面的设计技术和原理的研究.眼睛能平滑地追踪运动速度为1到30度/秒的目标，这类缓慢、联合追踪眼动通常称为平滑尾随跟踪。平滑尾随跟踪必须有1个缓慢移动的目标，在没有目标的情况下，1般不能实行这类眼动。在人机交互中，主要表现为跳动和注视两种情势。而主要的视野跟踪技术方法如图所示：6种主要的视野跟踪技术视觉追踪法

利用处合

技术特点

丈量参照系

眼电图（EOG）

眼动力学

高宽带精度低对人干扰大头

虹膜-巩膜边沿

眼动力学注视点

高带宽垂直精度低对人干扰大头具误差大头具

角膜反射

眼动力学注视点

高带宽头具误差大头具

瞳孔-角膜反射向量

注视点

准确头具误差小对人无干扰低宽带头具或室内

双浦肯野象

眼动力学网模图象稳定注视点高精度高带宽对人干扰大室内

接触镜

眼动力学微小的眼动精度最高高带宽对人干扰大不舒适头

视野追踪的基本工作原理是利用图象处理技术，使用能锁定眼睛的特殊摄象机。通过摄取从人的眼角膜和瞳孔反射的红外线连续地记录视野变化，从而到达记录分析视野追踪进程的目的。在人机交互中对视野追踪的基本要求是：（1）要保证1定的精度，满足使用要求；（2） 对用户基本无干扰；（3）定位校正简单；（4） 可作为计算机的标准外设。2、视野跟踪技术在人机交互通道中的特点人机交互通道中大部分具有1定形状的物体或现象，可以通过量种途径使用户产生真实感很强的视觉感知。CRT显示器、大屏幕投影、多方位电子墙、立体眼镜、头盔显示器（HMD）等是VR系统中常见的显示设备。不同的头盔显示用具有不同的显示技术，根据光学图像被提供的方式，头盔显示设备可分为投影式和直视式。 能增强视野跟踪真实感的立体显示技术，可以使用户的左、右眼看到有视差的两幅平面图像，并在大脑中将它们合成并产生立体视觉感知。头盔显示器、立体眼镜是两种常见的立体显示设备。目前，基于激光全息计算的立体显示技术、用激光束直接在视网膜上成像的显示技术正在研究当中。 从视野跟踪装置得到的原始数据必须经过进1步的处理才能用于人机交互。数据处理的目的是从中滤除噪声（filter noise），辨认定位（recognize fixations）及局部校准与补偿（compensate for calibration errors）等，最重要的是提取出用于人机交互所必须的眼睛定位坐标。但是由于眼动存在固有的抖动（jitter motion）和眼睛眨动所酿成的数据中断，即使在定位这段数据段内，仍然存在许多干扰信号，这导致提取故意（intentional）眼动数据的困难，解决此问题的办法之1是利用眼动的某种先验模型加以弥补。将视野利用于人机交互必须克服的另外1个固有的困难是避免所谓的“米达斯接触（Midas Touch）”问题。如果鼠标器光标总是随着用户的视野移动，可能会引发他的厌烦，由于用户可能希望能随便看着什么而没必要非“意味着”什么.在理想情况下，应当在用户希望发出控制时，界面及时地处理其视野输入，而在相反的情况下则忽视其视野的移动。但是，这两种情况1般不可能辨别。目前，美国Texas A&M大学使用装有红外发光2极管和光电管的眼镜，根据进入光电管的光的强弱来决定眼睛的位置。ASL（Applied Science Lab）也已有较成熟的视野追踪系统。3、视野跟踪技术在人机交互领域中的利用及前景随着计算机科学技术与产业的飞速发展，计算机日益进入普通用户的工作和生活中。面对急剧增长的普通用户，人机交互的自然性愈来愈为系统设计所重视，计算机系统的设计必须力图使用户不需要专门的计算机技能，而只是利用自己的自然技能就能够够使用计算机,虚拟现实正致力于这方面的研究。另外1方面，多媒体技术和网络技术的迅猛发展使计算机到用户的通讯带宽不断提高，而目前的人机交互由于受传统专业化的窄带宽输入界面的限制使得用户到计算机的通讯带宽仍停滞不前，严重阻碍了人向计算机的信息交换。另外，传统人机交互的串行性和精确性在许多场合没必要要地增加了用户的作业负荷，降落了交互效率，破坏了自然性。为了赋予人机交互灵活性、结实性、高带宽性和类似于人与人交互中的自然性，人机交互必须打破常规,走多通道的道路。现在多通道界面的研究采取视野跟踪、语音辨认、唇读和手势输入等新的交互技术，允许用户通过量个通道自然的并行和协作来进行人机交互，并可通过整合互补通道的模糊输入来捕捉用户交互意向。多通道界面的特点和目标给设计带来了1些特殊问题，主要存在于3方面：1. 多通道整合。相互独立地利用多个通道其实不是真正意义上的多通道界面，其实不能有效地提高人机交互的效率。多通道交互需要从多个并行、协作和互补的通道的非精确输入获得用户想转达的任务信息，这就是整合问题——实现多通道的重要条件。2. 软件结构。多通道协同操作使得软件结构必须具有支持强语义处理的能力，传统UIMS所采取的Seeheim模型[4]在这方面有较大的局限性。3. 用户任务分析模型和界面描述方法。这样的模型和方法必须适合多通道界面的特点。从用户角度的而言，要能够表达用户利用多通道协作来完成交互任务时的特点，应能很好地分析和描述交互进程中人的活动，体现以人为中心的设计主旨；从系统角度而言，要能够处理多种交互手段的并行协作使用与系统处理的关系。视野跟踪技术还处于起步阶段.视野跟踪技术主要是解决眼睛运动特性的检测问题,目前主要的检测方法有接触镜法,电磁线圈法,红外光电反射法,红外电视法[5]等.其中红外电视法具有操作方便,对人无干扰,可移动,非接触等优点.基于红外电视法的眼睛盯视人机交互技术是通过眼睛盯视激活对话框,从而实现对外部设备的控制.论述了眼睛盯视技术的原理和视野方向的判定方法,提出了对使用进程中头部微小变化时视野方向的修正方法,降落了对使用者的使用要求."眼睛盯视技术的利用领域对正常人来说拆迁补偿找哪个部门,通过对鼠标和键盘操作,就能够实现与计算机间的交互,但是对某些瘫痪病人或4肢麻痹,又不能说话的人来说,如此简单的任务却没法完成.有关资料统计显示,全国最少有50万的人口存在不同程度的肢体瘫痪,生活不能自理.那么如果他们能用眼睛来代替手操作,以后再加上机电控制技术情况就不1样了,就完全可以增加他们的独立能力,提高生活质量.另外,通过眼睛盯视对外部设备进行控制可以实现多任务操作城市拆迁补偿多少钱,比如在军事上,飞行员如果发现了目标,在手动操作应付不过来的时候,可以通过眼睛瞄准的同时,用眼睛来控制火控系统的发射,这样可以使飞行员既为驾驶员又为武器操纵员.同时,在飞行加速度环境下,飞行员的头部和手部活动遭到极大的限制,但眼睛却还可以自由转动!这对增加战役力非常故意义.随着研究工作的深入,这项技术必将服务于医学,军事及教育等各个方面。总之，我们也应看到,虽然视野跟踪技术的利用存在着诱人的前景,但由于各方面技术的不成熟性,目前,还未到达实用化阶段.成功的、有效益的演示性项目还很少.在多通道用户界面基础上,要进行进1步的原型探索分析,必须对人机交互设备的性能加以改进,同时注意有关标准的建立,以便把视野跟踪技术更好地与现有技术结合起来。(end)资讯分类行业动态帮助文档展会专题报道5金人物商家文章