眼动追踪:梯度法精确定位眼中心(论文)

原创 云深之无迹 2022-12-10 23:25

任何眼动跟踪器所必需的事情之一是准确跟踪眼睛中心。这简单的可以理解为先找到了你最感兴趣的区域。方法是用图像梯度和点积来创建理论上在图像最突出的圆的中心处最大的函数。

参考论文如下:

德国的一篇文章

这个是我使用有道翻译转的文章

在这个追踪眼球中心的事情上面有三种方法:

  1. 基于特征的方法

  2. 基于模型的方法

  3. 混合的方法


文章给出一种基于特征的方法,可以有效的准确定位和跟踪低分辨率图像和视频的中的眼中心。

我们的工作:给出了一种眼中心定位的方法,将圆形或者半圆形的总线定义为大多数图像梯度相交的位置。而且结合眼睛外观这个先验性的知识,增加了模型的鲁棒性。利用了一些后处理的手段,以减少眼镜存在时,或者眼镜反光或者眉毛突出时的问题。

这个算法是一个多阶段的过程,先通过人脸检测器,根据面部粗略的提取眼睛的位置,然后估计眼睛的中心。

一个人工的例子,黑圈类似于虹膜与角膜

嘿嘿,就像这样

左边的位移向量di和梯度向量gi没有相同的方向,右边有。

在几何上面,圆形物体的中心可以通过分析图像梯度的矢量场来检测,这在以前已经用于眼睛中心定位。

Kothari 和 Mitchell 提出了一种方法,该方法利用了由于虹膜和巩膜之间的强烈对比而产生的流场特性(Kothari和 Mitchell,1996)。他们利用每个梯度向量的方向在整个图像中画出一条线,并且每当这样的线经过它时,他们就增加一个累加箱。因此大多数线相交的累加箱代表估计的眼睛中心。然而它们的方法仅在离散图像空间中定义,并且缺少数学公式。此外,他们没有考虑由于眉毛、眼睑或眼镜而出现的问题。

中心使用十字标记,后面分别是目标函数二维和三维处的最大值

(小声BB,原文有公式解释,这里就不重复写了)

这个函数描述向量场特征的,描述了所有图像梯度的可能中心和方向之间的关系。

c是可能的中心,g是每一个梯度向量

d是位移向量,一看就是归一化的方程,以便让所有位移向量 d;缩放到单位长度,以便为所有像素位置获得相等的权重。

为了提高对光照和对比度线性变化的鲁棒性,梯度向量也应该缩放到单位长度。

通过只考虑具有显著幅度的梯度向量,即忽略齐次区域中的梯度,可以降低计算复杂度。为了获得图像梯度,我们计算偏导数gi:

真丑

但其他计算图像梯度的方法不会显著改变目标函数的行为。

在某些条件下,最大值没有很好地定义,或者存在局部极大值导致错误的中心估计。

例如,主眼脸和睫毛或皱纹加上虹膜和巩膜之间的低对比度,会导致错误的估计。

因此,我们建议合并关于眼睛的先验知识,以增加鲁棒性。由于瞳孔通常比巩膜和皮肤暗,我们应用权重 w。对于每一个可能的中心 c,使得暗中心比亮中心更有可能。将这一点整合到目标函数中会得到:

Wc是:

就是一处的灰度值

demo使用C++编写,我还有写Python版本,慢慢分享

这个算法满足:

处理低分辨率图像。
能够实时运行。
用高中水平的数学知识来实现它
足够准确才能用于注视跟踪
今天去Pupils看见了新的眼动仪:

新版的鼻托部位

世界相机

后面还是连着计算使用的线

前景


设计的几种眼镜样子,救命啊,太好看了



推荐四本书,具体就不说为什么好了,鄙人不推荐差东西

人生中第一部韩剧看完了,感觉很好看,看到了自己想要的结局,而且也感觉国内的电视剧确实和韩剧有些区别,有些距离。

韩国感觉是个比日本还病态的国家,想说的太多了,那还是不说了。

https://image.baidu.com/search/detail?ct=503316480&z=0&ipn=d&word=%E7%9C%BC%E7%90%83&step_word=&hs=0&pn=40&spn=0&di=7169026086108397569&pi=0&rn=1&tn=baiduimagedetail&is=0%2C0&istype=2&ie=utf-8&oe=utf-8&in=&cl=2&lm=-1&st=-1&cs=4153031797%2C3223184613&os=269404380%2C889648451&simid=4236043793%2C647200052&adpicid=0&lpn=0&ln=1429&fr=&fmq=1670673720770_R&fm=result&ic=&s=undefined&hd=&latest=©right=&se=&sme=&tab=0&width=&height=&face=undefined&ist=&jit=&cg=&bdtype=0&oriquery=&objurl=https%3A%2F%2Fgimg2.baidu.com%2Fimage_search%2Fsrc%3Dhttp%3A%2F%2Fbpic.51yuansu.com%2Fpic3%2Fcover%2F03%2F76%2F19%2F5bfbd5e448fe3_610.jpg%26refer%3Dhttp%3A%2F%2Fbpic.51yuansu.com%26app%3D2002%26size%3Df9999%2C10000%26q%3Da80%26n%3D0%26g%3D0n%26fmt%3Dauto%3Fsec%3D1673265750%26t%3Db339fdd289874d4c0540ccc684958dec&fromurl=ippr_z2C%24qAzdH3FAzdH3Fooo_z%26e3Bc8y7wgf7_z%26e3Bv54AzdH3FfvAzdH3Fv6fxzw4zxg_z%26e3Bip4s&gsm=1e&rpstart=0&rpnum=0&islist=&querylist=&nojc=undefined&dyTabStr=MCwzLDYsNCw1LDEsOCw3LDIsOQ%3D%3D

评论 (0)
  • 一、行业背景与市场需求高血压作为全球发病率最高的慢性病之一,其早期监测与管理已成为公共卫生领域的重要课题。世界卫生组织数据显示,全球超13亿人受高血压困扰,且患者群体呈现年轻化趋势。传统血压计因功能单一、数据孤立等缺陷,难以满足现代健康管理的需求。在此背景下,集语音播报、蓝牙传输、电量检测于一体的智能血压计应运而生,通过技术创新实现“测量-分析-管理”全流程智能化,成为慢性病管理的核心终端设备。二、技术架构与核心功能智能血压计以电子血压测量技术为基础,融合物联网、AI算法及语音交互技术,构建起多
    广州唯创电子 2025-04-23 09:06 134浏览
  • 故障现象一辆2016款奔驰C200L车,搭载274 920发动机,累计行驶里程约为13万km。该车组合仪表上的防侧滑故障灯、转向助力故障灯、安全气囊故障灯等偶尔异常点亮,且此时将挡位置于R挡,中控显示屏提示“后视摄像头不可用”,无法显示倒车影像。 故障诊断用故障检测仪检测,发现多个控制单元中均存储有通信类故障代码(图1),其中故障代码“U015587 与仪表盘的通信存在故障。信息缺失”出现的频次较高。 图1 存储的故障代码1而组合仪表中存储有故障代码“U006488 与用户界
    虹科Pico汽车示波器 2025-04-23 11:22 77浏览
  •   后勤实验仿真系统平台深度解析   北京华盛恒辉后勤实验仿真系统平台依托计算机仿真技术,是对后勤保障全流程进行模拟、分析与优化的综合性工具。通过搭建虚拟场景,模拟资源调配、物资运输等环节,为后勤决策提供数据支撑,广泛应用于军事、应急管理等领域。   应用案例   目前,已有多个后勤实验仿真系统平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润后勤实验仿真系统平台。这些成功案例为后勤实验仿真系统平台的推广和应用提供了有力支持。   一、核心功能   (一)后勤资源模拟
    华盛恒辉l58ll334744 2025-04-23 15:39 110浏览
  •   无人机结构仿真与部件拆解分析系统平台解析   北京华盛恒辉无人机结构仿真与部件拆解分析系统无人机技术快速发展的当下,结构仿真与部件拆解分析系统平台成为无人机研发测试的核心工具,在优化设计、提升性能、降低成本等方面发挥关键作用。以下从功能、架构、应用、优势及趋势展开解析。   应用案例   目前,已有多个无人机结构仿真与部件拆解分析系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润无人机结构仿真与部件拆解分析系统。这些成功案例为无人机结构仿真与部件拆解分析系统的推广和应用提
    华盛恒辉l58ll334744 2025-04-23 15:00 146浏览
  • 一、技术背景与市场机遇在智能家居高速发展的今天,用户对家电设备的安全性、智能化及能效表现提出更高要求。传统取暖器因缺乏智能感知功能,存在能源浪费、安全隐患等痛点。WTL580-C01微波雷达感应模块的诞生,为取暖设备智能化升级提供了创新解决方案。该模块凭借微波雷达技术优势,在精准测距、环境适应、能耗控制等方面实现突破,成为智能取暖器领域的核心技术组件。二、核心技术原理本模块采用多普勒效应微波雷达技术,通过24GHz高频微波信号的发射-接收机制,实现毫米级动作识别和精准测距。当人体进入4-5米有效
    广州唯创电子 2025-04-23 08:41 123浏览
  •   陆地边防事件紧急处置系统平台解析   北京华盛恒辉陆地边防事件紧急处置系统平台是整合监测、预警、指挥等功能的智能化综合系统,致力于增强边防安全管控能力,快速响应各类突发事件。以下从系统架构、核心功能、技术支撑、应用场景及发展趋势展开全面解读。   应用案例   目前,已有多个陆地边防事件紧急处置系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润陆地边防事件紧急处置系统。这些成功案例为陆地边防事件紧急处置系统的推广和应用提供了有力支持。   一、系统架构   感知层:部
    华盛恒辉l58ll334744 2025-04-23 11:22 110浏览
  •   复杂电磁环境模拟系统平台解析   一、系统概述   北京华盛恒辉复杂电磁环境模拟系统平台是用于还原真实战场或特定场景电磁环境的综合性技术平台。该平台借助软硬件协同运作,能够产生多源、多频段、多体制的电磁信号,并融合空间、时间、频谱等参数,构建高逼真度的电磁环境,为电子对抗、通信、雷达等系统的研发、测试、训练及评估工作提供重要支持。   应用案例   目前,已有多个复杂电磁环境模拟系统在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润复杂电磁环境模拟系统。这些成功案例为复杂电
    华盛恒辉l58ll334744 2025-04-23 10:29 148浏览
  • 前言本文主要演示基于TL3576-MiniEVM评估板HDMI OUT、DP 1.4和MIPI的多屏同显、异显方案,适用开发环境如下。Windows开发环境:Windows 7 64bit、Windows 10 64bitLinux开发环境:VMware16.2.5、Ubuntu22.04.5 64bitU-Boot:U-Boot-2017.09Kernel:Linux-6.1.115LinuxSDK:LinuxSDK-[版本号](基于rk3576_linux6.1_release_v
    Tronlong 2025-04-23 13:59 97浏览
  •   电磁频谱数据综合管理平台系统解析   一、系统定义与目标   北京华盛恒辉电磁频谱数据综合管理平台融合无线传感器、软件定义电台等前沿技术,是实现无线电频谱资源全流程管理的复杂系统。其核心目标包括:优化频谱资源配置,满足多元通信需求;运用动态管理与频谱共享技术,提升资源利用效率;强化频谱安全监管,杜绝非法占用与干扰;为电子战提供频谱监测分析支持,辅助作战决策。   应用案例   目前,已有多个电磁频谱数据综合管理平台在实际应用中取得了显著成效。例如,北京华盛恒辉和北京五木恒润电磁频谱数
    华盛恒辉l58ll334744 2025-04-23 16:27 141浏览
  • 在科技飞速发展的当下,机器人领域的每一次突破都能成为大众瞩目的焦点。这不,全球首届人形机器人半程马拉松比赛刚落下帷幕,赛场上的 “小插曲” 就掀起了一阵网络热潮。4月19日,北京亦庄的赛道上热闹非凡,全球首届人形机器人半程马拉松在这里激情开跑。20支机器人队伍带着各自的“参赛选手”,踏上了这21.0975公里的挑战之路。这场比赛可不简单,它将机器人放置于真实且复杂的动态路况与环境中,对机器人在运动控制、环境感知和能源管理等方面的核心技术能力进行了全方位的检验。不仅要应对长距离带来的续航挑战,还要
    用户1742991715177 2025-04-22 20:42 94浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦