• <xmp id="om0om">
  • <table id="om0om"><noscript id="om0om"></noscript></table>
  • 3 月 19 日下午 2 點,鎖定 NVIDIA AI 網絡中文專場。立即注冊觀看
    計算機視覺/視頻分析

    預測圖像如何影響視覺反應速度

    想象一下,當你沿著一條路行駛時,一個障礙突然出現在你的路上。你能多快做出反應?你的反應速度如何隨時間、障礙物的顏色以及它在你視野中的位置而變化?

    對視覺事件做出快速反應的能力對日常生活很有價值。它也是快節奏視頻游戲中的一項基本技能。 NVIDIA 、紐約大學和普林斯頓大學的研究人員最近進行了合作 – SIGGRAPH 2022 年技術論文獎得主 – 探索圖像特征與觀察者反應所需時間之間的關系。

    Graphic illustrating how low-contrast features slow down reaction speed and high-contrast ones speed it up.
    圖 1.人類視覺反應速度隨目標的視覺特征而變化。該示例顯示了低對比度特征(中上)如何減慢反應速度,而高對比度特征則如何加快反應速度。

    反應速度和視覺事件

    隨著顯示技術的不斷進步,人類的反應時間已經成為圖形管道中的主要瓶頸。與遠程服務器通信、渲染和顯示圖像以及收集和處理鼠標或鍵盤輸入的響應時間通常為幾十毫秒或更短。

    相比之下,人類感知的管道要慢得多,根據視覺輸入的復雜程度,可以在 100 到 500 毫秒之間。這項研究旨在簡化和優化圖像,盡可能減少我們的反應時間。

    視覺對比度和空間頻率是影響低水平視覺的眾所周知的特征。此外,人類的視覺在整個視野中并不均勻。提高反應時間所需的對比度取決于偏心率、視角(物體相對于中心視線的位置)和空間頻率(例如,物體是純色還是復雜圖案)。反應時間是許多神經過程的組合,所提出的模型包括所有這些因素。

    反應時間測量基于稱為掃視的自愿快速眼動的起始潛伏期。目標一出現在屏幕上,“反應時間時鐘”就開始滴答作響。一旦識別出目標,就開始向其掃視。

    Graphic showing yhree visual characteristics that influence saccadic reaction time: contrast (left), frequency (center), and eccentricity (right)
    圖 2.影響掃視反應時間的三個視覺特征:對比度(左)、頻率(中)和偏心率(右)

    掃視反應模型

    為了建立一個感知準確的反應時間預測模型,研究人員對人類觀察者進行了一系列實驗,收集了 11000 多個不同圖像特征的反應時間。

    受人腦感知信息和決策方式的啟發,研究人員設計了一個反應時間預測模型,考慮了對比度、頻率和偏心率,以及人類反應速度的內在隨機性。

    在這個模型中,隨著時間的推移,“決策置信度”的量度會累積,一旦累積了足夠的置信度,就會進行一次掃視。置信度隨時間累積的速率不一致,如下面的視頻所示。

    視頻 1.人眼需要時間累積入射光子,直到達到足以做出決定的水平,然后進行掃視。這使得掃視反應時間由于視覺處理中的噪聲而固有地隨機。

    因此,該模型提供了顯示各種反應時間的可能性,而不是完全確定地預測單個反應時間。置信度累積的平均速率受圖像特征的影響,并導致反應時間的可能性發生變化,如下面的視頻所示。

    ?
    視頻 2.對于已知對比度、頻率和偏心率的視覺對象,該模型預測可能反應時間的隨機分布

    兩個驗證實驗證實,該模型可以應用于可能看到的圖像,包括視頻游戲和自然照片。

    The proposed model accurately predicts human reaction times for varying visual conditions such as a soccer game (left), a shooter game (center), and a natural photograph (right). Shooter game assets courtesy of Counter-Strike: Global Offensive, Valve Corporation.
    圖 3.提出的模型準確預測了不同視覺條件下的人類反應時間,如足球比賽(左)、射擊比賽(中)和自然照片(右)。《反擊:全球進攻》提供的射擊游戲資產, Valve Corporation 。

    使用反應時間預測優化人的績效

    這種掃視反應時間模型的應用包括,例如,智能駕駛輔助系統,用于估計駕駛員是否能夠對行人和其他車輛做出安全反應,并啟用適當的輔助功能。類似地,電子競技游戲設計師可以使用該模型來理解游戲視覺設計的公平性,避免競爭結果中的偏見。

    野心勃勃的玩家也可以使用這種模型來微調他們的設置以獲得最佳性能——例如,為目標 3D 對象選擇最佳皮膚。

    在未來的工作中,研究團隊計劃探索顏色和時間效應等其他圖像特征如何影響人類的反應時間,以及如何訓練人類提高他們對屏幕或現實世界事件的反應速度。

    欲了解更多詳情,請閱讀報紙, 圖像特征影響反應時間:一種學習的掃視潛伏期概率感知模型 。您也可以訪問 注視時機 GitHub 上的項目。

    論文作者 Budmonde Duinkharjav 、 Praneeth Chakravarthula 、 Rachel Brown 、 Anjul Patney 和 Qi Sun 將在 SIGGRAPH 2022 年 8 月 11 日在不列顛哥倫比亞省溫哥華。

    ?

    0

    標簽

    人人超碰97caoporen国产