Top > Search of Japanese Patents > PUPIL DETECTION DEVICE AND METHOD

PUPIL DETECTION DEVICE AND METHOD

Patent code P08A013497
File No. ShIP-6062
Posted date Jun 13, 2008
Application number P2006-225720
Publication number P2007-083027A
Patent number P4528980
Date of filing Aug 22, 2006
Date of publication of application Apr 5, 2007
Date of registration Jun 18, 2010
Priority data
  • P2005-241728 (Aug 23, 2005) JP
Inventor
  • (In Japanese)海老澤 嘉伸
Applicant
  • (In Japanese)国立大学法人静岡大学
Title PUPIL DETECTION DEVICE AND METHOD
Abstract PROBLEM TO BE SOLVED: To surely detect the pupil even under environment having a strong surrounding light around a subject and being unsuited for the detection of the pupil.
SOLUTION: This pupil detecting device includes a camera means C, a light source L, a light path formation means, and a computing means; is disposed to retain a relation that the light path formation means illuminates a light from the light source to the face of the subject from an opening part of the camera means and an image of the face including the pupil EB is focused at the camera means; calculates the focused-image data; and detects the pupil. The light source L includes a first illumination light source wherein the pupillary reflex of the subject becomes a bright pupil, and a second illumination light source wherein the pupillary reflex of the subject becomes a dark pupil. The camera means C includes a first image data acquisition means acquiring first image data by the first illumination light source and a second image data acquisition means acquiring second image data by the second illumination light source. The computing means detects the pupil by computing the first image data and the second image data.
Outline of related art and contending technology (In Japanese)


顔の特徴点を捉えて、被験者の意図を推定したり、どこを見ているか、どこから見ているかなどの情報の獲得のために、瞳孔の検出が有効な手段として着目され、それ自体またはその応用に関連して種々の研究や発明がなされている(特許文献1~4,非特許文献1)。瞳孔は、それ自体が小さいことと、基本的にどの方向から見ても円もしくは楕円に見えるだけでなく、黒目と違ってまぶたに隠れにくいため、検出対象として優れている。それを利用して、瞳孔の移動量をパソコン画面上のカーソル移動に対応させる提案があり、頭部の動きにより、カーソルを動かすこともできる。



また最近、瞳孔検出技術を利用して、乗用車,トラックの運転の視線を検出したり、眠気を検知したり、余所見運転を検出したいという要望もある。その際に、直射日光が顔面に当たるような劣悪な状況下においても瞳孔が安定に検出できることが望まれている。
【特許文献1】
特願2004-73998
【特許文献2】
特開2004-261598
【特許文献3】
特表2002-513176
【特許文献4】
特開平11-56782
【非特許文献1】
「多光源による瞳孔検出と追跡(Pupil detection andtracking using multiple light sources )」,著者 C.H.モリモト他(C.H. Morimoto, D. Koons,A. Amir, M. Flickner),イメージおよびビジョンのコンピューティング18(2000)331-335(Image and VisionComputing 18 (2000) 331-335)

Field of industrial application (In Japanese)


本発明は、視線検出等の分野に利用できる瞳孔検出装置及び瞳孔検出方法、さらに詳しく言えば、周囲光が強く瞳孔の検出に適さない環境下においても確実に瞳孔の検出を可能にする瞳孔検出装置及び瞳孔検出方法に関する。

Scope of claims (In Japanese)
【請求項1】
 
カメラ,光源,光路形成手段,および演算手段を含み、前記光路形成手段が、被験者の顔面に前記光源からの光を照射し、且つ、前記被験者の瞳孔を含む顔面の像を前記カメラに結像可能に構成され、前記カメラに結像されることにより得られた画像を演算して瞳孔を検出する瞳孔検出装置であって、
前記光源は、
前記光を前記カメラの開口部内から照射可能に設けられ、
被験者の瞳孔内反射が明瞳孔となる第1の波長成分を含む第1の照明光源と、
被験者の瞳孔内反射が暗瞳孔となる第2の波長成分を含み、瞳孔以外については前記第1の照明光源と同等の照明効果を呈する第2の照明光源を含み、
独立した第1の照明光源と第2の照明光源の光軸を、前記光路形成手段により共通の光軸を保つように合成し、さらに前記共通の光軸がカメラ手段の光軸に一致するように光路変更して構成され、
前記カメラは、
前記第1の照明光源による第1の画像データを得る第1の画像データ獲得手段と、
前記第2の照明光源による第2の画像データを得る第2の画像データ獲得手段とを含み、
前記演算手段は、前記第1の画像データと前記第2の画像データを演算処理して瞳孔を検出する手段である瞳孔検出装置。

【請求項2】
 
カメラ,光源,光路形成手段,および演算手段を含み、前記光路形成手段が、被験者の顔面に前記光源からの光を照射し、且つ、前記被験者の瞳孔を含む顔面の像を前記カメラに結像可能に構成され、前記カメラに結像されることにより得られた画像を演算して瞳孔を検出する瞳孔検出装置であって、
前記光源は、
前記光を前記カメラの開口部内から照射可能に設けられ、
被験者の瞳孔内反射が明瞳孔となる第1の波長成分を含む第1の照明光源と、
被験者の瞳孔内反射が暗瞳孔となる第2の波長成分を含み、瞳孔以外については前記第1の照明光源と同等の照明効果を呈する第2の照明光源を含み、
独立した第1の発光源と第2の発光源をそれぞれの光軸を近接平行に配置しレンズ手段により集光し、さらに前記光路形成手段により近接平行光軸がカメラ手段の光軸に一致するように光路変更して構成され、
前記カメラは、
前記第1の照明光源による第1の画像データを得る第1の画像データ獲得手段と、
前記第2の照明光源による第2の画像データを得る第2の画像データ獲得手段とを含み、
前記演算手段は、前記第1の画像データと前記第2の画像データを演算処理して瞳孔を検出する手段である瞳孔検出装置。

【請求項3】
 
前記演算手段は前記第1の画像データと前記第2の画像データの差分演算により瞳孔を検出するように構成されている請求項1又は2記載の瞳孔検出装置。

【請求項4】
 
前記カメラ手段は、前記第1の画像データ獲得手段と前記第2の画像データ獲得手段が単一のカメラの同一のイメージセンサの画素群を分割して構成されている請求項1又は2記載の瞳孔検出装置。

【請求項5】
 
前記カメラ手段は、前記第1の画像データ獲得手段と前記第2の画像データ獲得手段が別々のカメラにより構成されている請求項1又は2記載の瞳孔検出装置。

【請求項6】
 
被験者から一定距離離れ、相互に一定距離離れて配置され、それぞれが瞳孔を検出し、瞳孔の3次元位置を計測するための請求項1~5記載の一組の瞳孔検出装置。

【請求項7】
 
被験者の顔面に光源から光を照射することによって、前記被験者の瞳孔を含む顔面の像をカメラに結像させた後、前記カメラに結像させることにより得られた画像を、演算手段により演算して瞳孔を検出する瞳孔検出方法であって、
前記光源により、被験者の瞳孔内反射が明瞳孔となる第1の波長成分と、被験者の瞳孔内反射が暗瞳孔となり、瞳孔以外については前記第1の波長成分と同等の照明効果を呈する第2の波長成分とを、前記カメラの開口部内から照射し、独立した第1の波長成分の光と第2の波長成分の光の光軸を、共通の光軸を保つように合成し、さらに前記共通の光軸がカメラ手段の光軸に一致するように光路変更するステップと、
前記カメラにより、前記第1の波長成分による第1の画像データを得るステップと、
前記カメラにより、前記第2の波長成分による第2の画像データを得るステップと、
前記演算手段により、前記第1の画像データと前記第2の画像データを演算処理して瞳孔を検出するステップと、
を備える瞳孔検出方法。

【請求項8】
 
被験者の顔面に光源から光を照射することによって、前記被験者の瞳孔を含む顔面の像をカメラに結像させた後、前記カメラに結像させることにより得られた画像を、演算手段により演算して瞳孔を検出する瞳孔検出方法であって、
前記光源により、被験者の瞳孔内反射が明瞳孔となる第1の波長成分と、被験者の瞳孔内反射が暗瞳孔となり、瞳孔以外については前記第1の波長成分と同等の照明効果を呈する第2の波長成分とを、前記カメラの開口部内から照射し、独立した第1の波長成分の光と第2の波長成分の光をそれぞれの光軸を近接平行に配置して集光し、さらに近接平行光軸がカメラ手段の光軸に一致するように光路変更するステップと、
前記カメラにより、前記第1の波長成分による第1の画像データを得るステップと、
前記カメラにより、前記第2の波長成分による第2の画像データを得るステップと、
前記演算手段により、前記第1の画像データと前記第2の画像データを演算処理して瞳孔を検出するステップと、
を備える瞳孔検出方法。
IPC(International Patent Classification)
F-term
  • 4C316AA06
  • 4C316AB16
  • 4C316FB21
  • 4C316FZ03
Drawing

※Click image to enlarge.

JP2006225720thum.jpg
State of application right Registered
Please contact us by E-mail or facsimile if you have any interests on this patent.


PAGE TOP

close
close
close
close
close
close
close