視線検出システム
【課題】 使用者の頭部の動きが許容され、視線およびその方向の検出精度が高く、さらに検出速度が高速化された非接触型の視線検出システムを提供する。
【解決手段】 本発明の視線検出システムは、表示装置１と、使用者３の眼球部から離間して設けられた自動焦点機能付きの撮像装置２を備えている。そして、撮像装置２により撮像された画像データから、使用者３の瞳孔中心Ｅと顔上の特徴的な点の位置をそれぞれ求め、求められた位置データを視線方向に変換し、使用者注視点Ｐを算出するように構成されている。
【解決手段】 本発明の視線検出システムは、表示装置１と、使用者３の眼球部から離間して設けられた自動焦点機能付きの撮像装置２を備えている。そして、撮像装置２により撮像された画像データから、使用者３の瞳孔中心Ｅと顔上の特徴的な点の位置をそれぞれ求め、求められた位置データを視線方向に変換し、使用者注視点Ｐを算出するように構成されている。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、視線検出システムに係り、特にインターフェースの入力手段等として利用するために視線およびその方向を検出する、非接触型の視線検出システムに関する。
【０００２】
【従来の技術】近年、視線の動きを、メニュー選択やカーソル制御、画面のスクロールなど表示装置への指示操作に利用するために、視線を検出する技術の開発が図られている。
【０００３】従来から、視線を検出するシステムとしては、頭部装着式のアイカメラのように、検出部を眼球部に接触または近接させて検出する接触型の視線検出システムがある。この視線検出システムでは、眼球に近赤外光を照射し、反射光をビデオカメラ等で撮像して画像処理する方法が採られており、頭部の動きと関係なく眼球が必ず検出部内に位置しているため、視線の方向を算出する際に頭部の位置による補正を行なう必要がなく、視線を検出するための処理が容易であるという利点を有している。しかし、頭部の動きが制約されるばかりでなく、視野が狭いなどの問題があり、長時間の使用に適しなかった。
【０００４】一方、検出部を眼球部から離して視線を検出する非接触型の視線検出方法があり、例えば、顔上の数点と瞳孔の空間位置情報をステレオ画像計測等により計測する方法や、顔の向き検出にモザイク特徴を用いるアスペクト法等を用いて画像データを低減した方法などが最近開発されている。
【０００５】
【発明が解決しようとする課題】しかし、これらの視線検出方法のうちで前者の方法では、画像データを入力した後の処理が非常に複雑になり、位置情報計測後の処理に多くの時間を必要とするという問題があった。
【０００６】また、後者のアスペクト法では、顔の向き（頭部の方向）に関する画像データを蓄積した最適辞書の構築方法によって、視線検出の精度が決定され、辞書の良否が検出精度に直接大きな影響を及ぼしていた。
【０００７】本発明はこれらの点に鑑みてなされたもので、使用者の頭部の動きが許容され、視線およびその方向の検出精度が高く、さらに検出速度が高速化された非接触型の視線検出システムを提供することを目的とする。
【０００８】
【課題を解決するための手段】本発明の視線検出システムは、表示画面と、該表示画面を使用する使用者の眼球部から離間して設けられた撮像装置とを備え、前記撮像装置により撮像された画像データから、前記使用者の瞳孔および顔上の特徴的な固定点の位置をそれぞれ求める位置算出手段と、この手段により求められた位置データを視線方向に変換し、前記表示画面上の使用者注視点を算出する注視点等算出手段とを具備したことを特徴とする。
【０００９】本発明の位置算出手段においては、使用者の顔部等の画像データから、輝度の最大値あるいは最小値を含む少なくとも３点（これらは、通常鼻頭と両目の両端部にそれぞれ相当する。）を抽出し、これらの３点を頂点とする三角形の重心の位置を算出して、この点を顔上に固定された特徴点とすることが望ましい。なお、特徴点としては、前記した３点を頂点とする三角形の重心以外に、内心、外心、垂心等を用いることもできる。また、顔面に存在するほくろ等の位置を予め記憶装置に登録しておき、この登録データを基に算出した三角形の重心等を、特徴的点とすることもできる。
【００１０】本発明の視線検出システムにおいては、使用者の眼球部から離間して設けられた撮像装置により、使用者の顔部等の画像が撮像され、この画像データから、位置算出手段により、使用者の瞳孔の中心並びに顔上の特徴的な点の位置がそれぞれ算出される。そして、得られた位置データを用いて、注視点等算出手段により適当な変換および演算がなされ、使用者の視線の方向、および視線の表示画面との交点である注視点が求められる。
【００１１】このように本発明の視線検出システムによれば、頭部の動きに関係なく精度の高い視線検出がなされ、さらに検出の高速化が可能である。
【００１２】また、本発明において、画像データから位置算出手段により求められた位置データを時間軸に対して比較し、データの時間的変化が固視微動程度に小さく、視線方向に変化がない場合、あるいは使用者の視線が表示画面の外側に向いている間などは、注視点等算出手段の動作を停止して、視線方向および注視点の算出を行なわないように構成することにより、システム運転の低消費電力化を図ることができる。また、視線検出を表示装置等への入力手段として利用する場合に、固視微動による表示画面上のポインタ等のふらつきを解消し、安定した入力を行なうことができる。
【００１３】
【発明の実施の形態】以下、本発明の実施例を図面に基いて説明する。
【００１４】図１は、本発明の視線検出システムの一実施例を示す構成説明図である。
【００１５】実施例の視線検出システムは、図に示すように、液晶表示装置のような表示装置１と、自動焦点機能を有し被写体までの距離を測定することができる撮像装置２とを備えており、撮像装置２は、使用者３の眼球部から離間して、例えば表示装置１の画面１ａの下部に設けられている。そして、撮像装置２には、撮像された画像のデータから、使用者３の瞳孔の中心Ｅと顔上の特徴的な点の位置をそれぞれ求め、求められた位置データを視線の方向に変換し、この視線方向と表示画面１ａとの交点である使用者注視点Ｐを算出する変換・算出装置（図示を省略。）が接続されている。
【００１６】実施例の変換・算出装置による視線検出の手順（プログラム）を、図２にフローチャートで示す。以下に詳述する。
【００１７】（１）自動焦点機能付き撮像装置２により撮像された使用者３の頭部（顔部）についての画像データから、撮像装置２の任意の点Ｃから使用者３の瞳孔中心Ｅまでの位置ベクトルを算出する→ベクトルＣＥ（２）同じく撮像装置２により撮像された使用者３の顔部についての画像データから、使用者３の顔上の特徴的な固定点を算出する。これには、画像データから、顔の向きに関わらず、顔上で輝度の最大値および最小値を示す３点をそれぞれ抽出する。そして、これらの３点を頂点とする三角形の重心Ｇの位置を算出して、この重心Ｇを特徴的な固定点とする。
【００１８】（３）瞳孔中心Ｅから顔上の特徴点である重心Ｇまでの位置ベクトルを算出する。→ベクトルＥＧ（４）撮像装置２の任意の点Ｃから、視線方向と表示画面１ａとの交点である注視点Ｐまでの位置ベクトルを算出する。→ベクトルＣＰ（５）（１）〜（４）で得られたベクトルＣＥ、ベクトルＥＧ、ベクトルＣＰの和を算出し、このベクトル式が成り立つ注視点Ｐの位置に、例えばポインタを動作させる。
【００１９】上記手順における各点の位置および位置ベクトルを、図３（ａ）および図３（ｂ）にそれぞれ示す。ステップ（５）に示すベクトル和は、下式によって求められる。
【００２０】
ベクトルＣＰ＝ベクトルＣＧ＋ベクトルＧＰ ［１］
ベクトルＣＧ＝ベクトルＣＥ＋ベクトルＥＧ ［２］
［２］式を［１］式に代入して、 ベクトルＧＰ＝ベクトルＣＰ−（ベクトルＣＥ＋ベクトルＥＧ） ［３］
ここで、［１］式は、使用者３の頭部の動きを許容するための、使用者３と撮像装置２と注視点Ｐとの位置関係を示したベクトル式であり、図３（ａ）にベクトル表記したように、撮像装置２の任意の点Ｃから表示画面１ａ上の使用者が注視している点ＰまでのベクトルＣＰは、点Ｃから使用者２の顔部に固定された特徴点ＧまでのベクトルＣＧと、点Ｇから注視点ＰまでのベクトルＧＰの和で表わされる。
【００２１】また、［２］式は、顔部に固定された特徴点Ｇと瞳孔中心Ｅとの位置関係を示したベクトル式であり、図３（ｂ）にベクトル表記したように、撮像装置２の任意の点Ｃから点ＧまでのベクトルＣＧは、点Ｃから瞳孔中心ＥまでのベクトルＣＥと、瞳孔中心Ｅから点ＧまでのベクトルＥＧの和で表わされる。そして、こうして求められるベクトルＧＰにより、視線方向の算出が行なわれることになる。ここで、瞳孔中心Ｅは、撮像装置２により得られた画像データに対して、以下の処理を行なうことにより求めることができる。
【００２２】図４（ａ）は、撮像装置２により撮像された画像の眼球周辺部を拡大した画像を示す。
【００２３】瞳孔中心Ｅの抽出においては、まずこの拡大画像を、Ａ，Ｂ等の位置で目の両端部を結ぶ線に平行に例えば左から右に向かって走査して、各点の輝度を測定し、輝度と走査時間との関係を求める。
【００２４】一般に、眼球４内各部の輝度は、瞳孔４ａ＜虹彩４ｂ＜結膜部４ｃの順に大きくなっているので、図４（ａ）に示したＡ，Ｂの各位置で走査すると、図４（ｂ）に示すような輝度分布が得られる。このような輝度分布を表わす信号をコンパレータを通して変換し、瞳孔４ａと虹彩４ｂの境界にのみパルスを形成すると、図４R>４（ｃ）に示す出力が得られ、クロックパルスをカウントすることにより、瞳孔４ａの両端で虹彩４ｂとの境界が明らかになる。そして、眼球４上端から下端にかけてのＡ，Ｂ等の位置で、最低３回の走査を行ない、各走査において前記したカウント操作を行ない瞳孔４ａと虹彩４ｂとの境界を求めることにより、瞳孔中心Ｅを求めることができる。
【００２５】なお、コンパレータを使用しない場合には、図４（ｂ）に示す輝度分布において、瞳孔４ａと虹彩４ｂを示す輝度のゲインの範囲内にしきい値を設けることによって、瞳孔４ａと虹彩４ｂとの境界の判別を行なうことができる。
【００２６】このように実施例の視線検出システムにおいては、前記した手順にしたがって視線検出のプログラムを実行することによって、頭部の動きが許容されるうえに、従来の非接触型の視線検出システムに比べて高速処理が可能となり、かつ精度の高い視線検出を行なうことができる。
【００２７】次に、本発明の別の実施例について説明する。この実施例における視線検出の手順を示すフローチャートを、図５に示す。
【００２８】この実施例では、撮像装置により得られた画像データから求められた使用者の瞳孔中心Ｅに関する位置データを、時間軸に対して比較し、データに時間的変化がない場合に、検出プログラムの実行を停止するように構成され、単位時間内に変化した変化量のみが、表示画面上のポインタやカーソルの動き、あるいはスクロールの移動量として利用されるようになっている。
【００２９】このようなプログラムを有する視線検出システムにおいては、従来の視線検出システムと比較して、視線方向または頭部に動きが無い場合の演算処理が不要になり、より高速度な視線検出が可能になるうえに、消費電力を低減することができる。また、固視微動等の眼球の細かい動きにより視線検出にふらつきが生じることがなく、安定した入力を行なうことができる。
【００３０】
【発明の効果】以上の説明から明らかなように、本発明のシステムによれば、頭部の動きが許容され、検出精度が高く高速度の視線検出を行なうことができる。
【図面の簡単な説明】
【図１】本発明の視線検出システムの一実施例を示す構成説明図。
【図２】同実施例の変換・算出装置による視線検出のプログラムを示すフローチャート。
【図３】同実施例の視線検出プログラムにおける各点の位置および位置ベクトルを示す図。
【図４】同実施例における瞳孔中心の抽出方法を説明するための図。
【図５】本発明の別の実施例における視線検出のプログラムを示すフローチャート。
【符号の説明】
１………表示装置
１ａ………表示画面
２………撮像装置
３………使用者
４………眼球
４ａ………瞳孔
４ｂ………虹彩
４ｃ………結膜部
【０００１】
【発明の属する技術分野】本発明は、視線検出システムに係り、特にインターフェースの入力手段等として利用するために視線およびその方向を検出する、非接触型の視線検出システムに関する。
【０００２】
【従来の技術】近年、視線の動きを、メニュー選択やカーソル制御、画面のスクロールなど表示装置への指示操作に利用するために、視線を検出する技術の開発が図られている。
【０００３】従来から、視線を検出するシステムとしては、頭部装着式のアイカメラのように、検出部を眼球部に接触または近接させて検出する接触型の視線検出システムがある。この視線検出システムでは、眼球に近赤外光を照射し、反射光をビデオカメラ等で撮像して画像処理する方法が採られており、頭部の動きと関係なく眼球が必ず検出部内に位置しているため、視線の方向を算出する際に頭部の位置による補正を行なう必要がなく、視線を検出するための処理が容易であるという利点を有している。しかし、頭部の動きが制約されるばかりでなく、視野が狭いなどの問題があり、長時間の使用に適しなかった。
【０００４】一方、検出部を眼球部から離して視線を検出する非接触型の視線検出方法があり、例えば、顔上の数点と瞳孔の空間位置情報をステレオ画像計測等により計測する方法や、顔の向き検出にモザイク特徴を用いるアスペクト法等を用いて画像データを低減した方法などが最近開発されている。
【０００５】
【発明が解決しようとする課題】しかし、これらの視線検出方法のうちで前者の方法では、画像データを入力した後の処理が非常に複雑になり、位置情報計測後の処理に多くの時間を必要とするという問題があった。
【０００６】また、後者のアスペクト法では、顔の向き（頭部の方向）に関する画像データを蓄積した最適辞書の構築方法によって、視線検出の精度が決定され、辞書の良否が検出精度に直接大きな影響を及ぼしていた。
【０００７】本発明はこれらの点に鑑みてなされたもので、使用者の頭部の動きが許容され、視線およびその方向の検出精度が高く、さらに検出速度が高速化された非接触型の視線検出システムを提供することを目的とする。
【０００８】
【課題を解決するための手段】本発明の視線検出システムは、表示画面と、該表示画面を使用する使用者の眼球部から離間して設けられた撮像装置とを備え、前記撮像装置により撮像された画像データから、前記使用者の瞳孔および顔上の特徴的な固定点の位置をそれぞれ求める位置算出手段と、この手段により求められた位置データを視線方向に変換し、前記表示画面上の使用者注視点を算出する注視点等算出手段とを具備したことを特徴とする。
【０００９】本発明の位置算出手段においては、使用者の顔部等の画像データから、輝度の最大値あるいは最小値を含む少なくとも３点（これらは、通常鼻頭と両目の両端部にそれぞれ相当する。）を抽出し、これらの３点を頂点とする三角形の重心の位置を算出して、この点を顔上に固定された特徴点とすることが望ましい。なお、特徴点としては、前記した３点を頂点とする三角形の重心以外に、内心、外心、垂心等を用いることもできる。また、顔面に存在するほくろ等の位置を予め記憶装置に登録しておき、この登録データを基に算出した三角形の重心等を、特徴的点とすることもできる。
【００１０】本発明の視線検出システムにおいては、使用者の眼球部から離間して設けられた撮像装置により、使用者の顔部等の画像が撮像され、この画像データから、位置算出手段により、使用者の瞳孔の中心並びに顔上の特徴的な点の位置がそれぞれ算出される。そして、得られた位置データを用いて、注視点等算出手段により適当な変換および演算がなされ、使用者の視線の方向、および視線の表示画面との交点である注視点が求められる。
【００１１】このように本発明の視線検出システムによれば、頭部の動きに関係なく精度の高い視線検出がなされ、さらに検出の高速化が可能である。
【００１２】また、本発明において、画像データから位置算出手段により求められた位置データを時間軸に対して比較し、データの時間的変化が固視微動程度に小さく、視線方向に変化がない場合、あるいは使用者の視線が表示画面の外側に向いている間などは、注視点等算出手段の動作を停止して、視線方向および注視点の算出を行なわないように構成することにより、システム運転の低消費電力化を図ることができる。また、視線検出を表示装置等への入力手段として利用する場合に、固視微動による表示画面上のポインタ等のふらつきを解消し、安定した入力を行なうことができる。
【００１３】
【発明の実施の形態】以下、本発明の実施例を図面に基いて説明する。
【００１４】図１は、本発明の視線検出システムの一実施例を示す構成説明図である。
【００１５】実施例の視線検出システムは、図に示すように、液晶表示装置のような表示装置１と、自動焦点機能を有し被写体までの距離を測定することができる撮像装置２とを備えており、撮像装置２は、使用者３の眼球部から離間して、例えば表示装置１の画面１ａの下部に設けられている。そして、撮像装置２には、撮像された画像のデータから、使用者３の瞳孔の中心Ｅと顔上の特徴的な点の位置をそれぞれ求め、求められた位置データを視線の方向に変換し、この視線方向と表示画面１ａとの交点である使用者注視点Ｐを算出する変換・算出装置（図示を省略。）が接続されている。
【００１６】実施例の変換・算出装置による視線検出の手順（プログラム）を、図２にフローチャートで示す。以下に詳述する。
【００１７】（１）自動焦点機能付き撮像装置２により撮像された使用者３の頭部（顔部）についての画像データから、撮像装置２の任意の点Ｃから使用者３の瞳孔中心Ｅまでの位置ベクトルを算出する→ベクトルＣＥ（２）同じく撮像装置２により撮像された使用者３の顔部についての画像データから、使用者３の顔上の特徴的な固定点を算出する。これには、画像データから、顔の向きに関わらず、顔上で輝度の最大値および最小値を示す３点をそれぞれ抽出する。そして、これらの３点を頂点とする三角形の重心Ｇの位置を算出して、この重心Ｇを特徴的な固定点とする。
【００１８】（３）瞳孔中心Ｅから顔上の特徴点である重心Ｇまでの位置ベクトルを算出する。→ベクトルＥＧ（４）撮像装置２の任意の点Ｃから、視線方向と表示画面１ａとの交点である注視点Ｐまでの位置ベクトルを算出する。→ベクトルＣＰ（５）（１）〜（４）で得られたベクトルＣＥ、ベクトルＥＧ、ベクトルＣＰの和を算出し、このベクトル式が成り立つ注視点Ｐの位置に、例えばポインタを動作させる。
【００１９】上記手順における各点の位置および位置ベクトルを、図３（ａ）および図３（ｂ）にそれぞれ示す。ステップ（５）に示すベクトル和は、下式によって求められる。
【００２０】
ベクトルＣＰ＝ベクトルＣＧ＋ベクトルＧＰ ［１］
ベクトルＣＧ＝ベクトルＣＥ＋ベクトルＥＧ ［２］
［２］式を［１］式に代入して、 ベクトルＧＰ＝ベクトルＣＰ−（ベクトルＣＥ＋ベクトルＥＧ） ［３］
ここで、［１］式は、使用者３の頭部の動きを許容するための、使用者３と撮像装置２と注視点Ｐとの位置関係を示したベクトル式であり、図３（ａ）にベクトル表記したように、撮像装置２の任意の点Ｃから表示画面１ａ上の使用者が注視している点ＰまでのベクトルＣＰは、点Ｃから使用者２の顔部に固定された特徴点ＧまでのベクトルＣＧと、点Ｇから注視点ＰまでのベクトルＧＰの和で表わされる。
【００２１】また、［２］式は、顔部に固定された特徴点Ｇと瞳孔中心Ｅとの位置関係を示したベクトル式であり、図３（ｂ）にベクトル表記したように、撮像装置２の任意の点Ｃから点ＧまでのベクトルＣＧは、点Ｃから瞳孔中心ＥまでのベクトルＣＥと、瞳孔中心Ｅから点ＧまでのベクトルＥＧの和で表わされる。そして、こうして求められるベクトルＧＰにより、視線方向の算出が行なわれることになる。ここで、瞳孔中心Ｅは、撮像装置２により得られた画像データに対して、以下の処理を行なうことにより求めることができる。
【００２２】図４（ａ）は、撮像装置２により撮像された画像の眼球周辺部を拡大した画像を示す。
【００２３】瞳孔中心Ｅの抽出においては、まずこの拡大画像を、Ａ，Ｂ等の位置で目の両端部を結ぶ線に平行に例えば左から右に向かって走査して、各点の輝度を測定し、輝度と走査時間との関係を求める。
【００２４】一般に、眼球４内各部の輝度は、瞳孔４ａ＜虹彩４ｂ＜結膜部４ｃの順に大きくなっているので、図４（ａ）に示したＡ，Ｂの各位置で走査すると、図４（ｂ）に示すような輝度分布が得られる。このような輝度分布を表わす信号をコンパレータを通して変換し、瞳孔４ａと虹彩４ｂの境界にのみパルスを形成すると、図４R>４（ｃ）に示す出力が得られ、クロックパルスをカウントすることにより、瞳孔４ａの両端で虹彩４ｂとの境界が明らかになる。そして、眼球４上端から下端にかけてのＡ，Ｂ等の位置で、最低３回の走査を行ない、各走査において前記したカウント操作を行ない瞳孔４ａと虹彩４ｂとの境界を求めることにより、瞳孔中心Ｅを求めることができる。
【００２５】なお、コンパレータを使用しない場合には、図４（ｂ）に示す輝度分布において、瞳孔４ａと虹彩４ｂを示す輝度のゲインの範囲内にしきい値を設けることによって、瞳孔４ａと虹彩４ｂとの境界の判別を行なうことができる。
【００２６】このように実施例の視線検出システムにおいては、前記した手順にしたがって視線検出のプログラムを実行することによって、頭部の動きが許容されるうえに、従来の非接触型の視線検出システムに比べて高速処理が可能となり、かつ精度の高い視線検出を行なうことができる。
【００２７】次に、本発明の別の実施例について説明する。この実施例における視線検出の手順を示すフローチャートを、図５に示す。
【００２８】この実施例では、撮像装置により得られた画像データから求められた使用者の瞳孔中心Ｅに関する位置データを、時間軸に対して比較し、データに時間的変化がない場合に、検出プログラムの実行を停止するように構成され、単位時間内に変化した変化量のみが、表示画面上のポインタやカーソルの動き、あるいはスクロールの移動量として利用されるようになっている。
【００２９】このようなプログラムを有する視線検出システムにおいては、従来の視線検出システムと比較して、視線方向または頭部に動きが無い場合の演算処理が不要になり、より高速度な視線検出が可能になるうえに、消費電力を低減することができる。また、固視微動等の眼球の細かい動きにより視線検出にふらつきが生じることがなく、安定した入力を行なうことができる。
【００３０】
【発明の効果】以上の説明から明らかなように、本発明のシステムによれば、頭部の動きが許容され、検出精度が高く高速度の視線検出を行なうことができる。
【図面の簡単な説明】
【図１】本発明の視線検出システムの一実施例を示す構成説明図。
【図２】同実施例の変換・算出装置による視線検出のプログラムを示すフローチャート。
【図３】同実施例の視線検出プログラムにおける各点の位置および位置ベクトルを示す図。
【図４】同実施例における瞳孔中心の抽出方法を説明するための図。
【図５】本発明の別の実施例における視線検出のプログラムを示すフローチャート。
【符号の説明】
１………表示装置
１ａ………表示画面
２………撮像装置
３………使用者
４………眼球
４ａ………瞳孔
４ｂ………虹彩
４ｃ………結膜部
【特許請求の範囲】
【請求項１】 表示画面と、該表示画面を使用する使用者の眼球部から離間して設けられた撮像装置とを備え、前記撮像装置により撮像された画像データから、前記使用者の瞳孔および顔上の特徴的な固定点の位置をそれぞれ求める位置算出手段と、この手段により求められた位置データを視線方向に変換し、前記表示画面上の使用者注視点を算出する注視点等算出手段とを具備したことを特徴とする視線検出システム。
【請求項２】 前記位置算出手段により求められた位置データを時間軸に対して比較し、前記データに変化がない場合に、前記注視点等算出手段の動作を停止する手段を備えたことを特徴とする請求項１記載の視線検出システム。
【請求項３】 前記位置算出手段において、前記撮像装置により撮像された画像データから、輝度の最大値あるいは最小値を含む少なくとも３点を抽出して、前記３点を頂点とする三角形の重心を算出し、この点を顔上の特徴的な固定点とすることを特徴とする請求項１または２記載の視線検出システム。
【請求項１】 表示画面と、該表示画面を使用する使用者の眼球部から離間して設けられた撮像装置とを備え、前記撮像装置により撮像された画像データから、前記使用者の瞳孔および顔上の特徴的な固定点の位置をそれぞれ求める位置算出手段と、この手段により求められた位置データを視線方向に変換し、前記表示画面上の使用者注視点を算出する注視点等算出手段とを具備したことを特徴とする視線検出システム。
【請求項２】 前記位置算出手段により求められた位置データを時間軸に対して比較し、前記データに変化がない場合に、前記注視点等算出手段の動作を停止する手段を備えたことを特徴とする請求項１記載の視線検出システム。
【請求項３】 前記位置算出手段において、前記撮像装置により撮像された画像データから、輝度の最大値あるいは最小値を含む少なくとも３点を抽出して、前記３点を頂点とする三角形の重心を算出し、この点を顔上の特徴的な固定点とすることを特徴とする請求項１または２記載の視線検出システム。
【図１】
【図４】
【図２】
【図３】
【図５】
【図４】
【図２】
【図３】
【図５】
【公開番号】特開平１０−９１３２５
【公開日】平成１０年（１９９８）４月１０日
【国際特許分類】
【出願番号】特願平８−２４３８３２
【出願日】平成８年（１９９６）９月１３日
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【公開日】平成１０年（１９９８）４月１０日
【国際特許分類】
【出願日】平成８年（１９９６）９月１３日
【出願人】（０００００３０７８）株式会社東芝 (54,554)
[ Back to top ]