判定装置、設定装置、判定方法、および判定プログラム
【課題】利用者が注視すべき注視対象に対してどのように見ているかを容易に識別すること。
【解決手段】初めに、判定装置１０１は、個別注視対象情報テーブル１０３の注視対象用点滅周波数リストフィールドに１０［Ｈｚ］、利用者識別用点滅周波数フィールドに４５［Ｈｚ］を記憶している。続けて、制御装置１０２は、注視対象を１０［Ｈｚ］で点滅させ、非注視対象を４５［Ｈｚ］で点滅させる。判定装置１０１は、脳波信号が周波数ごとに分析された分析結果から、脳波信号に注視対象用点滅周波数リストフィールドと利用者識別用点滅周波数フィールドに格納された周波数が含まれるか否かに応じて、利用者Ａが注視すべき注視対象に対する注意状態を出力する。
【解決手段】初めに、判定装置１０１は、個別注視対象情報テーブル１０３の注視対象用点滅周波数リストフィールドに１０［Ｈｚ］、利用者識別用点滅周波数フィールドに４５［Ｈｚ］を記憶している。続けて、制御装置１０２は、注視対象を１０［Ｈｚ］で点滅させ、非注視対象を４５［Ｈｚ］で点滅させる。判定装置１０１は、脳波信号が周波数ごとに分析された分析結果から、脳波信号に注視対象用点滅周波数リストフィールドと利用者識別用点滅周波数フィールドに格納された周波数が含まれるか否かに応じて、利用者Ａが注視すべき注視対象に対する注意状態を出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、利用者の注意状態に関する判定装置、設定装置、判定方法、および判定プログラムに関する。
【背景技術】
【０００２】
近年、多くの利用者に対して様々な情報が提供されており、提供情報が増大の一途を辿っている。このように、提供情報が増加し、利用者が注視すべき注視対象が増加された結果、利用者が注視対象を見落とす可能性が増えてしまった。
【０００３】
たとえば、利用者が注視対象を注視しているかを判定する技術として、脳波に特徴的な電位成分が含まれることで、注視対象を注視しているか否かを判定する技術が存在する。このような、脳活動を利用して人間、機械間の通信を行う分野は、ＢＣＩ（Ｂｒａｉｎ Ｃｏｍｐｕｔｅｒ Ｉｎｔｅｒｆａｃｅ）と呼ばれ、近年の脳活動のイメージング技術の発展により進歩している。ＢＣＩを用いることで、利用者に確認ボタンを押下させるといった煩わしい作業を行わずに、利用者が注視対象を注視しているかを判定することができる。
【０００４】
脳波の特徴的な電位成分を利用する技術として、たとえば、定常状態視覚誘発電位（ＳＳＶＥＰ：Ｓｔｅａｄｙ Ｓｔａｔｅ Ｖｉｓｕａｌｌｙ Ｅｖｏｋｅｄ Ｐｏｔｅｎｔｉａｌ）から、利用者の注視点位置を特定することが開示されている。なお、ＳＳＶＥＰは、一定の周波数で点滅する光源を目視するときに、脳波信号に重畳される電位成分である。
【０００５】
また、運転者の周辺視野領域に対する注意量の判定として、運転者の周辺視野に存在する注視対象の発生時点、またはＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）の縁に取りつけたＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）の点滅時点で検出される事象関連電位（ＥＲＰ：Ｅｖｅｎｔ Ｒｅｌａｔｅｄ Ｐｏｔｅｎｔｉａｌ）の強さから判定する技術が開示されている。なお、ＥＲＰは、感覚刺激や運動といった特定の事象に随伴して一過性に生じる脳活動を反映した脳波信号に重畳される電位成分である。具体的に、ＥＲＰのＰ３００成分と呼ばれる刺激後３００〜５００［ミリ秒］に最大振幅が現れる波形の持つ振幅の大小関係が、刺激に対する注目の程度の大小関係と同じ傾向にあるという技術が開示されている。
【０００６】
また、あらゆる状況下で情報機器を操作する技術として、画面の選択肢群固有に割り当てる周波数で選択肢群をランダムにハイライトさせると、利用者の脳波に周波成分の変動が現れることで選択肢群を特定する。さらに、Ｐ３００成分を検出して、利用者が選択したいと認識している選択肢を特定するという技術が開示されている（たとえば、下記特許文献１〜３を参照。）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平１１−６５７９４号公報
【特許文献２】国際公開第２０１０／０１６２４４号
【特許文献３】国際公開第２００８／１１７５２１号
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した従来技術では、利用者が自身の専用機を扱う状況を対象としているため、注視対象の利用者候補が複数存在する場合に、情報提供先となる利用者であるかの識別を特定することが困難であるという問題があった。具体的に、多くの利用者に対する注視対象が複数存在する状況下にて、利用者が注視している事実からでは、利用者が注視すべき注視対象を注視しているか、または注視対象でない対象を注視しているのか、のいずれの状態であるか特定することが困難であった。
【０００９】
また、上述した従来技術では、注視対象が複数存在する場合、ＳＳＶＥＰ検出で利用可能な周波数には限りがあり、それぞれの注視対象に設定する周波数が不足する可能性があるという問題があった。
【００１０】
本発明は、上述した従来技術による問題点を解消するため、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別する判定装置、判定方法、および判定プログラムを提供することを目的とする。また、本発明は、注視対象の点滅周波数を効率的に設定する設定装置を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上述した課題を解決し、目的を達成するため、本発明の一側面によれば、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を記憶し、利用者の脳波信号が周波数ごとに分析された分析結果を取得し、取得された分析結果から第１の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべき状態か否かを判定し、取得された分析結果から第２の周波数の成分が脳波信号に含まれているか否かに応じて、注視対象の注意状態を判定し、判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力する判定装置、判定方法、および判定プログラムが提案される。
【００１２】
また、上述した課題を解決し、目的を達成するため、本発明の他の側面によれば、注視対象から所定範囲内にある非注視対象および注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され利用者が注視すべき注視対象の注意状態を判定する判定装置とに接続可能であり、非注視対象および注視対象の点滅周波数として設定可能な周波数群と利用者が注視対象を注視すべき状態とを記憶するコンピュータが、利用者の状態の変化を検出し、変化を検出した場合、記憶されている状態と変化後の利用者の状態とが一致するか否かを判定し、一致したと判定された場合、記憶されている周波数群から非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、抽出した第１および第２の周波数を制御装置および判定装置に通知する設定装置が提案される。
【発明の効果】
【００１３】
本発明の一側面によれば、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別できるという効果を奏する。また、本発明の他の側面によれば、利用可能な周波数を効率的に設定できるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】図１は、実施の形態１にかかる判定システムの動作例を示す説明図である。
【図２】図２は、判定システムのハードウェアを示す説明図である。
【図３】図３は、ＳＳＶＥＰとＰ３００成分の検出による注意状態の判定例を示す説明図である。
【図４】図４は、判定システムの機能例を示す説明図である。
【図５】図５は、注視対象情報テーブルおよび注視対象範囲テーブルの記憶内容の一例を示す説明図である。
【図６】図６は、個別注視対象情報テーブルの一例を示す説明図である。
【図７】図７は、ＳＳＶＥＰの検出例を示す説明図である。
【図８】図８は、Ｐ３００成分の検出例を示す説明図である。
【図９】図９は、利用者の注意状態の判定例を示す説明図（その１）である。
【図１０】図１０は、利用者の注意状態の判定例を示す説明図（その２）である。
【図１１】図１１は、利用者の注意状態の判定例を示す説明図（その３）である。
【図１２】図１２は、制御装置の処理手順の一例を示すフローチャートである。
【図１３】図１３は、判定装置の処理手順の一例を示すフローチャートである。
【図１４】図１４は、実施の形態２にかかる判定システムのハードウェア例を示す説明図である。
【図１５】図１５は、実施の形態２にかかる判定システムの機能例を示すブロック図である。
【図１６】図１６は、利用者属性管理テーブルの記憶内容の一例を示す説明図である。
【図１７】図１７は、設定可能周波数管理テーブルの記憶内容の一例を示す説明図である。
【図１８】図１８は、注視対象情報テーブルの更新例を示す説明図である。
【図１９】図１９は、設定装置の処理手順の一例を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下に添付図面を参照して、開示の判定装置、設定装置、判定方法、および判定プログラムの実施の形態を詳細に説明する。
【００１６】
（実施の形態１の説明）
図１は、実施の形態１にかかる判定システムの動作例を示す説明図である。判定システム１００は、注視対象に対する利用者の注意状態を判定する判定装置１０１と、注視対象となる注視対象の点滅を制御する制御装置１０２と、を含む。判定装置１０１は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する利用者識別用点滅周波数と、注視対象が点滅をする周期に対応する注視対象用点滅周波数リストと、を記憶する個別注視対象情報テーブル１０３を有する。なお、本実施の形態にかかる制御装置１０２は、注視対象の表示も行っているが、表示を行う別の装置があってもよい。また、注意状態とは、利用者が注視すべき注視対象に対してどのように見ているかを示す状態である。
【００１７】
初めに、判定装置１０１は、個別注視対象情報テーブル１０３の注視対象用点滅周波数リストフィールドに１０［Ｈｚ］、利用者識別用点滅周波数フィールドに４５［Ｈｚ］を記憶している。続けて、制御装置１０２は、注視対象を１０［Ｈｚ］で点滅させ、非注視対象を４５［Ｈｚ］で点滅させる。次に、判定装置１０１は、利用者Ａの脳波信号を計測した後、脳波信号を周波数ごとに分析する。判定装置１０１は、分析結果から、脳波信号に注視対象用点滅周波数リストフィールドと利用者識別用点滅周波数フィールドに格納された周波数が含まれるか否かに応じて、利用者Ａが注視すべき注視対象に対する注意状態を出力する。
【００１８】
図１の例では、判定装置１０１は、分析結果から、脳波信号に４５［Ｈｚ］の周波数成分が含まれるので、利用者Ａが注視対象を注視すべき状態であることを判定する。さらに、判定装置１０１は、脳波信号に１０［Ｈｚ］の周波数成分が含まれるので、注視対象を見ていると判定する。したがって、判定装置１０１は、注意状態として、利用者Ａが注視すべき注視対象を見ているということを出力する。
【００１９】
（判定システム１００のハードウェア）
図２は、判定システムのハードウェアを示す説明図である。図２において、判定装置１０１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ‐Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３と、を含む。また、判定装置１０１は、フラッシュＲＯＭ２０４と、Ｉ／Ｆ２０５と、センサ２０６と、を含む。また、各部はバス２０７によってそれぞれ接続されている。なお、判定装置１０１は、利用者が１台ずつ有する端末装置であることを想定している。
【００２０】
ここで、ＣＰＵ２０１は、判定装置１０１の全体の制御を司る。ＲＯＭ２０２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。フラッシュＲＯＭ２０４は、読出し速度が高速なフラッシュＲＯＭであり、たとえば、ＮＯＲ型フラッシュメモリである。また、フラッシュＲＯＭ２０４に、本実施の形態にかかる判定プログラムが記憶されていてもよい。
【００２１】
Ｉ／Ｆ２０５は、通信回線を通じてＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワークに接続され、このネットワークを介して他の装置に接続される。そして、Ｉ／Ｆ２０５は、ネットワークと内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２０５には、たとえば無線ＬＡＮなどを採用することができる。なお、Ｉ／Ｆ２０５は、ネットワークと接続しなくてもよい。センサ２０６は、脳波を計測し、脳波の波形を取り出す装置である。
【００２２】
制御装置１０２は、ＣＰＵ２１１と、ＲＯＭ２１２と、ＲＡＭ２１３と、磁気ディスクドライブ２１４と、磁気ディスク２１５と、光ディスクドライブ２１６と、光ディスク２１７と、を含む。また、制御装置１０２は、ディスプレイ２１８と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）２１９と、を含む。また、各部はバス２２０によってそれぞれ接続されている。なお、制御装置１０２は、複数の利用者に注視対象を提供する装置であり、たとえば、空港内の発着案内板、原子炉を監視する中央制御室での各画面を表示する表示装置、交通管制センター内の情報表示板、街頭広告等の情報提供板などがある。
【００２３】
ここで、ＣＰＵ２１１は、制御装置１０２の全体の制御を司る。ＲＯＭ２１２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ２１３は、ＣＰＵ２１１のワークエリアとして使用される。磁気ディスクドライブ２１４は、ＣＰＵ２１１の制御にしたがって磁気ディスク２１５に対するデータのリード／ライトを制御する。磁気ディスク２１５は、磁気ディスクドライブ２１４の制御で書き込まれたデータを記憶する。
【００２４】
光ディスクドライブ２１６は、ＣＰＵ２１１の制御にしたがって光ディスク２１７に対するデータのリード／ライトを制御する。光ディスク２１７は、光ディスクドライブ２１６の制御で書き込まれたデータを記憶したり、光ディスク２１７に記憶されたデータをコンピュータに読み取らせたりする。
【００２５】
ディスプレイ２１８は、注視対象を表示する。たとえば、ディスプレイ２１８は、ＴＦＴ液晶ディスプレイなどを採用することができる。また、ディスプレイ２１８は、画面内の特定の領域について、バックライトの点滅周波数を変更することが可能である。
【００２６】
Ｉ／Ｆ２１９は、通信回線を通じてＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワークに接続され、このネットワークを介して他の装置に接続される。そして、Ｉ／Ｆ２１９は、ネットワークと内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２１９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。なお、判定装置１０１と制御装置１０２は、Ｉ／Ｆ２０５、Ｉ／Ｆ２１９を介して接続されていてもよいし、接続されていなくてもよい。なお、制御装置１０２は、ユーザとのインターフェースとして、キーボードと、マウスと、を有していてもよい。
【００２７】
また、図２では表示していないが、制御装置１０２は、表示装置の付近にある照明などの点滅を制御可能であってもよい。たとえば、制御装置１０２が空港内の発着案内板であれば、発着案内板の上部にある照明の点滅を制御可能であってもよい。
【００２８】
このようなハードウェアを利用して、判定装置１０１は、ＳＳＶＥＰとＰ３００成分を検出して、利用者の注意状態を判定する。図３では、ＳＳＶＥＰとＰ３００成分の検出に応じた判定結果を示す。
【００２９】
図３は、ＳＳＶＥＰとＰ３００成分の検出による注意状態の判定例を示す説明図である。判定装置１０１は、ＳＳＶＥＰとＰ３００成分の検出結果に応じて、利用者の注視対象に対する注意状態が、注視状態と、注意漫然状態と、注意散漫状態と、のいずれか一つの状態であると判定する。
【００３０】
注視状態とは、利用者が注視対象を見る際、注視している状態である。注意漫然状態とは、利用者が注視対象を見る際、注意が不足し漫然と見ている状態である。注意散漫状態は、利用者が注視対象を見ていない状態である。
【００３１】
表３０１で示す通り、判定装置１０１は、ＳＳＶＥＰが検出され、Ｐ３００成分が検出された場合、利用者は注視対象を注意しつつ見ていることから、注視状態であると判定する。また、判定装置１０１は、ＳＳＶＥＰが検出され、Ｐ３００成分が検出されなかった場合、利用者は注視対象を見ているが注意していない状態であるため、注意漫然状態であると判定する。また、判定装置１０１は、ＳＳＶＥＰが検出されなかった場合、利用者は注視対象を見ていないため、注意散漫状態であると判定する。なお、ＳＳＶＥＰが検出されず、Ｐ３００成分が検出された場合、利用者は注視対象以外の他の対象に対して注意している状態である。次に、注意状態を判定するために用いる機能例を、図４を用いて説明する。
【００３２】
（判定システム１００の機能）
次に、判定システム１００の機能について説明する。図４は、判定システムの機能例を示す説明図である。判定装置１０１は、記憶部４０１と、分析部４０２と、取得部４０３と、判定部４０４と、判定部４０５と、判定部４０６と、出力部４０７と、を含む。この制御部となる機能（分析部４０２〜出力部４０７）は、記憶装置に記憶されたプログラムをＣＰＵ２０１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図２に示したＲＯＭ２０２、ＲＡＭ２０３、フラッシュＲＯＭ２０４などである。
【００３３】
また、制御装置１０２は、記憶部４１１と、検出部４１２と、決定部４１３と、点滅部４１４と、を含む。この制御部となる機能（検出部４１２〜点滅部４１４）は、記憶装置に記憶されたプログラムをＣＰＵ２１１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図２に示したＲＯＭ２１２、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６などである。
【００３４】
また、制御装置１０２は、記憶部４１１内にある注視対象情報テーブル４２１と注視対象範囲テーブル４２２にアクセス可能である。注視対象情報テーブル４２１は、注視対象と非注視対象の点滅周波数を記憶するテーブルであり、注視対象範囲テーブル４２２は、注視対象が表示する範囲を記憶するテーブルである。なお、注視対象情報テーブル４２１と注視対象範囲テーブル４２２の詳細については、図５にて後述する。
【００３５】
また、判定装置１０１は、記憶部４０１内にある個別注視対象情報テーブル１０３と脳波信号蓄積テーブル４２３にアクセス可能である。個別注視対象情報テーブル１０３は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を記憶するテーブルである。所定範囲については、予め決められた範囲となる。たとえば、利用者Ａが着席した際に、注視対象と同時に目視可能な範囲内に非注視対象が存在する。脳波信号蓄積テーブル４２３は、計測された脳波信号を蓄積するテーブルである。
【００３６】
個別注視対象情報テーブル１０３の詳細は、図６にて後述し、脳波信号蓄積テーブル４２３の詳細は、図７にて後述する。また、記憶部４０１は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置である。
【００３７】
分析部４０２は、利用者の脳波信号を周波数ごとに分析する機能を有する。たとえば、分析部４０２は、センサ２０６によって計測され、脳波信号蓄積テーブル４２３に蓄積された脳波信号を周波数ごとに分析する。具体的に、分析部４０２は、脳波信号蓄積テーブル４２３を参照して、高速フーリエ変換を行うことで、脳波信号に含まれる周波数成分を分析する。また、分析部４０２は、脳波信号蓄積テーブル４２３に蓄積された脳波信号のうち、特定の時間範囲について分析してもよい。なお、分析部４０２は、ＣＰＵ２０１の機能ではなく、判定装置１０１にＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）が含まれ、ＧＰＵの機能であってもよい。
【００３８】
また、脳波信号には、センサ２０６等の性能に応じて、一定量のノイズが含まれることがある。したがって、分析部４０２は、利用者の脳波信号を事前に計測しておいた結果などを用いてノイズを除去し、ノイズ除去後の結果を分析結果としてもよい。または、分析結果を用いる判定部４０４、判定部４０５が、一定量のノイズを除去して第１および第２の周波数が含まれるか否かを判定してもよい。なお、分析結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００３９】
取得部４０３は、分析部４０２によって分析された分析結果を取得する機能を有する。たとえば、取得部４０３は、ＲＡＭ２０３、フラッシュＲＯＭ２０４等に記憶された分析結果を取得する。または、取得部４０３は、分析結果が記憶されているアドレスを取得してもよい。なお、取得結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４０】
判定部４０４は、取得部４０３によって取得された分析結果から第１の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべき状態であるか否かを判定する機能を有する。たとえば、第１の周波数が４０［Ｈｚ］であれば、判定部４０４は、分析結果に４０［Ｈｚ］の周波数成分が一定以上含まれる場合に、利用者Ａが注視対象を注視すべき状態であると判定する。
【００４１】
なお、ＳＳＶＥＰは、光源の点滅周波数と、周波数の整数倍の周波数が脳波信号として含まれることが知られている。したがって、判定部４０４は、第１の周波数の成分と、第２の周波数の整数倍の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべきか否かを判定してもよい。具体的に、第１の周波数が４０［Ｈｚ］であれば、判定部４０４は、脳波信号に４０［Ｈｚ］の成分と、４０［Ｈｚ］の整数倍である８０［Ｈｚ］の成分と、が含まれている場合に、利用者Ａが注視対象を注視すべき状態であると判定する。なお、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４２】
判定部４０５は、取得部４０３によって取得された分析結果から第２の周波数の成分が脳波信号に含まれているか否かに応じて、注視対象の注意状態を判定する機能を有する。たとえば、第２の周波数が１５［Ｈｚ］であれば、判定部４０５は、分析結果に１５［Ｈｚ］の周波数成分が一定以上含まれる場合に、利用者Ａが注視対象を見ていると判定する。また、注視対象が複数存在し、注視対象に対応する第２の周波数が複数含まれる場合も存在する。この場合、判定部４０５は、複数の第２の周波数のそれぞれについて、脳波信号に含まれるか否かに応じて、複数の注視対象の注意状態を判定する。なお、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４３】
判定部４０６は、脳波信号から視覚刺激に関連する特徴量が所定量以上存在するか否かを判定する機能を有する。たとえば、判定部４０６は、脳波信号蓄積テーブル４２３に蓄積された脳波信号からＥＲＰのＰ３００成分が所定量以上存在するか否かを判定する。なお、所定量については、たとえば、ノイズとして測定される最大量として設定してもよい。ノイズの量はセンサ２０６の性能等で変わってくるため、たとえば、判定部４０６は、事前に計測していた利用者の脳波信号からノイズの量を取得しておき、ノイズの量以上であったときにＰ３００成分が所定量以上となったとして判定してもよい。また、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４４】
出力部４０７は、判定部４０４および判定部４０５による判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力する。たとえば、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態であると判定され、判定部４０５によって注視対象を見ていることが判定された場合、利用者Ａが注視対象を見ているという注意状態を出力する。また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態であると判定され、判定部４０５によって注視対象を見ていないと判定された場合、利用者Ａが注視対象を見ていないという注意散漫状態を出力する。
【００４５】
また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態でないと判定された場合、利用者Ａが注視対象を注視すべき状態にないことを出力する。また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態でないと判定された場合、出力を行わなくてもよい。
【００４６】
また、出力部４０７は、判定部４０４〜判定部４０６による判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力してもよい。たとえば、出力部４０７は、利用者Ａが注視対象を注視すべき状態であると判定され、注視対象を見ていることが判定され、さらに、判定部４０６によって視覚刺激に関連する特徴量が所定量存在したと判定された場合、注視状態を出力する。また、出力部４０７は、利用者Ａが注視対象を注視すべき状態であると判定され、注視対象を見ていることが判定され、さらに、判定部４０６によって視覚刺激に関連する特徴量が所定量存在しないと判定された場合、注意漫然状態を出力する。
【００４７】
出力形式としては、たとえば、Ｉ／Ｆ２０５によって、利用者Ａのスーパバイザとなる装置に判定結果を出力してもよい。また、他の出力形式としては、たとえば、Ｉ／Ｆ２０５によって、利用者Ａが持つ端末などに出力してもよい。また、出力先では、たとえば、注意状態に応じて異なるアラートを表示する。アラートの一例として、出力先は、注意状態が注意散漫状態である場合、“注視対象が異なります”という旨のアラートを表示し、注意状態が注意漫然状態である場合、“注視対象をちゃんと注視していません”という旨のアラートを表示する。
【００４８】
記憶部４１１は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と注視対象が点滅をする周期に対応する第２の周波数とを利用者ごとに記憶しつつ、注視対象の表示範囲を記憶する。また、記憶部４１１は、注視対象および非注視対象の表示範囲を記憶してもよい。
【００４９】
検出部４１２は、利用者に対する注視対象の表示要求を検出する機能を有する。たとえば、制御装置１０２は、制御装置１０２が起動完了されたときに、利用者Ａに対する注視対象の表示要求を検出してもよい。また、たとえば、制御装置１０２が、原子炉内を撮影する監視カメラで撮影された画像を表示する場合、画面に変化があった場合に、利用者Ａに対する注視対象を検出してもよい。なお、検出結果は、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６といった記憶装置に記憶される。
【００５０】
決定部４１３は、検出部４１２によって利用者に対する注視対象の表示要求が検出された場合、記憶部４１１を参照して利用者に対応する第１および第２の周波数を決定する機能を有する。たとえば、決定部４１３は、利用者Ａに対する注視対象の表示要求が検出された場合、利用者Ａに対応する第１および第２の周波数を決定する。なお、決定した周波数は、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６といった記憶装置に記憶される。
【００５１】
点滅部４１４は、決定された第１および第２の周波数で、非注視対象および注視対象を点滅させる機能を有する。たとえば、点滅部４１４は、第１の周波数となる利用者識別用点滅周波数で、非注視対象となる利用者識別用光源を点滅させる。なお、利用者識別用光源は、ディスプレイ２１８の、注視対象範囲以外の光源であったり、ディスプレイ２１８の近くにある照明であったりしてもよい。さらに、点滅部４１４は、第２の周波数となる注視対象用点滅周波数で、記憶部４１１に記憶された注視対象の範囲にある注視対象を点滅させる。
【００５２】
図５は、注視対象情報テーブルおよび注視対象範囲テーブルの記憶内容の一例を示す説明図である。図５では、制御装置１０２が有する注視対象情報テーブル４２１の記憶内容の一例と注視対象範囲テーブル４２２の記憶内容の一例を説明する。
【００５３】
注視対象情報テーブル４２１および注視対象範囲テーブル４２２は、利用者の属性ごとに記憶されるテーブルである。図５で示す注視対象情報テーブル４２１は、レコード４２１−１〜レコード４２１−４を格納しており、注視対象範囲テーブル４２２は、レコード４２２−１〜レコード４２２−４を格納している。注視対象情報テーブル４２１は、利用者属性、注視対象用点滅周波数リスト、利用者識別用点滅周波数、という３つのフィールドを含む。また、注視対象範囲テーブル４２２は、利用者属性、注視対象範囲という２つのフィールドを含む。なお、注視対象情報テーブル４２１の利用者属性フィールドと注視対象範囲テーブル４２２の利用者属性フィールドとは１対１で紐づいている。
【００５４】
利用者属性フィールドには、注視対象を注視すべき利用者の属性が格納される。注視対象用点滅周波数リストフィールドには、利用者が注視すべき注視対象が点滅をする周期に対応する周波数のリストが格納される。利用者識別用点滅周波数フィールドには、注視対象とは別の位置で点滅しており利用者を識別する周波数が格納される。注視対象範囲フィールドには、注視対象が点滅する範囲が格納される。なお、注視対象用点滅周波数リストフィールドに設定された周波数が複数である場合、注視対象が複数あるため、注視対象範囲フィールドには、複数の注視対象に対応する複数の範囲が格納される。
【００５５】
たとえば、レコード４２１−２とレコード４２２−２では、利用者属性が装置１担当であり、装置１担当であることを識別する周波数が４５［Ｈｚ］であり、さらに、注視対象が１０［Ｈｚ］の周波数で点滅していることを示している。また、レコード４２１−２では、１０［Ｈｚ］で点滅する注視対象は、左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅することを示している。
【００５６】
また、レコード４２１−３とレコード４２２−３では、利用者属性がＩＤ２であり、ＩＤ２であることを識別する周波数が５０［Ｈｚ］であり、さらに、注視対象が２つあり、それぞれ、１０［Ｈｚ］、１５［Ｈｚ］の周波数で点滅していることを示している。また、２つの注視対象が、２つのディスプレイに別れて存在しており、１０［Ｈｚ］で点滅する注視対象が、ディスプレイ２０８−１内の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅する。また、１５［Ｈｚ］で点滅する注視対象は、ディスプレイ２０８−２内の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅する。
【００５７】
なお、図５で示した注視対象範囲テーブル４２２は、注視対象の範囲を格納するフィールドを有していたが、利用者識別用の点滅範囲を格納するフィールドを有していてもよい。また、利用者識別用光源が存在する場合、注視対象範囲テーブル４２２は、利用者識別用の点滅範囲を格納するフィールドに利用者識別用光源を示す識別情報を格納してもよい。たとえば、制御装置１０２が空港内の発着案内板であり、発着案内板の上部にある照明を利用者識別用光源として使用する場合、注視対象範囲テーブル４２２は、前述のフィールドに照明を示す識別情報を格納してあってもよい。
【００５８】
図６は、個別注視対象情報テーブルの一例を示す説明図である。図６では、判定装置１０１が有する個別注視対象情報テーブル１０３の記憶内容の一例を説明する。個別注視対象情報テーブル１０３は、注視対象情報テーブル４２１の記憶内容から、判定装置１０１の利用者の属性に対応するレコードを抽出したテーブルとなる。具体的に、個別注視対象情報テーブル１０３は、利用者属性、注視対象用点滅周波数リスト、利用者識別用点滅周波数という３つのフィールドを含む。個別注視対象情報テーブル１０３の各フィールドは、注視対象情報テーブル４２１の同名のフィールドと同じ情報が格納されるため、説明を省略する。
【００５９】
たとえば、図６で示す個別注視対象情報テーブル１０３は、判定装置１０１を利用する利用者の属性が装置１担当となるレコード１０３−１と、利用者の属性がＩＤ２となるレコード１０３−２とが存在する。
【００６０】
図７は、ＳＳＶＥＰの検出例を示す説明図である。図７では、制御装置１０２が注視対象を点滅させ、判定装置１０１がＳＳＶＥＰを検出するまでの例を示している。符号７０１で示す説明図は、制御装置１０２のＬＥＤが点滅する状態を示している。符号７０１で示すように一定の周波数で点滅するＬＥＤを目視した利用者から発せられた脳波信号をセンサ２０６が脳波信号として計測した様子を、グラフ７０２で示す。グラフ７０２は、横軸が時刻、縦軸が電位の振幅を示している。グラフ７０２で示すように、ＬＥＤが点滅をする周期に対応する周波数成分が脳波信号に重畳されている。
【００６１】
また、判定装置１０１は、センサ２０６によって計測した脳波信号を脳波信号蓄積テーブル４２３に蓄積する。符号７０３で示す説明図では、脳波信号蓄積テーブル４２３の記憶内容の一例を示している。脳波信号蓄積テーブル４２３は、計測された電位を時刻ごとに格納している。
【００６２】
続けて、判定装置１０１は、脳波信号蓄積テーブル４２３を参照して、脳波信号を周波数ごとに分析する。分析した結果をグラフ７０４にて示す。グラフ７０４は、横軸が周波数、縦軸が電位の振幅を示している。グラフ７０４では、周波数１０［Ｈｚ］と周波数４５［Ｈｚ］の成分にて振幅のピークがあることを示している。
【００６３】
図８は、Ｐ３００成分の検出例を示す説明図である。図８では、判定装置１０１が、ＥＲＰのＰ３００成分を検出している例を示している。グラフ８０１は、横軸が刺激後の時刻、縦軸が電位を示している。
【００６４】
グラフ８０１では、４００［ミリ秒］の時点でＰ３００成分となる最大振幅が出現していることを示している。なお、判定装置１０１は、脳波信号蓄積テーブル４２３を参照することで、Ｐ３００成分を検出することができる。また、グラフ８０１は、Ｐ１、Ｎ１、Ｐ２、Ｎ２、Ｐ３（Ｐ３００）といった成分が表れていることを示している。
【００６５】
図９は、利用者の注意状態の判定例を示す説明図（その１）である。図９では、利用者Ａ〜利用者Ｃの３人が存在し、それぞれ判定装置１０１−Ａ〜判定装置１０１−Ｃを携帯している。さらに、図９では、注視対象を表示するディスプレイ２０８が１台であり、個々の利用者の注視すべき注視対象が同一であるが、個々の利用者の注意状態が異なっている状況を示している。また、ディスプレイ２０８には、文字「Ａ」〜文字「Ｆ」を表示している。たとえば、ディスプレイ２０８が、原子炉を監視する中央制御室でのディスプレイであれば、文字「Ａ」〜文字「Ｆ」を表示する矩形領域が、原子炉内を撮影するカメラの画像となり、利用者Ａ〜利用者Ｃが、原子炉を監視する監視者となる。
【００６６】
初めに、１番目の処理として、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性を指定する。図９の例では、レコード４２１−２を指定する。２番目の処理として、制御装置１０２は、左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域９０１を注視対象としてレコード４２１−２が示すように周波数１０［Ｈｚ］で点滅させ、その他の領域を周波数４５［Ｈｚ］で点滅させる。具体的に、制御装置１０２は、文字「Ａ」の表示領域となる矩形領域９０１を周波数１０［Ｈｚ］で点滅させ、その他の背景部分、および「Ｂ」〜「Ｆ」の表示領域を周波数４５［Ｈｚ］で点滅させる。この状態で、利用者属性が装置１担当である利用者Ａ〜利用者Ｃは、注視対象を目視する。
【００６７】
３番目の処理として、判定装置１０１−Ａは、利用者Ａの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ａは、自装置の注視対象情報テーブル４２１から４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ａが注視対象を注視すべき利用者であり、１０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ａが注視対象を見ていることが特定できる。さらに、判定装置１０１−Ａは、Ｐ３００成分を検出したことで注視していることが特定できるため、４番目の処理として、注視対象に対する注意状態として注視状態であると判定する。
【００６８】
同様に、３番目の処理として、判定装置１０１−Ｂは、利用者Ｂの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出したが、Ｐ３００成分を検出していない。このとき、判定装置１０１−Ｂは、自装置の注視対象情報テーブル４２１から４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｂが注視対象を注視すべき利用者であり、１０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｂが注視対象を見ていることが特定できる。しかし、判定装置１０１−Ｂは、Ｐ３００成分を検出しなかったため注視していることが特定できず、４番目の処理として、注視対象に対する注意状態として注意漫然状態であると判定する。
【００６９】
同様に、３番目の処理として、判定装置１０１−Ｃは、利用者Ｃの脳波を計測し、４５［Ｈｚ］のＳＳＶＥＰを検出したが、１０［Ｈｚ］のＳＳＶＥＰを検出していない。このとき、判定装置１０１−Ｃは、自装置の注視対象情報テーブル４２１から、４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｃが注視対象を注視すべき利用者であることが特定できる。しかし、判定装置１０１−Ｃは、１０［Ｈｚ］のＳＳＶＥＰを検出しなかったことで利用者Ｃが注視対象を見ていることが特定できず、４番目の処理として、注視対象に対する注意状態として注意散漫状態であると判定する。
【００７０】
図１０は、利用者の注意状態の判定例を示す説明図（その２）である。図１０では、利用者Ａ、利用者Ｄの２人が存在し、それぞれ判定装置１０１−Ａ、判定装置１０１−Ｄを携帯している。さらに、図１０では、注視対象を表示するディスプレイ２０８が１台であり、個々の利用者の注視すべき注視対象が異なっている状況を示している。なお、制御装置１０２と、利用者Ａに関しては、図９で示す状態と等しいため、説明を省略する。また、利用者Ｄは、利用者属性が装置２担当である。
【００７１】
３番目の処理として、判定装置１０１−Ｄは、利用者Ｄの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ｄは、検出した４５［Ｈｚ］と１０［Ｈｚ］が、自装置の注視対象情報テーブル４２１の利用者識別用点滅周波数フィールドに存在しないことを判断する。結果、判定装置１０１−Ｄは、検出した４５［Ｈｚ］と１０［Ｈｚ］が利用者Ｄの注視対象に関係ないことを特定し、注意状態を判定しない。
【００７２】
図１１は、利用者の注意状態の判定例を示す説明図（その３）である。図１１では、利用者Ｅが存在し、注視対象が２つあり、注視対象を表示するディスプレイ２０８が２台である状況を示している。
【００７３】
初めに、１番目の処理として、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性を指定する。図１１の例では、レコード４２１−３を指定する。２番目の処理として、制御装置１０２は、ディスプレイ２０８−１の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域１１０１を注視対象としてレコード４２１−３が示すように周波数１０［Ｈｚ］で点滅させる。さらに、制御装置１０２は、ディスプレイ２０８−２の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域１１０２を注視対象として周波数１５［Ｈｚ］で点滅させ、その他の領域を周波数５０［Ｈｚ］で点滅させる。
【００７４】
具体的に、制御装置１０２は、ディスプレイ２０８−１の文字「Ａ」の表示領域となる矩形領域１１０１を周波数１０［Ｈｚ］で点滅させ、ディスプレイ２０８−２の文字「１」の表示領域となる矩形領域１１０２を周波数１５［Ｈｚ］で点滅させる。制御装置１０２は、矩形領域１１０１、矩形領域１１０２以外の背景部分、および「Ｂ」〜「Ｆ」、「２」〜「６」の表示領域を周波数５０［Ｈｚ］で点滅させる。この状態で、利用者Ｅは、注視対象を目視する。
【００７５】
３番目の処理として、判定装置１０１−Ｅは、利用者Ｅの脳波を計測し、５０［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。さらに、判定装置１０１−Ｅは、１５［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ｅは、注視対象情報テーブル４２１から、５０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｅが注視対象を注視すべき利用者であることが特定できる。また、判定装置１０１−Ｅは、１０［Ｈｚ］と１５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｅが注視対象を見ていることが特定できる。さらに、判定装置１０１−Ｅは、１０［Ｈｚ］と１５［Ｈｚ］に対応するＰ３００成分を検出したことで注視していることが特定できるため、４番目の処理として、注視対象に対する注意状態として注視状態であると判定する。
【００７６】
続けて、図９〜図１１で示した注意状態を判定する判定システム１００のフローチャートについて、図１２、図１３で示す。図１２では、制御装置１０２の処理を示すフローチャートを示し、図１３では、判定装置１０１の処理を示すフローチャートを示す。
【００７７】
図１２は、制御装置の処理手順の一例を示すフローチャートである。制御装置１０２は、利用者属性に対する注視対象の表示要求を検出したか否かを判断する（ステップＳ１２０１）。注視対象を検出していない場合（ステップＳ１２０１：Ｎｏ）、制御装置１０２は、一定時間経過後、ステップＳ１２０１の処理を再び実行する。注視対象を検出した場合（ステップＳ１２０１：Ｙｅｓ）、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性に対応する注視対象用点滅周波数と、利用者識別用点滅周波数と、を決定する（ステップＳ１２０２）。
【００７８】
続けて、制御装置１０２は、利用者識別用点滅周波数で、利用者識別用光源を点滅させ（ステップＳ１２０３）、注視対象用点滅周波数で、注視対象範囲にある注視対象を点滅させ（ステップＳ１２０４）、ステップＳ１２０１の処理に移行する。
【００７９】
図１３は、判定装置の処理手順の一例を示すフローチャートである。判定装置１０１は、利用者の脳波信号が周波数ごとに分析された分析結果を取得する（ステップＳ１３０１）。次に、判定装置１０１は、個別注視対象情報テーブル１０３のうち、利用者識別用点滅周波数のＳＳＶＥＰを検出したか否かを判断する（ステップＳ１３０２）。利用者識別用点滅周波数のＳＳＶＥＰを検出していない場合（ステップＳ１３０２：Ｎｏ）、判定装置１０１は、ステップＳ１３０１の処理を再び実行する。
【００８０】
利用者識別用点滅周波数のＳＳＶＥＰを検出している場合（ステップＳ１３０２：Ｙｅｓ）、判定装置１０１は、検出された利用者識別用点滅周波数に対応する注視対象用点滅周波数リストの先頭の周波数を取得する（ステップＳ１３０３）。続けて、判定装置１０１は、取得した注視対象用点滅周波数のＳＳＶＥＰを検出したか否かを判断する（ステップＳ１３０４）。注視対象用点滅周波数のＳＳＶＥＰを検出した場合（ステップＳ１３０４：Ｙｅｓ）、判定装置１０１は、ＳＳＶＥＰ検出時にＰ３００成分を検出したか否かを判断する（ステップＳ１３０５）。Ｐ３００成分を検出した場合（ステップＳ１３０５：Ｙｅｓ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注視状態であると判定する（ステップＳ１３０６）。
【００８１】
Ｐ３００成分を検出していない場合（ステップＳ１３０５：Ｎｏ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注意漫然状態であると判定する（ステップＳ１３０７）。注視対象用点滅周波数のＳＳＶＥＰを検出していない場合（ステップＳ１３０４：Ｎｏ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注意散漫状態であると判定する（ステップＳ１３０８）。
【００８２】
ステップＳ１３０６〜ステップＳ１３０８の処理後、判定装置１０１は、注視対象用点滅周波数リストの全てに対して判定したか否かを判断する（ステップＳ１３０９）。全てに対して判定していない場合（ステップＳ１３０９：Ｎｏ）、判定装置１０１は、検出された利用者識別用点滅周波数に対応する注視対象用点滅周波数リストの次の周波数を取得し（ステップＳ１３１０）、ステップＳ１３０４の処理に移行する。
【００８３】
全てに対して判定している場合（ステップＳ１３０９：Ｙｅｓ）、判定装置１０１は、判定結果を総合し（ステップＳ１３１１）、総合した判定結果を出力し（ステップＳ１３１２）、ステップＳ１３０１の処理に移行する。
【００８４】
なお、判定結果の総合方法の一例として、判定装置１０１は、１つ目の判定基準として、複数の判定結果のうち、一つ以上の注意散漫状態の注視対象が存在する場合、総合した判定結果を注意散漫状態として判定する。また、判定装置１０１は、２つ目の判定基準として、１つ目の判定基準に当てはまらず、複数の判定結果のうち、一つ以上の注意漫然状態の注視対象が存在する場合、総合した判定結果を注意漫然状態として判定する。さらに、判定装置１０１は、３つ目の判定基準として、２つ目の判定基準に当てはまらなかった場合、総合した判定結果を注視状態として判定する。
【００８５】
また、判定結果の出力方法の一例として、判定装置１０１は、注視対象が注視状態にある個数、注視対象が注意漫然状態にある個数、注視対象が注意散漫状態にある個数を出力してもよい。
【００８６】
以上説明したように、判定装置、判定方法、および判定プログラムによれば、非注視対象が点滅をする周期に対応する第１の周波数の成分と、注視対象が点滅をする周期に対応する第２の周波数の成分と、が脳波信号に含まれるかを判定する。これにより、判定装置は、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別できる。
【００８７】
また、判定装置は、脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定し、３つの判定結果より、注視対象を注視すべき利用者の注意状態を出力してもよい。これにより、判定装置は、利用者の注視対象に対する注意状態について、注視対象を注意して見ているか否かについて判定することができる。また、判定装置からの出力を受け付けた装置は、利用者の注意状態に対応した適切なアラートを表示することができる。
【００８８】
また、判定装置は、脳波信号に第１の周波数の成分と第２の周波数の成分とが含まれ、さらに、脳波信号から視覚刺激に関連する特徴量が所定量以上存在した場合、注意状態を注視状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を注視している場合に、注視状態であるとして判定することができる。
【００８９】
また、判定装置は、脳波信号に第１の周波数の成分と、第２の周波数の成分とが含まれ、さらに、脳波信号から視覚刺激に関連する特徴量が所定量以上存在しない場合、注意状態を注意漫然状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を見ているが、注視していない場合に、注意漫然状態として出力することができる。なお、判定装置からの出力を受け付けた装置は、利用者の注意漫然状態に対応したアラートを表示することができる。たとえば、前述の装置は、“注視対象をちゃんと注視していません”という旨のアラートを表示することができる。
【００９０】
また、判定装置は、脳波信号に第１の周波数の成分が含まれており、第２の周波数の成分が含まれない場合、注意状態を注意散漫状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を見ていない場合に、注意散漫状態として出力することができる。なお、判定装置からの出力を受け付けた装置は、利用者の注意散漫状態に対応したアラートを表示することができる。たとえば、前述の装置は、“注視対象が異なります”という旨のアラートを表示することができる。
【００９１】
また、判定装置は、注視対象に対する注意状態を自動判定できるため、利用者に注視対象の確認をさせずに済み、利用者にとって煩わしい作業を行わずに済む。また、判定装置は、注視対象に対する目視の有無、注視対象の注意状態といった判定を、脳波解析に基づいて判定するため、目視を検出する視線検知装置を用意しなくて済む。
【００９２】
また、判定システムは、利用者属性を用いることで、注意状態を判定する利用者を明示的に指定することができる。たとえば、ディスプレイが原子炉を監視する中央制御室での各画面である場合、判定システムは、それぞれの画面ごとに、利用者属性を指定することで、特定の画面を注視すべき利用者を明示的に特定することができる。
【００９３】
また、判定システムは、利用者属性ごとに注視対象に対する点滅周波数を設定することで、単純に注視対象ごとに点滅周波数を設定する場合に比べ、設定される周波数の個数を減少させることができる。
【００９４】
また、判定システムは、注視対象を表示する表示装置と、注視対象に対する注意状態を判定する判定装置と、に分割し、脳波信号を判定装置から表示装置に送信しないため、個人情報である脳波信号の流出を防ぎ、利用者のプライバシーを確保できる。
【００９５】
（実施の形態２の説明）
実施の形態１にかかる判定システム１００は、注視対象の周波数と、利用者を識別する周波数と、を利用者属性ごとに設定していた。しかしながら、ＳＳＶＥＰ検出として設定可能な周波数には限りがあり、利用者属性が多い場合、設定可能な周波数が不足する可能性がある。実施の形態２にかかる判定システム１００では、ＳＳＶＥＰ検出に利用する周波数の効率的な設定方法について説明を行う。
【００９６】
図１４は、実施の形態２にかかる判定システムのハードウェア例を示す説明図である。図１４で示す、実施の形態２にかかる判定システム１４００は、判定装置１０１と制御装置１０２とに加え、ＳＳＶＥＰ検出の周波数を設定する設定装置１４０１を含む。実施の形態２にかかる判定装置１０１と制御装置１０２は、実施の形態１にかかる判定装置１０１と制御装置１０２と同一のハードウェアである。したがって、図１４では、判定装置１０１と制御装置１０２の説明を省略し、ＣＰＵ２０１〜フラッシュＲＯＭ２０４、センサ２０６、バス２０７、ＣＰＵ２１１〜光ディスク２１７、バス２２０の図示を省略する。
【００９７】
設定装置１４０１は、ＣＰＵ１４１１と、ＲＯＭ１４１２と、ＲＡＭ１４１３と、磁気ディスクドライブ１４１４と、磁気ディスク１４１５と、Ｉ／Ｆ１４１６と、を含む。また、各部はバス１４１７によってそれぞれ接続されている。
【００９８】
ＣＰＵ１４１１は、設定装置１４０１の全体の制御を司る。ＲＯＭ１４１２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ１４１３は、ＣＰＵ１４１１のワークエリアとして使用される。磁気ディスクドライブ１４１４は、ＣＰＵ１４１１の制御にしたがって磁気ディスク１４１５に対するデータのリード／ライトを制御する。磁気ディスク１４１５は、磁気ディスクドライブ１４１４の制御で書き込まれたデータを記憶する。
【００９９】
Ｉ／Ｆ１４１６は、通信回線を通じてＬＡＮ、ＷＡＮ、インターネットなどのネットワーク１４１８に接続され、ネットワーク１４１８を介して判定装置１０１と制御装置１０２といった他の装置に接続される。そして、Ｉ／Ｆ１４１６は、ネットワーク１４１８と内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２１９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。なお、設定装置１４０１は、ユーザとのインターフェースとして、キーボードと、マウスと、を有していてもよい。
【０１００】
図１５は、実施の形態２にかかる判定システムの機能例を示すブロック図である。なお、図１５で示す、実施の形態２にかかる判定装置１０１と制御装置１０２は、実施の形態１にかかる判定装置１０１と制御装置１０２と同一の機能を有するため、説明を省略する。設定装置１４０１は、記憶部１５０１と、受付部１５０２と、検出部１５０３と、判定部１５０４と、抽出部１５０５と、通知部１５０６と、を含む。この制御部となる機能（受付部１５０２〜通知部１５０６）は、記憶装置に記憶されたプログラムをＣＰＵ１４１１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図１４に示したＲＯＭ１４１２、ＲＡＭ１４１３、磁気ディスクドライブ１４１４などである。
【０１０１】
また、設定装置１４０１は、記憶部１５０１内にある利用者属性管理テーブル１５１１と設定可能周波数管理テーブル１５１２にアクセス可能である。利用者属性管理テーブル１５１１は、利用者属性と利用者が注視対象を注視すべき状態の条件とを記憶するテーブルである。設定可能周波数管理テーブル１５１２は、非注視対象および注視対象の点滅周波数として設定可能な周波数を記憶するテーブルである。なお、利用者属性管理テーブル１５１１の詳細については、図１６にて後述し、設定可能周波数管理テーブル１５１２の詳細については、図１７にて後述する。
【０１０２】
記憶部１５０１は、非注視対象および注視対象の点滅周波数として設定可能な周波数群と利用者が注視対象を注視すべき状態、または時間とを記憶する。なお、記憶部１５０１はＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置である。
【０１０３】
受付部１５０２は、利用者の状態を受け付ける機能を有する。たとえば、受付部１５０２は、利用者が携帯している判定装置１０１から、利用者の状態として、判定装置１０１の位置情報を受け付ける。または、受付部１５０２は、利用者が判定装置１０１を装着し、脳波信号を検出したことを受け付けてもよい。なお、受付結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０４】
検出部１５０３は、利用者の状態の変化を検出する機能を有する。たとえば、検出部１５０３は、既に受け付けていた利用者Ａの状態と、新しく受け付けた利用者の状態とが異なる場合、利用者の状態の変化を検出する。または、検出部１５０３は、現在時刻が記憶部１５０１に記憶されている時間内となったことを検出してもよい。たとえば、設定装置は、タイマ、またはネットワーク１４１８などから現在時刻を取得し、現在時刻が、記憶部１５０１に記憶されている時間内となったことを検出する。なお、検出結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０５】
判定部１５０４は、検出部１５０３によって変化を検出した場合、記憶部１５０１に記憶されている状態と変化後の利用者の状態とが一致するか否かを判定する機能を有する。たとえば、判定部１５０４は、利用者属性管理テーブル１５１１に、利用者Ａが注視対象を目視可能な部屋１にいるという状態と、変化後の利用者Ａの状態として、利用者Ａが部屋１にいるという状態が一致するかを判定する。なお、判定結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０６】
抽出部１５０５は、判定部１５０４によって一致したと判定された場合、記憶部１５０１に記憶されている周波数群から非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を抽出する機能を有する。たとえば、抽出部１５０５は、設定可能周波数管理テーブル１５１２から、第１の周波数と第２の周波数を抽出する。また、抽出部１５０５は、検出部１５０３によって時間内になったことが検出された場合、第１および第２の周波数を抽出してもよい。なお、抽出結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０７】
通知部１５０６は、抽出部１５０５によって抽出した第１および第２の周波数を制御装置１０２および判定装置１０１に通知する機能を有する。具体的に、通知部１５０６は、Ｉ／Ｆ１４１６によって、第１および第２の周波数を判定装置１０１と制御装置１０２に通知する。
【０１０８】
図１６は、利用者属性管理テーブルの記憶内容の一例を示す説明図である。図１６では、設定装置１４０１が有する利用者属性管理テーブル１５１１の記憶内容の一例を説明する。図１６で示す利用者属性管理テーブル１５１１は、レコード１５１１−１〜レコード１５１１−６を格納している。利用者属性管理テーブル１５１１は、利用者属性、属性条件という２つのフィールドを含む。利用者属性フィールドには、注視対象を注視すべき利用者の属性が格納される。属性条件フィールドには、利用者属性フィールドに格納された利用者属性に属する利用者が、注視対象を注視すべき状態、または時間が格納される。
【０１０９】
たとえば、レコード１５１１−２は、時間０：００〜１２：００において利用者属性がＩＤ２となる利用者が注視対象を注視すべき時間であることを示している。また、レコード１５１１−４は、利用者属性が装置１担当である利用者が部屋１にいることが、利用者が注視対象を注視すべき状態であることを示している。
【０１１０】
図１７は、設定可能周波数管理テーブルの記憶内容の一例を示す説明図である。図１７では、設定装置１４０１が有する設定可能周波数管理テーブル１５１２の記憶内容の一例を説明する。図１７で示す設定可能周波数管理テーブル１５１２は、レコード１５１２−１を格納している。設定可能周波数管理テーブル１５１２は、注視対象用点滅周波数、利用者識別用点滅周波数という２つのフィールドを含む。注視対象用点滅周波数フィールドには、注視対象用点滅周波数として利用可能な周波数群が格納される。利用者識別用点滅周波数フィールドには、利用者識別用点滅周波数として利用可能な周波数群が格納される。
【０１１１】
たとえば、レコード１５１２−１は、注視対象用点滅周波数として、５［Ｈｚ］、１０［Ｈｚ］、１５［Ｈｚ］、…、が利用可能であり、利用者識別用点滅周波数として、４０［Ｈｚ］、４５［Ｈｚ］、５０［Ｈｚ］、…、が利用可能であることを示している。なお、ＳＳＶＥＰは、点滅周波数が１０［Ｈｚ］、１６［Ｈｚ］、４０［Ｈｚ］〜５０［Ｈｚ］の付近に感度が高い領域が存在するため、設定可能周波数管理テーブル１５１２に登録される周波数としては、前述した周波数付近が好ましい。
【０１１２】
図１８は、注視対象情報テーブルの更新例を示す説明図である。図１８では、設定装置１４０１の処理によって注視対象情報テーブル４２１が更新される例を示している。符号１８０１は、制御装置１０２が置かれている場所の、時刻０：００〜時刻１２：００の状態を示しており、符号１８０２は、制御装置１０２が置かれている場所の、時刻１２：００〜時刻２４：００までの状態を示している。
【０１１３】
符号１８０１では、時刻０：００〜時刻１２：００であるため、レコード１５１１−２の属性条件が成立する。この場合、設定装置１４０１は、レコード１５１１−２に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を設定する。
【０１１４】
具体的には、設定装置１４０１は、設定可能周波数管理テーブル１５１２の利用者識別用点滅周波数フィールドから、たとえば、５０［Ｈｚ］を抽出し、注視対象用点滅周波数フィールドのうち、たとえば、１５［Ｈｚ］を抽出する。設定装置１４０１は、対応する利用者属性と、抽出された注視対象用点滅周波数、利用者識別用点滅周波数から、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する。たとえば、設定装置１４０１は、“ＩＤ２”、“１５”、“５０”を１レコードとする、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する。
【０１１５】
続けて、設定装置１４０１は、生成した注視対象情報テーブル４２１、個別注視対象情報テーブル１０３をそれぞれ制御装置１０２、判定装置１０１に通知する。通知結果を受け付けた制御装置１０２は、レコード４２１−３の注視対象用点滅周波数リストフィールドを“１５”に更新し、利用者識別用点滅周波数フィールドを“５０”に更新する。なお、通知された利用者属性が格納されたレコードが、注視対象情報テーブル４２１に存在しない場合、制御装置１０２は、受け付けた利用者属性、注視対象用点滅周波数、利用者識別用点滅周波数、を１レコードとして注視対象情報テーブル４２１に追加する。また、判定装置１０１も、個別注視対象情報テーブル１０３に対して同様の処理を行う。
【０１１６】
次に、時刻が経過し、設定装置１４０１は、符号１８０１から符号１８０２に変化したことを検出する。設定装置１４０１は、レコード１５１１−２の属性条件が成立しなくなったため、設定した１５［Ｈｚ］と５０［Ｈｚ］を回収する。具体的に、設定装置１４０１は、制御装置１０２に注視対象情報テーブル４２１のレコードのうち、成立しなくなった属性条件に対応する利用者属性のレコードの削除要求を行う。続けて、設定装置１４０１は、該当のレコードの注視対象用点滅周波数、利用者識別用点滅周波数を、設定可能周波数管理テーブル１５１２に追加する。
【０１１７】
続けて、設定装置１４０１は、レコード１５１１−３の属性条件が成立するため、設定装置１４０１は、レコード１５１１−３に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を設定する。具体的に、図１８の例では、設定装置１４０１は、前述の処理にて回収した１５［Ｈｚ］と５０［Ｈｚ］を抽出する。周波数を抽出した後、設定装置１４０１は、対応する利用者属性と、割り当てた注視対象用点滅周波数、利用者識別用点滅周波数から生成された注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を、制御装置１０２、判定装置１０１に通知する。
【０１１８】
このように、図１８で示す更新例を行った設定装置１４０１、結果的に、利用者属性ＩＤ２、利用者属性ＩＤ３に対して同一の周波数を設定しており、利用する周波数の個数を減らすことができる。
【０１１９】
図１９は、設定装置の処理手順の一例を示すフローチャートである。設定装置１４０１は、利用者の状態を受け付け（ステップＳ１９０１）、利用者の状態の変化を検出したか否かを判断する（ステップＳ１９０２）。
【０１２０】
変化を検出した場合（ステップＳ１９０２：Ｙｅｓ）、設定装置１４０１は、属性条件フィールドの状態と変化後の利用者の状態とが一致するか否かを判断する（ステップＳ１９０３）。変化を検出しなかった場合（ステップＳ１９０２：Ｎｏ）、または、一致しない場合（ステップＳ１９０３：Ｎｏ）、設定装置１４０１は、現在時刻が属性条件フィールドの時間内となったか否かを判断する（ステップＳ１９０４）。時間内になった場合（ステップＳ１９０４：Ｙｅｓ）、または、一致した場合（ステップＳ１９０３：Ｙｅｓ）、設定装置１４０１は、現時点での状態、時間で成立しない利用者属性に設定された周波数を回収する（ステップＳ１９０５）。時間内になっていない場合（ステップＳ１９０４：Ｎｏ）、設定装置１４０１は、ステップＳ１９０１の処理に移行する。
【０１２１】
周波数の回収後、設定装置１４０１は、設定可能周波数管理テーブル１５１２から現時点での状態、時間に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を抽出する（ステップＳ１９０６）。次に、設定装置１４０１は、現時点での状態、時間に対応する利用者属性と抽出された注視対象用点滅周波数、利用者識別用点滅周波数とから、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する（ステップＳ１９０７）。続けて、設定装置１４０１は、生成した注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を、それぞれ制御装置１０２、判定装置１０１に通知し（ステップＳ１９０８）、ステップＳ１９０１の処理に移行する。
【０１２２】
なお、通知結果を受け付けた制御装置１０２は、自装置の注視対象情報テーブル４２１のうち、受け付けた利用者属性に対応するレコードに関して、注視対象用点滅周波数、利用者識別用点滅周波数を更新する。同様に、通知を受け付けた判定装置１０１は、自装置の個別注視対象情報テーブル１０３のうち、受け付けた利用者属性に対応するレコードに関して、注視対象用点滅周波数リスト、利用者識別用点滅周波数を更新する。
【０１２３】
以上説明したように、設定装置によれば、ＳＳＶＥＰに設定可能な周波数群と利用者が注視対象を注視すべき状態を記憶する。続けて、設定装置は、利用者の状態が変化した場合、記憶された状態と一致した場合に、記憶された周波数群から、非注視対象と注視対象の周波数を設定する。これにより、設定装置は、ＳＳＶＥＰ検出に利用可能な周波数を使いまわすことができ、利用可能な周波数を効率的に設定でき、多くの利用者に対応することができる。
【０１２４】
また、設定装置は、ＳＳＶＥＰに設定可能な周波数群と利用者が注視対象を注視すべき時間を記憶する。続けて、設定装置は、前述の時間になった場合に、記憶された周波数群から、非注視対象と注視対象の周波数を設定する。これにより、設定装置は、ＳＳＶＥＰ検出に利用可能な周波数を使いまわすことができ、利用可能な周波数を効率的に運用でき、多くの利用者に対応することができる。たとえば、設定装置は、注視対象を時間ごとに分担して注視する場合、注視対象に常に同じ周波数を設定することができ、周波数を有効に設定することができる。
【０１２５】
なお、実施の形態１、２で説明した判定方法、設定方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本判定プログラム、本設定プログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また本判定プログラム、本設定プログラムは、インターネット等のネットワークを介して配布してもよい。
【０１２６】
上述した実施の形態１、２に関し、さらに以下の付記を開示する。
【０１２７】
（付記１）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶する記憶部と、
利用者の脳波信号が周波数ごとに分析された分析結果を取得する取得部と、
前記取得部によって取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定する第１の判定部と、
前記取得部によって取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定する第２の判定部と、
前記第１および第２の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する出力部と、
を備えることを特徴とする判定装置。
【０１２８】
（付記２）前記脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定する第３の判定部をさらに備え、
前記出力部は、
前記第１、第２および第３の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
ことを特徴とする付記１に記載の判定装置。
【０１２９】
（付記３）前記出力部は、
前記第１の判定部によって利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在したと判定された場合、前記注意状態を注視状態として出力する、
ことを特徴とする付記２に記載の判定装置。
【０１３０】
（付記４）前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在しないと判定された場合、前記注意状態を注意漫然状態として出力する、
ことを特徴とする付記２に記載の判定装置。
【０１３１】
（付記５）前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって利用者が注視対象を見ていないことが判定された場合、前記注意状態を注意散漫状態として出力する、
ことを特徴とする付記１または２に記載の判定装置。
【０１３２】
（付記６）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能な設定装置であって、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶する記憶部と、
前記利用者の状態の変化を検出する検出部と、
前記検出部によって前記変化を検出した場合、前記記憶部に記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定する判定部と、
前記判定部によって一致したと判定された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する抽出部と、
前記抽出部によって抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する通知部と、
を備えることを特徴とする設定装置。
【０１３３】
（付記７）前記記憶部は、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき時間とを記憶し、
前記検出部は、
現在時刻が前記記憶部に記憶されている時間内となったことを検出し、
前記抽出部は、
前記検出部によって前記時間内になったことが検出された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する、
ことを特徴とする付記６に記載の設定装置。
【０１３４】
（付記８）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータが、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行することを特徴とする判定方法。
【０１３５】
（付記９）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能であり、前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶するコンピュータが、
前記利用者の状態の変化を検出し、
前記変化を検出した場合、記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定し、
一致したと判定された場合、記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、
抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する、
処理を実行することを特徴とする設定方法。
【０１３６】
（付記１０）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータに、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行させることを特徴とする判定プログラム。
【０１３７】
（付記１１）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能であり、前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶するコンピュータに、
前記利用者の状態の変化を検出し、
前記変化を検出した場合、記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定し、
一致したと判定された場合、記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、
抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する、
処理を実行させることを特徴とする設定プログラム。
【符号の説明】
【０１３８】
１００ 判定システム
１０１ 判定装置
１０２ 制御装置
１０３ 個別注視対象情報テーブル
２０１ ＣＰＵ
２０６ センサ
２０７ バス
４０１ 記憶部
４０２ 分析部
４０３ 取得部
４０４ 判定部
４０５ 判定部
４０６ 判定部
４０７ 出力部
１４００ 判定システム
１４０１ 設定装置
１４１１ ＣＰＵ
１５０１ 記憶部
１５０２ 受付部
１５０３ 検出部
１５０４ 判定部
１５０５ 抽出部
１５０６ 通知部
１５１１ 利用者属性管理テーブル
１５１２ 設定可能周波数管理テーブル
【技術分野】
【０００１】
本発明は、利用者の注意状態に関する判定装置、設定装置、判定方法、および判定プログラムに関する。
【背景技術】
【０００２】
近年、多くの利用者に対して様々な情報が提供されており、提供情報が増大の一途を辿っている。このように、提供情報が増加し、利用者が注視すべき注視対象が増加された結果、利用者が注視対象を見落とす可能性が増えてしまった。
【０００３】
たとえば、利用者が注視対象を注視しているかを判定する技術として、脳波に特徴的な電位成分が含まれることで、注視対象を注視しているか否かを判定する技術が存在する。このような、脳活動を利用して人間、機械間の通信を行う分野は、ＢＣＩ（Ｂｒａｉｎ Ｃｏｍｐｕｔｅｒ Ｉｎｔｅｒｆａｃｅ）と呼ばれ、近年の脳活動のイメージング技術の発展により進歩している。ＢＣＩを用いることで、利用者に確認ボタンを押下させるといった煩わしい作業を行わずに、利用者が注視対象を注視しているかを判定することができる。
【０００４】
脳波の特徴的な電位成分を利用する技術として、たとえば、定常状態視覚誘発電位（ＳＳＶＥＰ：Ｓｔｅａｄｙ Ｓｔａｔｅ Ｖｉｓｕａｌｌｙ Ｅｖｏｋｅｄ Ｐｏｔｅｎｔｉａｌ）から、利用者の注視点位置を特定することが開示されている。なお、ＳＳＶＥＰは、一定の周波数で点滅する光源を目視するときに、脳波信号に重畳される電位成分である。
【０００５】
また、運転者の周辺視野領域に対する注意量の判定として、運転者の周辺視野に存在する注視対象の発生時点、またはＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）の縁に取りつけたＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）の点滅時点で検出される事象関連電位（ＥＲＰ：Ｅｖｅｎｔ Ｒｅｌａｔｅｄ Ｐｏｔｅｎｔｉａｌ）の強さから判定する技術が開示されている。なお、ＥＲＰは、感覚刺激や運動といった特定の事象に随伴して一過性に生じる脳活動を反映した脳波信号に重畳される電位成分である。具体的に、ＥＲＰのＰ３００成分と呼ばれる刺激後３００〜５００［ミリ秒］に最大振幅が現れる波形の持つ振幅の大小関係が、刺激に対する注目の程度の大小関係と同じ傾向にあるという技術が開示されている。
【０００６】
また、あらゆる状況下で情報機器を操作する技術として、画面の選択肢群固有に割り当てる周波数で選択肢群をランダムにハイライトさせると、利用者の脳波に周波成分の変動が現れることで選択肢群を特定する。さらに、Ｐ３００成分を検出して、利用者が選択したいと認識している選択肢を特定するという技術が開示されている（たとえば、下記特許文献１〜３を参照。）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平１１−６５７９４号公報
【特許文献２】国際公開第２０１０／０１６２４４号
【特許文献３】国際公開第２００８／１１７５２１号
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した従来技術では、利用者が自身の専用機を扱う状況を対象としているため、注視対象の利用者候補が複数存在する場合に、情報提供先となる利用者であるかの識別を特定することが困難であるという問題があった。具体的に、多くの利用者に対する注視対象が複数存在する状況下にて、利用者が注視している事実からでは、利用者が注視すべき注視対象を注視しているか、または注視対象でない対象を注視しているのか、のいずれの状態であるか特定することが困難であった。
【０００９】
また、上述した従来技術では、注視対象が複数存在する場合、ＳＳＶＥＰ検出で利用可能な周波数には限りがあり、それぞれの注視対象に設定する周波数が不足する可能性があるという問題があった。
【００１０】
本発明は、上述した従来技術による問題点を解消するため、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別する判定装置、判定方法、および判定プログラムを提供することを目的とする。また、本発明は、注視対象の点滅周波数を効率的に設定する設定装置を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上述した課題を解決し、目的を達成するため、本発明の一側面によれば、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を記憶し、利用者の脳波信号が周波数ごとに分析された分析結果を取得し、取得された分析結果から第１の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべき状態か否かを判定し、取得された分析結果から第２の周波数の成分が脳波信号に含まれているか否かに応じて、注視対象の注意状態を判定し、判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力する判定装置、判定方法、および判定プログラムが提案される。
【００１２】
また、上述した課題を解決し、目的を達成するため、本発明の他の側面によれば、注視対象から所定範囲内にある非注視対象および注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され利用者が注視すべき注視対象の注意状態を判定する判定装置とに接続可能であり、非注視対象および注視対象の点滅周波数として設定可能な周波数群と利用者が注視対象を注視すべき状態とを記憶するコンピュータが、利用者の状態の変化を検出し、変化を検出した場合、記憶されている状態と変化後の利用者の状態とが一致するか否かを判定し、一致したと判定された場合、記憶されている周波数群から非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、抽出した第１および第２の周波数を制御装置および判定装置に通知する設定装置が提案される。
【発明の効果】
【００１３】
本発明の一側面によれば、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別できるという効果を奏する。また、本発明の他の側面によれば、利用可能な周波数を効率的に設定できるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】図１は、実施の形態１にかかる判定システムの動作例を示す説明図である。
【図２】図２は、判定システムのハードウェアを示す説明図である。
【図３】図３は、ＳＳＶＥＰとＰ３００成分の検出による注意状態の判定例を示す説明図である。
【図４】図４は、判定システムの機能例を示す説明図である。
【図５】図５は、注視対象情報テーブルおよび注視対象範囲テーブルの記憶内容の一例を示す説明図である。
【図６】図６は、個別注視対象情報テーブルの一例を示す説明図である。
【図７】図７は、ＳＳＶＥＰの検出例を示す説明図である。
【図８】図８は、Ｐ３００成分の検出例を示す説明図である。
【図９】図９は、利用者の注意状態の判定例を示す説明図（その１）である。
【図１０】図１０は、利用者の注意状態の判定例を示す説明図（その２）である。
【図１１】図１１は、利用者の注意状態の判定例を示す説明図（その３）である。
【図１２】図１２は、制御装置の処理手順の一例を示すフローチャートである。
【図１３】図１３は、判定装置の処理手順の一例を示すフローチャートである。
【図１４】図１４は、実施の形態２にかかる判定システムのハードウェア例を示す説明図である。
【図１５】図１５は、実施の形態２にかかる判定システムの機能例を示すブロック図である。
【図１６】図１６は、利用者属性管理テーブルの記憶内容の一例を示す説明図である。
【図１７】図１７は、設定可能周波数管理テーブルの記憶内容の一例を示す説明図である。
【図１８】図１８は、注視対象情報テーブルの更新例を示す説明図である。
【図１９】図１９は、設定装置の処理手順の一例を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下に添付図面を参照して、開示の判定装置、設定装置、判定方法、および判定プログラムの実施の形態を詳細に説明する。
【００１６】
（実施の形態１の説明）
図１は、実施の形態１にかかる判定システムの動作例を示す説明図である。判定システム１００は、注視対象に対する利用者の注意状態を判定する判定装置１０１と、注視対象となる注視対象の点滅を制御する制御装置１０２と、を含む。判定装置１０１は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する利用者識別用点滅周波数と、注視対象が点滅をする周期に対応する注視対象用点滅周波数リストと、を記憶する個別注視対象情報テーブル１０３を有する。なお、本実施の形態にかかる制御装置１０２は、注視対象の表示も行っているが、表示を行う別の装置があってもよい。また、注意状態とは、利用者が注視すべき注視対象に対してどのように見ているかを示す状態である。
【００１７】
初めに、判定装置１０１は、個別注視対象情報テーブル１０３の注視対象用点滅周波数リストフィールドに１０［Ｈｚ］、利用者識別用点滅周波数フィールドに４５［Ｈｚ］を記憶している。続けて、制御装置１０２は、注視対象を１０［Ｈｚ］で点滅させ、非注視対象を４５［Ｈｚ］で点滅させる。次に、判定装置１０１は、利用者Ａの脳波信号を計測した後、脳波信号を周波数ごとに分析する。判定装置１０１は、分析結果から、脳波信号に注視対象用点滅周波数リストフィールドと利用者識別用点滅周波数フィールドに格納された周波数が含まれるか否かに応じて、利用者Ａが注視すべき注視対象に対する注意状態を出力する。
【００１８】
図１の例では、判定装置１０１は、分析結果から、脳波信号に４５［Ｈｚ］の周波数成分が含まれるので、利用者Ａが注視対象を注視すべき状態であることを判定する。さらに、判定装置１０１は、脳波信号に１０［Ｈｚ］の周波数成分が含まれるので、注視対象を見ていると判定する。したがって、判定装置１０１は、注意状態として、利用者Ａが注視すべき注視対象を見ているということを出力する。
【００１９】
（判定システム１００のハードウェア）
図２は、判定システムのハードウェアを示す説明図である。図２において、判定装置１０１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ‐Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３と、を含む。また、判定装置１０１は、フラッシュＲＯＭ２０４と、Ｉ／Ｆ２０５と、センサ２０６と、を含む。また、各部はバス２０７によってそれぞれ接続されている。なお、判定装置１０１は、利用者が１台ずつ有する端末装置であることを想定している。
【００２０】
ここで、ＣＰＵ２０１は、判定装置１０１の全体の制御を司る。ＲＯＭ２０２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。フラッシュＲＯＭ２０４は、読出し速度が高速なフラッシュＲＯＭであり、たとえば、ＮＯＲ型フラッシュメモリである。また、フラッシュＲＯＭ２０４に、本実施の形態にかかる判定プログラムが記憶されていてもよい。
【００２１】
Ｉ／Ｆ２０５は、通信回線を通じてＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワークに接続され、このネットワークを介して他の装置に接続される。そして、Ｉ／Ｆ２０５は、ネットワークと内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２０５には、たとえば無線ＬＡＮなどを採用することができる。なお、Ｉ／Ｆ２０５は、ネットワークと接続しなくてもよい。センサ２０６は、脳波を計測し、脳波の波形を取り出す装置である。
【００２２】
制御装置１０２は、ＣＰＵ２１１と、ＲＯＭ２１２と、ＲＡＭ２１３と、磁気ディスクドライブ２１４と、磁気ディスク２１５と、光ディスクドライブ２１６と、光ディスク２１７と、を含む。また、制御装置１０２は、ディスプレイ２１８と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）２１９と、を含む。また、各部はバス２２０によってそれぞれ接続されている。なお、制御装置１０２は、複数の利用者に注視対象を提供する装置であり、たとえば、空港内の発着案内板、原子炉を監視する中央制御室での各画面を表示する表示装置、交通管制センター内の情報表示板、街頭広告等の情報提供板などがある。
【００２３】
ここで、ＣＰＵ２１１は、制御装置１０２の全体の制御を司る。ＲＯＭ２１２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ２１３は、ＣＰＵ２１１のワークエリアとして使用される。磁気ディスクドライブ２１４は、ＣＰＵ２１１の制御にしたがって磁気ディスク２１５に対するデータのリード／ライトを制御する。磁気ディスク２１５は、磁気ディスクドライブ２１４の制御で書き込まれたデータを記憶する。
【００２４】
光ディスクドライブ２１６は、ＣＰＵ２１１の制御にしたがって光ディスク２１７に対するデータのリード／ライトを制御する。光ディスク２１７は、光ディスクドライブ２１６の制御で書き込まれたデータを記憶したり、光ディスク２１７に記憶されたデータをコンピュータに読み取らせたりする。
【００２５】
ディスプレイ２１８は、注視対象を表示する。たとえば、ディスプレイ２１８は、ＴＦＴ液晶ディスプレイなどを採用することができる。また、ディスプレイ２１８は、画面内の特定の領域について、バックライトの点滅周波数を変更することが可能である。
【００２６】
Ｉ／Ｆ２１９は、通信回線を通じてＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワークに接続され、このネットワークを介して他の装置に接続される。そして、Ｉ／Ｆ２１９は、ネットワークと内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２１９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。なお、判定装置１０１と制御装置１０２は、Ｉ／Ｆ２０５、Ｉ／Ｆ２１９を介して接続されていてもよいし、接続されていなくてもよい。なお、制御装置１０２は、ユーザとのインターフェースとして、キーボードと、マウスと、を有していてもよい。
【００２７】
また、図２では表示していないが、制御装置１０２は、表示装置の付近にある照明などの点滅を制御可能であってもよい。たとえば、制御装置１０２が空港内の発着案内板であれば、発着案内板の上部にある照明の点滅を制御可能であってもよい。
【００２８】
このようなハードウェアを利用して、判定装置１０１は、ＳＳＶＥＰとＰ３００成分を検出して、利用者の注意状態を判定する。図３では、ＳＳＶＥＰとＰ３００成分の検出に応じた判定結果を示す。
【００２９】
図３は、ＳＳＶＥＰとＰ３００成分の検出による注意状態の判定例を示す説明図である。判定装置１０１は、ＳＳＶＥＰとＰ３００成分の検出結果に応じて、利用者の注視対象に対する注意状態が、注視状態と、注意漫然状態と、注意散漫状態と、のいずれか一つの状態であると判定する。
【００３０】
注視状態とは、利用者が注視対象を見る際、注視している状態である。注意漫然状態とは、利用者が注視対象を見る際、注意が不足し漫然と見ている状態である。注意散漫状態は、利用者が注視対象を見ていない状態である。
【００３１】
表３０１で示す通り、判定装置１０１は、ＳＳＶＥＰが検出され、Ｐ３００成分が検出された場合、利用者は注視対象を注意しつつ見ていることから、注視状態であると判定する。また、判定装置１０１は、ＳＳＶＥＰが検出され、Ｐ３００成分が検出されなかった場合、利用者は注視対象を見ているが注意していない状態であるため、注意漫然状態であると判定する。また、判定装置１０１は、ＳＳＶＥＰが検出されなかった場合、利用者は注視対象を見ていないため、注意散漫状態であると判定する。なお、ＳＳＶＥＰが検出されず、Ｐ３００成分が検出された場合、利用者は注視対象以外の他の対象に対して注意している状態である。次に、注意状態を判定するために用いる機能例を、図４を用いて説明する。
【００３２】
（判定システム１００の機能）
次に、判定システム１００の機能について説明する。図４は、判定システムの機能例を示す説明図である。判定装置１０１は、記憶部４０１と、分析部４０２と、取得部４０３と、判定部４０４と、判定部４０５と、判定部４０６と、出力部４０７と、を含む。この制御部となる機能（分析部４０２〜出力部４０７）は、記憶装置に記憶されたプログラムをＣＰＵ２０１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図２に示したＲＯＭ２０２、ＲＡＭ２０３、フラッシュＲＯＭ２０４などである。
【００３３】
また、制御装置１０２は、記憶部４１１と、検出部４１２と、決定部４１３と、点滅部４１４と、を含む。この制御部となる機能（検出部４１２〜点滅部４１４）は、記憶装置に記憶されたプログラムをＣＰＵ２１１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図２に示したＲＯＭ２１２、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６などである。
【００３４】
また、制御装置１０２は、記憶部４１１内にある注視対象情報テーブル４２１と注視対象範囲テーブル４２２にアクセス可能である。注視対象情報テーブル４２１は、注視対象と非注視対象の点滅周波数を記憶するテーブルであり、注視対象範囲テーブル４２２は、注視対象が表示する範囲を記憶するテーブルである。なお、注視対象情報テーブル４２１と注視対象範囲テーブル４２２の詳細については、図５にて後述する。
【００３５】
また、判定装置１０１は、記憶部４０１内にある個別注視対象情報テーブル１０３と脳波信号蓄積テーブル４２３にアクセス可能である。個別注視対象情報テーブル１０３は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を記憶するテーブルである。所定範囲については、予め決められた範囲となる。たとえば、利用者Ａが着席した際に、注視対象と同時に目視可能な範囲内に非注視対象が存在する。脳波信号蓄積テーブル４２３は、計測された脳波信号を蓄積するテーブルである。
【００３６】
個別注視対象情報テーブル１０３の詳細は、図６にて後述し、脳波信号蓄積テーブル４２３の詳細は、図７にて後述する。また、記憶部４０１は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置である。
【００３７】
分析部４０２は、利用者の脳波信号を周波数ごとに分析する機能を有する。たとえば、分析部４０２は、センサ２０６によって計測され、脳波信号蓄積テーブル４２３に蓄積された脳波信号を周波数ごとに分析する。具体的に、分析部４０２は、脳波信号蓄積テーブル４２３を参照して、高速フーリエ変換を行うことで、脳波信号に含まれる周波数成分を分析する。また、分析部４０２は、脳波信号蓄積テーブル４２３に蓄積された脳波信号のうち、特定の時間範囲について分析してもよい。なお、分析部４０２は、ＣＰＵ２０１の機能ではなく、判定装置１０１にＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）が含まれ、ＧＰＵの機能であってもよい。
【００３８】
また、脳波信号には、センサ２０６等の性能に応じて、一定量のノイズが含まれることがある。したがって、分析部４０２は、利用者の脳波信号を事前に計測しておいた結果などを用いてノイズを除去し、ノイズ除去後の結果を分析結果としてもよい。または、分析結果を用いる判定部４０４、判定部４０５が、一定量のノイズを除去して第１および第２の周波数が含まれるか否かを判定してもよい。なお、分析結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００３９】
取得部４０３は、分析部４０２によって分析された分析結果を取得する機能を有する。たとえば、取得部４０３は、ＲＡＭ２０３、フラッシュＲＯＭ２０４等に記憶された分析結果を取得する。または、取得部４０３は、分析結果が記憶されているアドレスを取得してもよい。なお、取得結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４０】
判定部４０４は、取得部４０３によって取得された分析結果から第１の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべき状態であるか否かを判定する機能を有する。たとえば、第１の周波数が４０［Ｈｚ］であれば、判定部４０４は、分析結果に４０［Ｈｚ］の周波数成分が一定以上含まれる場合に、利用者Ａが注視対象を注視すべき状態であると判定する。
【００４１】
なお、ＳＳＶＥＰは、光源の点滅周波数と、周波数の整数倍の周波数が脳波信号として含まれることが知られている。したがって、判定部４０４は、第１の周波数の成分と、第２の周波数の整数倍の周波数の成分が脳波信号に含まれているか否かに応じて、利用者が注視対象を注視すべきか否かを判定してもよい。具体的に、第１の周波数が４０［Ｈｚ］であれば、判定部４０４は、脳波信号に４０［Ｈｚ］の成分と、４０［Ｈｚ］の整数倍である８０［Ｈｚ］の成分と、が含まれている場合に、利用者Ａが注視対象を注視すべき状態であると判定する。なお、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４２】
判定部４０５は、取得部４０３によって取得された分析結果から第２の周波数の成分が脳波信号に含まれているか否かに応じて、注視対象の注意状態を判定する機能を有する。たとえば、第２の周波数が１５［Ｈｚ］であれば、判定部４０５は、分析結果に１５［Ｈｚ］の周波数成分が一定以上含まれる場合に、利用者Ａが注視対象を見ていると判定する。また、注視対象が複数存在し、注視対象に対応する第２の周波数が複数含まれる場合も存在する。この場合、判定部４０５は、複数の第２の周波数のそれぞれについて、脳波信号に含まれるか否かに応じて、複数の注視対象の注意状態を判定する。なお、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４３】
判定部４０６は、脳波信号から視覚刺激に関連する特徴量が所定量以上存在するか否かを判定する機能を有する。たとえば、判定部４０６は、脳波信号蓄積テーブル４２３に蓄積された脳波信号からＥＲＰのＰ３００成分が所定量以上存在するか否かを判定する。なお、所定量については、たとえば、ノイズとして測定される最大量として設定してもよい。ノイズの量はセンサ２０６の性能等で変わってくるため、たとえば、判定部４０６は、事前に計測していた利用者の脳波信号からノイズの量を取得しておき、ノイズの量以上であったときにＰ３００成分が所定量以上となったとして判定してもよい。また、判定結果は、ＲＡＭ２０３、フラッシュＲＯＭ２０４といった記憶装置に記憶される。
【００４４】
出力部４０７は、判定部４０４および判定部４０５による判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力する。たとえば、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態であると判定され、判定部４０５によって注視対象を見ていることが判定された場合、利用者Ａが注視対象を見ているという注意状態を出力する。また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態であると判定され、判定部４０５によって注視対象を見ていないと判定された場合、利用者Ａが注視対象を見ていないという注意散漫状態を出力する。
【００４５】
また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態でないと判定された場合、利用者Ａが注視対象を注視すべき状態にないことを出力する。また、出力部４０７は、判定部４０４によって利用者Ａが注視対象を注視すべき状態でないと判定された場合、出力を行わなくてもよい。
【００４６】
また、出力部４０７は、判定部４０４〜判定部４０６による判定結果に基づいて、利用者が注視すべき注視対象に対する注意状態を出力してもよい。たとえば、出力部４０７は、利用者Ａが注視対象を注視すべき状態であると判定され、注視対象を見ていることが判定され、さらに、判定部４０６によって視覚刺激に関連する特徴量が所定量存在したと判定された場合、注視状態を出力する。また、出力部４０７は、利用者Ａが注視対象を注視すべき状態であると判定され、注視対象を見ていることが判定され、さらに、判定部４０６によって視覚刺激に関連する特徴量が所定量存在しないと判定された場合、注意漫然状態を出力する。
【００４７】
出力形式としては、たとえば、Ｉ／Ｆ２０５によって、利用者Ａのスーパバイザとなる装置に判定結果を出力してもよい。また、他の出力形式としては、たとえば、Ｉ／Ｆ２０５によって、利用者Ａが持つ端末などに出力してもよい。また、出力先では、たとえば、注意状態に応じて異なるアラートを表示する。アラートの一例として、出力先は、注意状態が注意散漫状態である場合、“注視対象が異なります”という旨のアラートを表示し、注意状態が注意漫然状態である場合、“注視対象をちゃんと注視していません”という旨のアラートを表示する。
【００４８】
記憶部４１１は、注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と注視対象が点滅をする周期に対応する第２の周波数とを利用者ごとに記憶しつつ、注視対象の表示範囲を記憶する。また、記憶部４１１は、注視対象および非注視対象の表示範囲を記憶してもよい。
【００４９】
検出部４１２は、利用者に対する注視対象の表示要求を検出する機能を有する。たとえば、制御装置１０２は、制御装置１０２が起動完了されたときに、利用者Ａに対する注視対象の表示要求を検出してもよい。また、たとえば、制御装置１０２が、原子炉内を撮影する監視カメラで撮影された画像を表示する場合、画面に変化があった場合に、利用者Ａに対する注視対象を検出してもよい。なお、検出結果は、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６といった記憶装置に記憶される。
【００５０】
決定部４１３は、検出部４１２によって利用者に対する注視対象の表示要求が検出された場合、記憶部４１１を参照して利用者に対応する第１および第２の周波数を決定する機能を有する。たとえば、決定部４１３は、利用者Ａに対する注視対象の表示要求が検出された場合、利用者Ａに対応する第１および第２の周波数を決定する。なお、決定した周波数は、ＲＡＭ２１３、磁気ディスクドライブ２１４、光ディスクドライブ２１６といった記憶装置に記憶される。
【００５１】
点滅部４１４は、決定された第１および第２の周波数で、非注視対象および注視対象を点滅させる機能を有する。たとえば、点滅部４１４は、第１の周波数となる利用者識別用点滅周波数で、非注視対象となる利用者識別用光源を点滅させる。なお、利用者識別用光源は、ディスプレイ２１８の、注視対象範囲以外の光源であったり、ディスプレイ２１８の近くにある照明であったりしてもよい。さらに、点滅部４１４は、第２の周波数となる注視対象用点滅周波数で、記憶部４１１に記憶された注視対象の範囲にある注視対象を点滅させる。
【００５２】
図５は、注視対象情報テーブルおよび注視対象範囲テーブルの記憶内容の一例を示す説明図である。図５では、制御装置１０２が有する注視対象情報テーブル４２１の記憶内容の一例と注視対象範囲テーブル４２２の記憶内容の一例を説明する。
【００５３】
注視対象情報テーブル４２１および注視対象範囲テーブル４２２は、利用者の属性ごとに記憶されるテーブルである。図５で示す注視対象情報テーブル４２１は、レコード４２１−１〜レコード４２１−４を格納しており、注視対象範囲テーブル４２２は、レコード４２２−１〜レコード４２２−４を格納している。注視対象情報テーブル４２１は、利用者属性、注視対象用点滅周波数リスト、利用者識別用点滅周波数、という３つのフィールドを含む。また、注視対象範囲テーブル４２２は、利用者属性、注視対象範囲という２つのフィールドを含む。なお、注視対象情報テーブル４２１の利用者属性フィールドと注視対象範囲テーブル４２２の利用者属性フィールドとは１対１で紐づいている。
【００５４】
利用者属性フィールドには、注視対象を注視すべき利用者の属性が格納される。注視対象用点滅周波数リストフィールドには、利用者が注視すべき注視対象が点滅をする周期に対応する周波数のリストが格納される。利用者識別用点滅周波数フィールドには、注視対象とは別の位置で点滅しており利用者を識別する周波数が格納される。注視対象範囲フィールドには、注視対象が点滅する範囲が格納される。なお、注視対象用点滅周波数リストフィールドに設定された周波数が複数である場合、注視対象が複数あるため、注視対象範囲フィールドには、複数の注視対象に対応する複数の範囲が格納される。
【００５５】
たとえば、レコード４２１−２とレコード４２２−２では、利用者属性が装置１担当であり、装置１担当であることを識別する周波数が４５［Ｈｚ］であり、さらに、注視対象が１０［Ｈｚ］の周波数で点滅していることを示している。また、レコード４２１−２では、１０［Ｈｚ］で点滅する注視対象は、左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅することを示している。
【００５６】
また、レコード４２１−３とレコード４２２−３では、利用者属性がＩＤ２であり、ＩＤ２であることを識別する周波数が５０［Ｈｚ］であり、さらに、注視対象が２つあり、それぞれ、１０［Ｈｚ］、１５［Ｈｚ］の周波数で点滅していることを示している。また、２つの注視対象が、２つのディスプレイに別れて存在しており、１０［Ｈｚ］で点滅する注視対象が、ディスプレイ２０８−１内の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅する。また、１５［Ｈｚ］で点滅する注視対象は、ディスプレイ２０８−２内の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形の範囲で点滅する。
【００５７】
なお、図５で示した注視対象範囲テーブル４２２は、注視対象の範囲を格納するフィールドを有していたが、利用者識別用の点滅範囲を格納するフィールドを有していてもよい。また、利用者識別用光源が存在する場合、注視対象範囲テーブル４２２は、利用者識別用の点滅範囲を格納するフィールドに利用者識別用光源を示す識別情報を格納してもよい。たとえば、制御装置１０２が空港内の発着案内板であり、発着案内板の上部にある照明を利用者識別用光源として使用する場合、注視対象範囲テーブル４２２は、前述のフィールドに照明を示す識別情報を格納してあってもよい。
【００５８】
図６は、個別注視対象情報テーブルの一例を示す説明図である。図６では、判定装置１０１が有する個別注視対象情報テーブル１０３の記憶内容の一例を説明する。個別注視対象情報テーブル１０３は、注視対象情報テーブル４２１の記憶内容から、判定装置１０１の利用者の属性に対応するレコードを抽出したテーブルとなる。具体的に、個別注視対象情報テーブル１０３は、利用者属性、注視対象用点滅周波数リスト、利用者識別用点滅周波数という３つのフィールドを含む。個別注視対象情報テーブル１０３の各フィールドは、注視対象情報テーブル４２１の同名のフィールドと同じ情報が格納されるため、説明を省略する。
【００５９】
たとえば、図６で示す個別注視対象情報テーブル１０３は、判定装置１０１を利用する利用者の属性が装置１担当となるレコード１０３−１と、利用者の属性がＩＤ２となるレコード１０３−２とが存在する。
【００６０】
図７は、ＳＳＶＥＰの検出例を示す説明図である。図７では、制御装置１０２が注視対象を点滅させ、判定装置１０１がＳＳＶＥＰを検出するまでの例を示している。符号７０１で示す説明図は、制御装置１０２のＬＥＤが点滅する状態を示している。符号７０１で示すように一定の周波数で点滅するＬＥＤを目視した利用者から発せられた脳波信号をセンサ２０６が脳波信号として計測した様子を、グラフ７０２で示す。グラフ７０２は、横軸が時刻、縦軸が電位の振幅を示している。グラフ７０２で示すように、ＬＥＤが点滅をする周期に対応する周波数成分が脳波信号に重畳されている。
【００６１】
また、判定装置１０１は、センサ２０６によって計測した脳波信号を脳波信号蓄積テーブル４２３に蓄積する。符号７０３で示す説明図では、脳波信号蓄積テーブル４２３の記憶内容の一例を示している。脳波信号蓄積テーブル４２３は、計測された電位を時刻ごとに格納している。
【００６２】
続けて、判定装置１０１は、脳波信号蓄積テーブル４２３を参照して、脳波信号を周波数ごとに分析する。分析した結果をグラフ７０４にて示す。グラフ７０４は、横軸が周波数、縦軸が電位の振幅を示している。グラフ７０４では、周波数１０［Ｈｚ］と周波数４５［Ｈｚ］の成分にて振幅のピークがあることを示している。
【００６３】
図８は、Ｐ３００成分の検出例を示す説明図である。図８では、判定装置１０１が、ＥＲＰのＰ３００成分を検出している例を示している。グラフ８０１は、横軸が刺激後の時刻、縦軸が電位を示している。
【００６４】
グラフ８０１では、４００［ミリ秒］の時点でＰ３００成分となる最大振幅が出現していることを示している。なお、判定装置１０１は、脳波信号蓄積テーブル４２３を参照することで、Ｐ３００成分を検出することができる。また、グラフ８０１は、Ｐ１、Ｎ１、Ｐ２、Ｎ２、Ｐ３（Ｐ３００）といった成分が表れていることを示している。
【００６５】
図９は、利用者の注意状態の判定例を示す説明図（その１）である。図９では、利用者Ａ〜利用者Ｃの３人が存在し、それぞれ判定装置１０１−Ａ〜判定装置１０１−Ｃを携帯している。さらに、図９では、注視対象を表示するディスプレイ２０８が１台であり、個々の利用者の注視すべき注視対象が同一であるが、個々の利用者の注意状態が異なっている状況を示している。また、ディスプレイ２０８には、文字「Ａ」〜文字「Ｆ」を表示している。たとえば、ディスプレイ２０８が、原子炉を監視する中央制御室でのディスプレイであれば、文字「Ａ」〜文字「Ｆ」を表示する矩形領域が、原子炉内を撮影するカメラの画像となり、利用者Ａ〜利用者Ｃが、原子炉を監視する監視者となる。
【００６６】
初めに、１番目の処理として、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性を指定する。図９の例では、レコード４２１−２を指定する。２番目の処理として、制御装置１０２は、左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域９０１を注視対象としてレコード４２１−２が示すように周波数１０［Ｈｚ］で点滅させ、その他の領域を周波数４５［Ｈｚ］で点滅させる。具体的に、制御装置１０２は、文字「Ａ」の表示領域となる矩形領域９０１を周波数１０［Ｈｚ］で点滅させ、その他の背景部分、および「Ｂ」〜「Ｆ」の表示領域を周波数４５［Ｈｚ］で点滅させる。この状態で、利用者属性が装置１担当である利用者Ａ〜利用者Ｃは、注視対象を目視する。
【００６７】
３番目の処理として、判定装置１０１−Ａは、利用者Ａの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ａは、自装置の注視対象情報テーブル４２１から４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ａが注視対象を注視すべき利用者であり、１０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ａが注視対象を見ていることが特定できる。さらに、判定装置１０１−Ａは、Ｐ３００成分を検出したことで注視していることが特定できるため、４番目の処理として、注視対象に対する注意状態として注視状態であると判定する。
【００６８】
同様に、３番目の処理として、判定装置１０１−Ｂは、利用者Ｂの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出したが、Ｐ３００成分を検出していない。このとき、判定装置１０１−Ｂは、自装置の注視対象情報テーブル４２１から４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｂが注視対象を注視すべき利用者であり、１０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｂが注視対象を見ていることが特定できる。しかし、判定装置１０１−Ｂは、Ｐ３００成分を検出しなかったため注視していることが特定できず、４番目の処理として、注視対象に対する注意状態として注意漫然状態であると判定する。
【００６９】
同様に、３番目の処理として、判定装置１０１−Ｃは、利用者Ｃの脳波を計測し、４５［Ｈｚ］のＳＳＶＥＰを検出したが、１０［Ｈｚ］のＳＳＶＥＰを検出していない。このとき、判定装置１０１−Ｃは、自装置の注視対象情報テーブル４２１から、４５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｃが注視対象を注視すべき利用者であることが特定できる。しかし、判定装置１０１−Ｃは、１０［Ｈｚ］のＳＳＶＥＰを検出しなかったことで利用者Ｃが注視対象を見ていることが特定できず、４番目の処理として、注視対象に対する注意状態として注意散漫状態であると判定する。
【００７０】
図１０は、利用者の注意状態の判定例を示す説明図（その２）である。図１０では、利用者Ａ、利用者Ｄの２人が存在し、それぞれ判定装置１０１−Ａ、判定装置１０１−Ｄを携帯している。さらに、図１０では、注視対象を表示するディスプレイ２０８が１台であり、個々の利用者の注視すべき注視対象が異なっている状況を示している。なお、制御装置１０２と、利用者Ａに関しては、図９で示す状態と等しいため、説明を省略する。また、利用者Ｄは、利用者属性が装置２担当である。
【００７１】
３番目の処理として、判定装置１０１−Ｄは、利用者Ｄの脳波を計測し、４５［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ｄは、検出した４５［Ｈｚ］と１０［Ｈｚ］が、自装置の注視対象情報テーブル４２１の利用者識別用点滅周波数フィールドに存在しないことを判断する。結果、判定装置１０１−Ｄは、検出した４５［Ｈｚ］と１０［Ｈｚ］が利用者Ｄの注視対象に関係ないことを特定し、注意状態を判定しない。
【００７２】
図１１は、利用者の注意状態の判定例を示す説明図（その３）である。図１１では、利用者Ｅが存在し、注視対象が２つあり、注視対象を表示するディスプレイ２０８が２台である状況を示している。
【００７３】
初めに、１番目の処理として、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性を指定する。図１１の例では、レコード４２１−３を指定する。２番目の処理として、制御装置１０２は、ディスプレイ２０８−１の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域１１０１を注視対象としてレコード４２１−３が示すように周波数１０［Ｈｚ］で点滅させる。さらに、制御装置１０２は、ディスプレイ２０８−２の左上の座標（１０、１０）と右下の座標（２１０、２１０）で囲まれる矩形領域１１０２を注視対象として周波数１５［Ｈｚ］で点滅させ、その他の領域を周波数５０［Ｈｚ］で点滅させる。
【００７４】
具体的に、制御装置１０２は、ディスプレイ２０８−１の文字「Ａ」の表示領域となる矩形領域１１０１を周波数１０［Ｈｚ］で点滅させ、ディスプレイ２０８−２の文字「１」の表示領域となる矩形領域１１０２を周波数１５［Ｈｚ］で点滅させる。制御装置１０２は、矩形領域１１０１、矩形領域１１０２以外の背景部分、および「Ｂ」〜「Ｆ」、「２」〜「６」の表示領域を周波数５０［Ｈｚ］で点滅させる。この状態で、利用者Ｅは、注視対象を目視する。
【００７５】
３番目の処理として、判定装置１０１−Ｅは、利用者Ｅの脳波を計測し、５０［Ｈｚ］と１０［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。さらに、判定装置１０１−Ｅは、１５［Ｈｚ］のＳＳＶＥＰを検出し、かつ、同時期にＰ３００成分を検出する。このとき、判定装置１０１−Ｅは、注視対象情報テーブル４２１から、５０［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｅが注視対象を注視すべき利用者であることが特定できる。また、判定装置１０１−Ｅは、１０［Ｈｚ］と１５［Ｈｚ］のＳＳＶＥＰを検出したことで利用者Ｅが注視対象を見ていることが特定できる。さらに、判定装置１０１−Ｅは、１０［Ｈｚ］と１５［Ｈｚ］に対応するＰ３００成分を検出したことで注視していることが特定できるため、４番目の処理として、注視対象に対する注意状態として注視状態であると判定する。
【００７６】
続けて、図９〜図１１で示した注意状態を判定する判定システム１００のフローチャートについて、図１２、図１３で示す。図１２では、制御装置１０２の処理を示すフローチャートを示し、図１３では、判定装置１０１の処理を示すフローチャートを示す。
【００７７】
図１２は、制御装置の処理手順の一例を示すフローチャートである。制御装置１０２は、利用者属性に対する注視対象の表示要求を検出したか否かを判断する（ステップＳ１２０１）。注視対象を検出していない場合（ステップＳ１２０１：Ｎｏ）、制御装置１０２は、一定時間経過後、ステップＳ１２０１の処理を再び実行する。注視対象を検出した場合（ステップＳ１２０１：Ｙｅｓ）、制御装置１０２は、注視対象情報テーブル４２１から、利用者属性に対応する注視対象用点滅周波数と、利用者識別用点滅周波数と、を決定する（ステップＳ１２０２）。
【００７８】
続けて、制御装置１０２は、利用者識別用点滅周波数で、利用者識別用光源を点滅させ（ステップＳ１２０３）、注視対象用点滅周波数で、注視対象範囲にある注視対象を点滅させ（ステップＳ１２０４）、ステップＳ１２０１の処理に移行する。
【００７９】
図１３は、判定装置の処理手順の一例を示すフローチャートである。判定装置１０１は、利用者の脳波信号が周波数ごとに分析された分析結果を取得する（ステップＳ１３０１）。次に、判定装置１０１は、個別注視対象情報テーブル１０３のうち、利用者識別用点滅周波数のＳＳＶＥＰを検出したか否かを判断する（ステップＳ１３０２）。利用者識別用点滅周波数のＳＳＶＥＰを検出していない場合（ステップＳ１３０２：Ｎｏ）、判定装置１０１は、ステップＳ１３０１の処理を再び実行する。
【００８０】
利用者識別用点滅周波数のＳＳＶＥＰを検出している場合（ステップＳ１３０２：Ｙｅｓ）、判定装置１０１は、検出された利用者識別用点滅周波数に対応する注視対象用点滅周波数リストの先頭の周波数を取得する（ステップＳ１３０３）。続けて、判定装置１０１は、取得した注視対象用点滅周波数のＳＳＶＥＰを検出したか否かを判断する（ステップＳ１３０４）。注視対象用点滅周波数のＳＳＶＥＰを検出した場合（ステップＳ１３０４：Ｙｅｓ）、判定装置１０１は、ＳＳＶＥＰ検出時にＰ３００成分を検出したか否かを判断する（ステップＳ１３０５）。Ｐ３００成分を検出した場合（ステップＳ１３０５：Ｙｅｓ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注視状態であると判定する（ステップＳ１３０６）。
【００８１】
Ｐ３００成分を検出していない場合（ステップＳ１３０５：Ｎｏ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注意漫然状態であると判定する（ステップＳ１３０７）。注視対象用点滅周波数のＳＳＶＥＰを検出していない場合（ステップＳ１３０４：Ｎｏ）、判定装置１０１は、取得した注視対象用点滅周波数の注視対象に対する注意状態として注意散漫状態であると判定する（ステップＳ１３０８）。
【００８２】
ステップＳ１３０６〜ステップＳ１３０８の処理後、判定装置１０１は、注視対象用点滅周波数リストの全てに対して判定したか否かを判断する（ステップＳ１３０９）。全てに対して判定していない場合（ステップＳ１３０９：Ｎｏ）、判定装置１０１は、検出された利用者識別用点滅周波数に対応する注視対象用点滅周波数リストの次の周波数を取得し（ステップＳ１３１０）、ステップＳ１３０４の処理に移行する。
【００８３】
全てに対して判定している場合（ステップＳ１３０９：Ｙｅｓ）、判定装置１０１は、判定結果を総合し（ステップＳ１３１１）、総合した判定結果を出力し（ステップＳ１３１２）、ステップＳ１３０１の処理に移行する。
【００８４】
なお、判定結果の総合方法の一例として、判定装置１０１は、１つ目の判定基準として、複数の判定結果のうち、一つ以上の注意散漫状態の注視対象が存在する場合、総合した判定結果を注意散漫状態として判定する。また、判定装置１０１は、２つ目の判定基準として、１つ目の判定基準に当てはまらず、複数の判定結果のうち、一つ以上の注意漫然状態の注視対象が存在する場合、総合した判定結果を注意漫然状態として判定する。さらに、判定装置１０１は、３つ目の判定基準として、２つ目の判定基準に当てはまらなかった場合、総合した判定結果を注視状態として判定する。
【００８５】
また、判定結果の出力方法の一例として、判定装置１０１は、注視対象が注視状態にある個数、注視対象が注意漫然状態にある個数、注視対象が注意散漫状態にある個数を出力してもよい。
【００８６】
以上説明したように、判定装置、判定方法、および判定プログラムによれば、非注視対象が点滅をする周期に対応する第１の周波数の成分と、注視対象が点滅をする周期に対応する第２の周波数の成分と、が脳波信号に含まれるかを判定する。これにより、判定装置は、利用者が注視すべき注視対象に対してどのように見ているかを容易に識別できる。
【００８７】
また、判定装置は、脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定し、３つの判定結果より、注視対象を注視すべき利用者の注意状態を出力してもよい。これにより、判定装置は、利用者の注視対象に対する注意状態について、注視対象を注意して見ているか否かについて判定することができる。また、判定装置からの出力を受け付けた装置は、利用者の注意状態に対応した適切なアラートを表示することができる。
【００８８】
また、判定装置は、脳波信号に第１の周波数の成分と第２の周波数の成分とが含まれ、さらに、脳波信号から視覚刺激に関連する特徴量が所定量以上存在した場合、注意状態を注視状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を注視している場合に、注視状態であるとして判定することができる。
【００８９】
また、判定装置は、脳波信号に第１の周波数の成分と、第２の周波数の成分とが含まれ、さらに、脳波信号から視覚刺激に関連する特徴量が所定量以上存在しない場合、注意状態を注意漫然状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を見ているが、注視していない場合に、注意漫然状態として出力することができる。なお、判定装置からの出力を受け付けた装置は、利用者の注意漫然状態に対応したアラートを表示することができる。たとえば、前述の装置は、“注視対象をちゃんと注視していません”という旨のアラートを表示することができる。
【００９０】
また、判定装置は、脳波信号に第１の周波数の成分が含まれており、第２の周波数の成分が含まれない場合、注意状態を注意散漫状態として出力してもよい。これにより、判定装置は、注視対象を注視すべき利用者が注視対象を見ていない場合に、注意散漫状態として出力することができる。なお、判定装置からの出力を受け付けた装置は、利用者の注意散漫状態に対応したアラートを表示することができる。たとえば、前述の装置は、“注視対象が異なります”という旨のアラートを表示することができる。
【００９１】
また、判定装置は、注視対象に対する注意状態を自動判定できるため、利用者に注視対象の確認をさせずに済み、利用者にとって煩わしい作業を行わずに済む。また、判定装置は、注視対象に対する目視の有無、注視対象の注意状態といった判定を、脳波解析に基づいて判定するため、目視を検出する視線検知装置を用意しなくて済む。
【００９２】
また、判定システムは、利用者属性を用いることで、注意状態を判定する利用者を明示的に指定することができる。たとえば、ディスプレイが原子炉を監視する中央制御室での各画面である場合、判定システムは、それぞれの画面ごとに、利用者属性を指定することで、特定の画面を注視すべき利用者を明示的に特定することができる。
【００９３】
また、判定システムは、利用者属性ごとに注視対象に対する点滅周波数を設定することで、単純に注視対象ごとに点滅周波数を設定する場合に比べ、設定される周波数の個数を減少させることができる。
【００９４】
また、判定システムは、注視対象を表示する表示装置と、注視対象に対する注意状態を判定する判定装置と、に分割し、脳波信号を判定装置から表示装置に送信しないため、個人情報である脳波信号の流出を防ぎ、利用者のプライバシーを確保できる。
【００９５】
（実施の形態２の説明）
実施の形態１にかかる判定システム１００は、注視対象の周波数と、利用者を識別する周波数と、を利用者属性ごとに設定していた。しかしながら、ＳＳＶＥＰ検出として設定可能な周波数には限りがあり、利用者属性が多い場合、設定可能な周波数が不足する可能性がある。実施の形態２にかかる判定システム１００では、ＳＳＶＥＰ検出に利用する周波数の効率的な設定方法について説明を行う。
【００９６】
図１４は、実施の形態２にかかる判定システムのハードウェア例を示す説明図である。図１４で示す、実施の形態２にかかる判定システム１４００は、判定装置１０１と制御装置１０２とに加え、ＳＳＶＥＰ検出の周波数を設定する設定装置１４０１を含む。実施の形態２にかかる判定装置１０１と制御装置１０２は、実施の形態１にかかる判定装置１０１と制御装置１０２と同一のハードウェアである。したがって、図１４では、判定装置１０１と制御装置１０２の説明を省略し、ＣＰＵ２０１〜フラッシュＲＯＭ２０４、センサ２０６、バス２０７、ＣＰＵ２１１〜光ディスク２１７、バス２２０の図示を省略する。
【００９７】
設定装置１４０１は、ＣＰＵ１４１１と、ＲＯＭ１４１２と、ＲＡＭ１４１３と、磁気ディスクドライブ１４１４と、磁気ディスク１４１５と、Ｉ／Ｆ１４１６と、を含む。また、各部はバス１４１７によってそれぞれ接続されている。
【００９８】
ＣＰＵ１４１１は、設定装置１４０１の全体の制御を司る。ＲＯＭ１４１２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ１４１３は、ＣＰＵ１４１１のワークエリアとして使用される。磁気ディスクドライブ１４１４は、ＣＰＵ１４１１の制御にしたがって磁気ディスク１４１５に対するデータのリード／ライトを制御する。磁気ディスク１４１５は、磁気ディスクドライブ１４１４の制御で書き込まれたデータを記憶する。
【００９９】
Ｉ／Ｆ１４１６は、通信回線を通じてＬＡＮ、ＷＡＮ、インターネットなどのネットワーク１４１８に接続され、ネットワーク１４１８を介して判定装置１０１と制御装置１０２といった他の装置に接続される。そして、Ｉ／Ｆ１４１６は、ネットワーク１４１８と内部のインターフェースを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ２１９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。なお、設定装置１４０１は、ユーザとのインターフェースとして、キーボードと、マウスと、を有していてもよい。
【０１００】
図１５は、実施の形態２にかかる判定システムの機能例を示すブロック図である。なお、図１５で示す、実施の形態２にかかる判定装置１０１と制御装置１０２は、実施の形態１にかかる判定装置１０１と制御装置１０２と同一の機能を有するため、説明を省略する。設定装置１４０１は、記憶部１５０１と、受付部１５０２と、検出部１５０３と、判定部１５０４と、抽出部１５０５と、通知部１５０６と、を含む。この制御部となる機能（受付部１５０２〜通知部１５０６）は、記憶装置に記憶されたプログラムをＣＰＵ１４１１が実行することにより、その機能を実現する。記憶装置とは、具体的には、たとえば、図１４に示したＲＯＭ１４１２、ＲＡＭ１４１３、磁気ディスクドライブ１４１４などである。
【０１０１】
また、設定装置１４０１は、記憶部１５０１内にある利用者属性管理テーブル１５１１と設定可能周波数管理テーブル１５１２にアクセス可能である。利用者属性管理テーブル１５１１は、利用者属性と利用者が注視対象を注視すべき状態の条件とを記憶するテーブルである。設定可能周波数管理テーブル１５１２は、非注視対象および注視対象の点滅周波数として設定可能な周波数を記憶するテーブルである。なお、利用者属性管理テーブル１５１１の詳細については、図１６にて後述し、設定可能周波数管理テーブル１５１２の詳細については、図１７にて後述する。
【０１０２】
記憶部１５０１は、非注視対象および注視対象の点滅周波数として設定可能な周波数群と利用者が注視対象を注視すべき状態、または時間とを記憶する。なお、記憶部１５０１はＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置である。
【０１０３】
受付部１５０２は、利用者の状態を受け付ける機能を有する。たとえば、受付部１５０２は、利用者が携帯している判定装置１０１から、利用者の状態として、判定装置１０１の位置情報を受け付ける。または、受付部１５０２は、利用者が判定装置１０１を装着し、脳波信号を検出したことを受け付けてもよい。なお、受付結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０４】
検出部１５０３は、利用者の状態の変化を検出する機能を有する。たとえば、検出部１５０３は、既に受け付けていた利用者Ａの状態と、新しく受け付けた利用者の状態とが異なる場合、利用者の状態の変化を検出する。または、検出部１５０３は、現在時刻が記憶部１５０１に記憶されている時間内となったことを検出してもよい。たとえば、設定装置は、タイマ、またはネットワーク１４１８などから現在時刻を取得し、現在時刻が、記憶部１５０１に記憶されている時間内となったことを検出する。なお、検出結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０５】
判定部１５０４は、検出部１５０３によって変化を検出した場合、記憶部１５０１に記憶されている状態と変化後の利用者の状態とが一致するか否かを判定する機能を有する。たとえば、判定部１５０４は、利用者属性管理テーブル１５１１に、利用者Ａが注視対象を目視可能な部屋１にいるという状態と、変化後の利用者Ａの状態として、利用者Ａが部屋１にいるという状態が一致するかを判定する。なお、判定結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０６】
抽出部１５０５は、判定部１５０４によって一致したと判定された場合、記憶部１５０１に記憶されている周波数群から非注視対象が点滅をする周期に対応する第１の周波数と、注視対象が点滅をする周期に対応する第２の周波数と、を抽出する機能を有する。たとえば、抽出部１５０５は、設定可能周波数管理テーブル１５１２から、第１の周波数と第２の周波数を抽出する。また、抽出部１５０５は、検出部１５０３によって時間内になったことが検出された場合、第１および第２の周波数を抽出してもよい。なお、抽出結果は、ＲＡＭ１４１３、磁気ディスクドライブ１４１４といった記憶装置に記憶される。
【０１０７】
通知部１５０６は、抽出部１５０５によって抽出した第１および第２の周波数を制御装置１０２および判定装置１０１に通知する機能を有する。具体的に、通知部１５０６は、Ｉ／Ｆ１４１６によって、第１および第２の周波数を判定装置１０１と制御装置１０２に通知する。
【０１０８】
図１６は、利用者属性管理テーブルの記憶内容の一例を示す説明図である。図１６では、設定装置１４０１が有する利用者属性管理テーブル１５１１の記憶内容の一例を説明する。図１６で示す利用者属性管理テーブル１５１１は、レコード１５１１−１〜レコード１５１１−６を格納している。利用者属性管理テーブル１５１１は、利用者属性、属性条件という２つのフィールドを含む。利用者属性フィールドには、注視対象を注視すべき利用者の属性が格納される。属性条件フィールドには、利用者属性フィールドに格納された利用者属性に属する利用者が、注視対象を注視すべき状態、または時間が格納される。
【０１０９】
たとえば、レコード１５１１−２は、時間０：００〜１２：００において利用者属性がＩＤ２となる利用者が注視対象を注視すべき時間であることを示している。また、レコード１５１１−４は、利用者属性が装置１担当である利用者が部屋１にいることが、利用者が注視対象を注視すべき状態であることを示している。
【０１１０】
図１７は、設定可能周波数管理テーブルの記憶内容の一例を示す説明図である。図１７では、設定装置１４０１が有する設定可能周波数管理テーブル１５１２の記憶内容の一例を説明する。図１７で示す設定可能周波数管理テーブル１５１２は、レコード１５１２−１を格納している。設定可能周波数管理テーブル１５１２は、注視対象用点滅周波数、利用者識別用点滅周波数という２つのフィールドを含む。注視対象用点滅周波数フィールドには、注視対象用点滅周波数として利用可能な周波数群が格納される。利用者識別用点滅周波数フィールドには、利用者識別用点滅周波数として利用可能な周波数群が格納される。
【０１１１】
たとえば、レコード１５１２−１は、注視対象用点滅周波数として、５［Ｈｚ］、１０［Ｈｚ］、１５［Ｈｚ］、…、が利用可能であり、利用者識別用点滅周波数として、４０［Ｈｚ］、４５［Ｈｚ］、５０［Ｈｚ］、…、が利用可能であることを示している。なお、ＳＳＶＥＰは、点滅周波数が１０［Ｈｚ］、１６［Ｈｚ］、４０［Ｈｚ］〜５０［Ｈｚ］の付近に感度が高い領域が存在するため、設定可能周波数管理テーブル１５１２に登録される周波数としては、前述した周波数付近が好ましい。
【０１１２】
図１８は、注視対象情報テーブルの更新例を示す説明図である。図１８では、設定装置１４０１の処理によって注視対象情報テーブル４２１が更新される例を示している。符号１８０１は、制御装置１０２が置かれている場所の、時刻０：００〜時刻１２：００の状態を示しており、符号１８０２は、制御装置１０２が置かれている場所の、時刻１２：００〜時刻２４：００までの状態を示している。
【０１１３】
符号１８０１では、時刻０：００〜時刻１２：００であるため、レコード１５１１−２の属性条件が成立する。この場合、設定装置１４０１は、レコード１５１１−２に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を設定する。
【０１１４】
具体的には、設定装置１４０１は、設定可能周波数管理テーブル１５１２の利用者識別用点滅周波数フィールドから、たとえば、５０［Ｈｚ］を抽出し、注視対象用点滅周波数フィールドのうち、たとえば、１５［Ｈｚ］を抽出する。設定装置１４０１は、対応する利用者属性と、抽出された注視対象用点滅周波数、利用者識別用点滅周波数から、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する。たとえば、設定装置１４０１は、“ＩＤ２”、“１５”、“５０”を１レコードとする、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する。
【０１１５】
続けて、設定装置１４０１は、生成した注視対象情報テーブル４２１、個別注視対象情報テーブル１０３をそれぞれ制御装置１０２、判定装置１０１に通知する。通知結果を受け付けた制御装置１０２は、レコード４２１−３の注視対象用点滅周波数リストフィールドを“１５”に更新し、利用者識別用点滅周波数フィールドを“５０”に更新する。なお、通知された利用者属性が格納されたレコードが、注視対象情報テーブル４２１に存在しない場合、制御装置１０２は、受け付けた利用者属性、注視対象用点滅周波数、利用者識別用点滅周波数、を１レコードとして注視対象情報テーブル４２１に追加する。また、判定装置１０１も、個別注視対象情報テーブル１０３に対して同様の処理を行う。
【０１１６】
次に、時刻が経過し、設定装置１４０１は、符号１８０１から符号１８０２に変化したことを検出する。設定装置１４０１は、レコード１５１１−２の属性条件が成立しなくなったため、設定した１５［Ｈｚ］と５０［Ｈｚ］を回収する。具体的に、設定装置１４０１は、制御装置１０２に注視対象情報テーブル４２１のレコードのうち、成立しなくなった属性条件に対応する利用者属性のレコードの削除要求を行う。続けて、設定装置１４０１は、該当のレコードの注視対象用点滅周波数、利用者識別用点滅周波数を、設定可能周波数管理テーブル１５１２に追加する。
【０１１７】
続けて、設定装置１４０１は、レコード１５１１−３の属性条件が成立するため、設定装置１４０１は、レコード１５１１−３に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を設定する。具体的に、図１８の例では、設定装置１４０１は、前述の処理にて回収した１５［Ｈｚ］と５０［Ｈｚ］を抽出する。周波数を抽出した後、設定装置１４０１は、対応する利用者属性と、割り当てた注視対象用点滅周波数、利用者識別用点滅周波数から生成された注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を、制御装置１０２、判定装置１０１に通知する。
【０１１８】
このように、図１８で示す更新例を行った設定装置１４０１、結果的に、利用者属性ＩＤ２、利用者属性ＩＤ３に対して同一の周波数を設定しており、利用する周波数の個数を減らすことができる。
【０１１９】
図１９は、設定装置の処理手順の一例を示すフローチャートである。設定装置１４０１は、利用者の状態を受け付け（ステップＳ１９０１）、利用者の状態の変化を検出したか否かを判断する（ステップＳ１９０２）。
【０１２０】
変化を検出した場合（ステップＳ１９０２：Ｙｅｓ）、設定装置１４０１は、属性条件フィールドの状態と変化後の利用者の状態とが一致するか否かを判断する（ステップＳ１９０３）。変化を検出しなかった場合（ステップＳ１９０２：Ｎｏ）、または、一致しない場合（ステップＳ１９０３：Ｎｏ）、設定装置１４０１は、現在時刻が属性条件フィールドの時間内となったか否かを判断する（ステップＳ１９０４）。時間内になった場合（ステップＳ１９０４：Ｙｅｓ）、または、一致した場合（ステップＳ１９０３：Ｙｅｓ）、設定装置１４０１は、現時点での状態、時間で成立しない利用者属性に設定された周波数を回収する（ステップＳ１９０５）。時間内になっていない場合（ステップＳ１９０４：Ｎｏ）、設定装置１４０１は、ステップＳ１９０１の処理に移行する。
【０１２１】
周波数の回収後、設定装置１４０１は、設定可能周波数管理テーブル１５１２から現時点での状態、時間に対応する利用者属性の注視対象用点滅周波数、利用者識別用点滅周波数を抽出する（ステップＳ１９０６）。次に、設定装置１４０１は、現時点での状態、時間に対応する利用者属性と抽出された注視対象用点滅周波数、利用者識別用点滅周波数とから、注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を生成する（ステップＳ１９０７）。続けて、設定装置１４０１は、生成した注視対象情報テーブル４２１、個別注視対象情報テーブル１０３を、それぞれ制御装置１０２、判定装置１０１に通知し（ステップＳ１９０８）、ステップＳ１９０１の処理に移行する。
【０１２２】
なお、通知結果を受け付けた制御装置１０２は、自装置の注視対象情報テーブル４２１のうち、受け付けた利用者属性に対応するレコードに関して、注視対象用点滅周波数、利用者識別用点滅周波数を更新する。同様に、通知を受け付けた判定装置１０１は、自装置の個別注視対象情報テーブル１０３のうち、受け付けた利用者属性に対応するレコードに関して、注視対象用点滅周波数リスト、利用者識別用点滅周波数を更新する。
【０１２３】
以上説明したように、設定装置によれば、ＳＳＶＥＰに設定可能な周波数群と利用者が注視対象を注視すべき状態を記憶する。続けて、設定装置は、利用者の状態が変化した場合、記憶された状態と一致した場合に、記憶された周波数群から、非注視対象と注視対象の周波数を設定する。これにより、設定装置は、ＳＳＶＥＰ検出に利用可能な周波数を使いまわすことができ、利用可能な周波数を効率的に設定でき、多くの利用者に対応することができる。
【０１２４】
また、設定装置は、ＳＳＶＥＰに設定可能な周波数群と利用者が注視対象を注視すべき時間を記憶する。続けて、設定装置は、前述の時間になった場合に、記憶された周波数群から、非注視対象と注視対象の周波数を設定する。これにより、設定装置は、ＳＳＶＥＰ検出に利用可能な周波数を使いまわすことができ、利用可能な周波数を効率的に運用でき、多くの利用者に対応することができる。たとえば、設定装置は、注視対象を時間ごとに分担して注視する場合、注視対象に常に同じ周波数を設定することができ、周波数を有効に設定することができる。
【０１２５】
なお、実施の形態１、２で説明した判定方法、設定方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本判定プログラム、本設定プログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また本判定プログラム、本設定プログラムは、インターネット等のネットワークを介して配布してもよい。
【０１２６】
上述した実施の形態１、２に関し、さらに以下の付記を開示する。
【０１２７】
（付記１）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶する記憶部と、
利用者の脳波信号が周波数ごとに分析された分析結果を取得する取得部と、
前記取得部によって取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定する第１の判定部と、
前記取得部によって取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定する第２の判定部と、
前記第１および第２の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する出力部と、
を備えることを特徴とする判定装置。
【０１２８】
（付記２）前記脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定する第３の判定部をさらに備え、
前記出力部は、
前記第１、第２および第３の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
ことを特徴とする付記１に記載の判定装置。
【０１２９】
（付記３）前記出力部は、
前記第１の判定部によって利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在したと判定された場合、前記注意状態を注視状態として出力する、
ことを特徴とする付記２に記載の判定装置。
【０１３０】
（付記４）前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在しないと判定された場合、前記注意状態を注意漫然状態として出力する、
ことを特徴とする付記２に記載の判定装置。
【０１３１】
（付記５）前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって利用者が注視対象を見ていないことが判定された場合、前記注意状態を注意散漫状態として出力する、
ことを特徴とする付記１または２に記載の判定装置。
【０１３２】
（付記６）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能な設定装置であって、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶する記憶部と、
前記利用者の状態の変化を検出する検出部と、
前記検出部によって前記変化を検出した場合、前記記憶部に記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定する判定部と、
前記判定部によって一致したと判定された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する抽出部と、
前記抽出部によって抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する通知部と、
を備えることを特徴とする設定装置。
【０１３３】
（付記７）前記記憶部は、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき時間とを記憶し、
前記検出部は、
現在時刻が前記記憶部に記憶されている時間内となったことを検出し、
前記抽出部は、
前記検出部によって前記時間内になったことが検出された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する、
ことを特徴とする付記６に記載の設定装置。
【０１３４】
（付記８）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータが、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行することを特徴とする判定方法。
【０１３５】
（付記９）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能であり、前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶するコンピュータが、
前記利用者の状態の変化を検出し、
前記変化を検出した場合、記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定し、
一致したと判定された場合、記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、
抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する、
処理を実行することを特徴とする設定方法。
【０１３６】
（付記１０）注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータに、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行させることを特徴とする判定プログラム。
【０１３７】
（付記１１）注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能であり、前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶するコンピュータに、
前記利用者の状態の変化を検出し、
前記変化を検出した場合、記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定し、
一致したと判定された場合、記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出し、
抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する、
処理を実行させることを特徴とする設定プログラム。
【符号の説明】
【０１３８】
１００ 判定システム
１０１ 判定装置
１０２ 制御装置
１０３ 個別注視対象情報テーブル
２０１ ＣＰＵ
２０６ センサ
２０７ バス
４０１ 記憶部
４０２ 分析部
４０３ 取得部
４０４ 判定部
４０５ 判定部
４０６ 判定部
４０７ 出力部
１４００ 判定システム
１４０１ 設定装置
１４１１ ＣＰＵ
１５０１ 記憶部
１５０２ 受付部
１５０３ 検出部
１５０４ 判定部
１５０５ 抽出部
１５０６ 通知部
１５１１ 利用者属性管理テーブル
１５１２ 設定可能周波数管理テーブル
【特許請求の範囲】
【請求項１】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶する記憶部と、
利用者の脳波信号が周波数ごとに分析された分析結果を取得する取得部と、
前記取得部によって取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定する第１の判定部と、
前記取得部によって取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定する第２の判定部と、
前記第１および第２の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する出力部と、
を備えることを特徴とする判定装置。
【請求項２】
前記脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定する第３の判定部をさらに備え、
前記出力部は、
前記第１、第２および第３の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
ことを特徴とする請求項１に記載の判定装置。
【請求項３】
前記出力部は、
前記第１の判定部によって利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在したと判定された場合、前記注意状態を注視状態として出力する、
ことを特徴とする請求項２に記載の判定装置。
【請求項４】
前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在しないと判定された場合、前記注意状態を注意漫然状態として出力する、
ことを特徴とする請求項２に記載の判定装置。
【請求項５】
前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって利用者が注視対象を見ていないことが判定された場合、前記注意状態を注意散漫状態として出力する、
ことを特徴とする請求項１または２に記載の判定装置。
【請求項６】
注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能な設定装置であって、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶する記憶部と、
前記利用者の状態の変化を検出する検出部と、
前記検出部によって前記変化を検出した場合、前記記憶部に記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定する判定部と、
前記判定部によって一致したと判定された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する抽出部と、
前記抽出部によって抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する通知部と、
を備えることを特徴とする設定装置。
【請求項７】
前記記憶部は、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき時間とを記憶し、
前記検出部は、
現在時刻が前記記憶部に記憶されている時間内となったことを検出し、
前記抽出部は、
前記検出部によって前記時間内になったことが検出された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する、
ことを特徴とする請求項６に記載の設定装置。
【請求項８】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータが、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行することを特徴とする判定方法。
【請求項９】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータに、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行させることを特徴とする判定プログラム。
【請求項１】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶する記憶部と、
利用者の脳波信号が周波数ごとに分析された分析結果を取得する取得部と、
前記取得部によって取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定する第１の判定部と、
前記取得部によって取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定する第２の判定部と、
前記第１および第２の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する出力部と、
を備えることを特徴とする判定装置。
【請求項２】
前記脳波信号から視覚刺激に関連する特徴量が所定量以上存在したか否かを判定する第３の判定部をさらに備え、
前記出力部は、
前記第１、第２および第３の判定部による判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
ことを特徴とする請求項１に記載の判定装置。
【請求項３】
前記出力部は、
前記第１の判定部によって利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在したと判定された場合、前記注意状態を注視状態として出力する、
ことを特徴とする請求項２に記載の判定装置。
【請求項４】
前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって前記利用者が注視対象を見ていることが判定され、かつ、前記第３の判定部によって前記視覚刺激に関連する特徴量が前記所定量以上存在しないと判定された場合、前記注意状態を注意漫然状態として出力する、
ことを特徴とする請求項２に記載の判定装置。
【請求項５】
前記出力部は、
前記第１の判定部によって前記利用者が注視対象を注視すべき状態であることが判定され、第２の判定部によって利用者が注視対象を見ていないことが判定された場合、前記注意状態を注意散漫状態として出力する、
ことを特徴とする請求項１または２に記載の判定装置。
【請求項６】
注視対象から所定範囲内にある非注視対象および前記注視対象が点滅をする周期に対応する周波数を制御する制御装置と利用者に携帯され前記利用者が注視すべき前記注視対象の注意状態を判定する判定装置とに接続可能な設定装置であって、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき状態とを記憶する記憶部と、
前記利用者の状態の変化を検出する検出部と、
前記検出部によって前記変化を検出した場合、前記記憶部に記憶されている状態と変化後の前記利用者の状態とが一致するか否かを判定する判定部と、
前記判定部によって一致したと判定された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する抽出部と、
前記抽出部によって抽出した前記第１および第２の周波数を前記制御装置および前記判定装置に通知する通知部と、
を備えることを特徴とする設定装置。
【請求項７】
前記記憶部は、
前記非注視対象および前記注視対象の点滅周波数として設定可能な周波数群と前記利用者が前記注視対象を注視すべき時間とを記憶し、
前記検出部は、
現在時刻が前記記憶部に記憶されている時間内となったことを検出し、
前記抽出部は、
前記検出部によって前記時間内になったことが検出された場合、前記記憶部に記憶されている周波数群から前記非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を抽出する、
ことを特徴とする請求項６に記載の設定装置。
【請求項８】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータが、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行することを特徴とする判定方法。
【請求項９】
注視対象から所定範囲内にある非注視対象が点滅をする周期に対応する第１の周波数と、前記注視対象が点滅をする周期に対応する第２の周波数と、を記憶するコンピュータに、
利用者の脳波信号が周波数ごとに分析された分析結果を取得し、
取得された分析結果から前記第１の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記利用者が前記注視対象を注視すべき状態か否かを判定し、
取得された分析結果から前記第２の周波数の成分が前記脳波信号に含まれているか否かに応じて、前記注視対象の注意状態を判定し、
判定された２つの判定結果に基づいて、前記利用者が注視すべき前記注視対象に対する注意状態を出力する、
処理を実行させることを特徴とする判定プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【公開番号】特開２０１３−２７４３８（Ｐ２０１３−２７４３８Ａ）
【公開日】平成２５年２月７日（２０１３．２．７）
【国際特許分類】
【出願番号】特願２０１１−１６３７６０（Ｐ２０１１−１６３７６０）
【出願日】平成２３年７月２６日（２０１１．７．２６）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
【公開日】平成２５年２月７日（２０１３．２．７）
【国際特許分類】
【出願日】平成２３年７月２６日（２０１１．７．２６）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
[ Back to top ]