携帯端末
【課題】ユーザが手を動かせない状況でも、ユーザの操作性に優れ、ユーザによる誤動作が少ない制御が可能な携帯端末を提供する。
【解決手段】携帯端末１は、ユーザの瞳及び顔の動作を検出する動作検出部３と、ユーザの瞳の動作に関連付けて、表示部２に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納部６と、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納部７と、動作検出部３によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する動作判断部４と、動作判断部４によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御部５と、を備える。
【解決手段】携帯端末１は、ユーザの瞳及び顔の動作を検出する動作検出部３と、ユーザの瞳の動作に関連付けて、表示部２に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納部６と、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納部７と、動作検出部３によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する動作判断部４と、動作判断部４によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御部５と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザの瞳及び顔の動作に対応した制御を行う携帯端末に関する。
【背景技術】
【０００２】
近年、ユーザが手を動かせない状況でも、ユーザの目の動きで端末の操作を行える技術がある。例えば、特許文献１では、ユーザの眼球の黒目の動きと瞬きの有無に基づいて、表示画面中の項目選択手段を移動し、選択する携帯端末が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１０２４１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した携帯端末では黒目の動きと瞬きの有無のみに基づいた端末操作しか行えず、ユーザの操作性は悪く、それゆえにユーザによる誤動作も多いという問題があった。
【０００５】
本発明は、上記課題の解決のためになされたものであり、ユーザが手を動かせない状況でも、ユーザの操作性に優れ、ユーザによる誤動作が少ない制御が可能な携帯端末を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題の解決のため、本発明に係る携帯端末は、ユーザの瞳及び顔の動作を検出する動作検出手段と、ユーザの瞳の動作に関連付けて、表示手段に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納手段と、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納手段と、動作検出手段によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する動作判断手段と、動作判断手段によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御手段と、を備えていることを特徴としている。
【０００７】
この携帯端末では、ユーザの瞳及び顔の動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かが判断され、一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択が制御される。この携帯端末では、ボタン等の操作がなされずとも、ユーザによる瞳及び顔の動作を検出してカーソルの移動や処理の実行・停止の選択がなされるので、ユーザは画面を見たままの状態で簡便に携帯端末を操作できる。また、この携帯端末では、瞳の動作による操作コマンドと、顔の動作による選択コマンドとを切り分けているので、ユーザの操作性を確保でき、かつ誤動作を防止できる。
【０００８】
また、操作コマンド格納手段には、優先順位が付された複数の操作コマンドが格納され、選択コマンド格納手段には、優先順位が付された複数の選択コマンドが格納され、動作判断手段は、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かを判断することが好ましい。
【０００９】
この携帯端末では、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かが判断される。これにより、ユーザは、操作コマンド又は選択コマンドの優先順位を高くすることで、ユーザが意図した制御を優先的に実行させることができる。よって、この携帯端末は、ユーザの操作性に優れており、それゆえに、ユーザによる誤動作をより少なくすることができる。
【００１０】
また、操作コマンドには、ユーザの瞳の動作によるカーソルの移動を開始する開始コマンドと、ユーザの瞳の動作によるカーソルの移動を終了する終了コマンドとが含まれていることが好ましい。
【００１１】
この場合、ユーザは開始コマンドと終了コマンドを用いてカーソルの移動の開始と終了を区切ることで、カーソルの移動を制御したい状況においてのみ、携帯端末にカーソルの移動を制御させることができる。したがって誤動作をより確実に防止できる。
【００１２】
また、操作コマンドには、カーソルの位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させる位置復帰コマンドが含まれていることが好ましい。
【００１３】
この場合、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００１４】
また、選択コマンドには、ユーザの顔の動作による処理の実行・停止の選択を開始する開始コマンドと、ユーザの顔の動作による処理の実行・停止の選択を終了する終了コマンドとが含まれていることが好ましい。
【００１５】
この場合、ユーザは開始コマンドと終了コマンドを用いて処理の実行・停止の選択の開始と終了を区切ることで、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末に処理の実行・停止の選択を制御させることができる。したがって誤動作をより確実に防止できる。
【発明の効果】
【００１６】
本発明によれば、ユーザが手を動かせない状況でも、ユーザの操作性に優れ、ユーザによる誤動作が少ない制御が可能な携帯端末を提供することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施形態に係る携帯端末の機能的な構成要素を示すブロック図である。
【図２】携帯端末１のハードウェア構成図である。
【図３】操作コマンド格納部６が保持するデータの例を示すテーブルである。
【図４】選択コマンド格納部７が保持するデータの例を示すテーブルである。
【図５】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図６】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図７】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図８】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図９】携帯端末１の動作を示すフローチャート図である。
【図１０】携帯端末１の動作を示すフローチャート図である。
【発明を実施するための形態】
【００１８】
図１は、本発明に係る携帯端末の一実施形態を示す概要図である。携帯端末１は、図１に示すように、機能的な構成要素として、動作検出部３（動作検出手段）、動作判断部４（動作判断手段）、処理制御部５（処理制御手段）、操作コマンド格納部６（操作コマンド格納手段）、及び選択コマンド格納部７（選択コマンド格納手段）を備えている。また、携帯端末１は、図１に示すように、物理的な構成要素の一つとして表示部２（表示手段）を備えている。
【００１９】
携帯端末１は、ＣＰＵ等のハードウェアから構成されているものである。図２は、携帯端末１のハードウェア構成図である。図１に示される携帯端末１は、物理的には、図２に示すように、ＣＰＵ５１、主記憶装置であるＲＡＭ５２及びＲＯＭ５３、入力デバイスである数字キーやカメラ等の入力装置５４、ディスプレイ等の出力装置５５、ネットワークカード等のデータ送受信デバイスである通信モジュール５６、ハードディスク等の補助記憶装置５７等を含むコンピュータシステムとして構成されている。図１に示す各構成要素の機能は、図２に示すＣＰＵ５１、ＲＡＭ５２等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、ＣＰＵ５１の制御のもとで入力装置５４、出力装置５５、通信モジュール５６を動作させるとともに、ＲＡＭ５２や補助記憶装置５７におけるデータの読み出し及び書き込みを行うことで実現される。
【００２０】
以下、図１に示す構成要素に基づいて、携帯端末１の各構成要素を説明する。
【００２１】
携帯端末１はユーザインタフェースとしてグラフィカルユーザインタフェースを採用しており、表示部２は、グラフィカルユーザインタフェースにおけるグラフィックを表示する。グラフィカルユーザインタフェースにおけるグラフィックの一例としては、アイコン、カーソル、ダイアログボックス、及びボタンなどが挙げられる。
【００２２】
動作検出部３は、ユーザの瞳及び顔の動作を検出する。例えば、入力装置５４であるカメラが一定時間間隔で撮像したユーザの瞳及び顔の画像を基に、動作検出部３は、撮像した画像の差分情報からユーザの瞳及び顔の動作を検出する。
【００２３】
操作コマンド格納部６は、ユーザの瞳の動作に関連付けて、表示部２に表示されるカーソルの移動に関する操作コマンドを格納する。
【００２４】
操作コマンド格納部６には、優先順位が付された複数の操作コマンドが格納されてもよい。後述の動作判断部４は、優先順位が付された複数の操作コマンドのうち、優先順位の高い順からユーザの瞳の動作が操作コマンドに一致するか否かを判断し、後述の処理制御部５は、一致した操作コマンドに対応するカーソルの移動を制御する。つまり、ユーザが意図した制御を優先的に実行させたい場合は、ユーザがその制御に関する操作コマンドの優先順位を高くすることにより、処理制御部５によってその制御が優先的に制御されることになる。
【００２５】
また、操作コマンドには、ユーザの瞳の動作によるカーソルの移動を開始する開始コマンドと、ユーザの瞳の動作によるカーソルの移動を終了する終了コマンドとが含まれていてもよい。開始コマンドと終了コマンドを用いることで、カーソルの移動の開始と終了を区切ることができ、カーソルの移動を制御したい状況においてのみ、携帯端末１にカーソルの移動を制御させることができる。
【００２６】
また、操作コマンドには、カーソルの位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させる位置復帰コマンドが含まれていてもよい。これにより、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００２７】
操作コマンド格納部６により格納される操作コマンドの一例を図３に示す。図３の操作コマンドには、各操作コマンドを識別する「コマンドＮｏ．（コマンド番号）」、操作コマンドに関連付けられたユーザの瞳の動作である「動作内容」、上述の「優先順位」、後述の動作判断部４が検出された瞳の動作が操作コマンドに一致するか否かを判断する際の判断基準である「判断基準」、後述の動作判断部４により検出された瞳の動作が操作コマンドに一致すると判断した際に後述の処理制御部５により制御されるカーソルの移動に関する処理内容である「処理内容」が含まれる。なお、優先順位は、数字が小さいほど優先順位が高いことを示す。
【００２８】
図３の操作コマンドのうち、コマンドＮｏ．が１の操作コマンドが上述の開始コマンドに対応し、コマンドＮｏ．が２の操作コマンドが上述の終了コマンドに対応し、コマンドＮｏ．が４の操作コマンドが上述の位置復帰コマンドに対応する。
【００２９】
選択コマンド格納部７は、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する。
【００３０】
選択コマンド格納部７には、優先順位が付された複数の選択コマンドが格納されてもよい。後述の動作判断部４は、優先順位が付された複数の選択コマンドのうち、優先順位の高い順からユーザの顔の動作が選択コマンドに一致するか否かを判断し、後述の処理制御部５は、一致した選択コマンドに対応する処理の実行・停止の選択を制御する。つまり、ユーザが意図した制御を優先的に実行させたい場合は、ユーザがその制御に関する選択コマンドの優先順位を高くすることにより、処理制御部５によってその制御が優先的に制御されることになる。
【００３１】
また、選択コマンドには、ユーザの顔の動作による処理の実行・停止の選択を開始する開始コマンドと、ユーザの顔の動作による処理の実行・停止の選択を終了する終了コマンドとが含まれていてもよい。開始コマンドと終了コマンドを用いることで、処理の実行・停止の選択の開始と終了を区切ることができ、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末１に処理の実行・停止の選択を制御させることができる。
【００３２】
選択コマンド格納部７により格納される選択コマンドの一例を図４に示す。図４の選択コマンドには、各選択コマンドを識別する「コマンドＮｏ．（コマンド番号）」、選択コマンドに関連付けられたユーザの顔の動作である「動作内容」、上述の「優先順位」、後述の動作判断部４が検出された顔の動作が選択コマンドに一致するか否かを判断する際の判断基準である「判断基準」、後述の動作判断部４により検出された顔の動作が選択コマンドに一致すると判断した際に後述の処理制御部５により制御される処理の実行・停止の選択に関する処理内容である「処理内容」が含まれる。なお、優先順位は、数字が小さいほど優先順位が高いことを示す。
【００３３】
動作判断部４は、動作検出部３によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する。動作判断部４は、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かを判断してもよい。
【００３４】
処理制御部５は、動作判断部４によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する。
【００３５】
以下では、図３を用いて、動作判断部４による操作コマンドの一致判断、及び処理制御部５による操作コマンドの制御の具体例を示す。まず、動作検出部３によりユーザの瞳の動作として、両目を開く動作が検出されたとする。また、その際、動作検出部３は、両目を開く動作が例えば１．２秒継続されたことを検出する。次に動作判断部４は、検出された両目を開く動作が操作コマンド格納部６により格納された操作コマンドに一致するか否かを判断する。動作判断部４は、操作コマンド格納部６により格納された図３の操作コマンドのうち、コマンドＮｏ．が１の操作コマンドの動作内容が該当すると判断する。さらに、両目を開く動作が、当該操作コマンドの判断基準である「０．５秒以上継続」を満たしていることを判断し、コマンドＮｏ．が１の操作コマンドが一致していると判断する。そして、処理制御部５は、コマンドＮｏ．が１の操作コマンドの処理内容である「カーソルの移動の開始」に対応する制御を行う。
【００３６】
続いて、以下では、図４を用いて、動作判断部４による選択コマンドの一致判断、及び処理制御部５による選択コマンドの制御の具体例を示す。まず、動作検出部３によりユーザの顔の動作として、右目を閉じる動作が検出されたとする。また、その際、動作検出部３は、右目を閉じる動作が例えば０．７秒継続されたことを検出する。次に動作判断部４は、検出された右目を閉じる動作が選択コマンド格納部７により格納された選択コマンドに一致するか否かを判断する。動作判断部４は、選択コマンド格納部７により格納された図３の選択コマンドのうち、コマンドＮｏ．が３の選択コマンドの動作内容が該当すると判断する。さらに、右目を閉じる動作が、当該選択コマンドの判断基準である「０．５秒以上継続」を満たしていることを判断し、コマンドＮｏ．が３の選択コマンドが一致していると判断する。そして、処理制御部５は、コマンドＮｏ．が３の選択コマンドの処理内容である「Ｙｅｓを選択する」に対応する制御を行う。なお、この「Ｙｅｓを選択する」とは、例えば、表示部２に表示されたダイアログボックスに含まれる「Ｙｅｓ」ボタンを選択することを意味する。
【００３７】
なお、上記の選択コマンドの具体例において、動作検出部３が、「両目を閉じ、かつ、顔を前に倒す」動作が０．７秒継続されたことを検出したとする。この場合、図３の選択コマンドのうち、コマンドＮｏ．が３の選択コマンドと共に、コマンドＮｏ．が７の選択コマンドも一致する条件を満たすことになる。ただし、コマンドＮｏ．が３の選択コマンドの優先順位が３で、コマンドＮｏ．が７の選択コマンドの優先順位が７であり、コマンドＮｏ．が３の選択コマンドの優先順位の方が高いので、この場合、動作判断部４はコマンドＮｏ．が３の選択コマンドが一致していると判断する。
【００３８】
なお、上述の動作内容の具体例である「両目を閉じ、かつ、顔を前に倒す」のように、選択コマンドに関連付けられたユーザの顔の動作を、複数の顔の動作としてもよい。その場合、動作判断部４は、複数の顔の動作が全て一致したか否かにより、該当する選択コマンドが一致するか否かを判断する。
【００３９】
次に、図５〜図８を用いて、携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す。図５は、表示部２上にアイコンＡ１〜Ａ５、及びカーソルＢが表示されている状態を示した図である。次に、動作検出部３によりユーザの両目を見開く動作が検出され、動作判断部４により図３のコマンドＮｏ．が１の操作コマンド（開始コマンド）が一致していると判断され、処理制御部５により当該開始コマンドの処理内容である「カーソルの移動を開始」の制御が実行される。
【００４０】
次に、動作検出部３によりユーザの黒目の移動が検出され、動作判断部４により図３のコマンドＮｏ．が３の操作コマンドが一致していると判断され、処理制御部５により当該操作コマンドの処理内容である「カーソルを黒目の移動に合わせて移動」の制御が実行される。図６は、黒目の移動にあわせてカーソルＢが軌跡Ｃを辿ってアイコンＡ２の上に移動したことを示す図である。
【００４１】
次に、動作検出部３によりユーザの両目を２回閉じる動作が検出され、動作判断部４により図３のコマンドＮｏ．が２の操作コマンド（終了コマンド）が一致していると判断され、処理制御部５により当該終了コマンドの処理内容である「カーソルの移動を終了」の制御が実行される。それに伴い、アイコンＡ２に対応する電子メールソフトの起動確認を行うダイアログボックスＤが表示されたとする。図７は、ダイアログボックスＤが表示された状態を示す図である。
【００４２】
次に、動作検出部３によりユーザの顔を左右に順番に傾ける動作が検出され、動作判断部４により図４のコマンドＮｏ．が１の選択コマンド（開始コマンド）が一致していると判断され、処理制御部５により当該開始コマンドの処理内容である「処理の実行・停止の選択を開始」の制御が実行される。次に、動作検出部３によりユーザの唇の口角が一定の角度以上上がり、「Ｙｅ」の形をしている動作が検出され、動作判断部４により図４のコマンドＮｏ．が５の選択コマンドが一致していると判断され、処理制御部５により当該選択コマンドの処理内容である「Ｙｅｓを選択する」の制御が実行される。図８は、ダイアログボックスＤ上のＹｅｓボタンが選択された状態（選択状態Ｅ）を示す。
【００４３】
続いて、このように構成された携帯端末１の動作について説明する。図９及び図１０は、携帯端末１の動作を示すフローチャートである。なお、図９のＳ６の次はＭとなっているが、これは図１０のＭに続くことを意味している。つまり、図９のＳ６の次は図１０のＳ７に続く。
【００４４】
まず、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ１）、動作判断部４は、検出した瞳の動作が開始コマンドに一致すると判断し、処理制御部５は、カーソルの移動を開始する制御を行う（Ｓ２）。次に、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ３）、動作判断部４は、検出した瞳の動作が瞳の動作に合わせたカーソルの移動に関する操作コマンドに一致すると判断し、処理制御部５は、瞳の動作に合わせてカーソルの移動を行う（Ｓ４）。次に、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ５）、動作判断部４は、検出した瞳の動作が終了コマンドに一致すると判断し、処理制御部５は、カーソルの移動を終了する制御を行う（Ｓ６）。
【００４５】
次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ７）、動作判断部４は、検出した顔の動作が開始コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を開始する制御を行う（Ｓ８）。次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ９）、動作判断部４は、検出した顔の動作が処理の実行・停止の選択に関する選択コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を行う（Ｓ１０）。次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ１１）、動作判断部４は、検出した顔の動作が終了コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を終了する制御を行う（Ｓ１２）。
【００４６】
以上説明したように、この携帯端末１では、ユーザの瞳及び顔の動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かが判断され、一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択が制御される。この携帯端末１では、ボタン等の操作がなされずとも、ユーザによる瞳及び顔の動作を検出してカーソルの移動や処理の実行・停止の選択がなされるので、ユーザは画面を見たままの状態で簡便に携帯端末１を操作できる。また、この携帯端末１では、瞳の動作による操作コマンドと、顔の動作による選択コマンドとを切り分けているので、ユーザの操作性を確保でき、かつ誤動作を防止できる。
【００４７】
また、この携帯端末１では、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かが判断される。これにより、ユーザは、操作コマンド又は選択コマンドの優先順位を高くすることで、ユーザが意図した制御を優先的に実行させることができる。よって、この携帯端末１は、ユーザの操作性に優れており、それゆえに、ユーザによる誤動作をより少なくすることができる。
【００４８】
また、この携帯端末１では、ユーザは開始コマンドと終了コマンドを用いてカーソルの移動の開始と終了を区切ることで、カーソルの移動を制御したい状況においてのみ、携帯端末１にカーソルの移動を制御させることができる。したがって誤動作をより確実に防止できる。
【００４９】
また、この携帯端末１では、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００５０】
この携帯端末１では、ユーザは開始コマンドと終了コマンドを用いて処理の実行・停止の選択の開始と終了を区切ることで、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末１に処理の実行・停止の選択を制御させることができる。したがって誤動作をより確実に防止できる。
【符号の説明】
【００５１】
１…携帯端末、２…表示部、３…動作検出部、４…動作判断部、５…処理制御部、６…操作コマンド格納部、７…選択コマンド格納部。
【技術分野】
【０００１】
本発明は、ユーザの瞳及び顔の動作に対応した制御を行う携帯端末に関する。
【背景技術】
【０００２】
近年、ユーザが手を動かせない状況でも、ユーザの目の動きで端末の操作を行える技術がある。例えば、特許文献１では、ユーザの眼球の黒目の動きと瞬きの有無に基づいて、表示画面中の項目選択手段を移動し、選択する携帯端末が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１０２４１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した携帯端末では黒目の動きと瞬きの有無のみに基づいた端末操作しか行えず、ユーザの操作性は悪く、それゆえにユーザによる誤動作も多いという問題があった。
【０００５】
本発明は、上記課題の解決のためになされたものであり、ユーザが手を動かせない状況でも、ユーザの操作性に優れ、ユーザによる誤動作が少ない制御が可能な携帯端末を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題の解決のため、本発明に係る携帯端末は、ユーザの瞳及び顔の動作を検出する動作検出手段と、ユーザの瞳の動作に関連付けて、表示手段に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納手段と、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納手段と、動作検出手段によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する動作判断手段と、動作判断手段によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御手段と、を備えていることを特徴としている。
【０００７】
この携帯端末では、ユーザの瞳及び顔の動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かが判断され、一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択が制御される。この携帯端末では、ボタン等の操作がなされずとも、ユーザによる瞳及び顔の動作を検出してカーソルの移動や処理の実行・停止の選択がなされるので、ユーザは画面を見たままの状態で簡便に携帯端末を操作できる。また、この携帯端末では、瞳の動作による操作コマンドと、顔の動作による選択コマンドとを切り分けているので、ユーザの操作性を確保でき、かつ誤動作を防止できる。
【０００８】
また、操作コマンド格納手段には、優先順位が付された複数の操作コマンドが格納され、選択コマンド格納手段には、優先順位が付された複数の選択コマンドが格納され、動作判断手段は、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かを判断することが好ましい。
【０００９】
この携帯端末では、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かが判断される。これにより、ユーザは、操作コマンド又は選択コマンドの優先順位を高くすることで、ユーザが意図した制御を優先的に実行させることができる。よって、この携帯端末は、ユーザの操作性に優れており、それゆえに、ユーザによる誤動作をより少なくすることができる。
【００１０】
また、操作コマンドには、ユーザの瞳の動作によるカーソルの移動を開始する開始コマンドと、ユーザの瞳の動作によるカーソルの移動を終了する終了コマンドとが含まれていることが好ましい。
【００１１】
この場合、ユーザは開始コマンドと終了コマンドを用いてカーソルの移動の開始と終了を区切ることで、カーソルの移動を制御したい状況においてのみ、携帯端末にカーソルの移動を制御させることができる。したがって誤動作をより確実に防止できる。
【００１２】
また、操作コマンドには、カーソルの位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させる位置復帰コマンドが含まれていることが好ましい。
【００１３】
この場合、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００１４】
また、選択コマンドには、ユーザの顔の動作による処理の実行・停止の選択を開始する開始コマンドと、ユーザの顔の動作による処理の実行・停止の選択を終了する終了コマンドとが含まれていることが好ましい。
【００１５】
この場合、ユーザは開始コマンドと終了コマンドを用いて処理の実行・停止の選択の開始と終了を区切ることで、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末に処理の実行・停止の選択を制御させることができる。したがって誤動作をより確実に防止できる。
【発明の効果】
【００１６】
本発明によれば、ユーザが手を動かせない状況でも、ユーザの操作性に優れ、ユーザによる誤動作が少ない制御が可能な携帯端末を提供することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施形態に係る携帯端末の機能的な構成要素を示すブロック図である。
【図２】携帯端末１のハードウェア構成図である。
【図３】操作コマンド格納部６が保持するデータの例を示すテーブルである。
【図４】選択コマンド格納部７が保持するデータの例を示すテーブルである。
【図５】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図６】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図７】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図８】携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す図である。
【図９】携帯端末１の動作を示すフローチャート図である。
【図１０】携帯端末１の動作を示すフローチャート図である。
【発明を実施するための形態】
【００１８】
図１は、本発明に係る携帯端末の一実施形態を示す概要図である。携帯端末１は、図１に示すように、機能的な構成要素として、動作検出部３（動作検出手段）、動作判断部４（動作判断手段）、処理制御部５（処理制御手段）、操作コマンド格納部６（操作コマンド格納手段）、及び選択コマンド格納部７（選択コマンド格納手段）を備えている。また、携帯端末１は、図１に示すように、物理的な構成要素の一つとして表示部２（表示手段）を備えている。
【００１９】
携帯端末１は、ＣＰＵ等のハードウェアから構成されているものである。図２は、携帯端末１のハードウェア構成図である。図１に示される携帯端末１は、物理的には、図２に示すように、ＣＰＵ５１、主記憶装置であるＲＡＭ５２及びＲＯＭ５３、入力デバイスである数字キーやカメラ等の入力装置５４、ディスプレイ等の出力装置５５、ネットワークカード等のデータ送受信デバイスである通信モジュール５６、ハードディスク等の補助記憶装置５７等を含むコンピュータシステムとして構成されている。図１に示す各構成要素の機能は、図２に示すＣＰＵ５１、ＲＡＭ５２等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、ＣＰＵ５１の制御のもとで入力装置５４、出力装置５５、通信モジュール５６を動作させるとともに、ＲＡＭ５２や補助記憶装置５７におけるデータの読み出し及び書き込みを行うことで実現される。
【００２０】
以下、図１に示す構成要素に基づいて、携帯端末１の各構成要素を説明する。
【００２１】
携帯端末１はユーザインタフェースとしてグラフィカルユーザインタフェースを採用しており、表示部２は、グラフィカルユーザインタフェースにおけるグラフィックを表示する。グラフィカルユーザインタフェースにおけるグラフィックの一例としては、アイコン、カーソル、ダイアログボックス、及びボタンなどが挙げられる。
【００２２】
動作検出部３は、ユーザの瞳及び顔の動作を検出する。例えば、入力装置５４であるカメラが一定時間間隔で撮像したユーザの瞳及び顔の画像を基に、動作検出部３は、撮像した画像の差分情報からユーザの瞳及び顔の動作を検出する。
【００２３】
操作コマンド格納部６は、ユーザの瞳の動作に関連付けて、表示部２に表示されるカーソルの移動に関する操作コマンドを格納する。
【００２４】
操作コマンド格納部６には、優先順位が付された複数の操作コマンドが格納されてもよい。後述の動作判断部４は、優先順位が付された複数の操作コマンドのうち、優先順位の高い順からユーザの瞳の動作が操作コマンドに一致するか否かを判断し、後述の処理制御部５は、一致した操作コマンドに対応するカーソルの移動を制御する。つまり、ユーザが意図した制御を優先的に実行させたい場合は、ユーザがその制御に関する操作コマンドの優先順位を高くすることにより、処理制御部５によってその制御が優先的に制御されることになる。
【００２５】
また、操作コマンドには、ユーザの瞳の動作によるカーソルの移動を開始する開始コマンドと、ユーザの瞳の動作によるカーソルの移動を終了する終了コマンドとが含まれていてもよい。開始コマンドと終了コマンドを用いることで、カーソルの移動の開始と終了を区切ることができ、カーソルの移動を制御したい状況においてのみ、携帯端末１にカーソルの移動を制御させることができる。
【００２６】
また、操作コマンドには、カーソルの位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させる位置復帰コマンドが含まれていてもよい。これにより、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００２７】
操作コマンド格納部６により格納される操作コマンドの一例を図３に示す。図３の操作コマンドには、各操作コマンドを識別する「コマンドＮｏ．（コマンド番号）」、操作コマンドに関連付けられたユーザの瞳の動作である「動作内容」、上述の「優先順位」、後述の動作判断部４が検出された瞳の動作が操作コマンドに一致するか否かを判断する際の判断基準である「判断基準」、後述の動作判断部４により検出された瞳の動作が操作コマンドに一致すると判断した際に後述の処理制御部５により制御されるカーソルの移動に関する処理内容である「処理内容」が含まれる。なお、優先順位は、数字が小さいほど優先順位が高いことを示す。
【００２８】
図３の操作コマンドのうち、コマンドＮｏ．が１の操作コマンドが上述の開始コマンドに対応し、コマンドＮｏ．が２の操作コマンドが上述の終了コマンドに対応し、コマンドＮｏ．が４の操作コマンドが上述の位置復帰コマンドに対応する。
【００２９】
選択コマンド格納部７は、ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する。
【００３０】
選択コマンド格納部７には、優先順位が付された複数の選択コマンドが格納されてもよい。後述の動作判断部４は、優先順位が付された複数の選択コマンドのうち、優先順位の高い順からユーザの顔の動作が選択コマンドに一致するか否かを判断し、後述の処理制御部５は、一致した選択コマンドに対応する処理の実行・停止の選択を制御する。つまり、ユーザが意図した制御を優先的に実行させたい場合は、ユーザがその制御に関する選択コマンドの優先順位を高くすることにより、処理制御部５によってその制御が優先的に制御されることになる。
【００３１】
また、選択コマンドには、ユーザの顔の動作による処理の実行・停止の選択を開始する開始コマンドと、ユーザの顔の動作による処理の実行・停止の選択を終了する終了コマンドとが含まれていてもよい。開始コマンドと終了コマンドを用いることで、処理の実行・停止の選択の開始と終了を区切ることができ、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末１に処理の実行・停止の選択を制御させることができる。
【００３２】
選択コマンド格納部７により格納される選択コマンドの一例を図４に示す。図４の選択コマンドには、各選択コマンドを識別する「コマンドＮｏ．（コマンド番号）」、選択コマンドに関連付けられたユーザの顔の動作である「動作内容」、上述の「優先順位」、後述の動作判断部４が検出された顔の動作が選択コマンドに一致するか否かを判断する際の判断基準である「判断基準」、後述の動作判断部４により検出された顔の動作が選択コマンドに一致すると判断した際に後述の処理制御部５により制御される処理の実行・停止の選択に関する処理内容である「処理内容」が含まれる。なお、優先順位は、数字が小さいほど優先順位が高いことを示す。
【００３３】
動作判断部４は、動作検出部３によってユーザの動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かを判断する。動作判断部４は、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かを判断してもよい。
【００３４】
処理制御部５は、動作判断部４によって動作が操作コマンド又は選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する。
【００３５】
以下では、図３を用いて、動作判断部４による操作コマンドの一致判断、及び処理制御部５による操作コマンドの制御の具体例を示す。まず、動作検出部３によりユーザの瞳の動作として、両目を開く動作が検出されたとする。また、その際、動作検出部３は、両目を開く動作が例えば１．２秒継続されたことを検出する。次に動作判断部４は、検出された両目を開く動作が操作コマンド格納部６により格納された操作コマンドに一致するか否かを判断する。動作判断部４は、操作コマンド格納部６により格納された図３の操作コマンドのうち、コマンドＮｏ．が１の操作コマンドの動作内容が該当すると判断する。さらに、両目を開く動作が、当該操作コマンドの判断基準である「０．５秒以上継続」を満たしていることを判断し、コマンドＮｏ．が１の操作コマンドが一致していると判断する。そして、処理制御部５は、コマンドＮｏ．が１の操作コマンドの処理内容である「カーソルの移動の開始」に対応する制御を行う。
【００３６】
続いて、以下では、図４を用いて、動作判断部４による選択コマンドの一致判断、及び処理制御部５による選択コマンドの制御の具体例を示す。まず、動作検出部３によりユーザの顔の動作として、右目を閉じる動作が検出されたとする。また、その際、動作検出部３は、右目を閉じる動作が例えば０．７秒継続されたことを検出する。次に動作判断部４は、検出された右目を閉じる動作が選択コマンド格納部７により格納された選択コマンドに一致するか否かを判断する。動作判断部４は、選択コマンド格納部７により格納された図３の選択コマンドのうち、コマンドＮｏ．が３の選択コマンドの動作内容が該当すると判断する。さらに、右目を閉じる動作が、当該選択コマンドの判断基準である「０．５秒以上継続」を満たしていることを判断し、コマンドＮｏ．が３の選択コマンドが一致していると判断する。そして、処理制御部５は、コマンドＮｏ．が３の選択コマンドの処理内容である「Ｙｅｓを選択する」に対応する制御を行う。なお、この「Ｙｅｓを選択する」とは、例えば、表示部２に表示されたダイアログボックスに含まれる「Ｙｅｓ」ボタンを選択することを意味する。
【００３７】
なお、上記の選択コマンドの具体例において、動作検出部３が、「両目を閉じ、かつ、顔を前に倒す」動作が０．７秒継続されたことを検出したとする。この場合、図３の選択コマンドのうち、コマンドＮｏ．が３の選択コマンドと共に、コマンドＮｏ．が７の選択コマンドも一致する条件を満たすことになる。ただし、コマンドＮｏ．が３の選択コマンドの優先順位が３で、コマンドＮｏ．が７の選択コマンドの優先順位が７であり、コマンドＮｏ．が３の選択コマンドの優先順位の方が高いので、この場合、動作判断部４はコマンドＮｏ．が３の選択コマンドが一致していると判断する。
【００３８】
なお、上述の動作内容の具体例である「両目を閉じ、かつ、顔を前に倒す」のように、選択コマンドに関連付けられたユーザの顔の動作を、複数の顔の動作としてもよい。その場合、動作判断部４は、複数の顔の動作が全て一致したか否かにより、該当する選択コマンドが一致するか否かを判断する。
【００３９】
次に、図５〜図８を用いて、携帯端末１において、ユーザの瞳及び顔の動作に対応した制御を行う際の表示部２に表示される画面の一例を示す。図５は、表示部２上にアイコンＡ１〜Ａ５、及びカーソルＢが表示されている状態を示した図である。次に、動作検出部３によりユーザの両目を見開く動作が検出され、動作判断部４により図３のコマンドＮｏ．が１の操作コマンド（開始コマンド）が一致していると判断され、処理制御部５により当該開始コマンドの処理内容である「カーソルの移動を開始」の制御が実行される。
【００４０】
次に、動作検出部３によりユーザの黒目の移動が検出され、動作判断部４により図３のコマンドＮｏ．が３の操作コマンドが一致していると判断され、処理制御部５により当該操作コマンドの処理内容である「カーソルを黒目の移動に合わせて移動」の制御が実行される。図６は、黒目の移動にあわせてカーソルＢが軌跡Ｃを辿ってアイコンＡ２の上に移動したことを示す図である。
【００４１】
次に、動作検出部３によりユーザの両目を２回閉じる動作が検出され、動作判断部４により図３のコマンドＮｏ．が２の操作コマンド（終了コマンド）が一致していると判断され、処理制御部５により当該終了コマンドの処理内容である「カーソルの移動を終了」の制御が実行される。それに伴い、アイコンＡ２に対応する電子メールソフトの起動確認を行うダイアログボックスＤが表示されたとする。図７は、ダイアログボックスＤが表示された状態を示す図である。
【００４２】
次に、動作検出部３によりユーザの顔を左右に順番に傾ける動作が検出され、動作判断部４により図４のコマンドＮｏ．が１の選択コマンド（開始コマンド）が一致していると判断され、処理制御部５により当該開始コマンドの処理内容である「処理の実行・停止の選択を開始」の制御が実行される。次に、動作検出部３によりユーザの唇の口角が一定の角度以上上がり、「Ｙｅ」の形をしている動作が検出され、動作判断部４により図４のコマンドＮｏ．が５の選択コマンドが一致していると判断され、処理制御部５により当該選択コマンドの処理内容である「Ｙｅｓを選択する」の制御が実行される。図８は、ダイアログボックスＤ上のＹｅｓボタンが選択された状態（選択状態Ｅ）を示す。
【００４３】
続いて、このように構成された携帯端末１の動作について説明する。図９及び図１０は、携帯端末１の動作を示すフローチャートである。なお、図９のＳ６の次はＭとなっているが、これは図１０のＭに続くことを意味している。つまり、図９のＳ６の次は図１０のＳ７に続く。
【００４４】
まず、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ１）、動作判断部４は、検出した瞳の動作が開始コマンドに一致すると判断し、処理制御部５は、カーソルの移動を開始する制御を行う（Ｓ２）。次に、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ３）、動作判断部４は、検出した瞳の動作が瞳の動作に合わせたカーソルの移動に関する操作コマンドに一致すると判断し、処理制御部５は、瞳の動作に合わせてカーソルの移動を行う（Ｓ４）。次に、動作検出部３は、ユーザの瞳の動作を検出し（Ｓ５）、動作判断部４は、検出した瞳の動作が終了コマンドに一致すると判断し、処理制御部５は、カーソルの移動を終了する制御を行う（Ｓ６）。
【００４５】
次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ７）、動作判断部４は、検出した顔の動作が開始コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を開始する制御を行う（Ｓ８）。次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ９）、動作判断部４は、検出した顔の動作が処理の実行・停止の選択に関する選択コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を行う（Ｓ１０）。次に、動作検出部３は、ユーザの顔の動作を検出し（Ｓ１１）、動作判断部４は、検出した顔の動作が終了コマンドに一致すると判断し、処理制御部５は、処理の実行・停止の選択を終了する制御を行う（Ｓ１２）。
【００４６】
以上説明したように、この携帯端末１では、ユーザの瞳及び顔の動作が検出された場合に、検出された動作が操作コマンド又は選択コマンドに一致するか否かが判断され、一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択が制御される。この携帯端末１では、ボタン等の操作がなされずとも、ユーザによる瞳及び顔の動作を検出してカーソルの移動や処理の実行・停止の選択がなされるので、ユーザは画面を見たままの状態で簡便に携帯端末１を操作できる。また、この携帯端末１では、瞳の動作による操作コマンドと、顔の動作による選択コマンドとを切り分けているので、ユーザの操作性を確保でき、かつ誤動作を防止できる。
【００４７】
また、この携帯端末１では、優先順位の高い順から動作が操作コマンド又は選択コマンドに一致するか否かが判断される。これにより、ユーザは、操作コマンド又は選択コマンドの優先順位を高くすることで、ユーザが意図した制御を優先的に実行させることができる。よって、この携帯端末１は、ユーザの操作性に優れており、それゆえに、ユーザによる誤動作をより少なくすることができる。
【００４８】
また、この携帯端末１では、ユーザは開始コマンドと終了コマンドを用いてカーソルの移動の開始と終了を区切ることで、カーソルの移動を制御したい状況においてのみ、携帯端末１にカーソルの移動を制御させることができる。したがって誤動作をより確実に防止できる。
【００４９】
また、この携帯端末１では、ユーザが誤ってカーソルの位置を意図しない位置に移動した場合でも、すぐにカーソル位置を開始コマンドによってカーソルの移動が開始された際のカーソルの位置に復帰させることができる。
【００５０】
この携帯端末１では、ユーザは開始コマンドと終了コマンドを用いて処理の実行・停止の選択の開始と終了を区切ることで、処理の実行・停止の選択を制御したい状況においてのみ、携帯端末１に処理の実行・停止の選択を制御させることができる。したがって誤動作をより確実に防止できる。
【符号の説明】
【００５１】
１…携帯端末、２…表示部、３…動作検出部、４…動作判断部、５…処理制御部、６…操作コマンド格納部、７…選択コマンド格納部。
【特許請求の範囲】
【請求項１】
ユーザの瞳及び顔の動作を検出する動作検出手段と、
ユーザの瞳の動作に関連付けて、表示手段に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納手段と、
ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納手段と、
前記動作検出手段によってユーザの動作が検出された場合に、検出された動作が前記操作コマンド又は前記選択コマンドに一致するか否かを判断する動作判断手段と、
前記動作判断手段によって前記動作が前記操作コマンド又は前記選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御手段と、
を備えたことを特徴とする携帯端末。
【請求項２】
前記操作コマンド格納手段には、優先順位が付された複数の操作コマンドが格納され、
前記選択コマンド格納手段には、優先順位が付された複数の選択コマンドが格納され、
前記動作判断手段は、前記優先順位の高い順から前記動作が前記操作コマンド又は前記選択コマンドに一致するか否かを判断することを特徴とする請求項１記載の携帯端末。
【請求項３】
前記操作コマンドには、ユーザの瞳の動作による前記カーソルの移動を開始する開始コマンドと、ユーザの瞳の動作による前記カーソルの移動を終了する終了コマンドとが含まれていることを特徴とする請求項１又は２記載の携帯端末。
【請求項４】
前記操作コマンドには、前記カーソルの位置を前記開始コマンドによって前記カーソルの移動が開始された際の前記カーソルの位置に復帰させる位置復帰コマンドが含まれていることを特徴とする請求項３記載の携帯端末。
【請求項５】
前記選択コマンドには、前記ユーザの顔の動作による前記処理の実行・停止の選択を開始する開始コマンドと、前記ユーザの顔の動作による前記処理の実行・停止の選択を終了する終了コマンドとが含まれていることを特徴とする請求項１〜４のいずれか一項記載の携帯端末。
【請求項１】
ユーザの瞳及び顔の動作を検出する動作検出手段と、
ユーザの瞳の動作に関連付けて、表示手段に表示されるカーソルの移動に関する操作コマンドを格納する操作コマンド格納手段と、
ユーザの顔の動作に関連付けて、処理の実行・停止の選択に関する選択コマンドを格納する選択コマンド格納手段と、
前記動作検出手段によってユーザの動作が検出された場合に、検出された動作が前記操作コマンド又は前記選択コマンドに一致するか否かを判断する動作判断手段と、
前記動作判断手段によって前記動作が前記操作コマンド又は前記選択コマンドに一致すると判断された場合に、一致したコマンドに対応するカーソルの移動又は処理の実行・停止の選択を制御する処理制御手段と、
を備えたことを特徴とする携帯端末。
【請求項２】
前記操作コマンド格納手段には、優先順位が付された複数の操作コマンドが格納され、
前記選択コマンド格納手段には、優先順位が付された複数の選択コマンドが格納され、
前記動作判断手段は、前記優先順位の高い順から前記動作が前記操作コマンド又は前記選択コマンドに一致するか否かを判断することを特徴とする請求項１記載の携帯端末。
【請求項３】
前記操作コマンドには、ユーザの瞳の動作による前記カーソルの移動を開始する開始コマンドと、ユーザの瞳の動作による前記カーソルの移動を終了する終了コマンドとが含まれていることを特徴とする請求項１又は２記載の携帯端末。
【請求項４】
前記操作コマンドには、前記カーソルの位置を前記開始コマンドによって前記カーソルの移動が開始された際の前記カーソルの位置に復帰させる位置復帰コマンドが含まれていることを特徴とする請求項３記載の携帯端末。
【請求項５】
前記選択コマンドには、前記ユーザの顔の動作による前記処理の実行・停止の選択を開始する開始コマンドと、前記ユーザの顔の動作による前記処理の実行・停止の選択を終了する終了コマンドとが含まれていることを特徴とする請求項１〜４のいずれか一項記載の携帯端末。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１１−２０９９２８（Ｐ２０１１−２０９９２８Ａ）
【公開日】平成２３年１０月２０日（２０１１．１０．２０）
【国際特許分類】
【出願番号】特願２０１０−７５９５６（Ｐ２０１０−７５９５６）
【出願日】平成２２年３月２９日（２０１０．３．２９）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
【公開日】平成２３年１０月２０日（２０１１．１０．２０）
【国際特許分類】
【出願日】平成２２年３月２９日（２０１０．３．２９）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
[ Back to top ]