携帯端末、ユーザ認証方法およびプログラム
【課題】正規ユーザが目的とする機能を利用できるまでの時間を短縮するとともに、不正ユーザに撮影を察知されにくくする。
【解決手段】携帯端末は、ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、を備える。
【解決手段】携帯端末は、ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末、ユーザ認証方法およびプログラムに関し、特に、カメラを用いてユーザ認証を行う携帯端末、ユーザ認証方法およびプログラムに関する。
【背景技術】
【０００２】
特許文献１に、数字の入力を検知したときにバックグラウンドで認証処理を開始し、認証処理が完了するまでの間ダミー発呼画面を表示部に表示させることにより、顔認証を実行していることが操作者に察知されないようにした携帯端末装置が開示されている。
【０００３】
また、特許文献２には、取引画面を第１の領域と第２の領域に分け、第１の領域は取引操作案内及び入力を行わせ、第２の領域は生体認証のガイダンスを行い、第１の領域に表示される取引操作と第２の領域に表示される生体認証とを並列して動作出来るようにした自動取引装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−１３５７０５号公報
【特許文献２】特開２００７−１０９０７５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１のように、操作者に察知されない態様で顔認証を行う場合、正規のユーザもまた顔認証を実施中であることに気付きにくくなってしまう。このため、適切な位置で撮影できず、ユーザ認証に失敗しまたは時間が掛かってしまい、正規ユーザにとっては利便性が低下してしまうという問題点がある。
【０００６】
また、特許文献１の携帯端末装置では、ユーザ認証が完了するまでの間ダミー発呼画面を表示させるため、ユーザが目的とした機能を利用できるまでの時間が長くなってしまうという問題点もある。
【０００７】
他方、携帯端末において、特許文献２のようにユーザに対し生体認証のガイダンスを行ってしまうと、特許文献１にも記載されているように、不正ユーザによる携帯端末の破棄、破壊が懸念される。
【０００８】
本発明は、上記した事情に鑑みてなされたものであって、その目的とするところは、正規ユーザの利便性を考慮するとともに、不正ユーザによる撮影の察知可能性を低減できる態様でユーザ認証を行う携帯端末、ユーザ認証方法およびプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
本発明の第１の視点によれば、ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、を備えた携帯端末が提供される。
【００１０】
本発明の第２の視点によれば、ユーザにより操作が開始されると、カメラを起動するステップと、前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なうステップと、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示するステップと、を含み、前記ユーザ認証による認証結果が得られるまでの操作を許容するユーザ認証方法が提供される。本方法は、カメラによるユーザ認証を行なう携帯端末という、特定の機械に結びつけられている。
【００１１】
本発明の第３の視点によれば、カメラ付き携帯端末に搭載されたコンピュータに実行させるプログラムであって、ユーザにより操作の開始に応じて、カメラを起動するとともに、ユーザ認証による認証結果が得られるまでの操作を許容する処理と、前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なう処理と、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する処理と、を実行させるプログラムが提供される。なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。即ち、本発明は、コンピュータプログラム製品として具現することも可能である。
【発明の効果】
【００１２】
本発明によれば、正規ユーザが目的とする機能を利用できるまでの時間を短縮するとともに、不正ユーザに撮影を察知されにくくすることができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の概要を説明するための図である。
【図２】本発明の概要を説明するための別の図である。
【図３】本発明の第１の実施形態の携帯端末の構成を表したブロック図である。
【図４】本発明の第１の実施形態の携帯端末の動作を説明するための図である。
【図５】本発明の第２の実施形態の携帯端末の動作を説明するための図である。
【図６】本発明の第３の実施形態の携帯端末の動作を説明するための図である。
【図７】本発明の第４の実施形態の携帯端末の動作を説明するための図である。
【図８】本発明の第５の実施形態の携帯端末の構成を表したブロック図である。
【図９】本発明の変形実施形態を説明するための図である。
【図１０】本発明の変形実施形態を説明するための図である。
【図１１】本発明の変形実施形態を説明するための図である。
【発明を実施するための形態】
【００１４】
はじめに、本発明の概要を説明する。本発明に係るカメラ付き携帯端末は、ユーザにより操作が開始されるとカメラを起動し、ユーザからの操作受付処理と並行して予め登録した認証用画像との照合によりユーザ認証を行なう。本発明に係るカメラ付き携帯端末は、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が反映されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する。
【００１５】
図１は、ユーザ認証に顔画像を用いる場合の被写体（顔）の位置を適正位置に誘導する表示の例である。図１の例では、同図右側に示されたように、携帯端末のカメラの撮像範囲θに、ユーザの顔が収まっていない。このとき、本発明に係るカメラ付き携帯端末は、、入力中の通話相手の電話番号とともに、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）を表示する。なお、前記図形の位置は、撮影された顔画像の目、鼻、輪郭中心線などを基準に算出することができる。
【００１６】
その後、上記図形Ｍ１（適正）、Ｍ２（被写体）を見たユーザが、カメラの撮像範囲θに、ユーザの顔が収まるように携帯端末を傾け、あるいは、顔を適正位置に移動させると、図２に示すように、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）は重なって表示される。
【００１７】
上記図２のような状態を検出した時点、あるいは、カメラ起動後一定時間経過後に顔画像の撮影を行ない、速やかに認証処理に移行し、正当なユーザであることが確認されれば、カメラ起動後、認証結果が得られるまでの操作は許容されているので、ユーザはそのまま所望の操作（例えば、通話相手の残りの電話番号と発信ボタンの押下）を継続することができる。他方、上記適正位置への案内にも拘らず、正当なユーザでないと判定された場合には、ユーザが発信ボタンの押下は拒否され、「ロック中です。」などといった表示が行われる。
【００１８】
以上のように、本発明によれば、特定操作の開始とともに開始されるカメラによるユーザ認証において、被写体の位置の適正位置への誘導が行われるので、正規ユーザであるか
否かの判定に要する時間を短縮することが可能となる。
【００１９】
［第１の実施形態］
続いて、本発明の第１の実施形態について図面を参照して詳細に説明する。図３は、本発明の第１の実施形態の携帯端末の構成を表したブロック図である。図３を参照すると、制御部１１と、表示部１２と、キー操作部１３と、カメラ部１４と、認証用画像記憶部１５と、撮影画像記憶部１６と、認証部１７とを備えた携帯端末１０の構成が示されている。なお、携帯端末１０には、カメラを備えた携帯電話端末、スマートフォン、業務用携帯端末などの各種の小型端末のほか、カメラが主機能であるデジタルカメラなども含まれる。
【００２０】
制御部１１は、ユーザにより操作が開始されると、カメラ部１４を起動し、撮像を開始させる。また、制御部１１は、前記撮影開始後の所定の期間、前記ユーザによる特定の操作中の画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部として機能する。また、制御部１１は、認証部１７における判定結果に基づいて、前記特定の操作によって開始されようとしている機能の利用を許可または制限する。
【００２１】
表示部１２は、キー操作部１３から入力された内容を表示する液晶ディスプレイ等により構成される。
【００２２】
キー操作部１３は、ユーザの各種操作を受け付けるボタンやポインティングデバイス等によって構成される。なお、キー操作部１３として、タッチパネルを採用することも可能である。
【００２３】
カメラ部１４は、上記ユーザ認証時の被写体の撮影のほか、ユーザ認証用の画像（認証用画像）を撮影するために用いられ、撮影した画像は、認証用画像記憶部１５または撮影画像記憶部１６に格納される。
【００２４】
認証部１７は、認証用画像記憶部１５および撮影画像記憶部１６に格納された画像を照合することによりユーザ認証を行ない、その結果を制御部１１に通知する。
【００２５】
なお、図３では省略しているが、携帯端末１０が、携帯電話端末、スマートフォン、業務用携帯端末などの通信機能を備える装置である場合には、その他通信部などが追加される（図８の通信部１８参照）。
【００２６】
以上、図３に示した携帯端末１０の認証用画像記憶部１５または撮影画像記憶部１６は、携帯端末１０のフラッシュメモリおよびメモリを用いて構成することができ、制御部１１および認証部１７は、携帯端末１０に搭載されたコンピュータに、そのハードウェアを用いて、上記した処理を実行させるコンピュータプログラムにより実現することができる。
【００２７】
続いて、本実施形態の動作について図面を参照して詳細に説明する。図４は、本発明の第１の実施形態の携帯端末の動作を説明するための図である。
【００２８】
図４に示すように、携帯端末１０は、キー操作部１３への操作が行われると（図４のＡ１）、制御部１１は、カメラ部１４を起動して、撮影を開始させる（図４のＣ１）。
【００２９】
ユーザが引き続きキー操作部１３を操作すると、表示部１２には、操作の結果が表示される（図４のＡ５）。
【００３０】
同時に、制御部１１は、カメラ部１４で撮影された画像に基づいて、表示部１２に被写体の位置を適正位置に誘導する図形を表示する。その後、カメラ部１４は、所定のタイミングで撮影した画像を撮影画像記憶部１６に格納する（図４のＣ３）。なお、前記所定のタイミングとしては、図２に示すように、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）が重なったタイミング、一定の距離に近づいたタイミング、あるいは、カメラ部１４の起動から一定時間経過後（つまり、正規ユーザであれば十分に被写体を適正位置に移動させることのできる時間が経過した時点）を採用することができる。
【００３１】
認証部１７は、撮影画像記憶部１６に格納された画像と、認証用画像記憶部１５に格納された画像とを比較し、キー操作部１３を操作したユーザが正規ユーザであるか否かの判定（ユーザ認証）を行って（図４のＣ４）、その結果を制御部１１に出力する（図４のＣ５）。
【００３２】
前記ユーザ認証の結果、正規ユーザであるとの判定結果が得られた場合（図４の判定「正規ユーザ？」のＹｅｓ）、制御部１１は引き続き操作を許容する（図４のＡ５）。
【００３３】
一方、正規ユーザでないとの判定結果が得られた場合（図４の判定「正規ユーザ？」のＮｏ）、制御部１１は、以降の操作を制限、使用できないように制御する（図４のＢ１）。併せて、制御部１１は、表示部１２に、操作制限中である旨を表示する。
【００３４】
以上説明したように、本実施形態では、操作開始とともに並行して認証動作が開始され、かつ、被写体を適正位置に誘導する表示が行われるため、正規ユーザの操作を中断させることなく、迅速にユーザ認証を完了することができるという効果を奏する。
【００３５】
また、本実施形態では、撮像しているタイミングを察知されにくい態様としているため、不正ユーザが対策を取ってしまう可能性を低減することができる。
【００３６】
［第２の実施形態］
続いて、上記第１の実施形態に変更を加えた本発明の第２の実施形態について図面を参照して説明する。
【００３７】
上記した第１の実施形態では、正規ユーザであっても、撮影した環境が暗かったり、ユーザの顔の向きが正面でなかったり、条件により照合に失敗することが考えられる。操作開始後、一回目の撮影で正規ユーザであることを確認できなかった場合、再度の撮影と照合を繰り返すことも可能である。
【００３８】
しかしながら、上述のとおり、ユーザの操作開始と並行してユーザ認証を行なう本発明では、認証期間の長期化は、本来使用を制限すべきユーザに対して、必要以上の時間、操作を許容することになってしまう。
【００３９】
そこで、本発明の第２の実施形態では、タイマにより認証時間を制限することでセキュリティを高めている。なお、正規ユーザ、例えば、携帯端末１０の所有者であれば、照合しやすい状態を意識して作り出せるため、利便性を大きく損なうことは無い。
【００４０】
上記本発明の第２の実施形態は、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００４１】
図５は、本発明の第２の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、ユーザの操作開始とともにカメラ部１４だけでなく、タイマも動作させ（図５のＴ１）、一定時間内（図５のＴ３の「計測」期間中）に、認証処理が完了しない場合、タイムアウトと判定し（図５のＴ５）、正規ユーザでないとの結果を返す点である。
【００４２】
これにより、第１の実施形態の効果に加えて、よりセキュリティを向上させることが可能となる。
【００４３】
［第３の実施形態］
続いて、上記第２の実施形態と同様の観点で、第１の実施形態に変更を加えた本発明の第３の実施形態について図面を参照して説明する。
【００４４】
上記した第２の実施形態では、タイマにより認証時間を制限したが、第３の実施形態では、セキュリティレベルの高い操作、例えば、アドレス帳の閲覧・操作、メールの閲覧・送受信、画像の閲覧・操作、発着信履歴の閲覧・操作、ＩＣカード機能の利用等が行われるまでに、認証処理が完了し、正規ユーザであることが確認されれば、そのまま上記機能を利用することができ、それ以外は操作制限を受けるようにしている。
【００４５】
上記本発明の第３の実施形態も、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００４６】
図６は、本発明の第３の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、ユーザの操作が開始され、特定機能を利用が開始されるまでに（図６のＡ３）、認証処理が完了しない場合、認証失敗と判定し（図５の「正規ユーザ？」のＮｏ）、操作制限が行われる点である。
【００４７】
以上のように、本実施形態も、第２の実施形態と同様に、よりセキュリティを向上させることが可能となる。
【００４８】
［第４の実施形態］
上記した第１〜第３の実施形態では、カメラによるユーザ認証ができなかった場合、一律に操作制限を行うようにしているが、被写体の撮影ができない様な環境、例えば、暗くて顔を認識できないような場所での利用も考えられる。
【００４９】
そこで、本実施形態では、上記のようにカメラによるユーザ認証に失敗した場合であっても、他のユーザ認証処理を行い、正規ユーザであることを確認できるようにしている。前記他のユーザ認証処理としては、パスワードの入力による認証や、ユーザの音声の照合など、種々の方法を採用することができる。
【００５０】
上記本発明の第４の実施形態も、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００５１】
図７は、本発明の第４の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、カメラによるユーザ認証で正規ユーザであることが確認できなかった場合（図７の「正規ユーザ？」のＮｏ）に、第２の認証処理（図７のＤ４）を実行し、正規ユーザであることが確認できた場合は、ユーザの操作の継続を許容する点である。
【００５２】
また、このときに、図７のＣ３で撮影した画像、あるいは、第２の認証処理後に再度撮影した画像を保存（既存の認証用画像と置き換え、または、追加）し、次回の認証用画像として用いてもよい。これにより、次回ユーザ認証時に、正規ユーザの判定率を向上させることができる。もちろん、暗くて顔を認識できないような場所である場合（ユーザに保存するか否かを問い合わせるほか、撮影した画像の輝度値の平均値やヒストグラムで検出可能）は、上記画像の保存を行わないようにしてもよい。
【００５３】
［第５の実施形態］
上記した第１〜第４の実施形態では、携帯端末１０側に認証部１７が備えられているものとして説明したが、外部の認証サーバを利用してユーザ認証を行なう構成も採用可能である。
【００５４】
図８は、本発明の第５の実施形態の携帯端末の構成を表したブロック図である。図３に表わした第１の実施形態との相違点は、携帯端末１０の認証部１７に代えて、通信部１８が備えられ、外部の認証サーバ２０の認証部２７と通信して認証処理を行うように構成されている点である。
【００５５】
本実施形態の動作としては、上記した第１〜第４の実施形態と同様の動作を採用できるので説明を省略する。
【００５６】
本実施形態では、より多くの認証用画像を保持したり、高機能な認証エンジンによる照合を行ったりすることが可能となる。また、認証サーバ２０へアクセスする時点で、その他のユーザ認証を行なうことも可能である。
【００５７】
以上、本発明の好適な実施形態を説明したが、本発明は、上記した実施形態に限定されるものではなく、本発明の基本的技術的思想を逸脱しない範囲で、更なる変形・置換・調整を加えることができる。例えば、上記した実施形態では、図形Ｍ１（適正）、Ｍ２（被写体）を用いて、被写体と適正位置の距離を表し、被写体の位置を適正位置に誘導するものして説明したが（図１、図２参照）、矢印記号などの方向を指し示すことのできる図形で、被写体の位置を適正位置に誘導する構成も採用可能である（図９、図１１の符号Ｍ３、Ｍ６参照）。
【００５８】
上記した実施形態の図形Ｍ１（適正）、Ｍ２（被写体）に代えて、被写体と適正位置の距離を示すグラフを表示したり、適正位置を画面中央として被写体の位置を示すポインタを表示する等の手法を用いて、ユーザに被写体の適正位置を知らせる構成も採用可能である。
【００５９】
また、上記した各図形に代えて、ユーザが操作中の文字やカーソルの形状（図９の符号Ｍ３参照）や表示位置に変化を加えることにより、被写体と適正位置の距離を知らせる構成も採用可能である。例えば、図９の例では、ユーザによって入力されている電話番号のカーソルの位置に適正位置を知らせる矢印Ｍ３を表示している。また例えば、図１０の例では、被写体の適正位置を図形Ｍ４で表わすとともに、被写体の現在位置をユーザによって入力されている電話番号の表示位置Ｍ５で表わしている。このほか、入力が済んだ文字に濃淡や傾きをつけたり、遠近感を持たせることにより、被写体の位置を適正位置に誘導するサインとしての役割を持たせることも可能である。
【００６０】
もちろん、図１１に示すように、携帯端末の画面上部の各種アイコン群と並列に、被写体の位置を適正位置に誘導する矢印Ｍ６を表示する構成も採用可能である。
【００６１】
また、上記した第１〜第５の実施形態は、適宜組み合わせることが可能である。例えば、第２の実施形態の一定時間の到来（タイムアウト判定）と、第３の実施形態の特定の機能の利用が開始された時点との双方でユーザ認証を打ち切る構成も採用可能である。
【符号の説明】
【００６２】
１０ 携帯端末
１１ 制御部
１２ 表示部
１３ キー操作部
１４ カメラ部
１５、２５ 認証用画像記憶部
１６ 撮影画像記憶部
１７、２７ 認証部
１８ 通信部
２０ 認証サーバ
Ｍ１〜４、Ｍ６ 図形
Ｍ５ 文字表示位置
【技術分野】
【０００１】
本発明は、携帯端末、ユーザ認証方法およびプログラムに関し、特に、カメラを用いてユーザ認証を行う携帯端末、ユーザ認証方法およびプログラムに関する。
【背景技術】
【０００２】
特許文献１に、数字の入力を検知したときにバックグラウンドで認証処理を開始し、認証処理が完了するまでの間ダミー発呼画面を表示部に表示させることにより、顔認証を実行していることが操作者に察知されないようにした携帯端末装置が開示されている。
【０００３】
また、特許文献２には、取引画面を第１の領域と第２の領域に分け、第１の領域は取引操作案内及び入力を行わせ、第２の領域は生体認証のガイダンスを行い、第１の領域に表示される取引操作と第２の領域に表示される生体認証とを並列して動作出来るようにした自動取引装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−１３５７０５号公報
【特許文献２】特開２００７−１０９０７５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１のように、操作者に察知されない態様で顔認証を行う場合、正規のユーザもまた顔認証を実施中であることに気付きにくくなってしまう。このため、適切な位置で撮影できず、ユーザ認証に失敗しまたは時間が掛かってしまい、正規ユーザにとっては利便性が低下してしまうという問題点がある。
【０００６】
また、特許文献１の携帯端末装置では、ユーザ認証が完了するまでの間ダミー発呼画面を表示させるため、ユーザが目的とした機能を利用できるまでの時間が長くなってしまうという問題点もある。
【０００７】
他方、携帯端末において、特許文献２のようにユーザに対し生体認証のガイダンスを行ってしまうと、特許文献１にも記載されているように、不正ユーザによる携帯端末の破棄、破壊が懸念される。
【０００８】
本発明は、上記した事情に鑑みてなされたものであって、その目的とするところは、正規ユーザの利便性を考慮するとともに、不正ユーザによる撮影の察知可能性を低減できる態様でユーザ認証を行う携帯端末、ユーザ認証方法およびプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
本発明の第１の視点によれば、ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、を備えた携帯端末が提供される。
【００１０】
本発明の第２の視点によれば、ユーザにより操作が開始されると、カメラを起動するステップと、前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なうステップと、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示するステップと、を含み、前記ユーザ認証による認証結果が得られるまでの操作を許容するユーザ認証方法が提供される。本方法は、カメラによるユーザ認証を行なう携帯端末という、特定の機械に結びつけられている。
【００１１】
本発明の第３の視点によれば、カメラ付き携帯端末に搭載されたコンピュータに実行させるプログラムであって、ユーザにより操作の開始に応じて、カメラを起動するとともに、ユーザ認証による認証結果が得られるまでの操作を許容する処理と、前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なう処理と、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する処理と、を実行させるプログラムが提供される。なお、このプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。即ち、本発明は、コンピュータプログラム製品として具現することも可能である。
【発明の効果】
【００１２】
本発明によれば、正規ユーザが目的とする機能を利用できるまでの時間を短縮するとともに、不正ユーザに撮影を察知されにくくすることができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の概要を説明するための図である。
【図２】本発明の概要を説明するための別の図である。
【図３】本発明の第１の実施形態の携帯端末の構成を表したブロック図である。
【図４】本発明の第１の実施形態の携帯端末の動作を説明するための図である。
【図５】本発明の第２の実施形態の携帯端末の動作を説明するための図である。
【図６】本発明の第３の実施形態の携帯端末の動作を説明するための図である。
【図７】本発明の第４の実施形態の携帯端末の動作を説明するための図である。
【図８】本発明の第５の実施形態の携帯端末の構成を表したブロック図である。
【図９】本発明の変形実施形態を説明するための図である。
【図１０】本発明の変形実施形態を説明するための図である。
【図１１】本発明の変形実施形態を説明するための図である。
【発明を実施するための形態】
【００１４】
はじめに、本発明の概要を説明する。本発明に係るカメラ付き携帯端末は、ユーザにより操作が開始されるとカメラを起動し、ユーザからの操作受付処理と並行して予め登録した認証用画像との照合によりユーザ認証を行なう。本発明に係るカメラ付き携帯端末は、前記カメラ起動後の所定の期間、前記ユーザによる操作内容が反映されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する。
【００１５】
図１は、ユーザ認証に顔画像を用いる場合の被写体（顔）の位置を適正位置に誘導する表示の例である。図１の例では、同図右側に示されたように、携帯端末のカメラの撮像範囲θに、ユーザの顔が収まっていない。このとき、本発明に係るカメラ付き携帯端末は、、入力中の通話相手の電話番号とともに、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）を表示する。なお、前記図形の位置は、撮影された顔画像の目、鼻、輪郭中心線などを基準に算出することができる。
【００１６】
その後、上記図形Ｍ１（適正）、Ｍ２（被写体）を見たユーザが、カメラの撮像範囲θに、ユーザの顔が収まるように携帯端末を傾け、あるいは、顔を適正位置に移動させると、図２に示すように、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）は重なって表示される。
【００１７】
上記図２のような状態を検出した時点、あるいは、カメラ起動後一定時間経過後に顔画像の撮影を行ない、速やかに認証処理に移行し、正当なユーザであることが確認されれば、カメラ起動後、認証結果が得られるまでの操作は許容されているので、ユーザはそのまま所望の操作（例えば、通話相手の残りの電話番号と発信ボタンの押下）を継続することができる。他方、上記適正位置への案内にも拘らず、正当なユーザでないと判定された場合には、ユーザが発信ボタンの押下は拒否され、「ロック中です。」などといった表示が行われる。
【００１８】
以上のように、本発明によれば、特定操作の開始とともに開始されるカメラによるユーザ認証において、被写体の位置の適正位置への誘導が行われるので、正規ユーザであるか
否かの判定に要する時間を短縮することが可能となる。
【００１９】
［第１の実施形態］
続いて、本発明の第１の実施形態について図面を参照して詳細に説明する。図３は、本発明の第１の実施形態の携帯端末の構成を表したブロック図である。図３を参照すると、制御部１１と、表示部１２と、キー操作部１３と、カメラ部１４と、認証用画像記憶部１５と、撮影画像記憶部１６と、認証部１７とを備えた携帯端末１０の構成が示されている。なお、携帯端末１０には、カメラを備えた携帯電話端末、スマートフォン、業務用携帯端末などの各種の小型端末のほか、カメラが主機能であるデジタルカメラなども含まれる。
【００２０】
制御部１１は、ユーザにより操作が開始されると、カメラ部１４を起動し、撮像を開始させる。また、制御部１１は、前記撮影開始後の所定の期間、前記ユーザによる特定の操作中の画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部として機能する。また、制御部１１は、認証部１７における判定結果に基づいて、前記特定の操作によって開始されようとしている機能の利用を許可または制限する。
【００２１】
表示部１２は、キー操作部１３から入力された内容を表示する液晶ディスプレイ等により構成される。
【００２２】
キー操作部１３は、ユーザの各種操作を受け付けるボタンやポインティングデバイス等によって構成される。なお、キー操作部１３として、タッチパネルを採用することも可能である。
【００２３】
カメラ部１４は、上記ユーザ認証時の被写体の撮影のほか、ユーザ認証用の画像（認証用画像）を撮影するために用いられ、撮影した画像は、認証用画像記憶部１５または撮影画像記憶部１６に格納される。
【００２４】
認証部１７は、認証用画像記憶部１５および撮影画像記憶部１６に格納された画像を照合することによりユーザ認証を行ない、その結果を制御部１１に通知する。
【００２５】
なお、図３では省略しているが、携帯端末１０が、携帯電話端末、スマートフォン、業務用携帯端末などの通信機能を備える装置である場合には、その他通信部などが追加される（図８の通信部１８参照）。
【００２６】
以上、図３に示した携帯端末１０の認証用画像記憶部１５または撮影画像記憶部１６は、携帯端末１０のフラッシュメモリおよびメモリを用いて構成することができ、制御部１１および認証部１７は、携帯端末１０に搭載されたコンピュータに、そのハードウェアを用いて、上記した処理を実行させるコンピュータプログラムにより実現することができる。
【００２７】
続いて、本実施形態の動作について図面を参照して詳細に説明する。図４は、本発明の第１の実施形態の携帯端末の動作を説明するための図である。
【００２８】
図４に示すように、携帯端末１０は、キー操作部１３への操作が行われると（図４のＡ１）、制御部１１は、カメラ部１４を起動して、撮影を開始させる（図４のＣ１）。
【００２９】
ユーザが引き続きキー操作部１３を操作すると、表示部１２には、操作の結果が表示される（図４のＡ５）。
【００３０】
同時に、制御部１１は、カメラ部１４で撮影された画像に基づいて、表示部１２に被写体の位置を適正位置に誘導する図形を表示する。その後、カメラ部１４は、所定のタイミングで撮影した画像を撮影画像記憶部１６に格納する（図４のＣ３）。なお、前記所定のタイミングとしては、図２に示すように、被写体と、適正位置とのズレ量を表わす図形Ｍ１（適正）、Ｍ２（被写体）が重なったタイミング、一定の距離に近づいたタイミング、あるいは、カメラ部１４の起動から一定時間経過後（つまり、正規ユーザであれば十分に被写体を適正位置に移動させることのできる時間が経過した時点）を採用することができる。
【００３１】
認証部１７は、撮影画像記憶部１６に格納された画像と、認証用画像記憶部１５に格納された画像とを比較し、キー操作部１３を操作したユーザが正規ユーザであるか否かの判定（ユーザ認証）を行って（図４のＣ４）、その結果を制御部１１に出力する（図４のＣ５）。
【００３２】
前記ユーザ認証の結果、正規ユーザであるとの判定結果が得られた場合（図４の判定「正規ユーザ？」のＹｅｓ）、制御部１１は引き続き操作を許容する（図４のＡ５）。
【００３３】
一方、正規ユーザでないとの判定結果が得られた場合（図４の判定「正規ユーザ？」のＮｏ）、制御部１１は、以降の操作を制限、使用できないように制御する（図４のＢ１）。併せて、制御部１１は、表示部１２に、操作制限中である旨を表示する。
【００３４】
以上説明したように、本実施形態では、操作開始とともに並行して認証動作が開始され、かつ、被写体を適正位置に誘導する表示が行われるため、正規ユーザの操作を中断させることなく、迅速にユーザ認証を完了することができるという効果を奏する。
【００３５】
また、本実施形態では、撮像しているタイミングを察知されにくい態様としているため、不正ユーザが対策を取ってしまう可能性を低減することができる。
【００３６】
［第２の実施形態］
続いて、上記第１の実施形態に変更を加えた本発明の第２の実施形態について図面を参照して説明する。
【００３７】
上記した第１の実施形態では、正規ユーザであっても、撮影した環境が暗かったり、ユーザの顔の向きが正面でなかったり、条件により照合に失敗することが考えられる。操作開始後、一回目の撮影で正規ユーザであることを確認できなかった場合、再度の撮影と照合を繰り返すことも可能である。
【００３８】
しかしながら、上述のとおり、ユーザの操作開始と並行してユーザ認証を行なう本発明では、認証期間の長期化は、本来使用を制限すべきユーザに対して、必要以上の時間、操作を許容することになってしまう。
【００３９】
そこで、本発明の第２の実施形態では、タイマにより認証時間を制限することでセキュリティを高めている。なお、正規ユーザ、例えば、携帯端末１０の所有者であれば、照合しやすい状態を意識して作り出せるため、利便性を大きく損なうことは無い。
【００４０】
上記本発明の第２の実施形態は、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００４１】
図５は、本発明の第２の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、ユーザの操作開始とともにカメラ部１４だけでなく、タイマも動作させ（図５のＴ１）、一定時間内（図５のＴ３の「計測」期間中）に、認証処理が完了しない場合、タイムアウトと判定し（図５のＴ５）、正規ユーザでないとの結果を返す点である。
【００４２】
これにより、第１の実施形態の効果に加えて、よりセキュリティを向上させることが可能となる。
【００４３】
［第３の実施形態］
続いて、上記第２の実施形態と同様の観点で、第１の実施形態に変更を加えた本発明の第３の実施形態について図面を参照して説明する。
【００４４】
上記した第２の実施形態では、タイマにより認証時間を制限したが、第３の実施形態では、セキュリティレベルの高い操作、例えば、アドレス帳の閲覧・操作、メールの閲覧・送受信、画像の閲覧・操作、発着信履歴の閲覧・操作、ＩＣカード機能の利用等が行われるまでに、認証処理が完了し、正規ユーザであることが確認されれば、そのまま上記機能を利用することができ、それ以外は操作制限を受けるようにしている。
【００４５】
上記本発明の第３の実施形態も、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００４６】
図６は、本発明の第３の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、ユーザの操作が開始され、特定機能を利用が開始されるまでに（図６のＡ３）、認証処理が完了しない場合、認証失敗と判定し（図５の「正規ユーザ？」のＮｏ）、操作制限が行われる点である。
【００４７】
以上のように、本実施形態も、第２の実施形態と同様に、よりセキュリティを向上させることが可能となる。
【００４８】
［第４の実施形態］
上記した第１〜第３の実施形態では、カメラによるユーザ認証ができなかった場合、一律に操作制限を行うようにしているが、被写体の撮影ができない様な環境、例えば、暗くて顔を認識できないような場所での利用も考えられる。
【００４９】
そこで、本実施形態では、上記のようにカメラによるユーザ認証に失敗した場合であっても、他のユーザ認証処理を行い、正規ユーザであることを確認できるようにしている。前記他のユーザ認証処理としては、パスワードの入力による認証や、ユーザの音声の照合など、種々の方法を採用することができる。
【００５０】
上記本発明の第４の実施形態も、上記第１の実施形態と同等の構成にて実現できるので、以下、動作上の相違点を中心に説明する。
【００５１】
図７は、本発明の第４の実施形態の携帯端末の動作を説明するための図である。図４に表わされた第１の実施形態の動作との相違点は、カメラによるユーザ認証で正規ユーザであることが確認できなかった場合（図７の「正規ユーザ？」のＮｏ）に、第２の認証処理（図７のＤ４）を実行し、正規ユーザであることが確認できた場合は、ユーザの操作の継続を許容する点である。
【００５２】
また、このときに、図７のＣ３で撮影した画像、あるいは、第２の認証処理後に再度撮影した画像を保存（既存の認証用画像と置き換え、または、追加）し、次回の認証用画像として用いてもよい。これにより、次回ユーザ認証時に、正規ユーザの判定率を向上させることができる。もちろん、暗くて顔を認識できないような場所である場合（ユーザに保存するか否かを問い合わせるほか、撮影した画像の輝度値の平均値やヒストグラムで検出可能）は、上記画像の保存を行わないようにしてもよい。
【００５３】
［第５の実施形態］
上記した第１〜第４の実施形態では、携帯端末１０側に認証部１７が備えられているものとして説明したが、外部の認証サーバを利用してユーザ認証を行なう構成も採用可能である。
【００５４】
図８は、本発明の第５の実施形態の携帯端末の構成を表したブロック図である。図３に表わした第１の実施形態との相違点は、携帯端末１０の認証部１７に代えて、通信部１８が備えられ、外部の認証サーバ２０の認証部２７と通信して認証処理を行うように構成されている点である。
【００５５】
本実施形態の動作としては、上記した第１〜第４の実施形態と同様の動作を採用できるので説明を省略する。
【００５６】
本実施形態では、より多くの認証用画像を保持したり、高機能な認証エンジンによる照合を行ったりすることが可能となる。また、認証サーバ２０へアクセスする時点で、その他のユーザ認証を行なうことも可能である。
【００５７】
以上、本発明の好適な実施形態を説明したが、本発明は、上記した実施形態に限定されるものではなく、本発明の基本的技術的思想を逸脱しない範囲で、更なる変形・置換・調整を加えることができる。例えば、上記した実施形態では、図形Ｍ１（適正）、Ｍ２（被写体）を用いて、被写体と適正位置の距離を表し、被写体の位置を適正位置に誘導するものして説明したが（図１、図２参照）、矢印記号などの方向を指し示すことのできる図形で、被写体の位置を適正位置に誘導する構成も採用可能である（図９、図１１の符号Ｍ３、Ｍ６参照）。
【００５８】
上記した実施形態の図形Ｍ１（適正）、Ｍ２（被写体）に代えて、被写体と適正位置の距離を示すグラフを表示したり、適正位置を画面中央として被写体の位置を示すポインタを表示する等の手法を用いて、ユーザに被写体の適正位置を知らせる構成も採用可能である。
【００５９】
また、上記した各図形に代えて、ユーザが操作中の文字やカーソルの形状（図９の符号Ｍ３参照）や表示位置に変化を加えることにより、被写体と適正位置の距離を知らせる構成も採用可能である。例えば、図９の例では、ユーザによって入力されている電話番号のカーソルの位置に適正位置を知らせる矢印Ｍ３を表示している。また例えば、図１０の例では、被写体の適正位置を図形Ｍ４で表わすとともに、被写体の現在位置をユーザによって入力されている電話番号の表示位置Ｍ５で表わしている。このほか、入力が済んだ文字に濃淡や傾きをつけたり、遠近感を持たせることにより、被写体の位置を適正位置に誘導するサインとしての役割を持たせることも可能である。
【００６０】
もちろん、図１１に示すように、携帯端末の画面上部の各種アイコン群と並列に、被写体の位置を適正位置に誘導する矢印Ｍ６を表示する構成も採用可能である。
【００６１】
また、上記した第１〜第５の実施形態は、適宜組み合わせることが可能である。例えば、第２の実施形態の一定時間の到来（タイムアウト判定）と、第３の実施形態の特定の機能の利用が開始された時点との双方でユーザ認証を打ち切る構成も採用可能である。
【符号の説明】
【００６２】
１０ 携帯端末
１１ 制御部
１２ 表示部
１３ キー操作部
１４ カメラ部
１５、２５ 認証用画像記憶部
１６ 撮影画像記憶部
１７、２７ 認証部
１８ 通信部
２０ 認証サーバ
Ｍ１〜４、Ｍ６ 図形
Ｍ５ 文字表示位置
【特許請求の範囲】
【請求項１】
ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、
前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、
前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、
を備えた携帯端末。
【請求項２】
前記位置誘導部は、前記カメラ部により撮像された被写体の像を用いて、前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離を示す図形を表示する請求項１の携帯端末。
【請求項３】
前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離に基づいて、ユーザ認証に用いる画像の撮影タイミングを決定する請求項１または２の携帯端末。
【請求項４】
前記位置誘導部は、前記図形に代えて、前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離に応じて、前記ユーザによる特定の操作により入力された文字またはカーソルの、形状または表示位置を変化させる請求項２または３の携帯端末。
【請求項５】
前記認証部によるユーザ認証が、所定時間内または前記ユーザの操作により特定の機能が起動されるまでに完了しない場合には、ユーザ認証に失敗したものと判定する請求項１から４いずれか一の携帯端末。
【請求項６】
前記認証部によるユーザ認証が所定時間内に完了しない場合には、他の認証手段によるユーザ認証を実行し、前記他の認証手段によるユーザ認証に成功した場合、次回のユーザ認証時の認証用画像の更新動作を行う請求項１から５いずれか一の携帯端末。
【請求項７】
前記認証部によるユーザ認証に代えて、ネットワーク上に配置され、予め登録された認証用画像を用いた認証処理を行う認証サーバを利用してユーザ認証を行う請求項１から６いずれか一の携帯端末。
【請求項８】
ユーザにより操作が開始されると、カメラを起動するステップと、
前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なうステップと、
前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示するステップと、
を含み、
前記ユーザ認証による認証結果が得られるまでの操作を許容するユーザ認証方法。
【請求項９】
カメラ付き携帯端末に搭載されたコンピュータに実行させるプログラムであって、
ユーザにより操作の開始に応じて、カメラを起動するとともに、ユーザ認証による認証結果が得られるまでの操作を許容する処理と、
前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なう処理と、
前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する処理と、
を実行させるプログラム。
【請求項１】
ユーザにより操作が開始されると、カメラ部を起動するとともに、認証結果が得られるまでの操作を許容する制御部と、
前記カメラ部により所定のタイミングで撮影された被写体と予め登録した認証用画像との照合によりユーザ認証を行なう認証部と、
前記カメラ部の起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する位置誘導部と、
を備えた携帯端末。
【請求項２】
前記位置誘導部は、前記カメラ部により撮像された被写体の像を用いて、前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離を示す図形を表示する請求項１の携帯端末。
【請求項３】
前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離に基づいて、ユーザ認証に用いる画像の撮影タイミングを決定する請求項１または２の携帯端末。
【請求項４】
前記位置誘導部は、前記図形に代えて、前記被写体の特徴部分の現在位置と、被写体の特徴部分の目標位置との距離に応じて、前記ユーザによる特定の操作により入力された文字またはカーソルの、形状または表示位置を変化させる請求項２または３の携帯端末。
【請求項５】
前記認証部によるユーザ認証が、所定時間内または前記ユーザの操作により特定の機能が起動されるまでに完了しない場合には、ユーザ認証に失敗したものと判定する請求項１から４いずれか一の携帯端末。
【請求項６】
前記認証部によるユーザ認証が所定時間内に完了しない場合には、他の認証手段によるユーザ認証を実行し、前記他の認証手段によるユーザ認証に成功した場合、次回のユーザ認証時の認証用画像の更新動作を行う請求項１から５いずれか一の携帯端末。
【請求項７】
前記認証部によるユーザ認証に代えて、ネットワーク上に配置され、予め登録された認証用画像を用いた認証処理を行う認証サーバを利用してユーザ認証を行う請求項１から６いずれか一の携帯端末。
【請求項８】
ユーザにより操作が開始されると、カメラを起動するステップと、
前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なうステップと、
前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示するステップと、
を含み、
前記ユーザ認証による認証結果が得られるまでの操作を許容するユーザ認証方法。
【請求項９】
カメラ付き携帯端末に搭載されたコンピュータに実行させるプログラムであって、
ユーザにより操作の開始に応じて、カメラを起動するとともに、ユーザ認証による認証結果が得られるまでの操作を許容する処理と、
前記カメラにより所定のタイミングで撮影した被写体と予め登録した認証用画像との照合によりユーザ認証を行なう処理と、
前記カメラ起動後の所定の期間、前記ユーザによる操作内容が表示されている画面に、前記被写体の位置を適正位置に誘導する図形を表示する処理と、
を実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−７３７２４（Ｐ２０１２−７３７２４Ａ）
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願番号】特願２０１０−２１６７１０（Ｐ２０１０−２１６７１０）
【出願日】平成２２年９月２８日（２０１０．９．２８）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願日】平成２２年９月２８日（２０１０．９．２８）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
[ Back to top ]