顔認識機能を用いたゲーム装置
【課題】画面の前に立ったプレイヤをカメラによって撮影し、画面内にプレイヤの画像ではなく、自機キャラクタを三人称視点で表示するようにし、プレイヤの顔部分の動きのみで自機キャラクタの動きを操作できるようにすることにより、画面内の自機キャラクタを、プレイヤがオーバーアクションすることなく移動することができる顔認識機能を用いたゲーム装置を提供する。
【解決手段】プレイヤがコインを投入しスタートボタン４を押すと、モニタ１に顔認識画面が現れる。ＣＤＤカメラ２によってプレイヤの画像から顔を認識する。認識された顔に対し、自機となるキャラクタを選択する。モニタ１に敵キャラクと自機キャラクタを含むゲーム画面が表示され、プレイヤのガンコントローラ３の射撃操作に従ってゲームが進行する。プレイヤは顔のみ動かすのみで画面上の自機キャラクタを移動させることができる。
【解決手段】プレイヤがコインを投入しスタートボタン４を押すと、モニタ１に顔認識画面が現れる。ＣＤＤカメラ２によってプレイヤの画像から顔を認識する。認識された顔に対し、自機となるキャラクタを選択する。モニタ１に敵キャラクと自機キャラクタを含むゲーム画面が表示され、プレイヤのガンコントローラ３の射撃操作に従ってゲームが進行する。プレイヤは顔のみ動かすのみで画面上の自機キャラクタを移動させることができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、プレイヤの顔の動きを認識し、プレイヤの顔の動きに対応してゲーム中の自キャラクタを移動させることを利用したゲーム装置に関する。
【背景技術】
【０００２】
プレイヤの顔面をセンシングし、センシングに２Ｄキャラクタを被せて追従する技術を利用したゲーム機が実用に供されている。
顔面のセンシングは主にＣＣＤカメラがセットされ、撮影された顔面より目と口の位置関係を検出して顔と認識するツールが用いられている。
上記センサを用い人体の動作を取り入れて、画像内に反映させた「回避」アクションを行うガンシューティングゲームが存在する。
【０００３】
このようなゲーム機として「ザ・警視庁」（コナミ社の商標）が知られている。
また、センサを用いて画面内に体で反らしたり、物陰に隠れて相手の弾を「回避」するガンゲームとして特許文献１が提案されている。
これは、複数のプレイヤ同士が撃ち合うことにより直接的に射撃の腕を競い、敵キャラクタに複雑な動きをさせることができるものである。
スクリーン上に設置したＣＣＤカメラにより撮影したプレイヤの映像を相手プレイヤのスクリーンに相互に映し出し、各プレイヤは自分のプレイフィールド内で動きながらスクリーンに映し出される相手プレイヤの映像を狙ってポインティング装置のトリガを操作するものである。
【０００４】
スクリーン上ではプレイヤの像に加えて障害物の像が合成される。プレイヤはＣＣＤカメラの撮影範囲内で動き、この範囲から外れた場合には相手スクリーンからプレイヤの映像は消える。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−１０４６４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１はプレイヤが画面の外に身を乗り出すか、物陰に隠れるように移動しないと、相手の弾を避けることが出来ない。これは、体全体を移動させるために、ゲームの進行処理にタイムラグを生じる。また、常に回避動作のために体全体を上下左右に移動させる必要がある。さらにプレイヤが体全体を移動させるため、プレイヤが動くゲームスペースを大きくとる必要があり、ゲーム筐体領域が拡大するという欠点があった。
さらに常時プレイヤが体全体を動かし通常のゲームに比較し疲労しやすいため、リプレイ回数を多く望めない。
【０００７】
本発明の目的は、画面の前に立ったプレイヤをカメラによって撮影し、画面内にプレイヤの画像ではなく、自機キャラクタを三人称視点で表示するようにし、プレイヤの顔部分の動きのみで自機キャラクタの動きを操作できるようにすることにより、画面内の自機キャラクタを、プレイヤがオーバーアクションすることなく移動することができる顔認識機能を用いたゲーム装置を提供することにある。
【課題を解決するための手段】
【０００８】
前記目的を達成するために本発明の請求項１は、モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、自キャラクタが敵キャラクタを射撃することによって敵を倒すゲーム装置において、ゲーム機筐体に設置し、プレイヤを撮影するカメラと、敵に対し攻撃を加えるための攻撃手段と、前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、プレイヤが前記攻撃手段で敵キャラクタを攻撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段とを備えたことを特徴とする。
本発明の請求項２はモニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、射撃によって相手を倒すガンゲーム装置において、ゲーム機筐体に設置し、プレイヤを撮影するカメラと、敵に対し射撃を行うためのガンコントローラと、前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、プレイヤが前記ガンコントローラで敵を射撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段とを備えたことを特徴とする。
本発明の請求項３は請求項１または２記載の発明において前記プレイヤの顔の動きは、プレイヤが上方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の上方に移動させ、プレイヤが下方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の下方に移動させ、プレイヤが右方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の右方向に移動させ、プレイヤが左方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の左方向に移動させることを特徴とする。
本発明の請求項４は請求項１，２または３記載の発明において前記カメラでプレイヤを撮影できる範囲の外にプレイヤの顔が移動したとき、選択したキャラクタの動きを停止することを特徴とする。
本発明の請求項５は請求項１，２，３または４記載の発明において選択されたキャラクタへのプレイヤの対応付けは、プレイヤの目，鼻，口の顔情報を選択されたキャラクタの目，鼻，口にそれぞれ重ねる処理を行うことを特徴とする。
【発明の効果】
【０００９】
上記構成によれば、全身をセンサで検出している従来技術に比較し顔検出機能で顔面のパーツのみの検出にすることにより全身を使ったオーバーアクションではなく、上半身のみの動きのみで対応できてアクションが大きくならないため、従来のゲーム筐体より省スペース化を図ることができる。
また、ガンゲームにおいて、プレイヤの動きを直に反映させる視点より画面内に自分のキャラクタが存在する視点にすることにより、攻撃判定や被弾判定が特定しやすく「当てた，当てられた」が判り易い。
【図面の簡単な説明】
【００１０】
【図１】本発明による顔認識機能を用いたゲーム装置の外観を示す正面図である。
【図２】本発明による顔認識機能を用いたゲーム装置でのプレイ状況を説明するための斜視図である。
【図３】モニタに表示されるガンゲーム画面を示す図である。
【図４Ａ】ガンゲームに対する操作・処理の手順を説明するための図で、プレイヤの顔認識から顔移動に対する自機キャラクタの移動状況を示している。
【図４Ｂ】ガンゲームに対する操作・処理の手順を説明するための図で、プレイヤがガンコントローラで射撃した場合と、敵キャラクタから被弾した場合を示している。
【図４Ｃ】顔を認識できる領域を説明するための図である。
【図５】本発明による顔認識機能を用いたゲーム装置の回路の実施の形態を示すブロック図である。
【図６】本発明による顔認識機能を用いたゲーム装置の操作および動作を説明するためのフローチャートである。
【図７】カメラ撮影範囲におけるプレイヤの顔の動作に対するキャラクタの動きを説明するためのフローチャートである。
【図８】プレイヤの顔の上下左右の移動に対するキャラクタの移動を説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施の形態を詳しく説明する。
図１は、本発明による顔認識機能を用いたゲーム装置の外観を示す正面図であり、ガンゲームに適用したものである。
ガンゲーム機１０筐体の中央に相手プレイヤのキャラクタおよび自プレイヤのキャラクタを出現させるゲーム画面を表示するモニタ１が配置されている。モニタ１の上部にはプレイヤを投影するためのＣＣＤカメラ２が配置されている。モニタ１の前部にゲームをスタートさせるスタートボタン４およびコイン投入部８が配置されている。ガンゲーム機１０筐体の下部右側にガンラック５が設けられ、その中にガンゲーム機１０の回路に接続されたケーブル端に取り付けられたガンコントローラ３が収容されている。
【００１２】
図２は本発明による顔認識機能を用いたゲーム装置でのプレイ状況を説明するための斜視図である。
プレイヤ７はＣＣＤカメラ２の前に立ち、ガンコントローラ３をモニタ１に向けて構えている。プレイヤはゲームが開始されても体全体ではなく顔７ａを左右または上下方向に動かすのみでゲームを進行させることができる。モニタ１に表示される敵キャラクタをガンコントローラ３で照準し、ガンコントローラ３の射撃のスイッチをオン操作することにより弾が発射される。射撃オンする場合に、敵キャラクタに照準を合わせると、その照準１７が画面の上に現れる（図３参照）。照準はガンコントローラの発射口を画面に向け、照準をオンするスイッチ操作をすることにより発生する。
【００１３】
図３はモニタに表示されるガンゲーム画面を示す図である。
画面の手前にプレイヤのキャラクタを示すプレイヤ情報表示２１が表示され、その隣に自機の体力を示す自機ライフ表示２２が表示されている。敵の攻撃で被弾すると自機ライフのバーは減少する。画面の略中央に映し出されている３つの丸形状体は自機が隠れるためのバリア陣地２０である。これに対応し、画面の中央上部に敵キャラクタ１６が隠れる３つの敵のバリア陣地１５が表示されている。
自機キャラクタ１９は後ろ向きに画面に映っており、プレイヤが首を動かすことによりバリア陣地２０に隠れることができる。自機キャラクタ１９からは照準１７が発っせられている。照準１７は専用ガンコントローラで操作されるレーザのサイトである。一方、敵キャラクタ１６は敵バリア陣地１５の間に隠れながら、敵弾１８を発射している。
【００１４】
画面上端付近に敵であるケンタロウ（対戦相手が任意に自分のキャラクタに名前を付けることができる。）を示す対戦相手表示１２が表示され、その隣に敵の体力を示す対戦相手ライフ表示１３が表示されている。画面上右隅に残り時間を示すカウントダウンするタイム表示１４が示されており、残り９０秒となっている。
画面上左隅に１プレイヤの表示がなされ、このゲームでの得点を示すスコア表示１１が表示されている。２５６２００点獲得している。相手がコンピュータではなく他のガンゲーム機である場合、相手側ゲーム機のモニタにも図３と同じような表示がなされている。この場合、敵キャラクタと自機キャラクタの立場は反対になるように表示される。
【００１５】
図４Ａはガンゲームに対する操作・処理の手順を説明するための図で、プレイヤの顔認識から顔移動に対する自機キャラクタの移動状況を示している。
プレイヤ７はガンゲーム機１０筐体の上部に設置してあるＣＣＤカメラ２の撮影範囲に入ることにより、ＣＣＤカメラ２はプレイヤの顔を撮影する（図４Ａ（ａ））。ガンゲーム機のＣＰＵはＣＣＤカメラ２で撮影された顔を認識するための認識枠３１を形成し、その中にプレイヤの顔表示４１の眼３３となる部分，鼻３４となる部分および口３５となる部分を捕らえ、回路のメモリ部分にデータベースとして持っている顔表示サンプル画像と比較し、比較した結果、眼，鼻，口が所定の範囲で類似する位置関係になっていることを検知して顔であると認識し、眼，鼻，口の相対的位置情報，形状情報などを回路のメモリ部分で記憶する。図４Ａ（ｂ）にＣＣＤカメラ２により撮影されたプレイヤの顔面を認識枠内に捕らえている状態を示している。なお、認識すべき顔をプレイヤがガンコントローラでプレイヤの顔を射撃することにより特定して上記認識枠を形成させる。
【００１６】
つぎに検出した眼，鼻，口よりなる顔情報をプレイヤが自機として選択したキャラクタ３６の顔に重ね合わせる。すなわち選択したキャクタの顔にプレイヤの眼，鼻，口の情報より形成される位置，形状のキャラ眼３７，キャラ鼻３８，キャラ口３９を合成する（図４Ａ（ｃ））。このように処理することによりプレイヤの顔が動けば、ＣＰＵは画面上で眼，鼻，口を合成した自機キャラクタ３６も同じ方向に，対応の距離だけ移動するように処理する。図４Ａ（ｄ）にプレイヤの顔表示４１の移動軌跡表示４１ａに合わせ、自機キャラクタ３６もキャラ移動軌跡表示４２ａのように移動する様子が示されている。
【００１７】
図４Ｂはガンゲームに対する操作・処理の手順を説明するための図で、プレイヤがガンコントローラで射撃した場合と、敵キャラクタから被弾した場合を示している。
図４Ｂ（ａ）においてプレイヤはガンコントローラ３を構えており、ガンコントローラ３の射撃用のスイッチをオンすると、ガンコントローラ３は射撃したときの衝撃が生じる（衝撃が発生したとして衝撃表示４３で示してある）。この操作により画面上の自機キャラクタ３６のキャラ口３９からは弾４７が発射される。
【００１８】
図４Ｂ（ｂ）に示すように自機キャラクタ３６が敵弾を浴びた場合、画面上で火花が走ったような形のキャラ被弾表示４５が表示される。これに連動してガンコントローラ３に内蔵されているバイブレータに信号が送られ、ガンコントローラ３は振動を起こす（被弾したとして被弾表示４４で示してある）。これにより、プレイヤは画面の表示およびガンコントローラ３の振動により敵弾が命中したことを感じることができる。
【００１９】
図４Ｃは顔を認識できる領域を説明するための図である。
ＣＣＤカメラ２の撮影範囲の縦横の範囲は顔の付近であり、撮影できる距離は所定の位置までであり、図４Ｃ（ａ）は顔表示領域４６に顔７１が入っており、その範囲の顔の動きで自機キャラクタが動きゲームが進行する。図４Ｃ（ｂ）はプレイヤが所定の距離の外まで後ろにのぞけり、顔表示領域４６から外れている状態を示している。ＣＣＤカメラ２の顔表示領域４６から外れる動きをすると、画面内の自機キャラクタの動きは停止する。
【００２０】
図５は、本発明による顔認識機能を用いたゲーム装置の回路の実施の形態を示すブロック図である。
コイン投入部８からコインが投入されるとコインが検出され、その情報はコイン関連装置５３，入出力制御部５６を介してＣＰＵ５１に伝達される。コイン投入の状態、すなわちコイン数・プレイ数などの設定値はバックアップメモリ５４に格納される。
スタートボタン４が押されると、ゲーム開始の情報が入出力制御部５６を介してＣＰＵ５１に送られる。ＣＰＵ５１はプレイ開始の情報を受けると、カメラ制御部５７を制御し、ＣＣＤカメラ２からプレイヤの顔の画像を撮影し、その顔情報を認識するための処理を行う。
【００２１】
ガンコントローラ３に設けられている射撃スイッチ３ａ，照準スイッチ３ｂから信号入力するとガン制御部５５は入力信号を入出力制御部５６を介してＣＰＵ５１に送る。また、ＣＰＵ５１より振動情報が送られてきた場合、バイブレータ３ｃを作動させガンコントローラ３を振動させる。
ＣＰＵ５１はガンコントローラからの射撃スイッチ３ａ，照準スイッチ３ｂのスイッチオン信号により、顔を認識してその情報を得るとともに自機キャラクタを選択する顔認識・キャラクタ選択処理を行う。そしてこの後、プレイヤが選択するゲームモードに従ってガンゲームを進行することとなる。例えば、他のゲーム機を相手とする場合、通信部６２を制御し、ネットワークを介して他の店舗のガンゲーム機のプレイヤや同じ店舗のガンゲーム機のプレイヤが対戦相手を待っているか否かの情報を受け、その情報に従って対戦相手を決定する。対戦相手が決定すれば、決定した相手とゲームを行うことができる。
【００２２】
ＲＯＭ６１はガンゲーム機筐体全体を制御する制御プログラム，ガンゲームを実行するガンゲームプログラム，顔位置を検出し顔を認識するための顔認識プログラムおよび該ゲーム機に必要なデータが格納されている。
ＲＡＭ５９はゲーム制御部５１ａなどで行う演算，処理の作業エリアとして用いられるとともに処理によって発生する情報を一時的に記憶する。
ＣＰＵ５１はＲＯＭ６１から制御プログラム，ガンゲームプログラムおよび顔認識プログラムを読み込むことによりゲーム制御部５１ａ，ガンゲーム実行部５１ｂ，顔認識部５１ｃおよび顔位置検出部５１ｄの各機能を実現する。
【００２３】
ゲーム制御部５１ａはゲーム開始前の待ち受け状態でのコイン投入などの監視や図示しない電飾などの点灯，点滅などの制御やゲーム終了後の制御などを行う。また、ガンゲーム実行部５１ｂは、コイン投入の後、ゲーム制御部５１ａから制御が渡され顔位置検出部５１ｄ，顔認識部５１ｃによって顔認識を行い、自機キャラクタを選択し、対戦相手を決めた後、ガンゲーム画面を表示する制御を行いゲームを進行させる。
顔位置検出部５１ｄはＣＣＤカメラ２でプレイヤの顔を取り込み、顔の眼，鼻，口の位置を検出する。顔認識部５１ｃは顔の眼，鼻，口の位置情報に対しサンプル画像を参照することによりその画像が顔であると認識する。
【００２４】
図６は本発明による顔認識機能を用いたゲーム装置の操作および動作を説明するためのフローチャートである。
モニタ１にはタイトル画面が表示されており、画面にゲーム開始のためコインを投入する旨の表示がなされる（ステップ（以下「Ｓ」という）００１）。ＣＰＵ５１はプレイヤがコインを入れてスタートボタンを押したか否かを監視している（Ｓ００２）。
コインが投入されると、コイン投入の情報はコイン関連装置５３，入出力制御部５６を介して送られ、さらにスタートボタン４が押されるとその情報も入出力制御部５６を介して送られてくる。ＣＰＵ５１はカメラ制御部５７の制御の下にＣＣＤカメラ２からプレイヤを撮影してカメラ認証画面を表示する（Ｓ００３）。プレイヤはこの画面を見て自分の該当する顔を認識させるために画面に映った画像を狙ってガンコントローラ３を撃つこととなる。ＣＰＵ５１はプレイヤが画面の画像を狙って撃ったか否か（照準を合わせたか否かでも良い）を判断する？（Ｓ００４）。すなわち、プレイヤの認証すべき顔を特定する操作を待つ。これによりＣＰＵ５１は顔認証のための処理を行い、顔認証ができたか否かを判断する（Ｓ００５）。
【００２５】
顔認証ができなければ、モニタ１に「画面が認識できません」を表示し、該当しそうな例を画面に並べる（Ｓ００６）。そして「もう、一度認証を行います」を表示し（Ｓ００７）、Ｓ００３において再度カメラ認証画面の表示を行う。
顔認証ができれば、つぎにキャラクタを選択する画面を表示する（Ｓ００８）。キャラクタ選択は多数の種類のキャラクタが並んでいる画面の中から、その１つにガンコントローラで照準を合わせることにより選択する。
プレイヤが多数の種類のキャラクタの１つに照準を合わせると、その照準を合わせた画面の位置から選択するキャラクタを特定することができる。
【００２６】
ＣＰＵ５１は好きなキャラクタを選択して決定したか否かを監視する（Ｓ００９）。選択には制限時間があり、制限時間が過ぎた場合、ＣＰＵ５１で予め決めてあるデフォルトのキャラクタを選択することとなる。キャラクタ選択決定された場合、つぎはゲームモードを選択する画面を表示する（Ｓ０１０）。対戦かシングルかのいずれかであり、ガンコントローラの照準を合わせることにより選択する。シングルモードを選択した場合、ＣＰＵキャラクタと対戦となり、ゲームスタートとなる（Ｓ０１３，Ｓ０１４）。一方、対戦モードを選択した場合、モニタ１に「対戦相手を待っています」を表示する（Ｓ０１１）。
【００２７】
ＣＰＵ５１はモニタ１に待ちの表示を行うとともにネットワーク６３を介してサーバ装置にアクセスし、他の店舗のガンゲーム装置で同じように対戦相手を待っているプレイヤを検索する。同じ店舗のガンゲーム機に対しても同様に検索する。
そして対戦相手が見つかったか否かを判断する（Ｓ０１２）。所定の時間、対戦相手を探しても見つからない場合、ＣＰＵキャラクタとの対戦となる（Ｓ０１３）。
対戦相手が見つかった場合、図３で示すようなガンゲーム画面を表示してガンゲームを開始する（Ｓ０１４）。時間内１対１の１〜２本勝負の撃ち合いとなって自機の体力が「０」になる前に敵の体力を「０」にすれば勝ちとなる。
ＣＰＵ５１は勝負が決着したか否かを監視することとなる（Ｓ０１５）。
【００２８】
勝利した場合（Ｓ０１６）、１０勝したか否かを判断する（１０勝すれば勝ちとなる）（Ｓ０１８）。敗北した場合（Ｓ０１７）、さらにゲームを継続するか否かを画面表示によってプレイヤに尋ねる（Ｓ０２３）。プレイヤはガンコントローラの照準でコンティニューを選択した場合、Ｓ０１４に戻って再度のガンゲームを行う。継続しない場合には、Ｓ００１のタイトル画面表示に戻る。
Ｓ０１８において、いまだ１０勝になっていない場合、次のラウンドに行くか否かをプレイヤに判断させる（Ｓ０１９）。プレイヤはガンコントローラの照準で次のラウンドを選択した場合、モニタ１に「次の対戦相手を探しにいきます」を表示して（Ｓ０２０）、Ｓ０１１の対戦相手検索のステップに戻る。つぎのラウンドに行かない場合、Ｓ００１のタイトル画面表示に戻る。
１０勝に到達した場合、ゲーム終了となり、賞賛メッセージを表示する（Ｓ０２１）。ついでゲームオーバ（Ｓ０２２）となって、Ｓ００１のタイトル画面表示に戻る。
【００２９】
図７はカメラ撮影範囲におけるプレイヤの顔の動作に対するキャラクタの動きを説明するためのフローチャートである。
図６におけるＳ０１４のガンゲームを開始した後の処理であり、ＣＣＤカメラによってプレイヤの画像を繰り返し取り込み、制限時間内にプレイヤの顔の移動を検知した場合、キャラクタの移動に反映させる処理を行う。
プレイヤの顔を検知している位置が定位置であるとする（Ｓ１０１）。ＣＰＵ５１は制限時間内か否かを判断する（Ｓ１０２）。制限時間を越えた場合にはプレイヤの画像取り込みによる移動処理は終了する。制限時間内であれば、顔を動かしたか否かを判断する（Ｓ１０３）。これは前回に取り込んだ顔の位置と今回取り込んだ顔の位置を比較することにより知ることができる。
【００３０】
動きを検出した場合、その動きがセンサ（カメラの撮影範囲）からはみでるような顔の動きか否かを判断する（Ｓ１０４）。その動きがカメラの撮影範囲からはみ出なければ、画面内の自機キャラクタを、動かした顔を同じ位置に移動する（Ｓ１０４）。一方、カメラの撮影範囲にプレイヤの顔がなくなった場合、顔がはみ出たとして、自機キャラクタの動きを停止する（Ｓ１０５）とともに画面に警告表示する。警告は画面に表示したり、音声を用いたりして元の定位置に戻るよう促す。この結果、プレイヤが顔を動かしてカメラの撮影範囲に戻ったか否かを判断する（Ｓ１０６）。戻ったと判断した場合、画面内の自機キャラクタを、カメラの撮影範囲に戻った位置と同じ位置に移動する（Ｓ１０７）。このような自機キャラクタの移動シーケンスは繰り返し実行される。
【００３１】
図８はプレイヤの顔の上下左右の移動に対するキャラクタの移動を説明するための図である。
プレイヤの顔が停止状態において、上に顔が移動すれば、自機キャラクタは上に移動する。同様に右，下および左に顔が移動すれば、自機キャラクタはそれぞれ右，下および左に移動する。プレイヤの顔の動きで、このように上下左右にキャラクタを移動させることができる。
【００３２】
以上の実施の形態はガンゲーム機に適用した例を説明したが、ガンゲーム以外の操作を伴うゲーム機でも同様に適用することができる。すなわち、カメラでプレイヤの顔を撮影してプレイヤの顔の動きで、画面上の選択したキャラクタやアイテムを移動させる処理を伴うゲームであるならば、ゲームの種類は問わない。
また、実施の形態における移動を制御するキャラクタは２Ｄ表示であっても３Ｄ表示であっても、本発明は適用できるものである。
また、顔認識やキャラクタ選択などにプレイヤが操作するスイッチをガンコントローラの射撃スイッチや照準スイッチを使用する例を説明したが、ガンコントローラに設けたスイッチ類を用いずに例えば、操作パネルに設けたスイッチ類を利用してもよい。
【産業上の利用可能性】
【００３３】
イベント会場やゲームセンタに設置されるガンゲームなどのゲーム装置である。
【符号の説明】
【００３４】
１ モニタ
２ ＣＣＤカメラ
３ ガンコントローラ
４ スタートボタン
５ ガンラック
６ コインボックス
７ プレイヤ
８ コイン投入部
１１ スコア表示
１２ 対戦相手表示
１３ 対戦相手ライフ表示
１４ タイム表示
１５ 敵のバリア陣地
１６ 敵キャラクタ
１７ 照準
１８ 敵弾
１９ 自機キャラクタ
２０ バリア陣地
２１ プレイヤ情報表示
２２ 自機ライフ表示
４６ 顔表示領域
５１ ＣＰＵ
５３ コイン関連装置
５４ バックアップメモリ
５５ ガン制御部
５６ 入出力制御部
５７ カメラ制御部
５８ 画像処理部
５９ ＲＡＭ
６１ ＲＯＭ
６２ 通信部
【技術分野】
【０００１】
本発明は、プレイヤの顔の動きを認識し、プレイヤの顔の動きに対応してゲーム中の自キャラクタを移動させることを利用したゲーム装置に関する。
【背景技術】
【０００２】
プレイヤの顔面をセンシングし、センシングに２Ｄキャラクタを被せて追従する技術を利用したゲーム機が実用に供されている。
顔面のセンシングは主にＣＣＤカメラがセットされ、撮影された顔面より目と口の位置関係を検出して顔と認識するツールが用いられている。
上記センサを用い人体の動作を取り入れて、画像内に反映させた「回避」アクションを行うガンシューティングゲームが存在する。
【０００３】
このようなゲーム機として「ザ・警視庁」（コナミ社の商標）が知られている。
また、センサを用いて画面内に体で反らしたり、物陰に隠れて相手の弾を「回避」するガンゲームとして特許文献１が提案されている。
これは、複数のプレイヤ同士が撃ち合うことにより直接的に射撃の腕を競い、敵キャラクタに複雑な動きをさせることができるものである。
スクリーン上に設置したＣＣＤカメラにより撮影したプレイヤの映像を相手プレイヤのスクリーンに相互に映し出し、各プレイヤは自分のプレイフィールド内で動きながらスクリーンに映し出される相手プレイヤの映像を狙ってポインティング装置のトリガを操作するものである。
【０００４】
スクリーン上ではプレイヤの像に加えて障害物の像が合成される。プレイヤはＣＣＤカメラの撮影範囲内で動き、この範囲から外れた場合には相手スクリーンからプレイヤの映像は消える。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−１０４６４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１はプレイヤが画面の外に身を乗り出すか、物陰に隠れるように移動しないと、相手の弾を避けることが出来ない。これは、体全体を移動させるために、ゲームの進行処理にタイムラグを生じる。また、常に回避動作のために体全体を上下左右に移動させる必要がある。さらにプレイヤが体全体を移動させるため、プレイヤが動くゲームスペースを大きくとる必要があり、ゲーム筐体領域が拡大するという欠点があった。
さらに常時プレイヤが体全体を動かし通常のゲームに比較し疲労しやすいため、リプレイ回数を多く望めない。
【０００７】
本発明の目的は、画面の前に立ったプレイヤをカメラによって撮影し、画面内にプレイヤの画像ではなく、自機キャラクタを三人称視点で表示するようにし、プレイヤの顔部分の動きのみで自機キャラクタの動きを操作できるようにすることにより、画面内の自機キャラクタを、プレイヤがオーバーアクションすることなく移動することができる顔認識機能を用いたゲーム装置を提供することにある。
【課題を解決するための手段】
【０００８】
前記目的を達成するために本発明の請求項１は、モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、自キャラクタが敵キャラクタを射撃することによって敵を倒すゲーム装置において、ゲーム機筐体に設置し、プレイヤを撮影するカメラと、敵に対し攻撃を加えるための攻撃手段と、前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、プレイヤが前記攻撃手段で敵キャラクタを攻撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段とを備えたことを特徴とする。
本発明の請求項２はモニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、射撃によって相手を倒すガンゲーム装置において、ゲーム機筐体に設置し、プレイヤを撮影するカメラと、敵に対し射撃を行うためのガンコントローラと、前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、プレイヤが前記ガンコントローラで敵を射撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段とを備えたことを特徴とする。
本発明の請求項３は請求項１または２記載の発明において前記プレイヤの顔の動きは、プレイヤが上方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の上方に移動させ、プレイヤが下方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の下方に移動させ、プレイヤが右方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の右方向に移動させ、プレイヤが左方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の左方向に移動させることを特徴とする。
本発明の請求項４は請求項１，２または３記載の発明において前記カメラでプレイヤを撮影できる範囲の外にプレイヤの顔が移動したとき、選択したキャラクタの動きを停止することを特徴とする。
本発明の請求項５は請求項１，２，３または４記載の発明において選択されたキャラクタへのプレイヤの対応付けは、プレイヤの目，鼻，口の顔情報を選択されたキャラクタの目，鼻，口にそれぞれ重ねる処理を行うことを特徴とする。
【発明の効果】
【０００９】
上記構成によれば、全身をセンサで検出している従来技術に比較し顔検出機能で顔面のパーツのみの検出にすることにより全身を使ったオーバーアクションではなく、上半身のみの動きのみで対応できてアクションが大きくならないため、従来のゲーム筐体より省スペース化を図ることができる。
また、ガンゲームにおいて、プレイヤの動きを直に反映させる視点より画面内に自分のキャラクタが存在する視点にすることにより、攻撃判定や被弾判定が特定しやすく「当てた，当てられた」が判り易い。
【図面の簡単な説明】
【００１０】
【図１】本発明による顔認識機能を用いたゲーム装置の外観を示す正面図である。
【図２】本発明による顔認識機能を用いたゲーム装置でのプレイ状況を説明するための斜視図である。
【図３】モニタに表示されるガンゲーム画面を示す図である。
【図４Ａ】ガンゲームに対する操作・処理の手順を説明するための図で、プレイヤの顔認識から顔移動に対する自機キャラクタの移動状況を示している。
【図４Ｂ】ガンゲームに対する操作・処理の手順を説明するための図で、プレイヤがガンコントローラで射撃した場合と、敵キャラクタから被弾した場合を示している。
【図４Ｃ】顔を認識できる領域を説明するための図である。
【図５】本発明による顔認識機能を用いたゲーム装置の回路の実施の形態を示すブロック図である。
【図６】本発明による顔認識機能を用いたゲーム装置の操作および動作を説明するためのフローチャートである。
【図７】カメラ撮影範囲におけるプレイヤの顔の動作に対するキャラクタの動きを説明するためのフローチャートである。
【図８】プレイヤの顔の上下左右の移動に対するキャラクタの移動を説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施の形態を詳しく説明する。
図１は、本発明による顔認識機能を用いたゲーム装置の外観を示す正面図であり、ガンゲームに適用したものである。
ガンゲーム機１０筐体の中央に相手プレイヤのキャラクタおよび自プレイヤのキャラクタを出現させるゲーム画面を表示するモニタ１が配置されている。モニタ１の上部にはプレイヤを投影するためのＣＣＤカメラ２が配置されている。モニタ１の前部にゲームをスタートさせるスタートボタン４およびコイン投入部８が配置されている。ガンゲーム機１０筐体の下部右側にガンラック５が設けられ、その中にガンゲーム機１０の回路に接続されたケーブル端に取り付けられたガンコントローラ３が収容されている。
【００１２】
図２は本発明による顔認識機能を用いたゲーム装置でのプレイ状況を説明するための斜視図である。
プレイヤ７はＣＣＤカメラ２の前に立ち、ガンコントローラ３をモニタ１に向けて構えている。プレイヤはゲームが開始されても体全体ではなく顔７ａを左右または上下方向に動かすのみでゲームを進行させることができる。モニタ１に表示される敵キャラクタをガンコントローラ３で照準し、ガンコントローラ３の射撃のスイッチをオン操作することにより弾が発射される。射撃オンする場合に、敵キャラクタに照準を合わせると、その照準１７が画面の上に現れる（図３参照）。照準はガンコントローラの発射口を画面に向け、照準をオンするスイッチ操作をすることにより発生する。
【００１３】
図３はモニタに表示されるガンゲーム画面を示す図である。
画面の手前にプレイヤのキャラクタを示すプレイヤ情報表示２１が表示され、その隣に自機の体力を示す自機ライフ表示２２が表示されている。敵の攻撃で被弾すると自機ライフのバーは減少する。画面の略中央に映し出されている３つの丸形状体は自機が隠れるためのバリア陣地２０である。これに対応し、画面の中央上部に敵キャラクタ１６が隠れる３つの敵のバリア陣地１５が表示されている。
自機キャラクタ１９は後ろ向きに画面に映っており、プレイヤが首を動かすことによりバリア陣地２０に隠れることができる。自機キャラクタ１９からは照準１７が発っせられている。照準１７は専用ガンコントローラで操作されるレーザのサイトである。一方、敵キャラクタ１６は敵バリア陣地１５の間に隠れながら、敵弾１８を発射している。
【００１４】
画面上端付近に敵であるケンタロウ（対戦相手が任意に自分のキャラクタに名前を付けることができる。）を示す対戦相手表示１２が表示され、その隣に敵の体力を示す対戦相手ライフ表示１３が表示されている。画面上右隅に残り時間を示すカウントダウンするタイム表示１４が示されており、残り９０秒となっている。
画面上左隅に１プレイヤの表示がなされ、このゲームでの得点を示すスコア表示１１が表示されている。２５６２００点獲得している。相手がコンピュータではなく他のガンゲーム機である場合、相手側ゲーム機のモニタにも図３と同じような表示がなされている。この場合、敵キャラクタと自機キャラクタの立場は反対になるように表示される。
【００１５】
図４Ａはガンゲームに対する操作・処理の手順を説明するための図で、プレイヤの顔認識から顔移動に対する自機キャラクタの移動状況を示している。
プレイヤ７はガンゲーム機１０筐体の上部に設置してあるＣＣＤカメラ２の撮影範囲に入ることにより、ＣＣＤカメラ２はプレイヤの顔を撮影する（図４Ａ（ａ））。ガンゲーム機のＣＰＵはＣＣＤカメラ２で撮影された顔を認識するための認識枠３１を形成し、その中にプレイヤの顔表示４１の眼３３となる部分，鼻３４となる部分および口３５となる部分を捕らえ、回路のメモリ部分にデータベースとして持っている顔表示サンプル画像と比較し、比較した結果、眼，鼻，口が所定の範囲で類似する位置関係になっていることを検知して顔であると認識し、眼，鼻，口の相対的位置情報，形状情報などを回路のメモリ部分で記憶する。図４Ａ（ｂ）にＣＣＤカメラ２により撮影されたプレイヤの顔面を認識枠内に捕らえている状態を示している。なお、認識すべき顔をプレイヤがガンコントローラでプレイヤの顔を射撃することにより特定して上記認識枠を形成させる。
【００１６】
つぎに検出した眼，鼻，口よりなる顔情報をプレイヤが自機として選択したキャラクタ３６の顔に重ね合わせる。すなわち選択したキャクタの顔にプレイヤの眼，鼻，口の情報より形成される位置，形状のキャラ眼３７，キャラ鼻３８，キャラ口３９を合成する（図４Ａ（ｃ））。このように処理することによりプレイヤの顔が動けば、ＣＰＵは画面上で眼，鼻，口を合成した自機キャラクタ３６も同じ方向に，対応の距離だけ移動するように処理する。図４Ａ（ｄ）にプレイヤの顔表示４１の移動軌跡表示４１ａに合わせ、自機キャラクタ３６もキャラ移動軌跡表示４２ａのように移動する様子が示されている。
【００１７】
図４Ｂはガンゲームに対する操作・処理の手順を説明するための図で、プレイヤがガンコントローラで射撃した場合と、敵キャラクタから被弾した場合を示している。
図４Ｂ（ａ）においてプレイヤはガンコントローラ３を構えており、ガンコントローラ３の射撃用のスイッチをオンすると、ガンコントローラ３は射撃したときの衝撃が生じる（衝撃が発生したとして衝撃表示４３で示してある）。この操作により画面上の自機キャラクタ３６のキャラ口３９からは弾４７が発射される。
【００１８】
図４Ｂ（ｂ）に示すように自機キャラクタ３６が敵弾を浴びた場合、画面上で火花が走ったような形のキャラ被弾表示４５が表示される。これに連動してガンコントローラ３に内蔵されているバイブレータに信号が送られ、ガンコントローラ３は振動を起こす（被弾したとして被弾表示４４で示してある）。これにより、プレイヤは画面の表示およびガンコントローラ３の振動により敵弾が命中したことを感じることができる。
【００１９】
図４Ｃは顔を認識できる領域を説明するための図である。
ＣＣＤカメラ２の撮影範囲の縦横の範囲は顔の付近であり、撮影できる距離は所定の位置までであり、図４Ｃ（ａ）は顔表示領域４６に顔７１が入っており、その範囲の顔の動きで自機キャラクタが動きゲームが進行する。図４Ｃ（ｂ）はプレイヤが所定の距離の外まで後ろにのぞけり、顔表示領域４６から外れている状態を示している。ＣＣＤカメラ２の顔表示領域４６から外れる動きをすると、画面内の自機キャラクタの動きは停止する。
【００２０】
図５は、本発明による顔認識機能を用いたゲーム装置の回路の実施の形態を示すブロック図である。
コイン投入部８からコインが投入されるとコインが検出され、その情報はコイン関連装置５３，入出力制御部５６を介してＣＰＵ５１に伝達される。コイン投入の状態、すなわちコイン数・プレイ数などの設定値はバックアップメモリ５４に格納される。
スタートボタン４が押されると、ゲーム開始の情報が入出力制御部５６を介してＣＰＵ５１に送られる。ＣＰＵ５１はプレイ開始の情報を受けると、カメラ制御部５７を制御し、ＣＣＤカメラ２からプレイヤの顔の画像を撮影し、その顔情報を認識するための処理を行う。
【００２１】
ガンコントローラ３に設けられている射撃スイッチ３ａ，照準スイッチ３ｂから信号入力するとガン制御部５５は入力信号を入出力制御部５６を介してＣＰＵ５１に送る。また、ＣＰＵ５１より振動情報が送られてきた場合、バイブレータ３ｃを作動させガンコントローラ３を振動させる。
ＣＰＵ５１はガンコントローラからの射撃スイッチ３ａ，照準スイッチ３ｂのスイッチオン信号により、顔を認識してその情報を得るとともに自機キャラクタを選択する顔認識・キャラクタ選択処理を行う。そしてこの後、プレイヤが選択するゲームモードに従ってガンゲームを進行することとなる。例えば、他のゲーム機を相手とする場合、通信部６２を制御し、ネットワークを介して他の店舗のガンゲーム機のプレイヤや同じ店舗のガンゲーム機のプレイヤが対戦相手を待っているか否かの情報を受け、その情報に従って対戦相手を決定する。対戦相手が決定すれば、決定した相手とゲームを行うことができる。
【００２２】
ＲＯＭ６１はガンゲーム機筐体全体を制御する制御プログラム，ガンゲームを実行するガンゲームプログラム，顔位置を検出し顔を認識するための顔認識プログラムおよび該ゲーム機に必要なデータが格納されている。
ＲＡＭ５９はゲーム制御部５１ａなどで行う演算，処理の作業エリアとして用いられるとともに処理によって発生する情報を一時的に記憶する。
ＣＰＵ５１はＲＯＭ６１から制御プログラム，ガンゲームプログラムおよび顔認識プログラムを読み込むことによりゲーム制御部５１ａ，ガンゲーム実行部５１ｂ，顔認識部５１ｃおよび顔位置検出部５１ｄの各機能を実現する。
【００２３】
ゲーム制御部５１ａはゲーム開始前の待ち受け状態でのコイン投入などの監視や図示しない電飾などの点灯，点滅などの制御やゲーム終了後の制御などを行う。また、ガンゲーム実行部５１ｂは、コイン投入の後、ゲーム制御部５１ａから制御が渡され顔位置検出部５１ｄ，顔認識部５１ｃによって顔認識を行い、自機キャラクタを選択し、対戦相手を決めた後、ガンゲーム画面を表示する制御を行いゲームを進行させる。
顔位置検出部５１ｄはＣＣＤカメラ２でプレイヤの顔を取り込み、顔の眼，鼻，口の位置を検出する。顔認識部５１ｃは顔の眼，鼻，口の位置情報に対しサンプル画像を参照することによりその画像が顔であると認識する。
【００２４】
図６は本発明による顔認識機能を用いたゲーム装置の操作および動作を説明するためのフローチャートである。
モニタ１にはタイトル画面が表示されており、画面にゲーム開始のためコインを投入する旨の表示がなされる（ステップ（以下「Ｓ」という）００１）。ＣＰＵ５１はプレイヤがコインを入れてスタートボタンを押したか否かを監視している（Ｓ００２）。
コインが投入されると、コイン投入の情報はコイン関連装置５３，入出力制御部５６を介して送られ、さらにスタートボタン４が押されるとその情報も入出力制御部５６を介して送られてくる。ＣＰＵ５１はカメラ制御部５７の制御の下にＣＣＤカメラ２からプレイヤを撮影してカメラ認証画面を表示する（Ｓ００３）。プレイヤはこの画面を見て自分の該当する顔を認識させるために画面に映った画像を狙ってガンコントローラ３を撃つこととなる。ＣＰＵ５１はプレイヤが画面の画像を狙って撃ったか否か（照準を合わせたか否かでも良い）を判断する？（Ｓ００４）。すなわち、プレイヤの認証すべき顔を特定する操作を待つ。これによりＣＰＵ５１は顔認証のための処理を行い、顔認証ができたか否かを判断する（Ｓ００５）。
【００２５】
顔認証ができなければ、モニタ１に「画面が認識できません」を表示し、該当しそうな例を画面に並べる（Ｓ００６）。そして「もう、一度認証を行います」を表示し（Ｓ００７）、Ｓ００３において再度カメラ認証画面の表示を行う。
顔認証ができれば、つぎにキャラクタを選択する画面を表示する（Ｓ００８）。キャラクタ選択は多数の種類のキャラクタが並んでいる画面の中から、その１つにガンコントローラで照準を合わせることにより選択する。
プレイヤが多数の種類のキャラクタの１つに照準を合わせると、その照準を合わせた画面の位置から選択するキャラクタを特定することができる。
【００２６】
ＣＰＵ５１は好きなキャラクタを選択して決定したか否かを監視する（Ｓ００９）。選択には制限時間があり、制限時間が過ぎた場合、ＣＰＵ５１で予め決めてあるデフォルトのキャラクタを選択することとなる。キャラクタ選択決定された場合、つぎはゲームモードを選択する画面を表示する（Ｓ０１０）。対戦かシングルかのいずれかであり、ガンコントローラの照準を合わせることにより選択する。シングルモードを選択した場合、ＣＰＵキャラクタと対戦となり、ゲームスタートとなる（Ｓ０１３，Ｓ０１４）。一方、対戦モードを選択した場合、モニタ１に「対戦相手を待っています」を表示する（Ｓ０１１）。
【００２７】
ＣＰＵ５１はモニタ１に待ちの表示を行うとともにネットワーク６３を介してサーバ装置にアクセスし、他の店舗のガンゲーム装置で同じように対戦相手を待っているプレイヤを検索する。同じ店舗のガンゲーム機に対しても同様に検索する。
そして対戦相手が見つかったか否かを判断する（Ｓ０１２）。所定の時間、対戦相手を探しても見つからない場合、ＣＰＵキャラクタとの対戦となる（Ｓ０１３）。
対戦相手が見つかった場合、図３で示すようなガンゲーム画面を表示してガンゲームを開始する（Ｓ０１４）。時間内１対１の１〜２本勝負の撃ち合いとなって自機の体力が「０」になる前に敵の体力を「０」にすれば勝ちとなる。
ＣＰＵ５１は勝負が決着したか否かを監視することとなる（Ｓ０１５）。
【００２８】
勝利した場合（Ｓ０１６）、１０勝したか否かを判断する（１０勝すれば勝ちとなる）（Ｓ０１８）。敗北した場合（Ｓ０１７）、さらにゲームを継続するか否かを画面表示によってプレイヤに尋ねる（Ｓ０２３）。プレイヤはガンコントローラの照準でコンティニューを選択した場合、Ｓ０１４に戻って再度のガンゲームを行う。継続しない場合には、Ｓ００１のタイトル画面表示に戻る。
Ｓ０１８において、いまだ１０勝になっていない場合、次のラウンドに行くか否かをプレイヤに判断させる（Ｓ０１９）。プレイヤはガンコントローラの照準で次のラウンドを選択した場合、モニタ１に「次の対戦相手を探しにいきます」を表示して（Ｓ０２０）、Ｓ０１１の対戦相手検索のステップに戻る。つぎのラウンドに行かない場合、Ｓ００１のタイトル画面表示に戻る。
１０勝に到達した場合、ゲーム終了となり、賞賛メッセージを表示する（Ｓ０２１）。ついでゲームオーバ（Ｓ０２２）となって、Ｓ００１のタイトル画面表示に戻る。
【００２９】
図７はカメラ撮影範囲におけるプレイヤの顔の動作に対するキャラクタの動きを説明するためのフローチャートである。
図６におけるＳ０１４のガンゲームを開始した後の処理であり、ＣＣＤカメラによってプレイヤの画像を繰り返し取り込み、制限時間内にプレイヤの顔の移動を検知した場合、キャラクタの移動に反映させる処理を行う。
プレイヤの顔を検知している位置が定位置であるとする（Ｓ１０１）。ＣＰＵ５１は制限時間内か否かを判断する（Ｓ１０２）。制限時間を越えた場合にはプレイヤの画像取り込みによる移動処理は終了する。制限時間内であれば、顔を動かしたか否かを判断する（Ｓ１０３）。これは前回に取り込んだ顔の位置と今回取り込んだ顔の位置を比較することにより知ることができる。
【００３０】
動きを検出した場合、その動きがセンサ（カメラの撮影範囲）からはみでるような顔の動きか否かを判断する（Ｓ１０４）。その動きがカメラの撮影範囲からはみ出なければ、画面内の自機キャラクタを、動かした顔を同じ位置に移動する（Ｓ１０４）。一方、カメラの撮影範囲にプレイヤの顔がなくなった場合、顔がはみ出たとして、自機キャラクタの動きを停止する（Ｓ１０５）とともに画面に警告表示する。警告は画面に表示したり、音声を用いたりして元の定位置に戻るよう促す。この結果、プレイヤが顔を動かしてカメラの撮影範囲に戻ったか否かを判断する（Ｓ１０６）。戻ったと判断した場合、画面内の自機キャラクタを、カメラの撮影範囲に戻った位置と同じ位置に移動する（Ｓ１０７）。このような自機キャラクタの移動シーケンスは繰り返し実行される。
【００３１】
図８はプレイヤの顔の上下左右の移動に対するキャラクタの移動を説明するための図である。
プレイヤの顔が停止状態において、上に顔が移動すれば、自機キャラクタは上に移動する。同様に右，下および左に顔が移動すれば、自機キャラクタはそれぞれ右，下および左に移動する。プレイヤの顔の動きで、このように上下左右にキャラクタを移動させることができる。
【００３２】
以上の実施の形態はガンゲーム機に適用した例を説明したが、ガンゲーム以外の操作を伴うゲーム機でも同様に適用することができる。すなわち、カメラでプレイヤの顔を撮影してプレイヤの顔の動きで、画面上の選択したキャラクタやアイテムを移動させる処理を伴うゲームであるならば、ゲームの種類は問わない。
また、実施の形態における移動を制御するキャラクタは２Ｄ表示であっても３Ｄ表示であっても、本発明は適用できるものである。
また、顔認識やキャラクタ選択などにプレイヤが操作するスイッチをガンコントローラの射撃スイッチや照準スイッチを使用する例を説明したが、ガンコントローラに設けたスイッチ類を用いずに例えば、操作パネルに設けたスイッチ類を利用してもよい。
【産業上の利用可能性】
【００３３】
イベント会場やゲームセンタに設置されるガンゲームなどのゲーム装置である。
【符号の説明】
【００３４】
１ モニタ
２ ＣＣＤカメラ
３ ガンコントローラ
４ スタートボタン
５ ガンラック
６ コインボックス
７ プレイヤ
８ コイン投入部
１１ スコア表示
１２ 対戦相手表示
１３ 対戦相手ライフ表示
１４ タイム表示
１５ 敵のバリア陣地
１６ 敵キャラクタ
１７ 照準
１８ 敵弾
１９ 自機キャラクタ
２０ バリア陣地
２１ プレイヤ情報表示
２２ 自機ライフ表示
４６ 顔表示領域
５１ ＣＰＵ
５３ コイン関連装置
５４ バックアップメモリ
５５ ガン制御部
５６ 入出力制御部
５７ カメラ制御部
５８ 画像処理部
５９ ＲＡＭ
６１ ＲＯＭ
６２ 通信部
【特許請求の範囲】
【請求項１】
モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、自キャラクタが敵キャラクタを射撃することによって敵を倒すゲーム装置において、
ゲーム機筐体に設置し、プレイヤを撮影するカメラと、
敵に対し攻撃を加えるための攻撃手段と、
前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、
前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、
プレイヤが前記攻撃手段で敵キャラクタを攻撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、
プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段と、
を備えたことを特徴とする顔認識機能を用いたゲーム装置。
【請求項２】
モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、射撃によって相手を倒すゲーム装置において、
ゲーム機筐体に設置し、プレイヤを撮影するカメラと、
敵に対し射撃を行うためのガンコントローラと、
前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、
前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、
プレイヤが前記ガンコントローラで敵を射撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、
プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段と、
を備えたことを特徴とする顔認識機能を用いたゲーム装置。
【請求項３】
前記プレイヤの顔の動きは、プレイヤが上方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の上方に移動させ、
プレイヤが下方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の下方に移動させ、
プレイヤが右方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の右方向に移動させ、
プレイヤが左方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の左方向に移動させることを特徴とする請求項１または２記載の顔認識機能を用いたガンゲーム装置。
【請求項４】
前記カメラでプレイヤを撮影できる範囲の外にプレイヤの顔が移動したとき、選択したキャラクタの動きを停止することを特徴とする請求項１，２または３記載の顔認識機能を用いたゲーム装置。
【請求項５】
選択されたキャラクタへのプレイヤの対応付けは、プレイヤの目，鼻，口の顔情報を選択されたキャラクタの目，鼻，口にそれぞれ重ねる処理を行うことを特徴とする請求項１，２，３または４記載の顔認識機能を用いたゲーム装置。
【請求項１】
モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、自キャラクタが敵キャラクタを射撃することによって敵を倒すゲーム装置において、
ゲーム機筐体に設置し、プレイヤを撮影するカメラと、
敵に対し攻撃を加えるための攻撃手段と、
前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、
前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、
プレイヤが前記攻撃手段で敵キャラクタを攻撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、
プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段と、
を備えたことを特徴とする顔認識機能を用いたゲーム装置。
【請求項２】
モニタ画面の奥行き部分に敵キャラクタを表示し、手前部分に自キャラクタを表示し、射撃によって相手を倒すゲーム装置において、
ゲーム機筐体に設置し、プレイヤを撮影するカメラと、
敵に対し射撃を行うためのガンコントローラと、
前記カメラで撮影したプレイヤの顔を認識する顔認識手段と、
前記顔認識手段によりプレイヤの顔を認識した後、モニタに表示されるキャラクタを選択し、プレイヤとキャラクタを対応づける選択手段と、
プレイヤが前記ガンコントローラで敵を射撃したとき選択手段により選択された前記キャラクタが敵キャラクタを攻撃する攻撃手段と、
プレイヤが顔を動かしたとき、動いた顔に連動して選択された前記キャラクタを移動させる移動制御手段と、
を備えたことを特徴とする顔認識機能を用いたゲーム装置。
【請求項３】
前記プレイヤの顔の動きは、プレイヤが上方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の上方に移動させ、
プレイヤが下方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の下方に移動させ、
プレイヤが右方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の右方向に移動させ、
プレイヤが左方向に顔を移動させたとき、選択されたキャラクタをモニタ画面の左方向に移動させることを特徴とする請求項１または２記載の顔認識機能を用いたガンゲーム装置。
【請求項４】
前記カメラでプレイヤを撮影できる範囲の外にプレイヤの顔が移動したとき、選択したキャラクタの動きを停止することを特徴とする請求項１，２または３記載の顔認識機能を用いたゲーム装置。
【請求項５】
選択されたキャラクタへのプレイヤの対応付けは、プレイヤの目，鼻，口の顔情報を選択されたキャラクタの目，鼻，口にそれぞれ重ねる処理を行うことを特徴とする請求項１，２，３または４記載の顔認識機能を用いたゲーム装置。
【図１】
【図２】
【図３】
【図４Ａ】
【図４Ｂ】
【図４Ｃ】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４Ａ】
【図４Ｂ】
【図４Ｃ】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１０−２８４３０５（Ｐ２０１０−２８４３０５Ａ）
【公開日】平成２２年１２月２４日（２０１０．１２．２４）
【国際特許分類】
【出願番号】特願２００９−１３９９４８（Ｐ２００９−１３９９４８）
【出願日】平成２１年６月１１日（２００９．６．１１）
【出願人】（３１０００９９９３）株式会社タイトー (207)
【Ｆターム（参考）】
【公開日】平成２２年１２月２４日（２０１０．１２．２４）
【国際特許分類】
【出願日】平成２１年６月１１日（２００９．６．１１）
【出願人】（３１０００９９９３）株式会社タイトー (207)
【Ｆターム（参考）】
[ Back to top ]