映像表示装置、および映像表示制御方法、ならびに映像表示装置のプログラム、コンピュータ読み取り可能な記録媒体
【課題】３Ｄコンテンツを視聴している際の、視聴者のリアルタイムの生体情報に基づいた３Ｄ映像効果のある３Ｄコンテンツの表示を行うことができる映像表示装置を提供すること。
【解決手段】映像表示装置１５では、視聴者が３次元映像を視聴中に、生体情報測定部１１が視聴者の生体情報を測定する。測定した生体情報は生体指標算出部１２に出力され、生体指標が算出される。当該生体指標は生体影響レベル解析部１３に出力され、現在の視聴者の生体影響レベルが決定される。決定された生体影響レベルに基づいて、映像効果レベル調整部１４では視聴者が視聴している３次元映像の映像効果レベルを調整し、その結果、視聴者には、自身の生体情報に基づく生体影響レベルに適した映像効果レベルの３次元映像が表示されることになる。
【解決手段】映像表示装置１５では、視聴者が３次元映像を視聴中に、生体情報測定部１１が視聴者の生体情報を測定する。測定した生体情報は生体指標算出部１２に出力され、生体指標が算出される。当該生体指標は生体影響レベル解析部１３に出力され、現在の視聴者の生体影響レベルが決定される。決定された生体影響レベルに基づいて、映像効果レベル調整部１４では視聴者が視聴している３次元映像の映像効果レベルを調整し、その結果、視聴者には、自身の生体情報に基づく生体影響レベルに適した映像効果レベルの３次元映像が表示されることになる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、２次元映像および３次元映像を表示するための映像表示装置、および映像表示調整方法、ならびに映像表示装置のプログラム、コンピュータ読み取り可能な記録媒体に関する。
【背景技術】
【０００２】
近年では、映像表示技術の飛躍的な発展により、２次元映像コンテンツを表示する技術に加え、３次元映像コンテンツ(以下、３Ｄコンテンツという)を表示する技術の開発が進められてきている。３Ｄコンテンツの表示技術は、アミューズメント、医療現場、または電子カタログ・広告等に利用でき、その利用範囲は非常に幅広い。中でもゲームまたは映画等のアミューズメントに利用するケースが増えつつある。
【０００３】
通常３Ｄコンテンツは、視聴者の両眼の画像視差を利用して視聴するようになっているので、両眼の輻輳角、または両眼の焦点距離に矛盾が生じていたり、視差量が適当でなかったりすると、視聴者は生理的違和感を覚えるという現象が知られている。生理的違和感とは、視聴者の興奮度合いまたは刺激度合いが上昇してしまったり、立体感、臨場感、および没入感等を強く感じてしまったりする場合に生じるものである。生理的違和感が強いと、目眩、酔い、気分が悪くなる等視聴者の生体に影響を及ぼしてしまう場合もある。また、立体感、臨場感、および没入感等が弱過ぎても生理的違和感を感じる場合もある。
【０００４】
また、視聴者それぞれの身体的特徴(瞳孔間距離、斜位、または視力等)からも映像視聴時に視聴者に生理的違和感を与える場合がある。特に、３Ｄコンテンツは、専用の眼鏡を装着して視聴する場合が多いので、眼鏡装着による違和感等も視聴者に生理的違和感を与える原因の一つになっている。
【０００５】
上記したような原因から、３Ｄコンテンツを視聴した際に、視聴者ごとに立体感、臨場感、および没入感等の映像効果(立体効果)の感じ方に個人差があり、視聴者によっては立体効果が十分に伝わっていない可能性が高い。そこで、視聴者個人の状態に合わせた３次元表示を行う工夫が特許文献１〜３では行われている。
【０００６】
例えば、特許文献１には、立体眼鏡を装着している視聴者の様々な生体量の変化を検出する表示装置が開示されている。具体的には、立体眼鏡に視聴者の脳波、脈波、皮膚温、および瞬きを検出するセンサが設けられている。センサによって得た各データを解析し、視聴者の興奮度、感動度、および疲労度等の感覚量を算出し、当該算出値に応じて表示している画像を３次元表示から２次元表示に戻したり、視聴者に対して休息を促すメッセージを流したりする。
【０００７】
これによれば、視聴者が見ている映像から受ける感覚の度合いを推定し、この感覚度の変化によって見ている映像の効果を下げる画像処理、またはメッセージ表示を施すことによって、視聴者個人の受けている感覚に応じた安全な状態の映像を常に視聴者に与えることができる。
【０００８】
また、特許文献２には、３Ｄコンテンツに付帯する３次元表示に関する付帯情報と、表示される３Ｄコンテンツを観察する観察者に関する個人情報とに基づいて、表示対象となる３Ｄコンテンツの表示状態を制御する表示装置が開示されている。より詳細には、付帯情報から得た観察者が感じる生理的違和感の程度を示す生体影響度を求め、この生体影響度と、年齢、性別、嗜好、および観察履歴等の個人情報とに基づいて、３Ｄコンテンツの表示状態を制御する。
【０００９】
これによれば、観察者ごとに適した表示状態にして３Ｄコンテンツを表示することが可能となる。つまり、３Ｄコンテンツごとの生理的違和感の度合いと、観察者個人の生理的違和感の度合いとを考慮して３Ｄコンテンツを表示することができる。
【００１０】
一方、特許文献３には、視聴者の年齢または健康状態等の条件に基づいたコンテンツ再生を行う表示装置が開示されている。具体的には、コンテンツの記録または伝送の際に、コンテンツのシーン単位で視聴者の生体に及ぼす影響の程度を示す情報を、各シーンの映像データおよび音声データと共に多重化する。そして、当該コンテンツを再生する際には、当該情報と、予め設定した視聴者の生体の３Ｄコンテンツ視聴に対する許容度を示す情報との比較に基づいたコンテンツ再生を行う。
【００１１】
これによれば、視聴者に表示するシーンにおいて、視聴者の生体に与える影響が、視聴者の３Ｄコンテンツ視聴に対する許容度を上回った場合には、例えば、再生映像の選択または変更、再生映像の所定シーンのスキップ等を行うことができる。したがって、視聴者に合った適切かつ安全なレベルのコンテンツの再生が行われるようにすることができる。
【００１２】
上述したような、視聴者の生体に与える影響を考慮して映像コンテンツの再生を行う従来の映像表示装置の一例として、特許文献３に開示されている映像表示装置を図７に示す。図７は、当該文献に開示されている映像表示装置４０の要部構成を示すブロック図である。
【００１３】
図７に示すように、映像表示装置４０は、記録装置３８と再生装置３９とからなる。記録装置３８は、映像データ生成部２１、生体影響分析部２２、ビデオ圧縮部２３、音声データ生成部２４、オーディオ圧縮部２５、多重化部２６、ユニット構成部２７、データ記録部２８、および記録媒体２９によって構成されている。一方、再生装置３９は、分離化部３０、ビデオ復号部３１、オーディオ復号部３２、再生制御部３３、ユーザインターフェース３４、およびユーザ生体影響設定部３５によって構成されている。
【００１４】
映像表示装置４０においてコンテンツを再生する際の処理の流れを簡単に説明する。まず、映像データ生成部２１によって生成された映像データ、または外部から取得した映像データは、生体影響分析部２２およびビデオ圧縮部２３に供給される。生体影響分析部２２では、映像データが生体に対してどのくらいの影響を及ぼすかを分析し、当該分析結果は、生体影響情報としてユニット構成部２７に供給される。ビデオ圧縮部２３では、ビデオ圧縮が行われ、圧縮された映像データは多重化部２６に供給される。
【００１５】
一方、音声データ生成部２６によって生成された音声データ、または外部から取得した音声データは、オーディオ圧縮部２５に供給される。オーディオ圧縮部２５では、オーディオ圧縮が行われ、圧縮された音声データは多重化部２６に供給される。
【００１６】
多重化部２６では、映像データおよび音声データがそれぞれ多重化され、各多重化データはユニット構成部２７に供給される。ユニット構成部２７では、多重化された映像データおよび多重化された音声データのユニット化を行うとともに、生体影響情報をユニットごとに記録し、ユニット化データをデータ記録部２８に出力する。そして、データ記録部２８では、ユニット構成部２７から供給されたユニット化データを記録媒体２９に出力し、記録媒体２９への記録を行う。
【００１７】
記録媒体２９に記録されたデータは分離化部３０に供給される。分離化部３０では、多重化されているデータの分離が行われ、映像データはビデオ復号部３１に供給され、音声データはオーディオ復号部３２に供給される。また、生体影響情報を含むデータは、再生制御部３３に供給される。ビデオ復号部３１およびオーディオ復号部３２では、それぞれデータの復号を行い、復号された映像データおよび音声データを再生制御部３３に供給する。
【００１８】
一方、ユーザ生体影響設定部３５では、コンテンツの再生を行う前に、ユーザインターフェース３４によって入力された情報に基づいて、ユーザの３Ｄコンテンツ視聴に対する許容度を示すユーザ生体影響情報を設定する。当該ユーザ生体影響情報は、再生制御部３３に供給される。再生制御部３３では、ユーザ生体影響情報および生体影響情報の両方の情報に基づいて、供給された映像データおよび音声データの再生の制御を行う。
【先行技術文献】
【特許文献】
【００１９】
【特許文献１】特開平８−２８９３２７号公報(１９９６年１１月１日公開)
【特許文献２】特開２００４−２４６７２５号公報(２００４年９月２日公開)
【特許文献３】特開２００６−２７０９２４号公報(２００６年１０月５日公開)
【発明の概要】
【発明が解決しようとする課題】
【００２０】
上記した特許文献１〜３に開示されている技術では、視聴者個人のリアルタイムの生体情報に基づいて、視聴者に適した３次元表示の制御を行うことができない。また、長時間の視聴には耐えられないものもある。
【００２１】
例えば、特許文献１に開示されている技術では、視聴者が３Ｄコンテンツを視聴するのと同時に、視聴者の感覚量(生体情報)を測定することが可能だが、当該感覚量を検出するためのセンサは視聴者が装着している立体眼鏡に付いている。当該立体眼鏡は大きく重たくなっているため、その装着感が悪く、視聴者が長時間の視聴に耐えられないという問題があった。
【００２２】
また、検出した感覚量に基づいて、３次元表示を２次元表示に戻したり、休息を促すメッセージを表示したりすることはできるが、３次元表示の状態を制御することができない。すなわち、３Ｄコンテンツの立体効果自体を制御することができない。
【００２３】
一方、特許文献２に開示されている技術では、３Ｄコンテンツの表示状態を制御することができるが、当該制御は視聴者の年齢、性別、および嗜好等の個人情報に基づいている。当該個人情報は、視聴以前に把握することができる一般的な情報であるため、視聴者個人のリアルタイムの生体情報に基づいていない。
【００２４】
特許文献３に開示されている技術では、コンテンツのシーンごとに視聴者の生体に影響を及ぼす可能性を示す情報を予め測定した上で再生状態を制御しているので、予め分析済みのコンテンツにしか対応することができない。また、本文献においても、当該制御は予め設定した視聴者の生体の３Ｄコンテンツ視聴に対する許容度に基づいているので、視聴者個人のリアルタイムの生体情報に基づいた制御を行うことができない。
【００２５】
そこで、本発明は、上記課題に鑑みてなされたものであり、その目的は、３Ｄコンテンツを視聴している際の、視聴者のリアルタイムの生体情報に基づいた、当該３Ｄコンテンツの３Ｄ映像効果を制御することができる映像表示装置を提供することにある。
【課題を解決するための手段】
【００２６】
本発明に係る映像表示装置は、上記課題を解決するために、３次元映像を３次元表示可能な映像表示装置において、視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定する測定手段と、上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定する解析手段と、上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御する制御手段とを備えていることを特徴としている。
【００２７】
上記の構成によれば、視聴者が３次元映像を視聴中には、当該視聴者の生体情報が測定され、当該生体情報に基づいて解析される生体影響度に合わせて、視聴者が視聴している３次元映像の映像効果を制御する。その結果、視聴者には、自身の生体情報に基づく生体影響度に適した映像効果の３次元映像が表示されることになる。
【００２８】
このように、視聴者が３次元映像を視聴中に、当該視聴者の生体情報を測定することによって、視聴者の生体情報を考慮した３次元表示を実現することができる。これによれば、視聴者の生体影響度が高すぎたり、あるいは低すぎたりして、生理的違和感を強く感じている場合には、３次元映像の立体感、臨場感、没入感等の立体効果を抑える、または増すことによって、視聴者が感じている生理的違和感を和らげることができる。
【００２９】
逆に、３次元映像を視聴しているにも拘らず、視聴者によっては立体感、臨場感、および没入感等の立体効果が十分に伝わっていない場合が多い。その場合は、視聴者の生体影響度が低いので、それに合わせて３次元映像の表示状態を調整し、映像効果を高めることが可能となる。このように、視聴者が３次元映像を視聴している最中に生体情報を測定するので、視聴者のリアルタイムの生体情報に基づいて当該３次元映像の映像効果を制御することができる。したがって、視聴者のリアルタイムの生体情報に基づいた３次元映像の表示が可能となる。それ故、例えば、視聴者の体調が優れない場合等には、当該視聴者の体調に合わせた３次元映像の表示を行うことができる。
【００３０】
また、本発明に係る映像表示装置は、上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出する算出手段をさらに備え、上記解析手段は、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴としている。
【００３１】
上記の構成によれば、視聴者の生体情報に基づいて生体指標を算出し、当該生体指標に基づいて生体影響度を解析する。これによれば、視聴者の生体情報を考慮して映像効果を制御することができる。
【００３２】
また、本発明に係る映像表示装置は、上記生体情報に基づいて、上記測定手段は、上記視聴者の指先から上記生体情報を測定することを特徴としている。
【００３３】
上記の構成によれば、視聴者が３次元映像を視聴している最中に生体情報を指先から測定しているので、３次元映像の視聴の邪魔にならない。
【００３４】
また、本発明に係る映像表示装置は、上記生体情報は、脈波、心拍数、および血圧のうち、少なくともいずれかであることを特徴としている。
【００３５】
上記の構成によれば、視聴者のより正確な生体影響度を解析することができる。
【００３６】
また、本発明に係る映像表示装置は、上記生体指標は、心拍間隔変動係数、脈波の高周波数成分に対する上記脈波の中間周波数成分の比(ＬＦ／ＨＦ)、血圧と心拍数との最大相互相関係数(ρｍａｘ)、および加速度脈波のうち、少なくともいずれかであることを特徴としている。
【００３７】
上記の構成によれば、視聴者のより正確な生体影響度を解析することができる。
【００３８】
また、本発明に係る映像表示装置は、上記制御手段は、上記映像効果として上記３次元映像の奥行き量、輝度、色度、表示速度、表示サイズ、および表示角度のうち、少なくともいずれかを制御することを特徴としている。
【００３９】
上記の構成によれば、視聴者の生体情報を考慮して映像効果を制御することが可能となる。
【００４０】
また、本発明に係る映像表示装置は、上記制御手段は、複数の上記映像効果を制御することを特徴としている。
【００４１】
上記の構成によれば、複数の映像効果のうち、ある映像効果のレベルは上げて、それとは違う映像効果のレベルは下げるというように、映像効果を組み合わせて制御することができる。
【００４２】
また、本発明に係る映像表示装置は、上記視聴者が２次元映像を視聴中に、上記測定手段が、上記視聴者の上記生体情報を測定し、上記解析手段が、上記生体情報を解析し、解析した結果に基づいて、上記生体影響度を決定すると、上記制御手段が、上記生体影響度に基づいて、上記２次元映像に上記映像効果を付加し、当該２次元映像を上記３次元映像に変換することを特徴としている。
【００４３】
上記の構成によれば、視聴者が２次元映像を視聴中に、立体感、臨場感、および没入感が乏しく、明らかに視聴者が退屈している場合には、２次元映像に立体効果を付加し、３次元映像に変換することができる。
【００４４】
また、本発明に係る映像表示装置は、上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を上げることを特徴としている。
【００４５】
上記の構成によれば、視聴者の生体影響度が低かった場合に、表示状態を調整し、立体感、臨場感、および没入感等の立体効果がより高い３次元映像を表示することができる。
【００４６】
また、本発明に係る映像表示装置は、上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を下げることを特徴としている。
【００４７】
上記の構成によれば、視聴者の生体影響度が高かった場合に、表示状態を調整し、立体感、臨場感、および没入感等の立体効果を低めることによって、視聴者が感じる生理的違和感を和らげることができる。
【００４８】
また、本発明に係る映像表示装置は、上記生体影響度が予め定められた基準を超えると、上記３次元映像の表示を停止する制御手段をさらに備えていることを特徴としている。
【００４９】
上記の構成によれば、視聴者の生体影響度が予め定められた基準を超え、視聴者の生体に大きな影響を及ぼし危険な状態であると判断されると、３次元映像の表示を停止することができる。
【００５０】
また、本発明に係る映像表示制御方法は、上記課題を解決するために、３次元映像を３次元表示する映像表示装置における映像表示制御方法であって、視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定するステップと、上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定するステップと、上記生体影響度に基づいて上記３次元映像の映像効果を制御するステップとを備えていることを特徴としている。
【００５１】
上記の方法によれば、視聴者の生体情報を考慮して映像効果を制御することが可能な映像表示装置が実現される。
【００５２】
また、本発明に係る映像表示制御方法は、上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出するステップをさらに備え、上記生体影響度を決定するステップでは、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴としている。
【００５３】
上記の方法によれば、視聴者の生体情報に基づいて生体指標を算出し、当該生体指標に基づいた生体影響度を考慮して映像効果を制御することができる。
【００５４】
なお、上述した映像表示制御方法は、コンピュータによって実現しても良く、この場合には、コンピュータを上記各ステップとして実行させることにより上記映像表示制御方法をコンピュータにて実現させるプログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【発明の効果】
【００５５】
本発明によれば、視聴者個人のリアルタイムの生体影響度を把握することができる。そのため、視聴者の生体影響度が高すぎたり、低すぎたりして過度な生理的違和感を感じている場合には、当該視聴者の生体影響度に合わせて３次元映像の映像効果を制御することができる。例えば、視聴者が３次元映像の映像効果を過度に感じている場合には、３次元映像の立体感、臨場感、および没入感等の映像効果(立体効果)を下げることが可能である。逆に、視聴者が十分な映像効果を感じていない場合には、３次元映像の表示状態を調整することによって、３次元映像の映像効果を上げることが可能である。このように、本発明に係る映像表示装置は、視聴者の生体情報に合わせた最適な３次元映像の表示を実現することができる。
【図面の簡単な説明】
【００５６】
【図１】本発明の一実施形態に係る映像表示装置の要部構成を示すブロック図である。
【図２】生体影響レベルのレベル分けの一例を示す図である。
【図３】視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順を示すフローチャートである。
【図４】映像効果レベルを下げる場合の調整手順を示すフローチャートである。
【図５】映像効果レベルを上げる場合の調整手順を示すフローチャートである。
【図６】(ａ)は、映像効果レベルの調整前の状態を示す図であり、(ｂ)は、映像効果レベルの調整後の状態を示す図である。
【図７】従来の映像表示装置の要部構成を示すブロック図である。
【発明を実施するための形態】
【００５７】
(映像表示装置１５の概要)
以下、本発明の一実施形態について、図面を参照して詳細に説明する。まず、本実施形態に係る映像表示装置１５の概要について、図１を参照して説明する。図１は、映像表示装置１５の要部構成を示すブロック図である。映像表示装置１５は、２次元表示だけでなく、３次元表示可能であり、３次元映像コンテンツ(以下、３Ｄコンテンツという)を再生することができる。
【００５８】
図１に示すように、映像表示装置１５は、映像処理部１６、生体情報測定部１１(測定手段)、表示ディスプレイ９、スピーカ１０、およびリモートコントローラ１(以下、リモコン１という)から構成されている。
映像処理部１６は、入力部２、制御部３、映像コンテンツ格納部４、再生部５、映像部６、音声部７、出力部８、生体指標算出部１２(算出手段)、生体影響レベル解析部１３(解析手段)、および映像効果レベル調整部１４(制御手段)からなる。
【００５９】
入力部２は、リモコン１からの光信号を受信して、当該リモコン１からの制御信号を受け付けるためのものである。映像表示装置１５の電源オン／オフ、またはコンテンツの再生等の視聴者からの指示は、このリモコン１を介して行われる。
【００６０】
制御部３では、各種の制御を行っており、リモコン１を介して視聴者から映像コンテンツの再生指示を入力部２が受信すると、その情報が制御部３に出力される。制御部３は映像コンテンツ格納部４から上記映像コンテンツのデータを取り出し、当該映像コンテンツのデータを再生部５に出力する。再生部５では当該制御部３から再生する映像コンテンツのデータを受信すると、当該データの映像データを映像部６に出力し、当該データの音声データを音声部７に出力する。映像部６では、出力された映像データを再生用の映像データに処理し、音声部７では、出力された音声データを再生用の音声データに処理する。映像部６が処理した映像データ、および音声部７が処理した音声データは出力部８に出力され、出力部８によって映像データは表示ディスプレイ９に出力され、音声データはスピーカ１０に出力される。コンテンツを再生するための映像処理については、従来の技術と同様であるため、ここでは言及しない。
【００６１】
本実施形態に係る映像表示装置１５は、視聴者の生体情報を測定する生体情報測定部１１を備えている。ここで言う生体情報とは、視聴者の脈波、心拍数、血圧、体温、発汗度、瞬目回数、呼吸回数、または脳波等の視聴者の生体に関わる情報である。生体情報測定部１１は、入力部２が視聴者からの映像コンテンツ(３Ｄコンテンツ)の再生指示を受信すると、その情報を受けて視聴者の生体情報の測定を開始する。したがって、生体情報測定部１１は、視聴者が映像コンテンツの視聴を開始すると同時に、当該視聴者の生体情報の測定を開始する。測定した生体情報は生体指標算出部１２に出力され、当該生体指標算出部１２によって生体情報を基に生体指標が算出される。ここで言う生体指標とは、上記生体情報に基づいて算出される、視聴者の生体に関わる指標である。算出された生体指標は生体影響レベル解析部１３に出力され、当該生体影響レベル解析部１３によって指標のレベルが解析され、視聴者の現在の生体影響レベル(生体影響度)が決定される。生体影響レベルは、３Ｄコンテンツを視聴することによって視聴者の生体に与える影響の程度を示す。例えば、生体影響レベルを高レベル・中レベル・低レベルに分けた場合には、高レベルであるほど、３Ｄコンテンツを視聴した際に３Ｄコンテンツの映像効果を過度に感じてしまうことに起因して、３Ｄコンテンツを視聴することによって視聴者の生体に大きな影響を及ぼす可能性が高いと判定する。生理的違和感とは、視聴者の興奮度合いまたは刺激度合いが上昇してしまったり、立体感、臨場感、および没入感等を強く感じてしまったりする場合に感じるものである。生理的違和感が強いと、目眩、酔い、気分が悪くなる等、視聴者の生体に影響を及ぼしてしまう場合もある。
【００６２】
決定された生体影響レベルは制御部３に出力され、制御部３では生体影響レベルに基づいて再生する映像コンテンツのデータの映像効果レベルを調整するように映像効果レベル調整部１４を制御する。ここで言う映像効果レベルとは、３Ｄコンテンツの立体感、臨場感、および没入感等の３次元表示上の映像効果(立体効果)のレベルである。映像効果レベル調整部１４では、生体影響レベルに基づいてコンテンツデータの映像効果レベルを調整し、調整したデータを再び制御部３に出力する。制御部３は、出力されたデータを再生部５に出力し、上述したようなコンテンツの再生処理が行われる。
【００６３】
再生する映像コンテンツは、映像コンテンツ格納部４に格納されているものの他に、記録媒体に記録されているもの、あるいはインターネットを通じて外部のサーバ等からダウンロードしたものであっても良い。映像表示装置１５には、各種記録媒体に対応するリーダを内蔵、もしくは外付けすることが可能である。また、インターネットに接続するための各種インターフェースが付属していても良い。
【００６４】
上記各種記録媒体とは、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、またはＣＤ−ＲＷ等のＣＤ(Compact Disc)、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ±Ｒ、またはＤＶＤ±ＲＷ等のＤＶＤ(Digital Versatile Disc)、ＨＤ ＤＶＤ(High-Definition Digital Versatile Disc)、ブルーレイディスク（Blu-ray Disc)、ＳＤカード、メモリスティック、コンパクトフラッシュ（登録商標）、マイクロドライブ、またはスマートメディア等のメモリカード、ＵＳＢメモリ、ＭＯ(Magneto-Optical)、ｉＶＤＲ(information Versatile Disc for Removable usage)、各種磁気テープ、または外付けＨＤＤ(Hard Disc Drive)等である。
【００６５】
(生体情報の測定)
上述したように、生体情報測定部１１では、視聴者の生体情報の測定が行われる。以下では、視聴者の生体情報の測定について詳しく説明する。まず、視聴者の生体情報の測定形態について説明する。
【００６６】
生体情報の測定形態としては、指先からの測定、掌からの測定、手首からの測定、帽子型の測定器による測定、仮面型の測定器による測定、または眼鏡型の測定器による測定等が可能である。生態情報測定部１１が取り得る測定形態は１種類の形態に限らず、複数の測定形態を組み合わせて視聴者の生体情報を測定しても良い。指先等の手先から測定する形態であれば、視聴者の映像コンテンツの視聴の邪魔にならない点で好ましい。また、生体情報測定部１１が測定する生体情報は、脈波、心拍数、血圧、体温、発汗度、瞬目回数、呼吸回数、または脳波等である。測定する生体情報については、１種類の測定項目に限らず、複数の測定項目を測定しても良い。
【００６７】
生体情報測定部１１が測定した視聴者の生体情報は、生体指標算出部１２に出力され、当該生体情報を基に生体指標が算出される。算出する指標としては、例えば、ＣＶＲＲ(Coefficient of Variation of R-R intervals)、ＬＦ／ＨＦ、ρｍａｘ、加速度脈波、ＣＶａａ、ａ、Ｗｈａｌｆ、ＰＯ、またはＰｍａｘ等が挙げられる。生体指標の一例を、表１に示す。算出する指標は１つであっても良いし、複数であっても良い。例えば、生体情報として脈波と心拍数と血圧とを測定した場合には、生体指標としてＣＶＲＲ(心拍間隔変動係数)、ＬＦ／ＨＦ(脈波の中間周波数成分(0.05〜0.20Hz)/脈波の高周波数成分(0.20〜0.35Hz))、ρｍａｘ(血圧と心拍数との最大相互相関係数)、および加速度脈波を算出することが可能である。
【００６８】
【表１】
【００６９】
生体指標算出部１２が算出した指標は、生体影響レベル解析部１３に出力され、当該指標のレベルが解析され、視聴者の現在の生体影響レベルが決定される。上述したように、視聴者の生体影響レベルが高レベルであるほど、３Ｄコンテンツを視聴した際に３Ｄコンテンツの映像効果を過度に感じてしまうことに起因して、３Ｄコンテンツを視聴することによって視聴者の生体に大きな影響を及ぼす可能性が高い。以下では、生体影響レベルの決定方法について詳しく説明する。
【００７０】
生体指標算出部１２によって算出された指標は、生体影響レベル解析部１３によってレベル分けされる。具体的には、各指標は指標値に基づいて、高レベル・中レベル・低レベルに分けられ、各指標のレベルが高レベルであるほど生体影響レベルは高くなる。生体指標として、ＣＶＲＲ、ＬＦ／ＨＦ、ρｍａｘ、および加速度脈波を算出した場合の、各指標のレベル分けの一例を表２に示す。
【００７１】
【表２】
【００７２】
表２に示すように、指標ごとに、当該指標の値に基づいてレベル分けされている。生体影響レベル解析部１３は、各指標の値が該当するレベルを解析し、解析した各指標のレベルに基づいて生体影響レベルを決定する。具体的には、各レベルに基準値を設定しておき、各指標が該当する１０段階レベルの平均に基づいて生体影響レベルを決定する。
【００７３】
【表３】
【００７４】
例えば、表３に示すような生体指標の算出結果が得られたとする。視聴者Ｘの結果に着目すると、１０段階レベルでは、ＣＶＲＲ＝レベル３、ＬＦ／ＨＦ＝レベル３、ρｍａｘ＝レベル２、および加速度脈波＝レベル２であり、高中低レベルでは、すべてが低レベルに該当する。したがって、視聴者Ｘの生体指標の平均値は、３(ＣＶＲＲのレベル)＋３(ＬＦ／ＨＦのレベル)＋２(ρｍａｘのレベル)＋２(加速度脈波のレベル)／４(平均)＝２．５≒３となる。ここで、生体影響レベルは、図２に示すように大きく高レベル・中レベル・低レベルの３段階に分けられており、さらに細かく０〜１０の１０段階に分けられている。本図では、０〜３が低レベルであり、４〜６が中レベルであり、７〜１０が高レベルである。なお、９〜１０は危険な状態(視聴者の生体に大きな影響を及ぼしている状態)であると判断され、生体影響レベルが危険レベルに達した場合には、直ちに映像コンテンツの再生を停止するように構成すると良い。さらに、危険レベルに達しなくとも、視聴者の生体影響レベルが急激に上昇した場合等でも直ちに映像コンテンツの再生を停止するように構成するとより良い。図２に基づくと、視聴者Ｘの生体指標の平均値は１０段階レベルの３であるため、低レベルに該当する。したがって、視聴者Ｘの生体影響レベルは低レベルであると決定される。
【００７５】
一方、視聴者Ｙの結果に着目すると、１０段階レベルでは、ＣＶＲＲ＝レベル４、および加速度脈波＝５であり、双方が中レベルに該当し、ＬＦ／ＨＦ＝１０、およびρｍａｘ＝７であり、双方が高レベルに該当している。したがって、視聴者Ｙの生体指標値の平均値は、４(ＣＶＲＲのレベル)＋１０(ＬＦ／ＨＦのレベル)＋７(ρｍａｘのレベル)＋５(加速度脈波のレベル)１０／４＝６．５≒７となる。図２に基づくと、視聴者Ｙの生体指標値の平均値は７であるため、高レベルに該当する。したがって、視聴者Ｙの生体影響レベルは高レベルであると決定される。
【００７６】
ここで、各指標の平均値を求めるのではなく、例えば、指標ごとに重み(ウェート)を付加した平均値を求めても良い。これによれば、指標ごとに重み付けをすることによって、複数の指標において重要度に差がある場合には、当該差を考慮して生体影響レベルを決定することができる。重み付けの一例として、表２には各指標の重みを表記している。これに基づくと、視聴者Ｘの生体指標の重み付けした平均値は、３(ＣＶＲＲのレベル)×２０／１００＋３(ＬＦ／ＨＦのレベル)×４０／１００＋２(ρｍａｘのレベル)×３０／１００＋２(加速度脈波のレベル)×１０／１００＝２．６≒３となる。
【００７７】
一方、視聴者Ｙの重み付けした平均値は、４(ＣＶＲＲのレベル)×２０／１００＋１０(ＬＦ／ＨＦのレベル)×４０／１００＋７(ρｍａｘのレベル)×３０／１００＋５(加速度脈波のレベル)×１０／１００＝７．４≒７となる。
【００７８】
上記の生体影響レベルの決定方法に限られず、指標ごとの重み(ウェート)を重視した他のレベル決定方法を用いても良い。以下に、その一例を示す。
【００７９】
視聴者Ｘの場合は、ＣＶＲＲ＝レベル３、ＬＦ／ＨＦ＝レベル３、ρｍａｘ＝レベル２、および加速度脈波＝レベル２であり、図２に基づくと、すべてが低レベルに該当する。すべての生体指標の高中低レベルが同じ場合には、重み付けの割合が一番高いＬＦ／ＨＦの１０段階レベルを採用する。そのため、視聴者Ｘの１０段階レベルは３となる。
【００８０】
一方、視聴者Ｙの場合は、ＣＶＲＲ＝４、および加速度脈波＝５であり、図２に基づくと、双方が中レベルに該当し、ＬＦ／ＨＦ＝１０、およびρｍａｘ＝７であり、双方が高レベルに該当している。各生体指標の高中低レベルが異なる場合は、重み付けの割合が高い、ＬＦ／ＨＦとρｍａｘとに注目する。１０段階レベルでは、ＬＦ／ＨＦ＝レベル１０、ρｍａｘ＝レベル７となるので、視聴者Ｙの生体指標値は、１０×４０(ＬＦ／ＨＦの重み付けの割合)＋７×３０(ρｍａｘの重み付けの割合)／７０＝８．７≒９となる。図２に基づくと、視聴者Ｙの生体指標値は９であるため、危険な高レベルに該当する。したがって、視聴者Ｙの生体影響レベルは危険な高レベルであると決定される。
【００８１】
このようにして決定した視聴者の生体影響レベルは制御部３に出力され、生体影響レベルが中レベルであった場合は、入力部２から再生指示があった映像コンテンツのデータをそのまま再生部５に出力して視聴者に表示する。一方、生体影響レベルが低レベルまたは高レベルであった場合には、再生する映像コンテンツの映像効果レベルを調整するように制御部３が映像効果レベル調整部１４を制御する。具体的には、生体影響レベルが高レベルであった場合は、３Ｄコンテンツ視聴が視聴者の生体に大きな影響を及ぼす可能性が高いと判断されるので、立体感、臨場感、および没入感等の映像効果(立体効果)のレベルを下げる。映像効果レベル調整部１４では、再生する映像コンテンツの映像効果レベルを下げるために、例えば、奥行き量(depth)、輝度、色度、表示速度、表示サイズ、表示角度、光源の向き、または表面の反射等の各種パラメータを調整する。上記各種パラメータを調整することによって映像効果レベルを下げ、３Ｄコンテンツの立体感、臨場感、および没入感等を抑える。調整するパラメータは、再生する映像コンテンツの映像効果レベル、または視聴者の生体情報(生体指標)等を考慮して適宜決定する。なお、生体影響レベルが低レベルまたは高レベルであった場合に調整するパラメータを予め設定しておくことも可能である。
【００８２】
同様に、生体影響レベルが低レベルであった場合は、３Ｄコンテンツ視聴が視聴者の生体にほとんど影響を及ぼさないと判断されるので、映像効果レベルを上げる。上述した各種パラメータを調整することによって映像効果レベルを上げ、３Ｄコンテンツの立体感、臨場感、および没入感等を高める。
【００８３】
以上のように、映像効果レベル調整部１４が調整した映像コンテンツのデータを再び制御部３に出力し、当該データを再生部５に出力することによって視聴者の生体情報を考慮した３次元表示を実現することができる。これによれば、視聴者の生体影響レベルが高レベルであると判定された場合には、映像コンテンツの映像効果(立体効果)を抑えることによって、視聴者が感じている生理的違和感を和らげることができる。
【００８４】
逆に、３Ｄコンテンツを視聴しているにも拘らず、３次元表示の映像効果の感じ方に個人差があることから、視聴者によっては立体感、臨場感、および没入感等が十分に伝わっていない場合が多い。その場合は、視聴者の生体影響レベルが低レベルであると判定されるので、それに合わせて映像効果レベルを上げることによって、３次元表示の映像効果レベルを高めることができる。このように、視聴者が映像コンテンツを視聴中に生体情報を測定するので、視聴者のリアルタイムの生体情報に基づいて当該コンテンツの映像効果を制御することができる。それ故、例えば、視聴者の体調が優れない場合等には、当該視聴者の体調に合わせた３次元映像の表示を行うことができる。
【００８５】
なお、生体情報測定部１１による視聴者の生体情報の測定は、視聴者が映像コンテンツを視聴している間は定期的に繰り返し行われることが好ましい。例えば、一定時間経過するごとに生体情報の測定を行ったり、シーンごとに生体情報の測定を行ったりすることが好ましい。これによれば、より正確な視聴者の生体情報に基づいた映像効果の制御を行うことが可能となる。
【００８６】
なお、例えば、表４に示すような生体指標の算出結果が得られたとする。表４に示すように、視聴者Ａ〜Ｄでは、得られる生体指標値がそれぞれ異なる。すなわち、視聴者ごとに、３Ｄコンテンツを視聴することによって感じる生理的違和感が異なるのを表している。本実施形態によれば、このような視聴者ごとに異なる生理的違和感(生体影響レベル)を考慮して、各視聴者の生体に適した３次元表示を行うことが可能である。
【００８７】
【表４】
【００８８】
また、視聴者Ｂでは、ρｍａｘが０．２９と高レベルに近く、刺激度合いが高い状態となっているが、ＬＦ／ＨＦは１．０５と中レベルであり、安定した状態となっている。このように、視聴者Ｂ個人内でも指標によって生体影響のレベルが異なるので、１つの指標をもって生体影響レベルを決定するのは難しい。そのため、生体影響レベルを決定する際には、複数の指標に基づいて当該レベルを決定するのが好ましい。これによれば、より正確な視聴者個人の生体影響レベルを決定付けることができる。
【００８９】
以上で示した重み付けは一例であり、これに限定されるわけではない。各指標の重要度を考慮して適当な重みを付加することが好ましい。また、以上では、生体指標としてＣＶＲＲ、ＬＦ／ＨＦ、ρｍａｘ、および加速度脈波を算出したが、特にこれに限定されるわけではない。算出する生体指標は適宜決定すれば良い。さらに、図２に示した生体影響レベルのレベル分けは一例であり、特にこれに限定されるわけではない。
【００９０】
(生体情報の測定手順)
以下では、視聴者が映像コンテンツを視聴する際に、視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順(映像表示調整方法)を詳しく説明する。まず、全体の大まかな流れを、図３のフローチャートに沿って説明する。図３は、視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順を示すフローチャートである。
【００９１】
まず視聴者が映像表示装置１５の電源をオンにすると(ステップＳ１)、視聴者はリモコン１を介して任意の映像コンテンツ(３Ｄコンテンツ)を選択し、視聴を開始する指示を入力部２に出力する。映像コンテンツの視聴指示を受けた入力部２は、その情報を制御部３および生体情報測定部１１に出力する。制御部３では、視聴指示を受けた映像コンテンツのデータを映像コンテンツ格納部４から取得し、当該データを再生部５に出力して視聴者は映像コンテンツの視聴を開始する(ステップＳ２)。一方、生体情報測定部１１では、視聴者が映像コンテンツの視聴を開始すると、視聴者の生体情報の測定を開始する(ステップＳ３)。生体情報測定部１１が測定した生体情報は生体指標算出部１２に出力され、生体指標算出部１２において、当該生体情報を基に各種生体指標が算出される(ステップＳ４)。そして、生体指標算出部が算出した生体指標に基づいて、生体影響レベル解析部１３が視聴者の生体影響レベルを決定する(ステップＳ５)。
【００９２】
生体影響レベル解析部１３が決定した生体影響レベルは制御部３に出力され、当該生体影響レベルが高レベルであった場合には(ステップＳ６，ＹＥＳ)、ユーザが視聴している映像コンテンツの映像効果レベルを下げるように制御部３が映像効果レベル調整部１４を制御する(ステップＳ７)。映像効果レベルを下げた後、視聴者が映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９３】
生体影響レベル解析部１３が決定した生体影響レベルが高レベルではなく(ステップＳ６，ＮＯ)、低レベルであった場合には(ステップＳ１０，ＹＥＳ)、ユーザが視聴している映像コンテンツの映像効果レベルを上げるように制御部３が映像効果レベル調整部１４を制御する(ステップＳ１１)。映像効果レベルを上げた後、視聴者が映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９４】
一方、生体影響レベル解析部１３が決定した生体影響レベルが低レベルではなかった場合(ステップＳ１０，ＮＯ)、すなわち中レベルであった場合には、制御部３は入力部２から視聴指示があった映像コンテンツのデータをそのまま再生部５に出力して視聴者に表示する。そして、視聴者がそのまま映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９５】
(映像効果レベルの調整手順)
次に映像効果レベル調整部１４による映像効果レベルの具体的な調整手順について説明する。まず、視聴者の生体影響レベルが高レベルであり、映像効果レベルを下げる場合の調整手順について、図４のフローチャートに沿って説明する。図４は、映像効果レベルを下げる場合の調整手順を示すフローチャートである。
【００９６】
制御部３から映像効果レベルを下げるように指示を受けると、映像効果レベル調整部１４は映像効果レベルを下げる処理を開始する。上述したように、映像効果レベルを下げるために、映像効果レベル調整部１４は視聴者が視聴している映像コンテンツの各種パラメータ(奥行き量、輝度、色度、表示速度、表示サイズ、表示角度、光源の向き、または表面の反射等)を調整する。すべてのパラメータを調整することも可能であるし、任意のパラメータを調整するように設定することも可能である。以下では、５つのパラメータ(奥行き量、輝度、色度、表示速度、および表示サイズ)のうち、奥行き量および輝度を下げる場合を想定して説明する。
【００９７】
制御部３から映像効果レベルを下げる指示を受けると、映像効果レベル調整部１４は、視聴者が視聴している映像コンテンツの奥行き量を下げるので(ステップＳ２１，ＹＥＳ)、当該奥行き量を調整し(ステップＳ２２)、輝度についても下げるので(ステップＳ２３，ＹＥＳ)、当該輝度を調整する(ステップＳ２４)。続いて色度、表示速度、および表示サイズについては調整しないので、色度はそのままの色度を保ち(ステップＳ２５，ＮＯ)、表示速度についてもそのままの表示速度を保つ(ステップＳ２７，ＮＯ)。また、表示サイズについてもそのままの表示サイズを保ち(ステップＳ２９，ＮＯ)、各種パラメータの調整は終了する。このようにして映像効果レベルは調整される。なお、各種パラメータを調整した映像コンテンツのデータは再び制御部３に出力され、当該データを制御部３が再生部５に出力することによって、映像効果レベルが調整された映像コンテンツが視聴者に表示される。
【００９８】
以下では、視聴者の生体影響レベルが低レベルであり、映像効果レベルを上げる場合の調整手順について、図５のフローチャートに沿って説明する。図５は、映像効果レベルを上げる場合の調整手順を示すフローチャートである。
【００９９】
制御部３から映像効果レベルを上げるように指示を受けると、映像効果レベル調整部１４は映像効果レベルを上げる処理を開始するが、以下では、５つのパラメータ(奥行き量、輝度、色度、表示速度、および表示サイズ)のうち、奥行き量、表示速度、および表示サイズを上げる場合を想定して説明する。
【０１００】
制御部３から映像効果レベルを上げる指示を受けると、映像効果レベル調整部１４は、視聴者が視聴している映像コンテンツの奥行き量を上げるので(ステップＳ３１，ＹＥＳ)、当該奥行き量を調整する(ステップＳ３２)。次に輝度および色度については調整しないので、輝度はそのままの輝度を保ち(ステップＳ３３，ＮＯ)、色度についてもそのままの色度を保つ(ステップＳ３５，ＮＯ)。一方、表示速度は上げるので(ステップＳ３７，ＹＥＳ)、当該表示速度を調整する(ステップＳ３８)。同様に、表示サイズについても上げるので(ステップＳ３９，ＹＥＳ)、当該表示サイズを調整し(ステップＳ４０)、各種パラメータの調整は終了する。このようにして映像効果レベルを調整する。なお、各種パラメータを調整した映像コンテンツのデータは再び制御部３に出力され、当該データを制御部３が再生部５に出力することによって、映像効果レベルが調整された映像コンテンツが視聴者に表示される。
【０１０１】
以上では、映像効果レベルを下げるために奥行き量および輝度を下げる例を挙げたが、特にこれに限定されるわけではなく、他のパラメータも調整可能である。同様に、映像効果レベルを上げるために、奥行き量、表示速度、および表示サイズを調整する場合に限定されるわけではない。また、映像効果レベルを調整するために調整するパラメータは上記パラメータに限定されない。また、ある映像効果はレベルを上げて、それとは違う映像効果はレベルを下げるというような、組み合わせの調整があっても良い。
【０１０２】
上述したように、映像効果レベルを調整するためにすべてのパラメータを調整することも可能であるが、任意のパラメータを調整するように設定することも可能である。任意のパラメータを調整するように設定する場合には、映像コンテンツの映像効果レベル、または視聴者の生体情報(生体指標)等を考慮して決定することが可能である。あるいは、調整するパラメータを視聴者自身が決定しても良い。いずれの場合でも、生体影響レベルが低レベルまたは高レベルであった場合にどのパラメータを調整するのかを予め設定しておく必要がある。この場合、映像効果レベル調整部１４は、設定内容に基づいて各種パラメータの調整を行う。そのため、設定内容の情報が映像効果レベル調整部１４に出力されるような構成にすることが好ましい。
【０１０３】
また、上記映像効果レベルの調整は、３Ｄコンテンツを視聴する際に行うものであるため、視聴者が２次元映像コンテンツを視聴しているのか、あるいは３Ｄコンテンツを視聴しているのかを判断し、視聴しているのが３Ｄコンテンツであった場合に視聴者の生体情報の測定を開始するような構成にすると良い。
【０１０４】
３Ｄコンテンツの視聴のみではなく、２Ｄコンテンツを視聴中に視聴者の生体情報を測定し、当該２Ｄコンテンツに３Ｄ効果を付加しても良い。例えば、視聴者が２Ｄコンテンツを視聴中に生体情報を測定し、立体感、臨場感、および没入感が乏しく、明らかに視聴者が退屈している場合には、前述と同様の方法で２Ｄコンテンツに立体効果を付加することが効果的である。これにより、視聴者のコンテンツ視聴に対する満足度がアップする。この時付加する立体効果のレベルは、予め設定しておいたり、もしくは視聴者のニーズに対応させたり、あるいは、視聴中に視聴者の生体情報レベルに応じて、徐々にレベルを上げていったりしても良い。
【０１０５】
(映像表示装置４２の実施例)
図６に、本実施形態に係る映像表示装置４２の具体的な実施例を示す。図６(ａ)は、映像効果レベルの調整前の状態を示す図である。図６(ｂ)は、映像効果レベルの調整後の状態を示す図である。
【０１０６】
図６には、映像表示装置４２が指先から視聴者の生体情報を測定する指先用生体情報測定器４３を採用している例が示されている。図６(ａ)に示すように、視聴者には３次元表示の映像効果(立体感、臨場感、および没入感等)が高い３Ｄコンテンツが表示ディスプレイ４１において表示されている。この際、指先用生体情報測定器４３では、内部に備えた生体情報測定部１１が視聴者の指先から生体情報を測定している。そして、測定した生体情報に基づいて、映像表示装置４２内では、生体指標算出部１２、および生体影響レベル解析部１３によって、視聴者の現在の生体影響レベルが決定される。例えば、視聴者の生体影響レベルがグラフ１７のようであったとする。グラフ１７によると、視聴者の生体影響レベルは徐々に上昇しており、ボーダーライン(高レベル)に達している。その結果、映像表示装置４２では、表示ディスプレイ４１に表示されている３Ｄコンテンツの映像効果レベルを下げるように映像効果レベルの調整を行う。
【０１０７】
図６(ｂ)に示すように、映像効果レベルを下げた結果、視聴者には３次元表示の立体効果(立体感、臨場感、および没入感等)が低い３Ｄコンテンツが表示ディスプレイ４１において表示されている。この際、映像表示装置４２では、指先用生体情報測定器４３が視聴者の指先から生体情報を継続して測定しており、測定した生体情報に基づく視聴者の生体影響レベルはグラフ１８のようになる。グラフ１８によると、視聴者の生体影響レベルは、グラフ１７と比較して低下しており、ボーダーライン(高レベル)よりも低くなっている。このように、視聴者の生体影響レベルを逐次的に検出しているため、視聴者のリアルタイムの生体影響レベルに合わせた３Ｄコンテンツの映像効果レベルの調整が可能となる。
【０１０８】
視聴者の生体影響レベルとは、視聴者自身の主観的評価または自覚症状だけでは把握できない場合も多く、特に３Ｄコンテンツの視聴においては、視聴者が気付かないうちに生理的違和感を視聴者に与えてしまっている場合も多い。本実施形態によれば、視聴者個人のリアルタイムの生体影響レベルを把握することができるので、視聴者が過度な生理的違和感を感じている場合には３Ｄコンテンツの映像効果レベルを下げることが可能である。逆に、視聴者が十分な映像効果(立体効果)を感じていない場合には３Ｄコンテンツの映像効果レベルを上げることが可能である。このように、映像表示装置１５は、視聴者に合わせた最適な３Ｄコンテンツの表示を実現することができる。
【０１０９】
(プログラムおよび記録媒体)
最後に、映像表示装置１５に含まれている各部は、ハードウェアロジックによって構成すれば良い。または、次にように、ＣＰＵ(Computer Processing Unit)を用いてソフトウェアによって実現しても良い。
【０１１０】
すなわち、映像表示装置１５は、各機能を実現するプログラムの命令を実行するＣＰＵ、このプログラムを格納した、上記プログラムを実行可能な形式に展開するＲＡＭ(Random Access Memory)、および上記プログラムと各種データとを格納するメモリ等の記憶装置(記録媒体)ドライブを備えている。この構成により、本発明の目的は、所定の記録媒体によっても達成できる。
【０１１１】
この記録媒体は、上述した機能を実現するソフトウェアである映像表示装置１５のプログラムのプログラムコード(実効形式プログラム，中間コードプログラム，ソースプログラム)をコンピュータで読み取り可能に記録していれば良い。映像表示装置１５に、この記録媒体を供給する。これにより、コンピュータとしての映像表示装置１５(またはＣＰＵ、ＭＰＵ)が、供給された記録媒体に記録されているプログラムコードを読み出し、実行すれば良い。
【０１１２】
プログラムコードを映像表示装置１５に供給する記録媒体は、特定の構造または種類のものに限定されない。すなわちこの記録媒体は、例えば、磁気テープまたはカセットテープ等のテープ系、フロッピー(登録商標)ディスク／ハードディスク等の磁気ディスク、またはＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＢＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系等とすることができる。
【０１１３】
また、映像表示装置１５を通信ネットワークと接続可能に構成しても、本発明の目的を達成できる。この場合、上記のプログラムコードを、通信ネットワークを介して映像表示装置１５に供給する。この通信ネットワークは映像表示装置１５にプログラムコードを供給できるものであれば良く、特定の種類または形態に限定されない。例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、または衛星通信網等であれば良い。
【０１１４】
この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な任意の媒体であれば良く、特定の構成または種類のものに限定されない。例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、またはＡＤＳＬ(Asymmetric Digital Subscriber Line)回線等の有線でも、ＩｒＤＡまたはリモコン１のような赤外線、Ｂｌｕｅｔｏｏｔｈ(登録商標)、８０２．１１無線、ＨＤＲ、携帯電話網、衛星回線、または地上波デジタル網等の無線でも利用可能である。なお、本発明は上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【０１１５】
本発明は、上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明のご術的範囲に含まれる。
【産業上の利用可能性】
【０１１６】
本発明はゲームまたは映画等を始めとしたアミューズメントに利用する表示装置に適用可能である。
【符号の説明】
【０１１７】
１ リモートコントローラ
２ 入力部
３ 制御部
４ 映像コンテンツ格納部
５ 再生部
６ 映像部
７ 音声部
８ 出力部
９，４１ 表示ディスプレイ
１０ スピーカ
１１ 生体情報測定部
１２ 生体指標算出部
１３ 生体影響レベル解析部
１４ 映像効果レベル調整部
１５，４０，４２ 映像表示装置
１７，１８ グラフ
３８ 記録装置
３９ 再生装置
４３ 指先用生体情報測定器
【技術分野】
【０００１】
本発明は、２次元映像および３次元映像を表示するための映像表示装置、および映像表示調整方法、ならびに映像表示装置のプログラム、コンピュータ読み取り可能な記録媒体に関する。
【背景技術】
【０００２】
近年では、映像表示技術の飛躍的な発展により、２次元映像コンテンツを表示する技術に加え、３次元映像コンテンツ(以下、３Ｄコンテンツという)を表示する技術の開発が進められてきている。３Ｄコンテンツの表示技術は、アミューズメント、医療現場、または電子カタログ・広告等に利用でき、その利用範囲は非常に幅広い。中でもゲームまたは映画等のアミューズメントに利用するケースが増えつつある。
【０００３】
通常３Ｄコンテンツは、視聴者の両眼の画像視差を利用して視聴するようになっているので、両眼の輻輳角、または両眼の焦点距離に矛盾が生じていたり、視差量が適当でなかったりすると、視聴者は生理的違和感を覚えるという現象が知られている。生理的違和感とは、視聴者の興奮度合いまたは刺激度合いが上昇してしまったり、立体感、臨場感、および没入感等を強く感じてしまったりする場合に生じるものである。生理的違和感が強いと、目眩、酔い、気分が悪くなる等視聴者の生体に影響を及ぼしてしまう場合もある。また、立体感、臨場感、および没入感等が弱過ぎても生理的違和感を感じる場合もある。
【０００４】
また、視聴者それぞれの身体的特徴(瞳孔間距離、斜位、または視力等)からも映像視聴時に視聴者に生理的違和感を与える場合がある。特に、３Ｄコンテンツは、専用の眼鏡を装着して視聴する場合が多いので、眼鏡装着による違和感等も視聴者に生理的違和感を与える原因の一つになっている。
【０００５】
上記したような原因から、３Ｄコンテンツを視聴した際に、視聴者ごとに立体感、臨場感、および没入感等の映像効果(立体効果)の感じ方に個人差があり、視聴者によっては立体効果が十分に伝わっていない可能性が高い。そこで、視聴者個人の状態に合わせた３次元表示を行う工夫が特許文献１〜３では行われている。
【０００６】
例えば、特許文献１には、立体眼鏡を装着している視聴者の様々な生体量の変化を検出する表示装置が開示されている。具体的には、立体眼鏡に視聴者の脳波、脈波、皮膚温、および瞬きを検出するセンサが設けられている。センサによって得た各データを解析し、視聴者の興奮度、感動度、および疲労度等の感覚量を算出し、当該算出値に応じて表示している画像を３次元表示から２次元表示に戻したり、視聴者に対して休息を促すメッセージを流したりする。
【０００７】
これによれば、視聴者が見ている映像から受ける感覚の度合いを推定し、この感覚度の変化によって見ている映像の効果を下げる画像処理、またはメッセージ表示を施すことによって、視聴者個人の受けている感覚に応じた安全な状態の映像を常に視聴者に与えることができる。
【０００８】
また、特許文献２には、３Ｄコンテンツに付帯する３次元表示に関する付帯情報と、表示される３Ｄコンテンツを観察する観察者に関する個人情報とに基づいて、表示対象となる３Ｄコンテンツの表示状態を制御する表示装置が開示されている。より詳細には、付帯情報から得た観察者が感じる生理的違和感の程度を示す生体影響度を求め、この生体影響度と、年齢、性別、嗜好、および観察履歴等の個人情報とに基づいて、３Ｄコンテンツの表示状態を制御する。
【０００９】
これによれば、観察者ごとに適した表示状態にして３Ｄコンテンツを表示することが可能となる。つまり、３Ｄコンテンツごとの生理的違和感の度合いと、観察者個人の生理的違和感の度合いとを考慮して３Ｄコンテンツを表示することができる。
【００１０】
一方、特許文献３には、視聴者の年齢または健康状態等の条件に基づいたコンテンツ再生を行う表示装置が開示されている。具体的には、コンテンツの記録または伝送の際に、コンテンツのシーン単位で視聴者の生体に及ぼす影響の程度を示す情報を、各シーンの映像データおよび音声データと共に多重化する。そして、当該コンテンツを再生する際には、当該情報と、予め設定した視聴者の生体の３Ｄコンテンツ視聴に対する許容度を示す情報との比較に基づいたコンテンツ再生を行う。
【００１１】
これによれば、視聴者に表示するシーンにおいて、視聴者の生体に与える影響が、視聴者の３Ｄコンテンツ視聴に対する許容度を上回った場合には、例えば、再生映像の選択または変更、再生映像の所定シーンのスキップ等を行うことができる。したがって、視聴者に合った適切かつ安全なレベルのコンテンツの再生が行われるようにすることができる。
【００１２】
上述したような、視聴者の生体に与える影響を考慮して映像コンテンツの再生を行う従来の映像表示装置の一例として、特許文献３に開示されている映像表示装置を図７に示す。図７は、当該文献に開示されている映像表示装置４０の要部構成を示すブロック図である。
【００１３】
図７に示すように、映像表示装置４０は、記録装置３８と再生装置３９とからなる。記録装置３８は、映像データ生成部２１、生体影響分析部２２、ビデオ圧縮部２３、音声データ生成部２４、オーディオ圧縮部２５、多重化部２６、ユニット構成部２７、データ記録部２８、および記録媒体２９によって構成されている。一方、再生装置３９は、分離化部３０、ビデオ復号部３１、オーディオ復号部３２、再生制御部３３、ユーザインターフェース３４、およびユーザ生体影響設定部３５によって構成されている。
【００１４】
映像表示装置４０においてコンテンツを再生する際の処理の流れを簡単に説明する。まず、映像データ生成部２１によって生成された映像データ、または外部から取得した映像データは、生体影響分析部２２およびビデオ圧縮部２３に供給される。生体影響分析部２２では、映像データが生体に対してどのくらいの影響を及ぼすかを分析し、当該分析結果は、生体影響情報としてユニット構成部２７に供給される。ビデオ圧縮部２３では、ビデオ圧縮が行われ、圧縮された映像データは多重化部２６に供給される。
【００１５】
一方、音声データ生成部２６によって生成された音声データ、または外部から取得した音声データは、オーディオ圧縮部２５に供給される。オーディオ圧縮部２５では、オーディオ圧縮が行われ、圧縮された音声データは多重化部２６に供給される。
【００１６】
多重化部２６では、映像データおよび音声データがそれぞれ多重化され、各多重化データはユニット構成部２７に供給される。ユニット構成部２７では、多重化された映像データおよび多重化された音声データのユニット化を行うとともに、生体影響情報をユニットごとに記録し、ユニット化データをデータ記録部２８に出力する。そして、データ記録部２８では、ユニット構成部２７から供給されたユニット化データを記録媒体２９に出力し、記録媒体２９への記録を行う。
【００１７】
記録媒体２９に記録されたデータは分離化部３０に供給される。分離化部３０では、多重化されているデータの分離が行われ、映像データはビデオ復号部３１に供給され、音声データはオーディオ復号部３２に供給される。また、生体影響情報を含むデータは、再生制御部３３に供給される。ビデオ復号部３１およびオーディオ復号部３２では、それぞれデータの復号を行い、復号された映像データおよび音声データを再生制御部３３に供給する。
【００１８】
一方、ユーザ生体影響設定部３５では、コンテンツの再生を行う前に、ユーザインターフェース３４によって入力された情報に基づいて、ユーザの３Ｄコンテンツ視聴に対する許容度を示すユーザ生体影響情報を設定する。当該ユーザ生体影響情報は、再生制御部３３に供給される。再生制御部３３では、ユーザ生体影響情報および生体影響情報の両方の情報に基づいて、供給された映像データおよび音声データの再生の制御を行う。
【先行技術文献】
【特許文献】
【００１９】
【特許文献１】特開平８−２８９３２７号公報(１９９６年１１月１日公開)
【特許文献２】特開２００４−２４６７２５号公報(２００４年９月２日公開)
【特許文献３】特開２００６−２７０９２４号公報(２００６年１０月５日公開)
【発明の概要】
【発明が解決しようとする課題】
【００２０】
上記した特許文献１〜３に開示されている技術では、視聴者個人のリアルタイムの生体情報に基づいて、視聴者に適した３次元表示の制御を行うことができない。また、長時間の視聴には耐えられないものもある。
【００２１】
例えば、特許文献１に開示されている技術では、視聴者が３Ｄコンテンツを視聴するのと同時に、視聴者の感覚量(生体情報)を測定することが可能だが、当該感覚量を検出するためのセンサは視聴者が装着している立体眼鏡に付いている。当該立体眼鏡は大きく重たくなっているため、その装着感が悪く、視聴者が長時間の視聴に耐えられないという問題があった。
【００２２】
また、検出した感覚量に基づいて、３次元表示を２次元表示に戻したり、休息を促すメッセージを表示したりすることはできるが、３次元表示の状態を制御することができない。すなわち、３Ｄコンテンツの立体効果自体を制御することができない。
【００２３】
一方、特許文献２に開示されている技術では、３Ｄコンテンツの表示状態を制御することができるが、当該制御は視聴者の年齢、性別、および嗜好等の個人情報に基づいている。当該個人情報は、視聴以前に把握することができる一般的な情報であるため、視聴者個人のリアルタイムの生体情報に基づいていない。
【００２４】
特許文献３に開示されている技術では、コンテンツのシーンごとに視聴者の生体に影響を及ぼす可能性を示す情報を予め測定した上で再生状態を制御しているので、予め分析済みのコンテンツにしか対応することができない。また、本文献においても、当該制御は予め設定した視聴者の生体の３Ｄコンテンツ視聴に対する許容度に基づいているので、視聴者個人のリアルタイムの生体情報に基づいた制御を行うことができない。
【００２５】
そこで、本発明は、上記課題に鑑みてなされたものであり、その目的は、３Ｄコンテンツを視聴している際の、視聴者のリアルタイムの生体情報に基づいた、当該３Ｄコンテンツの３Ｄ映像効果を制御することができる映像表示装置を提供することにある。
【課題を解決するための手段】
【００２６】
本発明に係る映像表示装置は、上記課題を解決するために、３次元映像を３次元表示可能な映像表示装置において、視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定する測定手段と、上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定する解析手段と、上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御する制御手段とを備えていることを特徴としている。
【００２７】
上記の構成によれば、視聴者が３次元映像を視聴中には、当該視聴者の生体情報が測定され、当該生体情報に基づいて解析される生体影響度に合わせて、視聴者が視聴している３次元映像の映像効果を制御する。その結果、視聴者には、自身の生体情報に基づく生体影響度に適した映像効果の３次元映像が表示されることになる。
【００２８】
このように、視聴者が３次元映像を視聴中に、当該視聴者の生体情報を測定することによって、視聴者の生体情報を考慮した３次元表示を実現することができる。これによれば、視聴者の生体影響度が高すぎたり、あるいは低すぎたりして、生理的違和感を強く感じている場合には、３次元映像の立体感、臨場感、没入感等の立体効果を抑える、または増すことによって、視聴者が感じている生理的違和感を和らげることができる。
【００２９】
逆に、３次元映像を視聴しているにも拘らず、視聴者によっては立体感、臨場感、および没入感等の立体効果が十分に伝わっていない場合が多い。その場合は、視聴者の生体影響度が低いので、それに合わせて３次元映像の表示状態を調整し、映像効果を高めることが可能となる。このように、視聴者が３次元映像を視聴している最中に生体情報を測定するので、視聴者のリアルタイムの生体情報に基づいて当該３次元映像の映像効果を制御することができる。したがって、視聴者のリアルタイムの生体情報に基づいた３次元映像の表示が可能となる。それ故、例えば、視聴者の体調が優れない場合等には、当該視聴者の体調に合わせた３次元映像の表示を行うことができる。
【００３０】
また、本発明に係る映像表示装置は、上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出する算出手段をさらに備え、上記解析手段は、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴としている。
【００３１】
上記の構成によれば、視聴者の生体情報に基づいて生体指標を算出し、当該生体指標に基づいて生体影響度を解析する。これによれば、視聴者の生体情報を考慮して映像効果を制御することができる。
【００３２】
また、本発明に係る映像表示装置は、上記生体情報に基づいて、上記測定手段は、上記視聴者の指先から上記生体情報を測定することを特徴としている。
【００３３】
上記の構成によれば、視聴者が３次元映像を視聴している最中に生体情報を指先から測定しているので、３次元映像の視聴の邪魔にならない。
【００３４】
また、本発明に係る映像表示装置は、上記生体情報は、脈波、心拍数、および血圧のうち、少なくともいずれかであることを特徴としている。
【００３５】
上記の構成によれば、視聴者のより正確な生体影響度を解析することができる。
【００３６】
また、本発明に係る映像表示装置は、上記生体指標は、心拍間隔変動係数、脈波の高周波数成分に対する上記脈波の中間周波数成分の比(ＬＦ／ＨＦ)、血圧と心拍数との最大相互相関係数(ρｍａｘ)、および加速度脈波のうち、少なくともいずれかであることを特徴としている。
【００３７】
上記の構成によれば、視聴者のより正確な生体影響度を解析することができる。
【００３８】
また、本発明に係る映像表示装置は、上記制御手段は、上記映像効果として上記３次元映像の奥行き量、輝度、色度、表示速度、表示サイズ、および表示角度のうち、少なくともいずれかを制御することを特徴としている。
【００３９】
上記の構成によれば、視聴者の生体情報を考慮して映像効果を制御することが可能となる。
【００４０】
また、本発明に係る映像表示装置は、上記制御手段は、複数の上記映像効果を制御することを特徴としている。
【００４１】
上記の構成によれば、複数の映像効果のうち、ある映像効果のレベルは上げて、それとは違う映像効果のレベルは下げるというように、映像効果を組み合わせて制御することができる。
【００４２】
また、本発明に係る映像表示装置は、上記視聴者が２次元映像を視聴中に、上記測定手段が、上記視聴者の上記生体情報を測定し、上記解析手段が、上記生体情報を解析し、解析した結果に基づいて、上記生体影響度を決定すると、上記制御手段が、上記生体影響度に基づいて、上記２次元映像に上記映像効果を付加し、当該２次元映像を上記３次元映像に変換することを特徴としている。
【００４３】
上記の構成によれば、視聴者が２次元映像を視聴中に、立体感、臨場感、および没入感が乏しく、明らかに視聴者が退屈している場合には、２次元映像に立体効果を付加し、３次元映像に変換することができる。
【００４４】
また、本発明に係る映像表示装置は、上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を上げることを特徴としている。
【００４５】
上記の構成によれば、視聴者の生体影響度が低かった場合に、表示状態を調整し、立体感、臨場感、および没入感等の立体効果がより高い３次元映像を表示することができる。
【００４６】
また、本発明に係る映像表示装置は、上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を下げることを特徴としている。
【００４７】
上記の構成によれば、視聴者の生体影響度が高かった場合に、表示状態を調整し、立体感、臨場感、および没入感等の立体効果を低めることによって、視聴者が感じる生理的違和感を和らげることができる。
【００４８】
また、本発明に係る映像表示装置は、上記生体影響度が予め定められた基準を超えると、上記３次元映像の表示を停止する制御手段をさらに備えていることを特徴としている。
【００４９】
上記の構成によれば、視聴者の生体影響度が予め定められた基準を超え、視聴者の生体に大きな影響を及ぼし危険な状態であると判断されると、３次元映像の表示を停止することができる。
【００５０】
また、本発明に係る映像表示制御方法は、上記課題を解決するために、３次元映像を３次元表示する映像表示装置における映像表示制御方法であって、視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定するステップと、上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定するステップと、上記生体影響度に基づいて上記３次元映像の映像効果を制御するステップとを備えていることを特徴としている。
【００５１】
上記の方法によれば、視聴者の生体情報を考慮して映像効果を制御することが可能な映像表示装置が実現される。
【００５２】
また、本発明に係る映像表示制御方法は、上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出するステップをさらに備え、上記生体影響度を決定するステップでは、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴としている。
【００５３】
上記の方法によれば、視聴者の生体情報に基づいて生体指標を算出し、当該生体指標に基づいた生体影響度を考慮して映像効果を制御することができる。
【００５４】
なお、上述した映像表示制御方法は、コンピュータによって実現しても良く、この場合には、コンピュータを上記各ステップとして実行させることにより上記映像表示制御方法をコンピュータにて実現させるプログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【発明の効果】
【００５５】
本発明によれば、視聴者個人のリアルタイムの生体影響度を把握することができる。そのため、視聴者の生体影響度が高すぎたり、低すぎたりして過度な生理的違和感を感じている場合には、当該視聴者の生体影響度に合わせて３次元映像の映像効果を制御することができる。例えば、視聴者が３次元映像の映像効果を過度に感じている場合には、３次元映像の立体感、臨場感、および没入感等の映像効果(立体効果)を下げることが可能である。逆に、視聴者が十分な映像効果を感じていない場合には、３次元映像の表示状態を調整することによって、３次元映像の映像効果を上げることが可能である。このように、本発明に係る映像表示装置は、視聴者の生体情報に合わせた最適な３次元映像の表示を実現することができる。
【図面の簡単な説明】
【００５６】
【図１】本発明の一実施形態に係る映像表示装置の要部構成を示すブロック図である。
【図２】生体影響レベルのレベル分けの一例を示す図である。
【図３】視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順を示すフローチャートである。
【図４】映像効果レベルを下げる場合の調整手順を示すフローチャートである。
【図５】映像効果レベルを上げる場合の調整手順を示すフローチャートである。
【図６】(ａ)は、映像効果レベルの調整前の状態を示す図であり、(ｂ)は、映像効果レベルの調整後の状態を示す図である。
【図７】従来の映像表示装置の要部構成を示すブロック図である。
【発明を実施するための形態】
【００５７】
(映像表示装置１５の概要)
以下、本発明の一実施形態について、図面を参照して詳細に説明する。まず、本実施形態に係る映像表示装置１５の概要について、図１を参照して説明する。図１は、映像表示装置１５の要部構成を示すブロック図である。映像表示装置１５は、２次元表示だけでなく、３次元表示可能であり、３次元映像コンテンツ(以下、３Ｄコンテンツという)を再生することができる。
【００５８】
図１に示すように、映像表示装置１５は、映像処理部１６、生体情報測定部１１(測定手段)、表示ディスプレイ９、スピーカ１０、およびリモートコントローラ１(以下、リモコン１という)から構成されている。
映像処理部１６は、入力部２、制御部３、映像コンテンツ格納部４、再生部５、映像部６、音声部７、出力部８、生体指標算出部１２(算出手段)、生体影響レベル解析部１３(解析手段)、および映像効果レベル調整部１４(制御手段)からなる。
【００５９】
入力部２は、リモコン１からの光信号を受信して、当該リモコン１からの制御信号を受け付けるためのものである。映像表示装置１５の電源オン／オフ、またはコンテンツの再生等の視聴者からの指示は、このリモコン１を介して行われる。
【００６０】
制御部３では、各種の制御を行っており、リモコン１を介して視聴者から映像コンテンツの再生指示を入力部２が受信すると、その情報が制御部３に出力される。制御部３は映像コンテンツ格納部４から上記映像コンテンツのデータを取り出し、当該映像コンテンツのデータを再生部５に出力する。再生部５では当該制御部３から再生する映像コンテンツのデータを受信すると、当該データの映像データを映像部６に出力し、当該データの音声データを音声部７に出力する。映像部６では、出力された映像データを再生用の映像データに処理し、音声部７では、出力された音声データを再生用の音声データに処理する。映像部６が処理した映像データ、および音声部７が処理した音声データは出力部８に出力され、出力部８によって映像データは表示ディスプレイ９に出力され、音声データはスピーカ１０に出力される。コンテンツを再生するための映像処理については、従来の技術と同様であるため、ここでは言及しない。
【００６１】
本実施形態に係る映像表示装置１５は、視聴者の生体情報を測定する生体情報測定部１１を備えている。ここで言う生体情報とは、視聴者の脈波、心拍数、血圧、体温、発汗度、瞬目回数、呼吸回数、または脳波等の視聴者の生体に関わる情報である。生体情報測定部１１は、入力部２が視聴者からの映像コンテンツ(３Ｄコンテンツ)の再生指示を受信すると、その情報を受けて視聴者の生体情報の測定を開始する。したがって、生体情報測定部１１は、視聴者が映像コンテンツの視聴を開始すると同時に、当該視聴者の生体情報の測定を開始する。測定した生体情報は生体指標算出部１２に出力され、当該生体指標算出部１２によって生体情報を基に生体指標が算出される。ここで言う生体指標とは、上記生体情報に基づいて算出される、視聴者の生体に関わる指標である。算出された生体指標は生体影響レベル解析部１３に出力され、当該生体影響レベル解析部１３によって指標のレベルが解析され、視聴者の現在の生体影響レベル(生体影響度)が決定される。生体影響レベルは、３Ｄコンテンツを視聴することによって視聴者の生体に与える影響の程度を示す。例えば、生体影響レベルを高レベル・中レベル・低レベルに分けた場合には、高レベルであるほど、３Ｄコンテンツを視聴した際に３Ｄコンテンツの映像効果を過度に感じてしまうことに起因して、３Ｄコンテンツを視聴することによって視聴者の生体に大きな影響を及ぼす可能性が高いと判定する。生理的違和感とは、視聴者の興奮度合いまたは刺激度合いが上昇してしまったり、立体感、臨場感、および没入感等を強く感じてしまったりする場合に感じるものである。生理的違和感が強いと、目眩、酔い、気分が悪くなる等、視聴者の生体に影響を及ぼしてしまう場合もある。
【００６２】
決定された生体影響レベルは制御部３に出力され、制御部３では生体影響レベルに基づいて再生する映像コンテンツのデータの映像効果レベルを調整するように映像効果レベル調整部１４を制御する。ここで言う映像効果レベルとは、３Ｄコンテンツの立体感、臨場感、および没入感等の３次元表示上の映像効果(立体効果)のレベルである。映像効果レベル調整部１４では、生体影響レベルに基づいてコンテンツデータの映像効果レベルを調整し、調整したデータを再び制御部３に出力する。制御部３は、出力されたデータを再生部５に出力し、上述したようなコンテンツの再生処理が行われる。
【００６３】
再生する映像コンテンツは、映像コンテンツ格納部４に格納されているものの他に、記録媒体に記録されているもの、あるいはインターネットを通じて外部のサーバ等からダウンロードしたものであっても良い。映像表示装置１５には、各種記録媒体に対応するリーダを内蔵、もしくは外付けすることが可能である。また、インターネットに接続するための各種インターフェースが付属していても良い。
【００６４】
上記各種記録媒体とは、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、またはＣＤ−ＲＷ等のＣＤ(Compact Disc)、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ±Ｒ、またはＤＶＤ±ＲＷ等のＤＶＤ(Digital Versatile Disc)、ＨＤ ＤＶＤ(High-Definition Digital Versatile Disc)、ブルーレイディスク（Blu-ray Disc)、ＳＤカード、メモリスティック、コンパクトフラッシュ（登録商標）、マイクロドライブ、またはスマートメディア等のメモリカード、ＵＳＢメモリ、ＭＯ(Magneto-Optical)、ｉＶＤＲ(information Versatile Disc for Removable usage)、各種磁気テープ、または外付けＨＤＤ(Hard Disc Drive)等である。
【００６５】
(生体情報の測定)
上述したように、生体情報測定部１１では、視聴者の生体情報の測定が行われる。以下では、視聴者の生体情報の測定について詳しく説明する。まず、視聴者の生体情報の測定形態について説明する。
【００６６】
生体情報の測定形態としては、指先からの測定、掌からの測定、手首からの測定、帽子型の測定器による測定、仮面型の測定器による測定、または眼鏡型の測定器による測定等が可能である。生態情報測定部１１が取り得る測定形態は１種類の形態に限らず、複数の測定形態を組み合わせて視聴者の生体情報を測定しても良い。指先等の手先から測定する形態であれば、視聴者の映像コンテンツの視聴の邪魔にならない点で好ましい。また、生体情報測定部１１が測定する生体情報は、脈波、心拍数、血圧、体温、発汗度、瞬目回数、呼吸回数、または脳波等である。測定する生体情報については、１種類の測定項目に限らず、複数の測定項目を測定しても良い。
【００６７】
生体情報測定部１１が測定した視聴者の生体情報は、生体指標算出部１２に出力され、当該生体情報を基に生体指標が算出される。算出する指標としては、例えば、ＣＶＲＲ(Coefficient of Variation of R-R intervals)、ＬＦ／ＨＦ、ρｍａｘ、加速度脈波、ＣＶａａ、ａ、Ｗｈａｌｆ、ＰＯ、またはＰｍａｘ等が挙げられる。生体指標の一例を、表１に示す。算出する指標は１つであっても良いし、複数であっても良い。例えば、生体情報として脈波と心拍数と血圧とを測定した場合には、生体指標としてＣＶＲＲ(心拍間隔変動係数)、ＬＦ／ＨＦ(脈波の中間周波数成分(0.05〜0.20Hz)/脈波の高周波数成分(0.20〜0.35Hz))、ρｍａｘ(血圧と心拍数との最大相互相関係数)、および加速度脈波を算出することが可能である。
【００６８】
【表１】
【００６９】
生体指標算出部１２が算出した指標は、生体影響レベル解析部１３に出力され、当該指標のレベルが解析され、視聴者の現在の生体影響レベルが決定される。上述したように、視聴者の生体影響レベルが高レベルであるほど、３Ｄコンテンツを視聴した際に３Ｄコンテンツの映像効果を過度に感じてしまうことに起因して、３Ｄコンテンツを視聴することによって視聴者の生体に大きな影響を及ぼす可能性が高い。以下では、生体影響レベルの決定方法について詳しく説明する。
【００７０】
生体指標算出部１２によって算出された指標は、生体影響レベル解析部１３によってレベル分けされる。具体的には、各指標は指標値に基づいて、高レベル・中レベル・低レベルに分けられ、各指標のレベルが高レベルであるほど生体影響レベルは高くなる。生体指標として、ＣＶＲＲ、ＬＦ／ＨＦ、ρｍａｘ、および加速度脈波を算出した場合の、各指標のレベル分けの一例を表２に示す。
【００７１】
【表２】
【００７２】
表２に示すように、指標ごとに、当該指標の値に基づいてレベル分けされている。生体影響レベル解析部１３は、各指標の値が該当するレベルを解析し、解析した各指標のレベルに基づいて生体影響レベルを決定する。具体的には、各レベルに基準値を設定しておき、各指標が該当する１０段階レベルの平均に基づいて生体影響レベルを決定する。
【００７３】
【表３】
【００７４】
例えば、表３に示すような生体指標の算出結果が得られたとする。視聴者Ｘの結果に着目すると、１０段階レベルでは、ＣＶＲＲ＝レベル３、ＬＦ／ＨＦ＝レベル３、ρｍａｘ＝レベル２、および加速度脈波＝レベル２であり、高中低レベルでは、すべてが低レベルに該当する。したがって、視聴者Ｘの生体指標の平均値は、３(ＣＶＲＲのレベル)＋３(ＬＦ／ＨＦのレベル)＋２(ρｍａｘのレベル)＋２(加速度脈波のレベル)／４(平均)＝２．５≒３となる。ここで、生体影響レベルは、図２に示すように大きく高レベル・中レベル・低レベルの３段階に分けられており、さらに細かく０〜１０の１０段階に分けられている。本図では、０〜３が低レベルであり、４〜６が中レベルであり、７〜１０が高レベルである。なお、９〜１０は危険な状態(視聴者の生体に大きな影響を及ぼしている状態)であると判断され、生体影響レベルが危険レベルに達した場合には、直ちに映像コンテンツの再生を停止するように構成すると良い。さらに、危険レベルに達しなくとも、視聴者の生体影響レベルが急激に上昇した場合等でも直ちに映像コンテンツの再生を停止するように構成するとより良い。図２に基づくと、視聴者Ｘの生体指標の平均値は１０段階レベルの３であるため、低レベルに該当する。したがって、視聴者Ｘの生体影響レベルは低レベルであると決定される。
【００７５】
一方、視聴者Ｙの結果に着目すると、１０段階レベルでは、ＣＶＲＲ＝レベル４、および加速度脈波＝５であり、双方が中レベルに該当し、ＬＦ／ＨＦ＝１０、およびρｍａｘ＝７であり、双方が高レベルに該当している。したがって、視聴者Ｙの生体指標値の平均値は、４(ＣＶＲＲのレベル)＋１０(ＬＦ／ＨＦのレベル)＋７(ρｍａｘのレベル)＋５(加速度脈波のレベル)１０／４＝６．５≒７となる。図２に基づくと、視聴者Ｙの生体指標値の平均値は７であるため、高レベルに該当する。したがって、視聴者Ｙの生体影響レベルは高レベルであると決定される。
【００７６】
ここで、各指標の平均値を求めるのではなく、例えば、指標ごとに重み(ウェート)を付加した平均値を求めても良い。これによれば、指標ごとに重み付けをすることによって、複数の指標において重要度に差がある場合には、当該差を考慮して生体影響レベルを決定することができる。重み付けの一例として、表２には各指標の重みを表記している。これに基づくと、視聴者Ｘの生体指標の重み付けした平均値は、３(ＣＶＲＲのレベル)×２０／１００＋３(ＬＦ／ＨＦのレベル)×４０／１００＋２(ρｍａｘのレベル)×３０／１００＋２(加速度脈波のレベル)×１０／１００＝２．６≒３となる。
【００７７】
一方、視聴者Ｙの重み付けした平均値は、４(ＣＶＲＲのレベル)×２０／１００＋１０(ＬＦ／ＨＦのレベル)×４０／１００＋７(ρｍａｘのレベル)×３０／１００＋５(加速度脈波のレベル)×１０／１００＝７．４≒７となる。
【００７８】
上記の生体影響レベルの決定方法に限られず、指標ごとの重み(ウェート)を重視した他のレベル決定方法を用いても良い。以下に、その一例を示す。
【００７９】
視聴者Ｘの場合は、ＣＶＲＲ＝レベル３、ＬＦ／ＨＦ＝レベル３、ρｍａｘ＝レベル２、および加速度脈波＝レベル２であり、図２に基づくと、すべてが低レベルに該当する。すべての生体指標の高中低レベルが同じ場合には、重み付けの割合が一番高いＬＦ／ＨＦの１０段階レベルを採用する。そのため、視聴者Ｘの１０段階レベルは３となる。
【００８０】
一方、視聴者Ｙの場合は、ＣＶＲＲ＝４、および加速度脈波＝５であり、図２に基づくと、双方が中レベルに該当し、ＬＦ／ＨＦ＝１０、およびρｍａｘ＝７であり、双方が高レベルに該当している。各生体指標の高中低レベルが異なる場合は、重み付けの割合が高い、ＬＦ／ＨＦとρｍａｘとに注目する。１０段階レベルでは、ＬＦ／ＨＦ＝レベル１０、ρｍａｘ＝レベル７となるので、視聴者Ｙの生体指標値は、１０×４０(ＬＦ／ＨＦの重み付けの割合)＋７×３０(ρｍａｘの重み付けの割合)／７０＝８．７≒９となる。図２に基づくと、視聴者Ｙの生体指標値は９であるため、危険な高レベルに該当する。したがって、視聴者Ｙの生体影響レベルは危険な高レベルであると決定される。
【００８１】
このようにして決定した視聴者の生体影響レベルは制御部３に出力され、生体影響レベルが中レベルであった場合は、入力部２から再生指示があった映像コンテンツのデータをそのまま再生部５に出力して視聴者に表示する。一方、生体影響レベルが低レベルまたは高レベルであった場合には、再生する映像コンテンツの映像効果レベルを調整するように制御部３が映像効果レベル調整部１４を制御する。具体的には、生体影響レベルが高レベルであった場合は、３Ｄコンテンツ視聴が視聴者の生体に大きな影響を及ぼす可能性が高いと判断されるので、立体感、臨場感、および没入感等の映像効果(立体効果)のレベルを下げる。映像効果レベル調整部１４では、再生する映像コンテンツの映像効果レベルを下げるために、例えば、奥行き量(depth)、輝度、色度、表示速度、表示サイズ、表示角度、光源の向き、または表面の反射等の各種パラメータを調整する。上記各種パラメータを調整することによって映像効果レベルを下げ、３Ｄコンテンツの立体感、臨場感、および没入感等を抑える。調整するパラメータは、再生する映像コンテンツの映像効果レベル、または視聴者の生体情報(生体指標)等を考慮して適宜決定する。なお、生体影響レベルが低レベルまたは高レベルであった場合に調整するパラメータを予め設定しておくことも可能である。
【００８２】
同様に、生体影響レベルが低レベルであった場合は、３Ｄコンテンツ視聴が視聴者の生体にほとんど影響を及ぼさないと判断されるので、映像効果レベルを上げる。上述した各種パラメータを調整することによって映像効果レベルを上げ、３Ｄコンテンツの立体感、臨場感、および没入感等を高める。
【００８３】
以上のように、映像効果レベル調整部１４が調整した映像コンテンツのデータを再び制御部３に出力し、当該データを再生部５に出力することによって視聴者の生体情報を考慮した３次元表示を実現することができる。これによれば、視聴者の生体影響レベルが高レベルであると判定された場合には、映像コンテンツの映像効果(立体効果)を抑えることによって、視聴者が感じている生理的違和感を和らげることができる。
【００８４】
逆に、３Ｄコンテンツを視聴しているにも拘らず、３次元表示の映像効果の感じ方に個人差があることから、視聴者によっては立体感、臨場感、および没入感等が十分に伝わっていない場合が多い。その場合は、視聴者の生体影響レベルが低レベルであると判定されるので、それに合わせて映像効果レベルを上げることによって、３次元表示の映像効果レベルを高めることができる。このように、視聴者が映像コンテンツを視聴中に生体情報を測定するので、視聴者のリアルタイムの生体情報に基づいて当該コンテンツの映像効果を制御することができる。それ故、例えば、視聴者の体調が優れない場合等には、当該視聴者の体調に合わせた３次元映像の表示を行うことができる。
【００８５】
なお、生体情報測定部１１による視聴者の生体情報の測定は、視聴者が映像コンテンツを視聴している間は定期的に繰り返し行われることが好ましい。例えば、一定時間経過するごとに生体情報の測定を行ったり、シーンごとに生体情報の測定を行ったりすることが好ましい。これによれば、より正確な視聴者の生体情報に基づいた映像効果の制御を行うことが可能となる。
【００８６】
なお、例えば、表４に示すような生体指標の算出結果が得られたとする。表４に示すように、視聴者Ａ〜Ｄでは、得られる生体指標値がそれぞれ異なる。すなわち、視聴者ごとに、３Ｄコンテンツを視聴することによって感じる生理的違和感が異なるのを表している。本実施形態によれば、このような視聴者ごとに異なる生理的違和感(生体影響レベル)を考慮して、各視聴者の生体に適した３次元表示を行うことが可能である。
【００８７】
【表４】
【００８８】
また、視聴者Ｂでは、ρｍａｘが０．２９と高レベルに近く、刺激度合いが高い状態となっているが、ＬＦ／ＨＦは１．０５と中レベルであり、安定した状態となっている。このように、視聴者Ｂ個人内でも指標によって生体影響のレベルが異なるので、１つの指標をもって生体影響レベルを決定するのは難しい。そのため、生体影響レベルを決定する際には、複数の指標に基づいて当該レベルを決定するのが好ましい。これによれば、より正確な視聴者個人の生体影響レベルを決定付けることができる。
【００８９】
以上で示した重み付けは一例であり、これに限定されるわけではない。各指標の重要度を考慮して適当な重みを付加することが好ましい。また、以上では、生体指標としてＣＶＲＲ、ＬＦ／ＨＦ、ρｍａｘ、および加速度脈波を算出したが、特にこれに限定されるわけではない。算出する生体指標は適宜決定すれば良い。さらに、図２に示した生体影響レベルのレベル分けは一例であり、特にこれに限定されるわけではない。
【００９０】
(生体情報の測定手順)
以下では、視聴者が映像コンテンツを視聴する際に、視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順(映像表示調整方法)を詳しく説明する。まず、全体の大まかな流れを、図３のフローチャートに沿って説明する。図３は、視聴者の生体情報を測定し、その測定結果に基づいて映像効果レベルを調整するまでの手順を示すフローチャートである。
【００９１】
まず視聴者が映像表示装置１５の電源をオンにすると(ステップＳ１)、視聴者はリモコン１を介して任意の映像コンテンツ(３Ｄコンテンツ)を選択し、視聴を開始する指示を入力部２に出力する。映像コンテンツの視聴指示を受けた入力部２は、その情報を制御部３および生体情報測定部１１に出力する。制御部３では、視聴指示を受けた映像コンテンツのデータを映像コンテンツ格納部４から取得し、当該データを再生部５に出力して視聴者は映像コンテンツの視聴を開始する(ステップＳ２)。一方、生体情報測定部１１では、視聴者が映像コンテンツの視聴を開始すると、視聴者の生体情報の測定を開始する(ステップＳ３)。生体情報測定部１１が測定した生体情報は生体指標算出部１２に出力され、生体指標算出部１２において、当該生体情報を基に各種生体指標が算出される(ステップＳ４)。そして、生体指標算出部が算出した生体指標に基づいて、生体影響レベル解析部１３が視聴者の生体影響レベルを決定する(ステップＳ５)。
【００９２】
生体影響レベル解析部１３が決定した生体影響レベルは制御部３に出力され、当該生体影響レベルが高レベルであった場合には(ステップＳ６，ＹＥＳ)、ユーザが視聴している映像コンテンツの映像効果レベルを下げるように制御部３が映像効果レベル調整部１４を制御する(ステップＳ７)。映像効果レベルを下げた後、視聴者が映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９３】
生体影響レベル解析部１３が決定した生体影響レベルが高レベルではなく(ステップＳ６，ＮＯ)、低レベルであった場合には(ステップＳ１０，ＹＥＳ)、ユーザが視聴している映像コンテンツの映像効果レベルを上げるように制御部３が映像効果レベル調整部１４を制御する(ステップＳ１１)。映像効果レベルを上げた後、視聴者が映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９４】
一方、生体影響レベル解析部１３が決定した生体影響レベルが低レベルではなかった場合(ステップＳ１０，ＮＯ)、すなわち中レベルであった場合には、制御部３は入力部２から視聴指示があった映像コンテンツのデータをそのまま再生部５に出力して視聴者に表示する。そして、視聴者がそのまま映像コンテンツの視聴を続ける場合には(ステップＳ８，ＹＥＳ)、ステップＳ３に戻り、映像コンテンツの視聴を続けると同時に視聴者の生体情報の測定を再び開始する。ここで、視聴者が映像コンテンツの視聴を終了する場合には(ステップＳ８，ＮＯ)、映像表示装置１５の電源をオフにして終了する(ステップＳ９)。
【００９５】
(映像効果レベルの調整手順)
次に映像効果レベル調整部１４による映像効果レベルの具体的な調整手順について説明する。まず、視聴者の生体影響レベルが高レベルであり、映像効果レベルを下げる場合の調整手順について、図４のフローチャートに沿って説明する。図４は、映像効果レベルを下げる場合の調整手順を示すフローチャートである。
【００９６】
制御部３から映像効果レベルを下げるように指示を受けると、映像効果レベル調整部１４は映像効果レベルを下げる処理を開始する。上述したように、映像効果レベルを下げるために、映像効果レベル調整部１４は視聴者が視聴している映像コンテンツの各種パラメータ(奥行き量、輝度、色度、表示速度、表示サイズ、表示角度、光源の向き、または表面の反射等)を調整する。すべてのパラメータを調整することも可能であるし、任意のパラメータを調整するように設定することも可能である。以下では、５つのパラメータ(奥行き量、輝度、色度、表示速度、および表示サイズ)のうち、奥行き量および輝度を下げる場合を想定して説明する。
【００９７】
制御部３から映像効果レベルを下げる指示を受けると、映像効果レベル調整部１４は、視聴者が視聴している映像コンテンツの奥行き量を下げるので(ステップＳ２１，ＹＥＳ)、当該奥行き量を調整し(ステップＳ２２)、輝度についても下げるので(ステップＳ２３，ＹＥＳ)、当該輝度を調整する(ステップＳ２４)。続いて色度、表示速度、および表示サイズについては調整しないので、色度はそのままの色度を保ち(ステップＳ２５，ＮＯ)、表示速度についてもそのままの表示速度を保つ(ステップＳ２７，ＮＯ)。また、表示サイズについてもそのままの表示サイズを保ち(ステップＳ２９，ＮＯ)、各種パラメータの調整は終了する。このようにして映像効果レベルは調整される。なお、各種パラメータを調整した映像コンテンツのデータは再び制御部３に出力され、当該データを制御部３が再生部５に出力することによって、映像効果レベルが調整された映像コンテンツが視聴者に表示される。
【００９８】
以下では、視聴者の生体影響レベルが低レベルであり、映像効果レベルを上げる場合の調整手順について、図５のフローチャートに沿って説明する。図５は、映像効果レベルを上げる場合の調整手順を示すフローチャートである。
【００９９】
制御部３から映像効果レベルを上げるように指示を受けると、映像効果レベル調整部１４は映像効果レベルを上げる処理を開始するが、以下では、５つのパラメータ(奥行き量、輝度、色度、表示速度、および表示サイズ)のうち、奥行き量、表示速度、および表示サイズを上げる場合を想定して説明する。
【０１００】
制御部３から映像効果レベルを上げる指示を受けると、映像効果レベル調整部１４は、視聴者が視聴している映像コンテンツの奥行き量を上げるので(ステップＳ３１，ＹＥＳ)、当該奥行き量を調整する(ステップＳ３２)。次に輝度および色度については調整しないので、輝度はそのままの輝度を保ち(ステップＳ３３，ＮＯ)、色度についてもそのままの色度を保つ(ステップＳ３５，ＮＯ)。一方、表示速度は上げるので(ステップＳ３７，ＹＥＳ)、当該表示速度を調整する(ステップＳ３８)。同様に、表示サイズについても上げるので(ステップＳ３９，ＹＥＳ)、当該表示サイズを調整し(ステップＳ４０)、各種パラメータの調整は終了する。このようにして映像効果レベルを調整する。なお、各種パラメータを調整した映像コンテンツのデータは再び制御部３に出力され、当該データを制御部３が再生部５に出力することによって、映像効果レベルが調整された映像コンテンツが視聴者に表示される。
【０１０１】
以上では、映像効果レベルを下げるために奥行き量および輝度を下げる例を挙げたが、特にこれに限定されるわけではなく、他のパラメータも調整可能である。同様に、映像効果レベルを上げるために、奥行き量、表示速度、および表示サイズを調整する場合に限定されるわけではない。また、映像効果レベルを調整するために調整するパラメータは上記パラメータに限定されない。また、ある映像効果はレベルを上げて、それとは違う映像効果はレベルを下げるというような、組み合わせの調整があっても良い。
【０１０２】
上述したように、映像効果レベルを調整するためにすべてのパラメータを調整することも可能であるが、任意のパラメータを調整するように設定することも可能である。任意のパラメータを調整するように設定する場合には、映像コンテンツの映像効果レベル、または視聴者の生体情報(生体指標)等を考慮して決定することが可能である。あるいは、調整するパラメータを視聴者自身が決定しても良い。いずれの場合でも、生体影響レベルが低レベルまたは高レベルであった場合にどのパラメータを調整するのかを予め設定しておく必要がある。この場合、映像効果レベル調整部１４は、設定内容に基づいて各種パラメータの調整を行う。そのため、設定内容の情報が映像効果レベル調整部１４に出力されるような構成にすることが好ましい。
【０１０３】
また、上記映像効果レベルの調整は、３Ｄコンテンツを視聴する際に行うものであるため、視聴者が２次元映像コンテンツを視聴しているのか、あるいは３Ｄコンテンツを視聴しているのかを判断し、視聴しているのが３Ｄコンテンツであった場合に視聴者の生体情報の測定を開始するような構成にすると良い。
【０１０４】
３Ｄコンテンツの視聴のみではなく、２Ｄコンテンツを視聴中に視聴者の生体情報を測定し、当該２Ｄコンテンツに３Ｄ効果を付加しても良い。例えば、視聴者が２Ｄコンテンツを視聴中に生体情報を測定し、立体感、臨場感、および没入感が乏しく、明らかに視聴者が退屈している場合には、前述と同様の方法で２Ｄコンテンツに立体効果を付加することが効果的である。これにより、視聴者のコンテンツ視聴に対する満足度がアップする。この時付加する立体効果のレベルは、予め設定しておいたり、もしくは視聴者のニーズに対応させたり、あるいは、視聴中に視聴者の生体情報レベルに応じて、徐々にレベルを上げていったりしても良い。
【０１０５】
(映像表示装置４２の実施例)
図６に、本実施形態に係る映像表示装置４２の具体的な実施例を示す。図６(ａ)は、映像効果レベルの調整前の状態を示す図である。図６(ｂ)は、映像効果レベルの調整後の状態を示す図である。
【０１０６】
図６には、映像表示装置４２が指先から視聴者の生体情報を測定する指先用生体情報測定器４３を採用している例が示されている。図６(ａ)に示すように、視聴者には３次元表示の映像効果(立体感、臨場感、および没入感等)が高い３Ｄコンテンツが表示ディスプレイ４１において表示されている。この際、指先用生体情報測定器４３では、内部に備えた生体情報測定部１１が視聴者の指先から生体情報を測定している。そして、測定した生体情報に基づいて、映像表示装置４２内では、生体指標算出部１２、および生体影響レベル解析部１３によって、視聴者の現在の生体影響レベルが決定される。例えば、視聴者の生体影響レベルがグラフ１７のようであったとする。グラフ１７によると、視聴者の生体影響レベルは徐々に上昇しており、ボーダーライン(高レベル)に達している。その結果、映像表示装置４２では、表示ディスプレイ４１に表示されている３Ｄコンテンツの映像効果レベルを下げるように映像効果レベルの調整を行う。
【０１０７】
図６(ｂ)に示すように、映像効果レベルを下げた結果、視聴者には３次元表示の立体効果(立体感、臨場感、および没入感等)が低い３Ｄコンテンツが表示ディスプレイ４１において表示されている。この際、映像表示装置４２では、指先用生体情報測定器４３が視聴者の指先から生体情報を継続して測定しており、測定した生体情報に基づく視聴者の生体影響レベルはグラフ１８のようになる。グラフ１８によると、視聴者の生体影響レベルは、グラフ１７と比較して低下しており、ボーダーライン(高レベル)よりも低くなっている。このように、視聴者の生体影響レベルを逐次的に検出しているため、視聴者のリアルタイムの生体影響レベルに合わせた３Ｄコンテンツの映像効果レベルの調整が可能となる。
【０１０８】
視聴者の生体影響レベルとは、視聴者自身の主観的評価または自覚症状だけでは把握できない場合も多く、特に３Ｄコンテンツの視聴においては、視聴者が気付かないうちに生理的違和感を視聴者に与えてしまっている場合も多い。本実施形態によれば、視聴者個人のリアルタイムの生体影響レベルを把握することができるので、視聴者が過度な生理的違和感を感じている場合には３Ｄコンテンツの映像効果レベルを下げることが可能である。逆に、視聴者が十分な映像効果(立体効果)を感じていない場合には３Ｄコンテンツの映像効果レベルを上げることが可能である。このように、映像表示装置１５は、視聴者に合わせた最適な３Ｄコンテンツの表示を実現することができる。
【０１０９】
(プログラムおよび記録媒体)
最後に、映像表示装置１５に含まれている各部は、ハードウェアロジックによって構成すれば良い。または、次にように、ＣＰＵ(Computer Processing Unit)を用いてソフトウェアによって実現しても良い。
【０１１０】
すなわち、映像表示装置１５は、各機能を実現するプログラムの命令を実行するＣＰＵ、このプログラムを格納した、上記プログラムを実行可能な形式に展開するＲＡＭ(Random Access Memory)、および上記プログラムと各種データとを格納するメモリ等の記憶装置(記録媒体)ドライブを備えている。この構成により、本発明の目的は、所定の記録媒体によっても達成できる。
【０１１１】
この記録媒体は、上述した機能を実現するソフトウェアである映像表示装置１５のプログラムのプログラムコード(実効形式プログラム，中間コードプログラム，ソースプログラム)をコンピュータで読み取り可能に記録していれば良い。映像表示装置１５に、この記録媒体を供給する。これにより、コンピュータとしての映像表示装置１５(またはＣＰＵ、ＭＰＵ)が、供給された記録媒体に記録されているプログラムコードを読み出し、実行すれば良い。
【０１１２】
プログラムコードを映像表示装置１５に供給する記録媒体は、特定の構造または種類のものに限定されない。すなわちこの記録媒体は、例えば、磁気テープまたはカセットテープ等のテープ系、フロッピー(登録商標)ディスク／ハードディスク等の磁気ディスク、またはＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＢＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系等とすることができる。
【０１１３】
また、映像表示装置１５を通信ネットワークと接続可能に構成しても、本発明の目的を達成できる。この場合、上記のプログラムコードを、通信ネットワークを介して映像表示装置１５に供給する。この通信ネットワークは映像表示装置１５にプログラムコードを供給できるものであれば良く、特定の種類または形態に限定されない。例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、または衛星通信網等であれば良い。
【０１１４】
この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な任意の媒体であれば良く、特定の構成または種類のものに限定されない。例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、またはＡＤＳＬ(Asymmetric Digital Subscriber Line)回線等の有線でも、ＩｒＤＡまたはリモコン１のような赤外線、Ｂｌｕｅｔｏｏｔｈ(登録商標)、８０２．１１無線、ＨＤＲ、携帯電話網、衛星回線、または地上波デジタル網等の無線でも利用可能である。なお、本発明は上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【０１１５】
本発明は、上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明のご術的範囲に含まれる。
【産業上の利用可能性】
【０１１６】
本発明はゲームまたは映画等を始めとしたアミューズメントに利用する表示装置に適用可能である。
【符号の説明】
【０１１７】
１ リモートコントローラ
２ 入力部
３ 制御部
４ 映像コンテンツ格納部
５ 再生部
６ 映像部
７ 音声部
８ 出力部
９，４１ 表示ディスプレイ
１０ スピーカ
１１ 生体情報測定部
１２ 生体指標算出部
１３ 生体影響レベル解析部
１４ 映像効果レベル調整部
１５，４０，４２ 映像表示装置
１７，１８ グラフ
３８ 記録装置
３９ 再生装置
４３ 指先用生体情報測定器
【特許請求の範囲】
【請求項１】
３次元映像を３次元表示可能な映像表示装置において、
視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定する測定手段と、
上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定する解析手段と、
上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御する制御手段とを備えていることを特徴とする映像表示装置。
【請求項２】
上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出する算出手段をさらに備え、
上記解析手段は、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴とする請求項１に記載の映像表示装置。
【請求項３】
上記測定手段は、上記視聴者の指先から上記生体情報を測定することを特徴とする請求項１または２に記載の映像表示装置。
【請求項４】
上記生体情報は、脈波、心拍数、および血圧のうち、少なくともいずれかであることを特徴とする請求項１〜３のいずれか１項に記載の映像表示装置。
【請求項５】
上記生体指標は、心拍間隔変動係数、脈波の高周波数成分に対する上記脈波の中間周波数成分の比(ＬＦ／ＨＦ)、血圧と心拍数との最大相互相関係数(ρｍａｘ)、および加速度脈波のうち、少なくともいずれかであることを特徴とする請求項２に記載の映像表示装置。
【請求項６】
上記制御手段は、上記映像効果として上記３次元映像の奥行き量、輝度、色度、表示速度、表示サイズ、および表示角度のうち、少なくともいずれかを制御することを特徴とする請求項１〜５のいずれか１項に記載の映像表示装置。
【請求項７】
上記制御手段は、複数の上記映像効果を制御することを特徴とする請求項１〜６のいずれか１項に記載の映像表示装置。
【請求項８】
上記視聴者が２次元映像を視聴中に、
上記測定手段が、上記視聴者の上記生体情報を測定し、
上記解析手段が、上記生体情報を解析し、解析した結果に基づいて、上記生体影響度を決定すると、
上記制御手段が、上記生体影響度に基づいて、上記２次元映像に上記映像効果を付加し、当該２次元映像を上記３次元映像に変換することを特徴とする請求項１〜７のいずれか１項に記載の映像表示装置。
【請求項９】
上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を上げることを特徴とする請求項６に記載の映像表示装置。
【請求項１０】
上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を下げることを特徴とする請求項６に記載の映像表示装置。
【請求項１１】
上記生体影響度が予め定められた基準を超えると、上記３次元映像の表示を停止する制御手段をさらに備えていることを特徴とする請求項１〜１０のいずれか１項に記載の映像表示装置。
【請求項１２】
３次元映像を３次元表示する映像表示装置における映像表示制御方法であって、
視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定するステップと、
上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定するステップと、
上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御するステップとを備えていることを特徴とする映像表示制御方法。
【請求項１３】
上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出するステップをさらに備え、
上記生体影響度を決定するステップでは、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴とする請求項１２に記載の映像表示制御方法。
【請求項１４】
請求項１２または１３に記載の映像表示制御方法を動作させるプログラムであって、コンピュータを上記の各ステップとして実行させるためのプログラム。
【請求項１５】
請求項１４に記載のプログラムを記録しているコンピュータ読み取り可能な記録媒体。
【請求項１】
３次元映像を３次元表示可能な映像表示装置において、
視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定する測定手段と、
上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定する解析手段と、
上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御する制御手段とを備えていることを特徴とする映像表示装置。
【請求項２】
上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出する算出手段をさらに備え、
上記解析手段は、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴とする請求項１に記載の映像表示装置。
【請求項３】
上記測定手段は、上記視聴者の指先から上記生体情報を測定することを特徴とする請求項１または２に記載の映像表示装置。
【請求項４】
上記生体情報は、脈波、心拍数、および血圧のうち、少なくともいずれかであることを特徴とする請求項１〜３のいずれか１項に記載の映像表示装置。
【請求項５】
上記生体指標は、心拍間隔変動係数、脈波の高周波数成分に対する上記脈波の中間周波数成分の比(ＬＦ／ＨＦ)、血圧と心拍数との最大相互相関係数(ρｍａｘ)、および加速度脈波のうち、少なくともいずれかであることを特徴とする請求項２に記載の映像表示装置。
【請求項６】
上記制御手段は、上記映像効果として上記３次元映像の奥行き量、輝度、色度、表示速度、表示サイズ、および表示角度のうち、少なくともいずれかを制御することを特徴とする請求項１〜５のいずれか１項に記載の映像表示装置。
【請求項７】
上記制御手段は、複数の上記映像効果を制御することを特徴とする請求項１〜６のいずれか１項に記載の映像表示装置。
【請求項８】
上記視聴者が２次元映像を視聴中に、
上記測定手段が、上記視聴者の上記生体情報を測定し、
上記解析手段が、上記生体情報を解析し、解析した結果に基づいて、上記生体影響度を決定すると、
上記制御手段が、上記生体影響度に基づいて、上記２次元映像に上記映像効果を付加し、当該２次元映像を上記３次元映像に変換することを特徴とする請求項１〜７のいずれか１項に記載の映像表示装置。
【請求項９】
上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を上げることを特徴とする請求項６に記載の映像表示装置。
【請求項１０】
上記制御手段は、上記奥行き量、上記輝度、上記色度、上記表示速度、上記表示サイズ、および上記表示角度のうち、少なくともいずれかの程度を下げることを特徴とする請求項６に記載の映像表示装置。
【請求項１１】
上記生体影響度が予め定められた基準を超えると、上記３次元映像の表示を停止する制御手段をさらに備えていることを特徴とする請求項１〜１０のいずれか１項に記載の映像表示装置。
【請求項１２】
３次元映像を３次元表示する映像表示装置における映像表示制御方法であって、
視聴者が上記３次元映像を視聴中に、当該視聴者の生体に関わる情報である生体情報を測定するステップと、
上記生体情報を解析し、解析した結果に基づいて、上記３次元映像を視聴することによって上記視聴者の生体に与える影響の程度を示す生体影響度を決定するステップと、
上記生体影響度に基づいて、上記視聴者が視聴している上記３次元映像の映像効果を制御するステップとを備えていることを特徴とする映像表示制御方法。
【請求項１３】
上記生体情報に基づいて、上記生体に関わる指標である生体指標を算出するステップをさらに備え、
上記生体影響度を決定するステップでは、上記生体指標を解析し、解析した結果に基づいて上記生体影響度を決定することを特徴とする請求項１２に記載の映像表示制御方法。
【請求項１４】
請求項１２または１３に記載の映像表示制御方法を動作させるプログラムであって、コンピュータを上記の各ステップとして実行させるためのプログラム。
【請求項１５】
請求項１４に記載のプログラムを記録しているコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１１−２３４２３８（Ｐ２０１１−２３４２３８Ａ）
【公開日】平成２３年１１月１７日（２０１１．１１．１７）
【国際特許分類】
【出願番号】特願２０１０−１０４２７５（Ｐ２０１０−１０４２７５）
【出願日】平成２２年４月２８日（２０１０．４．２８）
【国等の委託研究の成果に係る記載事項】（出願人による申告）平成２１年度、独立行政法人情報通信研究機構「高度通信・放送研究開発委託研究／革新的な三次元映像技術による超臨場感コミュニケーション技術の研究開発」、産業技術力強化法第１９条の適用を受ける特許出願
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２３年１１月１７日（２０１１．１１．１７）
【国際特許分類】
【出願日】平成２２年４月２８日（２０１０．４．２８）
【国等の委託研究の成果に係る記載事項】（出願人による申告）平成２１年度、独立行政法人情報通信研究機構「高度通信・放送研究開発委託研究／革新的な三次元映像技術による超臨場感コミュニケーション技術の研究開発」、産業技術力強化法第１９条の適用を受ける特許出願
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]