映像受信装置及び表示装置
【課題】本線映像の臨場感を損なうことなく、本線映像及びマルチメディアデータを画面表示する。
【解決手段】映像受信装置２は表示装置２０及び表示装置３０を備える。表示装置２０は、映像送信装置１から放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離する。そして、映像音声を復号し本線映像を画面表示する。これにより、ユーザ４１に、臨場感を損なうことなく本線映像を視聴させることができる。また、表示装置２０は、分離したマルチメディアデータを送信する。表示装置３０は、表示装置２０に表示された本線映像を撮影すると共に、表示装置２０からマルチメディアデータを受信する。そして、本線映像及びマルチメディアデータを合成して画面表示する。これにより、ユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させることができる。
【解決手段】映像受信装置２は表示装置２０及び表示装置３０を備える。表示装置２０は、映像送信装置１から放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離する。そして、映像音声を復号し本線映像を画面表示する。これにより、ユーザ４１に、臨場感を損なうことなく本線映像を視聴させることができる。また、表示装置２０は、分離したマルチメディアデータを送信する。表示装置３０は、表示装置２０に表示された本線映像を撮影すると共に、表示装置２０からマルチメディアデータを受信する。そして、本線映像及びマルチメディアデータを合成して画面表示する。これにより、ユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させることができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像受信装置及び表示装置に関し、特に、映像音声及びマルチメディアデータが多重化され放送信号またはパケットとして送信されるデータ放送において、放送信号またはパケットを受信して映像音声及びマルチメディアデータに分離し、画面表示する技術に関する。
【背景技術】
【０００２】
従来、データ放送において、映像音声をユーザに視聴させながら、その映像音声に同期して、映像に関連する静止画、テキストデータ等のマルチメディアデータを表示するマルチメディアデータ放送技術が知られている（非特許文献１を参照）。映像受信装置は、マルチメディアデータを付加した状態で、映像音声の映像を本線映像として画面に表示することにより、ユーザに本線映像を視聴させると共に、映像に関連するマルチメディアデータを提示する。例えば、映像受信装置は、本線映像を縮小表示し、画面内の空いた箇所にマルチメディアデータを配置して表示したり、本線映像を通常サイズで表示し、その表示箇所にマルチメディアデータを被せて配置し、表示したりする。
【０００３】
本線映像を通常サイズで表示し、その表示箇所にマルチメディアデータを被せて配置し表示する映像合成装置が知られている（特許文献１を参照）。この映像合成装置は、複数の映像信号から選択した１つの映像信号とグラフィック画面とを合成し、画面表示するものである。具体的には、複数の映像信号から選択した１つの映像信号に対し、その映像信号がアナログであるかデジタルであるかに関係なく、１つの処理部において、グラフィック画面信号、またはグラフィック画面情報が重畳された信号を生成し、その信号を映像信号と合成し、合成信号を画面出力するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０００−２９５５２７号公報
【非特許文献】
【０００５】
【非特許文献１】「デジタル放送におけるデータ放送符号化方式と伝送方式」、ＡＲＩＢ ＳＴＤ−Ｂ２４、社団法人電波産業会
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示する手法では、本線映像のサイズが通常よりも小さくなってしまう。このため、本線映像に対する臨場感が損なわれてしまい、映像音声を視聴するユーザを満足させることができないという問題があった。また、この手法では、本線映像を縮小表示することによって、マルチメディアデータの表示領域を確保することができるが、その領域には制限がある。このため、本線映像に付加して表示するマルチメディアデータの情報量を増やすことができないという問題もあった。
【０００７】
一方、本線映像にマルチメディアデータを被せて表示する手法では、本線映像を通常のサイズで表示させることができる。しかしながら、この手法は本線映像を汚してしまうという欠点があり、ユーザは、マルチメディアデータが被さった状態で本線映像を視聴することになるから、本来の本線映像を視聴することができず、臨場感が損なわれてしまう。このため、本線映像を視聴するユーザを満足させることができないという問題があった。
【０００８】
また、通常のテレビ受像機においては、多人数で本線映像を視聴する場合が多い。本線映像を視聴するユーザは、本線映像を純粋に楽しみたいと要求するユーザと、本線映像を視聴しながらその映像に関連する情報等を取得するために、マルチメディアデータを見たいと要求するユーザとに分類することができる。前述した、マルチメディアデータを付加した状態で本線映像を画面表示する手法では、要求の異なる双方のユーザを満足させることが難しいという問題があった。そのため、次世代のデジタル放送において、本線映像の臨場感を損なうことなく、多くの情報量を持つマルチメディアデータを柔軟に表示させたいという要求があった。
【０００９】
そこで、本発明はかかる課題を解決するためになされたものであり、その目的は、本線映像の臨場感を損なうことなく、本線映像及びマルチメディアデータを画面表示可能な映像受信装置を提供することにある。また、前記映像受信装置に用いる表示装置を提供することにある。
【課題を解決するための手段】
【００１０】
前記課題を解決するため、本発明による映像受信装置は、映像音声及びマルチメディアデータが多重化された信号を受信し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面表示し、ユーザに視聴させる映像受信装置において、前記多重化された信号を受信し、映像音声及びマルチメディアデータにそれぞれ分離する受信器、前記受信器により分離された映像音声をデコードするデコーダ、前記受信器により分離されたマルチメディアデータを送信するマルチメディアデータ送信器、及び、前記デコーダにより復号された映像音声の映像を本線映像として画面表示し、第１のユーザに視聴させる本線映像用表示器を有する第１の表示装置と、前記マルチメディアデータ送信器により送信されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、前記本線映像用表示器により画面表示され第１のユーザに視聴される映像音声、及び前記マルチメディアデータ受信器により受信されたマルチメディアデータに対し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有する第２の表示装置と、を備えたことを特徴とする。
【００１１】
また、本発明による映像受信装置は、前記第２の表示装置が、前記マルチメディアデータ受信器、前記本線映像用表示器により画面表示された本線映像を撮影する映像取込器、前記マルチメディアデータ受信器により受信されたマルチメディアデータと、前記映像取込器により撮影された本線映像とを合成する映像合成器、及び、前記映像合成器により合成された映像を画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【００１２】
また、本発明による映像受信装置は、前記第２の表示装置が、前記マルチメディアデータ受信器、及び、前記本線映像用表示器により画面表示された本線映像を透過し、前記マルチメディアデータ受信器により受信されたマルチメディアデータを所定箇所に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【００１３】
また、本発明による映像受信装置は、前記第２の表示装置を、前記第２のユーザが装着する眼鏡とし、前記眼鏡が、前記マルチメディアデータ受信器、前記本線映像用表示器により画面表示された本線映像を透過するレンズ、及び、前記本線映像及びマルチメディアデータ用表示器の代わりに、前記マルチメディアデータ受信器により受信されたマルチメディアデータを前記レンズの所定箇所に表示する表示器を有することを特徴とする。
【００１４】
また、本発明による表示装置は、映像音声及びマルチメディアデータが多重化された信号を受信し、前記多重化された信号を映像音声及びマルチメディアデータに分離し、前記映像音声をデコードして本線映像を画面表示し、第１のユーザに視聴させる第１の表示装置と、前記本線映像を前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる第２の表示装置とを備えた映像受信装置における前記第２の表示装置であって、前記第１の表示装置により分離されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、前記第１の表示装置により画面表示された本線映像を入力し、前記マルチメディアデータ受信器により受信されたマルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【発明の効果】
【００１５】
以上のように、本発明によれば、本線映像の臨場感を損なうことなく、本線映像及びマルチメディアデータを画面表示することができる。したがって、本線映像を視聴したいユーザ、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザに対し、双方の要求を満足させることが可能となる。
【００１６】
また、映像受信装置における第１の表示装置が、受信した多重化信号をマルチメディアデータに分離して送信し、第２の表示装置が、第１の表示装置により送信されたマルチメディアデータを受信するようにした。これにより、第２の表示装置は、多重化信号をマルチメディアデータに分離する必要がないから、処理負荷を削減し、小型化を実現することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施形態による映像受信装置へ放送信号またはＩＰパケットを送信する映像送信装置の構成を示すブロック図である。
【図２】本発明の実施形態による映像受信装置の構成を示すブロック図である。
【図３】本線映像が表示される画面を説明する図である。
【図４】本線映像及びマルチメディアデータが表示される画面を説明する図である。
【図５】映像受信装置に備えた本線映像用の表示装置の構成を示すブロック図である。
【図６】映像受信装置に備えた、本発明の第１の実施形態（実施例１）による本線映像及びマルチメディアデータ用の表示装置の構成を示すブロック図である。
【図７】映像受信装置に備えた、本発明の第２の実施形態（実施例２）による本線映像及びマルチメディアデータ用の表示装置の構成を示すブロック図である。
【図８】実施例２の本線映像及びマルチメディアデータ用の表示装置を眼鏡に適用した場合の構成を示す図である。
【発明を実施するための形態】
【００１８】
以下、本発明を実施するための形態について図面を用いて詳細に説明する。本発明の実施形態による映像受信装置は、２台の表示装置を備えている。第１の表示装置は、映像送信装置により映像音声及びマルチメディアデータが多重化され送信された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータを分離する。そして、第１の表示装置は、映像音声の映像を本線映像として表示する。一方、第２の表示装置は、第１の表示装置により分離された映像音声及びマルチメディアデータを入力し、これらを合成して映像音声の映像を本線映像とし、マルチメディアデータと共に表示する。
【００１９】
これにより、本線映像の視聴を希望するユーザは、第１の表示装置により、臨場感を損なうことなく本線映像を視聴することができる。また、マルチメディアデータが付加された状態で本線映像を視聴したいユーザは、第２の表示装置により、本線映像を視聴しながらマルチメディアデータを取得することができる。したがって、本発明の実施形態による映像受信装置を用いることにより、前述したユーザ双方の要求を満足させることが可能となる。
【００２０】
〔映像送信装置〕
まず、本発明の実施形態による映像受信装置へ、映像音声及びマルチメディアデータを多重化して放送信号またはＩＰパケットを送信する映像送信装置について説明する。図１は、映像送信装置の構成を示すブロック図である。この映像送信装置１は、エンコーダ１１、多重化器１２及び変調器／ＩＰインタフェース１３を備えている。
【００２１】
映像音声は、映像信号及び音声信号からなり、映像信号を本線映像としてユーザに提示することができる。また、マルチメディアデータは、本線映像に関連する情報、または、ニュース、天気等の本線映像に関連しない情報であり、例えば、静止画データ、テキストデータ、簡易動画データである。マルチメディアデータには、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）等の符号化データに変換した状態、ＶＲＭＬ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ Ｍｏｄｅｌｉｎｇ Ｌａｎｇｕａｇｅ）、Ｊａｖａ（登録商標）等のプログラム言語の状態、及びこれらを実行形式ファイルとした状態のデータも含まれる。
【００２２】
エンコーダ１１は、映像音声を入力し、映像音声を符号化する。符号化方式としては、例えば、ＭＰＥＧ−２またはＨ．２６４／ＡＶＣが用いられる。多重化器１２は、エンコーダ１１により符号化された映像音声を入力すると共に、マルチメディアデータを入力し、映像音声及びマルチメディアデータをＭＰＥＧ−２ ＴＳ Ｓｙｓｔｅｍｓ等により多重化する。
【００２３】
変調器／ＩＰインタフェース１３は、多重化器１２により多重化された映像音声及びマルチメディアデータの多重化信号を入力する。映像送信装置１と映像受信装置との間が放送網である場合、変調器が用いられ、映像送信装置１と映像受信装置との間がインターネット等の通信網である場合、ＩＰインタフェースが用いられる。変調器は、入力した多重化信号を高周波帯の信号に変調し、放送信号として放送網へ送信する。ＩＰインタフェースは、入力した多重化信号のデータをＩＰパケットに収容し、ＩＰプロトコルを用いて送信先の映像受信装置へ通信網を介して送信する。
【００２４】
このように、映像送信装置１は、映像音声及びマルチメディアデータを多重化して放送信号を放送網へ送信し、またはＩＰパケットを通信網へ送信する。これにより、映像受信装置は、映像送信装置１により映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを、放送網または通信網を介して受信することができる。
【００２５】
〔映像受信装置〕
次に、本発明の実施形態による映像受信装置について説明する。図２は、映像受信装置の構成を示すブロック図である。この映像受信装置２は、表示装置２０及び表示装置３０を備えている。
【００２６】
映像受信装置２の表示装置２０は、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離し、映像音声の映像を本線映像として画面表示する。これにより、ユーザ４１は、本線映像を視聴することができる。また、表示装置２０は、マルチメディアデータを表示装置３０へ送信する。これにより、表示装置３０は、マルチメディアデータを受信し画面表示することができる。
【００２７】
図３は、図２に示した表示装置２０により本線映像が表示される画面を説明する図である。図３に示すように、表示装置２０（に備えた後述する表示器２３）には、従来のテレビ受像機と同様に、映像音声の映像が本線映像として表示され、音声が出力される。これにより、本線映像の視聴Ａを希望するユーザ４１は、大画面により臨場感を損なうことなく、本線映像を楽しむことができる。
【００２８】
図２に戻って、表示装置３０は、表示装置２０からマルチメディアデータを受信し、表示装置２０により画面表示された本線映像と共にマルチメディアデータを画面表示する。これにより、ユーザ４２は、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００２９】
図４は、図２に示した表示装置３０により本線映像及びマルチメディアデータが表示される画面を説明する図である。図４に示すように、表示装置３０（に備えた後述する表示器３４）には、画面中央に、表示装置２０（に備えた後述する表示器２３）における本線映像が表示され、その両側にマルチメディアデータが表示され、本線映像の音声が出力される。これにより、ユーザ４２は、従来のテレビ受像機に表示される本線映像に加えて、マルチメディアデータを取得することができる。尚、ユーザが本線映像のみを視聴したい場合は、表示装置２０により、図３に示した本線映像を視聴すればよい。また、マルチメディアデータが付加された状態で本線映像を視聴したい場合は、表示装置３０により、マルチメディアデータを見ながら本線映像を視聴すればよい。したがって、複数のユーザが１台の映像受信装置２を用いて視聴を行う場合であっても、個々のユーザの要求に応じた視聴を実現することができる。また、ユーザは、その要求に応じて表示装置２０または表示装置３０の画面を見ればよいから、表示装置３０は、本線映像の表示領域を狭く配置し、マルチメディアデータの表示領域を広く配置することができる。つまり、表示装置３０は、表示すべきマルチメディアデータの情報量に応じて、本線映像の表示領域及びマルチメディアデータの表示領域を設定することにより、情報量に応じたマルチメディアデータを柔軟に表示することができる。
【００３０】
このように、映像受信装置２は、映像送信装置１から、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、表示装置２０が本線映像を画面表示することにより、ユーザ４１に本線映像を視聴させる。また、表示装置３０が本線映像及びマルチメディアデータを画面表示することにより、ユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させる。これにより、本線映像を視聴したいユーザ４１、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザ４２に対し、双方の要求を満足させることが可能となる。
【００３１】
（第１の表示装置）
次に、図２に示した本線映像用の表示装置２０（第１の表示装置）について説明する。図５は、表示装置２０の構成を示すブロック図である。この表示装置２０は、復調器／ＩＰインタフェース２１、デコーダ２２、表示器２３及びマルチメディアデータ送信器２４を備えている。
【００３２】
表示装置２０の復調器／ＩＰインタフェース２１は、映像送信装置１により映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを、放送網または通信網を介して受信する。映像送信装置１と映像受信装置２との間が放送網である場合、復調器が用いられ、映像送信装置１と映像受信装置２との間がインターネット等の通信網である場合、ＩＰインタフェースが用いられる。復調器は、放送信号を受信し、放送信号である高周波帯の信号を復調して元の多重化信号を生成し、映像音声及びマルチメディアデータに分離する。ＩＰインタフェースは、ＩＰプロトコルを用いてＩＰパケットを受信し、ＩＰパケットに収容されている多重化信号のデータを抽出し、映像音声及びマルチメディアデータに分離する。
【００３３】
デコーダ２２は、復調器／ＩＰインタフェース２１により分離されたデジタルの映像音声を入力し、デジタルの映像音声を復号し、アナログのベースバンド信号による映像音声を生成する。表示器２３は、デコーダ２２により復号された映像音声を入力し、図３に示したように、本線映像を表示する。これにより、ユーザ４１は、表示器２３の画面から放出される光信号、及び図示しないスピーカからの音声出力により、本線映像を視聴することができる。
【００３４】
マルチメディアデータ送信器２４は、復調器／ＩＰインタフェース２１により分離されたマルチメディアデータを入力し、マルチメディアデータを有線信号または無線信号として表示装置３０へ送信する。表示装置２０と表示装置３０との間が有線により接続される場合、マルチメディアデータ送信器２４は、有線信号のマルチメディアデータを送信する。表示装置２０と表示装置３０との間が無線により接続される場合、マルチメディアデータ送信器２４は、例えばＢｌｕｅｔｏｏｔｈ等の無線方式を用いて、無線信号のマルチメディアデータを送信する。これにより、表示装置３０は、表示装置２０から有線信号または無線信号のマルチメディアデータを受信することができる。
【００３５】
このように、映像受信装置２の表示装置２０は、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離する。そして、表示装置２０は、分離した映像音声の映像を本線映像として画面表示し、分離したマルチメディアデータを表示装置３０へ送信する。これにより、ユーザ４１は本線映像を視聴することができる。また、表示装置３０は、マルチメディアデータを受信して画面表示することができる。
【００３６】
（第２の表示装置）
次に、図２に示した本線映像及びマルチメディアデータ用の表示装置３０（第２の表示装置）について説明する。この本発明の実施形態による表示装置３０には２つの実施例がある。実施例１の表示装置３０（３０−１）は、表示装置２０に表示された本線映像の再撮（再度の撮影）を行い、本線映像及びマルチメディアデータを合成して表示するものである。実施例２の表示装置３０（３０−２）は、表示装置２０に表示された本線映像の再撮を行うことなく、表示装置２０により表示された本線映像をそのまま用いると共に、マルチメディアデータも表示するものである。以下、実施例１の表示装置３０−１及び実施例２の表示装置３０−２についてそれぞれ説明する。
【００３７】
（第２の表示装置／実施例１）
まず、実施例１の表示装置３０−１について説明する。図６は、実施例１の表示装置３０−１の構成を示すブロック図である。この表示装置３０−１は、表示装置２０に表示された本線映像の再撮を行うものであり、映像取込器３１、マルチメディアデータ受信器３２、映像合成器３３及び表示器３４を備えている。
【００３８】
表示装置３０−１の映像取込器３１は、例えばカメラであり、表示装置２０の表示器２３に表示された本線映像を撮影する。すなわち、映像取込器３１は、光信号の本線映像を取り込み、本線映像を取得する。
【００３９】
マルチメディアデータ受信器３２は、表示装置２０から有線信号または無線信号のマルチメディアデータを受信する。表示装置２０と表示装置３０との間が有線により接続される場合、マルチメディアデータ受信器３２は、有線信号のマルチメディアデータを受信する。表示装置２０と表示装置３０との間が無線により接続される場合、マルチメディアデータ受信器３２は、無線信号のマルチメディアデータを受信する。
【００４０】
映像合成器３３は、映像取込器３１により取り込まれた本線映像を入力すると共に、マルチメディアデータ受信器３２からマルチメディアデータを入力し、本線映像とマルチメディアデータとの映像合成を行い、図４に示したような合成映像を表示器３４に出力する。尚、合成映像は、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような映像でもよいし、本線映像にマルチメディアデータを被せて表示するような映像でもよい。ここで、合成映像が、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような映像の場合、映像合成器３３は、マルチメディアデータの情報量を算出し、その情報量に応じたマルチメディアデータの表示領域を設定し、本線映像の表示領域を設定する。すなわち、マルチメディアデータの情報量が所定量を超える場合、マルチメディアデータの表示領域が所定値よりも広くなるように領域を確保する。一方、マルチメディアデータの情報量が所定量以下の場合、マルチメディアデータの表示領域が所定値よりも狭くなるように領域を確保する。本線映像の表示領域は、マルチメディアデータの表示領域の広さに応じて設定される。
【００４１】
また、本線映像とマルチメディアデータとの映像合成処理には、例えばＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ：拡張現実）の技術が用いられる。ＡＲとは、現実映像に対してコンピュータ・グラフィックスによる映像をリアルタイムで現実映像の動きに合わせて合成し、現実映像内の各物体に関連する視覚情報をアノテーション情報として付け加える技術である。映像合成器３３は、マルチメディアデータをアノテーション情報として扱い、ＡＲの技術によって、本線映像にマルチメディアデータを付加して合成映像を生成する。
【００４２】
表示器３４は、映像合成器３３により生成された合成映像を入力し、図４に示したように、本線映像及びマルチメディアデータを表示する。尚、表示装置３０−１は、表示装置２０から音声出力の信号を入力し、スピーカから出力する。これにより、ユーザ４２は、表示器２３の画面から放出される光信号、及び、表示装置２０からの音声出力、または表示装置２０から音声出力の信号を入力して図示しないスピーカからの音声出力により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００４３】
このように、映像受信装置２における実施例１の表示装置３０−１は、表示装置２０に表示された本線映像の再撮を行うと共に、表示装置２０からマルチメディアデータを受信し、本線映像とマルチメディアデータとを合成し、合成映像を画面表示する。これにより、ユーザ４２はマルチメディアデータが付加された本線映像を視聴することができる。
【００４４】
表示装置３０−１の例として、携帯電話機、インターネットを用いたカメラ及びパーソナルコンピュータが挙げられる。携帯電話機の場合、映像取込器３１に相当する内蔵カメラによって本線映像を撮影し、本線映像にマルチメディアデータを付加して画面表示する。また、インターネットを用いたカメラ及びパーソナルコンピュータの場合、映像取込器３１に相当するカメラによって本線映像を撮影し、インターネットを介して送信された本線映像を、マルチメディアデータと共にパーソナルコンピュータに画面表示する。
【００４５】
（第２の表示装置／実施例２）
次に、実施例２の表示装置３０−２について説明する。図７は、実施例２の表示装置３０−２の構成を示すブロック図である。この表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行わないで光信号の本線映像を透過させるものであり、マルチメディアデータ受信器３２及び表示器３５を備えている。
【００４６】
実施例２の表示装置３０−２と図６に示した実施例１の表示装置３０−１とを比較すると、実施例２の表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行うカメラ等の映像取込器３１、及び、本線映像とマルチメディアデータとを合成して合成映像を生成する映像合成器３３を備えていない点で、実施例１の表示装置３０−１と相違する。また、実施例２の表示装置３０−２は、表示装置２０に表示された光信号の本線映像を透過させる表示器３５を備えている点で、実施例１の表示装置３０−１と相違する。
【００４７】
表示装置３０−２のマルチメディアデータ受信器３２は、実施例１と同様に、表示装置２０から有線信号または無線信号のマルチメディアデータを受信する。マルチメディアデータ受信器３２により受信されたマルチメディアデータは、表示器３５に出力される。
【００４８】
表示器３５は、表示装置２０の表示器２３に表示された光信号の本線映像を取り込んで透過させると共に、マルチメディアデータ受信器３２からマルチメディアデータを入力する。表示器３５は、例えば、光信号の本線映像を透過させるガラスを有しており、ガラスの一部にプリズム及びホログラム素子、または液晶ディスプレイが設けられている。表示器３５は、入力したマルチメディアデータをガラスの一部に表示する。これにより、ユーザ４２は、表示器３５により透過された本線映像、及び表示器３５の表示領域の一部に表示されたマルチメディアデータを見ることができ、本線映像とマルチメディアデータとの合成映像として見ることができる。したがって、ユーザ４２は、表示装置２０からの音声出力、または表示装置２０から音声出力の信号を入力して図示しないスピーカからの音声出力により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００４９】
このように、映像受信装置２における実施例２の表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行うことなく光信号の本線映像を透過させ、表示装置２０からマルチメディアデータを受信し、表示領域の一部にマルチメディアデータを画面表示する。これにより、ユーザ４２はマルチメディアデータが付加された状態で本線映像を視聴することができる。また、実施例２の表示装置３０−２は、本線映像の再撮を行い再表示する実施例１の表示装置３０−１に比べ、品質の高い本線映像を画面表示することができる。
【００５０】
次に、実施例２の表示装置３０−２について、具体的な例を挙げて説明する。図８は、実施例２の表示装置３０−２を眼鏡に適用した場合の構成を示す図である。この眼鏡は、レンズ３６、テンプル及び鼻当てからなる通常の構成に加え、マルチメディアデータ受信器３２、プリズム３７、ホログラム素子３８、及び、表示器３５における制御部を備えている。表示器３５は、右側レンズ３６Ｒ、左側レンズ３６Ｌ及び制御部（図８では、マルチメディアデータ受信器３２と一体に形成されている。）を備えており、右側レンズ３６Ｒの一部にはプリズム３７及びホログラム素子３８が設けられている。
【００５１】
ユーザ４２は、この眼鏡を装着し、表示装置２０に表示された本線映像を視聴するものとする。レンズ３６Ｒ，３６Ｌは、表示装置２０からの光信号の本線映像を透過し、眼鏡を装着しているユーザ４２の眼に入射させる。
【００５２】
マルチメディアデータ受信器３２は、表示装置２０（図示せず）から無線信号のマルチメディアデータを受信する。表示器３５の制御部は、マルチメディアデータ受信器３２からマルチメディアデータを入力し、マルチメディアデータを表示するための光信号をプリズム３７に放出する。プリズム３７は、制御部からの光信号を内部に導き入れ、壁面に反射させながらホログラム素子３８に導く。ホログラム素子３８は、導かれた光信号を回折させ、眼鏡を装着しているユーザ４２の眼に入射させる。
【００５３】
これにより、ユーザ４２は、眼鏡の右側レンズ３６Ｒに備えたホログラム素子３８により、マルチメディアデータを見ることができる。したがって、ユーザ４２は、眼鏡により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００５４】
以上のように、本発明の実施形態による映像受信装置２によれば、映像送信装置１から、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、表示装置２０が本線映像を画面表示するようにした。これにより、ユーザ４１に本線映像を視聴させることができる。また、表示装置３０が本線映像及びマルチメディアデータを画面表示するようにした。これにより、表示装置２０のユーザ４１とは異なるユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させることができる。したがって、多数のユーザ４１，４２が本線映像を視聴する場合に、本線映像を視聴したいユーザ４１、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザ４２に対し、双方の要求を満足させることが可能となる。
【００５５】
また、映像受信装置２の表示装置２０は、映像送信装置１から放送信号またはＩＰパケットを受信し、放送信号またはＩＰパケットを映像音声及びマルチメディアデータに分離し、マルチメディアデータを表示装置３０へ送信するようにした。そして、表示装置３０は、表示装置２０により分離されたマルチメディアデータを受信し、画面表示するようにした。これにより、表示装置３０は、マルチメディアデータを取得するために、映像送信装置１から放送信号またはＩＰパケットを受信して映像音声及びマルチメディアデータに分離する必要がなく、表示装置２０により送信されたマルチメディアデータを受信すれば済むようになる。したがって、表示装置３０の処理負荷が低減し、小型化を実現することができる。
【００５６】
映像受信装置２の表示装置３０−１は、映像合成器３３において、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような合成映像を生成する場合、マルチメディアデータの情報量に応じてマルチメディアデータの表示領域を設定し、マルチメディアデータの表示領域の広さに応じて本線映像の表示領域を設定するようにした。これにより、映像受信装置２の表示装置３０−１は、情報量に応じたマルチメディアデータを柔軟に表示することができる。また、ユーザは、臨場感のある本線映像を視聴したい場合は表示装置２０を見ればよく、マルチメディアデータを見たい場合は表示装置３０−１を見ればよいから、表示装置３０−１における本線映像の表示領域が狭くても、ユーザの要求には直接影響することなく、情報量に応じたマルチメディアデータを見ることができる。
【符号の説明】
【００５７】
１ 映像送信装置
２ 映像受信装置
１１ エンコーダ
１２ 多重化器
１３ 変調器／ＩＰインタフェース
２０，３０ 表示装置
２１ 復調器／ＩＰインタフェース
２２ デコーダ
２３，３４，３５ 表示器
２４ マルチメディアデータ送信器
３１ 映像取込器
３２ マルチメディアデータ受信器
３３ 映像合成器
３６ レンズ
３７ プリズム
３８ ホログラム素子
４１，４２ ユーザ
【技術分野】
【０００１】
本発明は、映像受信装置及び表示装置に関し、特に、映像音声及びマルチメディアデータが多重化され放送信号またはパケットとして送信されるデータ放送において、放送信号またはパケットを受信して映像音声及びマルチメディアデータに分離し、画面表示する技術に関する。
【背景技術】
【０００２】
従来、データ放送において、映像音声をユーザに視聴させながら、その映像音声に同期して、映像に関連する静止画、テキストデータ等のマルチメディアデータを表示するマルチメディアデータ放送技術が知られている（非特許文献１を参照）。映像受信装置は、マルチメディアデータを付加した状態で、映像音声の映像を本線映像として画面に表示することにより、ユーザに本線映像を視聴させると共に、映像に関連するマルチメディアデータを提示する。例えば、映像受信装置は、本線映像を縮小表示し、画面内の空いた箇所にマルチメディアデータを配置して表示したり、本線映像を通常サイズで表示し、その表示箇所にマルチメディアデータを被せて配置し、表示したりする。
【０００３】
本線映像を通常サイズで表示し、その表示箇所にマルチメディアデータを被せて配置し表示する映像合成装置が知られている（特許文献１を参照）。この映像合成装置は、複数の映像信号から選択した１つの映像信号とグラフィック画面とを合成し、画面表示するものである。具体的には、複数の映像信号から選択した１つの映像信号に対し、その映像信号がアナログであるかデジタルであるかに関係なく、１つの処理部において、グラフィック画面信号、またはグラフィック画面情報が重畳された信号を生成し、その信号を映像信号と合成し、合成信号を画面出力するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０００−２９５５２７号公報
【非特許文献】
【０００５】
【非特許文献１】「デジタル放送におけるデータ放送符号化方式と伝送方式」、ＡＲＩＢ ＳＴＤ−Ｂ２４、社団法人電波産業会
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示する手法では、本線映像のサイズが通常よりも小さくなってしまう。このため、本線映像に対する臨場感が損なわれてしまい、映像音声を視聴するユーザを満足させることができないという問題があった。また、この手法では、本線映像を縮小表示することによって、マルチメディアデータの表示領域を確保することができるが、その領域には制限がある。このため、本線映像に付加して表示するマルチメディアデータの情報量を増やすことができないという問題もあった。
【０００７】
一方、本線映像にマルチメディアデータを被せて表示する手法では、本線映像を通常のサイズで表示させることができる。しかしながら、この手法は本線映像を汚してしまうという欠点があり、ユーザは、マルチメディアデータが被さった状態で本線映像を視聴することになるから、本来の本線映像を視聴することができず、臨場感が損なわれてしまう。このため、本線映像を視聴するユーザを満足させることができないという問題があった。
【０００８】
また、通常のテレビ受像機においては、多人数で本線映像を視聴する場合が多い。本線映像を視聴するユーザは、本線映像を純粋に楽しみたいと要求するユーザと、本線映像を視聴しながらその映像に関連する情報等を取得するために、マルチメディアデータを見たいと要求するユーザとに分類することができる。前述した、マルチメディアデータを付加した状態で本線映像を画面表示する手法では、要求の異なる双方のユーザを満足させることが難しいという問題があった。そのため、次世代のデジタル放送において、本線映像の臨場感を損なうことなく、多くの情報量を持つマルチメディアデータを柔軟に表示させたいという要求があった。
【０００９】
そこで、本発明はかかる課題を解決するためになされたものであり、その目的は、本線映像の臨場感を損なうことなく、本線映像及びマルチメディアデータを画面表示可能な映像受信装置を提供することにある。また、前記映像受信装置に用いる表示装置を提供することにある。
【課題を解決するための手段】
【００１０】
前記課題を解決するため、本発明による映像受信装置は、映像音声及びマルチメディアデータが多重化された信号を受信し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面表示し、ユーザに視聴させる映像受信装置において、前記多重化された信号を受信し、映像音声及びマルチメディアデータにそれぞれ分離する受信器、前記受信器により分離された映像音声をデコードするデコーダ、前記受信器により分離されたマルチメディアデータを送信するマルチメディアデータ送信器、及び、前記デコーダにより復号された映像音声の映像を本線映像として画面表示し、第１のユーザに視聴させる本線映像用表示器を有する第１の表示装置と、前記マルチメディアデータ送信器により送信されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、前記本線映像用表示器により画面表示され第１のユーザに視聴される映像音声、及び前記マルチメディアデータ受信器により受信されたマルチメディアデータに対し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有する第２の表示装置と、を備えたことを特徴とする。
【００１１】
また、本発明による映像受信装置は、前記第２の表示装置が、前記マルチメディアデータ受信器、前記本線映像用表示器により画面表示された本線映像を撮影する映像取込器、前記マルチメディアデータ受信器により受信されたマルチメディアデータと、前記映像取込器により撮影された本線映像とを合成する映像合成器、及び、前記映像合成器により合成された映像を画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【００１２】
また、本発明による映像受信装置は、前記第２の表示装置が、前記マルチメディアデータ受信器、及び、前記本線映像用表示器により画面表示された本線映像を透過し、前記マルチメディアデータ受信器により受信されたマルチメディアデータを所定箇所に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【００１３】
また、本発明による映像受信装置は、前記第２の表示装置を、前記第２のユーザが装着する眼鏡とし、前記眼鏡が、前記マルチメディアデータ受信器、前記本線映像用表示器により画面表示された本線映像を透過するレンズ、及び、前記本線映像及びマルチメディアデータ用表示器の代わりに、前記マルチメディアデータ受信器により受信されたマルチメディアデータを前記レンズの所定箇所に表示する表示器を有することを特徴とする。
【００１４】
また、本発明による表示装置は、映像音声及びマルチメディアデータが多重化された信号を受信し、前記多重化された信号を映像音声及びマルチメディアデータに分離し、前記映像音声をデコードして本線映像を画面表示し、第１のユーザに視聴させる第１の表示装置と、前記本線映像を前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる第２の表示装置とを備えた映像受信装置における前記第２の表示装置であって、前記第１の表示装置により分離されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、前記第１の表示装置により画面表示された本線映像を入力し、前記マルチメディアデータ受信器により受信されたマルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする。
【発明の効果】
【００１５】
以上のように、本発明によれば、本線映像の臨場感を損なうことなく、本線映像及びマルチメディアデータを画面表示することができる。したがって、本線映像を視聴したいユーザ、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザに対し、双方の要求を満足させることが可能となる。
【００１６】
また、映像受信装置における第１の表示装置が、受信した多重化信号をマルチメディアデータに分離して送信し、第２の表示装置が、第１の表示装置により送信されたマルチメディアデータを受信するようにした。これにより、第２の表示装置は、多重化信号をマルチメディアデータに分離する必要がないから、処理負荷を削減し、小型化を実現することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施形態による映像受信装置へ放送信号またはＩＰパケットを送信する映像送信装置の構成を示すブロック図である。
【図２】本発明の実施形態による映像受信装置の構成を示すブロック図である。
【図３】本線映像が表示される画面を説明する図である。
【図４】本線映像及びマルチメディアデータが表示される画面を説明する図である。
【図５】映像受信装置に備えた本線映像用の表示装置の構成を示すブロック図である。
【図６】映像受信装置に備えた、本発明の第１の実施形態（実施例１）による本線映像及びマルチメディアデータ用の表示装置の構成を示すブロック図である。
【図７】映像受信装置に備えた、本発明の第２の実施形態（実施例２）による本線映像及びマルチメディアデータ用の表示装置の構成を示すブロック図である。
【図８】実施例２の本線映像及びマルチメディアデータ用の表示装置を眼鏡に適用した場合の構成を示す図である。
【発明を実施するための形態】
【００１８】
以下、本発明を実施するための形態について図面を用いて詳細に説明する。本発明の実施形態による映像受信装置は、２台の表示装置を備えている。第１の表示装置は、映像送信装置により映像音声及びマルチメディアデータが多重化され送信された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータを分離する。そして、第１の表示装置は、映像音声の映像を本線映像として表示する。一方、第２の表示装置は、第１の表示装置により分離された映像音声及びマルチメディアデータを入力し、これらを合成して映像音声の映像を本線映像とし、マルチメディアデータと共に表示する。
【００１９】
これにより、本線映像の視聴を希望するユーザは、第１の表示装置により、臨場感を損なうことなく本線映像を視聴することができる。また、マルチメディアデータが付加された状態で本線映像を視聴したいユーザは、第２の表示装置により、本線映像を視聴しながらマルチメディアデータを取得することができる。したがって、本発明の実施形態による映像受信装置を用いることにより、前述したユーザ双方の要求を満足させることが可能となる。
【００２０】
〔映像送信装置〕
まず、本発明の実施形態による映像受信装置へ、映像音声及びマルチメディアデータを多重化して放送信号またはＩＰパケットを送信する映像送信装置について説明する。図１は、映像送信装置の構成を示すブロック図である。この映像送信装置１は、エンコーダ１１、多重化器１２及び変調器／ＩＰインタフェース１３を備えている。
【００２１】
映像音声は、映像信号及び音声信号からなり、映像信号を本線映像としてユーザに提示することができる。また、マルチメディアデータは、本線映像に関連する情報、または、ニュース、天気等の本線映像に関連しない情報であり、例えば、静止画データ、テキストデータ、簡易動画データである。マルチメディアデータには、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）等の符号化データに変換した状態、ＶＲＭＬ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ Ｍｏｄｅｌｉｎｇ Ｌａｎｇｕａｇｅ）、Ｊａｖａ（登録商標）等のプログラム言語の状態、及びこれらを実行形式ファイルとした状態のデータも含まれる。
【００２２】
エンコーダ１１は、映像音声を入力し、映像音声を符号化する。符号化方式としては、例えば、ＭＰＥＧ−２またはＨ．２６４／ＡＶＣが用いられる。多重化器１２は、エンコーダ１１により符号化された映像音声を入力すると共に、マルチメディアデータを入力し、映像音声及びマルチメディアデータをＭＰＥＧ−２ ＴＳ Ｓｙｓｔｅｍｓ等により多重化する。
【００２３】
変調器／ＩＰインタフェース１３は、多重化器１２により多重化された映像音声及びマルチメディアデータの多重化信号を入力する。映像送信装置１と映像受信装置との間が放送網である場合、変調器が用いられ、映像送信装置１と映像受信装置との間がインターネット等の通信網である場合、ＩＰインタフェースが用いられる。変調器は、入力した多重化信号を高周波帯の信号に変調し、放送信号として放送網へ送信する。ＩＰインタフェースは、入力した多重化信号のデータをＩＰパケットに収容し、ＩＰプロトコルを用いて送信先の映像受信装置へ通信網を介して送信する。
【００２４】
このように、映像送信装置１は、映像音声及びマルチメディアデータを多重化して放送信号を放送網へ送信し、またはＩＰパケットを通信網へ送信する。これにより、映像受信装置は、映像送信装置１により映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを、放送網または通信網を介して受信することができる。
【００２５】
〔映像受信装置〕
次に、本発明の実施形態による映像受信装置について説明する。図２は、映像受信装置の構成を示すブロック図である。この映像受信装置２は、表示装置２０及び表示装置３０を備えている。
【００２６】
映像受信装置２の表示装置２０は、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離し、映像音声の映像を本線映像として画面表示する。これにより、ユーザ４１は、本線映像を視聴することができる。また、表示装置２０は、マルチメディアデータを表示装置３０へ送信する。これにより、表示装置３０は、マルチメディアデータを受信し画面表示することができる。
【００２７】
図３は、図２に示した表示装置２０により本線映像が表示される画面を説明する図である。図３に示すように、表示装置２０（に備えた後述する表示器２３）には、従来のテレビ受像機と同様に、映像音声の映像が本線映像として表示され、音声が出力される。これにより、本線映像の視聴Ａを希望するユーザ４１は、大画面により臨場感を損なうことなく、本線映像を楽しむことができる。
【００２８】
図２に戻って、表示装置３０は、表示装置２０からマルチメディアデータを受信し、表示装置２０により画面表示された本線映像と共にマルチメディアデータを画面表示する。これにより、ユーザ４２は、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００２９】
図４は、図２に示した表示装置３０により本線映像及びマルチメディアデータが表示される画面を説明する図である。図４に示すように、表示装置３０（に備えた後述する表示器３４）には、画面中央に、表示装置２０（に備えた後述する表示器２３）における本線映像が表示され、その両側にマルチメディアデータが表示され、本線映像の音声が出力される。これにより、ユーザ４２は、従来のテレビ受像機に表示される本線映像に加えて、マルチメディアデータを取得することができる。尚、ユーザが本線映像のみを視聴したい場合は、表示装置２０により、図３に示した本線映像を視聴すればよい。また、マルチメディアデータが付加された状態で本線映像を視聴したい場合は、表示装置３０により、マルチメディアデータを見ながら本線映像を視聴すればよい。したがって、複数のユーザが１台の映像受信装置２を用いて視聴を行う場合であっても、個々のユーザの要求に応じた視聴を実現することができる。また、ユーザは、その要求に応じて表示装置２０または表示装置３０の画面を見ればよいから、表示装置３０は、本線映像の表示領域を狭く配置し、マルチメディアデータの表示領域を広く配置することができる。つまり、表示装置３０は、表示すべきマルチメディアデータの情報量に応じて、本線映像の表示領域及びマルチメディアデータの表示領域を設定することにより、情報量に応じたマルチメディアデータを柔軟に表示することができる。
【００３０】
このように、映像受信装置２は、映像送信装置１から、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、表示装置２０が本線映像を画面表示することにより、ユーザ４１に本線映像を視聴させる。また、表示装置３０が本線映像及びマルチメディアデータを画面表示することにより、ユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させる。これにより、本線映像を視聴したいユーザ４１、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザ４２に対し、双方の要求を満足させることが可能となる。
【００３１】
（第１の表示装置）
次に、図２に示した本線映像用の表示装置２０（第１の表示装置）について説明する。図５は、表示装置２０の構成を示すブロック図である。この表示装置２０は、復調器／ＩＰインタフェース２１、デコーダ２２、表示器２３及びマルチメディアデータ送信器２４を備えている。
【００３２】
表示装置２０の復調器／ＩＰインタフェース２１は、映像送信装置１により映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを、放送網または通信網を介して受信する。映像送信装置１と映像受信装置２との間が放送網である場合、復調器が用いられ、映像送信装置１と映像受信装置２との間がインターネット等の通信網である場合、ＩＰインタフェースが用いられる。復調器は、放送信号を受信し、放送信号である高周波帯の信号を復調して元の多重化信号を生成し、映像音声及びマルチメディアデータに分離する。ＩＰインタフェースは、ＩＰプロトコルを用いてＩＰパケットを受信し、ＩＰパケットに収容されている多重化信号のデータを抽出し、映像音声及びマルチメディアデータに分離する。
【００３３】
デコーダ２２は、復調器／ＩＰインタフェース２１により分離されたデジタルの映像音声を入力し、デジタルの映像音声を復号し、アナログのベースバンド信号による映像音声を生成する。表示器２３は、デコーダ２２により復号された映像音声を入力し、図３に示したように、本線映像を表示する。これにより、ユーザ４１は、表示器２３の画面から放出される光信号、及び図示しないスピーカからの音声出力により、本線映像を視聴することができる。
【００３４】
マルチメディアデータ送信器２４は、復調器／ＩＰインタフェース２１により分離されたマルチメディアデータを入力し、マルチメディアデータを有線信号または無線信号として表示装置３０へ送信する。表示装置２０と表示装置３０との間が有線により接続される場合、マルチメディアデータ送信器２４は、有線信号のマルチメディアデータを送信する。表示装置２０と表示装置３０との間が無線により接続される場合、マルチメディアデータ送信器２４は、例えばＢｌｕｅｔｏｏｔｈ等の無線方式を用いて、無線信号のマルチメディアデータを送信する。これにより、表示装置３０は、表示装置２０から有線信号または無線信号のマルチメディアデータを受信することができる。
【００３５】
このように、映像受信装置２の表示装置２０は、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、映像音声及びマルチメディアデータに分離する。そして、表示装置２０は、分離した映像音声の映像を本線映像として画面表示し、分離したマルチメディアデータを表示装置３０へ送信する。これにより、ユーザ４１は本線映像を視聴することができる。また、表示装置３０は、マルチメディアデータを受信して画面表示することができる。
【００３６】
（第２の表示装置）
次に、図２に示した本線映像及びマルチメディアデータ用の表示装置３０（第２の表示装置）について説明する。この本発明の実施形態による表示装置３０には２つの実施例がある。実施例１の表示装置３０（３０−１）は、表示装置２０に表示された本線映像の再撮（再度の撮影）を行い、本線映像及びマルチメディアデータを合成して表示するものである。実施例２の表示装置３０（３０−２）は、表示装置２０に表示された本線映像の再撮を行うことなく、表示装置２０により表示された本線映像をそのまま用いると共に、マルチメディアデータも表示するものである。以下、実施例１の表示装置３０−１及び実施例２の表示装置３０−２についてそれぞれ説明する。
【００３７】
（第２の表示装置／実施例１）
まず、実施例１の表示装置３０−１について説明する。図６は、実施例１の表示装置３０−１の構成を示すブロック図である。この表示装置３０−１は、表示装置２０に表示された本線映像の再撮を行うものであり、映像取込器３１、マルチメディアデータ受信器３２、映像合成器３３及び表示器３４を備えている。
【００３８】
表示装置３０−１の映像取込器３１は、例えばカメラであり、表示装置２０の表示器２３に表示された本線映像を撮影する。すなわち、映像取込器３１は、光信号の本線映像を取り込み、本線映像を取得する。
【００３９】
マルチメディアデータ受信器３２は、表示装置２０から有線信号または無線信号のマルチメディアデータを受信する。表示装置２０と表示装置３０との間が有線により接続される場合、マルチメディアデータ受信器３２は、有線信号のマルチメディアデータを受信する。表示装置２０と表示装置３０との間が無線により接続される場合、マルチメディアデータ受信器３２は、無線信号のマルチメディアデータを受信する。
【００４０】
映像合成器３３は、映像取込器３１により取り込まれた本線映像を入力すると共に、マルチメディアデータ受信器３２からマルチメディアデータを入力し、本線映像とマルチメディアデータとの映像合成を行い、図４に示したような合成映像を表示器３４に出力する。尚、合成映像は、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような映像でもよいし、本線映像にマルチメディアデータを被せて表示するような映像でもよい。ここで、合成映像が、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような映像の場合、映像合成器３３は、マルチメディアデータの情報量を算出し、その情報量に応じたマルチメディアデータの表示領域を設定し、本線映像の表示領域を設定する。すなわち、マルチメディアデータの情報量が所定量を超える場合、マルチメディアデータの表示領域が所定値よりも広くなるように領域を確保する。一方、マルチメディアデータの情報量が所定量以下の場合、マルチメディアデータの表示領域が所定値よりも狭くなるように領域を確保する。本線映像の表示領域は、マルチメディアデータの表示領域の広さに応じて設定される。
【００４１】
また、本線映像とマルチメディアデータとの映像合成処理には、例えばＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ：拡張現実）の技術が用いられる。ＡＲとは、現実映像に対してコンピュータ・グラフィックスによる映像をリアルタイムで現実映像の動きに合わせて合成し、現実映像内の各物体に関連する視覚情報をアノテーション情報として付け加える技術である。映像合成器３３は、マルチメディアデータをアノテーション情報として扱い、ＡＲの技術によって、本線映像にマルチメディアデータを付加して合成映像を生成する。
【００４２】
表示器３４は、映像合成器３３により生成された合成映像を入力し、図４に示したように、本線映像及びマルチメディアデータを表示する。尚、表示装置３０−１は、表示装置２０から音声出力の信号を入力し、スピーカから出力する。これにより、ユーザ４２は、表示器２３の画面から放出される光信号、及び、表示装置２０からの音声出力、または表示装置２０から音声出力の信号を入力して図示しないスピーカからの音声出力により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００４３】
このように、映像受信装置２における実施例１の表示装置３０−１は、表示装置２０に表示された本線映像の再撮を行うと共に、表示装置２０からマルチメディアデータを受信し、本線映像とマルチメディアデータとを合成し、合成映像を画面表示する。これにより、ユーザ４２はマルチメディアデータが付加された本線映像を視聴することができる。
【００４４】
表示装置３０−１の例として、携帯電話機、インターネットを用いたカメラ及びパーソナルコンピュータが挙げられる。携帯電話機の場合、映像取込器３１に相当する内蔵カメラによって本線映像を撮影し、本線映像にマルチメディアデータを付加して画面表示する。また、インターネットを用いたカメラ及びパーソナルコンピュータの場合、映像取込器３１に相当するカメラによって本線映像を撮影し、インターネットを介して送信された本線映像を、マルチメディアデータと共にパーソナルコンピュータに画面表示する。
【００４５】
（第２の表示装置／実施例２）
次に、実施例２の表示装置３０−２について説明する。図７は、実施例２の表示装置３０−２の構成を示すブロック図である。この表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行わないで光信号の本線映像を透過させるものであり、マルチメディアデータ受信器３２及び表示器３５を備えている。
【００４６】
実施例２の表示装置３０−２と図６に示した実施例１の表示装置３０−１とを比較すると、実施例２の表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行うカメラ等の映像取込器３１、及び、本線映像とマルチメディアデータとを合成して合成映像を生成する映像合成器３３を備えていない点で、実施例１の表示装置３０−１と相違する。また、実施例２の表示装置３０−２は、表示装置２０に表示された光信号の本線映像を透過させる表示器３５を備えている点で、実施例１の表示装置３０−１と相違する。
【００４７】
表示装置３０−２のマルチメディアデータ受信器３２は、実施例１と同様に、表示装置２０から有線信号または無線信号のマルチメディアデータを受信する。マルチメディアデータ受信器３２により受信されたマルチメディアデータは、表示器３５に出力される。
【００４８】
表示器３５は、表示装置２０の表示器２３に表示された光信号の本線映像を取り込んで透過させると共に、マルチメディアデータ受信器３２からマルチメディアデータを入力する。表示器３５は、例えば、光信号の本線映像を透過させるガラスを有しており、ガラスの一部にプリズム及びホログラム素子、または液晶ディスプレイが設けられている。表示器３５は、入力したマルチメディアデータをガラスの一部に表示する。これにより、ユーザ４２は、表示器３５により透過された本線映像、及び表示器３５の表示領域の一部に表示されたマルチメディアデータを見ることができ、本線映像とマルチメディアデータとの合成映像として見ることができる。したがって、ユーザ４２は、表示装置２０からの音声出力、または表示装置２０から音声出力の信号を入力して図示しないスピーカからの音声出力により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００４９】
このように、映像受信装置２における実施例２の表示装置３０−２は、表示装置２０に表示された本線映像の再撮を行うことなく光信号の本線映像を透過させ、表示装置２０からマルチメディアデータを受信し、表示領域の一部にマルチメディアデータを画面表示する。これにより、ユーザ４２はマルチメディアデータが付加された状態で本線映像を視聴することができる。また、実施例２の表示装置３０−２は、本線映像の再撮を行い再表示する実施例１の表示装置３０−１に比べ、品質の高い本線映像を画面表示することができる。
【００５０】
次に、実施例２の表示装置３０−２について、具体的な例を挙げて説明する。図８は、実施例２の表示装置３０−２を眼鏡に適用した場合の構成を示す図である。この眼鏡は、レンズ３６、テンプル及び鼻当てからなる通常の構成に加え、マルチメディアデータ受信器３２、プリズム３７、ホログラム素子３８、及び、表示器３５における制御部を備えている。表示器３５は、右側レンズ３６Ｒ、左側レンズ３６Ｌ及び制御部（図８では、マルチメディアデータ受信器３２と一体に形成されている。）を備えており、右側レンズ３６Ｒの一部にはプリズム３７及びホログラム素子３８が設けられている。
【００５１】
ユーザ４２は、この眼鏡を装着し、表示装置２０に表示された本線映像を視聴するものとする。レンズ３６Ｒ，３６Ｌは、表示装置２０からの光信号の本線映像を透過し、眼鏡を装着しているユーザ４２の眼に入射させる。
【００５２】
マルチメディアデータ受信器３２は、表示装置２０（図示せず）から無線信号のマルチメディアデータを受信する。表示器３５の制御部は、マルチメディアデータ受信器３２からマルチメディアデータを入力し、マルチメディアデータを表示するための光信号をプリズム３７に放出する。プリズム３７は、制御部からの光信号を内部に導き入れ、壁面に反射させながらホログラム素子３８に導く。ホログラム素子３８は、導かれた光信号を回折させ、眼鏡を装着しているユーザ４２の眼に入射させる。
【００５３】
これにより、ユーザ４２は、眼鏡の右側レンズ３６Ｒに備えたホログラム素子３８により、マルチメディアデータを見ることができる。したがって、ユーザ４２は、眼鏡により、マルチメディアデータが付加された状態で本線映像を視聴することができる。
【００５４】
以上のように、本発明の実施形態による映像受信装置２によれば、映像送信装置１から、映像音声及びマルチメディアデータが多重化された放送信号またはＩＰパケットを受信し、表示装置２０が本線映像を画面表示するようにした。これにより、ユーザ４１に本線映像を視聴させることができる。また、表示装置３０が本線映像及びマルチメディアデータを画面表示するようにした。これにより、表示装置２０のユーザ４１とは異なるユーザ４２に、マルチメディアデータが付加された状態で本線映像を視聴させることができる。したがって、多数のユーザ４１，４２が本線映像を視聴する場合に、本線映像を視聴したいユーザ４１、及びマルチメディアデータが付加された状態で本線映像を視聴したいユーザ４２に対し、双方の要求を満足させることが可能となる。
【００５５】
また、映像受信装置２の表示装置２０は、映像送信装置１から放送信号またはＩＰパケットを受信し、放送信号またはＩＰパケットを映像音声及びマルチメディアデータに分離し、マルチメディアデータを表示装置３０へ送信するようにした。そして、表示装置３０は、表示装置２０により分離されたマルチメディアデータを受信し、画面表示するようにした。これにより、表示装置３０は、マルチメディアデータを取得するために、映像送信装置１から放送信号またはＩＰパケットを受信して映像音声及びマルチメディアデータに分離する必要がなく、表示装置２０により送信されたマルチメディアデータを受信すれば済むようになる。したがって、表示装置３０の処理負荷が低減し、小型化を実現することができる。
【００５６】
映像受信装置２の表示装置３０−１は、映像合成器３３において、本線映像を縮小表示して空いた箇所にマルチメディアデータを表示するような合成映像を生成する場合、マルチメディアデータの情報量に応じてマルチメディアデータの表示領域を設定し、マルチメディアデータの表示領域の広さに応じて本線映像の表示領域を設定するようにした。これにより、映像受信装置２の表示装置３０−１は、情報量に応じたマルチメディアデータを柔軟に表示することができる。また、ユーザは、臨場感のある本線映像を視聴したい場合は表示装置２０を見ればよく、マルチメディアデータを見たい場合は表示装置３０−１を見ればよいから、表示装置３０−１における本線映像の表示領域が狭くても、ユーザの要求には直接影響することなく、情報量に応じたマルチメディアデータを見ることができる。
【符号の説明】
【００５７】
１ 映像送信装置
２ 映像受信装置
１１ エンコーダ
１２ 多重化器
１３ 変調器／ＩＰインタフェース
２０，３０ 表示装置
２１ 復調器／ＩＰインタフェース
２２ デコーダ
２３，３４，３５ 表示器
２４ マルチメディアデータ送信器
３１ 映像取込器
３２ マルチメディアデータ受信器
３３ 映像合成器
３６ レンズ
３７ プリズム
３８ ホログラム素子
４１，４２ ユーザ
【特許請求の範囲】
【請求項１】
映像音声及びマルチメディアデータが多重化された信号を受信し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面表示し、ユーザに視聴させる映像受信装置において、
前記多重化された信号を受信し、映像音声及びマルチメディアデータにそれぞれ分離する受信器、
前記受信器により分離された映像音声をデコードするデコーダ、
前記受信器により分離されたマルチメディアデータを送信するマルチメディアデータ送信器、及び、
前記デコーダにより復号された映像音声の映像を本線映像として画面表示し、第１のユーザに視聴させる本線映像用表示器を有する第１の表示装置と、
前記マルチメディアデータ送信器により送信されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、
前記本線映像用表示器により画面表示され第１のユーザに視聴される映像音声、及び前記マルチメディアデータ受信器により受信されたマルチメディアデータに対し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有する第２の表示装置と、
を備えたことを特徴とする映像受信装置。
【請求項２】
請求項１に記載の映像受信装置において、
前記第２の表示装置は、
前記マルチメディアデータ受信器、
前記本線映像用表示器により画面表示された本線映像を撮影する映像取込器、
前記マルチメディアデータ受信器により受信されたマルチメディアデータと、前記映像取込器により撮影された本線映像とを合成する映像合成器、及び、
前記映像合成器により合成された映像を画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする映像受信装置。
【請求項３】
請求項１に記載の映像受信装置において、
前記第２の表示装置は、
前記マルチメディアデータ受信器、及び、
前記本線映像用表示器により画面表示された本線映像を透過し、前記マルチメディアデータ受信器により受信されたマルチメディアデータを所定箇所に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする映像受信装置。
【請求項４】
請求項３に記載の映像受信装置において、
前記第２の表示装置を、前記第２のユーザが装着する眼鏡とし、
前記眼鏡は、
前記マルチメディアデータ受信器、
前記本線映像用表示器により画面表示された本線映像を透過するレンズ、及び、
前記本線映像及びマルチメディアデータ用表示器の代わりに、前記マルチメディアデータ受信器により受信されたマルチメディアデータを前記レンズの所定箇所に表示する表示器を有することを特徴とする映像受信装置。
【請求項５】
映像音声及びマルチメディアデータが多重化された信号を受信し、前記多重化された信号を映像音声及びマルチメディアデータに分離し、前記映像音声をデコードして本線映像を画面表示し、第１のユーザに視聴させる第１の表示装置と、前記本線映像を前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる第２の表示装置とを備えた映像受信装置における前記第２の表示装置であって、
前記第１の表示装置により分離されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、
前記第１の表示装置により画面表示された本線映像を入力し、前記マルチメディアデータ受信器により受信されたマルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする表示装置。
【請求項１】
映像音声及びマルチメディアデータが多重化された信号を受信し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面表示し、ユーザに視聴させる映像受信装置において、
前記多重化された信号を受信し、映像音声及びマルチメディアデータにそれぞれ分離する受信器、
前記受信器により分離された映像音声をデコードするデコーダ、
前記受信器により分離されたマルチメディアデータを送信するマルチメディアデータ送信器、及び、
前記デコーダにより復号された映像音声の映像を本線映像として画面表示し、第１のユーザに視聴させる本線映像用表示器を有する第１の表示装置と、
前記マルチメディアデータ送信器により送信されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、
前記本線映像用表示器により画面表示され第１のユーザに視聴される映像音声、及び前記マルチメディアデータ受信器により受信されたマルチメディアデータに対し、前記映像音声の映像を本線映像として前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有する第２の表示装置と、
を備えたことを特徴とする映像受信装置。
【請求項２】
請求項１に記載の映像受信装置において、
前記第２の表示装置は、
前記マルチメディアデータ受信器、
前記本線映像用表示器により画面表示された本線映像を撮影する映像取込器、
前記マルチメディアデータ受信器により受信されたマルチメディアデータと、前記映像取込器により撮影された本線映像とを合成する映像合成器、及び、
前記映像合成器により合成された映像を画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする映像受信装置。
【請求項３】
請求項１に記載の映像受信装置において、
前記第２の表示装置は、
前記マルチメディアデータ受信器、及び、
前記本線映像用表示器により画面表示された本線映像を透過し、前記マルチメディアデータ受信器により受信されたマルチメディアデータを所定箇所に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする映像受信装置。
【請求項４】
請求項３に記載の映像受信装置において、
前記第２の表示装置を、前記第２のユーザが装着する眼鏡とし、
前記眼鏡は、
前記マルチメディアデータ受信器、
前記本線映像用表示器により画面表示された本線映像を透過するレンズ、及び、
前記本線映像及びマルチメディアデータ用表示器の代わりに、前記マルチメディアデータ受信器により受信されたマルチメディアデータを前記レンズの所定箇所に表示する表示器を有することを特徴とする映像受信装置。
【請求項５】
映像音声及びマルチメディアデータが多重化された信号を受信し、前記多重化された信号を映像音声及びマルチメディアデータに分離し、前記映像音声をデコードして本線映像を画面表示し、第１のユーザに視聴させる第１の表示装置と、前記本線映像を前記マルチメディアデータと共に画面に表示し、第２のユーザに視聴させる第２の表示装置とを備えた映像受信装置における前記第２の表示装置であって、
前記第１の表示装置により分離されたマルチメディアデータを受信するマルチメディアデータ受信器、及び、
前記第１の表示装置により画面表示された本線映像を入力し、前記マルチメディアデータ受信器により受信されたマルチメディアデータと共に画面に表示し、第２のユーザに視聴させる本線映像及びマルチメディアデータ用表示器を有することを特徴とする表示装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１１−１５１５４（Ｐ２０１１−１５１５４Ａ）
【公開日】平成２３年１月２０日（２０１１．１．２０）
【国際特許分類】
【出願番号】特願２００９−１５７０７６（Ｐ２００９−１５７０７６）
【出願日】平成２１年７月１日（２００９．７．１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００４３５２）日本放送協会 (2,206)
【Ｆターム（参考）】
【公開日】平成２３年１月２０日（２０１１．１．２０）
【国際特許分類】
【出願日】平成２１年７月１日（２００９．７．１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００４３５２）日本放送協会 (2,206)
【Ｆターム（参考）】
[ Back to top ]