映像配信システム、映像送信装置、及び映像再生装置
【課題】再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像配信サーバにおけるストリーム生成の処理負荷の増大を回避することが可能な映像配信システムを得る。
【解決手段】サーバ２は、低解像度の二次元映像を再生するためのストリームＳ１と、低解像度の三次元映像とストリームＳ１との差分であるストリームＳ２と、高解像度の二次元映像とストリームＳ１との差分であるストリームＳ３と、高解像度の三次元映像とストリームＳ１〜Ｓ３との差分であるストリームＳ４と、を送信する。映像再生装置は、ストリームＳ１〜Ｓ４のうち必要なストリームを選択して映像を再生する。
【解決手段】サーバ２は、低解像度の二次元映像を再生するためのストリームＳ１と、低解像度の三次元映像とストリームＳ１との差分であるストリームＳ２と、高解像度の二次元映像とストリームＳ１との差分であるストリームＳ３と、高解像度の三次元映像とストリームＳ１〜Ｓ３との差分であるストリームＳ４と、を送信する。映像再生装置は、ストリームＳ１〜Ｓ４のうち必要なストリームを選択して映像を再生する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像配信システム、映像送信装置、及び映像再生装置に関し、特に、再生能力が異なる複数の映像再生装置を備える映像配信システム、映像送信装置、及び映像再生装置に関する。
【背景技術】
【０００２】
下記特許文献１には、両眼に液晶シャッタを備える専用の眼鏡をユーザが着用することによって、三次元映像を視聴可能な映像表示装置が開示されている。当該映像表示装置においては、左視用映像と右視用映像とを所定の周期で表示画面に交互に表示する。そして、液晶シャッタを制御することによって、左視用映像の表示タイミングに同期して眼鏡の左眼を透光状態、右眼を遮光状態とし、右視用映像の表示タイミングに同期して眼鏡の右眼を透光状態、左眼を遮光状態とすることにより、三次元映像の視聴が可能となる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第３２７３０７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
二次元映像のストリームを映像配信サーバから通信ネットワークを介して映像再生装置に送信する映像配信システムが実用化されている。この種の映像配信システムでは、高解像度の二次元映像の再生に対応したテレビや、低解像度の二次元映像の再生に対応したモバイル端末等、再生能力が異なる複数種類の映像再生装置が通信ネットワークに接続されることがある。そして、三次元映像の再生に対応したテレビやモバイル端末等の普及が今後進むと、通信ネットワークに接続される映像再生装置の種類もいっそう増大することが予想される。このように再生能力が異なる多種の映像再生装置が通信ネットワークに接続された状況において、各映像再生装置の再生能力に応じたストリームを個別に映像配信サーバで生成し当該サーバから各映像再生装置に送信したのでは、映像配信サーバにおけるストリーム生成の処理負荷が増大する。
【０００５】
本発明はかかる事情に鑑みて成されたものであり、再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像配信サーバにおけるストリーム生成の処理負荷の増大を回避することが可能な映像配信システム、映像送信装置、及び映像再生装置を得ることを目的とするものである。
【課題を解決するための手段】
【０００６】
本発明の第１の態様に係る映像配信システムは、映像再生装置に映像ストリームを送信する映像送信装置と、前記映像ストリームを受信し再生する前記映像再生装置と、を備え、前記映像送信装置は、前記映像ストリームとして、第１の解像度の二次元映像を再生するための第１のストリームと、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、を送信し、前記映像再生装置は、前記第１乃至第４のストリームのうち必要なストリームを選択して映像を再生することを特徴とするものである。
【０００７】
第１の態様に係る映像配信システムによれば、映像送信装置は、第１乃至第４のストリームを送信し、映像再生装置は、第２の解像度の三次元映像という一種類の映像に相当する第１乃至第４のストリームのうち必要なストリームを選択して、第１の解像度の二次元映像や三次元映像、第２の解像度の二次元映像といった他の種類の映像も再生する。従って、例えば再生可能な映像の解像度や三次元映像の再生の可否等の再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像送信装置は第１乃至第４のストリームを生成して通信ネットワークに送信すれば足りるため、映像送信装置におけるストリーム生成の処理負荷の増大を回避することが可能となる。
【０００８】
本発明の第２の態様に係る映像配信システムは、第１の態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【０００９】
第２の態様に係る映像配信システムによれば、映像再生装置が、第３のストリームを受信できない場合、又は、受信した第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第３のストリームを受信できない場合等であっても、第２の解像度の三次元映像の再生を担保することが可能となる。
【００１０】
本発明の第３の態様に係る映像配信システムは、第１又は第２の態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第４のストリームを受信できないとき、又は、受信した前記第４のストリームが欠損により使用できないとき、前記第２のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【００１１】
第３の態様に係る映像配信システムによれば、映像再生装置が、第４のストリームを受信できない場合、又は、受信した第４のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第２のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第４のストリームを受信できない場合等であっても、第２の解像度の三次元映像の再生を担保することが可能となる。
【００１２】
本発明の第４の態様に係る映像配信システムは、第１〜第３のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２及び第４のストリームの映像に代えて、前記第１及び第３のストリームの映像を使用することを特徴とするものである。
【００１３】
第４の態様に係る映像配信システムによれば、映像再生装置が、第２のストリームを受信できない場合、又は、受信した第２のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第２及び第４のストリームの映像に代えて、第１及び第３のストリームの映像を使用する。これにより、第２のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで第２の解像度の再生を担保することが可能となる。
【００１４】
本発明の第５の態様に係る映像配信システムは、第１〜第４のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２及び第３のストリームを受信できないとき、又は、受信した前記第２及び第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し、前記第２乃至第４のストリームの映像に代えて当該映像を使用することを特徴とするものである。
【００１５】
第５の態様に係る映像配信システムによれば、映像再生装置が、第２及び第３のストリームを受信できない場合、又は、受信した第２及び第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成し、第２乃至第４のストリームの映像に代えて当該映像を使用する。これにより、第２及び第３のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで第２の解像度の再生を担保することが可能となる。
【００１６】
本発明の第６の態様に係る映像配信システムは、第１〜第５のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の二次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【００１７】
第６の態様に係る映像配信システムによれば、映像再生装置が、第３のストリームを受信できない場合、又は、受信した第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の二次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第３のストリームを受信できない場合等であっても、第２の解像度の再生を担保することが可能となる。
【００１８】
本発明の第７の態様に係る映像配信システムは、第１〜第６のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第１の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２のストリームの映像に代えて、前記第１のストリームの映像を使用することを特徴とするものである。
【００１９】
第７の態様に係る映像配信システムによれば、映像再生装置が、第２のストリームを受信できない場合、又は、受信した第２のストリームが欠損により使用できない場合には、当該映像再生装置は、第１の解像度の三次元映像を再生するにあたって、第２のストリームの映像に代えて、第１のストリームの映像を使用する。これにより、第２のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで映像の再生を担保することが可能となる。
【００２０】
他の観点によれば、本発明は、映像再生装置に映像ストリームを送信する映像送信装置を提供することができる。映像送信装置は、前記映像ストリームとして、第１の解像度の二次元映像を再生するための第１のストリームと、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、を生成して送信する。
【００２１】
他の観点によれば、本発明は、映像送信装置から受信した映像ストリームを再生する映像再生装置を提供することができる。映像再生装置は、前記映像送信装置から前記映像ストリームとして送信された、第１の解像度の二次元映像を再生するための第１のストリーム、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリーム、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリーム、及び前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームのうち必要なストリームを選択して映像を再生する。
【発明の効果】
【００２２】
本発明によれば、再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像配信サーバにおけるストリーム生成の処理負荷の増大を回避することが可能となる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施の形態に係る映像配信システムの全体構成を示す図である。
【図２】ＳＴＢの構成を簡略化して示すブロック図である。
【図３】ＳＴＢの構成を簡略化して示すブロック図である。
【図４】テレビにおいて三次元映像のコンテンツを再生する場合のＳＴＢの処理を示す図である。
【図５】モバイル端末の構成を簡略化して示すブロック図である。
【図６】モバイル端末の構成を簡略化して示すブロック図である。
【図７】ＳＴＢが受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【図８】ＳＴＢが受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【図９】モバイル端末が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【発明を実施するための形態】
【００２４】
以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、異なる図面において同一の符号を付した要素は、同一又は相応する要素を示すものとする。
【００２５】
図１は、本発明の実施の形態に係る映像配信システム１の全体構成を示す図である。図１に示すように映像配信システム１は、サーバ２と、当該サーバ２とＩＰ（Internet Protocol）ネットワーク等の通信ネットワーク３を介して接続される、映像再生装置としてのＳＴＢ（Set Top Box）４１，４２と、液晶表示装置等のテレビ５１，５２と、映像再生装置としてのモバイル端末４３，４４とを備えている。テレビ５１はＳＴＢ４１に接続されており、テレビ５２はＳＴＢ４２に接続されている。なお、ＳＴＢ４１，４２の機能がテレビ５１，５２に内蔵されていてもよい。サーバ２は、例えば、地上デジタル放送やＢＳデジタル放送の放送波を受信して、その映像のトランスポートストリーム（以下「ストリーム」と称す）を、通信ネットワーク３を介して再送信するための映像送信装置である。この映像配信システム１には、再生可能な映像の解像度、及び三次元映像の再生の可否が互いに異なる複数の映像再生装置（ＳＴＢ４１，４２及びモバイル端末４３，４４）が含まれる。なお、映像配信システム１には、再生可能な映像の解像度、及び三次元映像の再生の可否が同じ映像再生装置が複数含まれていてもよい。
【００２６】
図１に示した例において、テレビ５１は、高解像度（ＨＤ：High Definition）の二次元映像の再生に対応しており、三次元映像の再生には対応していない。テレビ５２は、高解像度の三次元映像の再生に対応している。テレビ５２は、高解像度の三次元映像の再生に加えて、高解像度の二次元映像の再生に対応していてもよい。モバイル端末４３は、低解像度（ＳＤ：Standard Definition）の二次元映像の再生に対応しており、三次元映像の再生には対応していない。モバイル端末４４は、低解像度の三次元映像の再生に対応している。モバイル端末４４は、低解像度の三次元映像の再生に加えて、低解像度の二次元映像の再生に対応していてもよい。本実施の形態では解像度が二種類（ＨＤ及びＳＤ）である場合の例について説明するが、この例に限るものではなく、三種類以上の解像度があってもよい。また、図１に示したＳＴＢ４１，４２及びモバイル端末４３，４４以外の映像再生装置が通信ネットワーク３に接続されていてもよい。
【００２７】
サーバ２は、同一のコンテンツに関して４つのストリームＳ１〜Ｓ４を生成して通信ネットワーク３に送信（例えばマルチキャスト送信）する。４つのストリームＳ１〜Ｓ４をまとめて用いることで、当該コンテンツに関して高解像度の三次元映像を構成することが可能である。すなわち、サーバ２は、当該コンテンツに関して高解像度の三次元映像に相当するストリームを生成すればよい。本実施の形態において、各映像再生装置は４つのストリームＳ１〜Ｓ４のうち必要なストリームを組み合わせて再生することで、各々の再生能力に応じた再生を行うことができる。
【００２８】
ストリームＳ１は、低解像度の二次元映像を表すストリームであり、低解像度の三次元映像の再生においては左視用映像のストリームとして用いることが可能である。ストリームＳ１は、例えば、ＭＶＣ（Multiview Video Coding）におけるベースビュー（Base View）として圧縮符号化されたストリームである。
【００２９】
ストリームＳ２は、低解像度の三次元映像を再生する場合に、右視用映像を構成するのにストリームＳ１とともに用いるストリームである。ストリームＳ２は、ＭＶＣによって非ベースビューとして圧縮符号化されたストリームであり、ストリームＳ２には、ストリームＳ１との差分情報（つまり、各フレームに関する左視用映像と右視用映像との差分情報）が含まれる。
【００３０】
ストリームＳ３は、高解像度の二次元映像を再生する場合にストリームＳ１とともに用いられるストリームであり、高解像度の三次元映像の再生においては左視用映像のストリームとして用いることが可能である。ストリームＳ３は、ＳＶＣ（Scalable Video Coding）によって圧縮符号化されたストリームであり、ストリームＳ３には、ストリームＳ１との差分情報（つまり、各フレームに関する高解像度の左視用映像と低解像度の左視用映像との差分情報）が含まれる。
【００３１】
ストリームＳ４は、高解像度の三次元映像を再生する場合に、右視用映像を構成するのにストリームＳ２とともに用いるストリームである。ストリームＳ４は、ＳＶＣによって圧縮符号化されたストリームであり、ストリームＳ４には、ストリームＳ２との差分情報（つまり、各フレームに関する高解像度の右視用映像と低解像度の右視用映像との差分情報）が含まれる。
【００３２】
ここで、ストリームＳ１〜Ｓ４は、互いに異なるパケット識別子（ＰＩＤ：Packet Identifier）を用いて伝送することができる。各映像再生装置は、そのパケット識別子によってストリームを区別することができる。サーバ２がストリームＳ１〜Ｓ４を通信ネットワーク３に送信するにあたり、ストリームＳ１とストリームＳ２〜Ｓ４とで、通信の優先度を異なる値に設定してもよい。望ましくは、Base viewであるストリームＳ１の優先度を、Enhanced viewであるストリームＳ２〜Ｓ４の優先度よりも高く設定する。通信の優先度は、例えばＱｏＳ（Quality of Service）のランクによって設定することができる。ストリームＳ１のランクを高く設定することにより、データの欠損をできるだけ生じさせることなくストリームＳ１を送信する。
【００３３】
図２は、ＳＴＢ４１の構成を簡略化して示すブロック図である。図２に示すようにＳＴＢ４１は、受信部１１１、バッファ１２１、デコーダ１３１、映像処理部１４１、及び送信部１５１を備えている。ＳＴＢ４１に接続されているテレビ５１は高解像度の二次元映像の再生に対応している（三次元映像の再生には対応していない）ため、受信部１１１は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１，Ｓ３を選択して通信ネットワーク３から受信する。
【００３４】
ストリームＳ１，Ｓ３は、受信部１１１からバッファ１２１に入力され、バッファ１２１において一時的に記憶される。バッファ１２１から出力されたストリームＳ１，Ｓ３は、デコーダ１３１に入力される。デコーダ１３１は、ストリームＳ１，Ｓ３をデコードすることにより、映像信号を出力する。デコーダ１３１から出力された映像信号は、映像処理部１４１に入力される。映像処理部１４１は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の映像信号を生成して出力する。映像処理部１４１から出力された映像信号は、送信部１５１に入力される。送信部１５１は、入力された映像信号をテレビ５１に向けて送信し、これにより、テレビ５１において高解像度の二次元映像が再生される。
【００３５】
図３は、ＳＴＢ４２の構成を簡略化して示すブロック図である。図３に示すようにＳＴＢ４２は、受信部１１２、バッファ１２２、デコーダ１３２、映像処理部１４２、及び送信部１５２を備えている。ＳＴＢ４２に接続されているテレビ５２は高解像度の三次元映像の再生に対応しているため、受信部１１２は、サーバ２から送信されたストリームＳ１〜Ｓ４の全てを選択して通信ネットワーク３から受信する。
【００３６】
ストリームＳ１〜Ｓ４は、受信部１１２からバッファ１２２に入力され、バッファ１２２において一時的に記憶される。バッファ１２２から出力されたストリームＳ１〜Ｓ４は、デコーダ１３２に入力される。デコーダ１３２は、ストリームＳ１〜Ｓ４をデコードすることにより、映像信号を出力する。デコーダ１３２から出力された映像信号は、映像処理部１４２に入力される。映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成して出力する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成して出力する。映像処理部１４２から出力された映像信号は、送信部１５２に入力される。送信部１５２は、入力された映像信号をテレビ５２に向けて送信し、これにより、テレビ５２において高解像度の三次元映像が再生される。
【００３７】
図４は、テレビ５２において三次元映像のコンテンツを再生する場合のＳＴＢ４２の処理を示す図である。三次元映像の再生を行う場合には、人間の両眼視差を反映した左視用映像と右視用映像とが所定の周期（例えば１／１２０秒周期。左視用画像と右視用画像とのペアで１フレームが構成されるため、フレームレートは６０ｆｐｓとなる。）で交互に表示される。図４に示した例では、第０フレームの左視用映像Ｆ０Ｌ、第０フレームの右視用映像Ｆ０Ｒ、第１フレームの左視用映像Ｆ１Ｌ、第１フレームの右視用映像Ｆ１Ｒ、第２フレームの左視用映像Ｆ２Ｌ、第２フレームの右視用映像Ｆ２Ｒ、第３フレームの左視用映像Ｆ３Ｌ、第３フレームの右視用映像Ｆ３Ｒ、・・・が、この順にテレビ５２の表示画面に表示される。また、三次元映像の視聴を行う場合には、ユーザは、左眼及び右眼の両眼に液晶シャッタが組み込まれた所定の眼鏡を装着する。そして、各フレームの左視用映像Ｆ０Ｌ，Ｆ１Ｌ，Ｆ２Ｌ，Ｆ３Ｌ，・・・を表示画面に表示するタイミングに同期して、眼鏡の左眼が透光状態（ＯＮ）、右眼が遮光状態（ＯＦＦ）とされ、各フレームの右視用映像Ｆ０Ｒ，Ｆ１Ｒ，Ｆ２Ｒ，Ｆ３Ｒ，・・・を表示画面に表示するタイミングに同期して、眼鏡の右眼が透光状態（ＯＮ）、左眼が遮光状態（ＯＦＦ）とされる。
【００３８】
図５は、モバイル端末４３の構成を簡略化して示すブロック図である。図５に示すようにモバイル端末４３は、受信部１１３、バッファ１２３、デコーダ１３３、映像処理部１４３、及び表示部１５３を備えている。モバイル端末４３は低解像度の二次元映像の再生に対応している（三次元映像の再生には対応していない）ため、受信部１１３は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１を選択して通信ネットワーク３から受信する。
【００３９】
ストリームＳ１は、受信部１１３からバッファ１２３に入力され、バッファ１２３において一時的に記憶される。バッファ１２３から出力されたストリームＳ１は、デコーダ１３３に入力される。デコーダ１３３は、ストリームＳ１をデコードすることにより、映像信号を出力する。デコーダ１３３から出力された映像信号は、映像処理部１４３に入力される。映像処理部１４３は、ストリームＳ１の低解像度の映像信号を出力する。映像処理部１４３から出力された映像信号は表示部１５３に入力され、これにより、表示部１５３において低解像度の二次元映像が再生される。
【００４０】
図６は、モバイル端末４４の構成を簡略化して示すブロック図である。図６に示すようにモバイル端末４４は、受信部１１４、バッファ１２４、デコーダ１３４、映像処理部１４４、及び表示部１５４を備えている。モバイル端末４４は低解像度の三次元映像の再生に対応しているため、受信部１１４は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１，Ｓ２を選択して通信ネットワーク３から受信する。
【００４１】
ストリームＳ１，Ｓ２は、受信部１１４からバッファ１２４に入力され、バッファ１２４において一時的に記憶される。バッファ１２４から出力されたストリームＳ１，Ｓ２は、デコーダ１３４に入力される。デコーダ１３４は、ストリームＳ１，Ｓ２をデコードすることにより、映像信号を出力する。デコーダ１３４から出力された映像信号は、映像処理部１４４に入力される。映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号を出力する。また、映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成して出力する。映像処理部１４４から出力された映像信号は表示部１５４に入力され、これにより、表示部１５４において低解像度の三次元映像が再生される。
【００４２】
図７は、ＳＴＢ４１が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００４３】
項目（Ａ）に示すように、ＳＴＢ４１がストリームＳ１，Ｓ３を受信しており、かつ、ストリームＳ１，Ｓ３に欠損が無い（又はエラーコンシールメントや誤り訂正等によって修復できる程度に欠損が少ない）場合には、映像処理部１４１は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の映像信号を生成する。そして、当該映像信号が、高解像度の二次元映像の再生に使用される。
【００４４】
項目（Ｂ）に示すように、通信エラー等に起因してＳＴＢ４１がストリームＳ３を受信しておらず、又は、修復できない程度にストリームＳ３の欠損が多い場合には、映像処理部１４１は、ストリームＳ１の低解像度の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の映像信号を生成することができる。そして、生成された高解像度の二次元映像の映像信号を使用して、二次元映像の再生が行われる。
【００４５】
図８は、ＳＴＢ４２が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００４６】
項目（Ａ）に示すように、ＳＴＢ４１がストリームＳ１〜Ｓ４を受信しており、かつ、ストリームＳ１〜Ｓ４に欠損が無い（又は修復できる程度に欠損が少ない）場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成する。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４７】
項目（Ｂ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ３を受信しておらず、又は、修復できない程度にストリームＳ３の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成する。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４８】
項目（Ｃ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ４を受信しておらず、又は、修復できない程度にストリームＳ４の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の右視用映像の映像信号を生成することができる。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４９】
項目（Ｄ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ３，Ｓ４を受信しておらず、又は、修復できない程度にストリームＳ３，Ｓ４の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の右視用映像の映像信号を生成することができる。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００５０】
項目（Ｅ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ２を受信しておらず、又は、修復できない程度にストリームＳ２の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、高解像度の右視用映像の映像信号に代えて、上記で生成した高解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても高解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５１】
項目（Ｆ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ２，Ｓ３を受信しておらず、又は、修復できない程度にストリームＳ２，Ｓ３の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、高解像度の右視用映像の映像信号に代えて、上記で生成した高解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても高解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５２】
図９は、モバイル端末４４が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００５３】
項目（Ａ）に示すように、モバイル端末４４がストリームＳ１，Ｓ２を受信しており、かつ、ストリームＳ１，Ｓ２に欠損が無い（又は修復できる程度に欠損が少ない）場合には、映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成する。そして、低解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００５４】
項目（Ｂ）に示すように、通信エラー等に起因してモバイル端末４４がストリームＳ２を受信しておらず、又は、修復できない程度にストリームＳ２の欠損が多い場合には、映像処理部１４４は、低解像度の右視用映像の映像信号に代えて、ストリームＳ１の低解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても低解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５５】
このように本実施の形態に係る映像配信システム１によれば、サーバ２は、ストリームＳ１〜Ｓ４を通信ネットワーク３に送信し、ＳＴＢ４１，４２及びモバイル端末４３，４４は、ストリームＳ１〜Ｓ４のうち、自身の再生能力、又は自身に接続されているテレビ５１，５２の再生能力に応じて必要なストリームを選択して通信ネットワーク３から受信する。従って、再生可能な映像の解像度や三次元映像の再生の可否等の再生能力が異なる複数の映像再生装置が通信ネットワーク３に接続された場合であっても、サーバ２は高解像度の三次元映像のみのストリームと同等のストリームＳ１〜Ｓ４を生成して通信ネットワーク３に送信すれば足りるため、サーバ２におけるストリーム生成の処理負荷の増大を回避することが可能となる。
【００５６】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｂ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ３を受信できない場合、又は、受信したストリームＳ３が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ１の低解像度の左視用映像に基づいて高解像度の左視用映像を生成することができる。これにより、ストリームＳ３を受信できない場合等であっても、高解像度の三次元映像の再生を担保することが可能となる。
【００５７】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｃ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ４を受信できない場合、又は、受信したストリームＳ４が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ２の低解像度の右視用映像に基づいて高解像度の右視用映像を生成することができる。これにより、ストリームＳ４を受信できない場合等であっても、高解像度の三次元映像の再生を担保することが可能となる。
【００５８】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｅ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ２を受信できない場合、又は、受信したストリームＳ２が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ２，Ｓ４の右視用映像に代えて、ストリームＳ１，Ｓ３の左視用映像を使用することができる。これにより、ストリームＳ２を受信できない場合等であっても、二次元映像とはなるが高解像度の再生を担保することが可能となる。
【００５９】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｆ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ２，Ｓ３を受信できない場合、又は、受信したストリームＳ２，Ｓ３が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ１の低解像度の左視用映像に基づいて高解像度の左視用映像を生成し、当該左視用映像を、ストリームＳ３の左視用映像及びストリームＳ２，Ｓ４の右視用映像に代えて使用することができる。これにより、ストリームＳ２，Ｓ３を受信できない場合等であっても、二次元映像とはなるが高解像度の再生を担保することが可能となる。
【００６０】
また、本実施の形態に係る映像配信システム１によれば、図７の項目（Ｂ）に示したように、高解像度の二次元映像を再生可能なＳＴＢ４１が、ストリームＳ３を受信できない場合、又は、受信したストリームＳ３が欠損により使用できない場合には、ＳＴＢ４１は、ストリームＳ１の低解像度の映像に基づいて高解像度の映像を生成することができる。これにより、ストリームＳ３を受信できない場合等であっても、高解像度の再生を担保することが可能となる。
【００６１】
また、本実施の形態に係る映像配信システム１によれば、図９の項目（Ｂ）に示したように、低解像度の三次元映像を再生可能なモバイル端末４４が、ストリームＳ２を受信できない場合、又は、受信したストリームＳ２が欠損により使用できない場合には、モバイル端末４４は、ストリームＳ２の右視用映像に代えて、ストリームＳ１の左視用映像を使用することができる。これにより、ストリームＳ２を受信できない場合等であっても、二次元映像とはなるが映像の再生を担保することが可能となる。
【００６２】
本実施の形態に係る映像配信システム１では、サーバ２がストリームＳ１〜Ｓ４を通信ネットワーク３に送信した。しかしながら、サーバ２は、受信する映像再生装置によって、送信するストリームを異ならせることもできる。この場合、例えば映像再生装置は自己の再生能力を送信要求に含ませる。サーバ２は、受信した再生能力によって、当該映像再生装置に送信するストリームをストリームＳ１〜Ｓ４から選択する。サーバ２側で送信するストリームを選択するとしても、サーバ２は、高解像度の三次元映像のみに相当する符号化を行えばよく、低解像度の二次元映像、低解像度の三次元映像、高解像度の二次元映像、及び高解像度の三次元映像をそれぞれ別個に符号化する場合と比較して、サーバ２における処理負荷を軽減することが可能である。
【００６３】
さらに本実施の形態に係る映像配信システム１において、映像再生装置は、ストリームＳ１〜Ｓ４のうちから必要なストリームを選択して受信していたが、これに限られるものではない。映像再生装置は、ストリームＳ１〜Ｓ４の一部又は全部を受信し、受信したストリームから必要なストリームを選択して再生するようにしてもよい。
【００６４】
さらに本実施の形態に係る映像配信システム１において、各映像再生装置は、低解像度の二次元映像、低解像度の三次元映像、高解像度の二次元映像、及び高解像度の三次元映像のいずれか一つを再生するようになっていた。しかしながら、映像再生装置が、これらの映像の二つ以上を再生することができてもよい。その場合、映像再生装置は、例えばユーザから指定された再生モードに応じて、映像の再生に用いるストリームをストリームＳ１〜Ｓ４のうちから選択する。
【００６５】
本実施の形態に係る映像配信システム１におけるサーバ２や各映像再生装置の機能は、ＣＰＵ（Central Processing Unit）やＤＳＰ（Digital Signal Processor）等の演算回路とプログラムとを組み合わせて実現することもできるし、専用処理回路を用いて実現することもできる。
【００６６】
なお、今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれることが意図される。
【符号の説明】
【００６７】
２ サーバ
３ 通信ネットワーク
４１，４２ ＳＴＢ
４３，４４ モバイル端末
５１，５２ テレビ
１４１〜１４４ 映像処理部
【技術分野】
【０００１】
本発明は、映像配信システム、映像送信装置、及び映像再生装置に関し、特に、再生能力が異なる複数の映像再生装置を備える映像配信システム、映像送信装置、及び映像再生装置に関する。
【背景技術】
【０００２】
下記特許文献１には、両眼に液晶シャッタを備える専用の眼鏡をユーザが着用することによって、三次元映像を視聴可能な映像表示装置が開示されている。当該映像表示装置においては、左視用映像と右視用映像とを所定の周期で表示画面に交互に表示する。そして、液晶シャッタを制御することによって、左視用映像の表示タイミングに同期して眼鏡の左眼を透光状態、右眼を遮光状態とし、右視用映像の表示タイミングに同期して眼鏡の右眼を透光状態、左眼を遮光状態とすることにより、三次元映像の視聴が可能となる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第３２７３０７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
二次元映像のストリームを映像配信サーバから通信ネットワークを介して映像再生装置に送信する映像配信システムが実用化されている。この種の映像配信システムでは、高解像度の二次元映像の再生に対応したテレビや、低解像度の二次元映像の再生に対応したモバイル端末等、再生能力が異なる複数種類の映像再生装置が通信ネットワークに接続されることがある。そして、三次元映像の再生に対応したテレビやモバイル端末等の普及が今後進むと、通信ネットワークに接続される映像再生装置の種類もいっそう増大することが予想される。このように再生能力が異なる多種の映像再生装置が通信ネットワークに接続された状況において、各映像再生装置の再生能力に応じたストリームを個別に映像配信サーバで生成し当該サーバから各映像再生装置に送信したのでは、映像配信サーバにおけるストリーム生成の処理負荷が増大する。
【０００５】
本発明はかかる事情に鑑みて成されたものであり、再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像配信サーバにおけるストリーム生成の処理負荷の増大を回避することが可能な映像配信システム、映像送信装置、及び映像再生装置を得ることを目的とするものである。
【課題を解決するための手段】
【０００６】
本発明の第１の態様に係る映像配信システムは、映像再生装置に映像ストリームを送信する映像送信装置と、前記映像ストリームを受信し再生する前記映像再生装置と、を備え、前記映像送信装置は、前記映像ストリームとして、第１の解像度の二次元映像を再生するための第１のストリームと、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、を送信し、前記映像再生装置は、前記第１乃至第４のストリームのうち必要なストリームを選択して映像を再生することを特徴とするものである。
【０００７】
第１の態様に係る映像配信システムによれば、映像送信装置は、第１乃至第４のストリームを送信し、映像再生装置は、第２の解像度の三次元映像という一種類の映像に相当する第１乃至第４のストリームのうち必要なストリームを選択して、第１の解像度の二次元映像や三次元映像、第２の解像度の二次元映像といった他の種類の映像も再生する。従って、例えば再生可能な映像の解像度や三次元映像の再生の可否等の再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像送信装置は第１乃至第４のストリームを生成して通信ネットワークに送信すれば足りるため、映像送信装置におけるストリーム生成の処理負荷の増大を回避することが可能となる。
【０００８】
本発明の第２の態様に係る映像配信システムは、第１の態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【０００９】
第２の態様に係る映像配信システムによれば、映像再生装置が、第３のストリームを受信できない場合、又は、受信した第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第３のストリームを受信できない場合等であっても、第２の解像度の三次元映像の再生を担保することが可能となる。
【００１０】
本発明の第３の態様に係る映像配信システムは、第１又は第２の態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第４のストリームを受信できないとき、又は、受信した前記第４のストリームが欠損により使用できないとき、前記第２のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【００１１】
第３の態様に係る映像配信システムによれば、映像再生装置が、第４のストリームを受信できない場合、又は、受信した第４のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第２のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第４のストリームを受信できない場合等であっても、第２の解像度の三次元映像の再生を担保することが可能となる。
【００１２】
本発明の第４の態様に係る映像配信システムは、第１〜第３のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２及び第４のストリームの映像に代えて、前記第１及び第３のストリームの映像を使用することを特徴とするものである。
【００１３】
第４の態様に係る映像配信システムによれば、映像再生装置が、第２のストリームを受信できない場合、又は、受信した第２のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第２及び第４のストリームの映像に代えて、第１及び第３のストリームの映像を使用する。これにより、第２のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで第２の解像度の再生を担保することが可能となる。
【００１４】
本発明の第５の態様に係る映像配信システムは、第１〜第４のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２及び第３のストリームを受信できないとき、又は、受信した前記第２及び第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し、前記第２乃至第４のストリームの映像に代えて当該映像を使用することを特徴とするものである。
【００１５】
第５の態様に係る映像配信システムによれば、映像再生装置が、第２及び第３のストリームを受信できない場合、又は、受信した第２及び第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の三次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成し、第２乃至第４のストリームの映像に代えて当該映像を使用する。これにより、第２及び第３のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで第２の解像度の再生を担保することが可能となる。
【００１６】
本発明の第６の態様に係る映像配信システムは、第１〜第５のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第２の解像度の二次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生することを特徴とするものである。
【００１７】
第６の態様に係る映像配信システムによれば、映像再生装置が、第３のストリームを受信できない場合、又は、受信した第３のストリームが欠損により使用できない場合には、当該映像再生装置は、第２の解像度の二次元映像を再生するにあたって、第１のストリームの第１の解像度の映像をスケーリングアップして第２の解像度の映像を生成する。これにより、第３のストリームを受信できない場合等であっても、第２の解像度の再生を担保することが可能となる。
【００１８】
本発明の第７の態様に係る映像配信システムは、第１〜第６のいずれか一つの態様に係る映像配信システムにおいて特に、前記映像再生装置は、前記第１の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２のストリームの映像に代えて、前記第１のストリームの映像を使用することを特徴とするものである。
【００１９】
第７の態様に係る映像配信システムによれば、映像再生装置が、第２のストリームを受信できない場合、又は、受信した第２のストリームが欠損により使用できない場合には、当該映像再生装置は、第１の解像度の三次元映像を再生するにあたって、第２のストリームの映像に代えて、第１のストリームの映像を使用する。これにより、第２のストリームを受信できない場合等であっても、二次元映像とはなるが三次元映像のフォーマットのままで映像の再生を担保することが可能となる。
【００２０】
他の観点によれば、本発明は、映像再生装置に映像ストリームを送信する映像送信装置を提供することができる。映像送信装置は、前記映像ストリームとして、第１の解像度の二次元映像を再生するための第１のストリームと、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、を生成して送信する。
【００２１】
他の観点によれば、本発明は、映像送信装置から受信した映像ストリームを再生する映像再生装置を提供することができる。映像再生装置は、前記映像送信装置から前記映像ストリームとして送信された、第１の解像度の二次元映像を再生するための第１のストリーム、前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリーム、前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリーム、及び前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームのうち必要なストリームを選択して映像を再生する。
【発明の効果】
【００２２】
本発明によれば、再生能力が異なる複数の映像再生装置が通信ネットワークに接続された場合であっても、映像配信サーバにおけるストリーム生成の処理負荷の増大を回避することが可能となる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施の形態に係る映像配信システムの全体構成を示す図である。
【図２】ＳＴＢの構成を簡略化して示すブロック図である。
【図３】ＳＴＢの構成を簡略化して示すブロック図である。
【図４】テレビにおいて三次元映像のコンテンツを再生する場合のＳＴＢの処理を示す図である。
【図５】モバイル端末の構成を簡略化して示すブロック図である。
【図６】モバイル端末の構成を簡略化して示すブロック図である。
【図７】ＳＴＢが受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【図８】ＳＴＢが受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【図９】モバイル端末が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【発明を実施するための形態】
【００２４】
以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、異なる図面において同一の符号を付した要素は、同一又は相応する要素を示すものとする。
【００２５】
図１は、本発明の実施の形態に係る映像配信システム１の全体構成を示す図である。図１に示すように映像配信システム１は、サーバ２と、当該サーバ２とＩＰ（Internet Protocol）ネットワーク等の通信ネットワーク３を介して接続される、映像再生装置としてのＳＴＢ（Set Top Box）４１，４２と、液晶表示装置等のテレビ５１，５２と、映像再生装置としてのモバイル端末４３，４４とを備えている。テレビ５１はＳＴＢ４１に接続されており、テレビ５２はＳＴＢ４２に接続されている。なお、ＳＴＢ４１，４２の機能がテレビ５１，５２に内蔵されていてもよい。サーバ２は、例えば、地上デジタル放送やＢＳデジタル放送の放送波を受信して、その映像のトランスポートストリーム（以下「ストリーム」と称す）を、通信ネットワーク３を介して再送信するための映像送信装置である。この映像配信システム１には、再生可能な映像の解像度、及び三次元映像の再生の可否が互いに異なる複数の映像再生装置（ＳＴＢ４１，４２及びモバイル端末４３，４４）が含まれる。なお、映像配信システム１には、再生可能な映像の解像度、及び三次元映像の再生の可否が同じ映像再生装置が複数含まれていてもよい。
【００２６】
図１に示した例において、テレビ５１は、高解像度（ＨＤ：High Definition）の二次元映像の再生に対応しており、三次元映像の再生には対応していない。テレビ５２は、高解像度の三次元映像の再生に対応している。テレビ５２は、高解像度の三次元映像の再生に加えて、高解像度の二次元映像の再生に対応していてもよい。モバイル端末４３は、低解像度（ＳＤ：Standard Definition）の二次元映像の再生に対応しており、三次元映像の再生には対応していない。モバイル端末４４は、低解像度の三次元映像の再生に対応している。モバイル端末４４は、低解像度の三次元映像の再生に加えて、低解像度の二次元映像の再生に対応していてもよい。本実施の形態では解像度が二種類（ＨＤ及びＳＤ）である場合の例について説明するが、この例に限るものではなく、三種類以上の解像度があってもよい。また、図１に示したＳＴＢ４１，４２及びモバイル端末４３，４４以外の映像再生装置が通信ネットワーク３に接続されていてもよい。
【００２７】
サーバ２は、同一のコンテンツに関して４つのストリームＳ１〜Ｓ４を生成して通信ネットワーク３に送信（例えばマルチキャスト送信）する。４つのストリームＳ１〜Ｓ４をまとめて用いることで、当該コンテンツに関して高解像度の三次元映像を構成することが可能である。すなわち、サーバ２は、当該コンテンツに関して高解像度の三次元映像に相当するストリームを生成すればよい。本実施の形態において、各映像再生装置は４つのストリームＳ１〜Ｓ４のうち必要なストリームを組み合わせて再生することで、各々の再生能力に応じた再生を行うことができる。
【００２８】
ストリームＳ１は、低解像度の二次元映像を表すストリームであり、低解像度の三次元映像の再生においては左視用映像のストリームとして用いることが可能である。ストリームＳ１は、例えば、ＭＶＣ（Multiview Video Coding）におけるベースビュー（Base View）として圧縮符号化されたストリームである。
【００２９】
ストリームＳ２は、低解像度の三次元映像を再生する場合に、右視用映像を構成するのにストリームＳ１とともに用いるストリームである。ストリームＳ２は、ＭＶＣによって非ベースビューとして圧縮符号化されたストリームであり、ストリームＳ２には、ストリームＳ１との差分情報（つまり、各フレームに関する左視用映像と右視用映像との差分情報）が含まれる。
【００３０】
ストリームＳ３は、高解像度の二次元映像を再生する場合にストリームＳ１とともに用いられるストリームであり、高解像度の三次元映像の再生においては左視用映像のストリームとして用いることが可能である。ストリームＳ３は、ＳＶＣ（Scalable Video Coding）によって圧縮符号化されたストリームであり、ストリームＳ３には、ストリームＳ１との差分情報（つまり、各フレームに関する高解像度の左視用映像と低解像度の左視用映像との差分情報）が含まれる。
【００３１】
ストリームＳ４は、高解像度の三次元映像を再生する場合に、右視用映像を構成するのにストリームＳ２とともに用いるストリームである。ストリームＳ４は、ＳＶＣによって圧縮符号化されたストリームであり、ストリームＳ４には、ストリームＳ２との差分情報（つまり、各フレームに関する高解像度の右視用映像と低解像度の右視用映像との差分情報）が含まれる。
【００３２】
ここで、ストリームＳ１〜Ｓ４は、互いに異なるパケット識別子（ＰＩＤ：Packet Identifier）を用いて伝送することができる。各映像再生装置は、そのパケット識別子によってストリームを区別することができる。サーバ２がストリームＳ１〜Ｓ４を通信ネットワーク３に送信するにあたり、ストリームＳ１とストリームＳ２〜Ｓ４とで、通信の優先度を異なる値に設定してもよい。望ましくは、Base viewであるストリームＳ１の優先度を、Enhanced viewであるストリームＳ２〜Ｓ４の優先度よりも高く設定する。通信の優先度は、例えばＱｏＳ（Quality of Service）のランクによって設定することができる。ストリームＳ１のランクを高く設定することにより、データの欠損をできるだけ生じさせることなくストリームＳ１を送信する。
【００３３】
図２は、ＳＴＢ４１の構成を簡略化して示すブロック図である。図２に示すようにＳＴＢ４１は、受信部１１１、バッファ１２１、デコーダ１３１、映像処理部１４１、及び送信部１５１を備えている。ＳＴＢ４１に接続されているテレビ５１は高解像度の二次元映像の再生に対応している（三次元映像の再生には対応していない）ため、受信部１１１は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１，Ｓ３を選択して通信ネットワーク３から受信する。
【００３４】
ストリームＳ１，Ｓ３は、受信部１１１からバッファ１２１に入力され、バッファ１２１において一時的に記憶される。バッファ１２１から出力されたストリームＳ１，Ｓ３は、デコーダ１３１に入力される。デコーダ１３１は、ストリームＳ１，Ｓ３をデコードすることにより、映像信号を出力する。デコーダ１３１から出力された映像信号は、映像処理部１４１に入力される。映像処理部１４１は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の映像信号を生成して出力する。映像処理部１４１から出力された映像信号は、送信部１５１に入力される。送信部１５１は、入力された映像信号をテレビ５１に向けて送信し、これにより、テレビ５１において高解像度の二次元映像が再生される。
【００３５】
図３は、ＳＴＢ４２の構成を簡略化して示すブロック図である。図３に示すようにＳＴＢ４２は、受信部１１２、バッファ１２２、デコーダ１３２、映像処理部１４２、及び送信部１５２を備えている。ＳＴＢ４２に接続されているテレビ５２は高解像度の三次元映像の再生に対応しているため、受信部１１２は、サーバ２から送信されたストリームＳ１〜Ｓ４の全てを選択して通信ネットワーク３から受信する。
【００３６】
ストリームＳ１〜Ｓ４は、受信部１１２からバッファ１２２に入力され、バッファ１２２において一時的に記憶される。バッファ１２２から出力されたストリームＳ１〜Ｓ４は、デコーダ１３２に入力される。デコーダ１３２は、ストリームＳ１〜Ｓ４をデコードすることにより、映像信号を出力する。デコーダ１３２から出力された映像信号は、映像処理部１４２に入力される。映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成して出力する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成して出力する。映像処理部１４２から出力された映像信号は、送信部１５２に入力される。送信部１５２は、入力された映像信号をテレビ５２に向けて送信し、これにより、テレビ５２において高解像度の三次元映像が再生される。
【００３７】
図４は、テレビ５２において三次元映像のコンテンツを再生する場合のＳＴＢ４２の処理を示す図である。三次元映像の再生を行う場合には、人間の両眼視差を反映した左視用映像と右視用映像とが所定の周期（例えば１／１２０秒周期。左視用画像と右視用画像とのペアで１フレームが構成されるため、フレームレートは６０ｆｐｓとなる。）で交互に表示される。図４に示した例では、第０フレームの左視用映像Ｆ０Ｌ、第０フレームの右視用映像Ｆ０Ｒ、第１フレームの左視用映像Ｆ１Ｌ、第１フレームの右視用映像Ｆ１Ｒ、第２フレームの左視用映像Ｆ２Ｌ、第２フレームの右視用映像Ｆ２Ｒ、第３フレームの左視用映像Ｆ３Ｌ、第３フレームの右視用映像Ｆ３Ｒ、・・・が、この順にテレビ５２の表示画面に表示される。また、三次元映像の視聴を行う場合には、ユーザは、左眼及び右眼の両眼に液晶シャッタが組み込まれた所定の眼鏡を装着する。そして、各フレームの左視用映像Ｆ０Ｌ，Ｆ１Ｌ，Ｆ２Ｌ，Ｆ３Ｌ，・・・を表示画面に表示するタイミングに同期して、眼鏡の左眼が透光状態（ＯＮ）、右眼が遮光状態（ＯＦＦ）とされ、各フレームの右視用映像Ｆ０Ｒ，Ｆ１Ｒ，Ｆ２Ｒ，Ｆ３Ｒ，・・・を表示画面に表示するタイミングに同期して、眼鏡の右眼が透光状態（ＯＮ）、左眼が遮光状態（ＯＦＦ）とされる。
【００３８】
図５は、モバイル端末４３の構成を簡略化して示すブロック図である。図５に示すようにモバイル端末４３は、受信部１１３、バッファ１２３、デコーダ１３３、映像処理部１４３、及び表示部１５３を備えている。モバイル端末４３は低解像度の二次元映像の再生に対応している（三次元映像の再生には対応していない）ため、受信部１１３は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１を選択して通信ネットワーク３から受信する。
【００３９】
ストリームＳ１は、受信部１１３からバッファ１２３に入力され、バッファ１２３において一時的に記憶される。バッファ１２３から出力されたストリームＳ１は、デコーダ１３３に入力される。デコーダ１３３は、ストリームＳ１をデコードすることにより、映像信号を出力する。デコーダ１３３から出力された映像信号は、映像処理部１４３に入力される。映像処理部１４３は、ストリームＳ１の低解像度の映像信号を出力する。映像処理部１４３から出力された映像信号は表示部１５３に入力され、これにより、表示部１５３において低解像度の二次元映像が再生される。
【００４０】
図６は、モバイル端末４４の構成を簡略化して示すブロック図である。図６に示すようにモバイル端末４４は、受信部１１４、バッファ１２４、デコーダ１３４、映像処理部１４４、及び表示部１５４を備えている。モバイル端末４４は低解像度の三次元映像の再生に対応しているため、受信部１１４は、サーバ２から送信されたストリームＳ１〜Ｓ４のうち、ストリームＳ１，Ｓ２を選択して通信ネットワーク３から受信する。
【００４１】
ストリームＳ１，Ｓ２は、受信部１１４からバッファ１２４に入力され、バッファ１２４において一時的に記憶される。バッファ１２４から出力されたストリームＳ１，Ｓ２は、デコーダ１３４に入力される。デコーダ１３４は、ストリームＳ１，Ｓ２をデコードすることにより、映像信号を出力する。デコーダ１３４から出力された映像信号は、映像処理部１４４に入力される。映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号を出力する。また、映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成して出力する。映像処理部１４４から出力された映像信号は表示部１５４に入力され、これにより、表示部１５４において低解像度の三次元映像が再生される。
【００４２】
図７は、ＳＴＢ４１が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００４３】
項目（Ａ）に示すように、ＳＴＢ４１がストリームＳ１，Ｓ３を受信しており、かつ、ストリームＳ１，Ｓ３に欠損が無い（又はエラーコンシールメントや誤り訂正等によって修復できる程度に欠損が少ない）場合には、映像処理部１４１は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の映像信号を生成する。そして、当該映像信号が、高解像度の二次元映像の再生に使用される。
【００４４】
項目（Ｂ）に示すように、通信エラー等に起因してＳＴＢ４１がストリームＳ３を受信しておらず、又は、修復できない程度にストリームＳ３の欠損が多い場合には、映像処理部１４１は、ストリームＳ１の低解像度の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の映像信号を生成することができる。そして、生成された高解像度の二次元映像の映像信号を使用して、二次元映像の再生が行われる。
【００４５】
図８は、ＳＴＢ４２が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００４６】
項目（Ａ）に示すように、ＳＴＢ４１がストリームＳ１〜Ｓ４を受信しており、かつ、ストリームＳ１〜Ｓ４に欠損が無い（又は修復できる程度に欠損が少ない）場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成する。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４７】
項目（Ｂ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ３を受信しておらず、又は、修復できない程度にストリームＳ３の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号と、ストリームＳ４の差分情報とに基づいて、高解像度の右視用映像の映像信号を生成する。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４８】
項目（Ｃ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ４を受信しておらず、又は、修復できない程度にストリームＳ４の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の右視用映像の映像信号を生成することができる。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００４９】
項目（Ｄ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ３，Ｓ４を受信しておらず、又は、修復できない程度にストリームＳ３，Ｓ４の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成し、その後、当該映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の右視用映像の映像信号を生成することができる。そして、生成された高解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００５０】
項目（Ｅ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ２を受信しておらず、又は、修復できない程度にストリームＳ２の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の映像信号と、ストリームＳ３の差分情報とに基づいて、高解像度の左視用映像の映像信号を生成する。また、映像処理部１４２は、高解像度の右視用映像の映像信号に代えて、上記で生成した高解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても高解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５１】
項目（Ｆ）に示すように、通信エラー等に起因してＳＴＢ４２がストリームＳ２，Ｓ３を受信しておらず、又は、修復できない程度にストリームＳ２，Ｓ３の欠損が多い場合には、映像処理部１４２は、ストリームＳ１の低解像度の左視用映像の映像信号に対して画素補間等のスケーリングアップ処理を行うことによって、高解像度の左視用映像の映像信号を生成することができる。また、映像処理部１４２は、高解像度の右視用映像の映像信号に代えて、上記で生成した高解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても高解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５２】
図９は、モバイル端末４４が受信するストリームと、映像の再生に使用される映像信号との関係を示す図である。
【００５３】
項目（Ａ）に示すように、モバイル端末４４がストリームＳ１，Ｓ２を受信しており、かつ、ストリームＳ１，Ｓ２に欠損が無い（又は修復できる程度に欠損が少ない）場合には、映像処理部１４４は、ストリームＳ１の低解像度の左視用映像の映像信号と、ストリームＳ２の差分情報とに基づいて、低解像度の右視用映像の映像信号を生成する。そして、低解像度の左視用映像及び右視用映像の映像信号を使用して、三次元映像の再生が行われる。
【００５４】
項目（Ｂ）に示すように、通信エラー等に起因してモバイル端末４４がストリームＳ２を受信しておらず、又は、修復できない程度にストリームＳ２の欠損が多い場合には、映像処理部１４４は、低解像度の右視用映像の映像信号に代えて、ストリームＳ１の低解像度の左視用映像の映像信号を使用することができる。つまり、左視用映像の表示期間のみならず右視用映像の表示期間においても低解像度の左視用映像を表示することにより、三次元映像のフォーマットで二次元映像の再生が行われる。
【００５５】
このように本実施の形態に係る映像配信システム１によれば、サーバ２は、ストリームＳ１〜Ｓ４を通信ネットワーク３に送信し、ＳＴＢ４１，４２及びモバイル端末４３，４４は、ストリームＳ１〜Ｓ４のうち、自身の再生能力、又は自身に接続されているテレビ５１，５２の再生能力に応じて必要なストリームを選択して通信ネットワーク３から受信する。従って、再生可能な映像の解像度や三次元映像の再生の可否等の再生能力が異なる複数の映像再生装置が通信ネットワーク３に接続された場合であっても、サーバ２は高解像度の三次元映像のみのストリームと同等のストリームＳ１〜Ｓ４を生成して通信ネットワーク３に送信すれば足りるため、サーバ２におけるストリーム生成の処理負荷の増大を回避することが可能となる。
【００５６】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｂ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ３を受信できない場合、又は、受信したストリームＳ３が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ１の低解像度の左視用映像に基づいて高解像度の左視用映像を生成することができる。これにより、ストリームＳ３を受信できない場合等であっても、高解像度の三次元映像の再生を担保することが可能となる。
【００５７】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｃ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ４を受信できない場合、又は、受信したストリームＳ４が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ２の低解像度の右視用映像に基づいて高解像度の右視用映像を生成することができる。これにより、ストリームＳ４を受信できない場合等であっても、高解像度の三次元映像の再生を担保することが可能となる。
【００５８】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｅ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ２を受信できない場合、又は、受信したストリームＳ２が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ２，Ｓ４の右視用映像に代えて、ストリームＳ１，Ｓ３の左視用映像を使用することができる。これにより、ストリームＳ２を受信できない場合等であっても、二次元映像とはなるが高解像度の再生を担保することが可能となる。
【００５９】
また、本実施の形態に係る映像配信システム１によれば、図８の項目（Ｆ）に示したように、高解像度の三次元映像を再生可能なＳＴＢ４２が、ストリームＳ２，Ｓ３を受信できない場合、又は、受信したストリームＳ２，Ｓ３が欠損により使用できない場合には、ＳＴＢ４２は、ストリームＳ１の低解像度の左視用映像に基づいて高解像度の左視用映像を生成し、当該左視用映像を、ストリームＳ３の左視用映像及びストリームＳ２，Ｓ４の右視用映像に代えて使用することができる。これにより、ストリームＳ２，Ｓ３を受信できない場合等であっても、二次元映像とはなるが高解像度の再生を担保することが可能となる。
【００６０】
また、本実施の形態に係る映像配信システム１によれば、図７の項目（Ｂ）に示したように、高解像度の二次元映像を再生可能なＳＴＢ４１が、ストリームＳ３を受信できない場合、又は、受信したストリームＳ３が欠損により使用できない場合には、ＳＴＢ４１は、ストリームＳ１の低解像度の映像に基づいて高解像度の映像を生成することができる。これにより、ストリームＳ３を受信できない場合等であっても、高解像度の再生を担保することが可能となる。
【００６１】
また、本実施の形態に係る映像配信システム１によれば、図９の項目（Ｂ）に示したように、低解像度の三次元映像を再生可能なモバイル端末４４が、ストリームＳ２を受信できない場合、又は、受信したストリームＳ２が欠損により使用できない場合には、モバイル端末４４は、ストリームＳ２の右視用映像に代えて、ストリームＳ１の左視用映像を使用することができる。これにより、ストリームＳ２を受信できない場合等であっても、二次元映像とはなるが映像の再生を担保することが可能となる。
【００６２】
本実施の形態に係る映像配信システム１では、サーバ２がストリームＳ１〜Ｓ４を通信ネットワーク３に送信した。しかしながら、サーバ２は、受信する映像再生装置によって、送信するストリームを異ならせることもできる。この場合、例えば映像再生装置は自己の再生能力を送信要求に含ませる。サーバ２は、受信した再生能力によって、当該映像再生装置に送信するストリームをストリームＳ１〜Ｓ４から選択する。サーバ２側で送信するストリームを選択するとしても、サーバ２は、高解像度の三次元映像のみに相当する符号化を行えばよく、低解像度の二次元映像、低解像度の三次元映像、高解像度の二次元映像、及び高解像度の三次元映像をそれぞれ別個に符号化する場合と比較して、サーバ２における処理負荷を軽減することが可能である。
【００６３】
さらに本実施の形態に係る映像配信システム１において、映像再生装置は、ストリームＳ１〜Ｓ４のうちから必要なストリームを選択して受信していたが、これに限られるものではない。映像再生装置は、ストリームＳ１〜Ｓ４の一部又は全部を受信し、受信したストリームから必要なストリームを選択して再生するようにしてもよい。
【００６４】
さらに本実施の形態に係る映像配信システム１において、各映像再生装置は、低解像度の二次元映像、低解像度の三次元映像、高解像度の二次元映像、及び高解像度の三次元映像のいずれか一つを再生するようになっていた。しかしながら、映像再生装置が、これらの映像の二つ以上を再生することができてもよい。その場合、映像再生装置は、例えばユーザから指定された再生モードに応じて、映像の再生に用いるストリームをストリームＳ１〜Ｓ４のうちから選択する。
【００６５】
本実施の形態に係る映像配信システム１におけるサーバ２や各映像再生装置の機能は、ＣＰＵ（Central Processing Unit）やＤＳＰ（Digital Signal Processor）等の演算回路とプログラムとを組み合わせて実現することもできるし、専用処理回路を用いて実現することもできる。
【００６６】
なお、今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれることが意図される。
【符号の説明】
【００６７】
２ サーバ
３ 通信ネットワーク
４１，４２ ＳＴＢ
４３，４４ モバイル端末
５１，５２ テレビ
１４１〜１４４ 映像処理部
【特許請求の範囲】
【請求項１】
映像再生装置に映像ストリームを送信する映像送信装置と、
前記映像ストリームを受信し再生する前記映像再生装置と、
を備え、
前記映像送信装置は、前記映像ストリームとして、
第１の解像度の二次元映像を再生するための第１のストリームと、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、
を送信し、
前記映像再生装置は、前記第１乃至第４のストリームのうち必要なストリームを選択して映像を再生する、映像配信システム。
【請求項２】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１に記載の映像配信システム。
【請求項３】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第４のストリームを受信できないとき、又は、受信した前記第４のストリームが欠損により使用できないとき、前記第２のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１又は２に記載の映像配信システム。
【請求項４】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２及び第４のストリームの映像に代えて、前記第１及び第３のストリームの映像を使用する、請求項１〜３のいずれか一つに記載の映像配信システム。
【請求項５】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２及び第３のストリームを受信できないとき、又は、受信した前記第２及び第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し、前記第２乃至第４のストリームの映像に代えて当該映像を使用する、請求項１〜４のいずれか一つに記載の映像配信システム。
【請求項６】
前記映像再生装置は、前記第２の解像度の二次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１〜５のいずれか一つに記載の映像配信システム。
【請求項７】
前記映像再生装置は、前記第１の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２のストリームの映像に代えて、前記第１のストリームの映像を使用する、請求項１〜６のいずれか一つに記載の映像配信システム。
【請求項８】
映像再生装置に映像ストリームを送信する映像送信装置であって、
前記映像ストリームとして、
第１の解像度の二次元映像を再生するための第１のストリームと、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、
を生成して送信する、映像送信装置。
【請求項９】
映像送信装置から受信した映像ストリームを再生する映像再生装置であって、
前記映像送信装置から前記映像ストリームとして送信された、
第１の解像度の二次元映像を再生するための第１のストリーム、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリーム、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリーム、及び
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームのうち必要なストリームを選択して映像を再生する、映像再生装置。
【請求項１】
映像再生装置に映像ストリームを送信する映像送信装置と、
前記映像ストリームを受信し再生する前記映像再生装置と、
を備え、
前記映像送信装置は、前記映像ストリームとして、
第１の解像度の二次元映像を再生するための第１のストリームと、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、
を送信し、
前記映像再生装置は、前記第１乃至第４のストリームのうち必要なストリームを選択して映像を再生する、映像配信システム。
【請求項２】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１に記載の映像配信システム。
【請求項３】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第４のストリームを受信できないとき、又は、受信した前記第４のストリームが欠損により使用できないとき、前記第２のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１又は２に記載の映像配信システム。
【請求項４】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２及び第４のストリームの映像に代えて、前記第１及び第３のストリームの映像を使用する、請求項１〜３のいずれか一つに記載の映像配信システム。
【請求項５】
前記映像再生装置は、前記第２の解像度の三次元映像を再生する場合に、前記第２及び第３のストリームを受信できないとき、又は、受信した前記第２及び第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し、前記第２乃至第４のストリームの映像に代えて当該映像を使用する、請求項１〜４のいずれか一つに記載の映像配信システム。
【請求項６】
前記映像再生装置は、前記第２の解像度の二次元映像を再生する場合に、前記第３のストリームを受信できないとき、又は、受信した前記第３のストリームが欠損により使用できないとき、前記第１のストリームの前記第１の解像度の映像をスケーリングアップして前記第２の解像度の映像を生成し再生する、請求項１〜５のいずれか一つに記載の映像配信システム。
【請求項７】
前記映像再生装置は、前記第１の解像度の三次元映像を再生する場合に、前記第２のストリームを受信できないとき、又は、受信した前記第２のストリームが欠損により使用できないとき、前記第２のストリームの映像に代えて、前記第１のストリームの映像を使用する、請求項１〜６のいずれか一つに記載の映像配信システム。
【請求項８】
映像再生装置に映像ストリームを送信する映像送信装置であって、
前記映像ストリームとして、
第１の解像度の二次元映像を再生するための第１のストリームと、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリームと、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリームと、
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームと、
を生成して送信する、映像送信装置。
【請求項９】
映像送信装置から受信した映像ストリームを再生する映像再生装置であって、
前記映像送信装置から前記映像ストリームとして送信された、
第１の解像度の二次元映像を再生するための第１のストリーム、
前記第１の解像度の三次元映像と前記第１のストリームとの差分である第２のストリーム、
前記第１の解像度より高い第２の解像度の二次元映像と前記第１のストリームとの差分である第３のストリーム、及び
前記第２の解像度の三次元映像と前記第１乃至第３のストリームとの差分である第４のストリームのうち必要なストリームを選択して映像を再生する、映像再生装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−２２２４２６（Ｐ２０１２−２２２４２６Ａ）
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願番号】特願２０１１−８３３９７（Ｐ２０１１−８３３９７）
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【出願人】（５０２３１２４９８）住友電工ネットワークス株式会社 (212)
【Ｆターム（参考）】
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【出願人】（５０２３１２４９８）住友電工ネットワークス株式会社 (212)
【Ｆターム（参考）】
[ Back to top ]