映像送信装置ならびに映像受信装置、および映像送受信制御装置
【課題】
映像ストリームを再生開始時にネットワークバスを通じて送受信する構成において、ユーザの特殊再生開始の指示から特殊再生画面が表示されるまで時間がかかる。
【解決手段】
ストリーム生成部１６０は特殊再生が行われることが想定されるときは、記録媒体１４０に格納された映像ストリームを送信する際、送信しているピクチャの時間軸上の時間よりも未来のピクチャをあらかじめ読出し、特殊再生用のピクチャに変換して映像ストリームに多重して出力する。
映像ストリームを再生開始時にネットワークバスを通じて送受信する構成において、ユーザの特殊再生開始の指示から特殊再生画面が表示されるまで時間がかかる。
【解決手段】
ストリーム生成部１６０は特殊再生が行われることが想定されるときは、記録媒体１４０に格納された映像ストリームを送信する際、送信しているピクチャの時間軸上の時間よりも未来のピクチャをあらかじめ読出し、特殊再生用のピクチャに変換して映像ストリームに多重して出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は映像を送信する装置ならびに映像を受信する装置、および映像の送受信制御装置に関するものである。
【背景技術】
【０００２】
本技術分野の背景技術として、例えば、特開２００７−６０２５号公報（特許文献１）がある。該公報は「［課題］ 映像データ全体を受信して録画することなく、再生開始画像を選択可能にすることにある。また、サーバの蓄積装置には映像ファイルとは別にシーン記述ファイルを蓄積することなく、早送り／早戻し再生などを行って再生開始画像を選択可能とし、選択した画像近傍を先頭にして通常速で映像を再生できるようにすること［解決手段］ネットワークを介して映像配信サーバより映像データを受信して映像を再生する映像再生装置において、任意のサイズのデータを飛び越しては少なくとも１枚のＩピクチャを含む映像データを受信することで、複数のＩピクチャを飛ばすごとに少なくとも１枚のＩピクチャを受信及び抽出し、該Ｉピクチャを抽出した順番に順番号を付して該順番号からＩピクチャを読み出しできるようにＩピクチャを含む映像データを記録媒体に保存し、該記録媒体から該Ｉピクチャを読み出して再生することで飛び飛びの早送り／早戻し再生もしくはサムネール表示を行」うとしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−６０２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ビデオ機器に記録した映像を表示装置（例えばテレビ）にて再生する際、ビデオ機器は情報圧縮した映像ストリームをテレビに送り、テレビ側で映像ストリームのデコードを行い表示する構成がある。双方の接続は直結による接続ではなく、他の機器と共通したネットワークバスを通じて行うことができることから接続構成の多様性に富み、ＤＬＮＡ（Ｄｉｇｉｔａｌ Ｌｉｖｉｎｇ Ｎｅｔｗｏｒｋ Ａｌｌｉａｎｃｅ）（登録商標）といった業界団体により標準化が進められていることから、このような接続形態が普及することが予想される。
【０００５】
ビデオ機器が映像ストリームをテレビに送る場合、テレビがデコード可能な映像ストリームの形式で出力を行う。例えばビデオ機器はＭＰＥＧ−４ ＡＶＣ（ＩＳＯ／ＩＥＣ １４４９６−１０）で記録を行い、テレビはＭＰＥＧ−２（ＩＳＯ／ＩＥＣ １３８１８−２）のデコードに対応しているときは、ビデオ機器はＭＰＥＧ−４ ＡＶＣからＭＰＥＧ−２にトランスコードを行い、テレビに映像ストリームを送信する。
【０００６】
また、他の機器と共通したネットワークバスを使用することから、映像ストリームの送受は他のデータの送受による遅延の影響を受ける。
【０００７】
トランスコード処理に伴う遅延、ネットワーク遅延に伴うデコード遅延により、ユーザが再生開始や早送り、巻戻しといった特殊再生の指示をビデオ機器に行ってから、テレビにピクチャデータが表示されるまでの遅延は、従来の映像信号を専用線を用いて送信する方法に比べ大きくなる。
【０００８】
ネットワークバスを通じて受信したストリームを再生中に、早送り、巻戻しといった特殊再生を行う際、ストリームの表示に必要なビットレートを超えた大きな帯域を用いることで、特殊再生が開始されるまでの遅延をある程度低減することができる。しかし高画質の映像であるほど、ビットレートが高くなるため表示は遅れることになる。ビットレートを下げることで表示を早めることができるが、画質が低くなってしまう。特殊再生の指示は定期的に発生するものではなく、ユーザが不必要と判断した部分を飛ばしながら視聴するときなど局所的に発生する。このため、特殊再生においてある定まったビットレート、もしくは画質に固定することは難しい。
【０００９】
特開２００７−６０２５号公報の技術は、あらかじめ特殊再生用の画像を受信しておき、再生機内のバッファに保持するが、再生前に特殊再生用の画像を受信する時間が必要となり、再生開始までに時間を要してしまう。
【００１０】
本発明は、上記課題を鑑み、映像ストリームをネットワーク越しに受け取って映像を特殊再生するとき、ユーザの特殊再生開始の指示から特殊再生画面が表示されるまで時間がかかることを低減する映像送信装置を提供することを目的とする。
【００１１】
上記目的を達成するため、本発明は次のように構成される。
【課題を解決するための手段】
【００１２】
上記の課題を解決するため、本発明は、例えば、ネットワークから制御信号を受け取り、制御信号の解釈を行う制御部と、複数のピクチャデータからなる記録映像ストリームを記録する記録媒体と、記録媒体から記録映像ストリームを読み出し、制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、ストリーム生成部が出力する出力映像ストリームをネットワークに送出するネットワークＩ／Ｆを有してなり、ストリーム生成部は出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信することを特徴する。
なお、本発明は、例えば、以下のようなことを特徴とする。
特殊再生用のピクチャデータは記録映像ストリームと同じ圧縮方法を用いて圧縮されていることを特徴とする。
あるいは、特殊再生用のピクチャデータは記録映像ストリームと異なる圧縮方法を用いて、特殊再生用のピクチャデータのビット量を削減することを特徴とする。
あるいは、特殊再生用のピクチャデータは画面内符号化を用いて圧縮されたピクチャデータ、もしくは画面内符号化を用いて圧縮されたピクチャデータを参照する画面間符号化を用いて圧縮されたピクチャデータであることを特徴とする。
あるいは、制御部は再生開始の制御信号を受信した時間を記憶し，直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さいときは複数の特殊再生用のピクチャデータを多重するようストリーム生成部を制御することを特徴とする。
あるいは、制御部は直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さい回数を記憶し、あらかじめ定めた回数を超えた場合は複数の特殊再生用のピクチャデータを多重するようストリーム生成部を制御することを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置の接続情報を持ち、接続情報に含まれる映像受信装置の画面解像度に基づいて特殊再生用のピクチャデータの解像度を制御することを特徴とした映像送信装置を特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置の受信ビット量情報を持ち、受信ビット量が大きいほど出力映像ストリームのビット量を高くすることを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置から出力映像ストリームを要求する制御信号を受信した際、ストリーム生成部に出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御することを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置から、特殊再生を要求する制御信号を受信した際、ストリーム生成部に出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御することを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータの枚数を増やす制御を行うことを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータの時間軸上のフレーム間隔を大きくすることを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータのビット量を増やすことを特徴とする。
あるいは、制御部は記録映像ストリームに含まれるピクチャデータのうち、画面内符号化を行ったピクチャデータを特殊再生用のピクチャデータとし、特殊再生用のピクチャデータは記録映像ストリームにおいて画面内符号化を行ったピクチャデータが含まれるグループオブピクチャよりも先に送信することを特徴とする。
あるいは、ストリーム生成部は量子化係数を変更することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御することを特徴とする。
あるいは、ストリーム生成部は解像度を変更して特殊再生用のピクチャデータのビット量を制御することを特徴とする。
あるいは、特殊再生用のピクチャデータの解像度の変更は画素間引きにより行うことを特徴とする。
あるいは、ストリーム生成部は量子化係数を変更すること、もしくは解像度を変更して特殊再生用のピクチャデータのビット量を制御すること、もしくは特殊再生用のピクチャデータの圧縮フォーマットを変えてビット量を制御することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御することを特徴とする。
あるいは、制御部は、記録媒体に記録された記録映像ストリームのうち、出力映像ストリームの画面内符号化されたピクチャデータと特殊再生用のピクチャデータのビット量の和と、画面内符号化されたピクチャデータのビット量が同等となるよう量子化係数を制御することを特徴とする。
【００１３】
その他、発明が解決しようとする課題に記載した目的は特許請求の範囲に記載の発明により達成される。
【発明の効果】
【００１４】
本発明によれば、ユーザが特殊再生開始などの指示をビデオ機器に行ってから、特殊再生が行われるまでの遅延を低減する映像送信装置を提供することができる。
【００１５】
なお、本発明は、例えば、以下のような効果を有する。
【００１６】
受信機において、特殊再生用のピクチャデータのデコーダが不要になり、回路規模を増大することなく、特殊再生の操作から再生開始までのレスポンスを向上できる。
あるいは、特殊再生用のピクチャデータに要するビット量を削減することができ、出力映像ストリームのビットあたりの画質を向上できる。
あるいは、受信機において、特殊再生用のピクチャデータのデコード時に参照画像を格納するバッファが不要となり、必要とするメモリ量を減らすことができる。
あるいは、頻繁に特殊再生を繰り返すときに特殊再生が開始されるまでの時間が短縮される。
あるいは、特殊再生用のピクチャデータが送信される時間は局所的になるので、特殊再生用のピクチャデータ送信に伴う画質低下が発生する期間が少なくすむ。
あるいは、受信側で保持する画像の枚数を最適化できる。
あるいは、受信側で保持する画像の枚数を最適化できる特殊再生時に拡大，縮小処理が必要なくなり，特殊再生速度が向上する。
あるいは、ネットワークの状態に応じて特殊再生用のピクチャデータの画質、および出力映像ストリーム全体の画質が向上する。
あるいは、原則常に特殊再生のレスポンスが向上する出力映像ストリームを送出できる。
あるいは、特殊再生が行われるときだけ特殊再生用のピクチャデータを送信するため、特殊再生を行わず再生のみ行うシステムで再生画質が向上する。
あるいは、特殊再生のフレームレートを上げ、滑らかに再生できる。
あるいは、画質を落とさず特殊再生速度が上がる。
あるいは、ビットあたりの特殊再生用のピクチャデータの情報量を増やすことができ特殊再生速度が向上する。
【００１７】
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００１８】
【図１】第一の実施例における映像送信装置の一例を示す概略図
【図２】第一の実施例において記録映像ストリームを出力するまでを示すシーケンス図
【図３】第一の実施例において特殊再生を行うときのシーケンス図
【図４】第一の実施例において送信される出力映像ストリームおよびピクチャデータ
【図５】第一の実施例において特殊再生が予想される場合に送信される出力映像ストリームおよびピクチャデータ
【図６】第二の実施例において特殊再生が予想される場合に送信される出力映像ストリームおよびピクチャデータ
【図７】第三の実施例において巻戻し再生を行う際に送信される出力映像ストリームおよびピクチャデータ
【図８】第三の実施例において作成する特殊再生用のピクチャデータの時間軸上のフレーム位置
【図９】第四の実施例において表示する特殊再生中の画像
【発明を実施するための形態】
【００１９】
以下、本発明の実施形態を図面を用いて説明する。
【実施例１】
【００２０】
図１は映像送信装置の一例を示す概略図である。
【００２１】
映像送信装置１００は映像受信装置３００とネットワーク２００により接続されており、映像受信装置３００から制御信号を受け取り、再生開始の制御信号である場合は出力映像ストリームを映像受信装置３００に出力する。
【００２２】
映像送信装置１００はネットワークＩ／Ｆ１１０、制御部１２０、バス１３０、記録媒体１４０、ストリーム生成部１６０から構成される。
【００２３】
ネットワークＩ／Ｆ１１０はネットワーク２００から情報を受け取り、制御部１２０に供給するとともに、制御部１２０、ストリーム生成部１６０が出力するデータをネットワーク２００に出力する。
【００２４】
制御部１２０はネットワークＩ／Ｆ３１０、ネットワーク２００、ネットワークＩ／Ｆ１１０を通じて制御部３２０が出力する制御信号を受け取り、制御信号に応じて記録媒体１４０、ストリーム生成部１６０を制御する。
【００２５】
バス１３０は制御部１２０の出力する制御信号を記録媒体１４０、ストリーム生成部１６０に供給するバスである。
【００２６】
記録媒体１４０は複数の記録映像ストリームを記録する媒体である。制御部１２０からファイル名、再生開始時間を受け取り、対応する記録映像ストリームをストリーム生成部１６０に出力する。
【００２７】
ストリーム生成部１６０は記録映像ストリームを記録媒体１４０から受け取り、制御部１２０から再生可能な出力映像ストリームのフォーマットをバス１３０を通じて受け取り、記録媒体１４０に記録された記録映像ストリームとフォーマットが異なる場合はトランスコードし、出力映像ストリームを出力する。また、特殊再生用のピクチャデータを作成し、出力映像ストリームに多重する。
【００２８】
ストリーム再生部３３０はネットワークＩ／Ｆ１１０、ネットワーク２００、ネットワークＩ／Ｆ３１０を通じて出力映像ストリームを受け取り、デコード処理を行いピクチャデータを得る。バッファ３４０はピクチャデータを一時的に格納する。ストリーム再生部３３０は一定の間隔（秒間３０フレームの場合３３ｍｓ）でバッファ３４０からデコードしたピクチャデータを読み出し、表示部３５０に出力する。表示部３５０はピクチャデータを表示する。
【００２９】
図２は映像送信装置１００が映像受信装置３００から再生開始の制御信号を受け取り、記録映像ストリームを出力するまでを示すシーケンス図である。
【００３０】
映像送信装置１００、および映像受信装置３００はネットワーク２００に接続した際、互いの存在を認識することができない。このため映像送信装置１００は通知４００をネットワーク２００に対し、あらかじめ定めた時間間隔で送出する。映像受信装置３００は通知４００をネットワーク２００から受け取ると、映像送信装置１００のアドレスを得ることができ、デバイス発見４１０を映像送信装置１００に返す。映像送信装置１００はデバイス発見４１０を受け取ることにより、映像受信装置３００のアドレスを得ることができ、映像受信装置３００だけにデータを送ることができる。
【００３１】
続いて映像受信装置３００はデバイス・サービス情報取得４２０を映像送信装置１００に出力し、デバイス・サービス情報４３０を得る。デバイス・サービス情報４３０は映像送信装置１００が提供するサービスが含まれており、出力映像ストリームを配信するサーバであることや、通信に用いるプロトコルの情報などが含まれている。映像受信装置３００は映像送信装置１００が出力映像ストリームを配信することができることを認識できる。
【００３２】
映像受信装置３００はデバイス記述４４０を送信する。デバイス記述４４０には映像受信装置３００が再生可能な映像フォーマットの情報、再生開始時のビットレート情報などが含まれている。
【００３３】
映像受信装置３００を操作しているユーザは映像送信装置１００の記録映像ストリームを表示させる操作をする。このとき映像受信装置３００はコンテンツ取得４５０を出力し、コンテンツリスト４６０を得る。コンテンツリスト４６０は映像送信装置１００が保持しているファイル名が記載されている。コンテンツリスト４６０を得ることにより、映像受信装置３００はユーザにファイル名の一覧を表示する。
【００３４】
ユーザがファイル名の一覧から一つの記録映像ストリームを選択し、再生の動作を行うと、映像受信装置３００に含まれる制御部３２０はネットワークＩ／Ｆ３１０を経由して再生開始４７０を送信する。再生開始４７０には再生開始の命令、ファイル名、再生開始時間、再生時間が含まれている。ここでファイル名は記録媒体１４０に含まれる記録映像ストリームを特定するための情報を示す。再生開始時間はファイル名で示される記録映像ストリームの時間軸上の再生を開始する時間位置を示す。再生時間は記録映像ストリームの時間軸上の再生開始時間から再生を行う時間を示す。
【００３５】
映像送信装置１００は再生開始４７０を受け取ると、ストリーム送信４８０を行い、出力映像ストリームを出力する。映像受信装置３００は得た出力映像ストリームをデコードし、表示することでユーザはピクチャデータを見ることができる。
【００３６】
次に図４を用いて映像送信装置１００が図２の再生開始４７０を受け取り、ストリーム送信４８０を行うまでを説明した後、図３、図５を用いて特殊再生時のストリーム送信について述べる。
【００３７】
映像送信装置１００は再生開始４７０を受け取ると、制御部１２０を用いて再生開始４７０に含まれる再生開始の命令、ファイル名、再生開始時間、再生時間を分離する。制御部１２０は記録媒体１４０に対し、ファイル名と等しい記録映像ストリームを再生開始時間から出力するよう制御信号を出力する。
【００３８】
図４において、横軸は時間を示し、ストリーム生成部１６０が出力する出力映像ストリームのピクチャデータ、ストリーム再生部３３０が出力するピクチャデータをそれぞれ表す。出力映像ストリームのピクチャデータにおいて、Ｉ、Ｐ、Ｂは予測符号化方法を示し、Ｉは画面内予測符号化、Ｐは時間軸上の過去の画像に対する画面間予測符号化、Ｂは時間軸上の過去と未来の双方に対する画面間予測符号化を行うことを示す。Ｉ、Ｐ、Ｂの後に続く数字は表示部３５０に表示する順番を示す。
ストリーム生成部１６０はピクチャデータＢ０、Ｂ１がピクチャデータＩ２を参照して予測符号化を行っているため、時間ｔ１０でピクチャデータＩ２を出力し、次いでピクチャデータＢ０、Ｂ１を出力する。同様にピクチャデータＢ３、Ｂ４はピクチャデータＰ５を参照して予測符号化しているため、ピクチャデータＰ５、Ｂ３、Ｂ４の順で出力を行う。
ストリーム再生部３３０は出力映像ストリームを順次受け取り、デコード処理を行いピクチャデータをバッファ３４０に格納する。ｔ１１のタイミングよりピクチャデータＢ０を読み出し、出力を行う。ストリーム再生部３３０は一定間隔でピクチャデータＢ１、Ｉ２、Ｂ３…とピクチャデータを表示順に読み出す。
【００３９】
次に図３を用いて特殊再生時がおこなわれる場合のシーケンスを説明する。図２における再生開始４７０までのシーケンスは同様であるため、同一番号を付して説明を省略する。ユーザが早送りの操作を行うと、映像受信装置３００は特殊再生の制御信号として、再生開始４７１、および再生開始４７２、再生開始４７３を出力する。再生開始４７１〜４７３は再生開始時間が例えば２秒ずつ異なっており、再生時間は例えば０．５秒を指定する。映像受信装置３００は対応したストリーム送信４８１、ストリーム送信４８２、ストリーム送信４８３を受け取り、出力映像ストリームの一部分を再生することで早送り映像を得る。
【００４０】
図５にこのときのストリーム生成部１６０、ストリーム再生部３３０の動きを示す。ストリーム生成部１６０は特殊再生が行われることが想定されるときは、時間ｔ２０においてピクチャデータＩ２を内部でデコードし、ピクチャデータＩ２の符号化フォーマットを変更するトランスコードを行う。次に時間軸上で未来のピクチャデータＩ８、Ｐ１１を読み出し、ピクチャデータＩ２と同様の符号化を行い特殊再生用のピクチャデータＩ８ａ、Ｐ１１ａとして送信する。ストリーム再生部３３０はピクチャデータＩ８ａ、Ｐ１１ａを受信するとデコード処理を行い、バッファ３４０に格納する。ストリーム再生部３３０は時間ｔ２１からピクチャデータＢ０の表示を行う。時間ｔ２２において、特殊再生するようユーザから指示があった場合は、制御部３２０は再生開始４７１を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＩ１４とする。また、制御部３２０はストリーム再生部３３０に対し、ピクチャデータＩ２出力後、バッファ３４０に格納しているピクチャデータＰ５を出力するよう制御を行う。時間ｔ２３において、ピクチャデータＰ５の出力が開始されると、制御部３２０は再生開始４７２を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＰ１７とする。またピクチャデータＰ５の出力後バッファ３４０に格納しているピクチャデータＩ８ａの特殊再生用のピクチャデータを出力するよう制御を行う。制御部３２０はピクチャデータＩ８ａの出力後ピクチャデータＰ１１ａ、Ｉ１４、Ｐ１７と出力することにより、早送り再生を可能とする。
【００４１】
図４のように出力映像ストリームを構成した場合、再生開始時間として時間ｔ２２でピクチャデータＩ８、時間ｔ２３でピクチャデータＰ１１を指定することになり、出力映像ストリームとしてピクチャデータＰ１１を送信しているときにピクチャデータＰ１１を出力することになり、特殊再生が一時的に止まってしまう。図５のように特殊再生に備え、ピクチャデータＩ８ａ、Ｐ１１ａを送信することにより、時間ｔ２２で特殊再生が開始されてからも時間軸上で一定のフレーム間隔でピクチャデータを読み出すことができ、特殊再生のレスポンスを向上することができる。
【００４２】
上記の例ではピクチャデータＩ８ａ、Ｐ１１ａをピクチャデータＩ２と同様の符号化方式にトランスコードとするとしたが、異なる符号化方式を用いて、ビット量を削減してもよい。圧縮率の高い符号化方式を用いることにより、出力映像ストリームのビット量を削減し、出力映像ストリームのビットあたりの画質を向上できる。
【００４３】
上記の例では特殊再生用のピクチャデータとしてピクチャデータＩ８ａ、Ｐ１１ａを送信しているが、ピクチャデータＩ８ａのみを特殊再生用のピクチャデータとして送信してもよい。記録映像ストリームのみトランスコードし出力映像ストリームとする場合に比べて、特殊再生用のピクチャデータをトランスコードにより作成し、出力映像ストリームに付加する方法はストリーム生成部１６０の処理負荷が多くなる。画面内符号化のみ行われているピクチャデータＩ８ａのみトランスコードする場合、参照画像バッファへのアクセス処理、予測画像の作成処理が不要となり、ストリーム生成部１６０の処理負荷増を減らすことができる。さらには出力映像ストリームのデコードを行う映像受信装置３００において、ストリーム再生部３３０の処理負荷を減らすことができる。
【００４４】
また、ピクチャデータＰ１１ａを特殊再生用のピクチャデータとしてトランスコードする際、画面内符号化のみを行いピクチャデータＩ１１ａとしてもよい。画面間符号化を行っているピクチャデータＰ１１ａに比べ、画面内符号化のみを用いたピクチャデータＩ１１ａはトランスコードの処理負荷が低く、ストリーム生成部１６０の処理負荷を減らすことができる。さらには出力映像ストリームのデコードを行う映像受信装置３００において、ストリーム再生部３３０の処理負荷を減らすことができる。
【００４５】
特殊再生用のピクチャデータを増やすと出力映像ストリームのビット量が増加するため、特殊再生用のピクチャデータの枚数が増えるごとに量子化係数を変え、特殊再生用のピクチャデータ１枚あたりのビット量を減らしてもよい。
【００４６】
また、特殊再生用のピクチャデータの解像度をスケーリング、もしくは画素間引きにより小さくしてビット量を減らしてもよい。スケーリングによる解像度変換は画質に優れる利点があり、画素間引きによる解像度変換は処理負荷が小さい利点がある。
【００４７】
量子化係数の変更と、解像度変換を併用して特殊再生用のピクチャデータ１枚あたりのビット量を減らしてもよい。
【００４８】
特殊再生用の１枚あたりのビット量を減らすことで、ネットワーク伝送による遅延が少なくなるため特殊再生速度が向上する。
【００４９】
記録媒体１４０に格納されているＩピクチャのビット量と、出力映像ストリームのＩピクチャと特殊再生用のピクチャデータのビット量の和が同等となるよう量子化係数を制御してもよい。ビット量を制御することにより記録媒体１４０に格納されている記録映像ストリームと同等のビット量となり、特殊再生用ピクチャデータの付加による伝送遅延が小さくなる。
【００５０】
また、特殊再生を終了した後のあらかじめ定めた一定期間のストリーム送信では特殊再生用のピクチャデータとして、時間軸上において離れたフレームのピクチャデータを送信してもよい。図４に示す例では特殊再生用のピクチャデータとしてピクチャデータＩ８、Ｐ１１を送信したが、例えばピクチャデータＩ１４、Ｉ２０とする。ピクチャデータのフレーム間隔を空けることにより、早送りの速度を上げることができ、ユーザは所望の部分まで素早い早送りを続けることができる。
【００５１】
特殊再生を終了した後のあらかじめ定めた一定期間のストリーム送信ではＩピクチャのビット量を減らし、特殊再生用のピクチャデータに多くのビット量を割り当てるようにしてもよい。特殊再生用のピクチャデータのビット量を増やすことで早送り時の画質を向上することができる。
【実施例２】
【００５２】
本発明の第二の実施例では、特殊再生用のピクチャデータを多重するトリガとなる制御信号について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００５３】
図１において、制御部１２０は図３における再生開始４７０を受信すると、受信時間を保持する。制御部１２０は前回の再生開始の制御信号を受信した時間と、今回の再生開始４７０を受信した時間の差分を計算し、ストリーム生成部１６０に対し出力映像ストリームに挿入する特殊再生用のピクチャデータの枚数を設定する。図４に示す例では、特殊再生用のピクチャデータを２つ付加しているが、２枚以上のピクチャデータを送信してもよい。例えばテレビ番組を視聴中に広告放送であるＣＭが放送された際、早送りを行いＣＭをスキップし、通常再生に戻した際にＣＭ期間である場合、再度早送りが行われる。このように特殊再生の直後には再度特殊再生が行われることが多いため、再生開始の制御信号が発行される時間間隔が短い場合は出力映像ストリームに含まれる特殊再生用のピクチャデータの枚数を増やし、ストリーム生成部１６０の処理遅延、ネットワーク２００の伝送遅延が大きくなっても表示するピクチャデータが枯渇し一時停止することなく特殊再生が可能になる。
【００５４】
上記の例では再生開始の制御信号が発行される時間間隔が短い場合に特殊再生用のピクチャデータの枚数を増やすとしたが、時間間隔に加えて一定時間内に特殊再生の制御信号を受け取った回数をカウントし、一定値以上であれば、特殊再生用のピクチャデータを送信するようにしてもよい。特殊再生用のピクチャデータの枚数が多く送信される時間は局所的になるので、特殊再生用のピクチャデータ送信に伴う画質低下が発生する期間が少なくできる。
【００５５】
また、映像受信装置の性能を前提として特殊再生用のピクチャデータ枚数を決定してもよい。図２のデバイス記述４４０において、映像受信装置３００はバッファ容量を映像送信装置１００に送信する。制御部１２０は得られたバッファ容量から映像受信装置３００が保持できる特殊再生用のピクチャデータの枚数を計算し、ストリーム生成部１６０に送信する。ストリーム生成部１６０は制御部１２０の制御信号に基づき特殊再生用のピクチャデータを生成する。
【００５６】
映像受信装置３００のバッファ容量をあらかじめ知り特殊再生用のピクチャデータの枚数を計算することで、映像受信装置３００はより多くの特殊再生用のピクチャデータを保持でき、ストリーム生成部１６０の遅延、ネットワーク２００の遅延が大きくなっても表示するピクチャデータが枯渇し停止することなく特殊再生が可能になる。より素早く特殊再生を開始することができる。バッファ容量が少ない場合は特殊再生用のピクチャデータを少なくすることで出力映像ストリームのビット量を少なくすることができ、出力映像ストリームの伝送に関わる遅延を小さくすることができる。
【００５７】
上記の例ではデバイス記述４４０からバッファ容量を得たが、この他映像受信装置３００の表示部３５０の解像度を得て、特殊再生用のピクチャデータの解像度としてもよい。表示部３５０の解像度にあわせた特殊再生用のピクチャデータを作成することで表示部３５０に表示する際のスケーリング処理を減らすことができ、より素早く特殊再生を開始することができる。
【００５８】
また図３においてデバイス・サービス情報４３０から映像受信装置３００が受け取ることのできる出力映像ストリームの最大ビット量を得て、出力映像ストリームに含まれる特殊再生用のピクチャデータのビット量を決めてもよい。映像送信装置１００はネットワーク２００の状態に応じて受信ビット量が大きいほど前記出力映像ストリームのビット量を高くすることで、特殊再生用のピクチャデータの画質、および出力映像ストリーム全体の画質を決定でき、よりよい画質を持つ出力映像ストリームを出力できる。
【００５９】
上記の例において、制御部１２０はリセット後、前回の再生開始の制御信号を受信した時間に時間が設定されていない場合は特殊再生の制御信号を受け取るまで特殊再生用のピクチャデータを送信しないようストリーム生成部１６０を制御してもよい。特殊再生の制御信号を受信してから特殊再生用のピクチャデータを送信することで、特殊再生を行わず再生のみ行うシステムにおいて特殊再生用のピクチャデータの送信に伴うビット量を記録映像ストリームのピクチャデータにあてることができるため、再生画質が向上する。
【００６０】
上記の例では特殊再生用のピクチャデータとしてピクチャデータＩ８ａ、Ｐ１１ａを送信したが、制御部１２０は特殊再生用のピクチャデータの枚数を増やす際、ピクチャデータＢ９、Ｂ１０をトランスコードして特殊再生用のピクチャデータとして送信してもよい。特殊再生用のピクチャデータの枚数を増やし、時間軸上のフレーム間隔を短くすることで、特殊再生のフレームレートを上げ、滑らかに再生できる。
【００６１】
上記の例では再生開始の制御信号が発行される時間間隔が短い場合に特殊再生用のピクチャデータの枚数を増やすとしたが、時間軸上において離れたフレームのピクチャデータを選択して送信してもよい。図４に示す例では特殊再生用のピクチャデータとしてピクチャデータＩ８、Ｐ１１を送信したが、例えばピクチャデータＩ１４、Ｉ２０とする。ピクチャデータのフレーム間隔を大きくすることにより、早送りの速度を上げることができ、ユーザは所望の部分まで素早い早送りを続けることができる。
【００６２】
制御部１２０は前回の再生開始の制御信号を受信した時間と、今回の再生開始４７０を受信した時間の差分値があらかじめ定めた値より小さい場合、もしくは一定時間内に特殊再生の制御信号を受け取った回数があらかじめ定めた値より大きい場合は特殊再生用のピクチャデータに割り当てるビット量を増やしてもよい。特殊再生用のピクチャデータのビット量を増やすことで特殊再生時の再生画質が向上し、頻繁に特殊再生を行う際の画質を向上できる。
【００６３】
上記の例では特殊再生用のピクチャデータをトランスコードして送信したが、記録映像ストリームのピクチャデータ送信順を変更することで特殊再生のレスポンスを向上させてもよい。図６はストリーム生成部１６０が出力する出力映像ストリームと表示部３５０に表示されるピクチャデータを時間軸上に配置した図である。
【００６４】
出力映像ストリームにおいてピクチャデータＢ６、Ｂ７、Ｐ１１はピクチャデータＩ８を参照した予測符号化を行い、ピクチャデータＢ９、Ｂ１０はピクチャデータＩ８、Ｐ１１を参照した予測符号化が行われている。出力映像ストリームは時間ｔ４０から送信を行い時間ｔ４１から表示が行われる。時間ｔ４２においてユーザから特殊再生の指示がある場合、制御部３２０はピクチャデータＰ２３を再生開始時間とする再生開始４７０を映像送信装置１００に送信し、ピクチャデータＢ９の次にバッファ３４０に格納されているピクチャデータＰ１１を表示するようストリーム再生部３３０に制御信号を送る。
図５の出力映像ストリームと異なり、参照されるピクチャデータを１ＧＯＰ（グループオブピクチャ：画面間予測符号化されるピクチャデータと参照されるピクチャデータをまとめたピクチャデータ群）分ずらすことにより、特殊再生用のピクチャデータを送信することなく素早く特殊再生を開始することを可能とする。
【実施例３】
【００６５】
本発明の第三の実施例では、映像受信装置３００において巻戻し再生を操作開始からレスポンスよく開始する方法について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００６６】
図１において、ストリーム再生部３３０は特殊再生用のピクチャデータを受信するとバッファ３４０にあらかじめ定めた一定量を保持する。図７に映像受信装置３００が受信する出力映像ストリームと表示部３５０に出力するピクチャデータの関係を示す。また、巻戻し再生を行う際のシーケンスは図３に示す。映像受信装置３００のユーザが時間ｔ５０において巻戻し開始を操作した際、バッファ３４０には特殊再生用のピクチャデータとしてピクチャデータＰ１１ａ、Ｐ１４ａ、Ｐ１７ａを保持しているとする。制御部３２０はｔ５０の時点で保持している特殊再生用のピクチャデータのうち、表示していたピクチャデータＢ２０に最も近いピクチャデータＰ１７ａを出力するようストリーム再生部３３０を制御する。同時に再生開始４７１を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＰ８とする。ｔ５１においてピクチャデータＰ１７ａの表示が開始されると、制御部３２０はバッファ３４０に格納しているピクチャデータＰ１４ａを出力するようストリーム再生部３３０を制御する。同時に再生開始４７２を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＩ５とする。
【００６７】
巻戻し開始時にバッファ３４０に格納した特殊再生用のピクチャデータを出力することにより、巻戻し再生用のピクチャデータが映像送信装置１００から映像受信装置３００に供給されるまでのタイムラグを解消することができ、巻戻しの操作レスポンスを向上することができる。また、制御部３２０は保持している特殊再生用のピクチャデータの時間軸上のフレーム間隔と同じフレーム間隔となるピクチャデータを送信するよう制御を行うことで、巻戻し再生のフレームレートを一定にできる。
【００６８】
上記の例では巻戻し開始時にバッファ３４０に格納されている特殊再生用のピクチャデータを出力するとしたが、ストリーム再生部３３０は再生時にピクチャデータ出力を行うと同時に、再生したピクチャデータから特殊再生用のピクチャデータを生成しバッファ３４０に保持してもよい。図８に示すようにピクチャデータＢ３とＢ４のそれぞれの画素値の平均を取り、ピクチャデータＢ３とＢ４の時間軸上の中間の位置を示すピクチャデータＢ３ｂを作成し、特殊再生用のピクチャデータとする。同様にピクチャデータＢ６とＢ７からピクチャデータＢ６ｂを作成する。巻戻しの際はピクチャデータＢ６ｂ、Ｐ５ａ、Ｂ３ｂ、Ｉ２ａの順番に出力することにより、出力映像ストリームに含まれる特殊再生用のピクチャデータを再生する場合に比べフレームレートの高い巻戻し再生を行うことができる。
【００６９】
上記の例では特殊再生用のピクチャデータを保持するバッファ量はあらかじめ定めた値とする、としたが、制御部３２０は一定時間内にユーザからの巻戻し操作の制御信号を受け取った回数をカウントし、一定値以上であれば、保持する特殊再生用のピクチャデータの枚数を増やしてもよい。特殊再生用のピクチャデータを保持するバッファ量を変更することにより、巻戻し再生を繰り返してもレスポンスのよい巻戻しを行うことができる。
【００７０】
上記の例では特殊再生用のピクチャデータをバッファ３４０に保持するとしたが、制御部３２０あるいはストリーム再生部３３０は、情報圧縮を行いバッファ３４０に保持してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、あらかじめ定めた枚数おきに特殊再生用のピクチャデータをバッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの解像度を下げ、データサイズを減らしてバッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの量子化係数を変更し、データサイズを減らして、バッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの圧縮フォーマットを変更し、データサイズを減らして、バッファ３４０に格納してもよい。
特殊再生用のピクチャデータのビット量を減らすことにより、バッファ３４０の特殊再生用のピクチャデータの保持に要するビット量を小さくでき、より多くの特殊再生用のピクチャデータを保持することができる。
【００７１】
また、制御部３２０はバッファ３４０から特殊再生用のピクチャデータを削除する際、ストリーム再生部３３０が出力するピクチャデータと特殊再生用のピクチャデータの差分の総和があらかじめ定めた一定値以下であるときに削除を行う制御を行ってもよい。このように削除を行うことにより、バッファ３４０にはシーンチェンジ部分の特殊再生用のピクチャデータが残ることになり、何回も巻戻しが起きたときでも、巻戻し再生を停止する可能性が高いシーンチェンジ部分を表示することができる。
【００７２】
また、制御部３２０は、ストリーム再生部３３０が出力するピクチャデータと直前に出力したピクチャデータの差分の総和があらかじめ定めた一定値以上であるとき、バッファ３４０に特殊再生用のピクチャデータとして保持する制御を行ってもよい。このように制御を行うことにより、特殊再生用のピクチャデータにシーンチェンジ部分が含まれていなくても、巻戻しバッファに残しておくことが出来るようになり、巻戻し再生を停止する可能性が高いシーンチェンジ部分を表示することができる。
【実施例４】
【００７３】
本発明の第四の実施例では、映像受信装置３００における特殊再生の表示方法について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００７４】
図９に映像受信装置３００において早送りもしくは巻戻しの特殊再生を行っている際に表示部３５０に表示されている画像を示す。画像６００、６２０、６３０、６４０はバッファ３４０に格納されている特殊再生用のピクチャデータのサムネイル画像を示し、制御部３２０はストリーム再生部３３０に時間軸上のフレーム順に左から右に表示するよう制御を行う。画像６５０および画像６１０はストリーム再生部３３０が出力する出力映像ストリームのデコード画像である。
ユーザは特殊再生中に表示された特殊再生用のピクチャデータ、例えば画像６３０を選択する動作を行うと、制御部３２０は選択された特殊再生用のピクチャデータを読み出し、画像６５０および６１０の位置に表示し、再生を行うようストリーム再生部３３０に制御信号を送信する。
表示部３５０にバッファ３４０に格納した特殊再生用のピクチャデータを時系列順に表示することにより、早送り、巻戻し可能な時間が視覚的に確認できる。また、ユーザが直接特殊再生用のピクチャデータを選択して再生位置を指定することにより、早送り、巻き戻しに加えジャンプ再生が可能になる。
【００７５】
上記の例では制御部３２０は表示部３５０に特殊再生用のピクチャデータを表示する際、時間軸上のフレーム順に表示するとしたが、特殊再生用のピクチャデータと直前に表示した特殊再生用のピクチャデータの差分の総和があらかじめ定めた一定値以下であるとき、表示部３５０に表示するようにしてもよい。シーンの切り替わりなど画面全体が大きく変わるときは、特殊再生用のピクチャデータの差分の総和が大きくなる。本構成により、表示部３５０に表示される特殊再生用ピクチャデータはシーンの切り替わり部分が多くなり、再生中の映像から時間軸上で離れたフレームが表示されやすくなりジャンプ再生の利便性が増す。
【００７６】
上記の例では制御部３２０は表示部３５０に特殊再生用のピクチャデータを表示する際、時間軸上のフレーム順に表示するとしたが、制御部３２０はあらかじめ定めた時間軸上のフレーム間隔となるよう特殊再生用のピクチャデータを選択し、表示部３５０に表示してもよい。本構成により再生中の映像から時間軸上で離れたフレームが表示されやすくなりジャンプ再生の利便性が増す。
【００７７】
上記の例では制御部３２０は表示部３５０に右側に早送り用の特殊再生用のピクチャデータ、左側に巻戻し用の特殊再生用のピクチャデータを表示し、中央に再生中の画像６１０を表示するようにしたが、早送りの制御命令の回数があらかじめ定めた回数以上であるときに早送り用の特殊再生ピクチャデータのバッファ容量を増加させ、表示部３５０に表示している再生中の画面を中央左側に寄せて、早送り用の特殊再生用のピクチャデータの表示枚数を増やしてもよい。同様に巻戻しの制御命令の回数があらかじめ定めた回数以上であるときは巻戻し用の特殊再生用のピクチャデータのバッファ容量を増加させ、表示部３５０に表示している再生中の画面を中央右側に寄せて、巻戻し用の特殊再生用のピクチャデータの表示枚数を増やしてもよい。ユーザの操作に応じてバッファ容量、および画面表示を変更することで特殊再生の利便性が増す。
【００７８】
以上、添付図面を参照しながら本発明にかかる好適な実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００７９】
例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、２つ以上の実施例を、その全部または一部において同時に採用する構成も可能である。
【符号の説明】
【００８０】
１００ 映像送信装置
１１０ ネットワークＩ／Ｆ
１２０ 制御部
１３０ バス
１４０ 記録媒体
１６０ ストリーム生成部
２００ ネットワーク
３００ 映像受信装置
３１０ ネットワークＩ／Ｆ
３２０ 制御部
３３０ ストリーム再生部
３４０ バッファ
３５０ 表示部
【技術分野】
【０００１】
本発明は映像を送信する装置ならびに映像を受信する装置、および映像の送受信制御装置に関するものである。
【背景技術】
【０００２】
本技術分野の背景技術として、例えば、特開２００７−６０２５号公報（特許文献１）がある。該公報は「［課題］ 映像データ全体を受信して録画することなく、再生開始画像を選択可能にすることにある。また、サーバの蓄積装置には映像ファイルとは別にシーン記述ファイルを蓄積することなく、早送り／早戻し再生などを行って再生開始画像を選択可能とし、選択した画像近傍を先頭にして通常速で映像を再生できるようにすること［解決手段］ネットワークを介して映像配信サーバより映像データを受信して映像を再生する映像再生装置において、任意のサイズのデータを飛び越しては少なくとも１枚のＩピクチャを含む映像データを受信することで、複数のＩピクチャを飛ばすごとに少なくとも１枚のＩピクチャを受信及び抽出し、該Ｉピクチャを抽出した順番に順番号を付して該順番号からＩピクチャを読み出しできるようにＩピクチャを含む映像データを記録媒体に保存し、該記録媒体から該Ｉピクチャを読み出して再生することで飛び飛びの早送り／早戻し再生もしくはサムネール表示を行」うとしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−６０２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ビデオ機器に記録した映像を表示装置（例えばテレビ）にて再生する際、ビデオ機器は情報圧縮した映像ストリームをテレビに送り、テレビ側で映像ストリームのデコードを行い表示する構成がある。双方の接続は直結による接続ではなく、他の機器と共通したネットワークバスを通じて行うことができることから接続構成の多様性に富み、ＤＬＮＡ（Ｄｉｇｉｔａｌ Ｌｉｖｉｎｇ Ｎｅｔｗｏｒｋ Ａｌｌｉａｎｃｅ）（登録商標）といった業界団体により標準化が進められていることから、このような接続形態が普及することが予想される。
【０００５】
ビデオ機器が映像ストリームをテレビに送る場合、テレビがデコード可能な映像ストリームの形式で出力を行う。例えばビデオ機器はＭＰＥＧ−４ ＡＶＣ（ＩＳＯ／ＩＥＣ １４４９６−１０）で記録を行い、テレビはＭＰＥＧ−２（ＩＳＯ／ＩＥＣ １３８１８−２）のデコードに対応しているときは、ビデオ機器はＭＰＥＧ−４ ＡＶＣからＭＰＥＧ−２にトランスコードを行い、テレビに映像ストリームを送信する。
【０００６】
また、他の機器と共通したネットワークバスを使用することから、映像ストリームの送受は他のデータの送受による遅延の影響を受ける。
【０００７】
トランスコード処理に伴う遅延、ネットワーク遅延に伴うデコード遅延により、ユーザが再生開始や早送り、巻戻しといった特殊再生の指示をビデオ機器に行ってから、テレビにピクチャデータが表示されるまでの遅延は、従来の映像信号を専用線を用いて送信する方法に比べ大きくなる。
【０００８】
ネットワークバスを通じて受信したストリームを再生中に、早送り、巻戻しといった特殊再生を行う際、ストリームの表示に必要なビットレートを超えた大きな帯域を用いることで、特殊再生が開始されるまでの遅延をある程度低減することができる。しかし高画質の映像であるほど、ビットレートが高くなるため表示は遅れることになる。ビットレートを下げることで表示を早めることができるが、画質が低くなってしまう。特殊再生の指示は定期的に発生するものではなく、ユーザが不必要と判断した部分を飛ばしながら視聴するときなど局所的に発生する。このため、特殊再生においてある定まったビットレート、もしくは画質に固定することは難しい。
【０００９】
特開２００７−６０２５号公報の技術は、あらかじめ特殊再生用の画像を受信しておき、再生機内のバッファに保持するが、再生前に特殊再生用の画像を受信する時間が必要となり、再生開始までに時間を要してしまう。
【００１０】
本発明は、上記課題を鑑み、映像ストリームをネットワーク越しに受け取って映像を特殊再生するとき、ユーザの特殊再生開始の指示から特殊再生画面が表示されるまで時間がかかることを低減する映像送信装置を提供することを目的とする。
【００１１】
上記目的を達成するため、本発明は次のように構成される。
【課題を解決するための手段】
【００１２】
上記の課題を解決するため、本発明は、例えば、ネットワークから制御信号を受け取り、制御信号の解釈を行う制御部と、複数のピクチャデータからなる記録映像ストリームを記録する記録媒体と、記録媒体から記録映像ストリームを読み出し、制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、ストリーム生成部が出力する出力映像ストリームをネットワークに送出するネットワークＩ／Ｆを有してなり、ストリーム生成部は出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信することを特徴する。
なお、本発明は、例えば、以下のようなことを特徴とする。
特殊再生用のピクチャデータは記録映像ストリームと同じ圧縮方法を用いて圧縮されていることを特徴とする。
あるいは、特殊再生用のピクチャデータは記録映像ストリームと異なる圧縮方法を用いて、特殊再生用のピクチャデータのビット量を削減することを特徴とする。
あるいは、特殊再生用のピクチャデータは画面内符号化を用いて圧縮されたピクチャデータ、もしくは画面内符号化を用いて圧縮されたピクチャデータを参照する画面間符号化を用いて圧縮されたピクチャデータであることを特徴とする。
あるいは、制御部は再生開始の制御信号を受信した時間を記憶し，直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さいときは複数の特殊再生用のピクチャデータを多重するようストリーム生成部を制御することを特徴とする。
あるいは、制御部は直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さい回数を記憶し、あらかじめ定めた回数を超えた場合は複数の特殊再生用のピクチャデータを多重するようストリーム生成部を制御することを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置の接続情報を持ち、接続情報に含まれる映像受信装置の画面解像度に基づいて特殊再生用のピクチャデータの解像度を制御することを特徴とした映像送信装置を特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置の受信ビット量情報を持ち、受信ビット量が大きいほど出力映像ストリームのビット量を高くすることを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置から出力映像ストリームを要求する制御信号を受信した際、ストリーム生成部に出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御することを特徴とする。
あるいは、制御部は、ネットワークに接続され出力映像ストリームをデコードする映像受信装置から、特殊再生を要求する制御信号を受信した際、ストリーム生成部に出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御することを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータの枚数を増やす制御を行うことを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータの時間軸上のフレーム間隔を大きくすることを特徴とする。
あるいは、制御部は特殊再生用のピクチャデータのビット量を増やすことを特徴とする。
あるいは、制御部は記録映像ストリームに含まれるピクチャデータのうち、画面内符号化を行ったピクチャデータを特殊再生用のピクチャデータとし、特殊再生用のピクチャデータは記録映像ストリームにおいて画面内符号化を行ったピクチャデータが含まれるグループオブピクチャよりも先に送信することを特徴とする。
あるいは、ストリーム生成部は量子化係数を変更することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御することを特徴とする。
あるいは、ストリーム生成部は解像度を変更して特殊再生用のピクチャデータのビット量を制御することを特徴とする。
あるいは、特殊再生用のピクチャデータの解像度の変更は画素間引きにより行うことを特徴とする。
あるいは、ストリーム生成部は量子化係数を変更すること、もしくは解像度を変更して特殊再生用のピクチャデータのビット量を制御すること、もしくは特殊再生用のピクチャデータの圧縮フォーマットを変えてビット量を制御することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御することを特徴とする。
あるいは、制御部は、記録媒体に記録された記録映像ストリームのうち、出力映像ストリームの画面内符号化されたピクチャデータと特殊再生用のピクチャデータのビット量の和と、画面内符号化されたピクチャデータのビット量が同等となるよう量子化係数を制御することを特徴とする。
【００１３】
その他、発明が解決しようとする課題に記載した目的は特許請求の範囲に記載の発明により達成される。
【発明の効果】
【００１４】
本発明によれば、ユーザが特殊再生開始などの指示をビデオ機器に行ってから、特殊再生が行われるまでの遅延を低減する映像送信装置を提供することができる。
【００１５】
なお、本発明は、例えば、以下のような効果を有する。
【００１６】
受信機において、特殊再生用のピクチャデータのデコーダが不要になり、回路規模を増大することなく、特殊再生の操作から再生開始までのレスポンスを向上できる。
あるいは、特殊再生用のピクチャデータに要するビット量を削減することができ、出力映像ストリームのビットあたりの画質を向上できる。
あるいは、受信機において、特殊再生用のピクチャデータのデコード時に参照画像を格納するバッファが不要となり、必要とするメモリ量を減らすことができる。
あるいは、頻繁に特殊再生を繰り返すときに特殊再生が開始されるまでの時間が短縮される。
あるいは、特殊再生用のピクチャデータが送信される時間は局所的になるので、特殊再生用のピクチャデータ送信に伴う画質低下が発生する期間が少なくすむ。
あるいは、受信側で保持する画像の枚数を最適化できる。
あるいは、受信側で保持する画像の枚数を最適化できる特殊再生時に拡大，縮小処理が必要なくなり，特殊再生速度が向上する。
あるいは、ネットワークの状態に応じて特殊再生用のピクチャデータの画質、および出力映像ストリーム全体の画質が向上する。
あるいは、原則常に特殊再生のレスポンスが向上する出力映像ストリームを送出できる。
あるいは、特殊再生が行われるときだけ特殊再生用のピクチャデータを送信するため、特殊再生を行わず再生のみ行うシステムで再生画質が向上する。
あるいは、特殊再生のフレームレートを上げ、滑らかに再生できる。
あるいは、画質を落とさず特殊再生速度が上がる。
あるいは、ビットあたりの特殊再生用のピクチャデータの情報量を増やすことができ特殊再生速度が向上する。
【００１７】
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００１８】
【図１】第一の実施例における映像送信装置の一例を示す概略図
【図２】第一の実施例において記録映像ストリームを出力するまでを示すシーケンス図
【図３】第一の実施例において特殊再生を行うときのシーケンス図
【図４】第一の実施例において送信される出力映像ストリームおよびピクチャデータ
【図５】第一の実施例において特殊再生が予想される場合に送信される出力映像ストリームおよびピクチャデータ
【図６】第二の実施例において特殊再生が予想される場合に送信される出力映像ストリームおよびピクチャデータ
【図７】第三の実施例において巻戻し再生を行う際に送信される出力映像ストリームおよびピクチャデータ
【図８】第三の実施例において作成する特殊再生用のピクチャデータの時間軸上のフレーム位置
【図９】第四の実施例において表示する特殊再生中の画像
【発明を実施するための形態】
【００１９】
以下、本発明の実施形態を図面を用いて説明する。
【実施例１】
【００２０】
図１は映像送信装置の一例を示す概略図である。
【００２１】
映像送信装置１００は映像受信装置３００とネットワーク２００により接続されており、映像受信装置３００から制御信号を受け取り、再生開始の制御信号である場合は出力映像ストリームを映像受信装置３００に出力する。
【００２２】
映像送信装置１００はネットワークＩ／Ｆ１１０、制御部１２０、バス１３０、記録媒体１４０、ストリーム生成部１６０から構成される。
【００２３】
ネットワークＩ／Ｆ１１０はネットワーク２００から情報を受け取り、制御部１２０に供給するとともに、制御部１２０、ストリーム生成部１６０が出力するデータをネットワーク２００に出力する。
【００２４】
制御部１２０はネットワークＩ／Ｆ３１０、ネットワーク２００、ネットワークＩ／Ｆ１１０を通じて制御部３２０が出力する制御信号を受け取り、制御信号に応じて記録媒体１４０、ストリーム生成部１６０を制御する。
【００２５】
バス１３０は制御部１２０の出力する制御信号を記録媒体１４０、ストリーム生成部１６０に供給するバスである。
【００２６】
記録媒体１４０は複数の記録映像ストリームを記録する媒体である。制御部１２０からファイル名、再生開始時間を受け取り、対応する記録映像ストリームをストリーム生成部１６０に出力する。
【００２７】
ストリーム生成部１６０は記録映像ストリームを記録媒体１４０から受け取り、制御部１２０から再生可能な出力映像ストリームのフォーマットをバス１３０を通じて受け取り、記録媒体１４０に記録された記録映像ストリームとフォーマットが異なる場合はトランスコードし、出力映像ストリームを出力する。また、特殊再生用のピクチャデータを作成し、出力映像ストリームに多重する。
【００２８】
ストリーム再生部３３０はネットワークＩ／Ｆ１１０、ネットワーク２００、ネットワークＩ／Ｆ３１０を通じて出力映像ストリームを受け取り、デコード処理を行いピクチャデータを得る。バッファ３４０はピクチャデータを一時的に格納する。ストリーム再生部３３０は一定の間隔（秒間３０フレームの場合３３ｍｓ）でバッファ３４０からデコードしたピクチャデータを読み出し、表示部３５０に出力する。表示部３５０はピクチャデータを表示する。
【００２９】
図２は映像送信装置１００が映像受信装置３００から再生開始の制御信号を受け取り、記録映像ストリームを出力するまでを示すシーケンス図である。
【００３０】
映像送信装置１００、および映像受信装置３００はネットワーク２００に接続した際、互いの存在を認識することができない。このため映像送信装置１００は通知４００をネットワーク２００に対し、あらかじめ定めた時間間隔で送出する。映像受信装置３００は通知４００をネットワーク２００から受け取ると、映像送信装置１００のアドレスを得ることができ、デバイス発見４１０を映像送信装置１００に返す。映像送信装置１００はデバイス発見４１０を受け取ることにより、映像受信装置３００のアドレスを得ることができ、映像受信装置３００だけにデータを送ることができる。
【００３１】
続いて映像受信装置３００はデバイス・サービス情報取得４２０を映像送信装置１００に出力し、デバイス・サービス情報４３０を得る。デバイス・サービス情報４３０は映像送信装置１００が提供するサービスが含まれており、出力映像ストリームを配信するサーバであることや、通信に用いるプロトコルの情報などが含まれている。映像受信装置３００は映像送信装置１００が出力映像ストリームを配信することができることを認識できる。
【００３２】
映像受信装置３００はデバイス記述４４０を送信する。デバイス記述４４０には映像受信装置３００が再生可能な映像フォーマットの情報、再生開始時のビットレート情報などが含まれている。
【００３３】
映像受信装置３００を操作しているユーザは映像送信装置１００の記録映像ストリームを表示させる操作をする。このとき映像受信装置３００はコンテンツ取得４５０を出力し、コンテンツリスト４６０を得る。コンテンツリスト４６０は映像送信装置１００が保持しているファイル名が記載されている。コンテンツリスト４６０を得ることにより、映像受信装置３００はユーザにファイル名の一覧を表示する。
【００３４】
ユーザがファイル名の一覧から一つの記録映像ストリームを選択し、再生の動作を行うと、映像受信装置３００に含まれる制御部３２０はネットワークＩ／Ｆ３１０を経由して再生開始４７０を送信する。再生開始４７０には再生開始の命令、ファイル名、再生開始時間、再生時間が含まれている。ここでファイル名は記録媒体１４０に含まれる記録映像ストリームを特定するための情報を示す。再生開始時間はファイル名で示される記録映像ストリームの時間軸上の再生を開始する時間位置を示す。再生時間は記録映像ストリームの時間軸上の再生開始時間から再生を行う時間を示す。
【００３５】
映像送信装置１００は再生開始４７０を受け取ると、ストリーム送信４８０を行い、出力映像ストリームを出力する。映像受信装置３００は得た出力映像ストリームをデコードし、表示することでユーザはピクチャデータを見ることができる。
【００３６】
次に図４を用いて映像送信装置１００が図２の再生開始４７０を受け取り、ストリーム送信４８０を行うまでを説明した後、図３、図５を用いて特殊再生時のストリーム送信について述べる。
【００３７】
映像送信装置１００は再生開始４７０を受け取ると、制御部１２０を用いて再生開始４７０に含まれる再生開始の命令、ファイル名、再生開始時間、再生時間を分離する。制御部１２０は記録媒体１４０に対し、ファイル名と等しい記録映像ストリームを再生開始時間から出力するよう制御信号を出力する。
【００３８】
図４において、横軸は時間を示し、ストリーム生成部１６０が出力する出力映像ストリームのピクチャデータ、ストリーム再生部３３０が出力するピクチャデータをそれぞれ表す。出力映像ストリームのピクチャデータにおいて、Ｉ、Ｐ、Ｂは予測符号化方法を示し、Ｉは画面内予測符号化、Ｐは時間軸上の過去の画像に対する画面間予測符号化、Ｂは時間軸上の過去と未来の双方に対する画面間予測符号化を行うことを示す。Ｉ、Ｐ、Ｂの後に続く数字は表示部３５０に表示する順番を示す。
ストリーム生成部１６０はピクチャデータＢ０、Ｂ１がピクチャデータＩ２を参照して予測符号化を行っているため、時間ｔ１０でピクチャデータＩ２を出力し、次いでピクチャデータＢ０、Ｂ１を出力する。同様にピクチャデータＢ３、Ｂ４はピクチャデータＰ５を参照して予測符号化しているため、ピクチャデータＰ５、Ｂ３、Ｂ４の順で出力を行う。
ストリーム再生部３３０は出力映像ストリームを順次受け取り、デコード処理を行いピクチャデータをバッファ３４０に格納する。ｔ１１のタイミングよりピクチャデータＢ０を読み出し、出力を行う。ストリーム再生部３３０は一定間隔でピクチャデータＢ１、Ｉ２、Ｂ３…とピクチャデータを表示順に読み出す。
【００３９】
次に図３を用いて特殊再生時がおこなわれる場合のシーケンスを説明する。図２における再生開始４７０までのシーケンスは同様であるため、同一番号を付して説明を省略する。ユーザが早送りの操作を行うと、映像受信装置３００は特殊再生の制御信号として、再生開始４７１、および再生開始４７２、再生開始４７３を出力する。再生開始４７１〜４７３は再生開始時間が例えば２秒ずつ異なっており、再生時間は例えば０．５秒を指定する。映像受信装置３００は対応したストリーム送信４８１、ストリーム送信４８２、ストリーム送信４８３を受け取り、出力映像ストリームの一部分を再生することで早送り映像を得る。
【００４０】
図５にこのときのストリーム生成部１６０、ストリーム再生部３３０の動きを示す。ストリーム生成部１６０は特殊再生が行われることが想定されるときは、時間ｔ２０においてピクチャデータＩ２を内部でデコードし、ピクチャデータＩ２の符号化フォーマットを変更するトランスコードを行う。次に時間軸上で未来のピクチャデータＩ８、Ｐ１１を読み出し、ピクチャデータＩ２と同様の符号化を行い特殊再生用のピクチャデータＩ８ａ、Ｐ１１ａとして送信する。ストリーム再生部３３０はピクチャデータＩ８ａ、Ｐ１１ａを受信するとデコード処理を行い、バッファ３４０に格納する。ストリーム再生部３３０は時間ｔ２１からピクチャデータＢ０の表示を行う。時間ｔ２２において、特殊再生するようユーザから指示があった場合は、制御部３２０は再生開始４７１を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＩ１４とする。また、制御部３２０はストリーム再生部３３０に対し、ピクチャデータＩ２出力後、バッファ３４０に格納しているピクチャデータＰ５を出力するよう制御を行う。時間ｔ２３において、ピクチャデータＰ５の出力が開始されると、制御部３２０は再生開始４７２を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＰ１７とする。またピクチャデータＰ５の出力後バッファ３４０に格納しているピクチャデータＩ８ａの特殊再生用のピクチャデータを出力するよう制御を行う。制御部３２０はピクチャデータＩ８ａの出力後ピクチャデータＰ１１ａ、Ｉ１４、Ｐ１７と出力することにより、早送り再生を可能とする。
【００４１】
図４のように出力映像ストリームを構成した場合、再生開始時間として時間ｔ２２でピクチャデータＩ８、時間ｔ２３でピクチャデータＰ１１を指定することになり、出力映像ストリームとしてピクチャデータＰ１１を送信しているときにピクチャデータＰ１１を出力することになり、特殊再生が一時的に止まってしまう。図５のように特殊再生に備え、ピクチャデータＩ８ａ、Ｐ１１ａを送信することにより、時間ｔ２２で特殊再生が開始されてからも時間軸上で一定のフレーム間隔でピクチャデータを読み出すことができ、特殊再生のレスポンスを向上することができる。
【００４２】
上記の例ではピクチャデータＩ８ａ、Ｐ１１ａをピクチャデータＩ２と同様の符号化方式にトランスコードとするとしたが、異なる符号化方式を用いて、ビット量を削減してもよい。圧縮率の高い符号化方式を用いることにより、出力映像ストリームのビット量を削減し、出力映像ストリームのビットあたりの画質を向上できる。
【００４３】
上記の例では特殊再生用のピクチャデータとしてピクチャデータＩ８ａ、Ｐ１１ａを送信しているが、ピクチャデータＩ８ａのみを特殊再生用のピクチャデータとして送信してもよい。記録映像ストリームのみトランスコードし出力映像ストリームとする場合に比べて、特殊再生用のピクチャデータをトランスコードにより作成し、出力映像ストリームに付加する方法はストリーム生成部１６０の処理負荷が多くなる。画面内符号化のみ行われているピクチャデータＩ８ａのみトランスコードする場合、参照画像バッファへのアクセス処理、予測画像の作成処理が不要となり、ストリーム生成部１６０の処理負荷増を減らすことができる。さらには出力映像ストリームのデコードを行う映像受信装置３００において、ストリーム再生部３３０の処理負荷を減らすことができる。
【００４４】
また、ピクチャデータＰ１１ａを特殊再生用のピクチャデータとしてトランスコードする際、画面内符号化のみを行いピクチャデータＩ１１ａとしてもよい。画面間符号化を行っているピクチャデータＰ１１ａに比べ、画面内符号化のみを用いたピクチャデータＩ１１ａはトランスコードの処理負荷が低く、ストリーム生成部１６０の処理負荷を減らすことができる。さらには出力映像ストリームのデコードを行う映像受信装置３００において、ストリーム再生部３３０の処理負荷を減らすことができる。
【００４５】
特殊再生用のピクチャデータを増やすと出力映像ストリームのビット量が増加するため、特殊再生用のピクチャデータの枚数が増えるごとに量子化係数を変え、特殊再生用のピクチャデータ１枚あたりのビット量を減らしてもよい。
【００４６】
また、特殊再生用のピクチャデータの解像度をスケーリング、もしくは画素間引きにより小さくしてビット量を減らしてもよい。スケーリングによる解像度変換は画質に優れる利点があり、画素間引きによる解像度変換は処理負荷が小さい利点がある。
【００４７】
量子化係数の変更と、解像度変換を併用して特殊再生用のピクチャデータ１枚あたりのビット量を減らしてもよい。
【００４８】
特殊再生用の１枚あたりのビット量を減らすことで、ネットワーク伝送による遅延が少なくなるため特殊再生速度が向上する。
【００４９】
記録媒体１４０に格納されているＩピクチャのビット量と、出力映像ストリームのＩピクチャと特殊再生用のピクチャデータのビット量の和が同等となるよう量子化係数を制御してもよい。ビット量を制御することにより記録媒体１４０に格納されている記録映像ストリームと同等のビット量となり、特殊再生用ピクチャデータの付加による伝送遅延が小さくなる。
【００５０】
また、特殊再生を終了した後のあらかじめ定めた一定期間のストリーム送信では特殊再生用のピクチャデータとして、時間軸上において離れたフレームのピクチャデータを送信してもよい。図４に示す例では特殊再生用のピクチャデータとしてピクチャデータＩ８、Ｐ１１を送信したが、例えばピクチャデータＩ１４、Ｉ２０とする。ピクチャデータのフレーム間隔を空けることにより、早送りの速度を上げることができ、ユーザは所望の部分まで素早い早送りを続けることができる。
【００５１】
特殊再生を終了した後のあらかじめ定めた一定期間のストリーム送信ではＩピクチャのビット量を減らし、特殊再生用のピクチャデータに多くのビット量を割り当てるようにしてもよい。特殊再生用のピクチャデータのビット量を増やすことで早送り時の画質を向上することができる。
【実施例２】
【００５２】
本発明の第二の実施例では、特殊再生用のピクチャデータを多重するトリガとなる制御信号について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００５３】
図１において、制御部１２０は図３における再生開始４７０を受信すると、受信時間を保持する。制御部１２０は前回の再生開始の制御信号を受信した時間と、今回の再生開始４７０を受信した時間の差分を計算し、ストリーム生成部１６０に対し出力映像ストリームに挿入する特殊再生用のピクチャデータの枚数を設定する。図４に示す例では、特殊再生用のピクチャデータを２つ付加しているが、２枚以上のピクチャデータを送信してもよい。例えばテレビ番組を視聴中に広告放送であるＣＭが放送された際、早送りを行いＣＭをスキップし、通常再生に戻した際にＣＭ期間である場合、再度早送りが行われる。このように特殊再生の直後には再度特殊再生が行われることが多いため、再生開始の制御信号が発行される時間間隔が短い場合は出力映像ストリームに含まれる特殊再生用のピクチャデータの枚数を増やし、ストリーム生成部１６０の処理遅延、ネットワーク２００の伝送遅延が大きくなっても表示するピクチャデータが枯渇し一時停止することなく特殊再生が可能になる。
【００５４】
上記の例では再生開始の制御信号が発行される時間間隔が短い場合に特殊再生用のピクチャデータの枚数を増やすとしたが、時間間隔に加えて一定時間内に特殊再生の制御信号を受け取った回数をカウントし、一定値以上であれば、特殊再生用のピクチャデータを送信するようにしてもよい。特殊再生用のピクチャデータの枚数が多く送信される時間は局所的になるので、特殊再生用のピクチャデータ送信に伴う画質低下が発生する期間が少なくできる。
【００５５】
また、映像受信装置の性能を前提として特殊再生用のピクチャデータ枚数を決定してもよい。図２のデバイス記述４４０において、映像受信装置３００はバッファ容量を映像送信装置１００に送信する。制御部１２０は得られたバッファ容量から映像受信装置３００が保持できる特殊再生用のピクチャデータの枚数を計算し、ストリーム生成部１６０に送信する。ストリーム生成部１６０は制御部１２０の制御信号に基づき特殊再生用のピクチャデータを生成する。
【００５６】
映像受信装置３００のバッファ容量をあらかじめ知り特殊再生用のピクチャデータの枚数を計算することで、映像受信装置３００はより多くの特殊再生用のピクチャデータを保持でき、ストリーム生成部１６０の遅延、ネットワーク２００の遅延が大きくなっても表示するピクチャデータが枯渇し停止することなく特殊再生が可能になる。より素早く特殊再生を開始することができる。バッファ容量が少ない場合は特殊再生用のピクチャデータを少なくすることで出力映像ストリームのビット量を少なくすることができ、出力映像ストリームの伝送に関わる遅延を小さくすることができる。
【００５７】
上記の例ではデバイス記述４４０からバッファ容量を得たが、この他映像受信装置３００の表示部３５０の解像度を得て、特殊再生用のピクチャデータの解像度としてもよい。表示部３５０の解像度にあわせた特殊再生用のピクチャデータを作成することで表示部３５０に表示する際のスケーリング処理を減らすことができ、より素早く特殊再生を開始することができる。
【００５８】
また図３においてデバイス・サービス情報４３０から映像受信装置３００が受け取ることのできる出力映像ストリームの最大ビット量を得て、出力映像ストリームに含まれる特殊再生用のピクチャデータのビット量を決めてもよい。映像送信装置１００はネットワーク２００の状態に応じて受信ビット量が大きいほど前記出力映像ストリームのビット量を高くすることで、特殊再生用のピクチャデータの画質、および出力映像ストリーム全体の画質を決定でき、よりよい画質を持つ出力映像ストリームを出力できる。
【００５９】
上記の例において、制御部１２０はリセット後、前回の再生開始の制御信号を受信した時間に時間が設定されていない場合は特殊再生の制御信号を受け取るまで特殊再生用のピクチャデータを送信しないようストリーム生成部１６０を制御してもよい。特殊再生の制御信号を受信してから特殊再生用のピクチャデータを送信することで、特殊再生を行わず再生のみ行うシステムにおいて特殊再生用のピクチャデータの送信に伴うビット量を記録映像ストリームのピクチャデータにあてることができるため、再生画質が向上する。
【００６０】
上記の例では特殊再生用のピクチャデータとしてピクチャデータＩ８ａ、Ｐ１１ａを送信したが、制御部１２０は特殊再生用のピクチャデータの枚数を増やす際、ピクチャデータＢ９、Ｂ１０をトランスコードして特殊再生用のピクチャデータとして送信してもよい。特殊再生用のピクチャデータの枚数を増やし、時間軸上のフレーム間隔を短くすることで、特殊再生のフレームレートを上げ、滑らかに再生できる。
【００６１】
上記の例では再生開始の制御信号が発行される時間間隔が短い場合に特殊再生用のピクチャデータの枚数を増やすとしたが、時間軸上において離れたフレームのピクチャデータを選択して送信してもよい。図４に示す例では特殊再生用のピクチャデータとしてピクチャデータＩ８、Ｐ１１を送信したが、例えばピクチャデータＩ１４、Ｉ２０とする。ピクチャデータのフレーム間隔を大きくすることにより、早送りの速度を上げることができ、ユーザは所望の部分まで素早い早送りを続けることができる。
【００６２】
制御部１２０は前回の再生開始の制御信号を受信した時間と、今回の再生開始４７０を受信した時間の差分値があらかじめ定めた値より小さい場合、もしくは一定時間内に特殊再生の制御信号を受け取った回数があらかじめ定めた値より大きい場合は特殊再生用のピクチャデータに割り当てるビット量を増やしてもよい。特殊再生用のピクチャデータのビット量を増やすことで特殊再生時の再生画質が向上し、頻繁に特殊再生を行う際の画質を向上できる。
【００６３】
上記の例では特殊再生用のピクチャデータをトランスコードして送信したが、記録映像ストリームのピクチャデータ送信順を変更することで特殊再生のレスポンスを向上させてもよい。図６はストリーム生成部１６０が出力する出力映像ストリームと表示部３５０に表示されるピクチャデータを時間軸上に配置した図である。
【００６４】
出力映像ストリームにおいてピクチャデータＢ６、Ｂ７、Ｐ１１はピクチャデータＩ８を参照した予測符号化を行い、ピクチャデータＢ９、Ｂ１０はピクチャデータＩ８、Ｐ１１を参照した予測符号化が行われている。出力映像ストリームは時間ｔ４０から送信を行い時間ｔ４１から表示が行われる。時間ｔ４２においてユーザから特殊再生の指示がある場合、制御部３２０はピクチャデータＰ２３を再生開始時間とする再生開始４７０を映像送信装置１００に送信し、ピクチャデータＢ９の次にバッファ３４０に格納されているピクチャデータＰ１１を表示するようストリーム再生部３３０に制御信号を送る。
図５の出力映像ストリームと異なり、参照されるピクチャデータを１ＧＯＰ（グループオブピクチャ：画面間予測符号化されるピクチャデータと参照されるピクチャデータをまとめたピクチャデータ群）分ずらすことにより、特殊再生用のピクチャデータを送信することなく素早く特殊再生を開始することを可能とする。
【実施例３】
【００６５】
本発明の第三の実施例では、映像受信装置３００において巻戻し再生を操作開始からレスポンスよく開始する方法について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００６６】
図１において、ストリーム再生部３３０は特殊再生用のピクチャデータを受信するとバッファ３４０にあらかじめ定めた一定量を保持する。図７に映像受信装置３００が受信する出力映像ストリームと表示部３５０に出力するピクチャデータの関係を示す。また、巻戻し再生を行う際のシーケンスは図３に示す。映像受信装置３００のユーザが時間ｔ５０において巻戻し開始を操作した際、バッファ３４０には特殊再生用のピクチャデータとしてピクチャデータＰ１１ａ、Ｐ１４ａ、Ｐ１７ａを保持しているとする。制御部３２０はｔ５０の時点で保持している特殊再生用のピクチャデータのうち、表示していたピクチャデータＢ２０に最も近いピクチャデータＰ１７ａを出力するようストリーム再生部３３０を制御する。同時に再生開始４７１を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＰ８とする。ｔ５１においてピクチャデータＰ１７ａの表示が開始されると、制御部３２０はバッファ３４０に格納しているピクチャデータＰ１４ａを出力するようストリーム再生部３３０を制御する。同時に再生開始４７２を映像送信装置１００に出力する。このとき再生開始時間はピクチャデータＩ５とする。
【００６７】
巻戻し開始時にバッファ３４０に格納した特殊再生用のピクチャデータを出力することにより、巻戻し再生用のピクチャデータが映像送信装置１００から映像受信装置３００に供給されるまでのタイムラグを解消することができ、巻戻しの操作レスポンスを向上することができる。また、制御部３２０は保持している特殊再生用のピクチャデータの時間軸上のフレーム間隔と同じフレーム間隔となるピクチャデータを送信するよう制御を行うことで、巻戻し再生のフレームレートを一定にできる。
【００６８】
上記の例では巻戻し開始時にバッファ３４０に格納されている特殊再生用のピクチャデータを出力するとしたが、ストリーム再生部３３０は再生時にピクチャデータ出力を行うと同時に、再生したピクチャデータから特殊再生用のピクチャデータを生成しバッファ３４０に保持してもよい。図８に示すようにピクチャデータＢ３とＢ４のそれぞれの画素値の平均を取り、ピクチャデータＢ３とＢ４の時間軸上の中間の位置を示すピクチャデータＢ３ｂを作成し、特殊再生用のピクチャデータとする。同様にピクチャデータＢ６とＢ７からピクチャデータＢ６ｂを作成する。巻戻しの際はピクチャデータＢ６ｂ、Ｐ５ａ、Ｂ３ｂ、Ｉ２ａの順番に出力することにより、出力映像ストリームに含まれる特殊再生用のピクチャデータを再生する場合に比べフレームレートの高い巻戻し再生を行うことができる。
【００６９】
上記の例では特殊再生用のピクチャデータを保持するバッファ量はあらかじめ定めた値とする、としたが、制御部３２０は一定時間内にユーザからの巻戻し操作の制御信号を受け取った回数をカウントし、一定値以上であれば、保持する特殊再生用のピクチャデータの枚数を増やしてもよい。特殊再生用のピクチャデータを保持するバッファ量を変更することにより、巻戻し再生を繰り返してもレスポンスのよい巻戻しを行うことができる。
【００７０】
上記の例では特殊再生用のピクチャデータをバッファ３４０に保持するとしたが、制御部３２０あるいはストリーム再生部３３０は、情報圧縮を行いバッファ３４０に保持してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、あらかじめ定めた枚数おきに特殊再生用のピクチャデータをバッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの解像度を下げ、データサイズを減らしてバッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの量子化係数を変更し、データサイズを減らして、バッファ３４０に格納してもよい。
もしくは制御部３２０あるいはストリーム再生部３３０は、特殊再生用のピクチャデータの圧縮フォーマットを変更し、データサイズを減らして、バッファ３４０に格納してもよい。
特殊再生用のピクチャデータのビット量を減らすことにより、バッファ３４０の特殊再生用のピクチャデータの保持に要するビット量を小さくでき、より多くの特殊再生用のピクチャデータを保持することができる。
【００７１】
また、制御部３２０はバッファ３４０から特殊再生用のピクチャデータを削除する際、ストリーム再生部３３０が出力するピクチャデータと特殊再生用のピクチャデータの差分の総和があらかじめ定めた一定値以下であるときに削除を行う制御を行ってもよい。このように削除を行うことにより、バッファ３４０にはシーンチェンジ部分の特殊再生用のピクチャデータが残ることになり、何回も巻戻しが起きたときでも、巻戻し再生を停止する可能性が高いシーンチェンジ部分を表示することができる。
【００７２】
また、制御部３２０は、ストリーム再生部３３０が出力するピクチャデータと直前に出力したピクチャデータの差分の総和があらかじめ定めた一定値以上であるとき、バッファ３４０に特殊再生用のピクチャデータとして保持する制御を行ってもよい。このように制御を行うことにより、特殊再生用のピクチャデータにシーンチェンジ部分が含まれていなくても、巻戻しバッファに残しておくことが出来るようになり、巻戻し再生を停止する可能性が高いシーンチェンジ部分を表示することができる。
【実施例４】
【００７３】
本発明の第四の実施例では、映像受信装置３００における特殊再生の表示方法について述べる。構成は実施例１における図１と同様であるため、説明を省略する。
【００７４】
図９に映像受信装置３００において早送りもしくは巻戻しの特殊再生を行っている際に表示部３５０に表示されている画像を示す。画像６００、６２０、６３０、６４０はバッファ３４０に格納されている特殊再生用のピクチャデータのサムネイル画像を示し、制御部３２０はストリーム再生部３３０に時間軸上のフレーム順に左から右に表示するよう制御を行う。画像６５０および画像６１０はストリーム再生部３３０が出力する出力映像ストリームのデコード画像である。
ユーザは特殊再生中に表示された特殊再生用のピクチャデータ、例えば画像６３０を選択する動作を行うと、制御部３２０は選択された特殊再生用のピクチャデータを読み出し、画像６５０および６１０の位置に表示し、再生を行うようストリーム再生部３３０に制御信号を送信する。
表示部３５０にバッファ３４０に格納した特殊再生用のピクチャデータを時系列順に表示することにより、早送り、巻戻し可能な時間が視覚的に確認できる。また、ユーザが直接特殊再生用のピクチャデータを選択して再生位置を指定することにより、早送り、巻き戻しに加えジャンプ再生が可能になる。
【００７５】
上記の例では制御部３２０は表示部３５０に特殊再生用のピクチャデータを表示する際、時間軸上のフレーム順に表示するとしたが、特殊再生用のピクチャデータと直前に表示した特殊再生用のピクチャデータの差分の総和があらかじめ定めた一定値以下であるとき、表示部３５０に表示するようにしてもよい。シーンの切り替わりなど画面全体が大きく変わるときは、特殊再生用のピクチャデータの差分の総和が大きくなる。本構成により、表示部３５０に表示される特殊再生用ピクチャデータはシーンの切り替わり部分が多くなり、再生中の映像から時間軸上で離れたフレームが表示されやすくなりジャンプ再生の利便性が増す。
【００７６】
上記の例では制御部３２０は表示部３５０に特殊再生用のピクチャデータを表示する際、時間軸上のフレーム順に表示するとしたが、制御部３２０はあらかじめ定めた時間軸上のフレーム間隔となるよう特殊再生用のピクチャデータを選択し、表示部３５０に表示してもよい。本構成により再生中の映像から時間軸上で離れたフレームが表示されやすくなりジャンプ再生の利便性が増す。
【００７７】
上記の例では制御部３２０は表示部３５０に右側に早送り用の特殊再生用のピクチャデータ、左側に巻戻し用の特殊再生用のピクチャデータを表示し、中央に再生中の画像６１０を表示するようにしたが、早送りの制御命令の回数があらかじめ定めた回数以上であるときに早送り用の特殊再生ピクチャデータのバッファ容量を増加させ、表示部３５０に表示している再生中の画面を中央左側に寄せて、早送り用の特殊再生用のピクチャデータの表示枚数を増やしてもよい。同様に巻戻しの制御命令の回数があらかじめ定めた回数以上であるときは巻戻し用の特殊再生用のピクチャデータのバッファ容量を増加させ、表示部３５０に表示している再生中の画面を中央右側に寄せて、巻戻し用の特殊再生用のピクチャデータの表示枚数を増やしてもよい。ユーザの操作に応じてバッファ容量、および画面表示を変更することで特殊再生の利便性が増す。
【００７８】
以上、添付図面を参照しながら本発明にかかる好適な実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００７９】
例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、２つ以上の実施例を、その全部または一部において同時に採用する構成も可能である。
【符号の説明】
【００８０】
１００ 映像送信装置
１１０ ネットワークＩ／Ｆ
１２０ 制御部
１３０ バス
１４０ 記録媒体
１６０ ストリーム生成部
２００ ネットワーク
３００ 映像受信装置
３１０ ネットワークＩ／Ｆ
３２０ 制御部
３３０ ストリーム再生部
３４０ バッファ
３５０ 表示部
【特許請求の範囲】
【請求項１】
ネットワークから制御信号を受け取り、前記制御信号の解釈を行う制御部と、
複数のピクチャ情報からなる記録映像ストリームを記録する記録媒体と、
前記記録媒体から前記映像ストリームを読み出し、前記制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、
前記ストリーム生成部が出力する前記出力映像ストリームを前記ネットワークに送出するネットワークＩ／Ｆと、
を備え、
前記ストリーム生成部は前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信すること
を特徴とした映像送信装置。
【請求項２】
請求項１に記載の映像送信装置において、
前記特殊再生用のピクチャデータは前記記録映像ストリームと同じ圧縮方法を用いて圧縮されていること
を特徴とした映像送信装置。
【請求項３】
請求項１に記載の映像送信装置において、
前記特殊再生用のピクチャデータは前記記録映像ストリームと異なる圧縮方法を用いて、前記特殊再生用のピクチャデータのビット量を削減すること
を特徴とした映像送信装置。
【請求項４】
請求項１に記載の映像送信装置において、
前記制御部は再生開始の制御信号を受信した時間を記憶し，直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さいときは複数の特殊再生用のピクチャデータを多重するよう前記ストリーム生成部を制御すること
を特徴とした映像送信装置。
【請求項５】
請求項４に記載の映像送信装置において、
前記制御部は直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さい回数を記憶し、あらかじめ定めた回数を超えた場合は複数の特殊再生用のピクチャデータを多重するよう前記ストリーム生成部を制御すること
を特徴とした映像送信装置。
【請求項６】
請求項１に記載の映像送信装置において、
前記制御部は、前記ネットワークに接続され前記出力映像ストリームをデコードする映像受信装置から出力映像ストリームを要求する制御信号を受信した際、
前記制御部は、前記ストリーム生成部に前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御すること
を特徴とした映像送信装置。
【請求項７】
請求項１に記載の映像送信装置において、
前記制御部は、前記ネットワークに接続され前記出力映像ストリームをデコードする映像受信装置から、特殊再生を要求する制御信号を受信した際、
前記制御部は、前記ストリーム生成部に前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御すること
を特徴とした映像送信装置。
【請求項８】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータの枚数を増やす制御を行うこと
を特徴とした映像送信装置。
【請求項９】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータの時間軸上のフレーム間隔を大きくすること
を特徴とした映像送信装置。
【請求項１０】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータのビット量を増やすこと
を特徴とした映像送信装置。
【請求項１１】
請求項４に記載の映像送信装置において、
前記制御部は前記記録映像ストリームに含まれるピクチャのうち、画面内符号化を行ったピクチャを特殊再生用のピクチャデータとし、前記特殊再生用のピクチャデータは前記記録映像ストリームにおいて画面内符号化を行ったピクチャが含まれるグループオブピクチャよりも先に送信すること
を特徴とした映像送信装置。
【請求項１２】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は量子化係数を変更することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御すること
を特徴とした映像送信装置。
【請求項１３】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は解像度を変更して特殊再生用のピクチャデータのビット量を制御すること
を特徴とした映像送信装置。
【請求項１４】
請求項１３に記載の映像送信装置において、
特殊再生用のピクチャデータの解像度は画素間引きにより行うこと
を特徴とした映像送信装置。
【請求項１５】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は量子化係数を変更すること、もしくは解像度を変更して特殊再生用のピクチャデータのビット量を制御すること、もしくは特殊再生用のピクチャデータの圧縮フォーマットを変えてビット量を制御することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御すること
を特徴とした映像送信装置。
【請求項１６】
請求項８、９、１０に記載の映像送信装置において、
前記制御部は、前記記録媒体に記録された映像ストリームのうち、出力映像ストリームの画面内符号化されたピクチャと前記特殊再生用のピクチャデータのビット量の和と、画面内符号化されたピクチャのビット量が同等となるよう量子化係数を制御すること
を特徴とした映像送信装置。
【請求項１７】
通常再生用のピクチャデータと特殊再生用のピクチャデータからなる出力映像ストリームをネットワークから受信するネットワークＩ／Ｆと、
前記ネットワークＩ／Ｆから前記出力映像ストリームを受け取り、復号を行ない、映像データを出力するストリーム再生部と、
前記ストリーム再生部が出力する前記映像データを格納するバッファと、
前記ストリーム再生部が前記バッファから読み出した映像データを表示する表示部と、
前記ストリーム再生部と、前記ネットワークＩ／Ｆに制御信号を出力する制御部と、
を備え、
前記制御部は前記出力映像ストリームに対し、早送り再生を行う際、前記出力映像ストリームに含まれる特殊再生用のピクチャデータを表示すること
を特徴とした映像受信装置。
【請求項１８】
請求項１７に記載の映像受信装置において、
前記制御部は早送り再生を行う際、前記ネットワークＩ／Ｆに早送り再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項１９】
請求項１７に記載の映像受信装置において、
前記制御部は、前記バッファに格納している特殊再生用のピクチャデータの時間軸上の間隔と等しいフレーム間隔となるピクチャデータを送信するよう前記ネットワークＩ／Ｆに早送り再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項２０】
請求項１７に記載の映像受信装置において、
前記ストリーム再生部は特殊再生用のピクチャデータを前記バッファに記録し、
前記制御部は巻戻し再生を行う際、前記バッファから特殊再生用のピクチャデータを読み出し出力すること
を特徴とした映像受信装置。
【請求項２１】
請求項２０に記載の映像受信装置において、
前記制御部は巻戻し再生を行う際、前記ネットワークＩ／Ｆに巻戻し再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項２２】
請求項２０に記載の映像受信装置において、
前記ストリーム再生部は前記出力映像ストリームに含まれる前記特殊再生用のピクチャデータに情報圧縮を行い、データサイズを削減して前記バッファに格納すること
を特徴とした映像受信装置。
【請求項２３】
請求項２０に記載の映像受信装置において、
前記制御部は早送り再生、もしくは巻戻し再生を行う際、前記バッファに格納されている前記特殊再生データを読出し、再生ピクチャと並べて前記表示部に表示すること
を特徴とした映像受信装置。
【請求項２４】
請求項２３に記載の映像受信装置において、
前記制御部は、前記ストリーム再生部が出力するピクチャデータの左側に過去再生時間の前記特殊再生用のピクチャデータを、右側に未来の再生時間の前記特殊再生用のピクチャデータを前記表示部に表示するよう制御を行うこと
を特徴とした映像受信装置。
【請求項２５】
請求項２４に記載の映像受信装置において、
前記表示部に表示された特殊再生用のピクチャデータが選択されたとき、前記制御部は表示している特殊再生用のピクチャデータから再生を行うよう前記ストリーム再生部を制御すること
を特徴とした映像受信装置。
【請求項２６】
映像送信装置と映像受信装置からなる映像送受信装置において、
映像送信装置は
ネットワークから制御信号を受け取り、前記制御信号の解釈を行う制御部と、
複数のピクチャ情報からなる記録映像ストリームを記録する記録媒体と、
前記記録媒体から前記映像ストリームを読み出し、前記制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、
前記ストリーム生成部が出力する前記出力映像ストリームを前記ネットワークに送出するネットワークＩ／Ｆと、
を備え、
前記ストリーム生成部は前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信し、
映像受信装置は
通常再生用のピクチャデータと特殊再生用のピクチャデータからなる出力映像ストリームをネットワークから受信するネットワークＩ／Ｆと、
前記ネットワークＩ／Ｆから前記出力映像ストリームを受け取り、復号を行ない、映像データを出力するストリーム再生部と、
前記ストリーム再生部が出力する前記映像データを格納するバッファと、
前記ストリーム再生部が前記バッファから読み出した映像データを表示する表示部と、
前記ストリーム再生部と、前記ネットワークＩ／Ｆに制御信号を出力する制御部と、
を備え、
前記制御部は前記出力映像ストリームに対し、早送り再生を行う際、前記出力映像ストリームに含まれる特殊再生用のピクチャデータを表示すること
を特徴とした映像送受信制御装置。
【請求項１】
ネットワークから制御信号を受け取り、前記制御信号の解釈を行う制御部と、
複数のピクチャ情報からなる記録映像ストリームを記録する記録媒体と、
前記記録媒体から前記映像ストリームを読み出し、前記制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、
前記ストリーム生成部が出力する前記出力映像ストリームを前記ネットワークに送出するネットワークＩ／Ｆと、
を備え、
前記ストリーム生成部は前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信すること
を特徴とした映像送信装置。
【請求項２】
請求項１に記載の映像送信装置において、
前記特殊再生用のピクチャデータは前記記録映像ストリームと同じ圧縮方法を用いて圧縮されていること
を特徴とした映像送信装置。
【請求項３】
請求項１に記載の映像送信装置において、
前記特殊再生用のピクチャデータは前記記録映像ストリームと異なる圧縮方法を用いて、前記特殊再生用のピクチャデータのビット量を削減すること
を特徴とした映像送信装置。
【請求項４】
請求項１に記載の映像送信装置において、
前記制御部は再生開始の制御信号を受信した時間を記憶し，直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さいときは複数の特殊再生用のピクチャデータを多重するよう前記ストリーム生成部を制御すること
を特徴とした映像送信装置。
【請求項５】
請求項４に記載の映像送信装置において、
前記制御部は直前の再生開始の制御信号を受信した時間との差分があらかじめ定めた時間よりも小さい回数を記憶し、あらかじめ定めた回数を超えた場合は複数の特殊再生用のピクチャデータを多重するよう前記ストリーム生成部を制御すること
を特徴とした映像送信装置。
【請求項６】
請求項１に記載の映像送信装置において、
前記制御部は、前記ネットワークに接続され前記出力映像ストリームをデコードする映像受信装置から出力映像ストリームを要求する制御信号を受信した際、
前記制御部は、前記ストリーム生成部に前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御すること
を特徴とした映像送信装置。
【請求項７】
請求項１に記載の映像送信装置において、
前記制御部は、前記ネットワークに接続され前記出力映像ストリームをデコードする映像受信装置から、特殊再生を要求する制御信号を受信した際、
前記制御部は、前記ストリーム生成部に前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信するよう制御すること
を特徴とした映像送信装置。
【請求項８】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータの枚数を増やす制御を行うこと
を特徴とした映像送信装置。
【請求項９】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータの時間軸上のフレーム間隔を大きくすること
を特徴とした映像送信装置。
【請求項１０】
請求項４に記載の映像送信装置において、
前記制御部は特殊再生用のピクチャデータのビット量を増やすこと
を特徴とした映像送信装置。
【請求項１１】
請求項４に記載の映像送信装置において、
前記制御部は前記記録映像ストリームに含まれるピクチャのうち、画面内符号化を行ったピクチャを特殊再生用のピクチャデータとし、前記特殊再生用のピクチャデータは前記記録映像ストリームにおいて画面内符号化を行ったピクチャが含まれるグループオブピクチャよりも先に送信すること
を特徴とした映像送信装置。
【請求項１２】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は量子化係数を変更することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御すること
を特徴とした映像送信装置。
【請求項１３】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は解像度を変更して特殊再生用のピクチャデータのビット量を制御すること
を特徴とした映像送信装置。
【請求項１４】
請求項１３に記載の映像送信装置において、
特殊再生用のピクチャデータの解像度は画素間引きにより行うこと
を特徴とした映像送信装置。
【請求項１５】
請求項８、９、１０に記載の映像送信装置において、
前記ストリーム生成部は量子化係数を変更すること、もしくは解像度を変更して特殊再生用のピクチャデータのビット量を制御すること、もしくは特殊再生用のピクチャデータの圧縮フォーマットを変えてビット量を制御することにより特殊再生用のピクチャデータの１枚あたりのビット量を制御すること
を特徴とした映像送信装置。
【請求項１６】
請求項８、９、１０に記載の映像送信装置において、
前記制御部は、前記記録媒体に記録された映像ストリームのうち、出力映像ストリームの画面内符号化されたピクチャと前記特殊再生用のピクチャデータのビット量の和と、画面内符号化されたピクチャのビット量が同等となるよう量子化係数を制御すること
を特徴とした映像送信装置。
【請求項１７】
通常再生用のピクチャデータと特殊再生用のピクチャデータからなる出力映像ストリームをネットワークから受信するネットワークＩ／Ｆと、
前記ネットワークＩ／Ｆから前記出力映像ストリームを受け取り、復号を行ない、映像データを出力するストリーム再生部と、
前記ストリーム再生部が出力する前記映像データを格納するバッファと、
前記ストリーム再生部が前記バッファから読み出した映像データを表示する表示部と、
前記ストリーム再生部と、前記ネットワークＩ／Ｆに制御信号を出力する制御部と、
を備え、
前記制御部は前記出力映像ストリームに対し、早送り再生を行う際、前記出力映像ストリームに含まれる特殊再生用のピクチャデータを表示すること
を特徴とした映像受信装置。
【請求項１８】
請求項１７に記載の映像受信装置において、
前記制御部は早送り再生を行う際、前記ネットワークＩ／Ｆに早送り再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項１９】
請求項１７に記載の映像受信装置において、
前記制御部は、前記バッファに格納している特殊再生用のピクチャデータの時間軸上の間隔と等しいフレーム間隔となるピクチャデータを送信するよう前記ネットワークＩ／Ｆに早送り再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項２０】
請求項１７に記載の映像受信装置において、
前記ストリーム再生部は特殊再生用のピクチャデータを前記バッファに記録し、
前記制御部は巻戻し再生を行う際、前記バッファから特殊再生用のピクチャデータを読み出し出力すること
を特徴とした映像受信装置。
【請求項２１】
請求項２０に記載の映像受信装置において、
前記制御部は巻戻し再生を行う際、前記ネットワークＩ／Ｆに巻戻し再生の制御信号を出力すること
を特徴とした映像受信装置。
【請求項２２】
請求項２０に記載の映像受信装置において、
前記ストリーム再生部は前記出力映像ストリームに含まれる前記特殊再生用のピクチャデータに情報圧縮を行い、データサイズを削減して前記バッファに格納すること
を特徴とした映像受信装置。
【請求項２３】
請求項２０に記載の映像受信装置において、
前記制御部は早送り再生、もしくは巻戻し再生を行う際、前記バッファに格納されている前記特殊再生データを読出し、再生ピクチャと並べて前記表示部に表示すること
を特徴とした映像受信装置。
【請求項２４】
請求項２３に記載の映像受信装置において、
前記制御部は、前記ストリーム再生部が出力するピクチャデータの左側に過去再生時間の前記特殊再生用のピクチャデータを、右側に未来の再生時間の前記特殊再生用のピクチャデータを前記表示部に表示するよう制御を行うこと
を特徴とした映像受信装置。
【請求項２５】
請求項２４に記載の映像受信装置において、
前記表示部に表示された特殊再生用のピクチャデータが選択されたとき、前記制御部は表示している特殊再生用のピクチャデータから再生を行うよう前記ストリーム再生部を制御すること
を特徴とした映像受信装置。
【請求項２６】
映像送信装置と映像受信装置からなる映像送受信装置において、
映像送信装置は
ネットワークから制御信号を受け取り、前記制御信号の解釈を行う制御部と、
複数のピクチャ情報からなる記録映像ストリームを記録する記録媒体と、
前記記録媒体から前記映像ストリームを読み出し、前記制御部の指示に基づき出力映像ストリームを出力するストリーム生成部と、
前記ストリーム生成部が出力する前記出力映像ストリームを前記ネットワークに送出するネットワークＩ／Ｆと、
を備え、
前記ストリーム生成部は前記出力映像ストリームに含まれるピクチャデータを送信する前に特殊再生用のピクチャデータを送信し、
映像受信装置は
通常再生用のピクチャデータと特殊再生用のピクチャデータからなる出力映像ストリームをネットワークから受信するネットワークＩ／Ｆと、
前記ネットワークＩ／Ｆから前記出力映像ストリームを受け取り、復号を行ない、映像データを出力するストリーム再生部と、
前記ストリーム再生部が出力する前記映像データを格納するバッファと、
前記ストリーム再生部が前記バッファから読み出した映像データを表示する表示部と、
前記ストリーム再生部と、前記ネットワークＩ／Ｆに制御信号を出力する制御部と、
を備え、
前記制御部は前記出力映像ストリームに対し、早送り再生を行う際、前記出力映像ストリームに含まれる特殊再生用のピクチャデータを表示すること
を特徴とした映像送受信制御装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−１６０９８２（Ｐ２０１２−１６０９８２Ａ）
【公開日】平成２４年８月２３日（２０１２．８．２３）
【国際特許分類】
【出願番号】特願２０１１−２０２９３（Ｐ２０１１−２０２９３）
【出願日】平成２３年２月２日（２０１１．２．２）
【出願人】（５０９１８９４４４）日立コンシューマエレクトロニクス株式会社 (998)
【Ｆターム（参考）】
【公開日】平成２４年８月２３日（２０１２．８．２３）
【国際特許分類】
【出願日】平成２３年２月２日（２０１１．２．２）
【出願人】（５０９１８９４４４）日立コンシューマエレクトロニクス株式会社 (998)
【Ｆターム（参考）】
[ Back to top ]