画像符号化装置および画像符号化方法
【課題】複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送できる画像符号化装置を提供すること。
【解決手段】複数の符号化処理を実行する動画像符号化部１０３、静止画像符号化部１０４と、動画像符号化部１０３、静止画像符号化部１０４による複数の符号化処理のうち、動画像符号化部１０３によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、符号量監視部による監視の結果、符号量が所定量を超過した場合、符号化処理の実行の対象を符号量監視部によって監視されていた動画像符号化部１０３から静止画像符号化部１０４へ変更する符号化制御部１０６とを有する。
【解決手段】複数の符号化処理を実行する動画像符号化部１０３、静止画像符号化部１０４と、動画像符号化部１０３、静止画像符号化部１０４による複数の符号化処理のうち、動画像符号化部１０３によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、符号量監視部による監視の結果、符号量が所定量を超過した場合、符号化処理の実行の対象を符号量監視部によって監視されていた動画像符号化部１０３から静止画像符号化部１０４へ変更する符号化制御部１０６とを有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視カメラ等に利用される画像符号化装置および画像符号化方法に関する。
【背景技術】
【０００２】
従来から、監視領域を撮像し、撮像データを動画像または静止画像として符号化して通信回線を介して、モニターや画像蓄積装置に送信するカメラ制御装置が知られている（例えば、特許文献１参照）。このカメラ制御装置では、通常は動画像によるモニタリングを行ない、画像中に何らかの変化が生じた場合には、動画像に合わせて静止画像を送信することができる。
【特許文献１】特開２０００−１８４３６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来のカメラ制御装置においては、動画像符号化処理と静止画像符号化処理が排他的に実行され、互いの処理負荷を考慮せずに実行される場合、局所的に処理負荷が増大してしまい、いずれかの処理に十分な実行時間が与えられず、局所的な駒落ち増大が発生してしまうという事情がある。また、複数の処理を排他的に実行する方式としてタイムシェアリング方式が知られているが、この方式では通信回線への各符号化処理のデータ生成量を考慮していないため、特に動画像符号化データを伝送する場合にデータ伝送量の不均衡が発生してしまうという事情がある。
【０００４】
本発明は、上記の事情を鑑みてなされたものであって、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することが可能な画像符号化装置、画像符号化方法、画像符号化方法を実行させるためのプログラムおよび画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明の画像符号化装置は、画像を符号化する複数の符号化処理を並行して実行する画像符号化装置であって、前記複数の符号化処理を実行する複数の画像符号化部と、前記複数の画像符号化部による前記複数の符号化処理のうち、少なくとも１つの画像符号化部によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、前記符号量監視部による監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象を前記符号量監視部によって監視されていた画像符号化部から他の画像符号化部へ変更する符号化制御部とを有する構成としている。
【０００６】
この構成により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【０００７】
また、本発明の画像符号化装置は、前記複数の符号化処理が、動画像の符号化処理および静止画像の符号化処理を含み、前記符号化制御部が、前記画像の符号化に関する調整を行う符号化パラメータを制御する構成としている。
【０００８】
この構成により、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる。
【０００９】
また、本発明の画像符号化装置は、前記符号化パラメータが量子化パラメータを含む構成としている。
【００１０】
この構成により、符号化処理による発生符号量の調整を行うことができるので、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１１】
また、本発明の画像符号化装置は、前記符号化パラメータが符号化タイプを含む構成としている。
【００１２】
この構成により、符号化処理による符号化効率の調整を行うことができるので、結果として発生符号量を調整することができ、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１３】
また、本発明の画像符号化方法は、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法であって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを有する方法としている。
【００１４】
この方法により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００１５】
また、本発明の画像符号化方法は、前記複数の符号化処理が、動画像の符号化処理および静止画像の符号化処理を含み、前記符号化制御ステップが、前記画像の符号化に関する調整を行う符号化パラメータが制御される方法としている。
。
【００１６】
この方法により、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる。
【００１７】
また、本発明の画像符号化方法は、前記符号化パラメータが量子化パラメータを含む方法としている。
【００１８】
この方法により、符号化処理による発生符号量の調整を行うことができるので、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１９】
また、本発明の画像符号化方法は、前記符号化パラメータが符号化タイプを含む方法としている。
【００２０】
この方法により、符号化処理による符号化効率の調整を行うことができるので、結果として発生符号量を調整することができ、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００２１】
また、本発明のプログラムは、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムであって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを実行させるためのプログラムとしている。
【００２２】
このプログラムにより、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００２３】
また、本発明の記録媒体は、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体としている。
【００２４】
この記録媒体により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【発明の効果】
【００２５】
本発明は、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することが可能な画像符号化装置、画像符号化方法、画像符号化方法を実行させるためのプログラムおよび画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体を提供することができる。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の実施形態について、図面を用いて説明する。
（実施形態）
【００２７】
図１は、本発明の実施形態における画像符号化装置１００の構成を示すブロック図である。図１において、画像符号化装置１００は、撮像部１０１、画像入力部１０２、動画像符号化部１０３、静止画像符号化部１０４、送信部１０５、符号化制御部１０６を有する。ここで、動画像符号化部１０３、静止画像符号化部１０４は画像符号化部の一例である。また、符号化制御部１０６は符号監視部、符号化制御部の一例である。
【００２８】
撮像部１０１は、被写体像を撮影する。なお、撮像部１０１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサー等からなる撮像素子、撮像素子に入力された信号をデジタル画像データに変換するＡ／Ｄ変換器等を有している。画像入力部１０２は、一時的に画像データを保存するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等のバッファを有しており、撮像部１０１からの画像データの取り込みと、後段（動画像符号化部１０３および静止画像符号化部１０４）への画像データ出力を並行して行なう。
【００２９】
動画像符号化部１０３は、画像を入力し動画像画像符号化を行い、符号化データを生成し、符号化データを送信部１０５へ出力する。なお、動画像画像符号化処理方式の例としては、Ｈ．２６１、Ｈ．２６３、Ｈ．２６４、ＭＰＥＧ−１、ＭＰＥＧ−２、ＭＰＥＧ−４等が挙げられる。静止画像符号化部１０４は、画像を入力し静止画像符号化を行い、符号化データを生成し、送信部１０５へ出力する。静止画像符号化には、例えばＤＣＴ（離散コサイン変換）演算処理が使用される。なお、静止画像符号化処理方式の例としては、ＪＰＥＧ、ＪＰＥＧ２０００等が挙げられる。
【００３０】
送信部１０５は、動画像符号化部１０３または静止画像符号化部１０４で生成された符号化データを一時的に保存する送信バッファを有し、無線または有線の通信回線１０７に送信する。符号化制御部１０６は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ、タイマ等を有する。また、符号化制御部１０６は、動画像符号化部１０３の動画像符号化処理の符号化パラメータ及び符号化実行を制御し、静止画像符号化部１０４の静止画像符号化処理の符号化パラメータ及び符号化実行を制御し、送信部１０５の送信制御を行なう。
【００３１】
以上のように構成された画像符号化装置の動作について、図２を用いて説明する。図２は本発明の実施形態における画像符号化装置１００の動作フロー図である。
【００３２】
まず、撮像部１０１で被写体の撮影が行われ（ステップＳ２０１）、画像データに変換されて（ステップＳ２０２）画像入力部１０２に入力される。画像入力部１０２に入力された画像データは動画像符号化部１０３と静止画像符号化部１０４にそれぞれ入力される。動画像符号化部１０３と静止画像符号化部１０４は符号化制御部１０６により制御され、動画像符号化部１０３では入力した画像が動画像符号化され、符号化データが生成される（ステップＳ２０３）。静止画像符号化部１０４では入力した画像が静止画像符号化され、符号化データが生成される（ステップＳ２０４）。送信部１０５は動画像符号化部１０３で生成された符号化データ及び静止画像符号化部１０４で生成された符号化データをそれぞれ通信回線１０７へ送信する（ステップＳ２０５）。
【００３３】
続いて、図３のフロー図を用いて、符号化制御部１０６が行う動画像符号化部１０３および静止画像符号化部１０４の制御について説明する。図３は本発明の実施形態における動画像符号化部１０３と静止画像符号化部１０４を並行して実行し、動画像符号化部１０３は静止画像符号化部１０４よりも実行優先度が高く動作するよう符号化制御部１０６が制御する場合の画像符号化装置１００の動作フロー図である。
【００３４】
まず、通信回線１０７に送出可能な単位時間あたり出力符号量（＝伝送レート）、画像入力部１０２から動画像符号化部１０３に入力される画像の解像度や入力間隔、画像符号化装置１００の外部または画像符号化装置１００の内部からＣＰＵを経由して指示される各種設定（例えば画質設定など）、動画像符号化部１０３と静止画像符号化部１０４の実行割合設定、動画像符号化部１０３および静止画像符号化部１０４によってこれまでに生成された符号量の傾向などをもとに、符号化制御部１０６は総合的に判断して動画像符号化部１０３が１フレームあたりに生成する目標符号量を決定する（ステップＳ３０１）。
【００３５】
尚、動画像符号化部１０３の実行割合を減少させ静止画像符号化部１０４の実行割合を増加させる場合には目標符号量は増加させるよう調整される。それに対して、動画像符号化部１０３の実行割合を増加させ静止画像符号化部１０４の実行割合を減少させる場合には目標符号量は減少させるよう調整される。
【００３６】
次に、符号化制御部１０６は画像入力部１０２で受け取った１フレーム分の画像データを動画像符号化部１０３に入力できるタイミングで動画像符号化部１０３を動作させる。このタイミングはあらかじめ設定されている。この時、動画像符号化部１０３が生成する符号量は符号化制御部１０６によって逐次監視されており、１つの画像あたりの生成符号量が目標符号量に近づくよう、１フレーム以下のある単位（例えばマクロブロックやブロックライン）でも量子化パラメータや符号化タイプを制御する（ステップＳ３０２）。
【００３７】
なお、量子化パラメータは生成符号量と画質を調整するためのパラメータであり、一般的には、量子化パラメータを下げることで生成符号量は増加すると共に量子化歪みが減るために画質は向上し、量子化パラメータを上げることで生成符号量は減少すると共に量子化歪みが増えるため画質は低下するとされている。
【００３８】
また、符号化タイプは符号化の効率を調整するためのパラメータであり、既にインター符号化（＝フレーム間符号化）を前の画像で行なっていた場合、一般的には符号化タイプをイントラ符号化（＝フレーム内符号化）とすることで生成符号量は増加すると共に予測誤差が解消されるため画質は向上し、インター符号化とすることでは生成符号量は大きな変化は無く、予測誤差が解消されず蓄積するため画質は低下もしくは大きな変化は無いとされている。
【００３９】
続いて、符号化処理部１０６は動画像符号化部１０３が１フレームの符号化処理を終えたところで動画像符号化部１０３の動作は一旦待機させ、これまでの生成符号量と今回のフレームの生成符号量から単位時間あたりの生成符号量（＝生成レート）を算出し（ステップＳ３０３）、生成レートと伝送レートをもとに算出されるある閾値（駒落とし閾値）とを比較する（ステップＳ３０４）。
【００４０】
ここで生成レートがある閾値を下回る場合には、画像入力部１０２が受け取った次のフレームの画像データを動画像符号化部１０３に入力できるタイミングで符号化制御部１０６は動画像符号化部１０３を再び動作させ、ステップＳ３０２以降の処理を繰返し行なう。また、生成レートがある閾値を上回る場合には、符号化制御部１０６は次フレームの動画像符号化処理の実行を行わず、静止画像符号化部１０４に対して符号化パラメータを設定して動作させる（ステップＳ３０５）。
【００４１】
なお、静止画像符号化処理の実行は、画像入力部１０２が受け取ったフレームの画像データを動画像符号化部１０３に入力できる次のタイミングまでとして、画像入力部１０２が受け取ったフレームの画像データを動画像符号化部１０３に入力できるタイミングに到達した際には、静止画像符号化処理を一旦停止させ、経過時間に応じて再度生成レートを算出し（ステップＳ３０６）、ステップＳ３０４以降の処理を引続き行う。
【００４２】
次に、複数の符号化手段の一例として、ＭＰＥＧ−４およびＪＰＥＧの２つを用いる場合の実行に関して説明する。
図４は、ＭＰＥＧ−４処理とＪＰＥＧ処理が時間軸上で排他的に実行されることを想定した図である。
【００４３】
直線４０１は動画像符号化部１０３によるＭＥＰＧ−４符号化を実行する時間帯を示している。直線４０２は静止画像符号化部１０４によるＪＰＥＧ符号化を実行する時間帯を示している。図４では、ＭＰＥＧ−４の符号化処理の実行中にＪＰＥＧの符号化処理が行われるように符号化制御部１０６によって制御されており、ＭＰＥＧ−４符号化処理時間が５に対してＪＰＥＧ符号化処理時間が１の割合で符号化処理を行っている。また、図４〜６ではＭＰＥＧ−４の符号化処理がＪＰＥＧの符号化処理よりも実行優先度が高く動作するよう符号化制御部１０６によって制御されている。
【００４４】
ここで図５のように、従来の画像符号化装置では、動画像符号化部１０３によって生成される単位時間あたりの符号化データ量５０２と送信部１０５が有する送信バッファから通信回線１０７へ送出される送信データ量とが等しくなるようにされている。図５は従来のＭＰＥＧ−４およびＪＰＥＧの実行時にタイムシェアリング方式が用いられた場合の発生符号量、送信バッファ量を示した図である。
【００４５】
ＭＰＥＧ−４の符号化処理が行われる時間帯には、符号化データ量５０２と通信回線１０７への送信データ量とが等しいため、送信バッファの残留量５０１はバッファ残留量に関する所定の閾値を示す駒落とし閾値５０３よりも少ない範囲で一定である。一方、静止画像符号化部１０４による静止画像符号化が行われるときには、通信回線１０７にコンスタントに動画像符号化データを送出しようとしてもＭＰＥＧ−４の符号が発生しないために、一時的に送信バッファが空になることで（例えば、Ａ点参照）、送信可能な動画像符号化データが存在しない状態（アンダーフロー）が発生する場合がある。
【００４６】
そこで本実施形態では、図６に示すように、符号化制御部１０６によって量子化係数や符号化タイプを調整することで、意図的に図５のようなＭＰＥＧ−４の通常の発生符号量６０２よりも多い発生符号量６０３で符号を発生させる。図６は本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の発生符号量、送信バッファ量を示した図である。
【００４７】
この場合、通信回線１０７へは毎時間所定量のビットレートでＭＰＥＧ−４の符号量が送出されるため、いくらかのＭＰＥＧ−４の符号は送信バッファに残留する。送信バッファの残留量６０１が駒落とし閾値６０４を超過した場合、次のフレームはＭＰＥＧ−４符号化処理を行わないと判断し、このＭＰＥＧ−４符号化処理を行わない期間は、ＪＰＥＧ符号化処理を行う。尚、ＭＰＥＧ−４の処理を行わないことで、送信バッファ残留量６０１は低減され（例えば、図６中のＢ点参照）、その次のフレーム以降はＭＰＥＧ−４の処理が実行可能と判断される。このようにすることで、送信バッファや通信回線１０７をより有効に活用することが可能となる。
【００４８】
次に、図７、図８を用いて、従来および本発明の実施形態における複数の符号化手段による符号化実行時の動作について説明する。
【００４９】
まず、図７は従来のＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図である。あらかじめＭＰＥＧ−４を連続でどのくらいのフレームを実行するかを決めておく。符号化制御部は１フレーム分のＭＰＥＧ−４画像データの入力完了割込等で起動され、ＭＰＥＧ−４を連続で何フレーム実行したかを判定する（ステップＳ７０１）。連続フレーム実行数が所定の回数に達していれば符号化処理部はＪＰＥＧ符号化処理を実行し（ステップＳ７０２）、連続フレーム実行数が所定の回数に達していなければ符号化処理部１０６はＭＰＥＧ−４符号化処理を実行する（ステップＳ７０３）。
【００５０】
一方、図８は本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部１０６の動作説明のための動作フロー図である。符号化制御部１０６は１フレーム分のＭＰＥＧ−４画像データの入力完了割込等で起動され、ＭＰＥＧ−４の送信バッファ残留量６０１がある駒落とし閾値６０４を超過しているかどうか判定する（ステップＳ８０１）。ＭＰＥＧ−４の送信バッファ残留量６０１が駒落とし閾値６０４を超過している場合、符号化制御部１０６はＪＰＥＧ符号化処理を実行する（ステップＳ８０２）。ＭＰＥＧ−４の送信バッファ残留量６０１が駒落とし閾値６０４を超過していない場合、符号化制御部１０６は量子化係数またはイントラ符号化／インター符号化の割合を調整してＭＰＥＧ−４符号化処理を実行し（ステップＳ８０３）、送信バッファ残留量６０１を更新する（ステップＳ８０４）。
【００５１】
このような本発明の実施形態の画像符号化装置１００によれば、画像を符号化する複数の符号化処理を並行して実行する画像符号化装置１００であって、複数の符号化処理を実行する動画像符号化部１０３および静止画像符号化部１０４と、動画像符号化部１０３および静止画像符号化部１０４による複数の符号化処理のうち、動画像符号化部１０３によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、符号量監視部による監視の結果、符号量があらかじめ定められた一定量を超過した場合、符号化処理の実行の対象を符号量監視部によって監視されていた動画像符号化部１０３から静止画像符号化部１０４へ変更する符号化制御部１０６とを有する構成とすることで、動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００５２】
なお、本発明の実施形態の画像符号化装置１００は、動画像符号化処理及び静止画像符号化処理により生成される符号化データを通信回線１０７を介して外部に送信することを前提としていたが、符号化部（動画像符号化部１０３もしくは静止画像符号化部１０４）の内部または外部の記録媒体に蓄積するようにする構成であってもよい。
【００５３】
また、本発明の実施形態の画像符号化装置１００は、複数の画像符号化手段は動画像符号化部１０３と静止画像符号化部１０４であることを前提に説明したが、いずれの符号化手段も共に動画像符号化部１０３もしくは静止画符号化部１０４であったとしても、同様の効果を有する。
【００５４】
また、動画像符号化処理としてＭＰＥＧ−４を想定し、静止画像符号化処理としてＪＰＥＧを想定したが、もちろん動画像符号化処理および静止画像符号化処理としてこれ以外の符号化処理を実施したとしても、同様の効果を有する。
【産業上の利用可能性】
【００５５】
以上のように、本発明にかかる画像符号化装置は、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することができる、また、動画像符号化と静止画像符号化を並行して行なう場合に、動画像符号化処理と静止画像符号化処理のそれぞれの符号化パラメータを制御し符号化処理の生成符号量及び実行タイミングを制御することで、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる監視カメラ等に利用される画像符号化装置等として有用である。
【図面の簡単な説明】
【００５６】
【図１】本発明の実施形態における画像符号化装置のブロック図
【図２】本発明の実施形態における画像符号化装置の動作説明のための動作フロー図
【図３】本発明の実施形態における符号化制御部の動作説明のための動作フロー図
【図４】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行に関する概念図
【図５】従来のＭＰＥＧ−４およびＪＰＥＧの実行時にタイムシェアリング方式が用いられた場合の発生符号量、送信バッファ量を示した図
【図６】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の発生符号量、送信バッファ量を示した図
【図７】従来のＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図
【図８】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図
【符号の説明】
【００５７】
１００ 画像符号化装置
１０１ 撮像部
１０２ 画像入力部
１０３ 動画像符号化部
１０４ 静止画像符号化部
１０５ 送信部
１０６ 符号化制御部
１０７ 通信回線
【技術分野】
【０００１】
本発明は、監視カメラ等に利用される画像符号化装置および画像符号化方法に関する。
【背景技術】
【０００２】
従来から、監視領域を撮像し、撮像データを動画像または静止画像として符号化して通信回線を介して、モニターや画像蓄積装置に送信するカメラ制御装置が知られている（例えば、特許文献１参照）。このカメラ制御装置では、通常は動画像によるモニタリングを行ない、画像中に何らかの変化が生じた場合には、動画像に合わせて静止画像を送信することができる。
【特許文献１】特開２０００−１８４３６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来のカメラ制御装置においては、動画像符号化処理と静止画像符号化処理が排他的に実行され、互いの処理負荷を考慮せずに実行される場合、局所的に処理負荷が増大してしまい、いずれかの処理に十分な実行時間が与えられず、局所的な駒落ち増大が発生してしまうという事情がある。また、複数の処理を排他的に実行する方式としてタイムシェアリング方式が知られているが、この方式では通信回線への各符号化処理のデータ生成量を考慮していないため、特に動画像符号化データを伝送する場合にデータ伝送量の不均衡が発生してしまうという事情がある。
【０００４】
本発明は、上記の事情を鑑みてなされたものであって、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することが可能な画像符号化装置、画像符号化方法、画像符号化方法を実行させるためのプログラムおよび画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明の画像符号化装置は、画像を符号化する複数の符号化処理を並行して実行する画像符号化装置であって、前記複数の符号化処理を実行する複数の画像符号化部と、前記複数の画像符号化部による前記複数の符号化処理のうち、少なくとも１つの画像符号化部によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、前記符号量監視部による監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象を前記符号量監視部によって監視されていた画像符号化部から他の画像符号化部へ変更する符号化制御部とを有する構成としている。
【０００６】
この構成により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【０００７】
また、本発明の画像符号化装置は、前記複数の符号化処理が、動画像の符号化処理および静止画像の符号化処理を含み、前記符号化制御部が、前記画像の符号化に関する調整を行う符号化パラメータを制御する構成としている。
【０００８】
この構成により、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる。
【０００９】
また、本発明の画像符号化装置は、前記符号化パラメータが量子化パラメータを含む構成としている。
【００１０】
この構成により、符号化処理による発生符号量の調整を行うことができるので、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１１】
また、本発明の画像符号化装置は、前記符号化パラメータが符号化タイプを含む構成としている。
【００１２】
この構成により、符号化処理による符号化効率の調整を行うことができるので、結果として発生符号量を調整することができ、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１３】
また、本発明の画像符号化方法は、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法であって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを有する方法としている。
【００１４】
この方法により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００１５】
また、本発明の画像符号化方法は、前記複数の符号化処理が、動画像の符号化処理および静止画像の符号化処理を含み、前記符号化制御ステップが、前記画像の符号化に関する調整を行う符号化パラメータが制御される方法としている。
。
【００１６】
この方法により、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる。
【００１７】
また、本発明の画像符号化方法は、前記符号化パラメータが量子化パラメータを含む方法としている。
【００１８】
この方法により、符号化処理による発生符号量の調整を行うことができるので、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００１９】
また、本発明の画像符号化方法は、前記符号化パラメータが符号化タイプを含む方法としている。
【００２０】
この方法により、符号化処理による符号化効率の調整を行うことができるので、結果として発生符号量を調整することができ、複数の符号化処理を並行して行いながら安定した符号化データ量を通信回線に伝送することができる。
【００２１】
また、本発明のプログラムは、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムであって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを実行させるためのプログラムとしている。
【００２２】
このプログラムにより、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００２３】
また、本発明の記録媒体は、画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、前記複数の符号化処理が実行される複数の画像符号化ステップと、前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップとを実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体としている。
【００２４】
この記録媒体により、例えば動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【発明の効果】
【００２５】
本発明は、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することが可能な画像符号化装置、画像符号化方法、画像符号化方法を実行させるためのプログラムおよび画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体を提供することができる。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の実施形態について、図面を用いて説明する。
（実施形態）
【００２７】
図１は、本発明の実施形態における画像符号化装置１００の構成を示すブロック図である。図１において、画像符号化装置１００は、撮像部１０１、画像入力部１０２、動画像符号化部１０３、静止画像符号化部１０４、送信部１０５、符号化制御部１０６を有する。ここで、動画像符号化部１０３、静止画像符号化部１０４は画像符号化部の一例である。また、符号化制御部１０６は符号監視部、符号化制御部の一例である。
【００２８】
撮像部１０１は、被写体像を撮影する。なお、撮像部１０１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサー等からなる撮像素子、撮像素子に入力された信号をデジタル画像データに変換するＡ／Ｄ変換器等を有している。画像入力部１０２は、一時的に画像データを保存するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等のバッファを有しており、撮像部１０１からの画像データの取り込みと、後段（動画像符号化部１０３および静止画像符号化部１０４）への画像データ出力を並行して行なう。
【００２９】
動画像符号化部１０３は、画像を入力し動画像画像符号化を行い、符号化データを生成し、符号化データを送信部１０５へ出力する。なお、動画像画像符号化処理方式の例としては、Ｈ．２６１、Ｈ．２６３、Ｈ．２６４、ＭＰＥＧ−１、ＭＰＥＧ−２、ＭＰＥＧ−４等が挙げられる。静止画像符号化部１０４は、画像を入力し静止画像符号化を行い、符号化データを生成し、送信部１０５へ出力する。静止画像符号化には、例えばＤＣＴ（離散コサイン変換）演算処理が使用される。なお、静止画像符号化処理方式の例としては、ＪＰＥＧ、ＪＰＥＧ２０００等が挙げられる。
【００３０】
送信部１０５は、動画像符号化部１０３または静止画像符号化部１０４で生成された符号化データを一時的に保存する送信バッファを有し、無線または有線の通信回線１０７に送信する。符号化制御部１０６は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ、タイマ等を有する。また、符号化制御部１０６は、動画像符号化部１０３の動画像符号化処理の符号化パラメータ及び符号化実行を制御し、静止画像符号化部１０４の静止画像符号化処理の符号化パラメータ及び符号化実行を制御し、送信部１０５の送信制御を行なう。
【００３１】
以上のように構成された画像符号化装置の動作について、図２を用いて説明する。図２は本発明の実施形態における画像符号化装置１００の動作フロー図である。
【００３２】
まず、撮像部１０１で被写体の撮影が行われ（ステップＳ２０１）、画像データに変換されて（ステップＳ２０２）画像入力部１０２に入力される。画像入力部１０２に入力された画像データは動画像符号化部１０３と静止画像符号化部１０４にそれぞれ入力される。動画像符号化部１０３と静止画像符号化部１０４は符号化制御部１０６により制御され、動画像符号化部１０３では入力した画像が動画像符号化され、符号化データが生成される（ステップＳ２０３）。静止画像符号化部１０４では入力した画像が静止画像符号化され、符号化データが生成される（ステップＳ２０４）。送信部１０５は動画像符号化部１０３で生成された符号化データ及び静止画像符号化部１０４で生成された符号化データをそれぞれ通信回線１０７へ送信する（ステップＳ２０５）。
【００３３】
続いて、図３のフロー図を用いて、符号化制御部１０６が行う動画像符号化部１０３および静止画像符号化部１０４の制御について説明する。図３は本発明の実施形態における動画像符号化部１０３と静止画像符号化部１０４を並行して実行し、動画像符号化部１０３は静止画像符号化部１０４よりも実行優先度が高く動作するよう符号化制御部１０６が制御する場合の画像符号化装置１００の動作フロー図である。
【００３４】
まず、通信回線１０７に送出可能な単位時間あたり出力符号量（＝伝送レート）、画像入力部１０２から動画像符号化部１０３に入力される画像の解像度や入力間隔、画像符号化装置１００の外部または画像符号化装置１００の内部からＣＰＵを経由して指示される各種設定（例えば画質設定など）、動画像符号化部１０３と静止画像符号化部１０４の実行割合設定、動画像符号化部１０３および静止画像符号化部１０４によってこれまでに生成された符号量の傾向などをもとに、符号化制御部１０６は総合的に判断して動画像符号化部１０３が１フレームあたりに生成する目標符号量を決定する（ステップＳ３０１）。
【００３５】
尚、動画像符号化部１０３の実行割合を減少させ静止画像符号化部１０４の実行割合を増加させる場合には目標符号量は増加させるよう調整される。それに対して、動画像符号化部１０３の実行割合を増加させ静止画像符号化部１０４の実行割合を減少させる場合には目標符号量は減少させるよう調整される。
【００３６】
次に、符号化制御部１０６は画像入力部１０２で受け取った１フレーム分の画像データを動画像符号化部１０３に入力できるタイミングで動画像符号化部１０３を動作させる。このタイミングはあらかじめ設定されている。この時、動画像符号化部１０３が生成する符号量は符号化制御部１０６によって逐次監視されており、１つの画像あたりの生成符号量が目標符号量に近づくよう、１フレーム以下のある単位（例えばマクロブロックやブロックライン）でも量子化パラメータや符号化タイプを制御する（ステップＳ３０２）。
【００３７】
なお、量子化パラメータは生成符号量と画質を調整するためのパラメータであり、一般的には、量子化パラメータを下げることで生成符号量は増加すると共に量子化歪みが減るために画質は向上し、量子化パラメータを上げることで生成符号量は減少すると共に量子化歪みが増えるため画質は低下するとされている。
【００３８】
また、符号化タイプは符号化の効率を調整するためのパラメータであり、既にインター符号化（＝フレーム間符号化）を前の画像で行なっていた場合、一般的には符号化タイプをイントラ符号化（＝フレーム内符号化）とすることで生成符号量は増加すると共に予測誤差が解消されるため画質は向上し、インター符号化とすることでは生成符号量は大きな変化は無く、予測誤差が解消されず蓄積するため画質は低下もしくは大きな変化は無いとされている。
【００３９】
続いて、符号化処理部１０６は動画像符号化部１０３が１フレームの符号化処理を終えたところで動画像符号化部１０３の動作は一旦待機させ、これまでの生成符号量と今回のフレームの生成符号量から単位時間あたりの生成符号量（＝生成レート）を算出し（ステップＳ３０３）、生成レートと伝送レートをもとに算出されるある閾値（駒落とし閾値）とを比較する（ステップＳ３０４）。
【００４０】
ここで生成レートがある閾値を下回る場合には、画像入力部１０２が受け取った次のフレームの画像データを動画像符号化部１０３に入力できるタイミングで符号化制御部１０６は動画像符号化部１０３を再び動作させ、ステップＳ３０２以降の処理を繰返し行なう。また、生成レートがある閾値を上回る場合には、符号化制御部１０６は次フレームの動画像符号化処理の実行を行わず、静止画像符号化部１０４に対して符号化パラメータを設定して動作させる（ステップＳ３０５）。
【００４１】
なお、静止画像符号化処理の実行は、画像入力部１０２が受け取ったフレームの画像データを動画像符号化部１０３に入力できる次のタイミングまでとして、画像入力部１０２が受け取ったフレームの画像データを動画像符号化部１０３に入力できるタイミングに到達した際には、静止画像符号化処理を一旦停止させ、経過時間に応じて再度生成レートを算出し（ステップＳ３０６）、ステップＳ３０４以降の処理を引続き行う。
【００４２】
次に、複数の符号化手段の一例として、ＭＰＥＧ−４およびＪＰＥＧの２つを用いる場合の実行に関して説明する。
図４は、ＭＰＥＧ−４処理とＪＰＥＧ処理が時間軸上で排他的に実行されることを想定した図である。
【００４３】
直線４０１は動画像符号化部１０３によるＭＥＰＧ−４符号化を実行する時間帯を示している。直線４０２は静止画像符号化部１０４によるＪＰＥＧ符号化を実行する時間帯を示している。図４では、ＭＰＥＧ−４の符号化処理の実行中にＪＰＥＧの符号化処理が行われるように符号化制御部１０６によって制御されており、ＭＰＥＧ−４符号化処理時間が５に対してＪＰＥＧ符号化処理時間が１の割合で符号化処理を行っている。また、図４〜６ではＭＰＥＧ−４の符号化処理がＪＰＥＧの符号化処理よりも実行優先度が高く動作するよう符号化制御部１０６によって制御されている。
【００４４】
ここで図５のように、従来の画像符号化装置では、動画像符号化部１０３によって生成される単位時間あたりの符号化データ量５０２と送信部１０５が有する送信バッファから通信回線１０７へ送出される送信データ量とが等しくなるようにされている。図５は従来のＭＰＥＧ−４およびＪＰＥＧの実行時にタイムシェアリング方式が用いられた場合の発生符号量、送信バッファ量を示した図である。
【００４５】
ＭＰＥＧ−４の符号化処理が行われる時間帯には、符号化データ量５０２と通信回線１０７への送信データ量とが等しいため、送信バッファの残留量５０１はバッファ残留量に関する所定の閾値を示す駒落とし閾値５０３よりも少ない範囲で一定である。一方、静止画像符号化部１０４による静止画像符号化が行われるときには、通信回線１０７にコンスタントに動画像符号化データを送出しようとしてもＭＰＥＧ−４の符号が発生しないために、一時的に送信バッファが空になることで（例えば、Ａ点参照）、送信可能な動画像符号化データが存在しない状態（アンダーフロー）が発生する場合がある。
【００４６】
そこで本実施形態では、図６に示すように、符号化制御部１０６によって量子化係数や符号化タイプを調整することで、意図的に図５のようなＭＰＥＧ−４の通常の発生符号量６０２よりも多い発生符号量６０３で符号を発生させる。図６は本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の発生符号量、送信バッファ量を示した図である。
【００４７】
この場合、通信回線１０７へは毎時間所定量のビットレートでＭＰＥＧ−４の符号量が送出されるため、いくらかのＭＰＥＧ−４の符号は送信バッファに残留する。送信バッファの残留量６０１が駒落とし閾値６０４を超過した場合、次のフレームはＭＰＥＧ−４符号化処理を行わないと判断し、このＭＰＥＧ−４符号化処理を行わない期間は、ＪＰＥＧ符号化処理を行う。尚、ＭＰＥＧ−４の処理を行わないことで、送信バッファ残留量６０１は低減され（例えば、図６中のＢ点参照）、その次のフレーム以降はＭＰＥＧ−４の処理が実行可能と判断される。このようにすることで、送信バッファや通信回線１０７をより有効に活用することが可能となる。
【００４８】
次に、図７、図８を用いて、従来および本発明の実施形態における複数の符号化手段による符号化実行時の動作について説明する。
【００４９】
まず、図７は従来のＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図である。あらかじめＭＰＥＧ−４を連続でどのくらいのフレームを実行するかを決めておく。符号化制御部は１フレーム分のＭＰＥＧ−４画像データの入力完了割込等で起動され、ＭＰＥＧ−４を連続で何フレーム実行したかを判定する（ステップＳ７０１）。連続フレーム実行数が所定の回数に達していれば符号化処理部はＪＰＥＧ符号化処理を実行し（ステップＳ７０２）、連続フレーム実行数が所定の回数に達していなければ符号化処理部１０６はＭＰＥＧ−４符号化処理を実行する（ステップＳ７０３）。
【００５０】
一方、図８は本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部１０６の動作説明のための動作フロー図である。符号化制御部１０６は１フレーム分のＭＰＥＧ−４画像データの入力完了割込等で起動され、ＭＰＥＧ−４の送信バッファ残留量６０１がある駒落とし閾値６０４を超過しているかどうか判定する（ステップＳ８０１）。ＭＰＥＧ−４の送信バッファ残留量６０１が駒落とし閾値６０４を超過している場合、符号化制御部１０６はＪＰＥＧ符号化処理を実行する（ステップＳ８０２）。ＭＰＥＧ−４の送信バッファ残留量６０１が駒落とし閾値６０４を超過していない場合、符号化制御部１０６は量子化係数またはイントラ符号化／インター符号化の割合を調整してＭＰＥＧ−４符号化処理を実行し（ステップＳ８０３）、送信バッファ残留量６０１を更新する（ステップＳ８０４）。
【００５１】
このような本発明の実施形態の画像符号化装置１００によれば、画像を符号化する複数の符号化処理を並行して実行する画像符号化装置１００であって、複数の符号化処理を実行する動画像符号化部１０３および静止画像符号化部１０４と、動画像符号化部１０３および静止画像符号化部１０４による複数の符号化処理のうち、動画像符号化部１０３によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、符号量監視部による監視の結果、符号量があらかじめ定められた一定量を超過した場合、符号化処理の実行の対象を符号量監視部によって監視されていた動画像符号化部１０３から静止画像符号化部１０４へ変更する符号化制御部１０６とを有する構成とすることで、動画像符号化と静止画像符号化のような複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを通信回線に伝送することが可能である。
【００５２】
なお、本発明の実施形態の画像符号化装置１００は、動画像符号化処理及び静止画像符号化処理により生成される符号化データを通信回線１０７を介して外部に送信することを前提としていたが、符号化部（動画像符号化部１０３もしくは静止画像符号化部１０４）の内部または外部の記録媒体に蓄積するようにする構成であってもよい。
【００５３】
また、本発明の実施形態の画像符号化装置１００は、複数の画像符号化手段は動画像符号化部１０３と静止画像符号化部１０４であることを前提に説明したが、いずれの符号化手段も共に動画像符号化部１０３もしくは静止画符号化部１０４であったとしても、同様の効果を有する。
【００５４】
また、動画像符号化処理としてＭＰＥＧ−４を想定し、静止画像符号化処理としてＪＰＥＧを想定したが、もちろん動画像符号化処理および静止画像符号化処理としてこれ以外の符号化処理を実施したとしても、同様の効果を有する。
【産業上の利用可能性】
【００５５】
以上のように、本発明にかかる画像符号化装置は、複数の符号化手段によるデータ符号化を並行して行う場合に、データ伝送量の不均衡を発生させずに符号化データを伝送することができる、また、動画像符号化と静止画像符号化を並行して行なう場合に、動画像符号化処理と静止画像符号化処理のそれぞれの符号化パラメータを制御し符号化処理の生成符号量及び実行タイミングを制御することで、動画像符号化処理と静止画像符号化処理を並行して行いながら安定した動画像符号化データ量を通信回線に伝送することができる監視カメラ等に利用される画像符号化装置等として有用である。
【図面の簡単な説明】
【００５６】
【図１】本発明の実施形態における画像符号化装置のブロック図
【図２】本発明の実施形態における画像符号化装置の動作説明のための動作フロー図
【図３】本発明の実施形態における符号化制御部の動作説明のための動作フロー図
【図４】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行に関する概念図
【図５】従来のＭＰＥＧ−４およびＪＰＥＧの実行時にタイムシェアリング方式が用いられた場合の発生符号量、送信バッファ量を示した図
【図６】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の発生符号量、送信バッファ量を示した図
【図７】従来のＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図
【図８】本発明の実施形態におけるＭＰＥＧ−４およびＪＰＥＧの実行時の符号化制御部の動作説明のための動作フロー図
【符号の説明】
【００５７】
１００ 画像符号化装置
１０１ 撮像部
１０２ 画像入力部
１０３ 動画像符号化部
１０４ 静止画像符号化部
１０５ 送信部
１０６ 符号化制御部
１０７ 通信回線
【特許請求の範囲】
【請求項１】
画像を符号化する複数の符号化処理を並行して実行する画像符号化装置であって、
前記複数の符号化処理を実行する複数の画像符号化部と、
前記複数の画像符号化部による前記複数の符号化処理のうち、少なくとも１つの画像符号化部によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、
前記符号量監視部による監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象を前記符号量監視部によって監視されていた画像符号化部から他の画像符号化部へ変更する符号化制御部と
を有する画像符号化装置。
【請求項２】
請求項１に記載の画像符号化装置であって、
前記複数の符号化処理は、
動画像の符号化処理および静止画像の符号化処理を含み、
前記符号化制御部は、
前記画像の符号化に関する調整を行う符号化パラメータを制御する画像符号化装置。
【請求項３】
請求項２に記載の画像符号化装置であって、
前記符号化パラメータは量子化パラメータを含む画像符号化処理。
【請求項４】
請求項２に記載の画像符号化装置であって、
前記符号化パラメータは符号化タイプを含む画像符号化処理。
【請求項５】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法であって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を有する画像符号化方法。
【請求項６】
請求項５に記載の画像符号化方法であって、
前記複数の符号化処理は、
動画像の符号化処理および静止画像の符号化処理を含み、
前記符号化制御ステップは、
前記画像の符号化に関する調整を行う符号化パラメータが制御される画像符号化方法。
【請求項７】
請求項６に記載の画像符号化方法であって、
前記符号化パラメータは量子化パラメータを含む画像符号化方法。
【請求項８】
請求項６に記載の画像符号化方法であって、
前記符号化パラメータは符号化タイプを含む画像符号化方法。
【請求項９】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムであって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を実行させるためのプログラム。
【請求項１０】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項１】
画像を符号化する複数の符号化処理を並行して実行する画像符号化装置であって、
前記複数の符号化処理を実行する複数の画像符号化部と、
前記複数の画像符号化部による前記複数の符号化処理のうち、少なくとも１つの画像符号化部によって実施された符号化処理によって符号化された画像の符号量を監視する符号量監視部と、
前記符号量監視部による監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象を前記符号量監視部によって監視されていた画像符号化部から他の画像符号化部へ変更する符号化制御部と
を有する画像符号化装置。
【請求項２】
請求項１に記載の画像符号化装置であって、
前記複数の符号化処理は、
動画像の符号化処理および静止画像の符号化処理を含み、
前記符号化制御部は、
前記画像の符号化に関する調整を行う符号化パラメータを制御する画像符号化装置。
【請求項３】
請求項２に記載の画像符号化装置であって、
前記符号化パラメータは量子化パラメータを含む画像符号化処理。
【請求項４】
請求項２に記載の画像符号化装置であって、
前記符号化パラメータは符号化タイプを含む画像符号化処理。
【請求項５】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法であって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を有する画像符号化方法。
【請求項６】
請求項５に記載の画像符号化方法であって、
前記複数の符号化処理は、
動画像の符号化処理および静止画像の符号化処理を含み、
前記符号化制御ステップは、
前記画像の符号化に関する調整を行う符号化パラメータが制御される画像符号化方法。
【請求項７】
請求項６に記載の画像符号化方法であって、
前記符号化パラメータは量子化パラメータを含む画像符号化方法。
【請求項８】
請求項６に記載の画像符号化方法であって、
前記符号化パラメータは符号化タイプを含む画像符号化方法。
【請求項９】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムであって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を実行させるためのプログラム。
【請求項１０】
画像を符号化する複数の符号化処理が並行して実行される画像符号化方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
前記複数の符号化処理が実行される複数の画像符号化ステップと、
前記複数の画像符号化ステップにおける前記複数の符号化処理のうち、少なくとも１つの符号化処理において符号化された画像の符号量が監視される符号量監視ステップと、
前記符号量監視ステップによる監視の結果、前記符号量があらかじめ定められた一定量を超過した場合、前記符号化処理の実行の対象が前記符号量監視ステップにおいて監視されていた符号化処理から他の符号化処理へ変更されるステップと
を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２００７−１８１１０１（Ｐ２００７−１８１１０１Ａ）
【公開日】平成１９年７月１２日（２００７．７．１２）
【国際特許分類】
【出願番号】特願２００５−３７９６４０（Ｐ２００５−３７９６４０）
【出願日】平成１７年１２月２８日（２００５．１２．２８）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１９年７月１２日（２００７．７．１２）
【国際特許分類】
【出願日】平成１７年１２月２８日（２００５．１２．２８）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]