画像合成出力装置、画像合成表示装置、携帯通信機器、画像合成出力方法、画像合成出力用プログラム及び画像合成出力用記録媒体
【課題】 複数の画像を合成してなる合成画像を得る段階での省電力化を達成する画像合成技術を提供する。
【解決手段】 入力画像記憶部１４４に記憶される入力画像４１又は４２が、第１所定期間内に更新される通常の期間では、マルチレイヤ画像合成部１５０は、これらの画像４１及び４２を合成してＬＣＤ表示パネル１６０へ出力する。入力画像４１、４２の何れもが、第１所定期間内に更新されなければ、マルチレイヤ画像合成部１５０は合成した画像を出力するだけでなく合成画像記憶部１４６へ書き込む。第１及び第２入力画像４１、４２の更新がないまま、第１所定期間後に第２所定期間が経過すると、マルチレイヤ画像合成部１５０は、入力画像４１、４２の合成を行うことなく、合成画像記憶部１４６に記憶されている合成画像を読み出して、ＬＣＤ表示パネル１６０へ出力する。
【解決手段】 入力画像記憶部１４４に記憶される入力画像４１又は４２が、第１所定期間内に更新される通常の期間では、マルチレイヤ画像合成部１５０は、これらの画像４１及び４２を合成してＬＣＤ表示パネル１６０へ出力する。入力画像４１、４２の何れもが、第１所定期間内に更新されなければ、マルチレイヤ画像合成部１５０は合成した画像を出力するだけでなく合成画像記憶部１４６へ書き込む。第１及び第２入力画像４１、４２の更新がないまま、第１所定期間後に第２所定期間が経過すると、マルチレイヤ画像合成部１５０は、入力画像４１、４２の合成を行うことなく、合成画像記憶部１４６に記憶されている合成画像を読み出して、ＬＣＤ表示パネル１６０へ出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像記憶手段に記憶されている複数の画像を合成して、１つの表示画面に表示するための合成画像を生成する画像合成出力装置、画像合成出力方法、画像合成出力用プログラム及び画像合成出力用記録媒体に関する。本発明は更に、合成画像を生成するとともに表示する画像合成表示装置及び当該画像合成表示装置を有する携帯通信機器に関するものである。
【背景技術】
【０００２】
従来技術による画像合成表示装置として、例えば下記特許文献１に記載されたコンピュータシステムに組み込まれたものが知られている。図１８は、このコンピュータシステム９００の主要部の構成を示すブロック図である。コンピュータシステム９００は、パーソナルコンピュータ（以下、「パソコン」と適宜略記する）９１０とディスプレイモニタ９２０とを主要な要素として備えている。コンピュータシステム９００は、その他の様々な構成部分をも備えているが、それらの構成部分は本発明とは直接関係しないので省略している。
【０００３】
コンピュータシステム９００では、ディスプレイモニタ９２０の多段階の省電力制御が、画像（本明細書では、画像を表現する信号である「画像データ」をも「画像」と適宜表現する）を描画するためのビデオＲＡＭ９１４への書込みアクセスの有無を示すＶＲＡＭ状態通知信号９３２を使って実行される。パソコン９１０は表示制御部９１２を備えており、当該表示制御部９１２は、ディスプレイコントローラ９１３とビデオＲＡＭ９１４とを有している。表示制御部９１２は、表示用の画像であるビデオ信号９３１と共にＶＲＡＭ状態通知信号９３２をディスプレイモニタ９２０へ送信する。
【０００４】
ディスプレイコントローラ９１３は、ディスプレイモニタ９２０による表示動作を制御するものであり、一定の画面リフレッシュレートでビデオＲＡＭ９１４から画像を読み出し、読み出した画像を表示用のＲ−Ｇ−Ｂからなる３原色を含むビデオ信号９３１に変換してディスプレイモニタ９２０に出力する。ビデオＲＡＭ９１４は、ディスプレイモニタ９２０に表示するための画像を記憶するものであり、パソコン９１０上で実行されるソフトウェアの制御によって書込みアクセスを受ける。このビデオＲＡＭ９１４に書込みアクセスによって、ビデオＲＡＭ９１４の記憶データである画像が書き換えられ、その結果、ディスプレイモニタ９２０に表示される画像が更新される。
【０００５】
ビデオＲＡＭ９１４に対して書込みアクセスが行われると、上記ＶＲＡＭ状態通知信号９３２が“０”から“１”に変化する。それにより、書込みアクセスが行われたことがディスプレイモニタ９２０に通知される。ビデオＲＡＭ９１４に対する書込みアクセスが終了すると、ＶＲＡＭ状態通知信号９３２は元の“０”に復帰する。
【０００６】
パソコン９１０が処理を行っている状態では、ソフトウェア制御による描画が実行される毎に、ビデオＲＡＭ９１４に対する書込みアクセスが実行される。しかしながら、パソコン９１０がキー入力待ち等のアイドル状態になると、ソフトウェア制御による描画処理は通常実行されない。ディスプレイモニタ９２０は、ＶＲＡＭ状態通知信号９３２の“０”から“１”への変化、及び“１”から“０”への復帰を参照することによって、パソコン９１０によるビデオＲＡＭ９１４に対する書込みアクセスの状態を検知することができる。
【０００７】
ディスプレイモニタ９２０は、パソコン９１０に接続して使用される外部表示装置であり、例えばＣＲＴモニタである。ディスプレイモニタ９２０は、省電力制御を行うために、タイマ９２１及びパワーダウン制御部９２２を備えている。タイマ９２１は、受信したＶＲＡＭ状態通知信号９３２に基づいて、ビデオＲＡＭ９１４に対する書込みアクセスが停止してからの経過時間、即ちパソコン９１０がアイドル状態になることによって、ビデオＲＡＭ９１４に記憶される画像が更新されず、それによりディスプレイモニタ９２０に表示される画像が更新されなくなってからの経過時間を計測するものである。
【０００８】
タイマ９２１は、ＶＲＡＭ状態通知信号９３２が“１”となるか、又はシステムリセット等によってリセットされると、計時のためのカウント動作を開始する。このカウント動作は、次に“１”となるＶＲＡＭ状態通知信号９３２を受信するまで継続される。パワーダウン制御部９２２は、タイマ９２１によって計時される経過時間、即ち画像の更新が行われなくなってからの経過時間の長さに応じて、ディスプレイモニタ９２０の表示状態を多段階制御するものである。即ち、画像の更新が行われなくなってからの経過時間が長くなるのに従って、表示状態が通常表示状態から、輝度低下状態、表示オフ状態、電源オフ状態へと、より低い消費電力状態へ、段階的に切り替えられる。
【０００９】
このようにコンピュータシステム９００では、パソコン９１０は、キー入力が行われなくなってからの経過時間を計測する代りに、ビデオＲＡＭ９１４に対する書込みアクセスの有無を、ＶＲＡＭ状態通知信号９３２によってディスプレイモニタ９２０に通知する。ディスプレイモニタ９２０は、このＶＲＡＭ状態通知信号９３２に基づいて、画像が更新されなくなってからの経過時間、即ち描画のために行われるビデオＲＡＭ９１４への書込みアクセスが停止してからの経過時間を計測し、その経過時間に応じて、多段階のパワーセーブ制御を実行する。これによってディスプレイモニタ９２０は、自身の主導で自身の表示状態を多段階に制御することができる。その結果、コンピュータシステム９００は、パソコン主導の制御によってディスプレイモニタ９２０の表示状態を決定する方式を採るコンピュータシステムに比べて、パソコン９１０の処理負荷を低減することができる。
【特許文献１】特開２０００−２５９１４０号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、従来の画像合成表示装置は、単に画像表示段階での省電力制御を行なうのみであって、表示すべき画像を合成し作成する段階での省電力制御を考慮したものではなかった。コンピュータシステム９００に組み込まれた画像合成表示装置に即して述べると、画像が更新されない時にディスプレイモニタ９２０の省電力制御が行われるが、パソコン９１０における表示制御部９１２の省電力化に関しては何等考慮されていなかった。
【００１１】
本発明は上記の問題点に鑑みてなされたもので、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にする画像合成出力装置、画像合成表示装置、携帯通信機器、画像合成出力方法、画像合成出力用プログラム及び画像合成出力用記録媒体を提供することを目的とする。
【課題を解決するための手段】
【００１２】
上記課題を解決し上記目的を達成するために、本発明のうち第１の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００１３】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００１４】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成書込モードへ戻る。
【００１５】
このように、入力画像記憶部の記憶内容が第１所定期間を経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００１６】
本発明のうち第２の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００１７】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００１８】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力する。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、画像合成部は、合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。更に、例えば最新更新時から第１所定期間及び第２所定期間を経過しても新たな画像の入力がなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが合成書込モード又は読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成モードへ戻る。
【００１９】
このように、入力画像記憶部の記憶内容が第１所定期間と第２所定期間とを経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、画像合成部は、無更新期間に備えて行われる合成画像記憶部への合成画像の書込みを、無更新期間の直前に相当する期間においてのみ行い、それ以前の更新期間においては、合成画像記憶部への書込みを行わず、画像合成処理のみを行う。このため、更新期間における消費電力も節減される。
【００２０】
本発明のうち第３の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００２１】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００２２】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、モード制御部は、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。
【００２３】
このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力する。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、第１の消費電力が第２の消費電力よりも大きいとの判定結果が得られることを条件として、最新更新時から第１所定期間と第２所定期間とを経過するまでに、画像合成部は、合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。その後、第２所定期間を経過しても新たな画像の入力がなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが合成書込モード又は読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成モードへ戻る。
【００２４】
このように、最新更新時から第１所定期間が経過したときに、第１の消費電力が第２の消費電力よりも大きいとの判定結果が得られた場合には、入力画像記憶部の記憶内容が第１所定期間と第２所定期間とを経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、画像合成部は、無更新期間に備えて行われる合成画像記憶部への合成画像の書込みを、無更新期間の直前に相当する期間においてのみ行い、それ以前の更新期間においては、合成画像記憶部への書込みを行わず、画像合成処理のみを行う。このため、更新期間における消費電力も節減される。また、合成モードから合成書込モード及び読出モードへの移行が、第１の消費電力が第２の消費電力よりも大きいこと、即ち合成モードよりも読出モードの方が、入力画像記憶部、合成画像記憶部及び画像合成部の全体の消費電力が低いことを条件として行われる。従って、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００２５】
本発明のうち第４の態様に係るものは、第３の態様に係る画像合成出力装置であって、前記消費電力判定部は、前記入力画像記憶部が記憶している前記複数の画像のデータ量に比例した量として前記第１の消費電力を評価し、前記合成画像記憶部に書き込むべき前記合成画像のデータ量に比例した量として前記第２の消費電力を評価するものである。
【００２６】
この構成の画像合成出力装置によれば、消費電力判定部は、入力画像記憶部が記憶している複数の画像のデータ量に比例した量として第１の消費電力を評価し、合成画像記憶部に書き込むべき合成画像のデータ量に比例した量として第２の消費電力を評価するので、第１及び第２の消費電力の評価を簡単な計算により短時間で行うことができる。画像合成部は合成モードにおいて、入力画像記憶部が記憶している複数の画像を取り扱うので、第１の消費電力は当該複数の画像のデータ量に比例した量として近似的に評価することができる。同様に、画像合成部は読出モードにおいて、合成画像記憶部が記憶する合成画像を取り扱うので、第２の消費電力は、合成画像のデータ量に比例した量として近似的に評価することができる。但し、双方の動作モードの間で処理内容は異なるので、第１の消費電力と複数の画像のデータ量との間の比例係数と、第２の消費電力と合成画像のデータ量との間の比例係数とは、一般には異なる値となる。本構成は、かかる消費電力とデータ量との間の近似的な関係を利用して、第１及び第２の消費電力の評価を、比較的良好な精度で且つ短時間で行うことを可能にする。
【００２７】
本発明のうち第５の態様に係るものは、第１ないし４の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第１所定期間を計測するものである。
【００２８】
この構成の画像合成出力装置によれば、画像合成部が合成画像の１フレーム分を出力する周期を単位として第１所定期間が計測されるので、画像合成部のフレーム単位の動作に整合して動作モードの変更が行われ得る。
【００２９】
本発明のうち第６の態様に係るものは、第２ないし４の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第２所定期間を計測するものである。
【００３０】
この構成の画像合成出力装置によれば、画像合成部が合成画像の１フレーム分を出力する周期を単位として第２所定期間が計測されるので、画像合成部のフレーム単位の動作に整合して動作モードの変更が行われ得る。
【００３１】
本発明のうち第７の態様に係るものは、第６の態様に係る画像合成出力装置であって、前記第２所定期間が前記周期と同一長さに定められているものである。
【００３２】
この構成の画像合成出力装置によれば、合成画像の１フレーム分が出力される周期と同一長さに第２所定期間が定められているので、消費電力の大きい合成書込モードの処理が行われる期間が必要最小限の長さに抑えられる。
【００３３】
本発明のうち第８の態様に係るものは、第１ないし７の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記複数の画像の各々の入力に伴って入力される更新通知信号に基づいて、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像の更新があったことを検知する入力画像更新判定部を、更に含むものである。
【００３４】
この構成の画像合成出力装置によれば、入力画像更新判定部が、更新通知信号に基づいて画像の更新を検知するので、画像の更新の有無の判定が簡易に且つ短時間で行われる。
【００３５】
本発明のうち第９の態様に係るものは、第１ないし８の何れかの態様に係る画像合成出力装置であって、前記入力画像記憶部と前記合成画像記憶部とはそれぞれ、単一のメモリに割り当てられたメモリ空間であるものである。
【００３６】
この構成の画像合成出力装置によれば、入力画像記憶部と合成画像記憶部とが、それぞれ単一のメモリに割り当てられたメモリ空間であるので、これらの記憶部を低廉に実現することができる。従って、例えば画像合成出力装置に加えて表示装置を備える画像合成表示装置において、合成画像記憶部を表示装置の側に組み込んだ形態に比べて、単一のメモリ内に入力画像記憶部と共に合成画像記憶部が割り当てられた本構成の画像合成出力装置を用いた形態は、製造コストを節減することができる。
【００３７】
本発明のうち第１０の態様に係るものは、画像合成表示装置であって、第１ないし９の何れかの態様に係る画像合成出力装置と、前記画像合成部が出力する前記出力画像を表示する表示装置と、を備えるものである。
【００３８】
この構成の画像合成表示装置によれば、本発明の画像合成出力装置と表示装置とが備わるので、上記した各構成による効果が得られる。
【００３９】
本発明のうち第１１の態様に係るものは、携帯通信機器であって、第１０の態様に係る画像合成表示装置を備えるものである。
【００４０】
この構成の携帯通信機器によれば、本発明の画像合成表示装置が備わるので、上記した各構成による効果が得られる。携帯通信機器は通常において電池を電源とするので、本構成を採ることにより電池の寿命を高めることができ、それにより携帯性、有用性を向上させることができる。
【００４１】
本発明のうち第１２の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４２】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４３】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００４４】
本発明のうち第１３の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４５】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４６】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００４７】
本発明のうち第１４の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４８】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成装置が前記入力画像記憶装置から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成装置が前記合成画像記憶装置から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定工程と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４９】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、モード制御工程は、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成装置に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００５０】
本発明のうち第１５の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５１】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５２】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００５３】
本発明のうち第１６の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５４】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５５】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００５６】
本発明のうち第１７の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５７】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５８】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、コンピュータは、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００５９】
本発明のうち第１８の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６０】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６１】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００６２】
本発明のうち第１９の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６３】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６４】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００６５】
本発明のうち第２０の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６６】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６７】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、コンピュータは、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【発明の効果】
【００６８】
以上のように本発明は、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にする。
【発明を実施するための最良の形態】
【００６９】
以下に本発明の実施の形態について、図面を参照しながら説明する。
【００７０】
（実施の形態１）
図１は、本発明の実施の形態１による画像合成表示装置とその周辺部分の構成を示すブロック図である。この画像合成表示装置は、携帯電話機に組み込まれた携帯電話表示部１００として具体化されている。図１に描かれる携帯電話表示部１００の周辺部分は携帯電話機内の装置要素である。
【００７１】
言うまでもなく、本発明の画像合成表示装置は、携帯電話機の表示部として実現されるだけでなく、例えばノート型パソコンを始めとする各種携帯型パソコンの表示部、例えばＰＤＡ等と呼ばれることのある携帯型情報端末装置の表示部、ＤＶＤプレーヤーやＣＤプレーヤー等を始めとする各種オーディオビデオ機器の表示部、各種家庭用電気機器の表示部、複写機やファクシミリその他の各種事務用電子機器の表示部、或いはその他各種機器の表示部として実現され得るものである。特に、携帯電話機或いは携帯型情報端末装置などの携帯通信機器は、電池を電源とするので、本発明の構成を採ることにより消費電力を節減することができ、それにより携帯性及び有用性を高めることができる。
【００７２】
携帯電話機の全体を構成するには、図１に示す携帯電話表示部１００だけでなく、通信や通話を行うための様々な要素を必要とする。しかしながらこれらの要素は、本発明の本質と直接関係せず、且つ従来周知のものであるので説明を省略ないし簡略化する。
【００７３】
携帯電話表示部１００は、レイヤ情報作成部１３０、外部画像メモリ１４０、マルチレイヤ画像合成部１５０、及びＬＣＤ表示パネル１６０を備えている。ＬＣＤ表示パネル１６０は、本発明の表示装置の具体例であって、ＣＲＴ表示装置（陰極線管表示装置）やＥＬやＰＤＰ（Plasma Display Panel）や、その他各種の表示デバイスに置き換えられても良い。
【００７４】
携帯電話表示部１００には、ＬＣＤ表示パネル１６０に表示するための複数種類の画像が、入力画像１０９として入力される。携帯電話表示部１００は、これらの複数種類の入力画像１０９を合成することにより合成画像を生成し、当該合成画像をＬＣＤ表示パネル１６０に表示する。図１に例示する携帯電話機は、カメラ装置１０２を備えている。それにより携帯電話表示部１００には、入力画像１０９として、対局画、自局画、及び背景画を入力することができる。
【００７５】
その結果、図２に例示するように、ＬＣＤ表示パネル１６０には、対局画像１１、自局画像１２及び背景画像１３を合成して成る合成画像が表示される。対局画像１１は、通信相手の携帯電話機（対局と称する）のカメラで撮影され、無線等の伝送路を通じて送られ、且つ自身（自局と称する）が受信及び再生した画像である。自局画像１２は、自局のカメラで撮影することにより得られるモニタ画像である。背景画像１３は、対局画像１１及び自局画像１２の背景となる画像であって、電池情報、電波状況情報等をも同時に表示する画像である。
【００７６】
図１に戻って、外部画像メモリ１４０は、入力画像記憶部１４４と、レイヤ情報記憶部１４２と、合成画像記憶部１４６とを主要な要素として備えている。入力画像記憶部１４４は、入力画像１０９を記憶する。入力画像１０９のうち対局画像１１は、通信装置３４、対局圧縮画像受信部１０５、対局圧縮画像記憶部１０６及び対局圧縮画像伸張部１０７を通じて入力画像記憶部１４４へ入力される。対局圧縮画像受信部１０５は、データ圧縮した形式で対局から送られた画像を受信する。対局圧縮画像記憶部１０６は、受信された圧縮画像を記憶する。対局圧縮画像伸張部１０７は、対局圧縮画像記憶部１０６に記憶された圧縮画像を伸張することにより、非圧縮形式の対局画像１１を得る。
【００７７】
入力画像１０９のうち自局画像１２は、カメラ装置１０２によって生成される。カメラ装置１０２は、ＣＣＤ（Charge Coupled Device）撮像素子を有する撮像部とＤＭＡ（Direct Memory Access）回路とを含んでいる。ＤＭＡ回路は、ＣＰＵを介在せずにメモリへ直接にアクセスすることを可能にする回路である。入力画像１０９のうち背景画像１３は、背景画像生成部１０１によって生成される。対局画像１１として新たな画像が入力画像記憶部１４４へ入力されると、入力画像記憶部１４４は、既に記憶している対局画像１１を更新する形式で新たな画像を記憶する。自局画像１２及び背景画像１３についても同様である。
【００７８】
レイヤ情報記憶部１４２は、レイヤ情報作成部１３０から入力されるレイヤ情報を記憶する。レイヤ情報は、入力画像１０９が含む対局画像１１等の画像のレイアウトに関する情報であるレイアウト情報と、マルチレイヤ画像合成部１５０の動作モードを指示する情報であるモード指示情報とを含んでいる。合成画像記憶部１４６は、入力画像記憶部１４４に記憶される入力画像１０９に基づいて生成される合成画像を記憶する。
【００７９】
外部画像メモリ１４０は、データ量の大きい画像を記憶する必要から、望ましくは大容量のものが安価に入手可能なＤＲＡＭ（Dynamic Random Access Memory）で構成される。レイヤ情報記憶部１４２、入力画像記憶部１４４及び合成画像記憶部１４６は、望ましくは単一のＲＡＭとしての外部画像メモリ１４０に割り当てられたメモリ空間である。それにより、これら複数の記憶部１４２、１４４及び１４６を、より安価に実現することが可能となる。これらのメモリ空間は、単一のＲＡＭとしての外部画像メモリ１４０を時分割的に使用することにより、一部ないし全部において重複することがあっても構わない。各記憶部１４２、１４４及び１４６に単一のＲＡＭのメモリ空間が割り当てられる形態では、割り当てられた各メモリ空間の先頭アドレスを指定することで、各記憶部１４２、１４４及び１４６の何れかを選択して使用することができる。
【００８０】
マルチレイヤ画像合成部１５０は、本発明の画像合成部の具体例に該当し、合成用ラインメモリ１５２、合成処理部１５４及びメモリインタフェース１５６を備えている。それによりマルチレイヤ画像合成部１５０は、レイヤ情報記憶部１４２に記憶されるモード指示情報にもとづいて、複数の動作モードの何れかを選択的に実行する。複数の動作モードは、合成モード、合成書込モード、及び読出モードを含んでいる。
【００８１】
合成モードでは合成処理部１５４が、入力画像記憶部１４４に記憶されている入力画像１０９を読み出して合成することにより、合成画像を生成し出力画像１５９としてＬＣＤ表示パネル１６０へ出力する。合成書込モードでは合成処理部１５４が、入力画像記憶部１４４に記憶されている入力画像１０９を読み出して合成することにより、合成画像を生成し出力画像１５９として出力するとともに、合成画像を合成画像記憶部１４６へ書き込む。読出モードでは、合成画像記憶部１４６が記憶している合成画像をメモリインタフェース１５６が読み出し、出力画像１５９として出力する。合成処理部１５４及びメモリインタフェース１５６は、ＬＣＤ表示パネル１６０が１画面分を走査する周期に同期して出力画像１５９を出力する。合成モード及び合成書込モードでは、メモリインタフェース１５６は画像の読出し動作を停止し、読出モードでは、合成処理部１５４が画像の合成処理を停止する。
【００８２】
合成処理部１５４は、入力画像１０９から合成画像を生成する合成処理を行う際に、レイヤ情報記憶部１４２に記憶されるレイアウト情報を参照することにより、合成画像内の各入力画像１０９の配置、サイズ、重なり部分において上層に表示すべき優先順位等を決定する。合成処理部１５４は、入力画像１０９を１ライン毎あるいは複数ライン毎に合成用ラインメモリ１５２へ書き込むことにより合成処理を行う。合成処理の詳細については、後述する。
【００８３】
合成用ラインメモリ１５２は、データ量の比較的小さい１ラインないし複数ライン分の画像を記憶すれば足りる一方、書込み及び読出しを高速に行う必要があることから、望ましくはＳＲＡＭ（Static Random Access Memory）で構成される。合成処理部１５４及びメモリインタフェース１５６は、高速処理を行う必要から、望ましくはソフトウェアを必要としないハードウェア回路で実現される。
【００８４】
レイヤ情報作成部１３０は、入力画像更新判定部１２２、無更新カウンタ制御部１２４、無更新カウンタ１２６、及び動作モード切替部１２８を備えている。又、動作モード切替部１２８は、合成モード指示部１３１、合成書込モード指示部１３２、読出モード指示部１３３、及びレイアウト情報生成部１３４を備えている。これらのうち、入力画像更新判定部１２２、無更新カウンタ制御部１２４、無更新カウンタ１２６、合成モード指示部１３１、合成書込モード指示部１３２、及び読出モード指示部１３３は、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０を構成する。
【００８５】
入力画像更新判定部１２２は、入力画像１０９を構成する対局画像１１、自局画像１２及び背景画像１３のうちの少なくとも一つの画像が更新されたことを検知する。対局圧縮画像伸張部１０７は、対局画像１１が更新される毎に、更新を通知する通知信号を入力画像更新判定部１２２へ伝える。カメラ画像入力制御部１０４は、カメラ装置１０２を制御するものであり、カメラ装置１０２に１フレーム分の画像の撮像を指示する毎に、自局画像１２の更新を通知する通知信号を入力画像更新判定部１２２へ伝える。同様に、背景画像入力制御部１０３は、背景画像生成部１０１を制御するものであり、背景画像生成部１０１に新たな背景画像の生成を指示する毎に、背景画像１３の更新を通知する通知信号を入力画像更新判定部１２２へ伝える。入力画像更新判定部１２２は、これらの通知信号に基づいて、入力画像記憶部１４４に記憶されている入力画像１０９に更新があったことを検知する。更に、入力画像更新判定部１２２は、入力画像１０９に更新があったか否かについての判断結果を無更新カウンタ制御部１２４へ送る。
【００８６】
無更新カウンタ制御部１２４は、入力画像更新判定部１２２による判断結果に基づいて、無更新カウンタ１２６のカウント値、即ち計数値を制御するとともに、当該カウント値と所定の値との比較を行う。無更新カウンタ制御部１２４は更に、比較の結果を動作モード切替部１２８へ伝える。無更新カウンタ制御部１２４は、特に、入力画像更新判定部１２２から送られる判断結果が、入力画像１０９に更新が有ったことを示す場合には、カウント値をリセットする。動作モード切替部１２８に含まれる合成モード指示部１３１、合成書込モード指示部１３２、及び読出モード指示部１３３は、無更新カウンタ制御部１２４が伝える比較の結果に基づいて、マルチレイヤ画像合成部１５０が採るべき動作モードを選択し、選択した動作モードを採るべく指示するモード指示情報を作成し、レイヤ情報記憶部１４２に書き込む。
【００８７】
レイアウト情報生成部１３４は、レイヤ元（もと）情報指定部１０８が生成するレイヤ元情報に基づいて、レイアウト情報を生成しレイヤ情報記憶部１４２へ書き込む。携帯電話表示部１００の周辺装置部に属するレイヤ元情報指定部１０８は、レイアウト情報の元になる情報であるレイヤ元情報を生成し、レイアウト情報生成部１３４へ入力する。レイヤ元情報指定部１０８は、例えば、ユーザのキー操作がなければレイヤ元情報としてデフォルト（初期設定）の内容を生成するとともに、ユーザのキー操作があれば、これに応答してレイヤ元情報の内容を変更することも可能に構成される。
【００８８】
レイヤ情報作成部１３０、背景画像入力制御部１０３、カメラ画像入力制御部１０４及びレイヤ元情報指定部１０８は、プログラムを要しないハードウェアで構成しても良いが、プログラムを搭載したマイクロコンピュータ等のコンピュータによって構成するのが、より簡素かつ容易である。当該コンピュータは、不図示のＣＰＵ（Central Processing Unit；中央演算処理部）、このＣＰＵの動作を規定するプログラムを格納する不図示のＲＡＭ（Random Access Memory）或いはＲＯＭ（Read Only Memory）、一時的にデータを保管する不図示のＲＡＭ等の記憶部を有する。
【００８９】
上記プログラムは、ＲＯＭ、フレキシブルディスク、ＣＤ−ＲＯＭ等の記録媒体３１を通じて供給することも、電話回線、ネットワーク等の伝送媒体３３を通じて供給することも可能である。図１には、記録媒体３１としてＣＤ−ＲＯＭが描かれており、伝送媒体３３として無線の伝送媒体が描かれている。
【００９０】
記録媒体３１としてＣＤ−ＲＯＭに記録されたプログラムは、外部装置としてのＣＤ−ＲＯＭ読取装置３２を携帯電話機へ接続することにより、読み出すことができ、更に携帯電話機が有する不図示のＲＡＭ或いはハードディスク等の記憶装置に格納することができる。記録媒体３１としてＲＯＭの形態でプログラムが供給される場合には、当該ＲＯＭを携帯電話機に搭載することにより、レイヤ情報作成部１３０等は上記プログラムに従った処理を実行可能となる。
【００９１】
伝送媒体３３を通じて供給される上記プログラムは、通信装置３４を通じて受信され、携帯電話機が有する不図示のＲＡＭ或いはハードディスク等の記憶装置に格納される。伝送媒体３３は、上記の通り有線の伝送媒体に限られない。また、伝送媒体３３は通信線路のみでなく、通信線路を中継する中継装置、例えばルータ等の通信リンクをも含む。
【００９２】
次に、携帯電話表示部１００の動作について詳述する。図３は、レイヤ情報作成部１３０の動作手順を示すフローチャートである。ユーザによるキー操作等により携帯電話表示部１００の動作が開始されると、無更新カウンタ制御部１２４は、無更新カウンタ１２６のカウント値をリセットする（Ｓ１）。カウント値は、リセットにより例えば“０”に設定される。次に、無更新カウンタ制御部１２４は、カウント値が“０”になったことを動作モード切替部１２８へ伝える。それにより、合成モード指示部１３１は、マルチレイヤ画像合成部１５０の動作モードを合成モードに設定する（Ｓ２）。即ち、合成モード指示部１３１は、合成モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。
【００９３】
次に、入力画像更新判定部１２２は、入力画像記憶部１４４に記憶される入力画像１０９に更新があったか否かを判断する（Ｓ３）。図３のループは、マルチレイヤ画像合成部１５０が合成画像の１フレーム分を出力画像１５９として出力する周期、即ちフレーム周期毎に一巡する。それに伴い、ステップＳ３の処理はフレーム周期毎に反復実行される。入力画像更新判定部１２２が入力画像１０９の更新を検知しておれば（Ｓ４でＹｅｓ）、処理はステップＳ１へ戻り、無更新カウンタ制御部１２４は、カウンタ値の如何によらず、カウンタ値をリセットする（Ｓ１）。一方、入力画像更新判定部１２２が入力画像１０９の更新を検知していなければ（Ｓ４でＮｏ）、処理はステップＳ５へ移行する。ステップＳ５では、無更新カウンタ制御部１２４は、カウント値をインクリメントする。一例として、カウント値の加算幅は“１”であるとする。
【００９４】
次に、無更新カウンタ制御部１２４は、カウント値が所定値Ｔ０以下であるか否かを判定する（Ｓ６）。カウント値は、フレーム周期を単位とする値であるので、所定値Ｔ０は、所定の期間に対応する。この所定の期間を第１所定期間と称する。カウント値が第１所定期間Ｔ０以下であれば（Ｓ６でＹｅｓ）、処理はステップＳ１０へ移行する。一方、カウント値が第１所定期間Ｔ０を超えておれば（Ｓ６でＮｏ）、無更新カウンタ制御部１２４は、カウント値が所定値Ｔ０と別の所定値Ｔ１との和以下であるか否かを判定する（Ｓ７）。所定値Ｔ１は、所定値Ｔ０と同様に所定の期間に対応する。この所定の期間を第２所定期間と称する。
【００９５】
カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和以下であれば（Ｓ７でＹｅｓ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ送る。合成書込モード指示部１３２は、送られた判断結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ８）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。一方、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和を超えておれば（Ｓ７でＮｏ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ送る。読出モード指示部１３３は送られた判断結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ９）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。ステップＳ８又はＳ９の処理が終了すると、処理はステップＳ１０へ移行する。
【００９６】
ステップＳ１０においてレイヤ情報作成部１３０は、処理を終了すべきか否かを判定する。ユーザが所定のキー操作を行っている等により、処理を終了すべきであるときには、レイヤ情報作成部１３０は処理を終了する。一方、処理を終了すべきでないときには、レイヤ情報作成部１３０は、処理をステップＳ３へ戻す。
【００９７】
以上のように、レイヤ情報作成部１３０は、フレーム周期毎にステップＳ１〜Ｓ４のループ、又はステップＳ３〜Ｓ１０のループを反復し、フレーム周期毎に変化するカウント値に基づいて３種の動作モードの何れかを選択する。カウント値は、入力画像１０９が最新に更新された時である最新更新時からの経過期間に対応する。従って、レイヤ情報作成部１３０は、最新更新時からの経過期間の長さに応じて、３種の動作モードの何れかを選択する。
【００９８】
第１所定期間Ｔ０及び第２所定期間Ｔ１が、フレーム周期を単位として計測されるので、マルチレイヤ画像合成部１５０のフレーム単位の動作に整合して動作モードの変更を行うことができる。後述するように合成書込モードでは他の動作モードに比べて消費電力が通常において大きい。第２所定期間Ｔ１を、フレーム周期と同一長さに設定することにより、消費電力が比較的大きい合成書込モードの期間を必要最小限の長さに抑えることができる。
【００９９】
図４は、マルチレイヤ画像合成部１５０の動作手順を示すフローチャートである。ユーザによるキー操作等により携帯電話表示部１００の動作が開始されると、合成処理部１５４及びメモリインタフェース１５６は、レイヤ情報記憶部１４２に記憶されるモード指示情報を読出し、当該モード指示情報が読出モードを指示しているか否かを判定する（Ｓ３１）。
【０１００】
モード指示情報が読出モードを指示していない場合には（Ｓ３１でＮｏ）、モード指示情報は合成モード又は合成書込モードを指示していることになる。従ってこの場合には、メモリインタフェース１５６は画像の読出し動作を行わず、他方、合成処理部１５４は入力画像記憶部１４４から入力画像１０９を読み出す（Ｓ３２）。次に、合成処理部１５４は、合成用ラインメモリ１５２に対する書込み及び読出しを行うことにより、入力画像１０９を合成することにより合成画像を生成する（Ｓ３３）。続いて、合成処理部１５４は、生成した合成画像を出力画像１５９としてＬＣＤ表示パネル１６０へ出力する（Ｓ３４）。
【０１０１】
次に、合成処理部１５４はモード指示情報が合成書込モードを指示しているか否かを判定する（Ｓ３５）。モード指示情報が合成書込モードを指示しておれば（Ｓ３５でＹｅｓ）、合成処理部１５４はステップＳ３３で生成した合成画像を合成画像記憶部１４６へ書き込む（Ｓ３６）。その後、処理はステップＳ３９へ移行する。一方、モード指示情報が合成書込モードを指示していなければ（Ｓ３５でＮｏ）、処理はＳ３１へ戻る。
【０１０２】
ステップＳ３１の判定において、モード指示情報が読出モードを指示しておれば（Ｓ３１でＹｅｓ）、合成処理部１５４は画像の合成処理を行わず、他方、メモリインタフェース１５６は合成画像記憶部１４６に記憶される合成画像を読み出す（Ｓ３７）。次に、メモリインタフェース１５６は、読み出した合成画像を出力画像１５９としてＬＣＤ表示パネル１６０へ出力する（Ｓ３８）。その後、処理はステップＳ３９へ移行する。
【０１０３】
ステップＳ３９では、マルチレイヤ画像合成部１５０は、処理を終了すべきか否かを判定する。ユーザが所定のキー操作を行っている等により、処理を終了すべきであるときには、マルチレイヤ画像合成部１５０は処理を終了する。一方、処理を終了すべきでないときには、マルチレイヤ画像合成部１５０は、処理をステップＳ３１へ戻す。以上の処理におけるループは、画像の１ライン毎或いは複数ライン毎に反復される。
【０１０４】
図５は、画像合成部１５０の合成モードにおける動作を説明する動作説明図である。図５の例では、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。第１入力画像４１は例えば対局画像１１であり、第２入力画像４２は例えば自局画像１２である。この場合、第１入力画像４１及び第２入力画像４２は、例えばフルカラーの自然画像である。図５では便宜上、第１入力画像４１として平仮名の「あ」という文字画像を例示し、第２入力画像４２として平仮名の「え」という文字画像を例示している。
【０１０５】
入力画像１０９を構成する画像の種類及びその数は、例えばユーザのキー操作により設定及び変更が可能である。例えば、第１入力画像４１及び第２入力画像４２の何れかが、コンピュータで作成されたＣＧ（コンピュータ・グラフィックス）画像が入力されたものであっても良い。更に、第１入力画像４１及び第２入力画像４２は、静止画と動画像との何れであっても良く、その他様々な種類の画像であり得る。
【０１０６】
入力画像記憶部１４４には、第１入力画像４１を記憶するための記憶領域である第１入力画像記憶部１４８が確保され、第２入力画像４２を記憶するための記憶領域である第２入力画像記憶部１４９が確保される。第１入力画像記憶部１４８及び第２入力画像記憶部１４９は、入力画像１０９を構成する画像の種類、数、及びサイズ（即ちデータ量）に応じて、単一のＲＡＭとしての外部画像メモリ１４０内に自在に割り当てられるメモリ空間である。それにより、入力画像記憶部１４４の記憶容量を節減することができる。これに対して、入力画像記憶部１４４内に、入力画像１０９を構成する最大数の画像の最大サイズに対応したメモリ空間を固定的に確保することも可能である。
【０１０７】
これらのメモリ空間は、単一のＲＡＭとしての外部画像メモリ１４０を時分割的に使用することにより、一部ないし全部において重複することがあっても構わない。各記憶部１４８及び１４９に単一のＲＡＭのメモリ空間が割り当てられる形態では、割り当てられた各メモリ空間の先頭アドレスを指定することで、各記憶部１４８及び１４９の何れかを選択して使用することができる。
【０１０８】
レイヤ情報記憶部１４２には、動作モード切替部１２８が書き込んだレイヤ情報５１が記憶されている。既に述べたようにレイヤ情報５１は、レイアウト情報とモード指示情報とを含んでいる。
【０１０９】
合成画像記憶部１４６は、合成画像６１を記憶するためのものであるが、合成モードでは合成画像記憶部１４６は使用されない。合成モードでは、合成処理部１５４はレイヤ情報５１が含むレイアウト情報に基づいて、第１入力画像４１と第２入力画像４２とを入力画像記憶部１４４から読み出し合成する。図５の例では、レイアウト情報は第１入力画像４１（番号“１”で表している）の右下隅の小区画の上に第２入力画像４２（番号“２”で表している）を重ねて表示すべく指示している。即ち、レイアウト情報は、ＬＣＤ表示パネル１６０の表示画面全体をカバーすべき“１”のレイヤと、表示画面の右下において、“１”のレイヤの上層に位置する“２”のレイヤとの２つのレイヤを指示している。
【０１１０】
図６は、合成処理部１５４の画像合成処理を説明する動作説明図である。図６に例示するように、合成処理部１５４は、レイアウト情報に従って入力画像記憶部１４４から第１入力画像４１と第２入力画像４２とを選択的に例えば１ラインずつ読み出し、合成用ラインメモリ１５２に書き込む。合成処理部１５４は第１入力画像４１を表示すべき領域では第１入力画像４１を読み出し、第２入力画像４２を重ねて表示すべき領域では第２入力画像４２を読み出す。図６の例では、合成用ラインメモリ１５２は合成画像７ライン分の記憶容量を有しているが、一般には１ライン分以上の記憶容量を有しておればよい。
【０１１１】
合成処理部１５４は、合成用ラインメモリ１５２に記憶された１ライン分の合成画像をＦＩＦＯ（First Input First Out；先入れ先出し）の形式で順次読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図５に例示するように、ＬＣＤ表示パネル１６０の表示画面の全面に第１入力画像４１である平仮名の「あ」を拡大した画像が表示され、表示画面の右下領域に第２入力画像４２である平仮名の「え」を適度な大きさに調整した画像が表示される。
【０１１２】
図７は、画像合成部１５０の合成書込モードにおける動作を説明する動作説明図である。図７の例においても図５と同様に、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。合成書込モードにおいても合成モードと同様に、合成処理部１５４はレイヤ情報５１が含むレイアウト情報に基づいて、第１入力画像４１と第２入力画像４２とを入力画像記憶部１４４から読み出し合成する。また、図６に例示したように合成処理部１５４は、合成用ラインメモリ１５２に記憶された１ライン分の合成画像をＦＩＦＯの形式で順次読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図７に例示するような合成画像がＬＣＤ表示パネル１６０に表示される。
【０１１３】
合成処理部１５４は、合成書込モードにおいてはそれだけに止まらずに、合成用ラインメモリ１５２から読み出した１ライン分の合成画像を更に合成画像記憶部１４６へ順次書き込む。その結果、図７に例示するような合成画像６１が合成画像記憶部１４６に記憶される。合成画像記憶部１４６への合成画像６１の書込みは、合成書込モードの後に予定される読出モードへの準備として行われるものである。
【０１１４】
図８は、画像合成部１５０の読出モードにおける動作を説明する動作説明図である。図８の例においても図５及び図７と同様に、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。読出モードでは、合成処理部１５４は画像合成処理を行わず、メモリインタフェース１５６が合成画像記憶部１４６に記憶されている合成画像６１を読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図８に例示するような合成画像がＬＣＤ表示パネル１６０に表示される。
【０１１５】
図９は、画像合成部１５０の動作モードの移り変わりを例示するタイミングチャートである。以下において、当該タイミングチャートを参照しつつ、各動作モードにおける消費電力について説明する。図９の左側に示すように、入力画像１０９の更新が第１所定期間Ｔ０内に行われ、それに伴いＬＣＤ表示パネル１６０に表示される画像の更新が行われている通常の期間においては、通常モードとして合成モードが選択・設定される。その結果、入力画像１０９の合成処理が行われ、合成処理によって得られる合成画像がＬＣＤ表示パネル１６０へ表示される。
【０１１６】
この合成モードで消費される電力は、例えば次のように計算される。但し、ここで計算する消費電力は、外部画像メモリ１４０とマルチレイヤ画像合成部１５０とにおいて、メモリアクセスによって消費される電力である。他の部分、例えばＬＣＤ表示パネル１６０、レイヤ情報作成部１３０、及びその他の部分で消費される電力は、動作モードとの相関性が低いので計算対象から除外する。
【０１１７】
合成モードにおけるメモリアクセスとしては、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスが発生するとともに、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する書込みアクセスと読出しアクセスとが発生する。即ち、合成モードでは図１０のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。合成モードにおける消費電力は、これらのアクセスに伴う消費電力の合計となる。外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一であり、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。
【０１１８】
【数１】
【０１１９】
又、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する読出しアクセスによる消費電力と書込みアクセスによる消費電力とは同一であり、その消費電力をＷ１５０とすると、Ｗ１５０は数式２で与えられる。
【０１２０】
【数２】
【０１２１】
数式１において、Ａ１は入力画像記憶部１４４と合成画像記憶部１４６とを構成するメモリ素子の動作電流（Ａ）であり、Ｖ１は当該メモリ素子に供給する電圧（Ｖ）であり、Ｋ３は当該メモリ素子の記憶データが変化する頻度を表し、数式３で与えられる。
【０１２２】
【数３】
【０１２３】
数式３において、Ｉｐ１はＬＣＤ表示パネル１６０に表示される画像即ち表示画像のピクセル（画素）数であり、ｆｐ１は表示パネル１６０における１秒間の画像更新回数であり、ｆ３はマルチレイヤ画像合成部１５０が１秒間に処理することのできる最大ピクセル数である。
【０１２４】
又、数式１において、Ｃ１は外部画像メモリ１４０とマルチレイヤ画像合成部１５０との接続部分の浮遊容量（Ｆ）であり、Ｄｂｐｐは外部画像メモリ１４０のデータバス幅であり、Ａｂｐｐは外部画像メモリ１４０のアドレスバス幅であり、Ｋ１は外部画像メモリ１４０のデータバス値、即ちデータバス上のデータの変化頻度であり、Ｋ２は外部画像メモリ１４０のアドレスバス値の変化頻度である。Ａ１を３０ｍＡ、Ｖ１を１．８Ｖ、Ｉｐ１を２４０×３２０＝７６，８００ピクセル、ｆｐ１を６０フレーム／秒、ｆ３を１００Ｍピクセル、Ｃ１を１０ｐＦ、Ｄｂｐｐを３２、Ａｂｐｐを１６、Ｋ１を１／２、Ｋ２を１／１６と仮定して、数式１と数式３とからＷ１４０を計算すると、約５ｍＷになる。
【０１２５】
又、数式２において、Ａ２はマルチレイヤ画像合成部１５０の合成用ラインメモリ１５２を構成するメモリ素子の動作電流（Ａ）であり、Ｖ２は当該メモリ素子に供給する電圧（Ｖ）であり、Ｋ４は当該メモリ素子の記憶データが変化する頻度を表し、数式４で与えられる。
【０１２６】
【数４】
【０１２７】
数式４において、Ｉｐ２はマルチレイヤ画像合成部１５０が処理する１画面のピクセル数であり、ｆｐ２はマルチレイヤ画像合成部１５０がＬＣＤ表示パネル１６０に対して１秒間に画面更新する回数であり、ｆ２はマルチレイヤ画像合成部１５０が１秒間に処理可能な最大ピクセル数である。Ａ２を６０ｍＡ、Ｖ２を１．８Ｖ、Ｉｐ２を２４０×３２０＝７６，８００ピクセル、ｆｐ２を６０フレーム／秒、ｆ２を１００Ｍピクセルと仮定して、数式２と数式４とからＷ１５０を計算すると、約５ｍＷになる。
【０１２８】
以上の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスにより消費される電力Ｗ１４０は約５ｍＷである。また、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する書込みアクセスにより消費される電力Ｗ１５０も約５ｍＷである。更に合成用ラインメモリ１５２に対する読出しアクセスにより消費される電力Ｗ１５０も約５ｍＷである。これらを合計すると、約１５ｍＷとなる。従って、合成モードでの消費電力は約１５ｍＷとなる。
【０１２９】
図９に戻って、入力画像１０９の更新が最新に行われてから、更新がないまま第１所定期間Ｔ０が経過したと仮定する。この時、図９に示す通り、動作モードが合成モードから合成書込モードへ切り替えられる。上記の通り、第１所定期間Ｔ０は、予め定められた時間であって、無更新カウンタ１２６によってカウントされる時間である。動作モードの切替えは、上記の通り、動作モード切り替え部１２８によって新たな動作モードが選択され、選択された動作モードを指示するモード指示情報がレイヤ情報記憶部１４２へ入力されることによって達成される。その結果、合成書込モードによる画像合成処理と合成画像を書込む処理と表示処理とが実行される。
【０１３０】
上述したように合成書込モードは、画像合成処理により生成された合成画像６１がＬＣＤ表示パネル１６０に表示されると同時に、合成画像記憶部１４６に記憶される動作モードである。従って、合成書込モードでは、合成モードで行われるメモリアクセスに加えて、合成画像記憶部１４６への書込みアクセスが行われる。即ち、合成書込モードでは、図１１のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。合成書込モードにおける消費電力は、これらのアクセスに伴う消費電力の合計となる。
【０１３１】
上述の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一である。更に、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力と書込みアクセスによる消費電力とは同一である。そこで、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。従って、合成モードにおける仮定と同じ仮定の下で、合成書込モードにおける消費電力を計算すると、合成モードでの消費電力である約１５ｍＷに約５ｍＷを加えた約２０ｍＷとなる。
【０１３２】
再び図９に戻って、入力画像１０９の更新が行わないまま、合成書込モードによる処理が開始されてから第２所定期間Ｔ１が経過したものと仮定する。この時、動作モードは、合成書込モードから読出モードへ移行する。上述の通り第２所定期間Ｔ１も、第１所定期間Ｔ０と同様に予め定められた所定の時間であって、無更新カウンタ１２６によってカウントされる時間である。
【０１３３】
上述したように読出モードは、合成画像記憶部１４６から合成画像が読み出され、ＬＣＤ表示パネル１６０へ表示される動作モードである。読出モードでは、更新されていない入力画像１０９、即ち更新されていない第１入力画像４１と第２入力画像４２とは、マルチレイヤ画像合成部１５０に送られないか、マルチレイヤ画像合成部１５０に送られてもマルチレイヤ画像合成部１５０が受信しないか、或いはマルチレイヤ画像合成部１５０が受信しても何等の処理にも使われない。
【０１３４】
読出モードでは、合成画像記憶部１４６に対する読出しアクセスは行われるが、入力画像記憶部１４４とレイヤ情報記憶部１４２とに対する読出しアクセスは行われることなく、合成用ラインメモリ１５２に対する書込み・読出しアクセスは行われることがない。即ち、読出モードでは、図１２のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。従って読出モードでは、メモリアクセスに要する電力消費を大きく節約することが可能である。
【０１３５】
読出モードで消費される電力は、例えば次のように計算される。但し、ここで計算する消費電力も、外部画像メモリ１４０とマルチレイヤ画像合成部１５０とにおいて、メモリアクセスに伴って消費される電力である。上記の通り、読出モードにおけるメモリアクセスは、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスに限られる。従って、計算すべき消費電力は、このメモリアクセスに伴う消費電力に限られる。
【０１３６】
上述の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一であり、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。従って、合成モードにおける仮定と同じ仮定の下で、消費電力を計算すると、上記したように約５ｍＷになる。即ち、読出モードにおける消費電力は合成モードにおける消費電力の約１／３であることが理解される。このように携帯電話表示部１００は、表示すべき画像の更新が行われない時に、合成画像を得る段階での省電力化を実現する。
【０１３７】
読出モードは、図９の右側に示すように、入力画像１０９について新たな更新が行われるまで継続される。入力画像１０９の更新は上記の通り、入力画像更新判定部１２２によって検出される。上述の通り、入力画像更新判定部１２２は、入力画像１０９の更新を検出すると、入力画像１０９が変更されたか否かの判断結果として、「更新あり」を示す情報を無更新カウンタ制御部１２４へ送る。この判断結果を受け取った無更新カウンタ制御部１２４は、無更新カウンタ１２６の値を例えば“０”にリセットする。その結果、動作モード切替部１２８は合成モードを選択・設定する。
【０１３８】
（実施の形態２）
図１３は、本発明の実施の形態２による画像合成表示装置の一部分の構成を示すブロック図である。本実施の形態による画像合成表示装置も、実施の形態１と同様に携帯電話機に組み込まれた携帯電話表示部として具体化されている。本実施の形態による画像合成表示装置は、レイヤ情報作成部１３０が図１３に示すレイヤ情報作成部１３０Ａに置き換えられている点において、図１の携帯電話表示部１００とは異なっている。レイヤ情報作成部１３０Ａが備える動作モード切替部１２８Ａは、消費電力判定部１３５が付加されている点において、図１の動作モード切替部１２８とは異なっている。消費電力判定部１３５は、合成モードにおける消費電力と読出モードにおける消費電力とを比較するものである。図１３には、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０Ａを、点線のブロックで示している。モード制御部１２０Ａは、本発明のモード制御部の具体例に該当する。
【０１３９】
図１４は、レイヤ情報作成部１３０Ａの動作手順を示すフローチャートである。レイヤ情報作成部１３０Ａの動作手順は、ステップＳ７とステップＳ８との間に、消費電力判定部１３５が消費電力を比較する工程（Ｓ２０）が介挿され、無更新カウンタ制御部１２４がステップＳ７とステップＳ９との間に動作モードを判定する工程（Ｓ２１）が介挿される点において、図３に示したレイヤ情報作成部１３０の動作手順とは異なっている。
【０１４０】
無更新カウンタ制御部１２４によるステップＳ７の判定において、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和以下であれば（Ｓ７でＹｅｓ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ伝える。消費電力判定部１３５は、当該判断結果に基づいて、合成モードにおける消費電力と読出モードにおける消費電力とを比較する（Ｓ２０）。より詳細には、消費電力判定部１３５は、マルチレイヤ画像合成部１５０が入力画像記憶部１４４から入力画像１０９を読み出し合成するのに要する第１の消費電力と、マルチレイヤ画像合成部１５０が合成画像記憶部１４６から合成画像を読み出すのに要する第２の消費電力とを評価し、第１の消費電力が第２の消費電力よりも大きいか否かを判定する。
【０１４１】
数式１〜４に基づく数値例を示したように、通常においては第１の消費電力が第２の消費電力よりも大きい。しかしながら、入力画像１０９を構成する第１入力画像４１や第２入力画像４２等のサイズが小さくデータ量が小さい一方、ＬＣＤ表示パネル１６０には、これらの画像を拡大して表示すべき場合など、入力画像１０９のデータ量が合成画像のデータ量よりも著しく小さい場合があり得る。データ量の差違によっては、第１の消費電力が第２の消費電力よりも低くなる場合があり得る。
【０１４２】
消費電力判定部１３５は、データ量に依存する消費電力を評価し比較する。この目的のためには、先に示したような前提、即ち入力画像記憶部１４４からの読出しアクセスに伴う消費電力と合成画像記憶部１４６への書込み及び読出しアクセスに伴う消費電力とが同一であるという前提に立つことなく、それぞれのアクセスにおけるデータ量を考慮して個別に数式１〜４を適用することにより、第１及び第２の消費電力を評価することが可能である。
【０１４３】
より簡素な評価手順として、入力画像記憶部１４４が記憶している入力画像１０９のデータ量（Ｉ）に比例した量（ａ×Ｉ）として第１の消費電力を評価し、合成画像記憶部１４６に書き込むべき合成画像のデータ量（Ｕ）に比例した量（ｂ×Ｕ）として前記第２の消費電力を評価することが可能である。この手順によれば、消費電力判定部１３５は、第１及び第２の消費電力の評価を短時間で行うことができる。消費電力判定部１３５は、例えば入力画像記憶部１４４のアドレス値の変化を通じてデータ量（Ｉ）を検知することができ、例えばレイアウト情報生成部１３４が生成するレイアウト情報に基づいてデータ量（Ｕ）を算出することができる。データ量（Ｉ）、（Ｕ）は、例えばバイト単位で評価される。
【０１４４】
マルチレイヤ画像合成部１５０は合成モードにおいて、入力画像記憶部１４４が記憶している入力画像１０９を取り扱うので、第１の消費電力は入力画像１０９のデータ量に比例した量として近似的に評価することができる。同様に、マルチレイヤ画像合成部１５０は読出モードにおいて、合成画像記憶部１４６が記憶する合成画像を取り扱うので、第２の消費電力は、合成画像のデータ量に比例した量として近似的に評価することができる。
【０１４５】
比例係数（ａ）及び（ｂ）は、実験、シミュレーション或いは理論計算によって、個々の外部画像メモリ１４０及び合成用ラインメモリ１５２について、予め求めることができる。合成モードと読み出しモードとの間で処理内容は異なるので、比例係数（ａ）と比例係数（ｂ）とは、一般に異なる値となる。消費電力判定部１３５は、このような消費電力とデータ量との間の近似的な比例関係を利用することにより、第１及び第２の消費電力の評価を、比較的良好な精度で且つ短時間で行うことが可能となる。
【０１４６】
消費電力判定部１３５は、評価した第１及び第２の消費電力を互いに比較する。従って、消費電力判定部１３５は、ａ×Ｉとｂ×Ｕとを計算する代わりに、別の比例係数（Ｋ）を用いたＫ×Ｉとして第１の消費電力を評価し、Ｕとして第２の消費電力を評価しても良い。比例係数（Ｋ）は、Ｋ＝ａ／ｂの関係にある。比例係数（Ｋ）は、通常の装置構成において１以下の正の値となり、例えば１／２程度の値である。この場合であっても、第１及び第２の消費電力をデータ量に比例する量として評価する点に変わりはない。図１４のステップＳ２０には、比例係数（Ｋ）を用いた例を示している。
【０１４７】
ステップＳ２０の判定において、Ｋ・Ｉ＞Ｕである場合、即ち第１の消費電力が第２の消費電力よりも大きい場合には（Ｓ２０でＹｅｓ）、合成書込モード指示部１３２は、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ８）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。一方、Ｋ・Ｉ≦Ｕである場合、即ち第１の消費電力が第２の消費電力以下である場合には（Ｓ２０でＮｏ）、合成書込モードへの動作モードの設定なしに、処理はステップＳ１０へ移行する。
【０１４８】
ステップＳ７の判定において、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和を超える場合には（Ｓ７でＮｏ）、読出モード指示部１３３は、動作モードが既に合成書込モードであることを条件として（Ｓ２１でＹｅｓ）、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ９）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。
【０１４９】
このように、本実施の形態による画像合成表示装置では、入力画像記憶部１４４に記憶される入力画像１０９が更新されることなく第１所定期間Ｔ０が経過すると、合成モードよりも読出モードの方が消費電力を節減し得るという評価結果が得られることを条件として、動作モードが合成モードから読出モードの準備段階としての合成書込モードへ移行する。その後、第２所定期間Ｔ１を経ても入力画像１０９の更新がなければ、動作モードは読出しモードへ移行する。従って、各動作モードで処理すべきデータ量によって、合成モードから読出しモードへ移行することが省電力の点から不利である場合には、入力画像１０９が第１所定期間Ｔ０を超えて更新されない場合であっても、動作モードは移行せず、合成モードに止まる。それにより、より高い省電力効果が得られる。
【０１５０】
（実施の形態３）
図１５は、本発明の実施の形態３による画像合成表示装置の一部分の構成を示すブロック図である。本実施の形態による画像合成表示装置も、実施の形態１及び２と同様に携帯電話機に組み込まれた携帯電話表示部として具体化されている。本実施の形態による画像合成表示装置は、レイヤ情報作成部１３０が図１５に示すレイヤ情報作成部１３０Ｂに置き換えられている点において、図１の携帯電話表示部１００とは異なっている。レイヤ情
報作成部１３０Ｂが備える動作モード切替部１２８Ｂは、合成モード指示部１３１が除去されている点において、図１の動作モード切替部１２８とは異なっている。図１５には、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０Ｂを、点線のブロックで示している。モード制御部１２０Ｂは、本発明のモード制御部の具体例に該当する。
【０１５１】
図１６は、レイヤ情報作成部１３０Ｂの動作手順を示すフローチャートである。レイヤ情報作成部１３０Ｂの動作手順は、ステップＳ２がステップＳ４１に置き換えられ、ステップＳ７〜Ｓ９がステップＳ４２に置き換えられている点において、図３に示したレイヤ情報作成部１３０の動作手順とは異なっている。ステップＳ１において無更新カウンタ制御部１２４が、無更新カウンタ１２６のカウント値をリセットすると、無更新カウンタ制御部１２４から送られるその旨の情報に基づいて、合成書込モード指示部１３２は、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ４１）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。その後、ステップＳ３の処理が行われる。
【０１５２】
ステップＳ６の判定において、無更新カウンタ制御部１２４が、カウント値が所定値Ｔ０を超えると判定すると（Ｓ６でＮｏ）、読出モード指示部１３３は、無更新カウンタ制御部１２４から送られる当該判定結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ４２）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。その後、処理はステップＳ１０へ移行する。一方、ステップＳ６の判定において、無更新カウンタ制御部１２４が、カウント値が所定値Ｔ０以下であると判定すると（Ｓ６でＹｅｓ）、処理はステップＳ３へ移行する。
【０１５３】
図１７は、本実施の形態におけるマルチレイヤ画像合成部１５０の動作手順を示すフローチャートである。この動作手順は、ステップＳ３５の判定が削除されている点において、図４の動作手順とは異なっている。即ち、ステップＳ３１の判定において、レイヤ情報記憶部１４２に記憶されるモード指示情報が読出モードを指示しないとの判定結果が得られると（Ｓ３１でＮｏ）、ステップＳ３２〜Ｓ３４及びＳ３６の処理が行われる。
【０１５４】
このように、本実施の形態による画像合成表示装置では、入力画像記憶部１４４に記憶される入力画像１０９が更新されることなく第１所定期間Ｔ０が経過までの期間において、合成モードではなく合成書込モードの処理が行われる。そして、入力画像１０９が更新されることなく第１所定期間Ｔ０が経過すると、既に合成画像記憶部１４６には合成画像が記憶されているので、動作モードは読出しモードへ移行する。読出しモードにおける消費電力は、合成書込モードにおける消費電力よりも低く、また通常において実施の形態１或いは２の合成モードにおける消費電力よりも低い。従って、本実施の形態においても、表示すべき画像の更新が行われない時に、画像を合成する段階での消費電力の節減効果が得られる。
【０１５５】
（その他の実施の形態）
（１） 上記の各実施の形態では、入力画像更新判定部１２２は、入力画像１０９に更新があったか否かの判断（図３、図１４及び図１６のステップＳ３）をフレーム周期、即ち、マルチレイヤ画像合成部１５０が合成画像の１フレーム分を出力画像１５９として出力する周期毎に行った。それにより、第１所定期間Ｔ０及び第２所定期間Ｔ１が、フレーム周期を単位として計測されるので、既に述べたようにマルチレイヤ画像合成部１５０のフレーム単位の動作に整合して動作モードの変更を行うことができる。しかしながら当該判断の周期は、一般にはフレーム周期、或いはその整数倍に限られるものではない。
【０１５６】
（２） 上記各実施の形態では、無更新カウンタ制御部１２４は、無更新カウンタ１２６のカウント値をフレーム周期で１ずつインクリメントした（図３、図１４及び図１６のステップＳ５）。これに対して、無更新カウンタ制御部１２４は、カウント値を１ずつデクリメントし、ステップＳ６及びＳ７において判別式の不等号を逆向きとしてもよい。また、無更新カウンタ制御部１２４は、ステップＳ１においてカウント値を“０”以外の他の値にリセットするものであってもよい。例えば、無更新カウンタ制御部１２４は、ステップＳ１においてカウント値を正の整数にリセットし、ステップＳ５では“１”だけデクリメントし、ステップＳ６では、カウント値がゼロになったか否かを判断してもよい。
【０１５７】
更には、無更新カウンタ制御部１２４は、ステップＳ５において、例えばミリ秒或いはマイクロ秒或いはナノ秒単位で計測された実際の時間幅で、カウント値をインクレメント或いはデクレメントし、ステップＳ６及びＳ７においてカウント値を予め定められた所定の時間と比較しても良い。予め定められた所定の時間は、例えば、５０フレーム相当時間、１００フレーム相当時間、或いは１０００フレーム相当時間等であってもよく、或いは１００マイクロ秒、１０ミリ秒、或いは２００ミリ秒等であってもよい。
【０１５８】
（３） 上記各実施の形態では、無更新カウンタ制御部１２４は、カウント値をリセットした旨の情報、及びカウント値を所定の値と比較して得た判断結果を、動作モード切替部１２８へ伝え、合成モード指示部１３１等がこれらの情報に基づいて、動作モードを設定した。これに対して、カウント値をリセットした時、或いはカウント値を比較して判断結果を得た時に、それに基づいて無更新カウンタ制御部１２４自身が動作モードを決定し、その結果を動作モード切替部１２８へ伝えても良い。この場合、合成モード指示部１３１等は、決定された結果に従って動作モードを設定する。
【０１５９】
また、無更新カウンタ制御部１２４が、カウント値をリセットした旨の情報を動作モード切替部１２８へ送る代わりに、入力画像更新判定部１２２が、入力画像１０９の更新があった旨の判断結果を無更新カウンタ制御部１２４だけでなく動作モード切り替え部１２８にも送るように、レイヤ情報作成部１３０を構成してもよい。この場合、動作モード切り替え部１２８の合成モード指示部１３１等は、この情報に基づいて合成モードを選択・設定する。
【０１６０】
（４） 上記の各実施の形態では、入力画像更新判定部１２２は、背景画像入力制御部１０３、カメラ画像入力制御部１０４及び対局圧縮画像伸長部１０７から送られる通知信号に基づいて、入力画像記憶部１４４に記憶される入力画像１０９に更新があったか否かの判断（図３、図１４及び図１６のステップＳ３）を行った。これに対して、入力画像更新判定部１２２が、通知信号に基づくことなく、例えば入力画像記憶部１４４への書込みアクセスの有無を検知することにより、入力画像１０９の更新の有無を判定しても良い。入力画像記憶部１４４への書込みアクセスの有無の検知は、例えば外部画像メモリ１４０のうち入力画像記憶部１４４に割り当てられているメモリ空間へのアクセスの有無を、アドレス信号等に基づいて検知することにより行うことができる。
【０１６１】
或いは、入力画像更新判定部１２２は、入力画像記憶部１４４に新たに記憶される入力画像１０９と、それ以前に記憶されている入力画像１０９とをアドレス毎に比較し、データが相違するアドレスが存在するか否かを判定することにより、入力画像１０９の更新の有無を判定しても良い。この場合には、入力画像１０９が新たに入力されても、画像に変化がなければ入力画像１０９の更新はないものと判断されるので、より実質的な判断結果が得られる。
【産業上の利用可能性】
【０１６２】
本発明は、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にするので、産業上有用である。
【図面の簡単な説明】
【０１６３】
【図１】本発明の実施の形態１による画像合成表示装置とその周辺部分の構成を示すブロック図である。
【図２】図１のＬＣＤ表示パネルに表示される画像の配置を例示する画面図である。
【図３】図１のレイヤ情報作成部の動作手順を示すフローチャートである。
【図４】図１のマルチレイヤ画像合成部の動作手順を示すフローチャートである。
【図５】図１の画像合成部の合成モードにおける動作を説明する動作説明図である。
【図６】図１の合成処理部の動作を説明する動作説明図である。
【図７】図１の画像合成部の合成書込モードにおける動作を説明する動作説明図である。
【図８】図１の画像合成部の読出モードにおける動作を説明する動作説明図である。
【図９】図１の画像合成部の動作モードの移り変わりを例示するタイミング図である。
【図１０】図１の装置のうち、合成モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１１】図１の装置のうち、合成書込モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１２】図１の装置のうち、読出モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１３】本発明の実施の形態２による画像合成表示装置の一部分の構成を示すブロック図である。
【図１４】図１３のレイヤ情報作成部の動作手順を示すフローチャートである。
【図１５】本発明の実施の形態３による画像合成表示装置の一部分の構成を示すブロック図である。
【図１６】図１５のレイヤ情報作成部の動作手順を示すフローチャートである。
【図１７】図１５のマルチレイヤ画像合成部の動作手順を示すフローチャートである。
【図１８】従来技術による画像合成表示装置の構成を示すブロック図である。
【符号の説明】
【０１６４】
１００・・・・携帯電話表示部（画像合成表示装置）
１０９・・・・入力画像
１２０、１２０Ａ、１２０Ｂ・・・・モード制御部
１２２・・・・入力画像更新判定部
１２４・・・・無更新カウンタ制御部
１２６・・・・無更新カウンタ
１２８、１２８Ａ、１２８Ｂ・・・・動作モード切替部
１３０、１３０Ａ、１３０Ｂ・・・・レイヤ情報作成部
１３１・・・・合成モード指示部
１３２・・・・合成書込モード指示部
１３３・・・・読出モード指示部
１３４・・・・レイアウト情報生成部
１３５・・・・消費電力判定部
１４０・・・・外部画像メモリ
１４２・・・・レイヤ情報記憶部
１４４・・・・入力画像記憶部（入力画像記憶装置）
１４６・・・・合成画像記憶部（合成画像記憶装置）
１５０・・・・マルチレイヤ画像合成部（画像合成部、画像合成装置）
１５２・・・・合成用ラインメモリ
１５４・・・・合成処理部
１５６・・・・メモリインタフェース
１５９・・・・出力画像
１６０・・・・ＬＣＤ表示パネル（表示装置）
【技術分野】
【０００１】
本発明は、画像記憶手段に記憶されている複数の画像を合成して、１つの表示画面に表示するための合成画像を生成する画像合成出力装置、画像合成出力方法、画像合成出力用プログラム及び画像合成出力用記録媒体に関する。本発明は更に、合成画像を生成するとともに表示する画像合成表示装置及び当該画像合成表示装置を有する携帯通信機器に関するものである。
【背景技術】
【０００２】
従来技術による画像合成表示装置として、例えば下記特許文献１に記載されたコンピュータシステムに組み込まれたものが知られている。図１８は、このコンピュータシステム９００の主要部の構成を示すブロック図である。コンピュータシステム９００は、パーソナルコンピュータ（以下、「パソコン」と適宜略記する）９１０とディスプレイモニタ９２０とを主要な要素として備えている。コンピュータシステム９００は、その他の様々な構成部分をも備えているが、それらの構成部分は本発明とは直接関係しないので省略している。
【０００３】
コンピュータシステム９００では、ディスプレイモニタ９２０の多段階の省電力制御が、画像（本明細書では、画像を表現する信号である「画像データ」をも「画像」と適宜表現する）を描画するためのビデオＲＡＭ９１４への書込みアクセスの有無を示すＶＲＡＭ状態通知信号９３２を使って実行される。パソコン９１０は表示制御部９１２を備えており、当該表示制御部９１２は、ディスプレイコントローラ９１３とビデオＲＡＭ９１４とを有している。表示制御部９１２は、表示用の画像であるビデオ信号９３１と共にＶＲＡＭ状態通知信号９３２をディスプレイモニタ９２０へ送信する。
【０００４】
ディスプレイコントローラ９１３は、ディスプレイモニタ９２０による表示動作を制御するものであり、一定の画面リフレッシュレートでビデオＲＡＭ９１４から画像を読み出し、読み出した画像を表示用のＲ−Ｇ−Ｂからなる３原色を含むビデオ信号９３１に変換してディスプレイモニタ９２０に出力する。ビデオＲＡＭ９１４は、ディスプレイモニタ９２０に表示するための画像を記憶するものであり、パソコン９１０上で実行されるソフトウェアの制御によって書込みアクセスを受ける。このビデオＲＡＭ９１４に書込みアクセスによって、ビデオＲＡＭ９１４の記憶データである画像が書き換えられ、その結果、ディスプレイモニタ９２０に表示される画像が更新される。
【０００５】
ビデオＲＡＭ９１４に対して書込みアクセスが行われると、上記ＶＲＡＭ状態通知信号９３２が“０”から“１”に変化する。それにより、書込みアクセスが行われたことがディスプレイモニタ９２０に通知される。ビデオＲＡＭ９１４に対する書込みアクセスが終了すると、ＶＲＡＭ状態通知信号９３２は元の“０”に復帰する。
【０００６】
パソコン９１０が処理を行っている状態では、ソフトウェア制御による描画が実行される毎に、ビデオＲＡＭ９１４に対する書込みアクセスが実行される。しかしながら、パソコン９１０がキー入力待ち等のアイドル状態になると、ソフトウェア制御による描画処理は通常実行されない。ディスプレイモニタ９２０は、ＶＲＡＭ状態通知信号９３２の“０”から“１”への変化、及び“１”から“０”への復帰を参照することによって、パソコン９１０によるビデオＲＡＭ９１４に対する書込みアクセスの状態を検知することができる。
【０００７】
ディスプレイモニタ９２０は、パソコン９１０に接続して使用される外部表示装置であり、例えばＣＲＴモニタである。ディスプレイモニタ９２０は、省電力制御を行うために、タイマ９２１及びパワーダウン制御部９２２を備えている。タイマ９２１は、受信したＶＲＡＭ状態通知信号９３２に基づいて、ビデオＲＡＭ９１４に対する書込みアクセスが停止してからの経過時間、即ちパソコン９１０がアイドル状態になることによって、ビデオＲＡＭ９１４に記憶される画像が更新されず、それによりディスプレイモニタ９２０に表示される画像が更新されなくなってからの経過時間を計測するものである。
【０００８】
タイマ９２１は、ＶＲＡＭ状態通知信号９３２が“１”となるか、又はシステムリセット等によってリセットされると、計時のためのカウント動作を開始する。このカウント動作は、次に“１”となるＶＲＡＭ状態通知信号９３２を受信するまで継続される。パワーダウン制御部９２２は、タイマ９２１によって計時される経過時間、即ち画像の更新が行われなくなってからの経過時間の長さに応じて、ディスプレイモニタ９２０の表示状態を多段階制御するものである。即ち、画像の更新が行われなくなってからの経過時間が長くなるのに従って、表示状態が通常表示状態から、輝度低下状態、表示オフ状態、電源オフ状態へと、より低い消費電力状態へ、段階的に切り替えられる。
【０００９】
このようにコンピュータシステム９００では、パソコン９１０は、キー入力が行われなくなってからの経過時間を計測する代りに、ビデオＲＡＭ９１４に対する書込みアクセスの有無を、ＶＲＡＭ状態通知信号９３２によってディスプレイモニタ９２０に通知する。ディスプレイモニタ９２０は、このＶＲＡＭ状態通知信号９３２に基づいて、画像が更新されなくなってからの経過時間、即ち描画のために行われるビデオＲＡＭ９１４への書込みアクセスが停止してからの経過時間を計測し、その経過時間に応じて、多段階のパワーセーブ制御を実行する。これによってディスプレイモニタ９２０は、自身の主導で自身の表示状態を多段階に制御することができる。その結果、コンピュータシステム９００は、パソコン主導の制御によってディスプレイモニタ９２０の表示状態を決定する方式を採るコンピュータシステムに比べて、パソコン９１０の処理負荷を低減することができる。
【特許文献１】特開２０００−２５９１４０号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、従来の画像合成表示装置は、単に画像表示段階での省電力制御を行なうのみであって、表示すべき画像を合成し作成する段階での省電力制御を考慮したものではなかった。コンピュータシステム９００に組み込まれた画像合成表示装置に即して述べると、画像が更新されない時にディスプレイモニタ９２０の省電力制御が行われるが、パソコン９１０における表示制御部９１２の省電力化に関しては何等考慮されていなかった。
【００１１】
本発明は上記の問題点に鑑みてなされたもので、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にする画像合成出力装置、画像合成表示装置、携帯通信機器、画像合成出力方法、画像合成出力用プログラム及び画像合成出力用記録媒体を提供することを目的とする。
【課題を解決するための手段】
【００１２】
上記課題を解決し上記目的を達成するために、本発明のうち第１の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００１３】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００１４】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成書込モードへ戻る。
【００１５】
このように、入力画像記憶部の記憶内容が第１所定期間を経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００１６】
本発明のうち第２の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００１７】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００１８】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力する。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、画像合成部は、合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。更に、例えば最新更新時から第１所定期間及び第２所定期間を経過しても新たな画像の入力がなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが合成書込モード又は読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成モードへ戻る。
【００１９】
このように、入力画像記憶部の記憶内容が第１所定期間と第２所定期間とを経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、画像合成部は、無更新期間に備えて行われる合成画像記憶部への合成画像の書込みを、無更新期間の直前に相当する期間においてのみ行い、それ以前の更新期間においては、合成画像記憶部への書込みを行わず、画像合成処理のみを行う。このため、更新期間における消費電力も節減される。
【００２０】
本発明のうち第３の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備えている。
【００２１】
そして、前記モード制御部は、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含んでいる。
【００２２】
この構成の画像合成出力装置によれば、モード制御部が、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、モード制御部は、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。
【００２３】
このため、例えば第１所定期間内に継続的に新たな画像の入力があって、入力画像記憶部の記憶内容が第１所定期間内に更新されている期間では、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成し出力する。そして、例えば最新更新時から第１所定期間内に新たな画像の入力がなく、それにより入力画像記憶部の記憶内容が第１所定期間内に更新されなければ、第１の消費電力が第２の消費電力よりも大きいとの判定結果が得られることを条件として、最新更新時から第１所定期間と第２所定期間とを経過するまでに、画像合成部は、合成画像を生成し出力するとともに、生成した合成画像を合成画像記憶部へ書き込む。その後、第２所定期間を経過しても新たな画像の入力がなければ、画像合成部は、入力画像記憶部に記憶されている複数の画像から合成画像を生成する代わりに、合成画像記憶部に記憶されている合成画像を読み出し出力する。画像合成部の動作モードが合成書込モード又は読出モードに移行した後に、新たな画像の入力があれば、入力画像記憶部の記憶内容が更新されるので、動作モードは合成モードへ戻る。
【００２４】
このように、最新更新時から第１所定期間が経過したときに、第１の消費電力が第２の消費電力よりも大きいとの判定結果が得られた場合には、入力画像記憶部の記憶内容が第１所定期間と第２所定期間とを経過しても更新されない無更新期間において、画像合成部は入力画像記憶部へのアクセスを行わず、且つ画像合成処理を行わず、合成画像記憶部からの読出しのみを行う。それにより、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、画像合成部は、無更新期間に備えて行われる合成画像記憶部への合成画像の書込みを、無更新期間の直前に相当する期間においてのみ行い、それ以前の更新期間においては、合成画像記憶部への書込みを行わず、画像合成処理のみを行う。このため、更新期間における消費電力も節減される。また、合成モードから合成書込モード及び読出モードへの移行が、第１の消費電力が第２の消費電力よりも大きいこと、即ち合成モードよりも読出モードの方が、入力画像記憶部、合成画像記憶部及び画像合成部の全体の消費電力が低いことを条件として行われる。従って、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００２５】
本発明のうち第４の態様に係るものは、第３の態様に係る画像合成出力装置であって、前記消費電力判定部は、前記入力画像記憶部が記憶している前記複数の画像のデータ量に比例した量として前記第１の消費電力を評価し、前記合成画像記憶部に書き込むべき前記合成画像のデータ量に比例した量として前記第２の消費電力を評価するものである。
【００２６】
この構成の画像合成出力装置によれば、消費電力判定部は、入力画像記憶部が記憶している複数の画像のデータ量に比例した量として第１の消費電力を評価し、合成画像記憶部に書き込むべき合成画像のデータ量に比例した量として第２の消費電力を評価するので、第１及び第２の消費電力の評価を簡単な計算により短時間で行うことができる。画像合成部は合成モードにおいて、入力画像記憶部が記憶している複数の画像を取り扱うので、第１の消費電力は当該複数の画像のデータ量に比例した量として近似的に評価することができる。同様に、画像合成部は読出モードにおいて、合成画像記憶部が記憶する合成画像を取り扱うので、第２の消費電力は、合成画像のデータ量に比例した量として近似的に評価することができる。但し、双方の動作モードの間で処理内容は異なるので、第１の消費電力と複数の画像のデータ量との間の比例係数と、第２の消費電力と合成画像のデータ量との間の比例係数とは、一般には異なる値となる。本構成は、かかる消費電力とデータ量との間の近似的な関係を利用して、第１及び第２の消費電力の評価を、比較的良好な精度で且つ短時間で行うことを可能にする。
【００２７】
本発明のうち第５の態様に係るものは、第１ないし４の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第１所定期間を計測するものである。
【００２８】
この構成の画像合成出力装置によれば、画像合成部が合成画像の１フレーム分を出力する周期を単位として第１所定期間が計測されるので、画像合成部のフレーム単位の動作に整合して動作モードの変更が行われ得る。
【００２９】
本発明のうち第６の態様に係るものは、第２ないし４の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第２所定期間を計測するものである。
【００３０】
この構成の画像合成出力装置によれば、画像合成部が合成画像の１フレーム分を出力する周期を単位として第２所定期間が計測されるので、画像合成部のフレーム単位の動作に整合して動作モードの変更が行われ得る。
【００３１】
本発明のうち第７の態様に係るものは、第６の態様に係る画像合成出力装置であって、前記第２所定期間が前記周期と同一長さに定められているものである。
【００３２】
この構成の画像合成出力装置によれば、合成画像の１フレーム分が出力される周期と同一長さに第２所定期間が定められているので、消費電力の大きい合成書込モードの処理が行われる期間が必要最小限の長さに抑えられる。
【００３３】
本発明のうち第８の態様に係るものは、第１ないし７の何れかの態様に係る画像合成出力装置であって、前記モード制御部は、前記複数の画像の各々の入力に伴って入力される更新通知信号に基づいて、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像の更新があったことを検知する入力画像更新判定部を、更に含むものである。
【００３４】
この構成の画像合成出力装置によれば、入力画像更新判定部が、更新通知信号に基づいて画像の更新を検知するので、画像の更新の有無の判定が簡易に且つ短時間で行われる。
【００３５】
本発明のうち第９の態様に係るものは、第１ないし８の何れかの態様に係る画像合成出力装置であって、前記入力画像記憶部と前記合成画像記憶部とはそれぞれ、単一のメモリに割り当てられたメモリ空間であるものである。
【００３６】
この構成の画像合成出力装置によれば、入力画像記憶部と合成画像記憶部とが、それぞれ単一のメモリに割り当てられたメモリ空間であるので、これらの記憶部を低廉に実現することができる。従って、例えば画像合成出力装置に加えて表示装置を備える画像合成表示装置において、合成画像記憶部を表示装置の側に組み込んだ形態に比べて、単一のメモリ内に入力画像記憶部と共に合成画像記憶部が割り当てられた本構成の画像合成出力装置を用いた形態は、製造コストを節減することができる。
【００３７】
本発明のうち第１０の態様に係るものは、画像合成表示装置であって、第１ないし９の何れかの態様に係る画像合成出力装置と、前記画像合成部が出力する前記出力画像を表示する表示装置と、を備えるものである。
【００３８】
この構成の画像合成表示装置によれば、本発明の画像合成出力装置と表示装置とが備わるので、上記した各構成による効果が得られる。
【００３９】
本発明のうち第１１の態様に係るものは、携帯通信機器であって、第１０の態様に係る画像合成表示装置を備えるものである。
【００４０】
この構成の携帯通信機器によれば、本発明の画像合成表示装置が備わるので、上記した各構成による効果が得られる。携帯通信機器は通常において電池を電源とするので、本構成を採ることにより電池の寿命を高めることができ、それにより携帯性、有用性を向上させることができる。
【００４１】
本発明のうち第１２の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４２】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４３】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００４４】
本発明のうち第１３の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４５】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４６】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００４７】
本発明のうち第１４の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、前記合成画像を記憶する合成画像記憶装置を準備する工程と、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備えている。
【００４８】
そして、前記モード制御工程は、前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成装置が前記入力画像記憶装置から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成装置が前記合成画像記憶装置から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定工程と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含むものである。
【００４９】
この構成の画像合成出力方法によれば、モード制御工程が、入力画像記憶装置の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成装置に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、モード制御工程は、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成装置に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶装置、合成画像記憶装置及び前記画像合成装置の全体における消費電力を節減しつつ、入力画像記憶装置に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００５０】
本発明のうち第１５の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５１】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５２】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００５３】
本発明のうち第１６の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５４】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５５】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００５６】
本発明のうち第１７の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００５７】
そして、前記画像合成出力用プログラムは、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである。
【００５８】
この構成の画像合成出力用プログラムによれば、当該プログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、コンピュータは、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【００５９】
本発明のうち第１８の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６０】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６１】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成書込モードを指示し、最新更新時から第１所定期間が経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第１の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。
【００６２】
本発明のうち第１９の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６３】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６４】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過した後の期間において合成書込モードを指示し、最新更新時から第１所定期間と第２所定期間とが経過した後の期間（無更新期間と仮称する）において読出モードを指示する。このため、第２の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を、従来技術に比べて通常において節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。
【００６５】
本発明のうち第２０の態様に係るものは、複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、前記画像合成出力装置は、入力された前記複数の画像を記憶する入力画像記憶部と、前記合成画像を記憶する合成画像記憶部と、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、前記コンピュータと、を備えている。
【００６６】
そして、前記画像合成出力用記録媒体は、前記コンピュータを、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録したものである。
【００６７】
この構成の画像合成出力用記録媒体によれば、当該記録媒体に記録されたプログラムを実行するコンピュータが、入力画像記憶部の記憶内容の最新更新時から第１所定期間が経過するまでの期間（更新期間と仮称する）において、画像合成部に合成モードを指示し、最新更新時から第１所定期間が経過すると、第１及び第２の消費電力の評価を行う。そして、コンピュータは、第１の消費電力が第２の消費電力よりも大きいと判定すると、その後、最新更新時から第１及び第２所定期間が経過するまでの期間においては、画像合成部に合成書込モードを指示し、最新更新時から第１及び第２所定期間が経過した後の期間（無更新期間と仮称する）においては読出モードを指示する。このため、第３の態様による構成に関して述べた理由と同様の理由により、無更新期間において、入力画像記憶部、合成画像記憶部及び前記画像合成部の全体における消費電力を節減しつつ、入力画像記憶部に記憶される複数の画像を合成して得られる合成画像と同一の合成画像を出力画像として得ることができる。更に、更新期間における消費電力も節減される。また、入力された画像のデータ量等によっては消費電力の節減効果が得られない場合にまで、動作モードを遷移させるという不都合が回避される。
【発明の効果】
【００６８】
以上のように本発明は、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にする。
【発明を実施するための最良の形態】
【００６９】
以下に本発明の実施の形態について、図面を参照しながら説明する。
【００７０】
（実施の形態１）
図１は、本発明の実施の形態１による画像合成表示装置とその周辺部分の構成を示すブロック図である。この画像合成表示装置は、携帯電話機に組み込まれた携帯電話表示部１００として具体化されている。図１に描かれる携帯電話表示部１００の周辺部分は携帯電話機内の装置要素である。
【００７１】
言うまでもなく、本発明の画像合成表示装置は、携帯電話機の表示部として実現されるだけでなく、例えばノート型パソコンを始めとする各種携帯型パソコンの表示部、例えばＰＤＡ等と呼ばれることのある携帯型情報端末装置の表示部、ＤＶＤプレーヤーやＣＤプレーヤー等を始めとする各種オーディオビデオ機器の表示部、各種家庭用電気機器の表示部、複写機やファクシミリその他の各種事務用電子機器の表示部、或いはその他各種機器の表示部として実現され得るものである。特に、携帯電話機或いは携帯型情報端末装置などの携帯通信機器は、電池を電源とするので、本発明の構成を採ることにより消費電力を節減することができ、それにより携帯性及び有用性を高めることができる。
【００７２】
携帯電話機の全体を構成するには、図１に示す携帯電話表示部１００だけでなく、通信や通話を行うための様々な要素を必要とする。しかしながらこれらの要素は、本発明の本質と直接関係せず、且つ従来周知のものであるので説明を省略ないし簡略化する。
【００７３】
携帯電話表示部１００は、レイヤ情報作成部１３０、外部画像メモリ１４０、マルチレイヤ画像合成部１５０、及びＬＣＤ表示パネル１６０を備えている。ＬＣＤ表示パネル１６０は、本発明の表示装置の具体例であって、ＣＲＴ表示装置（陰極線管表示装置）やＥＬやＰＤＰ（Plasma Display Panel）や、その他各種の表示デバイスに置き換えられても良い。
【００７４】
携帯電話表示部１００には、ＬＣＤ表示パネル１６０に表示するための複数種類の画像が、入力画像１０９として入力される。携帯電話表示部１００は、これらの複数種類の入力画像１０９を合成することにより合成画像を生成し、当該合成画像をＬＣＤ表示パネル１６０に表示する。図１に例示する携帯電話機は、カメラ装置１０２を備えている。それにより携帯電話表示部１００には、入力画像１０９として、対局画、自局画、及び背景画を入力することができる。
【００７５】
その結果、図２に例示するように、ＬＣＤ表示パネル１６０には、対局画像１１、自局画像１２及び背景画像１３を合成して成る合成画像が表示される。対局画像１１は、通信相手の携帯電話機（対局と称する）のカメラで撮影され、無線等の伝送路を通じて送られ、且つ自身（自局と称する）が受信及び再生した画像である。自局画像１２は、自局のカメラで撮影することにより得られるモニタ画像である。背景画像１３は、対局画像１１及び自局画像１２の背景となる画像であって、電池情報、電波状況情報等をも同時に表示する画像である。
【００７６】
図１に戻って、外部画像メモリ１４０は、入力画像記憶部１４４と、レイヤ情報記憶部１４２と、合成画像記憶部１４６とを主要な要素として備えている。入力画像記憶部１４４は、入力画像１０９を記憶する。入力画像１０９のうち対局画像１１は、通信装置３４、対局圧縮画像受信部１０５、対局圧縮画像記憶部１０６及び対局圧縮画像伸張部１０７を通じて入力画像記憶部１４４へ入力される。対局圧縮画像受信部１０５は、データ圧縮した形式で対局から送られた画像を受信する。対局圧縮画像記憶部１０６は、受信された圧縮画像を記憶する。対局圧縮画像伸張部１０７は、対局圧縮画像記憶部１０６に記憶された圧縮画像を伸張することにより、非圧縮形式の対局画像１１を得る。
【００７７】
入力画像１０９のうち自局画像１２は、カメラ装置１０２によって生成される。カメラ装置１０２は、ＣＣＤ（Charge Coupled Device）撮像素子を有する撮像部とＤＭＡ（Direct Memory Access）回路とを含んでいる。ＤＭＡ回路は、ＣＰＵを介在せずにメモリへ直接にアクセスすることを可能にする回路である。入力画像１０９のうち背景画像１３は、背景画像生成部１０１によって生成される。対局画像１１として新たな画像が入力画像記憶部１４４へ入力されると、入力画像記憶部１４４は、既に記憶している対局画像１１を更新する形式で新たな画像を記憶する。自局画像１２及び背景画像１３についても同様である。
【００７８】
レイヤ情報記憶部１４２は、レイヤ情報作成部１３０から入力されるレイヤ情報を記憶する。レイヤ情報は、入力画像１０９が含む対局画像１１等の画像のレイアウトに関する情報であるレイアウト情報と、マルチレイヤ画像合成部１５０の動作モードを指示する情報であるモード指示情報とを含んでいる。合成画像記憶部１４６は、入力画像記憶部１４４に記憶される入力画像１０９に基づいて生成される合成画像を記憶する。
【００７９】
外部画像メモリ１４０は、データ量の大きい画像を記憶する必要から、望ましくは大容量のものが安価に入手可能なＤＲＡＭ（Dynamic Random Access Memory）で構成される。レイヤ情報記憶部１４２、入力画像記憶部１４４及び合成画像記憶部１４６は、望ましくは単一のＲＡＭとしての外部画像メモリ１４０に割り当てられたメモリ空間である。それにより、これら複数の記憶部１４２、１４４及び１４６を、より安価に実現することが可能となる。これらのメモリ空間は、単一のＲＡＭとしての外部画像メモリ１４０を時分割的に使用することにより、一部ないし全部において重複することがあっても構わない。各記憶部１４２、１４４及び１４６に単一のＲＡＭのメモリ空間が割り当てられる形態では、割り当てられた各メモリ空間の先頭アドレスを指定することで、各記憶部１４２、１４４及び１４６の何れかを選択して使用することができる。
【００８０】
マルチレイヤ画像合成部１５０は、本発明の画像合成部の具体例に該当し、合成用ラインメモリ１５２、合成処理部１５４及びメモリインタフェース１５６を備えている。それによりマルチレイヤ画像合成部１５０は、レイヤ情報記憶部１４２に記憶されるモード指示情報にもとづいて、複数の動作モードの何れかを選択的に実行する。複数の動作モードは、合成モード、合成書込モード、及び読出モードを含んでいる。
【００８１】
合成モードでは合成処理部１５４が、入力画像記憶部１４４に記憶されている入力画像１０９を読み出して合成することにより、合成画像を生成し出力画像１５９としてＬＣＤ表示パネル１６０へ出力する。合成書込モードでは合成処理部１５４が、入力画像記憶部１４４に記憶されている入力画像１０９を読み出して合成することにより、合成画像を生成し出力画像１５９として出力するとともに、合成画像を合成画像記憶部１４６へ書き込む。読出モードでは、合成画像記憶部１４６が記憶している合成画像をメモリインタフェース１５６が読み出し、出力画像１５９として出力する。合成処理部１５４及びメモリインタフェース１５６は、ＬＣＤ表示パネル１６０が１画面分を走査する周期に同期して出力画像１５９を出力する。合成モード及び合成書込モードでは、メモリインタフェース１５６は画像の読出し動作を停止し、読出モードでは、合成処理部１５４が画像の合成処理を停止する。
【００８２】
合成処理部１５４は、入力画像１０９から合成画像を生成する合成処理を行う際に、レイヤ情報記憶部１４２に記憶されるレイアウト情報を参照することにより、合成画像内の各入力画像１０９の配置、サイズ、重なり部分において上層に表示すべき優先順位等を決定する。合成処理部１５４は、入力画像１０９を１ライン毎あるいは複数ライン毎に合成用ラインメモリ１５２へ書き込むことにより合成処理を行う。合成処理の詳細については、後述する。
【００８３】
合成用ラインメモリ１５２は、データ量の比較的小さい１ラインないし複数ライン分の画像を記憶すれば足りる一方、書込み及び読出しを高速に行う必要があることから、望ましくはＳＲＡＭ（Static Random Access Memory）で構成される。合成処理部１５４及びメモリインタフェース１５６は、高速処理を行う必要から、望ましくはソフトウェアを必要としないハードウェア回路で実現される。
【００８４】
レイヤ情報作成部１３０は、入力画像更新判定部１２２、無更新カウンタ制御部１２４、無更新カウンタ１２６、及び動作モード切替部１２８を備えている。又、動作モード切替部１２８は、合成モード指示部１３１、合成書込モード指示部１３２、読出モード指示部１３３、及びレイアウト情報生成部１３４を備えている。これらのうち、入力画像更新判定部１２２、無更新カウンタ制御部１２４、無更新カウンタ１２６、合成モード指示部１３１、合成書込モード指示部１３２、及び読出モード指示部１３３は、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０を構成する。
【００８５】
入力画像更新判定部１２２は、入力画像１０９を構成する対局画像１１、自局画像１２及び背景画像１３のうちの少なくとも一つの画像が更新されたことを検知する。対局圧縮画像伸張部１０７は、対局画像１１が更新される毎に、更新を通知する通知信号を入力画像更新判定部１２２へ伝える。カメラ画像入力制御部１０４は、カメラ装置１０２を制御するものであり、カメラ装置１０２に１フレーム分の画像の撮像を指示する毎に、自局画像１２の更新を通知する通知信号を入力画像更新判定部１２２へ伝える。同様に、背景画像入力制御部１０３は、背景画像生成部１０１を制御するものであり、背景画像生成部１０１に新たな背景画像の生成を指示する毎に、背景画像１３の更新を通知する通知信号を入力画像更新判定部１２２へ伝える。入力画像更新判定部１２２は、これらの通知信号に基づいて、入力画像記憶部１４４に記憶されている入力画像１０９に更新があったことを検知する。更に、入力画像更新判定部１２２は、入力画像１０９に更新があったか否かについての判断結果を無更新カウンタ制御部１２４へ送る。
【００８６】
無更新カウンタ制御部１２４は、入力画像更新判定部１２２による判断結果に基づいて、無更新カウンタ１２６のカウント値、即ち計数値を制御するとともに、当該カウント値と所定の値との比較を行う。無更新カウンタ制御部１２４は更に、比較の結果を動作モード切替部１２８へ伝える。無更新カウンタ制御部１２４は、特に、入力画像更新判定部１２２から送られる判断結果が、入力画像１０９に更新が有ったことを示す場合には、カウント値をリセットする。動作モード切替部１２８に含まれる合成モード指示部１３１、合成書込モード指示部１３２、及び読出モード指示部１３３は、無更新カウンタ制御部１２４が伝える比較の結果に基づいて、マルチレイヤ画像合成部１５０が採るべき動作モードを選択し、選択した動作モードを採るべく指示するモード指示情報を作成し、レイヤ情報記憶部１４２に書き込む。
【００８７】
レイアウト情報生成部１３４は、レイヤ元（もと）情報指定部１０８が生成するレイヤ元情報に基づいて、レイアウト情報を生成しレイヤ情報記憶部１４２へ書き込む。携帯電話表示部１００の周辺装置部に属するレイヤ元情報指定部１０８は、レイアウト情報の元になる情報であるレイヤ元情報を生成し、レイアウト情報生成部１３４へ入力する。レイヤ元情報指定部１０８は、例えば、ユーザのキー操作がなければレイヤ元情報としてデフォルト（初期設定）の内容を生成するとともに、ユーザのキー操作があれば、これに応答してレイヤ元情報の内容を変更することも可能に構成される。
【００８８】
レイヤ情報作成部１３０、背景画像入力制御部１０３、カメラ画像入力制御部１０４及びレイヤ元情報指定部１０８は、プログラムを要しないハードウェアで構成しても良いが、プログラムを搭載したマイクロコンピュータ等のコンピュータによって構成するのが、より簡素かつ容易である。当該コンピュータは、不図示のＣＰＵ（Central Processing Unit；中央演算処理部）、このＣＰＵの動作を規定するプログラムを格納する不図示のＲＡＭ（Random Access Memory）或いはＲＯＭ（Read Only Memory）、一時的にデータを保管する不図示のＲＡＭ等の記憶部を有する。
【００８９】
上記プログラムは、ＲＯＭ、フレキシブルディスク、ＣＤ−ＲＯＭ等の記録媒体３１を通じて供給することも、電話回線、ネットワーク等の伝送媒体３３を通じて供給することも可能である。図１には、記録媒体３１としてＣＤ−ＲＯＭが描かれており、伝送媒体３３として無線の伝送媒体が描かれている。
【００９０】
記録媒体３１としてＣＤ−ＲＯＭに記録されたプログラムは、外部装置としてのＣＤ−ＲＯＭ読取装置３２を携帯電話機へ接続することにより、読み出すことができ、更に携帯電話機が有する不図示のＲＡＭ或いはハードディスク等の記憶装置に格納することができる。記録媒体３１としてＲＯＭの形態でプログラムが供給される場合には、当該ＲＯＭを携帯電話機に搭載することにより、レイヤ情報作成部１３０等は上記プログラムに従った処理を実行可能となる。
【００９１】
伝送媒体３３を通じて供給される上記プログラムは、通信装置３４を通じて受信され、携帯電話機が有する不図示のＲＡＭ或いはハードディスク等の記憶装置に格納される。伝送媒体３３は、上記の通り有線の伝送媒体に限られない。また、伝送媒体３３は通信線路のみでなく、通信線路を中継する中継装置、例えばルータ等の通信リンクをも含む。
【００９２】
次に、携帯電話表示部１００の動作について詳述する。図３は、レイヤ情報作成部１３０の動作手順を示すフローチャートである。ユーザによるキー操作等により携帯電話表示部１００の動作が開始されると、無更新カウンタ制御部１２４は、無更新カウンタ１２６のカウント値をリセットする（Ｓ１）。カウント値は、リセットにより例えば“０”に設定される。次に、無更新カウンタ制御部１２４は、カウント値が“０”になったことを動作モード切替部１２８へ伝える。それにより、合成モード指示部１３１は、マルチレイヤ画像合成部１５０の動作モードを合成モードに設定する（Ｓ２）。即ち、合成モード指示部１３１は、合成モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。
【００９３】
次に、入力画像更新判定部１２２は、入力画像記憶部１４４に記憶される入力画像１０９に更新があったか否かを判断する（Ｓ３）。図３のループは、マルチレイヤ画像合成部１５０が合成画像の１フレーム分を出力画像１５９として出力する周期、即ちフレーム周期毎に一巡する。それに伴い、ステップＳ３の処理はフレーム周期毎に反復実行される。入力画像更新判定部１２２が入力画像１０９の更新を検知しておれば（Ｓ４でＹｅｓ）、処理はステップＳ１へ戻り、無更新カウンタ制御部１２４は、カウンタ値の如何によらず、カウンタ値をリセットする（Ｓ１）。一方、入力画像更新判定部１２２が入力画像１０９の更新を検知していなければ（Ｓ４でＮｏ）、処理はステップＳ５へ移行する。ステップＳ５では、無更新カウンタ制御部１２４は、カウント値をインクリメントする。一例として、カウント値の加算幅は“１”であるとする。
【００９４】
次に、無更新カウンタ制御部１２４は、カウント値が所定値Ｔ０以下であるか否かを判定する（Ｓ６）。カウント値は、フレーム周期を単位とする値であるので、所定値Ｔ０は、所定の期間に対応する。この所定の期間を第１所定期間と称する。カウント値が第１所定期間Ｔ０以下であれば（Ｓ６でＹｅｓ）、処理はステップＳ１０へ移行する。一方、カウント値が第１所定期間Ｔ０を超えておれば（Ｓ６でＮｏ）、無更新カウンタ制御部１２４は、カウント値が所定値Ｔ０と別の所定値Ｔ１との和以下であるか否かを判定する（Ｓ７）。所定値Ｔ１は、所定値Ｔ０と同様に所定の期間に対応する。この所定の期間を第２所定期間と称する。
【００９５】
カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和以下であれば（Ｓ７でＹｅｓ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ送る。合成書込モード指示部１３２は、送られた判断結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ８）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。一方、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和を超えておれば（Ｓ７でＮｏ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ送る。読出モード指示部１３３は送られた判断結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ９）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。ステップＳ８又はＳ９の処理が終了すると、処理はステップＳ１０へ移行する。
【００９６】
ステップＳ１０においてレイヤ情報作成部１３０は、処理を終了すべきか否かを判定する。ユーザが所定のキー操作を行っている等により、処理を終了すべきであるときには、レイヤ情報作成部１３０は処理を終了する。一方、処理を終了すべきでないときには、レイヤ情報作成部１３０は、処理をステップＳ３へ戻す。
【００９７】
以上のように、レイヤ情報作成部１３０は、フレーム周期毎にステップＳ１〜Ｓ４のループ、又はステップＳ３〜Ｓ１０のループを反復し、フレーム周期毎に変化するカウント値に基づいて３種の動作モードの何れかを選択する。カウント値は、入力画像１０９が最新に更新された時である最新更新時からの経過期間に対応する。従って、レイヤ情報作成部１３０は、最新更新時からの経過期間の長さに応じて、３種の動作モードの何れかを選択する。
【００９８】
第１所定期間Ｔ０及び第２所定期間Ｔ１が、フレーム周期を単位として計測されるので、マルチレイヤ画像合成部１５０のフレーム単位の動作に整合して動作モードの変更を行うことができる。後述するように合成書込モードでは他の動作モードに比べて消費電力が通常において大きい。第２所定期間Ｔ１を、フレーム周期と同一長さに設定することにより、消費電力が比較的大きい合成書込モードの期間を必要最小限の長さに抑えることができる。
【００９９】
図４は、マルチレイヤ画像合成部１５０の動作手順を示すフローチャートである。ユーザによるキー操作等により携帯電話表示部１００の動作が開始されると、合成処理部１５４及びメモリインタフェース１５６は、レイヤ情報記憶部１４２に記憶されるモード指示情報を読出し、当該モード指示情報が読出モードを指示しているか否かを判定する（Ｓ３１）。
【０１００】
モード指示情報が読出モードを指示していない場合には（Ｓ３１でＮｏ）、モード指示情報は合成モード又は合成書込モードを指示していることになる。従ってこの場合には、メモリインタフェース１５６は画像の読出し動作を行わず、他方、合成処理部１５４は入力画像記憶部１４４から入力画像１０９を読み出す（Ｓ３２）。次に、合成処理部１５４は、合成用ラインメモリ１５２に対する書込み及び読出しを行うことにより、入力画像１０９を合成することにより合成画像を生成する（Ｓ３３）。続いて、合成処理部１５４は、生成した合成画像を出力画像１５９としてＬＣＤ表示パネル１６０へ出力する（Ｓ３４）。
【０１０１】
次に、合成処理部１５４はモード指示情報が合成書込モードを指示しているか否かを判定する（Ｓ３５）。モード指示情報が合成書込モードを指示しておれば（Ｓ３５でＹｅｓ）、合成処理部１５４はステップＳ３３で生成した合成画像を合成画像記憶部１４６へ書き込む（Ｓ３６）。その後、処理はステップＳ３９へ移行する。一方、モード指示情報が合成書込モードを指示していなければ（Ｓ３５でＮｏ）、処理はＳ３１へ戻る。
【０１０２】
ステップＳ３１の判定において、モード指示情報が読出モードを指示しておれば（Ｓ３１でＹｅｓ）、合成処理部１５４は画像の合成処理を行わず、他方、メモリインタフェース１５６は合成画像記憶部１４６に記憶される合成画像を読み出す（Ｓ３７）。次に、メモリインタフェース１５６は、読み出した合成画像を出力画像１５９としてＬＣＤ表示パネル１６０へ出力する（Ｓ３８）。その後、処理はステップＳ３９へ移行する。
【０１０３】
ステップＳ３９では、マルチレイヤ画像合成部１５０は、処理を終了すべきか否かを判定する。ユーザが所定のキー操作を行っている等により、処理を終了すべきであるときには、マルチレイヤ画像合成部１５０は処理を終了する。一方、処理を終了すべきでないときには、マルチレイヤ画像合成部１５０は、処理をステップＳ３１へ戻す。以上の処理におけるループは、画像の１ライン毎或いは複数ライン毎に反復される。
【０１０４】
図５は、画像合成部１５０の合成モードにおける動作を説明する動作説明図である。図５の例では、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。第１入力画像４１は例えば対局画像１１であり、第２入力画像４２は例えば自局画像１２である。この場合、第１入力画像４１及び第２入力画像４２は、例えばフルカラーの自然画像である。図５では便宜上、第１入力画像４１として平仮名の「あ」という文字画像を例示し、第２入力画像４２として平仮名の「え」という文字画像を例示している。
【０１０５】
入力画像１０９を構成する画像の種類及びその数は、例えばユーザのキー操作により設定及び変更が可能である。例えば、第１入力画像４１及び第２入力画像４２の何れかが、コンピュータで作成されたＣＧ（コンピュータ・グラフィックス）画像が入力されたものであっても良い。更に、第１入力画像４１及び第２入力画像４２は、静止画と動画像との何れであっても良く、その他様々な種類の画像であり得る。
【０１０６】
入力画像記憶部１４４には、第１入力画像４１を記憶するための記憶領域である第１入力画像記憶部１４８が確保され、第２入力画像４２を記憶するための記憶領域である第２入力画像記憶部１４９が確保される。第１入力画像記憶部１４８及び第２入力画像記憶部１４９は、入力画像１０９を構成する画像の種類、数、及びサイズ（即ちデータ量）に応じて、単一のＲＡＭとしての外部画像メモリ１４０内に自在に割り当てられるメモリ空間である。それにより、入力画像記憶部１４４の記憶容量を節減することができる。これに対して、入力画像記憶部１４４内に、入力画像１０９を構成する最大数の画像の最大サイズに対応したメモリ空間を固定的に確保することも可能である。
【０１０７】
これらのメモリ空間は、単一のＲＡＭとしての外部画像メモリ１４０を時分割的に使用することにより、一部ないし全部において重複することがあっても構わない。各記憶部１４８及び１４９に単一のＲＡＭのメモリ空間が割り当てられる形態では、割り当てられた各メモリ空間の先頭アドレスを指定することで、各記憶部１４８及び１４９の何れかを選択して使用することができる。
【０１０８】
レイヤ情報記憶部１４２には、動作モード切替部１２８が書き込んだレイヤ情報５１が記憶されている。既に述べたようにレイヤ情報５１は、レイアウト情報とモード指示情報とを含んでいる。
【０１０９】
合成画像記憶部１４６は、合成画像６１を記憶するためのものであるが、合成モードでは合成画像記憶部１４６は使用されない。合成モードでは、合成処理部１５４はレイヤ情報５１が含むレイアウト情報に基づいて、第１入力画像４１と第２入力画像４２とを入力画像記憶部１４４から読み出し合成する。図５の例では、レイアウト情報は第１入力画像４１（番号“１”で表している）の右下隅の小区画の上に第２入力画像４２（番号“２”で表している）を重ねて表示すべく指示している。即ち、レイアウト情報は、ＬＣＤ表示パネル１６０の表示画面全体をカバーすべき“１”のレイヤと、表示画面の右下において、“１”のレイヤの上層に位置する“２”のレイヤとの２つのレイヤを指示している。
【０１１０】
図６は、合成処理部１５４の画像合成処理を説明する動作説明図である。図６に例示するように、合成処理部１５４は、レイアウト情報に従って入力画像記憶部１４４から第１入力画像４１と第２入力画像４２とを選択的に例えば１ラインずつ読み出し、合成用ラインメモリ１５２に書き込む。合成処理部１５４は第１入力画像４１を表示すべき領域では第１入力画像４１を読み出し、第２入力画像４２を重ねて表示すべき領域では第２入力画像４２を読み出す。図６の例では、合成用ラインメモリ１５２は合成画像７ライン分の記憶容量を有しているが、一般には１ライン分以上の記憶容量を有しておればよい。
【０１１１】
合成処理部１５４は、合成用ラインメモリ１５２に記憶された１ライン分の合成画像をＦＩＦＯ（First Input First Out；先入れ先出し）の形式で順次読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図５に例示するように、ＬＣＤ表示パネル１６０の表示画面の全面に第１入力画像４１である平仮名の「あ」を拡大した画像が表示され、表示画面の右下領域に第２入力画像４２である平仮名の「え」を適度な大きさに調整した画像が表示される。
【０１１２】
図７は、画像合成部１５０の合成書込モードにおける動作を説明する動作説明図である。図７の例においても図５と同様に、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。合成書込モードにおいても合成モードと同様に、合成処理部１５４はレイヤ情報５１が含むレイアウト情報に基づいて、第１入力画像４１と第２入力画像４２とを入力画像記憶部１４４から読み出し合成する。また、図６に例示したように合成処理部１５４は、合成用ラインメモリ１５２に記憶された１ライン分の合成画像をＦＩＦＯの形式で順次読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図７に例示するような合成画像がＬＣＤ表示パネル１６０に表示される。
【０１１３】
合成処理部１５４は、合成書込モードにおいてはそれだけに止まらずに、合成用ラインメモリ１５２から読み出した１ライン分の合成画像を更に合成画像記憶部１４６へ順次書き込む。その結果、図７に例示するような合成画像６１が合成画像記憶部１４６に記憶される。合成画像記憶部１４６への合成画像６１の書込みは、合成書込モードの後に予定される読出モードへの準備として行われるものである。
【０１１４】
図８は、画像合成部１５０の読出モードにおける動作を説明する動作説明図である。図８の例においても図５及び図７と同様に、入力画像１０９として第１入力画像４１と第２入力画像４２との２種類の画像が入力画像記憶部１４４に記憶されている。読出モードでは、合成処理部１５４は画像合成処理を行わず、メモリインタフェース１５６が合成画像記憶部１４６に記憶されている合成画像６１を読み出し、ＬＣＤ表示パネル１６０へ出力する。その結果、図８に例示するような合成画像がＬＣＤ表示パネル１６０に表示される。
【０１１５】
図９は、画像合成部１５０の動作モードの移り変わりを例示するタイミングチャートである。以下において、当該タイミングチャートを参照しつつ、各動作モードにおける消費電力について説明する。図９の左側に示すように、入力画像１０９の更新が第１所定期間Ｔ０内に行われ、それに伴いＬＣＤ表示パネル１６０に表示される画像の更新が行われている通常の期間においては、通常モードとして合成モードが選択・設定される。その結果、入力画像１０９の合成処理が行われ、合成処理によって得られる合成画像がＬＣＤ表示パネル１６０へ表示される。
【０１１６】
この合成モードで消費される電力は、例えば次のように計算される。但し、ここで計算する消費電力は、外部画像メモリ１４０とマルチレイヤ画像合成部１５０とにおいて、メモリアクセスによって消費される電力である。他の部分、例えばＬＣＤ表示パネル１６０、レイヤ情報作成部１３０、及びその他の部分で消費される電力は、動作モードとの相関性が低いので計算対象から除外する。
【０１１７】
合成モードにおけるメモリアクセスとしては、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスが発生するとともに、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する書込みアクセスと読出しアクセスとが発生する。即ち、合成モードでは図１０のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。合成モードにおける消費電力は、これらのアクセスに伴う消費電力の合計となる。外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一であり、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。
【０１１８】
【数１】
【０１１９】
又、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する読出しアクセスによる消費電力と書込みアクセスによる消費電力とは同一であり、その消費電力をＷ１５０とすると、Ｗ１５０は数式２で与えられる。
【０１２０】
【数２】
【０１２１】
数式１において、Ａ１は入力画像記憶部１４４と合成画像記憶部１４６とを構成するメモリ素子の動作電流（Ａ）であり、Ｖ１は当該メモリ素子に供給する電圧（Ｖ）であり、Ｋ３は当該メモリ素子の記憶データが変化する頻度を表し、数式３で与えられる。
【０１２２】
【数３】
【０１２３】
数式３において、Ｉｐ１はＬＣＤ表示パネル１６０に表示される画像即ち表示画像のピクセル（画素）数であり、ｆｐ１は表示パネル１６０における１秒間の画像更新回数であり、ｆ３はマルチレイヤ画像合成部１５０が１秒間に処理することのできる最大ピクセル数である。
【０１２４】
又、数式１において、Ｃ１は外部画像メモリ１４０とマルチレイヤ画像合成部１５０との接続部分の浮遊容量（Ｆ）であり、Ｄｂｐｐは外部画像メモリ１４０のデータバス幅であり、Ａｂｐｐは外部画像メモリ１４０のアドレスバス幅であり、Ｋ１は外部画像メモリ１４０のデータバス値、即ちデータバス上のデータの変化頻度であり、Ｋ２は外部画像メモリ１４０のアドレスバス値の変化頻度である。Ａ１を３０ｍＡ、Ｖ１を１．８Ｖ、Ｉｐ１を２４０×３２０＝７６，８００ピクセル、ｆｐ１を６０フレーム／秒、ｆ３を１００Ｍピクセル、Ｃ１を１０ｐＦ、Ｄｂｐｐを３２、Ａｂｐｐを１６、Ｋ１を１／２、Ｋ２を１／１６と仮定して、数式１と数式３とからＷ１４０を計算すると、約５ｍＷになる。
【０１２５】
又、数式２において、Ａ２はマルチレイヤ画像合成部１５０の合成用ラインメモリ１５２を構成するメモリ素子の動作電流（Ａ）であり、Ｖ２は当該メモリ素子に供給する電圧（Ｖ）であり、Ｋ４は当該メモリ素子の記憶データが変化する頻度を表し、数式４で与えられる。
【０１２６】
【数４】
【０１２７】
数式４において、Ｉｐ２はマルチレイヤ画像合成部１５０が処理する１画面のピクセル数であり、ｆｐ２はマルチレイヤ画像合成部１５０がＬＣＤ表示パネル１６０に対して１秒間に画面更新する回数であり、ｆ２はマルチレイヤ画像合成部１５０が１秒間に処理可能な最大ピクセル数である。Ａ２を６０ｍＡ、Ｖ２を１．８Ｖ、Ｉｐ２を２４０×３２０＝７６，８００ピクセル、ｆｐ２を６０フレーム／秒、ｆ２を１００Ｍピクセルと仮定して、数式２と数式４とからＷ１５０を計算すると、約５ｍＷになる。
【０１２８】
以上の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスにより消費される電力Ｗ１４０は約５ｍＷである。また、マルチレイヤ画像合成部１５０の合成用ラインメモリ１５２に対する書込みアクセスにより消費される電力Ｗ１５０も約５ｍＷである。更に合成用ラインメモリ１５２に対する読出しアクセスにより消費される電力Ｗ１５０も約５ｍＷである。これらを合計すると、約１５ｍＷとなる。従って、合成モードでの消費電力は約１５ｍＷとなる。
【０１２９】
図９に戻って、入力画像１０９の更新が最新に行われてから、更新がないまま第１所定期間Ｔ０が経過したと仮定する。この時、図９に示す通り、動作モードが合成モードから合成書込モードへ切り替えられる。上記の通り、第１所定期間Ｔ０は、予め定められた時間であって、無更新カウンタ１２６によってカウントされる時間である。動作モードの切替えは、上記の通り、動作モード切り替え部１２８によって新たな動作モードが選択され、選択された動作モードを指示するモード指示情報がレイヤ情報記憶部１４２へ入力されることによって達成される。その結果、合成書込モードによる画像合成処理と合成画像を書込む処理と表示処理とが実行される。
【０１３０】
上述したように合成書込モードは、画像合成処理により生成された合成画像６１がＬＣＤ表示パネル１６０に表示されると同時に、合成画像記憶部１４６に記憶される動作モードである。従って、合成書込モードでは、合成モードで行われるメモリアクセスに加えて、合成画像記憶部１４６への書込みアクセスが行われる。即ち、合成書込モードでは、図１１のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。合成書込モードにおける消費電力は、これらのアクセスに伴う消費電力の合計となる。
【０１３１】
上述の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一である。更に、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力と書込みアクセスによる消費電力とは同一である。そこで、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。従って、合成モードにおける仮定と同じ仮定の下で、合成書込モードにおける消費電力を計算すると、合成モードでの消費電力である約１５ｍＷに約５ｍＷを加えた約２０ｍＷとなる。
【０１３２】
再び図９に戻って、入力画像１０９の更新が行わないまま、合成書込モードによる処理が開始されてから第２所定期間Ｔ１が経過したものと仮定する。この時、動作モードは、合成書込モードから読出モードへ移行する。上述の通り第２所定期間Ｔ１も、第１所定期間Ｔ０と同様に予め定められた所定の時間であって、無更新カウンタ１２６によってカウントされる時間である。
【０１３３】
上述したように読出モードは、合成画像記憶部１４６から合成画像が読み出され、ＬＣＤ表示パネル１６０へ表示される動作モードである。読出モードでは、更新されていない入力画像１０９、即ち更新されていない第１入力画像４１と第２入力画像４２とは、マルチレイヤ画像合成部１５０に送られないか、マルチレイヤ画像合成部１５０に送られてもマルチレイヤ画像合成部１５０が受信しないか、或いはマルチレイヤ画像合成部１５０が受信しても何等の処理にも使われない。
【０１３４】
読出モードでは、合成画像記憶部１４６に対する読出しアクセスは行われるが、入力画像記憶部１４４とレイヤ情報記憶部１４２とに対する読出しアクセスは行われることなく、合成用ラインメモリ１５２に対する書込み・読出しアクセスは行われることがない。即ち、読出モードでは、図１２のブロック図において、ハッチングを付した部分に対してメモリアクセスが行われる。従って読出モードでは、メモリアクセスに要する電力消費を大きく節約することが可能である。
【０１３５】
読出モードで消費される電力は、例えば次のように計算される。但し、ここで計算する消費電力も、外部画像メモリ１４０とマルチレイヤ画像合成部１５０とにおいて、メモリアクセスに伴って消費される電力である。上記の通り、読出モードにおけるメモリアクセスは、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスに限られる。従って、計算すべき消費電力は、このメモリアクセスに伴う消費電力に限られる。
【０１３６】
上述の通り、外部画像メモリ１４０の入力画像記憶部１４４に対する読出しアクセスによる消費電力と、外部画像メモリ１４０の合成画像記憶部１４６に対する読出しアクセスによる消費電力とは同一であり、その消費電力をＷ１４０とすると、Ｗ１４０は数式１で与えられる。従って、合成モードにおける仮定と同じ仮定の下で、消費電力を計算すると、上記したように約５ｍＷになる。即ち、読出モードにおける消費電力は合成モードにおける消費電力の約１／３であることが理解される。このように携帯電話表示部１００は、表示すべき画像の更新が行われない時に、合成画像を得る段階での省電力化を実現する。
【０１３７】
読出モードは、図９の右側に示すように、入力画像１０９について新たな更新が行われるまで継続される。入力画像１０９の更新は上記の通り、入力画像更新判定部１２２によって検出される。上述の通り、入力画像更新判定部１２２は、入力画像１０９の更新を検出すると、入力画像１０９が変更されたか否かの判断結果として、「更新あり」を示す情報を無更新カウンタ制御部１２４へ送る。この判断結果を受け取った無更新カウンタ制御部１２４は、無更新カウンタ１２６の値を例えば“０”にリセットする。その結果、動作モード切替部１２８は合成モードを選択・設定する。
【０１３８】
（実施の形態２）
図１３は、本発明の実施の形態２による画像合成表示装置の一部分の構成を示すブロック図である。本実施の形態による画像合成表示装置も、実施の形態１と同様に携帯電話機に組み込まれた携帯電話表示部として具体化されている。本実施の形態による画像合成表示装置は、レイヤ情報作成部１３０が図１３に示すレイヤ情報作成部１３０Ａに置き換えられている点において、図１の携帯電話表示部１００とは異なっている。レイヤ情報作成部１３０Ａが備える動作モード切替部１２８Ａは、消費電力判定部１３５が付加されている点において、図１の動作モード切替部１２８とは異なっている。消費電力判定部１３５は、合成モードにおける消費電力と読出モードにおける消費電力とを比較するものである。図１３には、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０Ａを、点線のブロックで示している。モード制御部１２０Ａは、本発明のモード制御部の具体例に該当する。
【０１３９】
図１４は、レイヤ情報作成部１３０Ａの動作手順を示すフローチャートである。レイヤ情報作成部１３０Ａの動作手順は、ステップＳ７とステップＳ８との間に、消費電力判定部１３５が消費電力を比較する工程（Ｓ２０）が介挿され、無更新カウンタ制御部１２４がステップＳ７とステップＳ９との間に動作モードを判定する工程（Ｓ２１）が介挿される点において、図３に示したレイヤ情報作成部１３０の動作手順とは異なっている。
【０１４０】
無更新カウンタ制御部１２４によるステップＳ７の判定において、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和以下であれば（Ｓ７でＹｅｓ）、無更新カウンタ制御部１２４はその旨の判断結果を動作モード切替部１２８へ伝える。消費電力判定部１３５は、当該判断結果に基づいて、合成モードにおける消費電力と読出モードにおける消費電力とを比較する（Ｓ２０）。より詳細には、消費電力判定部１３５は、マルチレイヤ画像合成部１５０が入力画像記憶部１４４から入力画像１０９を読み出し合成するのに要する第１の消費電力と、マルチレイヤ画像合成部１５０が合成画像記憶部１４６から合成画像を読み出すのに要する第２の消費電力とを評価し、第１の消費電力が第２の消費電力よりも大きいか否かを判定する。
【０１４１】
数式１〜４に基づく数値例を示したように、通常においては第１の消費電力が第２の消費電力よりも大きい。しかしながら、入力画像１０９を構成する第１入力画像４１や第２入力画像４２等のサイズが小さくデータ量が小さい一方、ＬＣＤ表示パネル１６０には、これらの画像を拡大して表示すべき場合など、入力画像１０９のデータ量が合成画像のデータ量よりも著しく小さい場合があり得る。データ量の差違によっては、第１の消費電力が第２の消費電力よりも低くなる場合があり得る。
【０１４２】
消費電力判定部１３５は、データ量に依存する消費電力を評価し比較する。この目的のためには、先に示したような前提、即ち入力画像記憶部１４４からの読出しアクセスに伴う消費電力と合成画像記憶部１４６への書込み及び読出しアクセスに伴う消費電力とが同一であるという前提に立つことなく、それぞれのアクセスにおけるデータ量を考慮して個別に数式１〜４を適用することにより、第１及び第２の消費電力を評価することが可能である。
【０１４３】
より簡素な評価手順として、入力画像記憶部１４４が記憶している入力画像１０９のデータ量（Ｉ）に比例した量（ａ×Ｉ）として第１の消費電力を評価し、合成画像記憶部１４６に書き込むべき合成画像のデータ量（Ｕ）に比例した量（ｂ×Ｕ）として前記第２の消費電力を評価することが可能である。この手順によれば、消費電力判定部１３５は、第１及び第２の消費電力の評価を短時間で行うことができる。消費電力判定部１３５は、例えば入力画像記憶部１４４のアドレス値の変化を通じてデータ量（Ｉ）を検知することができ、例えばレイアウト情報生成部１３４が生成するレイアウト情報に基づいてデータ量（Ｕ）を算出することができる。データ量（Ｉ）、（Ｕ）は、例えばバイト単位で評価される。
【０１４４】
マルチレイヤ画像合成部１５０は合成モードにおいて、入力画像記憶部１４４が記憶している入力画像１０９を取り扱うので、第１の消費電力は入力画像１０９のデータ量に比例した量として近似的に評価することができる。同様に、マルチレイヤ画像合成部１５０は読出モードにおいて、合成画像記憶部１４６が記憶する合成画像を取り扱うので、第２の消費電力は、合成画像のデータ量に比例した量として近似的に評価することができる。
【０１４５】
比例係数（ａ）及び（ｂ）は、実験、シミュレーション或いは理論計算によって、個々の外部画像メモリ１４０及び合成用ラインメモリ１５２について、予め求めることができる。合成モードと読み出しモードとの間で処理内容は異なるので、比例係数（ａ）と比例係数（ｂ）とは、一般に異なる値となる。消費電力判定部１３５は、このような消費電力とデータ量との間の近似的な比例関係を利用することにより、第１及び第２の消費電力の評価を、比較的良好な精度で且つ短時間で行うことが可能となる。
【０１４６】
消費電力判定部１３５は、評価した第１及び第２の消費電力を互いに比較する。従って、消費電力判定部１３５は、ａ×Ｉとｂ×Ｕとを計算する代わりに、別の比例係数（Ｋ）を用いたＫ×Ｉとして第１の消費電力を評価し、Ｕとして第２の消費電力を評価しても良い。比例係数（Ｋ）は、Ｋ＝ａ／ｂの関係にある。比例係数（Ｋ）は、通常の装置構成において１以下の正の値となり、例えば１／２程度の値である。この場合であっても、第１及び第２の消費電力をデータ量に比例する量として評価する点に変わりはない。図１４のステップＳ２０には、比例係数（Ｋ）を用いた例を示している。
【０１４７】
ステップＳ２０の判定において、Ｋ・Ｉ＞Ｕである場合、即ち第１の消費電力が第２の消費電力よりも大きい場合には（Ｓ２０でＹｅｓ）、合成書込モード指示部１３２は、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ８）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。一方、Ｋ・Ｉ≦Ｕである場合、即ち第１の消費電力が第２の消費電力以下である場合には（Ｓ２０でＮｏ）、合成書込モードへの動作モードの設定なしに、処理はステップＳ１０へ移行する。
【０１４８】
ステップＳ７の判定において、カウント値が第１所定期間Ｔ０と第２所定期間Ｔ１との和を超える場合には（Ｓ７でＮｏ）、読出モード指示部１３３は、動作モードが既に合成書込モードであることを条件として（Ｓ２１でＹｅｓ）、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ９）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。
【０１４９】
このように、本実施の形態による画像合成表示装置では、入力画像記憶部１４４に記憶される入力画像１０９が更新されることなく第１所定期間Ｔ０が経過すると、合成モードよりも読出モードの方が消費電力を節減し得るという評価結果が得られることを条件として、動作モードが合成モードから読出モードの準備段階としての合成書込モードへ移行する。その後、第２所定期間Ｔ１を経ても入力画像１０９の更新がなければ、動作モードは読出しモードへ移行する。従って、各動作モードで処理すべきデータ量によって、合成モードから読出しモードへ移行することが省電力の点から不利である場合には、入力画像１０９が第１所定期間Ｔ０を超えて更新されない場合であっても、動作モードは移行せず、合成モードに止まる。それにより、より高い省電力効果が得られる。
【０１５０】
（実施の形態３）
図１５は、本発明の実施の形態３による画像合成表示装置の一部分の構成を示すブロック図である。本実施の形態による画像合成表示装置も、実施の形態１及び２と同様に携帯電話機に組み込まれた携帯電話表示部として具体化されている。本実施の形態による画像合成表示装置は、レイヤ情報作成部１３０が図１５に示すレイヤ情報作成部１３０Ｂに置き換えられている点において、図１の携帯電話表示部１００とは異なっている。レイヤ情
報作成部１３０Ｂが備える動作モード切替部１２８Ｂは、合成モード指示部１３１が除去されている点において、図１の動作モード切替部１２８とは異なっている。図１５には、マルチレイヤ画像合成部１５０に動作モードを指示するモード制御部１２０Ｂを、点線のブロックで示している。モード制御部１２０Ｂは、本発明のモード制御部の具体例に該当する。
【０１５１】
図１６は、レイヤ情報作成部１３０Ｂの動作手順を示すフローチャートである。レイヤ情報作成部１３０Ｂの動作手順は、ステップＳ２がステップＳ４１に置き換えられ、ステップＳ７〜Ｓ９がステップＳ４２に置き換えられている点において、図３に示したレイヤ情報作成部１３０の動作手順とは異なっている。ステップＳ１において無更新カウンタ制御部１２４が、無更新カウンタ１２６のカウント値をリセットすると、無更新カウンタ制御部１２４から送られるその旨の情報に基づいて、合成書込モード指示部１３２は、マルチレイヤ画像合成部１５０の動作モードを合成書込モードに設定する（Ｓ４１）。即ち、合成書込モード指示部１３２は、合成書込モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。その後、ステップＳ３の処理が行われる。
【０１５２】
ステップＳ６の判定において、無更新カウンタ制御部１２４が、カウント値が所定値Ｔ０を超えると判定すると（Ｓ６でＮｏ）、読出モード指示部１３３は、無更新カウンタ制御部１２４から送られる当該判定結果に基づいて、マルチレイヤ画像合成部１５０の動作モードを読出モードに設定する（Ｓ４２）。即ち、読出モード指示部１３３は、読出モードを指示するモード指示情報をレイヤ情報記憶部１４２に書き込む。その後、処理はステップＳ１０へ移行する。一方、ステップＳ６の判定において、無更新カウンタ制御部１２４が、カウント値が所定値Ｔ０以下であると判定すると（Ｓ６でＹｅｓ）、処理はステップＳ３へ移行する。
【０１５３】
図１７は、本実施の形態におけるマルチレイヤ画像合成部１５０の動作手順を示すフローチャートである。この動作手順は、ステップＳ３５の判定が削除されている点において、図４の動作手順とは異なっている。即ち、ステップＳ３１の判定において、レイヤ情報記憶部１４２に記憶されるモード指示情報が読出モードを指示しないとの判定結果が得られると（Ｓ３１でＮｏ）、ステップＳ３２〜Ｓ３４及びＳ３６の処理が行われる。
【０１５４】
このように、本実施の形態による画像合成表示装置では、入力画像記憶部１４４に記憶される入力画像１０９が更新されることなく第１所定期間Ｔ０が経過までの期間において、合成モードではなく合成書込モードの処理が行われる。そして、入力画像１０９が更新されることなく第１所定期間Ｔ０が経過すると、既に合成画像記憶部１４６には合成画像が記憶されているので、動作モードは読出しモードへ移行する。読出しモードにおける消費電力は、合成書込モードにおける消費電力よりも低く、また通常において実施の形態１或いは２の合成モードにおける消費電力よりも低い。従って、本実施の形態においても、表示すべき画像の更新が行われない時に、画像を合成する段階での消費電力の節減効果が得られる。
【０１５５】
（その他の実施の形態）
（１） 上記の各実施の形態では、入力画像更新判定部１２２は、入力画像１０９に更新があったか否かの判断（図３、図１４及び図１６のステップＳ３）をフレーム周期、即ち、マルチレイヤ画像合成部１５０が合成画像の１フレーム分を出力画像１５９として出力する周期毎に行った。それにより、第１所定期間Ｔ０及び第２所定期間Ｔ１が、フレーム周期を単位として計測されるので、既に述べたようにマルチレイヤ画像合成部１５０のフレーム単位の動作に整合して動作モードの変更を行うことができる。しかしながら当該判断の周期は、一般にはフレーム周期、或いはその整数倍に限られるものではない。
【０１５６】
（２） 上記各実施の形態では、無更新カウンタ制御部１２４は、無更新カウンタ１２６のカウント値をフレーム周期で１ずつインクリメントした（図３、図１４及び図１６のステップＳ５）。これに対して、無更新カウンタ制御部１２４は、カウント値を１ずつデクリメントし、ステップＳ６及びＳ７において判別式の不等号を逆向きとしてもよい。また、無更新カウンタ制御部１２４は、ステップＳ１においてカウント値を“０”以外の他の値にリセットするものであってもよい。例えば、無更新カウンタ制御部１２４は、ステップＳ１においてカウント値を正の整数にリセットし、ステップＳ５では“１”だけデクリメントし、ステップＳ６では、カウント値がゼロになったか否かを判断してもよい。
【０１５７】
更には、無更新カウンタ制御部１２４は、ステップＳ５において、例えばミリ秒或いはマイクロ秒或いはナノ秒単位で計測された実際の時間幅で、カウント値をインクレメント或いはデクレメントし、ステップＳ６及びＳ７においてカウント値を予め定められた所定の時間と比較しても良い。予め定められた所定の時間は、例えば、５０フレーム相当時間、１００フレーム相当時間、或いは１０００フレーム相当時間等であってもよく、或いは１００マイクロ秒、１０ミリ秒、或いは２００ミリ秒等であってもよい。
【０１５８】
（３） 上記各実施の形態では、無更新カウンタ制御部１２４は、カウント値をリセットした旨の情報、及びカウント値を所定の値と比較して得た判断結果を、動作モード切替部１２８へ伝え、合成モード指示部１３１等がこれらの情報に基づいて、動作モードを設定した。これに対して、カウント値をリセットした時、或いはカウント値を比較して判断結果を得た時に、それに基づいて無更新カウンタ制御部１２４自身が動作モードを決定し、その結果を動作モード切替部１２８へ伝えても良い。この場合、合成モード指示部１３１等は、決定された結果に従って動作モードを設定する。
【０１５９】
また、無更新カウンタ制御部１２４が、カウント値をリセットした旨の情報を動作モード切替部１２８へ送る代わりに、入力画像更新判定部１２２が、入力画像１０９の更新があった旨の判断結果を無更新カウンタ制御部１２４だけでなく動作モード切り替え部１２８にも送るように、レイヤ情報作成部１３０を構成してもよい。この場合、動作モード切り替え部１２８の合成モード指示部１３１等は、この情報に基づいて合成モードを選択・設定する。
【０１６０】
（４） 上記の各実施の形態では、入力画像更新判定部１２２は、背景画像入力制御部１０３、カメラ画像入力制御部１０４及び対局圧縮画像伸長部１０７から送られる通知信号に基づいて、入力画像記憶部１４４に記憶される入力画像１０９に更新があったか否かの判断（図３、図１４及び図１６のステップＳ３）を行った。これに対して、入力画像更新判定部１２２が、通知信号に基づくことなく、例えば入力画像記憶部１４４への書込みアクセスの有無を検知することにより、入力画像１０９の更新の有無を判定しても良い。入力画像記憶部１４４への書込みアクセスの有無の検知は、例えば外部画像メモリ１４０のうち入力画像記憶部１４４に割り当てられているメモリ空間へのアクセスの有無を、アドレス信号等に基づいて検知することにより行うことができる。
【０１６１】
或いは、入力画像更新判定部１２２は、入力画像記憶部１４４に新たに記憶される入力画像１０９と、それ以前に記憶されている入力画像１０９とをアドレス毎に比較し、データが相違するアドレスが存在するか否かを判定することにより、入力画像１０９の更新の有無を判定しても良い。この場合には、入力画像１０９が新たに入力されても、画像に変化がなければ入力画像１０９の更新はないものと判断されるので、より実質的な判断結果が得られる。
【産業上の利用可能性】
【０１６２】
本発明は、画像を記憶する手段に記憶されている複数の画像を合成してなる合成画像を得るのに伴う消費電力を、記憶されている画像の更新が行われない時に節減することを可能にするので、産業上有用である。
【図面の簡単な説明】
【０１６３】
【図１】本発明の実施の形態１による画像合成表示装置とその周辺部分の構成を示すブロック図である。
【図２】図１のＬＣＤ表示パネルに表示される画像の配置を例示する画面図である。
【図３】図１のレイヤ情報作成部の動作手順を示すフローチャートである。
【図４】図１のマルチレイヤ画像合成部の動作手順を示すフローチャートである。
【図５】図１の画像合成部の合成モードにおける動作を説明する動作説明図である。
【図６】図１の合成処理部の動作を説明する動作説明図である。
【図７】図１の画像合成部の合成書込モードにおける動作を説明する動作説明図である。
【図８】図１の画像合成部の読出モードにおける動作を説明する動作説明図である。
【図９】図１の画像合成部の動作モードの移り変わりを例示するタイミング図である。
【図１０】図１の装置のうち、合成モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１１】図１の装置のうち、合成書込モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１２】図１の装置のうち、読出モードでメモリアクセスの対象とされるメモリを示すブロック図である。
【図１３】本発明の実施の形態２による画像合成表示装置の一部分の構成を示すブロック図である。
【図１４】図１３のレイヤ情報作成部の動作手順を示すフローチャートである。
【図１５】本発明の実施の形態３による画像合成表示装置の一部分の構成を示すブロック図である。
【図１６】図１５のレイヤ情報作成部の動作手順を示すフローチャートである。
【図１７】図１５のマルチレイヤ画像合成部の動作手順を示すフローチャートである。
【図１８】従来技術による画像合成表示装置の構成を示すブロック図である。
【符号の説明】
【０１６４】
１００・・・・携帯電話表示部（画像合成表示装置）
１０９・・・・入力画像
１２０、１２０Ａ、１２０Ｂ・・・・モード制御部
１２２・・・・入力画像更新判定部
１２４・・・・無更新カウンタ制御部
１２６・・・・無更新カウンタ
１２８、１２８Ａ、１２８Ｂ・・・・動作モード切替部
１３０、１３０Ａ、１３０Ｂ・・・・レイヤ情報作成部
１３１・・・・合成モード指示部
１３２・・・・合成書込モード指示部
１３３・・・・読出モード指示部
１３４・・・・レイアウト情報生成部
１３５・・・・消費電力判定部
１４０・・・・外部画像メモリ
１４２・・・・レイヤ情報記憶部
１４４・・・・入力画像記憶部（入力画像記憶装置）
１４６・・・・合成画像記憶部（合成画像記憶装置）
１５０・・・・マルチレイヤ画像合成部（画像合成部、画像合成装置）
１５２・・・・合成用ラインメモリ
１５４・・・・合成処理部
１５６・・・・メモリインタフェース
１５９・・・・出力画像
１６０・・・・ＬＣＤ表示パネル（表示装置）
【特許請求の範囲】
【請求項１】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項２】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項３】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項４】
前記消費電力判定部は、前記入力画像記憶部が記憶している前記複数の画像のデータ量に比例した量として前記第１の消費電力を評価し、前記合成画像記憶部に書き込むべき前記合成画像のデータ量に比例した量として前記第２の消費電力を評価する請求項３記載の画像合成出力装置。
【請求項５】
前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第１所定期間を計測する請求項１ないし４の何れかに記載の画像合成出力装置。
【請求項６】
前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第２所定期間を計測する請求項２ないし４の何れかに記載の画像合成出力装置。
【請求項７】
前記第２所定期間が前記周期と同一長さに定められている請求項６記載の画像合成出力装置。
【請求項８】
前記モード制御部は、前記複数の画像の各々の入力に伴って入力される更新通知信号に基づいて、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像の更新があったことを検知する入力画像更新判定部を、更に含む請求項１ないし７の何れかに記載の画像合成出力装置。
【請求項９】
前記入力画像記憶部と前記合成画像記憶部とはそれぞれ、単一のメモリに割り当てられたメモリ空間である請求項１ないし８の何れかに記載の画像合成出力装置。
【請求項１０】
請求項１ないし９の何れかに記載の画像合成出力装置と、
前記画像合成部が出力する前記出力画像を表示する表示装置と、を備える画像合成表示装置。
【請求項１１】
請求項１０記載の画像合成表示装置を備える携帯通信機器。
【請求項１２】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１３】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１４】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成装置が前記入力画像記憶装置から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成装置が前記合成画像記憶装置から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定工程と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１５】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１６】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１７】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１８】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【請求項１９】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【請求項２０】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【請求項１】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項２】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項３】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力装置であって、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記複数モードの何れかを前記画像合成部に指示するモード制御部と、を備え、
前記モード制御部は、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部と、を含む画像合成出力装置。
【請求項４】
前記消費電力判定部は、前記入力画像記憶部が記憶している前記複数の画像のデータ量に比例した量として前記第１の消費電力を評価し、前記合成画像記憶部に書き込むべき前記合成画像のデータ量に比例した量として前記第２の消費電力を評価する請求項３記載の画像合成出力装置。
【請求項５】
前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第１所定期間を計測する請求項１ないし４の何れかに記載の画像合成出力装置。
【請求項６】
前記モード制御部は、前記画像合成部が前記合成画像の１フレーム分を出力する周期を単位として前記第２所定期間を計測する請求項２ないし４の何れかに記載の画像合成出力装置。
【請求項７】
前記第２所定期間が前記周期と同一長さに定められている請求項６記載の画像合成出力装置。
【請求項８】
前記モード制御部は、前記複数の画像の各々の入力に伴って入力される更新通知信号に基づいて、前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像の更新があったことを検知する入力画像更新判定部を、更に含む請求項１ないし７の何れかに記載の画像合成出力装置。
【請求項９】
前記入力画像記憶部と前記合成画像記憶部とはそれぞれ、単一のメモリに割り当てられたメモリ空間である請求項１ないし８の何れかに記載の画像合成出力装置。
【請求項１０】
請求項１ないし９の何れかに記載の画像合成出力装置と、
前記画像合成部が出力する前記出力画像を表示する表示装置と、を備える画像合成表示装置。
【請求項１１】
請求項１０記載の画像合成表示装置を備える携帯通信機器。
【請求項１２】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１３】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１４】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し、出力画像として出力する画像合成出力方法であって、
入力された前記複数の画像を記憶する入力画像記憶装置を準備する工程と、
前記合成画像を記憶する合成画像記憶装置を準備する工程と、
前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶装置に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶装置へ書き込む合成書込モードと、前記合成画像記憶装置が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成装置を準備する工程と、
前記複数モードの何れかを前記画像合成装置に指示するモード制御工程と、を備え、
前記モード制御工程は、
前記入力画像記憶装置に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成装置に前記合成モードを指示する合成モード指示工程と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成装置が前記入力画像記憶装置から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成装置が前記合成画像記憶装置から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定工程と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成装置に前記合成書込モードを指示する合成書込モード指示工程と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定工程が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成装置に前記読出モードを指示する読出モード指示工程と、を含む画像合成出力方法。
【請求項１５】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１６】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１７】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるための画像合成出力用プログラムであって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用プログラムは、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムである画像合成出力用プログラム。
【請求項１８】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【請求項１９】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【請求項２０】
複数の画像の入力を受け、これら複数の画像を合成することにより合成画像を生成し出力画像として出力する画像合成出力装置に組み込まれたコンピュータを実行させるためのプログラムを記録した画像合成出力用記録媒体であって、
前記画像合成出力装置は、
入力された前記複数の画像を記憶する入力画像記憶部と、
前記合成画像を記憶する合成画像記憶部と、
前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力する合成モードと、前記入力画像記憶部に記憶されている前記複数の画像を読み出し合成することにより、前記合成画像を生成し前記出力画像として出力するとともに前記合成画像記憶部へ書き込む合成書込モードと、前記合成画像記憶部が記憶している前記合成画像を読み出し前記出力画像として出力する読出モードとを含む複数モードの間で動作モードが遷移する画像合成部と、
前記コンピュータと、を備えており、
前記画像合成出力用記録媒体は、前記コンピュータを、
前記入力画像記憶部に記憶された前記複数の画像のうちの少なくとも一つの画像が最新に更新された時である最新更新時から第１所定期間が経過するまでの期間において、前記画像合成部に前記合成モードを指示する合成モード指示部と、
前記最新更新時から前記第１所定期間が経過すると、前記画像合成部が前記入力画像記憶部から前記複数の画像を読み出し合成するのに要する第１の消費電力と、前記画像合成部が前記合成画像記憶部から前記合成画像を読み出すのに要する第２の消費電力とを評価し、前記第１の消費電力が前記第２の消費電力よりも大きいか否かを判定する消費電力判定部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に第２所定期間が経過するまでの期間において、前記画像合成部に前記合成書込モードを指示する合成書込モード指示部と、
前記最新更新時から前記第１所定期間が経過した時に前記消費電力判定部が肯定的な判定結果を得た場合には、前記最新更新時から前記第１所定期間が経過した後に更に前記第２所定期間が経過した後の期間において、前記画像合成部に前記読出モードを指示する読出モード指示部として機能させるためのプログラムを記録した記録媒体であるコンピュータ読み取り可能な画像合成出力用記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２００６−３８７６（Ｐ２００６−３８７６Ａ）
【公開日】平成１８年１月５日（２００６．１．５）
【国際特許分類】
【出願番号】特願２００５−１２２３６１（Ｐ２００５−１２２３６１）
【出願日】平成１７年４月２０日（２００５．４．２０）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１８年１月５日（２００６．１．５）
【国際特許分類】
【出願日】平成１７年４月２０日（２００５．４．２０）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]