画像処理装置及びその制御方法
【課題】複数の入力画像に画像処理を施し、該画像処理が施された複数の入力画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることのできる技術を提供する。
【解決手段】本発明の画像処理装置は、複数の入力画像が複数の分割画像であるか複数の独立画像であるかを判断する判断手段と、各入力画像の端部にのりしろ画像を付加する付加手段と、複数の入力画像が複数の分割画像であると判断された場合に、のりしろ画像が付加された複数の入力画像に画像処理を施し、複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す画像処理手段と、画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、を有する。
【解決手段】本発明の画像処理装置は、複数の入力画像が複数の分割画像であるか複数の独立画像であるかを判断する判断手段と、各入力画像の端部にのりしろ画像を付加する付加手段と、複数の入力画像が複数の分割画像であると判断された場合に、のりしろ画像が付加された複数の入力画像に画像処理を施し、複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す画像処理手段と、画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御方法に関する。
【背景技術】
【０００２】
近年、高解像度の画像フォーマットが提案されている。例えば、デジタルシネマでは、フルＨＤ（ＨｉｇｈＤｅｆｉｎｉｔｉｏｎ：１９２０×１０８０画素）の４倍の画素数（３８４０×２１６０画素）の画像フォーマットが提案されている。
このような高解像度の画像（高解像画像）を処理するためには、高速な信号処理回路が必要である。しかしながら、そのような高速な信号処理回路を用いると、装置のコストが増してしまう。
そこで、高解像画像を複数の分割画像に分割し、複数の信号処理回路を用いて複数の分割画像に対する画像処理を並列に行うことにより、低速な信号処理回路を用いて高解像画像を処理する方法が考えられる。
【０００３】
しかしながら、分割画像に対し、近傍画素を参照するような空間フィルタ処理を施す場合には、他の分割画像との境界部分で、本来あるべき画素（他の分割画像の画素）の値が参照されないため、適切な処理結果を得ることができない。そのため、画像処理された分割画像を合成して高解像画像を生成、表示した際に、分割画像間で画素値が不連続となり、境界線が見えてしまうことがある。
このような課題を解決するため、高解像画像を複数の分割画像に分割する際に、分割画像の端部に、該分割画像に隣接する分割画像（隣接画像）から生成されたのりしろ画像を付加する技術が提案されている（例えば、特許文献１，２参照）。このような技術を用いれば、分割画像間の境界部分において適切な処理結果を得ることができ、上述した境界線の発生を抑制することができる。このような技術は、例えば、特許文献１，２に開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２４５９６１号公報
【特許文献２】特開２００８−２６３６４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、画像処理装置には、マルチ構成画像（それぞれ独立した複数の独立画像が並べられた画像）が入力されることがある。入力された画像がマルチ構成画像である場合に、独立画像の端部に、該独立画像の隣接画像から生成されたのりしろ画像を付加してしまうと、独立画像間の境界部分において適切な処理結果を得ることができないことがある。例えば、上記のりしろ画像が付加された独立画像に対し、近傍画素を参照する画像処理を施すと、他の独立画像との境界部分で、処理対象の独立画像と関連の無い他の独立画像の画素値が参照されてしまう。そのため、適切な処理結果を得ることができない。
【０００６】
そこで、本発明は、複数の入力画像に画像処理を施し、該画像処理が施された複数の入力画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることのできる技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の画像処理装置は、
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断手段と、
前記判断手段で前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加手段と、
前記複数の入力画像に画像処理を施す画像処理手段と、
前記画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、
を有し、
前記画像処理手段は、
前記判断手段で前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする。
【０００８】
本発明の画像処理装置の制御方法は、
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断ステップと、
前記判断ステップで前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加ステップと、
前記複数の入力画像に画像処理を施す画像処理ステップと、
前記画像処理ステップで画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成ステップと、
を有し、
前記画像処理ステップでは、
前記判断ステップで前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、複数の入力画像に画像処理を施し、該画像処理が施された複数の入力画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることができる。
【図面の簡単な説明】
【００１０】
【図１】実施例１に係る画像処理装置の機能構成の一例
【図２】実施例１に係る入力処理部の機能構成の一例
【図３】実施例１に係る元画像、低解像画像、のりしろ画像の一例
【図４】実施例１に係る低解像画像の読み出しに関する処理の流れの一例
【図５】低解像画像にのりしろ画像が付加される様子の一例
【図６】実施例２に係る画像処理システムの構成の一例
【図７】実施例２に係る画像生成装置の機能構成の一例
【図８】実施例２に係る画像処理装置の機能構成の一例
【図９】実施例２に係る入力処理部の機能構成の一例
【図１０】実施例２に係る入力処理部の機能構成の一例
【図１１】実施例２に係る入力処理部での処理の流れの一例
【図１２】実施例３に係る画像処理装置の機能構成の一例
【図１３】実施例３に係る入力処理部の機能構成の一例
【図１４】実施例３に係る低解像画像の読み出しに関する処理の流れの一例
【発明を実施するための形態】
【００１１】
以下、本発明の実施例に係る画像処理装置及びその制御方法について説明する。
【００１２】
＜実施例１＞
図１は、実施例１に係る画像処理装置の機能構成の一例を示すブロック図である。図１に示すように、本実施例に係る画像処理装置は、入力処理部１０１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
【００１３】
入力処理部１０１は、入力された画像（元画像）を分割することにより複数の低解像画像（入力画像）を生成する。具体的には、入力処理部１０１は、元画像をフレームメモリ１０２へ書き込む。そして、入力処理部１０１は、フレームメモリ１０２へ書き込んだ元画像を複数の低解像画像に分割して読み出し、複数の低解像画像を画像処理部１０３〜１０６へ出力する。入力処理部１０１の詳細については後述する。
なお、本実施例では、元画像が４つの低解像画像に分割され、該４つの低解像画像がそれぞれ４つの画像処理部へ入力される構成としたが、この構成に限らない。分割数（分割画像の数）は２つ（縦又は横方向に２分割）、３つ（縦又は横方向に３分割）、６つ（縦方向に２分割×横方向に３分割、又は縦方向に３分割×横方向に２分割）、９つ（縦方向に３分割×横方向に３分割）などであってもよい。
また、「低解像画像」の画素数は特に限定されない。本実施例では、元画像よりも画素数が少ないという理由から、元画像を分割して得られる画像を低解像画像とよぶ。
なお、本発明における「解像度」は、例えば１インチ×１インチあたりに含まれる画素の数といった、定められた領域における画素密度に限定されるものではない。本発明における「解像度」は、画像信号が本来有する画素の数という意味を含む表現である。従って、「低解像」は、画素密度が低いことに限定されず、画素の数が少ないという意味を含む。「高解像」は、画素の密度が高いことに限定されず、画素の数が多いという意味を含む。本発明の特許請求の範囲、明細書及び図面で用いられる「解像度」は、上述した定義で利用されていることに留意されたい。
【００１４】
画像処理部１０３〜１０６は、複数の低解像画像に画像処理を施す。具体的には、画像処理部１０３〜１０６は、それぞれ、入力処理部１０１から出力された低解像画像を、画像処理を施して合成部１０７へ出力する。本実施例では、各低解像画像に対する画像処理を並列に行うため、低解像画像数と同じ数の画像処理部が用意されている。なお、本実施例では、低解像画像数と同じ数の画像処理部を用いる構成（低解像画像と画像処理部が１対１の構成）としたが、この構成に限らない。例えば、複数の低解像画像に対して１つの画像処理部が設けられていてもよい。具体的には、元画像が８つの低解像画像に分割され、８つの低解像画像が２つずつ画像処理部１０３〜１０６に入力され、画像処理されてもよい。
【００１５】
合成部１０７は、画像処理部１０３〜１０６で画像処理が施された複数の低解像画像を合成することにより、１つの合成画像を生成する。具体的には、合成部１０７は、画像処理部１０３〜１０６から出力された複数の低解像画像をフレームメモリ１０２へ書き込むとともに、フレームメモリ１０２へ書き込んだ複数の低解像画像を読み出し、合成して表示部１０８へ出力する。
【００１６】
表示部１０８は、合成部１０７から出力された合成画像を表示する。表示部１０８とし
ては、液晶ディスプレイパネル、プラズマディスプレイパネル、有機ＥＬディスプレイパネルなどを用いることができる。なお、本実施例では、画像処理装置が表示部を有する構成としたが、表示部は画像処理装置と別体の装置であってもよい。
フレームメモリ１０２は、入力処理部１０１及び合成部１０７での処理に用いられるフレームメモリであり、複数のフレームの画像を保持することのできるフレームメモリである。
【００１７】
図２は、入力処理部１０１の機能構成の一例を示すブロック図である。図２に示すように、入力処理部１０１は、書き込み制御部１０１１、境界解析部１０１２、ＲＤＭＡＣ（Ｒｅａｄ Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）１０１３、読み出し制御部１０１４などを有する。
【００１８】
書き込み制御部１０１１は、元画像をフレームメモリ１０２へ書き込む制御を行う。
境界解析部１０１２は、複数の低解像画像を所定の順番で並べた際の低解像画像間（入力画像間）の境界部分毎に、低解像画像間で画素値の変化が連続となるか否か（画素値の連続性が有るか否か）を判断する。具体的には、境界解析部１０１２は、一方の低解像画像から他方の低解像画像へ画素値が連続的に変化しているか否かを判断する。そして、境界解析部１０１２は、その判断結果を読み出し制御部１０１４に出力する。
読み出し制御部１０１４は、元画像を複数の低解像画像に分割し、該複数の低解像画像を並列的に複数の画像処理部（画像処理部１０３〜１０６）へ出力する。具体的には、読み出し制御部１０１４は、低解像画像毎に、その低解像画像をフレームメモリ１０２から読み出すための読み出し要求をＲＤＭＡＣ１０１３へ出力する。このとき、読み出し制御部１０１４は、元画像を分割して得られる複数の低解像画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する。換言すれば、読み出し制御部１０１４は、元画像が、１つの高解像画像であるか、複数の独立画像が並べられたマルチ構成画像であるかを判断する。本実施例では、読み出し制御部１０１４は、境界解析部１０１２による画素値の連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかを判断する。そして、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの判断結果に基づいて、上記読み出し要求を出力する。読み出し制御部１０１４は、読み出し要求に応じてＲＤＭＡＣ１０１３から並列的に出力された複数の低解像画像を、複数の画像処理部へ出力する。
なお、複数の低解像画像が複数の分割画像である場合、シングル構成画像の画素数は低解像画像よりも多くなるため、シングル構成画像を高解像画像とよんでもよい。
ＲＤＭＡＣ１０１３は、メモリ読み出し制御部１０１４からの低解像画像毎の読み出し要求を調停して、フレームメモリ１０２から複数の低解像画像を並列的に読み出し、読み出し制御部１０１４へ出力する。
【００１９】
本実施例に係る画像処理装置の動作の具体例について以下に詳述する。
図３（Ａ）は、本実施例に係る画像処理装置に入力される画像（元画像）の一例を示す模式図である。
本実施例では、図３（Ａ）に示すように、水平方向３８４０画素、垂直方向２１６０ラインの画像が画像処理装置に入力されるものとする。なお、元画像のサイズはどのようなサイズであってもよい。例えば、元画像は、水平方向の画素数×垂直方向のライン数が１９２０×１０８０や４０９６×２１６０の画像であってもよい。
【００２０】
まず、書き込み制御部１０１１が、元画像をフレームメモリ１０２へ書き込む。
同時に、境界解析部１０１２が、読み出し制御部１０１４にて読み出される低解像画像間（元画像を分割することにより得られる低解像画像間）の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断する。
本実施例では、読み出し制御部１０１４において、元画像が４つの低解像画像に分割されて読み出される。元画像が複数の低解像画像に分割される様子の一例を図３（Ｂ）に示す。図３（Ｂ）の例では、図３（Ａ）で示した元画像が、互いにサイズが等しい４つの低解像画像Ａ１〜Ａ４に分割されている。１つの低解像画像は、水平方向１９２０画素、垂直方向１０８０ラインの画像である。そのため、境界解析部１０１２では、低解像画像Ａ１とＡ２の境界部分、低解像画像Ａ１とＡ３の境界部分、低解像画像Ａ２とＡ４の境界部分、低解像画像Ａ３とＡ４の境界部分の４つの境界部分について、上記連続性の判断が行われる。
【００２１】
境界解析部１０１２は、例えば、低解像画像Ａ１と低解像画像Ａ２の境界部分の画素値の連続性を判断する場合に、低解像画像Ａ１と低解像画像Ａ２の境界から所定の範囲内の低解像画像Ａ１と低解像画像Ａ２とを比較する。そして、境界解析部１０１２は、上記所定の範囲内の低解像画像Ａ１と低解像画像Ａ２とが類似している場合に、低解像画像Ａ１と低解像画像Ａ２の境界部分において画素値の連続性が有ると判断する。具体的には、境界解析部１０１２は、上記所定の範囲内にある低解像画像Ａ１の画素値の代表値と、上記所定の範囲内にある低解像画像Ａ２の画素値の代表値との差分が所定の閾値以下の場合に、上記所定の範囲内の低解像画像Ａ１とＡ２が類似していると判断する。上記所定の範囲は、例えば、低解像画像間の境界からの距離がＮ（Ｎ＝１，５，１０など）画素の領域である。
【００２２】
なお、連続性の判断の方法は、上記方法に限らない。
例えば、上記所定の範囲内にある一方の低解像画像の複数の画素値と、上記所定の範囲内にある他方の低解像画像の複数の画素値とがそれぞれ比較されてもよい。具体的には、上記所定の範囲内にある一方の低解像画像の複数の画素値と、上記所定の範囲内にある他方の低解像画像の複数の画素値との差分がそれぞれ算出されてもよい。そして、各差分（または差分の代表値）が所定の閾値以下の場合に、上記所定の範囲内の２つの分割画像が互いに類似していると判断されてもよい。
【００２３】
そして、読み出し制御部１０１４が、上記連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像か否か（元画像がシングル構成画像か否か）を判断する。本実施例では、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があると判断された場合に、複数の低解像画像が複数の分割画像であると判断する。
なお、複数の低解像画像が複数の分割画像か否かの判断方法はこれに限らない。例えば、全ての境界部分に対する、画素値の連続性があると判断された境界部分の割合が所定値以上の場合に、複数の低解像画像が複数の分割画像であると判断してもよい。画素値の連続性があると判断された境界部分が１つでもある場合に、複数の低解像画像が複数の分割画像であると判断してもよい。
また、元画像を分割して得られる複数の低解像画像が複数の分割画像か否か、元画像が上記シングル構成画像か否か、などを示す画像情報が外部から取得される場合には、上記連続性の判断を行わなくてもよい。そのような場合には、上記画像情報を用いて、複数の低解像画像が複数の分割画像か否か（元画像が上記シングル構成画像か否か）が判断されてもよい。画像情報は、例えば、画像にメタデータとして付加されていてもよい。
【００２４】
次に、読み出し制御部１０１４が、複数の低解像画像が複数の分割画像か否かの判断結果を基に、フレームメモリ１０２から低解像画像を読み出す。
読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を、図４（Ａ）のフローチャートに示す。
まず、境界解析部１０１２が、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する（Ｓ１０１）。
そして、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があるか
否かを判断する（Ｓ１０２）。
全ての境界部分について画素値の連続性があると判断された場合（Ｓ１０２：ＹＥＳ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像である（元画像が１つのシングル構成画像である）と判断し、Ｓ１０３へ処理が進められる。Ｓ１０３では、読み出し制御部１０１４が、各低解像画像の端部に、上記シングル構成画像においてその低解像画像に隣接する低解像画像から生成されたのりしろ画像を付加する。具体的には、のりしろ画像が付加された複数の低解像画像がフレームメモリ１０２から読み出される。
画素値の連続性がないと判断された境界部分がある場合（Ｓ１０２：ＮＯ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像でない（複数の低解像画像が複数の独立画像である；元画像がマルチ構成画像である）と判断する。そして、読み出し制御部１０１４は、複数の低解像画像をそのまま読み出す。即ち、上記のりしろ画像の付加を行わずに、のりしろ画像が付加されていない複数の低解像画像が読み出される。
読み出された複数（４つ）の低解像画像（のりしろ画像が付加されている低解像画像／のりしろ画像が付加されていない低解像画像）は、４つの画像処理部１０３〜１０６へそれぞれ出力される。
【００２５】
そして、画像処理部１０３〜１０６が、入力処理部１０１から出力される４つの低解像画像（のりしろ画像が付加されている低解像画像／のりしろ画像が付加されていない低解像画像）をそれぞれ並列的に処理して出力する。
即ち、画像処理部１０３〜１０６では、複数の低解像画像が複数の分割画像であると判断された場合に、のりしろ画像が付加された複数の低解像画像に画像処理が施される。また、複数の低解像画像が複数の独立画像であると判断された場合に、他の低解像画像から生成されたのりしろ画像が付加されていない複数の低解像画像に画像処理が施される。具体的には、のりしろ画像が付加されていない複数の低解像画像に画像処理が施される。
なお、低解像画像にのりしろ画像が付加されている場合には、低解像画像の領域に対してのみ画像処理が施されてもよいし、低解像画像とのりしろ画像の両方の領域に対して画像処理が施されてもよい。低解像画像の領域に対してのみ画像処理を施す構成とすれば、画像処理の処理負荷を低減することができる。
【００２６】
次に、合成部１０７が、画像処理部１０３〜１０６から出力される複数の低解像画像をフレームメモリ１０２へ書き込む。そして、合成部１０７は、当該書き込んだ低解像画像を読み出して、複数の低解像画像が並べられた合成画像（本実施例では水平方向３８４０画素、垂直方向２１６０ラインの画像）として表示部１０８へ出力する。それにより、元画像が、画像処理が施されて表示されることとなる。なお、低解像画像にのりしろ画像が付加されている場合には、合成部１０７は、付加されているのりしろ画像を削除して低解像画像を読み出す。
なお、本実施例では、複数の低解像画像を所定の順番で並べたものを合成画像とするが、合成画像はこれに限らない。複数の低解像画像が複数の分割画像である場合に、複数の低解像画像を所定の順番（正しいシングル構成画像を形成する順番）で並べたものが合成画像とされればよい。複数の低解像画像が複数の独立画像である場合には、複数の低解像画像を所定の順番で並べたものが合成画像とされてもよいし、複数の低解像画像をランダムな順番で並べたものが合成画像とされてもよい。
【００２７】
図３（Ｃ）は、低解像画像Ａ１に対しのりしろ画像が付加される様子を示す模式図である。
図３（Ｃ）の例では、水平方向１９２０画素、垂直方向１０８０ラインの低解像画像Ａ１をフレームメモリ１０２から読み出す際に、画像Ａ２−１、画像Ａ３−１、画像Ａ４−１がのりしろ画像として付加される。画像Ａ２−１は、低解像画像Ａ１の右側に付加される、水平方向α画素、垂直方向１０８０ラインののりしろ画像である。画像Ａ３−１は、低解像画像Ａ１の下側に付加される、水平方向１９２０画素、垂直方向βラインののりし
ろ画像である。画像Ａ４−１は、低解像画像Ａ１の右下側に付加される、水平方向α画素、垂直方向βラインののりしろ画像である。α，βの値は、後段の画像処理部で低解像画像の領域を処理（例えば、空間フィルタ処理）する際に用いられる（参照される）画素が含まれるように決定される。例えば、画像処理部で実行される処理が空間フィルタ処理である場合には、α，βの値は、該空間フィルタのサイズに基づいて決定される。α，βの値は、予め読み出し制御部１０１４内に設定されていていてもよいし、外部から（ユーザやメーカ等により）入力されてもよい。空間フィルタ処理では、注目画素とその近傍の画素の画素値に画素位置に応じた重み付けがされ、それら（重み付けされた画素値）の和が、注目画素の新しい画素値として算出される。空間フィルタ処理としては、画像内のノイズを除去する平滑化フィルタ処理や、画像内のエッジを強調するエッジ強調処理などが挙げられる。
低解像画像Ａ２〜Ａ４をフレームメモリ１０２から読み出す際にも、同様に、隣接する低解像画像から生成されたのりしろ画像が付加される。
【００２８】
なお、のりしろ画像の画素値は、低解像画像Ａ１に隣接する低解像画像Ａ２〜Ａ４の少なくとも一部の領域の画素値を用いて決定される。例えば、画像Ａ２−１の画素値は、低解像画像Ａ２の画素値を用いて決定される。画像Ａ３−１の画素値は、低解像画像Ａ３の画素値を用いて決定される。画像Ａ４−１の画素値は、低解像画像Ａ４の画素値を用いて決定される。具体的には、のりしろ画像の画素毎に、その画素に対応する他の低解像画像の画素の値が画素値とされる。例えば、低解像画像Ａ２の低解像画像Ａ１と隣接する水平方向α画素、垂直方向１０８０ラインの領域の画像が画像Ａ２−１とされる。
但し、のりしろ画像の画素値の決定方法はこれに限らない。
低解像画像に隣接する画素（隣接する低解像画像の画素）の値のみを用いてのりしろ画像の画素値が決定されてもよい。例えば、ライン毎（行毎）に、そのラインにおいて低解像画像Ａ１と隣接する低解像画像Ａ２の画素の値が、該ラインの画像Ａ２−１の各画素の値とされてもよい。列毎に、その列において低解像画像Ａ１と隣接する低解像画像Ａ３の画素の値が、該列の画像Ａ３−１の各画素の値とされてもよい。そして、低解像画像Ａ１と隣接する低解像画像Ａ４の画素の値が、画像Ａ４−１の各画素の値とされてもよい。
また、のりしろ画像毎に、そののりしろ画像に対応する低解像画像の画素値の代表値（平均値、最頻値、最大値、最小値など）が、該のりしろ画像の各画素値とされてもよい。例えば、低解像画像Ａ２の低解像画像Ａ１と隣接する水平方向α画素、垂直方向１０８０ラインの領域の画素値の代表値（平均値、最頻値、最大値、最小値など）が画像Ａ２−１の各画素の値とされてもよい。
【００２９】
複数の低解像画像が複数の分割画像である場合（元画像が１つのシングル構成画像である場合）、のりしろ画像を付加しなければ、画像処理部での処理において、本来あるべき画素（他の低解像画像の画素）の値が参照されず、適切な処理結果を得ることができない。本実施例では、複数の低解像画像が複数の分割画像である場合に、各低解像画像の端部に、その低解像画像に隣接する低解像画像から生成されたのりしろ画像が付加される。そのため、画像処理部での処理において、本来あるべき画素の値（またはそれに準じた値）が参照され、適切な処理結果を得ることができる。
【００３０】
図３（Ｄ）は、４つの独立画像Ｂ，Ｃ，Ｄ，Ｅを含むマルチ構成画像の一例を示す模式図である。独立画像Ｂ，Ｃ，Ｄ，Ｅは、それぞれ、低解像画像Ａ１，Ａ２，Ａ３，Ａ４に対応する。また、独立画像Ｂ，Ｃ，Ｄ，Ｅは、それぞれ、独立した画像であり、互いに関連性は無い。このような独立画像に対して、図３（Ｃ）と同様にのりしろ画像を付加すると、独立画像に対して全く関連性の無い画像がのりしろ画像として付加されてしまう。例えば、図３（Ｅ）に示すように、独立画像Ｂの端部に、全く関連性の無い独立画像Ｃ，Ｄ，Ｅ（独立画像Ｂに隣接する独立画像）から生成されたのりしろ画像Ｃ−１，Ｄ−１，Ｅ−１が付加されてしまう。その結果、１つの独立画像に対する処理において、全く関連性
の無い独立画像の画素値が参照されてしまう。そのため、境界部分において適切な処理結果を得ることができない（境界部分において画像の不整合が生じてしまう）。本実施例では、複数の低解像画像が複数の独立画像である場合に、低解像画像へのりしろ画像の付加は行われない。そのため、上記不整合が発生することなく、適切な処理結果を得ることができる。
【００３１】
以上述べたように、本実施例によれば、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかが判断される。そして、複数の低解像画像が複数の分割画像であると判断された場合に、各低解像画像に、その低解像画像に隣接する低解像画像から生成されたのりしろ画像が付加される。そして、該のりしろ画像が付加された低解像画像に画像処理が施される。また、複数の低解像画像が複数の独立画像であると判断された場合に、他の低解像画像から生成されるのりしろ画像が付加されていない複数の低解像画像に画像処理が施される。具体的には、のりしろ画像が付加されていない複数の低解像画像に画像処理が施される。
その結果、複数の低解像画像が複数の分割画像である場合には、１つの低解像画像に対する処理において、該低解像画像に隣接する低解像画像の画素値を参照することができる。また、複数の低解像画像が複数の独立画像である場合には、１つの低解像画像に対する処理において、該低解像画像と関連性の無い低解像画像の画素値が参照されることを抑制することができる。そして、複数の低解像画像に画像処理を施し、該画像処理が施された複数の低解像画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることができる。
【００３２】
なお、本実施例では、読み出し制御部が複数の低解像画像が複数の分割画像か否かを判断する構成としたが、そのような判断は他の機能部が行ってもよい。例えば、そのような判断は境界解析部で行われてもよい。画像処理装置にそのような判断を行う機能部が別途設けられていてもよい。
【００３３】
なお、本実施例では、複数の低解像画像が複数の独立画像であると判断された場合に、低解像画像にのりしろ画像を付加しない構成としたが、複数の低解像画像が複数の独立画像であると判断された場合にものりしろ画像を付加してもよい。
図４（Ｂ）は、読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの他の例を示す図である。
図４（Ｂ）のＳ２０１，Ｓ２０２，Ｓ２０４の処理は、図４（Ａ）のＳ１０１，Ｓ１０２，Ｓ１０３の処理と同様である。
画素値の連続性がないと判断された境界部分がある場合には（Ｓ２０２：ＮＯ）、Ｓ２０３において、各低解像画像の端部にのりしろ画像が付加される。具体的には、のりしろ画像が付加された複数の低解像画像がフレームメモリ１０２から読み出される。但し、Ｓ２０３で付加されるのりしろ画像は、自身（該のりしろ画像の付加対象である低解像画像）から生成された画像である。即ち、Ｓ２０３では、各低解像画像の端部に、その低解像画像から生成されたのりしろ画像が付加される。
【００３４】
図５（Ａ），５（Ｂ）は、Ｓ２０３で低解像画像（独立画像）にのりしろ画像が付加される様子の一例を示した模式図である。図５（Ａ），５（Ｂ）は、図３（Ｄ）の独立画像Ｂの１ライン目に対して水平方向１６画素ののりしろ画像が付加される様子を示している。
図５（Ａ）は、低解像画像の縁に位置する画素の値のみを用いて、該低解像画像に付加するのりしろ画像の画素値を決定した場合の例である。具体的には、図５（Ａ）では、独立画像Ｂの１ライン目の最も右側の画素の値（Ｂ１９１９）が、独立画像Ｂの右側に付加されるのりしろ画像の１ライン目の各画素の値とされている。
図５（Ｂ）は、低解像画像の縁部の画像（縁から所定の範囲内の画像）を、該縁に対し
て反転させることにより、該低解像画像に付加するのりしろ画像を生成する場合の例である。図５（Ｂ）では、独立画像Ｂの１ライン目の右側縁部の画像である１６画素を、独立画像Ｂの右側縁を基準として反転させた画像が、独立画像Ｂの１ライン目の右側に付加されるのりしろ画像とされている。
【００３５】
このように、複数の低解像画像が複数の分割画像であるか否かに拘わらず、各低解像画像にのりしろ画像が付加されることで、入力処理部１０１以降の処理で、処理する画像の大きさを統一することが可能となる。また、複数の低解像画像が複数の独立画像である場合、低解像画像には、該低解像画像から生成されたのりしろ画像が付加される。即ち、複数の低解像画像が複数の独立画像である場合、低解像画像には、該低解像画像と関連性のある画像がのりしろ画像として付加される。そのため、複数の低解像画像が複数の独立画像である場合に、のりしろ画像を付加したとしても、上述したような不整合が発生することなく、適切な処理結果を得ることができる。
【００３６】
＜実施例２＞
実施例１では、元画像を複数の低解像画像に分割し、複数の低解像画像を、画像処理を施して合成する構成について説明した。本実施例では、複数の低解像画像が入力され、入力された複数の低解像画像を、画像処理を施して合成する構成について説明する。
【００３７】
図６は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。
図６に示すように、本実施例に係る画像処理システムは、画像処理装置１０と画像生成装置２０を有する。
画像処理装置１０は、入力された複数の低解像画像を、画像処理を施して合成することにより、１つの合成画像を生成する。そして、画像処理装置１０は、合成画像を表示部に表示する。
画像生成装置２０は、１つの元画像を複数の低解像画像に分割し、該低解像画像を画像処理装置１０へ出力する。
【００３８】
図７は、本実施例に係る画像生成装置２０の機能構成の一例を示すブロック図である。図７に示すように、画像生成装置２０は、ホストＣＰＵ２０１、高速バス２０２、中速バス２０３、システムＲＯＭ２０４、ブリッジ２０５，２０７を有する。また、画像生成装置２０は、ＤＲＡＭ２０６、Ｉ／Ｏコントローラ２０８、ＤＶＤ装置２０９、ＨＤＤ装置２１０、キーボード２１１、マウス２１２、ＲＴＣ２１３、オーディオサブシステム２１４、ディスプレイコントローラ２１５〜２１８を有する。
【００３９】
ホストＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１は、画像生成装置全体を制御する。
高速バス２０２は、アドレスバス、データバス、コントロールバス等を備えるＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）ｅｘｐｒｅｓｓ等である。
ブリッジ２０５は、ホストＣＰＵ２０１と高速バス２０２との間のインタフェースを行なう。
ＤＲＡＭ（ＤｙｎａｍｉｃＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）２０６は、メインメモリとして使用される。具体的には、ＤＲＡＭ２０６は、ホストＣＰＵ２０１により実行される制御プログラムを記憶している。また、ＤＲＡＭ２０６は、ホストＣＰＵ２０１による制御処理時にワーク領域として使われる。
中速バス２０３は、ＳｅｒｉａｌＡＴＡ（ＡＴＡｔｔａｃｈｍｅｎｔ）等である。
ブリッジ２０７は、高速バス２０２と中速バス２０３とを接続する。
システムＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）２０４は、装置全体の初期化処理を行なうプログラム等を記憶する。
【００４０】
ディスプレイコントローラ２１５〜２１８は、画像を生成する。具体的には、１つのディスプレイコントローラは、最大で水平方向１９２０画素、垂直方向１０８０ラインの低解像画像を生成することができる。本実施例では、４つのディスプレイコントローラを用いて、最大で水平方向３８４０画素、垂直方向２１６０ラインの元画像を生成することができる。具体的には、水平方向３８４０画素、垂直方向２１６０ラインの元画像を分割して得られる４つの低解像画像を生成することができる。
本実施例では、高速バス２０２を介してホストＣＰＵ２０１からディスプレイコントローラ２１５〜２１８へ表示情報（ディスプレイコントローラで生成される低解像画像のサイズ、元画像内での領域など）がセットされる。ディスプレイコントローラ２１５〜２１８からは、図３（Ｂ）に示したような４つの分割画像（低解像画像Ａ１〜Ａ４）、または、図３（Ｄ）に示したように４つの独立画像が出力される。
【００４１】
Ｉ／Ｏコントローラ２０８は、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｄｉｓｃ）装置２０９およびＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）装置２１０のためのディスク・インタフェースを有する。また、Ｉ／Ｏコントローラ２０８は、外部装置との通信を行なうために用いられるシリアル・インタフェース、文字、数字等の入力を行なうためのキーボード２１１や、ポインティングデバイスであるマウス２１２とのインタフェース等を有する。
ＲＴＣ２１３は、リアルタイムクロックであり、クロックを計数して時間を計時するタイマ機能を有する。
オーディオサブシステム２１４は、マイクからの音声信号を入力して中速バス２０３に出力したり、あるいは中速バス２０３からの信号に基づいてスピーカに可聴信号を出力する。
【００４２】
ユーザは、一般に、画像処理装置１０が有する表示部（画像表示装置に接続された表示部）に表示される各種情報を確認しながら、画像生成装置２０を操作する。
具体的には、ＤＶＤ装置２０９、ＨＤＤ装置２１０、キーボード２１１、マウス２１２等から供給される画像（文字、写真、ＴＶ番組などの画像）が、ディスプレイコントローラ２１５〜２１８を介して画像生成装置２０から画像処理装置１０へ出力される。また、システムＲＯＭ２０４やメインメモリ（ＤＲＡＭ）２０６に格納されたユーザのシステム操作に係る操作情報等も、ディスプレイコントローラ２１５〜２１８を介して画像生成装置２０から画像処理装置１０へ出力される。
そして、ユーザは、画像処理装置１０が有する表示部の表示内容を確認しながら各種情報の編集や、システムに対する指示操作を行なう。
【００４３】
図８は、本実施例に係る画像処理装置１０の機能構成の一例を示したブロック図である。図８に示すように、画像処理装置１０は、入力処理部１１１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
入力処理部１１１は、画像生成装置２０から出力された複数の低解像画像を、フレームメモリ１０２へ書き込む。そして、入力処理部１１１は、フレームメモリ１０２に書き込んだ複数の低解像画像を読み出し、画像処理部１０３〜１０６へ出力する。入力処理部１１１の詳細については後述する。
フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８は、実施例１の図１で示したものと同じものである。
【００４４】
図９は、入力処理部１１１の機能構成の一例を示すブロック図である。図９に示すように、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ（Ｗｒｉｔｅ Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）１１１５、境界解析部１１１２、ＲＤＭＡＣ１０１３、読み出し制御部１０１４などを有する。
書き込み制御部１１１１は、入力された複数の低解像画像をフレームメモリ１０２へ書き込む制御を行う。
ＷＤＭＡＣ１１１５は、書き込み制御部１１１１からの４系統の書き込み要求を調停して、フレームメモリ１０２への複数の低解像画像の書き込みを制御する。
境界解析部１１１２は、入力された複数の低解像画像の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断し、その判断結果を読み出し制御部１０１４に出力する。
ＲＤＭＡＣ１０１３、読み出し制御部１０１４は、実施例１の図２で示したものと同じものである。
【００４５】
本実施例に係る画像処理装置の動作の具体例について以下に詳述する。
まず、書き込み制御部１１１１が、画像生成装置２０から出力される４つの低解像画像をＷＤＭＡＣ１１１５を介してフレームメモリ１０２へ書き込む。
次に、境界解析部１１１２が、実施例１と同様に、画像生成装置２０から出力される４つの低解像画像の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断する。
そして、読み出し制御部１０１４は、実施例１と同様に、上記連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像か否かを判断する。
次に、読み出し制御部１０１４が、実施例１と同様に（図４（Ａ）または図４（Ｂ）に示す処理フローに従って）、複数の低解像画像が複数の分割画像か否かの判断結果を基に、フレームメモリ１０２から低解像画像を読み出す。読み出された複数の低解像画像は、実施例１と同様に、４つの画像処理部１０３〜１０６へそれぞれ出力される。
そして、画像処理部１０３〜１０６が、実施例１と同様に、入力処理部１０１から出力される４つの低解像画像をそれぞれ並列的に処理して出力する。
次に、合成部１０７が、実施例１と同様に、画像処理部１０３〜１０６から出力される複数の低解像画像をフレームメモリ１０２へ書き込む。そして、合成部１０７は、実施例１と同様に、当該書き込んだ低解像画像を読み出して、複数の低解像画像が並べられた合成画像として表示部１０８へ出力する。それにより、元画像が、画像処理が施されて表示されることとなる。
【００４６】
以上述べたように、本実施例によれば、画像処理装置に複数の低解像画像が入力される場合にも、実施例１と同様に複数の低解像画像に画像処理が施される。そして、画像処理が施された複数の低解像画像が並べられた合成画像が生成され、表示される。その結果、実施例１と同様の効果を得ることができる。
【００４７】
なお、複数の低解像画像に含まれるフレーム同期信号（ＶＳ信号；ＶｅｒｔｉｃａｌＳｙｎｃｒｏｎｏｕｓ信号）を更に用いることにより、複数の低解像画像が複数の分割画像か否かをより精度良く判断することができる。
【００４８】
図１０は、本実施例に係る入力処理部１１１の機能構成の他の例を示すブロック図である。図１０の例では、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ１１１５、境界解析部１１１２、ＲＤＭＡＣ１０１３、読み出し制御部１０１４、フレーム同期検出部１１１６などを有する。
書き込み制御部１１１１、ＷＤＭＡＣ１１１５、ＲＤＭＡＣ１０１３は、図９で示したものと同じである。
【００４９】
フレーム同期検出部１１１６は、複数の低解像画像のフレーム同期信号が同期しているか否かを判断し、判断結果を境界解析部１１１２へ出力する。具体的には、フレーム同期検出部１１１６は、画像生成装置２０から出力された４系統の低解像画像に含まれるＶＳ信号を解析し（図１１（Ａ）のＳ３０１）、全てのＶＳ信号が互いに同期しているか否か
判断を判断する。そして、４つの低解像画像のＶＳ信号が同期していると判断した場合には（Ｓ３０２：ＹＥＳ）、フレーム同期検出部１１１６は、判断結果としてＳｙｎｃＦｌａｇ信号“１”を境界解析部１１１２に出力する（Ｓ３０３）。また、４つの低解像画像のＶＳ信号が同期していないと判断した場合には（Ｓ３０２：ＮＯ）、フレーム同期検出部１１１６は、ＳｙｎｃＦｌａｇ信号“０”を境界解析部１１１２に出力する（Ｓ３０４）。図１１（Ａ）は、フレーム同期検出部１１１６の動作の一例を示すフローチャートである。
【００５０】
境界解析部１１１２は、図９の境界解析部１１１２と同様に、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する。そして、境界解析部１１１２は、画素値の連続性の判断結果と、フレーム同期検出部１１１６からのＳｙｎｃＦｌａｇ信号とを、読み出し制御部１０１４へ出力する。
読み出し制御部１０１４は、画素値の連続性の判断結果と、フレーム同期検出部１１１６からのＳｙｎｃＦｌａｇ信号の状態とから、複数の低解像画像（画像生成装置２０から出力される４系統の低解像画像）が複数の分割画像か否かを判断する。
図１１（Ｂ）は、図１０の読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を示すフローチャートである。
まず、境界解析部１１１２が、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する（Ｓ４０１）。
そして、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があるか否かを判断する（Ｓ４０２）。
全ての境界部分について画素値の連続性があると判断された場合（Ｓ４０２：ＹＥＳ）、読み出し制御部１０１４は、ＳｙｎｃＦｌａｇ信号が“１”か否かを判断する（Ｓ４０３）。
ＳｙｎｃＦｌａｇ信号が“１”である場合（Ｓ４０３：ＹＥＳ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像であると判断し、複数の低解像画像をのりしろ画像を付加して読み出す（Ｓ４０４）。
ＳｙｎｃＦｌａｇ信号が“０”である場合（Ｓ４０３：ＮＯ）、読み出し制御部１０１４は、複数の低解像画像が複数の独立画像であると判断し、複数の低解像画像をのりしろ画像を付加せずにそのまま読み出す。なお、Ｓ４０２において画素値の連続性がないと判断された境界部分がある場合も、同様に、のりしろ画像の付加は行われない。なお、複数の低解像画像が複数の独立画像であると判断された場合に、図４（Ｂ）のように、各低解像画像に、その低解像画像から生成されたのりしろ画像が付加されてもよい。
【００５１】
複数の低解像画像が複数の分割画像である場合には、複数の低解像画像のフレーム同期信号は特定の位相関係を有する（同期する）。そのため、複数の低解像画像のフレーム同期信号が同期している場合には、該複数の低解像画像が複数の分割画像である可能性が高い。また、複数の低解像画像のフレーム同期信号が同期していない場合には、該複数の低解像画像が複数の独立画像である可能性が高い。
上述した構成によれば、複数の低解像画像のフレーム同期信号が同期しているか否かが判断される。そして、複数の低解像画像のフレーム同期信号が同期していない場合には、複数の低解像画像が複数の独立画像であると判断される。
それにより、画素値の連続性の判断結果のみに基づいて複数の低解像画像が複数の分割画像か否かを判断するよりも、複数の低解像画像が複数の分割画像か否かをより精度良く判断することができる。例えば、画素値の連続性の判断結果のみに基づいて複数の低解像画像が複数の分割画像であると判断された場合であっても、複数の低解像画像のフレーム同期信号が同期していない場合には、複数の低解像画像が複数の独立画像である可能性が高い。上記構成によれば、そのような場合に複数の低解像画像が複数の独立画像であると判断することができる。
なお、このような構成（フレーム同期信号を用いた判断）は、実施例１の構成にも適用
できる。
【００５２】
＜実施例３＞
実施例１，２では、画像処理装置が複数の低解像画像の境界部分毎に画素値の連続性が有るか否かを判断し、その判断結果に従って境界部分の処理（のりしろ画像の付加）を制御する例について説明した。
本実施例では、画像処理装置が、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す情報を取得し、該取得した情報に従って境界部分の処理（のりしろ画像の付加）を制御する例について説明する。
【００５３】
本実施例に係る画像処理システムは、図６と同様に、画像処理装置１０と画像生成装置２０を有する。画像生成装置２０は、実施例２（図７）と同様の構成を有する。本実施例では、Ｉ／Ｏコントローラ２０８からのシリアル・インタフェースが画像処理装置１０に接続される。
【００５４】
図１２は、本実施例に係る画像処理装置１０の機能構成の一例を示したブロック図である。図１２に示すように、画像処理装置１０は、入力処理部１２１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
入力処理部１２１は、画像生成装置２０から出力された複数の低解像画像を、フレームメモリ１０２へ書き込む。そして、入力処理部１２１は、フレームメモリ１０２に書き込んだ複数の低解像画像を読み出し、画像処理部１０３〜１０６へ出力する。更に、入力処理部１２１は、画像生成装置２０とシリアル・インタフェースを介して通信を行う機能を有する。なお、外部（本実施例では画像生成装置２０）との通信方法は、シリアル・インタフェースを用いた方法でなくてもよい。
フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８は、実施例１での図１で示したものと同じものである。
【００５５】
図１３は、入力処理部１２１の機能構成の一例を示すブロック図である。図１３示すように、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ１１１５、読み出し制御部１０１４、ＲＤＭＡＣ１０１３、通信制御部１２１７などを有する。
書き込み制御部１１１１、ＷＤＭＡＣ１１１５、読み出し制御部１０１４、ＲＤＭＡＣ１０１３は、図９で示したものと同じものである。
通信制御部１２１７は、シリアル・インタフェースを介して画像生成装置２０と通信を行う。
本実施例では、通信制御部１２１７は、画像生成装置２０から、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す情報（画像情報）を取得する。具体的には、通信制御部１２１７は、画像生成装置２０から、画像情報として、境界部分毎の画素値の連続性の有無を示す境界部分情報を取得する。本実施例では、全ての境界部分について画素値の連続性が有る場合に複数の低解像画像を複数の分割画像とする。そのため、境界部分情報が全ての境界部分について画素値の連続性が有ることを示す場合には、該境界部分情報は複数の低解像画像が複数の分割画像であることを示す情報であるといえる。
【００５６】
本実施例に係る画像処理システムの動作の一例を以下に詳述する。なお、以下で述べる動作以外の動作は、実施例１，２と同様である。
まず、画像生成装置２０において、ホストＣＰＵ２０１が高速バス２０２を介してディスプレイコントローラ２１５〜２１８へ表示情報をセットする。また、ホストＣＰＵ２０１は、中速バス２０３を介してＩ／Ｏコントローラ２０８へシリアル通信の設定を行う。具体的には、ホストＣＰＵ２０１は、Ｉ／Ｏコントローラ２０８へ、ディスプレイコントローラ２１５〜２１８から出力される複数（４つ）の低解像画像が複数の分割画像である
か複数の独立画像であるかの少なくともいずれかを示す画像情報を送る。
Ｉ／Ｏコントローラ２０８は、ホストＣＰＵ２０１から送られた画像情報（本実施例では境界部分情報）を、シリアル・インタフェースを介して画像処理装置１０へ送る。
通信制御部１２１７は、画像生成装置２０から送られた境界部分情報を取得し、読み出し制御部１０１４へ出力する。
読み出し制御部１０１４は、通信制御部１２１７から出力された境界部分情報を用いて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかを判断する。そして、読み出し制御部１０１４は、その判断結果に従って、フレームメモリ１０２から複数の低解像画像を読み出す。
【００５７】
図１４（Ａ），１４（Ｂ）は、図１３の読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を示すフローチャートである。
まず、図１４（Ａ），１４（Ｂ）のＳ５０１，Ｓ６０１において、読み出し制御部１０１４は、通信制御部１２１７を介して、境界部分情報を取得する。
そして、Ｓ５０２，Ｓ６０２において、読み出し制御部１０１４が、取得した境界部分情報から、全ての境界部分について画素値の連続性があるか否かを判断する。
Ｓ５０３，Ｓ６０３，Ｓ６０４の処理は、それぞれ、Ｓ１０３，Ｓ２０３，Ｓ２０４の処理と同様のため、その説明は割愛する。
【００５８】
以上述べたように、本実施例によれば、画像処理装置に、外部から、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す画像情報が入力される。そして、該画像情報を用いて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかが判断される。それにより、実施例１，２で述べた連続性の判断などを省略することができ、画像処理装置の処理負荷を軽減することができる。
なお、本実施例では、画像情報として、境界部分の画素値の連続性を示す境界部分情報が取得されるものとしたが、画像情報はこれに限らない。画像情報は、画像処理装置に入力される複数の低解像画像が複数の分割画像か否かを直接示す情報であってもよい。また、実施例１のように、１つの画像が入力される場合には、画像情報は、元画像がシングル構成画像かマルチ構成画像かを示す情報であってもよい。
なお、本実施例では画像情報が画像生成装置から画像処理装置に入力されるものとしたが、これに限らない。画像情報は、画像生成装置とは異なる装置から入力されてもよいし、ユーザによって入力されてもよい。
【符号の説明】
【００５９】
１０ 画像処理装置
１０１，１１１，１２１ 入力処理部
１０３〜１０６ 画像処理部
１０７ 合成部
１０１４ 読み出し制御部
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御方法に関する。
【背景技術】
【０００２】
近年、高解像度の画像フォーマットが提案されている。例えば、デジタルシネマでは、フルＨＤ（ＨｉｇｈＤｅｆｉｎｉｔｉｏｎ：１９２０×１０８０画素）の４倍の画素数（３８４０×２１６０画素）の画像フォーマットが提案されている。
このような高解像度の画像（高解像画像）を処理するためには、高速な信号処理回路が必要である。しかしながら、そのような高速な信号処理回路を用いると、装置のコストが増してしまう。
そこで、高解像画像を複数の分割画像に分割し、複数の信号処理回路を用いて複数の分割画像に対する画像処理を並列に行うことにより、低速な信号処理回路を用いて高解像画像を処理する方法が考えられる。
【０００３】
しかしながら、分割画像に対し、近傍画素を参照するような空間フィルタ処理を施す場合には、他の分割画像との境界部分で、本来あるべき画素（他の分割画像の画素）の値が参照されないため、適切な処理結果を得ることができない。そのため、画像処理された分割画像を合成して高解像画像を生成、表示した際に、分割画像間で画素値が不連続となり、境界線が見えてしまうことがある。
このような課題を解決するため、高解像画像を複数の分割画像に分割する際に、分割画像の端部に、該分割画像に隣接する分割画像（隣接画像）から生成されたのりしろ画像を付加する技術が提案されている（例えば、特許文献１，２参照）。このような技術を用いれば、分割画像間の境界部分において適切な処理結果を得ることができ、上述した境界線の発生を抑制することができる。このような技術は、例えば、特許文献１，２に開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２４５９６１号公報
【特許文献２】特開２００８−２６３６４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、画像処理装置には、マルチ構成画像（それぞれ独立した複数の独立画像が並べられた画像）が入力されることがある。入力された画像がマルチ構成画像である場合に、独立画像の端部に、該独立画像の隣接画像から生成されたのりしろ画像を付加してしまうと、独立画像間の境界部分において適切な処理結果を得ることができないことがある。例えば、上記のりしろ画像が付加された独立画像に対し、近傍画素を参照する画像処理を施すと、他の独立画像との境界部分で、処理対象の独立画像と関連の無い他の独立画像の画素値が参照されてしまう。そのため、適切な処理結果を得ることができない。
【０００６】
そこで、本発明は、複数の入力画像に画像処理を施し、該画像処理が施された複数の入力画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることのできる技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の画像処理装置は、
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断手段と、
前記判断手段で前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加手段と、
前記複数の入力画像に画像処理を施す画像処理手段と、
前記画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、
を有し、
前記画像処理手段は、
前記判断手段で前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする。
【０００８】
本発明の画像処理装置の制御方法は、
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断ステップと、
前記判断ステップで前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加ステップと、
前記複数の入力画像に画像処理を施す画像処理ステップと、
前記画像処理ステップで画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成ステップと、
を有し、
前記画像処理ステップでは、
前記判断ステップで前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、複数の入力画像に画像処理を施し、該画像処理が施された複数の入力画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることができる。
【図面の簡単な説明】
【００１０】
【図１】実施例１に係る画像処理装置の機能構成の一例
【図２】実施例１に係る入力処理部の機能構成の一例
【図３】実施例１に係る元画像、低解像画像、のりしろ画像の一例
【図４】実施例１に係る低解像画像の読み出しに関する処理の流れの一例
【図５】低解像画像にのりしろ画像が付加される様子の一例
【図６】実施例２に係る画像処理システムの構成の一例
【図７】実施例２に係る画像生成装置の機能構成の一例
【図８】実施例２に係る画像処理装置の機能構成の一例
【図９】実施例２に係る入力処理部の機能構成の一例
【図１０】実施例２に係る入力処理部の機能構成の一例
【図１１】実施例２に係る入力処理部での処理の流れの一例
【図１２】実施例３に係る画像処理装置の機能構成の一例
【図１３】実施例３に係る入力処理部の機能構成の一例
【図１４】実施例３に係る低解像画像の読み出しに関する処理の流れの一例
【発明を実施するための形態】
【００１１】
以下、本発明の実施例に係る画像処理装置及びその制御方法について説明する。
【００１２】
＜実施例１＞
図１は、実施例１に係る画像処理装置の機能構成の一例を示すブロック図である。図１に示すように、本実施例に係る画像処理装置は、入力処理部１０１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
【００１３】
入力処理部１０１は、入力された画像（元画像）を分割することにより複数の低解像画像（入力画像）を生成する。具体的には、入力処理部１０１は、元画像をフレームメモリ１０２へ書き込む。そして、入力処理部１０１は、フレームメモリ１０２へ書き込んだ元画像を複数の低解像画像に分割して読み出し、複数の低解像画像を画像処理部１０３〜１０６へ出力する。入力処理部１０１の詳細については後述する。
なお、本実施例では、元画像が４つの低解像画像に分割され、該４つの低解像画像がそれぞれ４つの画像処理部へ入力される構成としたが、この構成に限らない。分割数（分割画像の数）は２つ（縦又は横方向に２分割）、３つ（縦又は横方向に３分割）、６つ（縦方向に２分割×横方向に３分割、又は縦方向に３分割×横方向に２分割）、９つ（縦方向に３分割×横方向に３分割）などであってもよい。
また、「低解像画像」の画素数は特に限定されない。本実施例では、元画像よりも画素数が少ないという理由から、元画像を分割して得られる画像を低解像画像とよぶ。
なお、本発明における「解像度」は、例えば１インチ×１インチあたりに含まれる画素の数といった、定められた領域における画素密度に限定されるものではない。本発明における「解像度」は、画像信号が本来有する画素の数という意味を含む表現である。従って、「低解像」は、画素密度が低いことに限定されず、画素の数が少ないという意味を含む。「高解像」は、画素の密度が高いことに限定されず、画素の数が多いという意味を含む。本発明の特許請求の範囲、明細書及び図面で用いられる「解像度」は、上述した定義で利用されていることに留意されたい。
【００１４】
画像処理部１０３〜１０６は、複数の低解像画像に画像処理を施す。具体的には、画像処理部１０３〜１０６は、それぞれ、入力処理部１０１から出力された低解像画像を、画像処理を施して合成部１０７へ出力する。本実施例では、各低解像画像に対する画像処理を並列に行うため、低解像画像数と同じ数の画像処理部が用意されている。なお、本実施例では、低解像画像数と同じ数の画像処理部を用いる構成（低解像画像と画像処理部が１対１の構成）としたが、この構成に限らない。例えば、複数の低解像画像に対して１つの画像処理部が設けられていてもよい。具体的には、元画像が８つの低解像画像に分割され、８つの低解像画像が２つずつ画像処理部１０３〜１０６に入力され、画像処理されてもよい。
【００１５】
合成部１０７は、画像処理部１０３〜１０６で画像処理が施された複数の低解像画像を合成することにより、１つの合成画像を生成する。具体的には、合成部１０７は、画像処理部１０３〜１０６から出力された複数の低解像画像をフレームメモリ１０２へ書き込むとともに、フレームメモリ１０２へ書き込んだ複数の低解像画像を読み出し、合成して表示部１０８へ出力する。
【００１６】
表示部１０８は、合成部１０７から出力された合成画像を表示する。表示部１０８とし
ては、液晶ディスプレイパネル、プラズマディスプレイパネル、有機ＥＬディスプレイパネルなどを用いることができる。なお、本実施例では、画像処理装置が表示部を有する構成としたが、表示部は画像処理装置と別体の装置であってもよい。
フレームメモリ１０２は、入力処理部１０１及び合成部１０７での処理に用いられるフレームメモリであり、複数のフレームの画像を保持することのできるフレームメモリである。
【００１７】
図２は、入力処理部１０１の機能構成の一例を示すブロック図である。図２に示すように、入力処理部１０１は、書き込み制御部１０１１、境界解析部１０１２、ＲＤＭＡＣ（Ｒｅａｄ Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）１０１３、読み出し制御部１０１４などを有する。
【００１８】
書き込み制御部１０１１は、元画像をフレームメモリ１０２へ書き込む制御を行う。
境界解析部１０１２は、複数の低解像画像を所定の順番で並べた際の低解像画像間（入力画像間）の境界部分毎に、低解像画像間で画素値の変化が連続となるか否か（画素値の連続性が有るか否か）を判断する。具体的には、境界解析部１０１２は、一方の低解像画像から他方の低解像画像へ画素値が連続的に変化しているか否かを判断する。そして、境界解析部１０１２は、その判断結果を読み出し制御部１０１４に出力する。
読み出し制御部１０１４は、元画像を複数の低解像画像に分割し、該複数の低解像画像を並列的に複数の画像処理部（画像処理部１０３〜１０６）へ出力する。具体的には、読み出し制御部１０１４は、低解像画像毎に、その低解像画像をフレームメモリ１０２から読み出すための読み出し要求をＲＤＭＡＣ１０１３へ出力する。このとき、読み出し制御部１０１４は、元画像を分割して得られる複数の低解像画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する。換言すれば、読み出し制御部１０１４は、元画像が、１つの高解像画像であるか、複数の独立画像が並べられたマルチ構成画像であるかを判断する。本実施例では、読み出し制御部１０１４は、境界解析部１０１２による画素値の連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかを判断する。そして、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの判断結果に基づいて、上記読み出し要求を出力する。読み出し制御部１０１４は、読み出し要求に応じてＲＤＭＡＣ１０１３から並列的に出力された複数の低解像画像を、複数の画像処理部へ出力する。
なお、複数の低解像画像が複数の分割画像である場合、シングル構成画像の画素数は低解像画像よりも多くなるため、シングル構成画像を高解像画像とよんでもよい。
ＲＤＭＡＣ１０１３は、メモリ読み出し制御部１０１４からの低解像画像毎の読み出し要求を調停して、フレームメモリ１０２から複数の低解像画像を並列的に読み出し、読み出し制御部１０１４へ出力する。
【００１９】
本実施例に係る画像処理装置の動作の具体例について以下に詳述する。
図３（Ａ）は、本実施例に係る画像処理装置に入力される画像（元画像）の一例を示す模式図である。
本実施例では、図３（Ａ）に示すように、水平方向３８４０画素、垂直方向２１６０ラインの画像が画像処理装置に入力されるものとする。なお、元画像のサイズはどのようなサイズであってもよい。例えば、元画像は、水平方向の画素数×垂直方向のライン数が１９２０×１０８０や４０９６×２１６０の画像であってもよい。
【００２０】
まず、書き込み制御部１０１１が、元画像をフレームメモリ１０２へ書き込む。
同時に、境界解析部１０１２が、読み出し制御部１０１４にて読み出される低解像画像間（元画像を分割することにより得られる低解像画像間）の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断する。
本実施例では、読み出し制御部１０１４において、元画像が４つの低解像画像に分割されて読み出される。元画像が複数の低解像画像に分割される様子の一例を図３（Ｂ）に示す。図３（Ｂ）の例では、図３（Ａ）で示した元画像が、互いにサイズが等しい４つの低解像画像Ａ１〜Ａ４に分割されている。１つの低解像画像は、水平方向１９２０画素、垂直方向１０８０ラインの画像である。そのため、境界解析部１０１２では、低解像画像Ａ１とＡ２の境界部分、低解像画像Ａ１とＡ３の境界部分、低解像画像Ａ２とＡ４の境界部分、低解像画像Ａ３とＡ４の境界部分の４つの境界部分について、上記連続性の判断が行われる。
【００２１】
境界解析部１０１２は、例えば、低解像画像Ａ１と低解像画像Ａ２の境界部分の画素値の連続性を判断する場合に、低解像画像Ａ１と低解像画像Ａ２の境界から所定の範囲内の低解像画像Ａ１と低解像画像Ａ２とを比較する。そして、境界解析部１０１２は、上記所定の範囲内の低解像画像Ａ１と低解像画像Ａ２とが類似している場合に、低解像画像Ａ１と低解像画像Ａ２の境界部分において画素値の連続性が有ると判断する。具体的には、境界解析部１０１２は、上記所定の範囲内にある低解像画像Ａ１の画素値の代表値と、上記所定の範囲内にある低解像画像Ａ２の画素値の代表値との差分が所定の閾値以下の場合に、上記所定の範囲内の低解像画像Ａ１とＡ２が類似していると判断する。上記所定の範囲は、例えば、低解像画像間の境界からの距離がＮ（Ｎ＝１，５，１０など）画素の領域である。
【００２２】
なお、連続性の判断の方法は、上記方法に限らない。
例えば、上記所定の範囲内にある一方の低解像画像の複数の画素値と、上記所定の範囲内にある他方の低解像画像の複数の画素値とがそれぞれ比較されてもよい。具体的には、上記所定の範囲内にある一方の低解像画像の複数の画素値と、上記所定の範囲内にある他方の低解像画像の複数の画素値との差分がそれぞれ算出されてもよい。そして、各差分（または差分の代表値）が所定の閾値以下の場合に、上記所定の範囲内の２つの分割画像が互いに類似していると判断されてもよい。
【００２３】
そして、読み出し制御部１０１４が、上記連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像か否か（元画像がシングル構成画像か否か）を判断する。本実施例では、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があると判断された場合に、複数の低解像画像が複数の分割画像であると判断する。
なお、複数の低解像画像が複数の分割画像か否かの判断方法はこれに限らない。例えば、全ての境界部分に対する、画素値の連続性があると判断された境界部分の割合が所定値以上の場合に、複数の低解像画像が複数の分割画像であると判断してもよい。画素値の連続性があると判断された境界部分が１つでもある場合に、複数の低解像画像が複数の分割画像であると判断してもよい。
また、元画像を分割して得られる複数の低解像画像が複数の分割画像か否か、元画像が上記シングル構成画像か否か、などを示す画像情報が外部から取得される場合には、上記連続性の判断を行わなくてもよい。そのような場合には、上記画像情報を用いて、複数の低解像画像が複数の分割画像か否か（元画像が上記シングル構成画像か否か）が判断されてもよい。画像情報は、例えば、画像にメタデータとして付加されていてもよい。
【００２４】
次に、読み出し制御部１０１４が、複数の低解像画像が複数の分割画像か否かの判断結果を基に、フレームメモリ１０２から低解像画像を読み出す。
読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を、図４（Ａ）のフローチャートに示す。
まず、境界解析部１０１２が、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する（Ｓ１０１）。
そして、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があるか
否かを判断する（Ｓ１０２）。
全ての境界部分について画素値の連続性があると判断された場合（Ｓ１０２：ＹＥＳ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像である（元画像が１つのシングル構成画像である）と判断し、Ｓ１０３へ処理が進められる。Ｓ１０３では、読み出し制御部１０１４が、各低解像画像の端部に、上記シングル構成画像においてその低解像画像に隣接する低解像画像から生成されたのりしろ画像を付加する。具体的には、のりしろ画像が付加された複数の低解像画像がフレームメモリ１０２から読み出される。
画素値の連続性がないと判断された境界部分がある場合（Ｓ１０２：ＮＯ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像でない（複数の低解像画像が複数の独立画像である；元画像がマルチ構成画像である）と判断する。そして、読み出し制御部１０１４は、複数の低解像画像をそのまま読み出す。即ち、上記のりしろ画像の付加を行わずに、のりしろ画像が付加されていない複数の低解像画像が読み出される。
読み出された複数（４つ）の低解像画像（のりしろ画像が付加されている低解像画像／のりしろ画像が付加されていない低解像画像）は、４つの画像処理部１０３〜１０６へそれぞれ出力される。
【００２５】
そして、画像処理部１０３〜１０６が、入力処理部１０１から出力される４つの低解像画像（のりしろ画像が付加されている低解像画像／のりしろ画像が付加されていない低解像画像）をそれぞれ並列的に処理して出力する。
即ち、画像処理部１０３〜１０６では、複数の低解像画像が複数の分割画像であると判断された場合に、のりしろ画像が付加された複数の低解像画像に画像処理が施される。また、複数の低解像画像が複数の独立画像であると判断された場合に、他の低解像画像から生成されたのりしろ画像が付加されていない複数の低解像画像に画像処理が施される。具体的には、のりしろ画像が付加されていない複数の低解像画像に画像処理が施される。
なお、低解像画像にのりしろ画像が付加されている場合には、低解像画像の領域に対してのみ画像処理が施されてもよいし、低解像画像とのりしろ画像の両方の領域に対して画像処理が施されてもよい。低解像画像の領域に対してのみ画像処理を施す構成とすれば、画像処理の処理負荷を低減することができる。
【００２６】
次に、合成部１０７が、画像処理部１０３〜１０６から出力される複数の低解像画像をフレームメモリ１０２へ書き込む。そして、合成部１０７は、当該書き込んだ低解像画像を読み出して、複数の低解像画像が並べられた合成画像（本実施例では水平方向３８４０画素、垂直方向２１６０ラインの画像）として表示部１０８へ出力する。それにより、元画像が、画像処理が施されて表示されることとなる。なお、低解像画像にのりしろ画像が付加されている場合には、合成部１０７は、付加されているのりしろ画像を削除して低解像画像を読み出す。
なお、本実施例では、複数の低解像画像を所定の順番で並べたものを合成画像とするが、合成画像はこれに限らない。複数の低解像画像が複数の分割画像である場合に、複数の低解像画像を所定の順番（正しいシングル構成画像を形成する順番）で並べたものが合成画像とされればよい。複数の低解像画像が複数の独立画像である場合には、複数の低解像画像を所定の順番で並べたものが合成画像とされてもよいし、複数の低解像画像をランダムな順番で並べたものが合成画像とされてもよい。
【００２７】
図３（Ｃ）は、低解像画像Ａ１に対しのりしろ画像が付加される様子を示す模式図である。
図３（Ｃ）の例では、水平方向１９２０画素、垂直方向１０８０ラインの低解像画像Ａ１をフレームメモリ１０２から読み出す際に、画像Ａ２−１、画像Ａ３−１、画像Ａ４−１がのりしろ画像として付加される。画像Ａ２−１は、低解像画像Ａ１の右側に付加される、水平方向α画素、垂直方向１０８０ラインののりしろ画像である。画像Ａ３−１は、低解像画像Ａ１の下側に付加される、水平方向１９２０画素、垂直方向βラインののりし
ろ画像である。画像Ａ４−１は、低解像画像Ａ１の右下側に付加される、水平方向α画素、垂直方向βラインののりしろ画像である。α，βの値は、後段の画像処理部で低解像画像の領域を処理（例えば、空間フィルタ処理）する際に用いられる（参照される）画素が含まれるように決定される。例えば、画像処理部で実行される処理が空間フィルタ処理である場合には、α，βの値は、該空間フィルタのサイズに基づいて決定される。α，βの値は、予め読み出し制御部１０１４内に設定されていていてもよいし、外部から（ユーザやメーカ等により）入力されてもよい。空間フィルタ処理では、注目画素とその近傍の画素の画素値に画素位置に応じた重み付けがされ、それら（重み付けされた画素値）の和が、注目画素の新しい画素値として算出される。空間フィルタ処理としては、画像内のノイズを除去する平滑化フィルタ処理や、画像内のエッジを強調するエッジ強調処理などが挙げられる。
低解像画像Ａ２〜Ａ４をフレームメモリ１０２から読み出す際にも、同様に、隣接する低解像画像から生成されたのりしろ画像が付加される。
【００２８】
なお、のりしろ画像の画素値は、低解像画像Ａ１に隣接する低解像画像Ａ２〜Ａ４の少なくとも一部の領域の画素値を用いて決定される。例えば、画像Ａ２−１の画素値は、低解像画像Ａ２の画素値を用いて決定される。画像Ａ３−１の画素値は、低解像画像Ａ３の画素値を用いて決定される。画像Ａ４−１の画素値は、低解像画像Ａ４の画素値を用いて決定される。具体的には、のりしろ画像の画素毎に、その画素に対応する他の低解像画像の画素の値が画素値とされる。例えば、低解像画像Ａ２の低解像画像Ａ１と隣接する水平方向α画素、垂直方向１０８０ラインの領域の画像が画像Ａ２−１とされる。
但し、のりしろ画像の画素値の決定方法はこれに限らない。
低解像画像に隣接する画素（隣接する低解像画像の画素）の値のみを用いてのりしろ画像の画素値が決定されてもよい。例えば、ライン毎（行毎）に、そのラインにおいて低解像画像Ａ１と隣接する低解像画像Ａ２の画素の値が、該ラインの画像Ａ２−１の各画素の値とされてもよい。列毎に、その列において低解像画像Ａ１と隣接する低解像画像Ａ３の画素の値が、該列の画像Ａ３−１の各画素の値とされてもよい。そして、低解像画像Ａ１と隣接する低解像画像Ａ４の画素の値が、画像Ａ４−１の各画素の値とされてもよい。
また、のりしろ画像毎に、そののりしろ画像に対応する低解像画像の画素値の代表値（平均値、最頻値、最大値、最小値など）が、該のりしろ画像の各画素値とされてもよい。例えば、低解像画像Ａ２の低解像画像Ａ１と隣接する水平方向α画素、垂直方向１０８０ラインの領域の画素値の代表値（平均値、最頻値、最大値、最小値など）が画像Ａ２−１の各画素の値とされてもよい。
【００２９】
複数の低解像画像が複数の分割画像である場合（元画像が１つのシングル構成画像である場合）、のりしろ画像を付加しなければ、画像処理部での処理において、本来あるべき画素（他の低解像画像の画素）の値が参照されず、適切な処理結果を得ることができない。本実施例では、複数の低解像画像が複数の分割画像である場合に、各低解像画像の端部に、その低解像画像に隣接する低解像画像から生成されたのりしろ画像が付加される。そのため、画像処理部での処理において、本来あるべき画素の値（またはそれに準じた値）が参照され、適切な処理結果を得ることができる。
【００３０】
図３（Ｄ）は、４つの独立画像Ｂ，Ｃ，Ｄ，Ｅを含むマルチ構成画像の一例を示す模式図である。独立画像Ｂ，Ｃ，Ｄ，Ｅは、それぞれ、低解像画像Ａ１，Ａ２，Ａ３，Ａ４に対応する。また、独立画像Ｂ，Ｃ，Ｄ，Ｅは、それぞれ、独立した画像であり、互いに関連性は無い。このような独立画像に対して、図３（Ｃ）と同様にのりしろ画像を付加すると、独立画像に対して全く関連性の無い画像がのりしろ画像として付加されてしまう。例えば、図３（Ｅ）に示すように、独立画像Ｂの端部に、全く関連性の無い独立画像Ｃ，Ｄ，Ｅ（独立画像Ｂに隣接する独立画像）から生成されたのりしろ画像Ｃ−１，Ｄ−１，Ｅ−１が付加されてしまう。その結果、１つの独立画像に対する処理において、全く関連性
の無い独立画像の画素値が参照されてしまう。そのため、境界部分において適切な処理結果を得ることができない（境界部分において画像の不整合が生じてしまう）。本実施例では、複数の低解像画像が複数の独立画像である場合に、低解像画像へのりしろ画像の付加は行われない。そのため、上記不整合が発生することなく、適切な処理結果を得ることができる。
【００３１】
以上述べたように、本実施例によれば、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかが判断される。そして、複数の低解像画像が複数の分割画像であると判断された場合に、各低解像画像に、その低解像画像に隣接する低解像画像から生成されたのりしろ画像が付加される。そして、該のりしろ画像が付加された低解像画像に画像処理が施される。また、複数の低解像画像が複数の独立画像であると判断された場合に、他の低解像画像から生成されるのりしろ画像が付加されていない複数の低解像画像に画像処理が施される。具体的には、のりしろ画像が付加されていない複数の低解像画像に画像処理が施される。
その結果、複数の低解像画像が複数の分割画像である場合には、１つの低解像画像に対する処理において、該低解像画像に隣接する低解像画像の画素値を参照することができる。また、複数の低解像画像が複数の独立画像である場合には、１つの低解像画像に対する処理において、該低解像画像と関連性の無い低解像画像の画素値が参照されることを抑制することができる。そして、複数の低解像画像に画像処理を施し、該画像処理が施された複数の低解像画像が並べられた合成画像を生成する際に、適切な画像処理結果を得ることができる。
【００３２】
なお、本実施例では、読み出し制御部が複数の低解像画像が複数の分割画像か否かを判断する構成としたが、そのような判断は他の機能部が行ってもよい。例えば、そのような判断は境界解析部で行われてもよい。画像処理装置にそのような判断を行う機能部が別途設けられていてもよい。
【００３３】
なお、本実施例では、複数の低解像画像が複数の独立画像であると判断された場合に、低解像画像にのりしろ画像を付加しない構成としたが、複数の低解像画像が複数の独立画像であると判断された場合にものりしろ画像を付加してもよい。
図４（Ｂ）は、読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの他の例を示す図である。
図４（Ｂ）のＳ２０１，Ｓ２０２，Ｓ２０４の処理は、図４（Ａ）のＳ１０１，Ｓ１０２，Ｓ１０３の処理と同様である。
画素値の連続性がないと判断された境界部分がある場合には（Ｓ２０２：ＮＯ）、Ｓ２０３において、各低解像画像の端部にのりしろ画像が付加される。具体的には、のりしろ画像が付加された複数の低解像画像がフレームメモリ１０２から読み出される。但し、Ｓ２０３で付加されるのりしろ画像は、自身（該のりしろ画像の付加対象である低解像画像）から生成された画像である。即ち、Ｓ２０３では、各低解像画像の端部に、その低解像画像から生成されたのりしろ画像が付加される。
【００３４】
図５（Ａ），５（Ｂ）は、Ｓ２０３で低解像画像（独立画像）にのりしろ画像が付加される様子の一例を示した模式図である。図５（Ａ），５（Ｂ）は、図３（Ｄ）の独立画像Ｂの１ライン目に対して水平方向１６画素ののりしろ画像が付加される様子を示している。
図５（Ａ）は、低解像画像の縁に位置する画素の値のみを用いて、該低解像画像に付加するのりしろ画像の画素値を決定した場合の例である。具体的には、図５（Ａ）では、独立画像Ｂの１ライン目の最も右側の画素の値（Ｂ１９１９）が、独立画像Ｂの右側に付加されるのりしろ画像の１ライン目の各画素の値とされている。
図５（Ｂ）は、低解像画像の縁部の画像（縁から所定の範囲内の画像）を、該縁に対し
て反転させることにより、該低解像画像に付加するのりしろ画像を生成する場合の例である。図５（Ｂ）では、独立画像Ｂの１ライン目の右側縁部の画像である１６画素を、独立画像Ｂの右側縁を基準として反転させた画像が、独立画像Ｂの１ライン目の右側に付加されるのりしろ画像とされている。
【００３５】
このように、複数の低解像画像が複数の分割画像であるか否かに拘わらず、各低解像画像にのりしろ画像が付加されることで、入力処理部１０１以降の処理で、処理する画像の大きさを統一することが可能となる。また、複数の低解像画像が複数の独立画像である場合、低解像画像には、該低解像画像から生成されたのりしろ画像が付加される。即ち、複数の低解像画像が複数の独立画像である場合、低解像画像には、該低解像画像と関連性のある画像がのりしろ画像として付加される。そのため、複数の低解像画像が複数の独立画像である場合に、のりしろ画像を付加したとしても、上述したような不整合が発生することなく、適切な処理結果を得ることができる。
【００３６】
＜実施例２＞
実施例１では、元画像を複数の低解像画像に分割し、複数の低解像画像を、画像処理を施して合成する構成について説明した。本実施例では、複数の低解像画像が入力され、入力された複数の低解像画像を、画像処理を施して合成する構成について説明する。
【００３７】
図６は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。
図６に示すように、本実施例に係る画像処理システムは、画像処理装置１０と画像生成装置２０を有する。
画像処理装置１０は、入力された複数の低解像画像を、画像処理を施して合成することにより、１つの合成画像を生成する。そして、画像処理装置１０は、合成画像を表示部に表示する。
画像生成装置２０は、１つの元画像を複数の低解像画像に分割し、該低解像画像を画像処理装置１０へ出力する。
【００３８】
図７は、本実施例に係る画像生成装置２０の機能構成の一例を示すブロック図である。図７に示すように、画像生成装置２０は、ホストＣＰＵ２０１、高速バス２０２、中速バス２０３、システムＲＯＭ２０４、ブリッジ２０５，２０７を有する。また、画像生成装置２０は、ＤＲＡＭ２０６、Ｉ／Ｏコントローラ２０８、ＤＶＤ装置２０９、ＨＤＤ装置２１０、キーボード２１１、マウス２１２、ＲＴＣ２１３、オーディオサブシステム２１４、ディスプレイコントローラ２１５〜２１８を有する。
【００３９】
ホストＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１は、画像生成装置全体を制御する。
高速バス２０２は、アドレスバス、データバス、コントロールバス等を備えるＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）ｅｘｐｒｅｓｓ等である。
ブリッジ２０５は、ホストＣＰＵ２０１と高速バス２０２との間のインタフェースを行なう。
ＤＲＡＭ（ＤｙｎａｍｉｃＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）２０６は、メインメモリとして使用される。具体的には、ＤＲＡＭ２０６は、ホストＣＰＵ２０１により実行される制御プログラムを記憶している。また、ＤＲＡＭ２０６は、ホストＣＰＵ２０１による制御処理時にワーク領域として使われる。
中速バス２０３は、ＳｅｒｉａｌＡＴＡ（ＡＴＡｔｔａｃｈｍｅｎｔ）等である。
ブリッジ２０７は、高速バス２０２と中速バス２０３とを接続する。
システムＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）２０４は、装置全体の初期化処理を行なうプログラム等を記憶する。
【００４０】
ディスプレイコントローラ２１５〜２１８は、画像を生成する。具体的には、１つのディスプレイコントローラは、最大で水平方向１９２０画素、垂直方向１０８０ラインの低解像画像を生成することができる。本実施例では、４つのディスプレイコントローラを用いて、最大で水平方向３８４０画素、垂直方向２１６０ラインの元画像を生成することができる。具体的には、水平方向３８４０画素、垂直方向２１６０ラインの元画像を分割して得られる４つの低解像画像を生成することができる。
本実施例では、高速バス２０２を介してホストＣＰＵ２０１からディスプレイコントローラ２１５〜２１８へ表示情報（ディスプレイコントローラで生成される低解像画像のサイズ、元画像内での領域など）がセットされる。ディスプレイコントローラ２１５〜２１８からは、図３（Ｂ）に示したような４つの分割画像（低解像画像Ａ１〜Ａ４）、または、図３（Ｄ）に示したように４つの独立画像が出力される。
【００４１】
Ｉ／Ｏコントローラ２０８は、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｄｉｓｃ）装置２０９およびＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）装置２１０のためのディスク・インタフェースを有する。また、Ｉ／Ｏコントローラ２０８は、外部装置との通信を行なうために用いられるシリアル・インタフェース、文字、数字等の入力を行なうためのキーボード２１１や、ポインティングデバイスであるマウス２１２とのインタフェース等を有する。
ＲＴＣ２１３は、リアルタイムクロックであり、クロックを計数して時間を計時するタイマ機能を有する。
オーディオサブシステム２１４は、マイクからの音声信号を入力して中速バス２０３に出力したり、あるいは中速バス２０３からの信号に基づいてスピーカに可聴信号を出力する。
【００４２】
ユーザは、一般に、画像処理装置１０が有する表示部（画像表示装置に接続された表示部）に表示される各種情報を確認しながら、画像生成装置２０を操作する。
具体的には、ＤＶＤ装置２０９、ＨＤＤ装置２１０、キーボード２１１、マウス２１２等から供給される画像（文字、写真、ＴＶ番組などの画像）が、ディスプレイコントローラ２１５〜２１８を介して画像生成装置２０から画像処理装置１０へ出力される。また、システムＲＯＭ２０４やメインメモリ（ＤＲＡＭ）２０６に格納されたユーザのシステム操作に係る操作情報等も、ディスプレイコントローラ２１５〜２１８を介して画像生成装置２０から画像処理装置１０へ出力される。
そして、ユーザは、画像処理装置１０が有する表示部の表示内容を確認しながら各種情報の編集や、システムに対する指示操作を行なう。
【００４３】
図８は、本実施例に係る画像処理装置１０の機能構成の一例を示したブロック図である。図８に示すように、画像処理装置１０は、入力処理部１１１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
入力処理部１１１は、画像生成装置２０から出力された複数の低解像画像を、フレームメモリ１０２へ書き込む。そして、入力処理部１１１は、フレームメモリ１０２に書き込んだ複数の低解像画像を読み出し、画像処理部１０３〜１０６へ出力する。入力処理部１１１の詳細については後述する。
フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８は、実施例１の図１で示したものと同じものである。
【００４４】
図９は、入力処理部１１１の機能構成の一例を示すブロック図である。図９に示すように、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ（Ｗｒｉｔｅ Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）１１１５、境界解析部１１１２、ＲＤＭＡＣ１０１３、読み出し制御部１０１４などを有する。
書き込み制御部１１１１は、入力された複数の低解像画像をフレームメモリ１０２へ書き込む制御を行う。
ＷＤＭＡＣ１１１５は、書き込み制御部１１１１からの４系統の書き込み要求を調停して、フレームメモリ１０２への複数の低解像画像の書き込みを制御する。
境界解析部１１１２は、入力された複数の低解像画像の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断し、その判断結果を読み出し制御部１０１４に出力する。
ＲＤＭＡＣ１０１３、読み出し制御部１０１４は、実施例１の図２で示したものと同じものである。
【００４５】
本実施例に係る画像処理装置の動作の具体例について以下に詳述する。
まず、書き込み制御部１１１１が、画像生成装置２０から出力される４つの低解像画像をＷＤＭＡＣ１１１５を介してフレームメモリ１０２へ書き込む。
次に、境界解析部１１１２が、実施例１と同様に、画像生成装置２０から出力される４つの低解像画像の境界部分毎に、その境界部分において画素値の連続性が有るか否かを判断する。
そして、読み出し制御部１０１４は、実施例１と同様に、上記連続性の判断結果に基づいて、複数の低解像画像が複数の分割画像か否かを判断する。
次に、読み出し制御部１０１４が、実施例１と同様に（図４（Ａ）または図４（Ｂ）に示す処理フローに従って）、複数の低解像画像が複数の分割画像か否かの判断結果を基に、フレームメモリ１０２から低解像画像を読み出す。読み出された複数の低解像画像は、実施例１と同様に、４つの画像処理部１０３〜１０６へそれぞれ出力される。
そして、画像処理部１０３〜１０６が、実施例１と同様に、入力処理部１０１から出力される４つの低解像画像をそれぞれ並列的に処理して出力する。
次に、合成部１０７が、実施例１と同様に、画像処理部１０３〜１０６から出力される複数の低解像画像をフレームメモリ１０２へ書き込む。そして、合成部１０７は、実施例１と同様に、当該書き込んだ低解像画像を読み出して、複数の低解像画像が並べられた合成画像として表示部１０８へ出力する。それにより、元画像が、画像処理が施されて表示されることとなる。
【００４６】
以上述べたように、本実施例によれば、画像処理装置に複数の低解像画像が入力される場合にも、実施例１と同様に複数の低解像画像に画像処理が施される。そして、画像処理が施された複数の低解像画像が並べられた合成画像が生成され、表示される。その結果、実施例１と同様の効果を得ることができる。
【００４７】
なお、複数の低解像画像に含まれるフレーム同期信号（ＶＳ信号；ＶｅｒｔｉｃａｌＳｙｎｃｒｏｎｏｕｓ信号）を更に用いることにより、複数の低解像画像が複数の分割画像か否かをより精度良く判断することができる。
【００４８】
図１０は、本実施例に係る入力処理部１１１の機能構成の他の例を示すブロック図である。図１０の例では、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ１１１５、境界解析部１１１２、ＲＤＭＡＣ１０１３、読み出し制御部１０１４、フレーム同期検出部１１１６などを有する。
書き込み制御部１１１１、ＷＤＭＡＣ１１１５、ＲＤＭＡＣ１０１３は、図９で示したものと同じである。
【００４９】
フレーム同期検出部１１１６は、複数の低解像画像のフレーム同期信号が同期しているか否かを判断し、判断結果を境界解析部１１１２へ出力する。具体的には、フレーム同期検出部１１１６は、画像生成装置２０から出力された４系統の低解像画像に含まれるＶＳ信号を解析し（図１１（Ａ）のＳ３０１）、全てのＶＳ信号が互いに同期しているか否か
判断を判断する。そして、４つの低解像画像のＶＳ信号が同期していると判断した場合には（Ｓ３０２：ＹＥＳ）、フレーム同期検出部１１１６は、判断結果としてＳｙｎｃＦｌａｇ信号“１”を境界解析部１１１２に出力する（Ｓ３０３）。また、４つの低解像画像のＶＳ信号が同期していないと判断した場合には（Ｓ３０２：ＮＯ）、フレーム同期検出部１１１６は、ＳｙｎｃＦｌａｇ信号“０”を境界解析部１１１２に出力する（Ｓ３０４）。図１１（Ａ）は、フレーム同期検出部１１１６の動作の一例を示すフローチャートである。
【００５０】
境界解析部１１１２は、図９の境界解析部１１１２と同様に、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する。そして、境界解析部１１１２は、画素値の連続性の判断結果と、フレーム同期検出部１１１６からのＳｙｎｃＦｌａｇ信号とを、読み出し制御部１０１４へ出力する。
読み出し制御部１０１４は、画素値の連続性の判断結果と、フレーム同期検出部１１１６からのＳｙｎｃＦｌａｇ信号の状態とから、複数の低解像画像（画像生成装置２０から出力される４系統の低解像画像）が複数の分割画像か否かを判断する。
図１１（Ｂ）は、図１０の読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を示すフローチャートである。
まず、境界解析部１１１２が、複数の低解像画像の境界部分毎に、画素値の連続性が有るか否かを判断する（Ｓ４０１）。
そして、読み出し制御部１０１４は、全ての境界部分について画素値の連続性があるか否かを判断する（Ｓ４０２）。
全ての境界部分について画素値の連続性があると判断された場合（Ｓ４０２：ＹＥＳ）、読み出し制御部１０１４は、ＳｙｎｃＦｌａｇ信号が“１”か否かを判断する（Ｓ４０３）。
ＳｙｎｃＦｌａｇ信号が“１”である場合（Ｓ４０３：ＹＥＳ）、読み出し制御部１０１４は、複数の低解像画像が複数の分割画像であると判断し、複数の低解像画像をのりしろ画像を付加して読み出す（Ｓ４０４）。
ＳｙｎｃＦｌａｇ信号が“０”である場合（Ｓ４０３：ＮＯ）、読み出し制御部１０１４は、複数の低解像画像が複数の独立画像であると判断し、複数の低解像画像をのりしろ画像を付加せずにそのまま読み出す。なお、Ｓ４０２において画素値の連続性がないと判断された境界部分がある場合も、同様に、のりしろ画像の付加は行われない。なお、複数の低解像画像が複数の独立画像であると判断された場合に、図４（Ｂ）のように、各低解像画像に、その低解像画像から生成されたのりしろ画像が付加されてもよい。
【００５１】
複数の低解像画像が複数の分割画像である場合には、複数の低解像画像のフレーム同期信号は特定の位相関係を有する（同期する）。そのため、複数の低解像画像のフレーム同期信号が同期している場合には、該複数の低解像画像が複数の分割画像である可能性が高い。また、複数の低解像画像のフレーム同期信号が同期していない場合には、該複数の低解像画像が複数の独立画像である可能性が高い。
上述した構成によれば、複数の低解像画像のフレーム同期信号が同期しているか否かが判断される。そして、複数の低解像画像のフレーム同期信号が同期していない場合には、複数の低解像画像が複数の独立画像であると判断される。
それにより、画素値の連続性の判断結果のみに基づいて複数の低解像画像が複数の分割画像か否かを判断するよりも、複数の低解像画像が複数の分割画像か否かをより精度良く判断することができる。例えば、画素値の連続性の判断結果のみに基づいて複数の低解像画像が複数の分割画像であると判断された場合であっても、複数の低解像画像のフレーム同期信号が同期していない場合には、複数の低解像画像が複数の独立画像である可能性が高い。上記構成によれば、そのような場合に複数の低解像画像が複数の独立画像であると判断することができる。
なお、このような構成（フレーム同期信号を用いた判断）は、実施例１の構成にも適用
できる。
【００５２】
＜実施例３＞
実施例１，２では、画像処理装置が複数の低解像画像の境界部分毎に画素値の連続性が有るか否かを判断し、その判断結果に従って境界部分の処理（のりしろ画像の付加）を制御する例について説明した。
本実施例では、画像処理装置が、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す情報を取得し、該取得した情報に従って境界部分の処理（のりしろ画像の付加）を制御する例について説明する。
【００５３】
本実施例に係る画像処理システムは、図６と同様に、画像処理装置１０と画像生成装置２０を有する。画像生成装置２０は、実施例２（図７）と同様の構成を有する。本実施例では、Ｉ／Ｏコントローラ２０８からのシリアル・インタフェースが画像処理装置１０に接続される。
【００５４】
図１２は、本実施例に係る画像処理装置１０の機能構成の一例を示したブロック図である。図１２に示すように、画像処理装置１０は、入力処理部１２１、フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８などを有する。
入力処理部１２１は、画像生成装置２０から出力された複数の低解像画像を、フレームメモリ１０２へ書き込む。そして、入力処理部１２１は、フレームメモリ１０２に書き込んだ複数の低解像画像を読み出し、画像処理部１０３〜１０６へ出力する。更に、入力処理部１２１は、画像生成装置２０とシリアル・インタフェースを介して通信を行う機能を有する。なお、外部（本実施例では画像生成装置２０）との通信方法は、シリアル・インタフェースを用いた方法でなくてもよい。
フレームメモリ１０２、画像処理部１０３〜１０６、合成部１０７、表示部１０８は、実施例１での図１で示したものと同じものである。
【００５５】
図１３は、入力処理部１２１の機能構成の一例を示すブロック図である。図１３示すように、入力処理部１１１は、書き込み制御部１１１１、ＷＤＭＡＣ１１１５、読み出し制御部１０１４、ＲＤＭＡＣ１０１３、通信制御部１２１７などを有する。
書き込み制御部１１１１、ＷＤＭＡＣ１１１５、読み出し制御部１０１４、ＲＤＭＡＣ１０１３は、図９で示したものと同じものである。
通信制御部１２１７は、シリアル・インタフェースを介して画像生成装置２０と通信を行う。
本実施例では、通信制御部１２１７は、画像生成装置２０から、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す情報（画像情報）を取得する。具体的には、通信制御部１２１７は、画像生成装置２０から、画像情報として、境界部分毎の画素値の連続性の有無を示す境界部分情報を取得する。本実施例では、全ての境界部分について画素値の連続性が有る場合に複数の低解像画像を複数の分割画像とする。そのため、境界部分情報が全ての境界部分について画素値の連続性が有ることを示す場合には、該境界部分情報は複数の低解像画像が複数の分割画像であることを示す情報であるといえる。
【００５６】
本実施例に係る画像処理システムの動作の一例を以下に詳述する。なお、以下で述べる動作以外の動作は、実施例１，２と同様である。
まず、画像生成装置２０において、ホストＣＰＵ２０１が高速バス２０２を介してディスプレイコントローラ２１５〜２１８へ表示情報をセットする。また、ホストＣＰＵ２０１は、中速バス２０３を介してＩ／Ｏコントローラ２０８へシリアル通信の設定を行う。具体的には、ホストＣＰＵ２０１は、Ｉ／Ｏコントローラ２０８へ、ディスプレイコントローラ２１５〜２１８から出力される複数（４つ）の低解像画像が複数の分割画像である
か複数の独立画像であるかの少なくともいずれかを示す画像情報を送る。
Ｉ／Ｏコントローラ２０８は、ホストＣＰＵ２０１から送られた画像情報（本実施例では境界部分情報）を、シリアル・インタフェースを介して画像処理装置１０へ送る。
通信制御部１２１７は、画像生成装置２０から送られた境界部分情報を取得し、読み出し制御部１０１４へ出力する。
読み出し制御部１０１４は、通信制御部１２１７から出力された境界部分情報を用いて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかを判断する。そして、読み出し制御部１０１４は、その判断結果に従って、フレームメモリ１０２から複数の低解像画像を読み出す。
【００５７】
図１４（Ａ），１４（Ｂ）は、図１３の読み出し制御部１０１４による低解像画像の読み出しに関する処理の流れの一例を示すフローチャートである。
まず、図１４（Ａ），１４（Ｂ）のＳ５０１，Ｓ６０１において、読み出し制御部１０１４は、通信制御部１２１７を介して、境界部分情報を取得する。
そして、Ｓ５０２，Ｓ６０２において、読み出し制御部１０１４が、取得した境界部分情報から、全ての境界部分について画素値の連続性があるか否かを判断する。
Ｓ５０３，Ｓ６０３，Ｓ６０４の処理は、それぞれ、Ｓ１０３，Ｓ２０３，Ｓ２０４の処理と同様のため、その説明は割愛する。
【００５８】
以上述べたように、本実施例によれば、画像処理装置に、外部から、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかの少なくともいずれかを示す画像情報が入力される。そして、該画像情報を用いて、複数の低解像画像が複数の分割画像であるか複数の独立画像であるかが判断される。それにより、実施例１，２で述べた連続性の判断などを省略することができ、画像処理装置の処理負荷を軽減することができる。
なお、本実施例では、画像情報として、境界部分の画素値の連続性を示す境界部分情報が取得されるものとしたが、画像情報はこれに限らない。画像情報は、画像処理装置に入力される複数の低解像画像が複数の分割画像か否かを直接示す情報であってもよい。また、実施例１のように、１つの画像が入力される場合には、画像情報は、元画像がシングル構成画像かマルチ構成画像かを示す情報であってもよい。
なお、本実施例では画像情報が画像生成装置から画像処理装置に入力されるものとしたが、これに限らない。画像情報は、画像生成装置とは異なる装置から入力されてもよいし、ユーザによって入力されてもよい。
【符号の説明】
【００５９】
１０ 画像処理装置
１０１，１１１，１２１ 入力処理部
１０３〜１０６ 画像処理部
１０７ 合成部
１０１４ 読み出し制御部
【特許請求の範囲】
【請求項１】
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断手段と、
前記判断手段で前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加手段と、
前記複数の入力画像に画像処理を施す画像処理手段と、
前記画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、
を有し、
前記画像処理手段は、
前記判断手段で前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする画像処理装置。
【請求項２】
前記判断手段は、前記複数の入力画像を所定の順番で並べた際の入力画像間の境界部分毎に、入力画像間で画素値の変化が連続となるか否かを判断し、その判断結果に基づいて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像処理手段は、前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、のりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記付加手段は、前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、各入力画像の端部に、その入力画像から生成されたのりしろ画像を付加し、
前記画像処理手段は、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施す
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項５】
前記判断手段は、
前記複数の入力画像のフレーム同期信号が同期しているか否かを判断し、
前記複数の入力画像のフレーム同期信号が同期していない場合には、前記複数の入力画像が複数の独立画像であると判断する
ことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
入力された画像を分割することにより前記複数の入力画像を生成する生成手段を更に有し、
前記判断手段は、前記生成手段で生成された前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断する
ことを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを示す情報を取得する取得手段を更に有し、
前記判断手段は、前記取得手段で取得された情報を用いて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断する
ことを特徴とする請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項８】
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断ステップと、
前記判断ステップで前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加ステップと、
前記複数の入力画像に画像処理を施す画像処理ステップと、
前記画像処理ステップで画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成ステップと、
を有し、
前記画像処理ステップでは、
前記判断ステップで前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理が施され、
前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理が施される
ことを特徴とする画像処理装置の制御方法。
【請求項９】
前記判断ステップでは、前記複数の入力画像を所定の順番で並べた際の入力画像間の境界部分毎に、入力画像間で画素値の変化が連続となるか否かが判断され、その判断結果に基づいて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断されることを特徴とする請求項８に記載の画像処理装置の制御方法。
【請求項１０】
前記画像処理ステップでは、前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、のりしろ画像が付加されていない複数の入力画像に画像処理が施される
ことを特徴とする請求項８または９に記載の画像処理装置の制御方法。
【請求項１１】
前記付加ステップでは、前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、各入力画像の端部に、その入力画像から生成されたのりしろ画像が付加され、
前記画像処理ステップでは、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理が施される
ことを特徴とする請求項８または９に記載の画像処理装置の制御方法。
【請求項１２】
前記判断ステップでは、
前記複数の入力画像のフレーム同期信号が同期しているか否かが判断され、
前記複数の入力画像のフレーム同期信号が同期していない場合には、前記複数の入力画像が複数の独立画像であると判断される
ことを特徴とする請求項８〜１１のいずれか１項に記載の画像処理装置の制御方法。
【請求項１３】
入力された画像を分割することにより前記複数の入力画像を生成する生成ステップを更に有し、
前記判断ステップでは、前記生成ステップで生成された前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断される
ことを特徴とする請求項８〜１２のいずれか１項に記載の画像処理装置の制御方法。
【請求項１４】
前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを示す情報を取得する取得ステップを更に有し、
前記判断ステップでは、前記取得ステップで取得された情報を用いて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断される
ことを特徴とする請求項８〜１３のいずれか１項に記載の画像処理装置の制御方法。
【請求項１】
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断手段と、
前記判断手段で前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加手段と、
前記複数の入力画像に画像処理を施す画像処理手段と、
前記画像処理手段で画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成手段と、
を有し、
前記画像処理手段は、
前記判断手段で前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施し、
前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする画像処理装置。
【請求項２】
前記判断手段は、前記複数の入力画像を所定の順番で並べた際の入力画像間の境界部分毎に、入力画像間で画素値の変化が連続となるか否かを判断し、その判断結果に基づいて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像処理手段は、前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、のりしろ画像が付加されていない複数の入力画像に画像処理を施す
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記付加手段は、前記判断手段で前記複数の入力画像が複数の独立画像であると判断された場合に、各入力画像の端部に、その入力画像から生成されたのりしろ画像を付加し、
前記画像処理手段は、前記付加手段でのりしろ画像が付加された複数の入力画像に画像処理を施す
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項５】
前記判断手段は、
前記複数の入力画像のフレーム同期信号が同期しているか否かを判断し、
前記複数の入力画像のフレーム同期信号が同期していない場合には、前記複数の入力画像が複数の独立画像であると判断する
ことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
入力された画像を分割することにより前記複数の入力画像を生成する生成手段を更に有し、
前記判断手段は、前記生成手段で生成された前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断する
ことを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを示す情報を取得する取得手段を更に有し、
前記判断手段は、前記取得手段で取得された情報を用いて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを判断する
ことを特徴とする請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項８】
複数の入力画像が、１つのシングル構成画像を分割して得られた複数の分割画像であるか、それぞれ独立した複数の独立画像であるかを判断する判断ステップと、
前記判断ステップで前記複数の入力画像が前記複数の分割画像であると判断された場合に、各入力画像の端部に、前記シングル構成画像においてその入力画像に隣接する入力画像から生成されたのりしろ画像を付加する付加ステップと、
前記複数の入力画像に画像処理を施す画像処理ステップと、
前記画像処理ステップで画像処理が施された複数の入力画像を合成することにより、１つの合成画像を生成する合成ステップと、
を有し、
前記画像処理ステップでは、
前記判断ステップで前記複数の入力画像が複数の分割画像であると判断された場合に、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理が施され、
前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、他の入力画像から生成されるのりしろ画像が付加されていない複数の入力画像に画像処理が施される
ことを特徴とする画像処理装置の制御方法。
【請求項９】
前記判断ステップでは、前記複数の入力画像を所定の順番で並べた際の入力画像間の境界部分毎に、入力画像間で画素値の変化が連続となるか否かが判断され、その判断結果に基づいて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断されることを特徴とする請求項８に記載の画像処理装置の制御方法。
【請求項１０】
前記画像処理ステップでは、前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、のりしろ画像が付加されていない複数の入力画像に画像処理が施される
ことを特徴とする請求項８または９に記載の画像処理装置の制御方法。
【請求項１１】
前記付加ステップでは、前記判断ステップで前記複数の入力画像が複数の独立画像であると判断された場合に、各入力画像の端部に、その入力画像から生成されたのりしろ画像が付加され、
前記画像処理ステップでは、前記付加ステップでのりしろ画像が付加された複数の入力画像に画像処理が施される
ことを特徴とする請求項８または９に記載の画像処理装置の制御方法。
【請求項１２】
前記判断ステップでは、
前記複数の入力画像のフレーム同期信号が同期しているか否かが判断され、
前記複数の入力画像のフレーム同期信号が同期していない場合には、前記複数の入力画像が複数の独立画像であると判断される
ことを特徴とする請求項８〜１１のいずれか１項に記載の画像処理装置の制御方法。
【請求項１３】
入力された画像を分割することにより前記複数の入力画像を生成する生成ステップを更に有し、
前記判断ステップでは、前記生成ステップで生成された前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断される
ことを特徴とする請求項８〜１２のいずれか１項に記載の画像処理装置の制御方法。
【請求項１４】
前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかを示す情報を取得する取得ステップを更に有し、
前記判断ステップでは、前記取得ステップで取得された情報を用いて、前記複数の入力画像が、複数の分割画像であるか、複数の独立画像であるかが判断される
ことを特徴とする請求項８〜１３のいずれか１項に記載の画像処理装置の制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１３−６５２８３（Ｐ２０１３−６５２８３Ａ）
【公開日】平成２５年４月１１日（２０１３．４．１１）
【国際特許分類】
【出願番号】特願２０１２−１６８６７４（Ｐ２０１２−１６８６７４）
【出願日】平成２４年７月３０日（２０１２．７．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２５年４月１１日（２０１３．４．１１）
【国際特許分類】
【出願日】平成２４年７月３０日（２０１２．７．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]