画像処理装置および方法
【課題】高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を実現することができるようにする。
【解決手段】Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、テーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、テーブルとヒストグラムを更新する更新部と、Nビット深度のインデックス画像を生成するインデックス画像生成部とを備える。本開示は、例えば、画像処理装置に適用することができる。
【解決手段】Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、テーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、テーブルとヒストグラムを更新する更新部と、Nビット深度のインデックス画像を生成するインデックス画像生成部とを備える。本開示は、例えば、画像処理装置に適用することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置および方法に関し、特に、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を可能とすることができるようにした画像処理装置および方法に関する。
【背景技術】
【０００２】
従来、高ビット深度画像の符号化表現については、これまで多数の研究結果が報告されている（例えば、非特許文献１および非特許文献２参照）。
【０００３】
例えば、非特許文献１においては、トーンマッピングを行うことで、低ビット深度画像を作成し、その復号画像と原画像との差分を別の符号化器で符号化する２段構成の符号化方法が提案されている。
【０００４】
また、例えば、非特許文献２においては、トーンマッピングの代わりにLloyd-Max量子化を適用することで、非可逆圧縮時のビットレート低減を実現することが検討されている。
【先行技術文献】
【非特許文献】
【０００５】
【非特許文献１】M.Winken, D.Marpe, etc.，"Bit-depth Scalable Video Coding", Proc. IEEE Intl. Conf. on Image Processing, pp.I-5〜I-7, 2007
【非特許文献２】伊藤、坂東、高村、上倉、八島，"ビット深度変換処理を用いた高ビット深度画像の符号化に関する基礎検討"、2009信学総大，S-5，2009
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、これらの手法の場合、復号画像と原画像との差分のビット数が長くなってしまい、元々の原画像のロスレス表現ができない恐れがあった。
【０００７】
本開示は、このような状況に鑑みて提案されたものであり、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を実現することができるようにすることを目的とする。
【課題を解決するための手段】
【０００８】
本開示の一側面は、Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部とを備える画像処理装置である。
【０００９】
前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新することができる。
【００１０】
前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成することができる。
【００１１】
ビット深度変換の手法を選択する制御部と、Lloyd-Max法による量子化を行うLloyd-Max量子化部とをさらに備え、前記制御部は、前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させることができる。
【００１２】
変数Pの値は2であるようにすることができる。
【００１３】
本開示の一側面は、また、Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する画像処理方法である。
【００１４】
本開示の他の側面は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部とを備える画像処理装置である。
【００１５】
前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元することができる。
【００１６】
前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元することができる。
【００１７】
前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割することができる。
【００１８】
本開示の他の側面は、また、画像処理装置の画像処理方法であって、復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する画像処理方法である。
【００１９】
本開示の一側面においては、Nビット深度の画像の各画素値の出現度数を示すヒストグラムが生成され、生成されたヒストグラムの出現度数が１以上の画素を順番に並べたテーブルが生成され、生成されたテーブルを用いて、ヒストグラム内の値の配置が並び替えられ、生成されたテーブルと、並び替えられたヒストグラムが更新され、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像が生成される。
【００２０】
本開示の他の側面においては、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成されたヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、更新されたテーブルとを用いて、Nビット深度の画像が復元され、Nビット深度のインデックス画像が、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割され、Mビット深度のインデックス画像と、更新されたテーブルとを用いて、Nビット深度の画像が復元される。
【発明の効果】
【００２１】
本開示によれば、画像を処理することができる。特に、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を実現することができる。
【図面の簡単な説明】
【００２２】
【図１】ビット深度変換装置の主な構成例を示すブロック図である。
【図２】１２ビット画像のヒストグラム全体の例を示す図である。
【図３】１２ビット画像のヒストグラムの一部を拡大した例を示す図である。
【図４】ビット深度変換処理の流れの例を説明するフローチャートである。
【図５】高ビット深度画像の画素値の例を示す図である。
【図６】ヒストグラム分布の例を示す図である。
【図７】初期テーブルの例を示す図である。
【図８】ソートされたヒストグラムの例を示す図である。
【図９】H(k)の更新の様子の例を示す図である。
【図１０】T(k)の更新の様子の例を示す図である。
【図１１】ヒストグラムにおけるH(k)=0の位置の配置自由度を説明する図である。
【図１２】ヒストグラムにおけるH(k)=0の位置の配置自由度を説明する図である。
【図１３】インデックス画像を求める様子の例を説明する図である。
【図１４】インデックス画像を求める様子の例を説明する図である。
【図１５】ビット深度逆変換装置の主な構成例を示すブロック図である。
【図１６】ビット深度逆変換処理の流れの例を説明するフローチャートである。
【図１７】ビット深度変換装置の他の構成例を示すブロック図である。
【図１８】ビット深度変換処理の流れの、他の例を説明するフローチャートである。
【図１９】ビット深度逆変換装置の他の構成例を示すブロック図である。
【図２０】ビット深度逆変換処理の流れの、他の例を説明するフローチャートである。
【図２１】入力画像の例を示す図である。
【図２２】ビット深度変換処理結果の例を説明する図である。
【図２３】ビット深度変換処理結果の他の例を説明する図である。
【図２４】上位ビット画像のPSNRと復元画像のPSNRの例を示す図である。
【図２５】医療画像についてテーブルの情報量の例を示す図である。
【図２６】写真画像についてテーブルの情報量の例を示す図である。
【図２７】画像処理装置の主な構成例を示すブロック図である。
【図２８】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２３】
以下、本技術を実施するための形態（以下実施の形態とする）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（ビット深度変換装置）
２．第２の実施の形態（ビット深度逆変換装置）
３．第３の実施の形態（ビット深度変換装置）
４．第４の実施の形態（ビット深度逆変換装置）
５．第５の実施の形態（実験例）
６．第６の実施の形態（画像処理装置）
７．第７の実施の形態（パーソナルコンピュータ）
【００２４】
＜１．第１の実施の形態＞
［ビット深度変換装置］
図１は、ビット深度変換装置の主な構成例を示すブロック図である。図１に示されるビット深度変換装置１００は、高ビット深度の画像（高ビット深度画像）を入力画像として受け付け、その高ビット深度画像をロスレスに（損失無く）表現することができるインデックス画像を生成する画像処理装置である。
【００２５】
より具体的には、ビット深度変換装置１００は、ＮビットのHDR(High Dynamic Range)画像（高ダイナミックレンジ画像）に対して、Ｍビット(N>=M)の上位ビット部分と下位の差分情報に分けた２層の画像表現法を実現する。この手法は、以下の特徴を持つことを条件としている。
【００２６】
（Ａ）画像を２層表現し、１層目だけを用いて画像を復元した場合にも、高いPSNRを持つこと
（Ｂ）２層全ての情報が得られた場合、元のHDR画像を復元できるロスレス表現となっていること
【００２７】
上記の２つの条件を実現するために、ビット深度変換装置１００は、画像のヒストグラムの偏りと画像の疎性に注目する。画像は一般に、ヒストグラムの頻度に偏りをもっており、かつ、2N種類の輝度値の全てを使い切っているわけではない。図２は、１２ビット深度の画像に対してヒストグラムを作成した例である。図２はヒストグラム全体の図である。図３は、図２の一部を拡大したものである。
【００２８】
図２を見ると全輝度値を利用しているように見えるが、実際には図３のように使用していない輝度値が存在している。すなわち、画像の多くは一般に疎なヒストグラムを持つ。そこでビット深度変換装置１００は、この画像の偏りや疎であるという性質を利用して、画像全体に対して再度マッピングを行う。この処理は、条件（Ｂ）の制約の下で、下位層を切り捨てた場合の誤差が小さくなるように(条件（Ａ）)実行される。
【００２９】
なお、以下においては、説明の便宜上、ビット深度が９ビット以上の場合を高ビット深度として説明するが、本技術は、ビット深度の大きさによって限定されるものではない。
【００３０】
図１に示されるように、ビット深度変換装置１００は、ヒストグラム生成部１０１、初期テーブル生成部１０２、ヒストグラムソート部１０３、マッピング生成部１０４、およびインデックス画像生成部１０５を有する。
【００３１】
［ビット深度変換処理の流れ］
図４のフローチャートを参照して、ビット深度変換処理の流れの例を説明することにより、ビット深度変換装置１００の各部が実行する処理について説明する。また、必要に応じて、図５乃至図１４を参照して説明する。
【００３２】
まずＮビット深度を持つ入力画像P(x,y)（図１の矢印１２１）が入力されると、ヒストグラム生成部１０１は、ステップＳ１０１において、その入力画像P(x,y)について、実際に出現した画素値のヒストグラムIh(n)を作成する（抽出する）。例えば、入力画像P(x,y)の２次元画像が図５のような値を持っている場合、ヒストグラムIh(n)は図６のように分布している。この例の場合、画素値０，２，８、および１３の出現度数はゼロになる。
【００３３】
一般的に、高ビット深度画像は、画素値の種類が少ない、すなわち、ヒストグラムの分布が疎であるものが多いという特徴を有する。したがって、高ビット深度画像においては、出現度数が０の画素値が多くなりやすい。
【００３４】
ヒストグラム生成部１０１は、ステップＳ１０２において、ステップＳ１０１において生成したヒストグラムIh(n)に含まれる出現度数がゼロでない画素値（以下、非ゼロ係数とも称する）の個数u0（以下、非ゼロ個数とも称する。図６の例の場合、u0＝１２）を求める。また、ヒストグラム生成部１０１は、ステップＳ１０３において、その非ゼロ係数の位置（Ih(n)≠０であるｎの位置）nk（以下、非ゼロ位置とも称する）を求める。
【００３５】
ヒストグラムIh(n)、非ゼロ個数u0、および非ゼロ位置nkを求めると、ヒストグラム生成部１０１は、それらをセット（ヒストグラム情報）にして初期テーブル生成部１０２およびヒストグラムソート部１０３に供給する（図１の矢印１２２）。
【００３６】
ステップＳ１０４において、初期テーブル生成部１０２は、ヒストグラム生成部１０１から供給されたヒストグラム情報を用いて、初期テーブルT(k)を生成する。初期テーブルT(k)の例を図７に示す。図７に示されるように、初期テーブルT(k)は、左端から順番にu0個の非ゼロ係数が並び、その後に残りのゼロ係数（出現度数がゼロの画素値）が並ぶ。ここでは便宜上、u0番目の位置nkの値を連続表示している。これは、この後の係数がゼロ係数であることを示すためにも都合が良いからである。尚、初期テーブルT(k)を定式化すると以下の式（１）のようになる。
【００３７】
【数１】
・・・（１）
【００３８】
初期テーブル生成部１０２は、このように生成した初期テーブルT(k)を、ヒストグラムソート部１０３に供給する（図１の矢印１２３）。また、初期テーブル生成部１０２は、生成した初期テーブルT(k)を、マッピング生成部１０４にも供給する（図１の矢印１２４）。
【００３９】
ステップＳ１０５において、ヒストグラムソート部１０３は、ステップＳ１０１乃至ステップＳ１０４において生成された各種情報（ヒストグラムIh(n)、非ゼロ個数u0、非ゼロ位置nk、および初期テーブルT(k)）を用いて、係数を並び替えた新たな（ソート後の）ヒストグラムH(k)を生成する。例えば、ヒストグラムソート部１０３は、以下の式（２）によってヒストグラムH(k)を生成する。
【００４０】
【数２】
・・・（２）
なお、ここで、使用しないテーブル部分には、単調増加の関係を崩さないように最終値と同じものを入れておく。
【００４１】
図８にヒストグラムH(k)の例を示す。このようなヒストグラムH(k)を生成すると、ヒストグラムソート部１０３は、そのヒストグラムH(k)をマッピング生成部１０４に供給する（図１の矢印１２５）。
【００４２】
マッピング生成部１０４は、初期テーブルT(k)と、ヒストグラムH(k)とを入力して、初期テーブルT(k)を更新し、確定したテーブルT'(k)をインデックス画像生成部１０５に供給する（図１の矢印１２６）。つまり、マッピング生成部１０４は、図４のステップＳ１０６乃至ステップＳ１１０の各処理を行う。
【００４３】
その際、マッピング生成部１０４は、下位層を切り捨てた場合の誤差が小さくなるようにマッピングを実行する。より具体的には、マッピング生成部１０４は、Ｎビットのインデックス画像IN(x,y)からL=N-Mビットの下位層を切り捨てた場合のインデックス画像IM(x,y)の誤差を最小とすることを目的とする。問題設定は以下の式（３）および式（４）のようになる。
【００４４】
【数３】
・・・（３）
【数４】
・・・（４）
【００４５】
上述した式（３）は、ヒストグラムH(k)を用いて再定式化することができる。まず、インデックス画像IN(x,y)のある画素において、下位Lビットを切り捨てる際に発生する誤差をq,(1≦q＜2L)とする。IM(x,y)全体において、誤差値qが発生する頻度Hqは、ヒストグラムH(k)を用いて、以下の式（５）のように表現することができる。
【００４６】
【数５】
・・・（５）
【００４７】
したがって、上述した式（３）は、以下の式（６）の表に再定式化することができる。
【００４８】
【数６】
・・・（６）
【００４９】
すなわち、インデックス画像の最適化問題は、ヒストグラムH(k)とテーブルT(k)のマッピング問題に帰着する。
【００５０】
上述した式（６）から、2Lpの位置(q=0)における頻度H(2Lp)は、MSEに影響を及ぼさないことが明らかである。従って、MSEの値を減少させるためには、頻度の順番に応じて、幾つかの画素値を2Lpの位置(p=0,1,…,2M-1)に移動させればよい。2Lpの位置は、合計2M個存在するため、ヒストグラムが疎である限り、この指針に基づいてマッピングが実行される。以下にその手順を示す。
【００５１】
マッピング生成部１０４は、図４のステップＳ１０６において、誤差が目標値より小さいか否かを判定する。すなわち、マッピング生成部１０４は、以下の式（７）若しくは式（８）のうち、少なくともいずれか一方が成立するか否かを判定する。
【００５２】
【数７】
・・・（７）
【数８】
・・・（８）
【００５３】
式（７）は、2Lp以外の位置に画素値が存在しないという条件である。この条件を満たす場合、下位ビットの切り捨てによる誤差は発生しない。また式（８）は、ヒストグラムの2Lpの位置に空きがないことを意味する。後述するように、ヒストグラムとテーブルの移動を１回行う度にu0の値が2L個増えるため、最終的にこの条件を満足し、マッピングが終了する。
【００５４】
このような判定が行われるステップＳ１０６において、誤差が目標値より小さくない、すなわち、式（７）および式（８）がいずれも成立しないと判定した場合、マッピング生成部１０４は、処理をステップＳ１０７に進める。
【００５５】
ステップＳ１０７において、マッピング生成部１０４は、q2H(2Lp+q)の最大値を与えるｐとｑの組み合わせを検出し、これをpm，qmと定義する。
【００５６】
ステップＳ１０８において、マッピング生成部１０４は、以下の式（９）に従ってヒストグラムH(k)の値の更新を行う。つまり、マッピング生成部１０４は、図９に示されるように、k=2Lpm+qm+1,…,u0-1のヒストグラムH(k)をk+2Lの位置に移動する。その後、2Lpm+qmのヒストグラムH(2Lpm+qm)を2L(pm+1)の位置に移動する。すなわち、H(k)は以下の式（９）のように更新される。
【００５７】
【数９】
・・・（９）
【００５８】
ステップＳ１０９において、マッピング生成部１０４は、ヒストグラムH(ｋ)の場合と同様に、画素値のテーブルT(ｋ)の値の更新を行う。ただし、図１０に示されるように、マッピング生成部１０４は、T(k)の単調増加の性質を崩さないように、ヒストグラムが０に設定された部分に対応するテーブルとして、直前のテーブル値をホールドして保持する。この結果、テーブルT(k)は、以下の式（１０）のように更新される。
【００５９】
【数１０】
・・・（１０）
【００６０】
ステップＳ１１０において、マッピング生成部１０４は、以下の式（１１）のように、u0の値の更新を行う。
【００６１】
【数１１】
・・・（１１）
【００６２】
ステップＳ１１０の処理を終了すると、マッピング生成部１０４は、処理をステップＳ１０６に戻す。すなわち、マッピング生成部１０４は、誤差が目標値より小さくなるまでステップＳ１０６乃至ステップＳ１１０の処理を繰り返す。
【００６３】
本開示のアルゴリズムは、上述した式（６）を完全に満たすものではない。例えば、ステップＳ１０８の処理において、ヒストグラムに０値を挿入したが、この零値の挿入には自由度が存在する。本開示のアルゴリズムでは、例えば図１１のような零値の挿入が行われているが、これを図１２に示されるように零値の位置を調整することで、式（６）におけるMSEをさらに低い値にすることができる。
【００６４】
ステップＳ１０６において、誤差が目標値より小さくなったと判定した場合、すなわち、式（７）若しくは式（８）が成立する場合、マッピング生成部１０４は、確定したテーブルT'(k)をインデックス画像生成部１０５に供給し（図１の矢印１２６）、処理をステップＳ１１１に進める。
【００６５】
ステップＳ１１１において、インデックス画像生成部１０５は、その確定したテーブルT'(k)を用いて、インデックス画像IN(x,y)を求める。このインデックス画像IN(x,y)を求める方法として幾つか考えられるが、例えば図１３に示されるように、原画像P(x,y)の画素値から、テーブルT(k)（０≦ｋ＜2N）の値を逆引きする関数R(k)を、以下の式（１２）のように定義する。
【００６６】
【数１２】
・・・（１２）
【００６７】
インデックス画像生成部１０５は、このような関数R(k)を用いて、インデックス画像IN(x,y)を以下の式（１３）のように求める。
【００６８】
【数１３】
・・・（１３）
【００６９】
つまり、図１３に示されるように、T(k)の値からそれに対応するR(k)の値が導き出され、その後に、図１４に示されるように、生成されたR(k)を順番に画素に沿って並べられることにより、IN(x,y)が生成される。
【００７０】
インデックス画像生成部１０５は、インデックス画像IN(x,y)を生成すると、そのインデックス画像IN(x,y)をビット深度変換装置１００の外部に出力する（図１の矢印１２７）。
【００７１】
その際、インデックス画像生成部１０５は、インデックス画像を上位ビット情報IM(x,y)と差分情報IL(x,y)に分離する。つまり、インデックス画像生成部１０５は、インデックス画像IN(x,y)のM+1ビット目を切り捨て、以下の式（１４）のように、上位Ｍビット画像IM(x,y)を生成する。また、インデックス画像生成部１０５は、インデックスの下位N-Mビットを用いて、以下の式（１５）のように、差分情報IL(x,y)を生成する。
【００７２】
【数１４】
・・・（１４）
【数１５】
・・・・（１５）
【００７３】
インデックス画像生成部１０５は、このようにインデックス画像を上位ビット情報IM(x,y)と差分情報IL(x,y)に分離した状態でも出力する。さらに、インデックス画像生成部１０５は、確定したテーブルT'(k)もビット深度変換装置１００の外部に出力する。
【００７４】
ステップＳ１１１の処理を終了すると、インデックス画像生成部１０５は、ビット深度変換処理を終了する。
【００７５】
以上のようにすることにより、ビット深度変換装置１００は、高ビット深度画像を損失なく表現することができる（ロスレス表現を可能にする）。
【００７６】
＜２．第２の実施の形態＞
［ビット深度逆変換装置］
図１５は、ビット深度逆変換装置の主な構成例を示すブロック図である。図１５に示されるビット深度逆変換装置２００は、図１のビット深度変換装置１００に対応する画像処理装置である。ビット深度逆変換装置２００は、ビット深度変換装置１００により生成されたインデックス画像IN(x,y)を用いて所定のビット深度の復元画像を生成する。
【００７７】
図１５に示されるように、ビット深度逆変換装置２００は、復元画像生成部２０１および上位層画像生成部２０２を有する。
【００７８】
［ビット深度逆変換処理の流れ］
図１６のフローチャートを参照して、ビット深度逆変換処理の流れの例を説明することにより、ビット深度逆変換装置２００の各部が実行する処理について説明する。
【００７９】
ビット深度逆変換装置２００には、ビット深度変換装置１００から出力される、確定したテーブルT'(k)およびインデックス画像IN(x,y)が供給される。復元画像生成部２０１および上位層画像生成部２０２は、その確定したテーブルT'(k)およびインデックス画像IN(x,y)（上位ビット情報IM(x,y)と差分情報IL(x,y)も含む）を取得する（図１５の矢印２２１および矢印２２２）。
【００８０】
確定したテーブルT'(k)およびインデックス画像IN(x,y)を取得すると、復元画像生成部２０１は、ステップＳ２０１において、それらを用いて、以下の式（１６）のように、復元画像P(x,y)を求める。
【００８１】
【数１６】
・・・（１６）
【００８２】
復元画像生成部２０１は、求めた復元画像P(x,y)をビット深度逆変換装置２００の外部に出力する（図１５の矢印２２３）。
【００８３】
ステップＳ２０２において、上位層画像生成部２０２は、確定したテーブルT'(k)および上位ビット情報IM(x,y)および差分情報IL(x,y)を用いて、上位層画像PM(x,y)と下位層画像PL(x,y)とを求める。上位層画像PM(x,y)は、インデックス画像IN(x,y)の各画素値の上位Ｍ（Ｍ＜Ｎ）ビット（すなわち、上位ビット情報IM(x,y)）から求めた復元画像である。下位層画像PL(x,y)は、インデックス画像IN(x,y)の各画素値の下位Ｌ（Ｌ＝Ｎ−Ｍ）ビット（すなわち、差分情報IL(x,y)）から求めた復元画像である。
【００８４】
上位層画像生成部２０２は、上位ビット情報IM(x,y)を用いて、以下の式（１７）のように、上位層画像PM(x,y)を求める。
【００８５】
【数１７】
・・・（１７）
【００８６】
この処理は、2N個存在するテーブル値の内、2M個のテーブル値を代表して使用することに相当する。
【００８７】
上位層画像生成部２０２は、式（１７）と同様にして、差分情報IＬ(x,y)を用いて、下位層画像PＬ(x,y)を求める。この処理は、2N個存在するテーブル値の内、2L個のテーブル値を代表して使用することに相当する。
【００８８】
上位層画像生成部２０２は、求めた上位層画像PM(x,y)および下位層画像PＬ(x,y)をビット深度逆変換装置２００の外部に出力する（図１５の矢印２２４および矢印２２５）。
【００８９】
ステップＳ２０２の処理を終了すると、上位層画像生成部２０２は、ビット深度逆変換処理を終了する。
【００９０】
このようにすることにより、ビット深度逆変換装置２００は、インデックス画像IN(x,y)から復元画像P(x,y)（上位層画像PM(x,y)および下位層画像PＬ(x,y)を含む）を求めることができる。
【００９１】
マッピング指針から、頻度の高い画素値に対する差分画像IL(x,y)は０である。それらの画素値に対しては正しいテーブル値に復元される。しかしながら、Ｍの値が小さくなると差分情報IL(x,y)の値が０でない確率が上昇する。その結果、本来の画素値ではない値が復元される確率も増えることになり、その結果復元画像のPSNRが減少してしまう。この場合、テーブル値T(k)を直接使うのではなく、以下の式（１８）のように同一インデックス値に対応するテーブル値の平均を復元画像の画素値として用いるようにしてもよい。このようにすることにより、PSNRの減少を抑制することができる。
【００９２】
【数１８】
・・・（１８）
【００９３】
また、元々のHDR画像が非常に疎であり、初期テーブルの使用数u0が、上位ビット画像で表現できる輝度の個数2Mよりも少ない場合、差分画像IL(x,y)はすべて０となる。その結果、上述した式（１７）のPM(x,y)=P(x,y)となり、PSNRは無限大となる。
【００９４】
［テーブル値T(k)の効率的表現］
なお、テーブル値T(k)は、それぞれＮビットの情報を持つ。しかしながら、本技術では、上述した式（４）に示されるように、輝度の順序を入れ替えないようにしているため、このテーブルT(k)は単調増加の関係にある。そこで、以下の式（１９）のように前のテーブル値との差分Td(k)を計算するようにしてもよい。
【００９５】
【数１９】
・・・（１９）
【００９６】
テーブルT(k)を直接記録せずに、このテーブル値の差分Td(k)を記録することで、テーブルに必要となるデータ量を削減することができる。
【００９７】
＜３．第３の実施の形態＞
［ビット深度変換装置］
図１７は、ビット深度変換装置の主な構成例を示すブロック図である。図１７に示されるビット深度変換装置３００は、高ビット深度画像を複数のブロックに分割し、ブロック毎にインデックス画像を生成する画像処理装置である。
【００９８】
図１７に示されるように、ビット深度変換装置３００は、画像ブロック分割部３０１、並びに、ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘを有する。
【００９９】
画像ブロック分割部３０１は、入力される高ビット深度画像（矢印３２１）を複数のブロックに分割し、各ブロックの画像を、ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘに供給する。
【０１００】
つまり、例えば、画像ブロック分割部３０１は、ブロック１の画像P1(x,y)をブロック１ビット深度変換部３０２−１に供給する（図１７の矢印３２２−１）。また、例えば、画像ブロック分割部３０１は、ブロック２の画像P2(x,y)をブロック２ビット深度変換部３０２−２に供給する（図１７の矢印３２２−２）。さらに、例えば、画像ブロック分割部３０１は、ブロックＸの画像PX(x,y)をブロックＸビット深度変換部３０２−Ｘに供給する（図１７の矢印３２２−Ｘ）。
【０１０１】
ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘは、それぞれ、図１のビット深度変換装置１００と同様の構成を有し、同様の処理を行う処理部である。ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘは、自身が対応するブロックの画像に対して、互いに独立して、ビット深度変換装置１００と同様の処理を行う。
【０１０２】
つまり、例えば、ブロック１ビット深度変換部３０２−１は、ブロック１の画像P1(x,y)に対してビット深度変換処理を行い、ブロック１のインデックス画像IN,1(x,y)とブロック１のテーブルT1(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−１）。また、例えば、ブロック２ビット深度変換部３０２−２は、ブロック２の画像P2(x,y)に対してビット深度変換処理を行い、ブロック２のインデックス画像IN,2(x,y)とブロック２のテーブルT2(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−２）。さらに、例えば、ブロックＸビット深度変換部３０２−Ｘは、ブロックＸの画像PX(x,y)に対してビット深度変換処理を行い、ブロックＸのインデックス画像IN,X(x,y)とブロックＸのテーブルTX(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−Ｘ）。
【０１０３】
［ビット深度変換処理の流れ］
図１８のフローチャートを参照して、この場合の、ビット深度変換処理の流れの例を説明する。
【０１０４】
ステップＳ３０１において、画像ブロック分割部３０１は、入力画像ｐ(x,y)を、Ｘ個のブロック画像P1(x,y)乃至PX(x,y)に分割する。ステップＳ３０２において、ブロック１ビット深度変換部３０２−１乃至ブロックＸビット深度変換部３０２−Ｘの中の処理対象のブロックに対応する処理部は、処理対象ブロックについて、図４のフローチャートを参照して説明したのと同様のビット深度変換処理を行う。ステップＳ３０３において、全てのブロックが処理されたと判定されるまで、ステップＳ３０２の処理が繰り返される。
【０１０５】
つまり、まず、ブロック１ビット深度変換部３０２−１が、ブロック１についてのビット深度変換処理を行い、次に、ブロック２ビット深度変換部３０２−２が、ブロック２についてのビット深度変換処理を行い、ブロック３以降同様に処理が繰り返され、最後にブロックＸビット深度変換部３０２−Ｘが、ブロックＸについてのビット深度変換処理を行う。そして、ステップＳ３０３において、ブロック１乃至ブロックＸの全てのブロックについてビット深度変換処理が行われたと判定された場合、ビット深度変換装置３００は、ビット深度変換処理を終了する。
【０１０６】
このような処理によって、インデックス画像IN,1(x,y)乃至IN,X(x,y)、並びに、テーブルT1（K）乃至TX（K）が生成される。つまり、各ブロックについて、インデックス画像とテーブルが生成される。
【０１０７】
以上のようにすることにより、ビット深度変換装置３００は、高ビット深度画像を損失なく表現することができる（ロスレス表現を可能にする）。
【０１０８】
＜４．第４の実施の形態＞
［ビット深度逆変換装置］
図１９は、ビット深度逆変換装置の主な構成例を示すブロック図である。図１９に示されるビット深度逆変換装置４００は、図１７のビット深度変換装置３００に対応する画像処理装置である。ビット深度逆変換装置４００は、ビット深度変換装置３００により生成された各ブロックのインデックス画像を用いて復元画像を生成する。
【０１０９】
図１９に示されるように、ビット深度逆変換装置４００は、ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘ、並びに、画像ブロック統合部４０２を有する。
【０１１０】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、対応するブロックのインデックス画像とテーブルを取得する。
【０１１１】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、ビット深度変換装置３００により生成されたブロック１のインデックス画像IN,1(x,y)とテーブルT1(k)を取得する（図１９の矢印４２１−１）。また、例えば、ブロック２ビット深度逆変換部４０１−２は、ビット深度変換装置３００により生成されたブロック２のインデックス画像IN,2(x,y)とテーブルT2(k)を取得する（図１９の矢印４２１−２）。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、ビット深度変換装置３００により生成されたブロックＸのインデックス画像IN,X(x,y)とテーブルTX(k)を取得する（図１９の矢印４２１−Ｘ）。
【０１１２】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、互いに独立して、取得したインデックス画像とテーブルを用いて、対応するブロックの復元画像を求める。
【０１１３】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、インデックス画像IN,1(x,y)とテーブルT1(k)を用いて、ブロック１の復元画像P1(x,y)を生成する。また、例えば、ブロック２ビット深度逆変換部４０１−２は、インデックス画像IN,2(x,y)とテーブルT2(k)を用いて、ブロック２の復元画像P2(x,y)を生成する。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、インデックス画像IN,X(x,y)とテーブルTX(k)を用いて、ブロックＸの復元画像PX(x,y)を生成する。
【０１１４】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、求めた復元画像を画像ブロック統合部４０２に供給する。
【０１１５】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、ブロック１の復元画像P1(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−１）。また、例えば、ブロック２ビット深度逆変換部４０１−２は、ブロック２の復元画像P2(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−２）。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、ブロックＸの復元画像PX(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−Ｘ）。
【０１１６】
画像ブロック統合部４０２は、供給された各ブロックの復元画像を統合し、１枚の復元画像P(x,y)を生成し、それをビット深度逆変換装置４００の外部に出力する（図１９の矢印４２３）。
【０１１７】
［ビット深度逆変換処理の流れ］
図２０のフローチャートを参照して、この場合の、ビット深度逆変換処理の流れの例を説明する。
【０１１８】
ステップＳ４０１において、ブロック１ビット深度逆変換部４０１−１乃至ブロックＸビット深度逆変換部４０１−Ｘの中の処理対象のブロックに対応する処理部は、処理対象ブロックについて、図１６のフローチャートを参照して説明したのと同様のビット深度逆変換処理を行う。ステップＳ４０２において、全てのブロックが処理されたと判定されるまで、ステップＳ４０１の処理が繰り返される。
【０１１９】
つまり、まず、ブロック１ビット深度逆変換部４０１−１が、ブロック１についてのビット深度逆変換処理を行い、次に、ブロック２ビット深度逆変換部４０１−２が、ブロック２についてのビット深度逆変換処理を行い、ブロック３以降同様に処理が繰り返され、最後にブロックＸビット深度逆変換部４０１−Ｘが、ブロックＸについてのビット深度逆変換処理を行う。そして、ステップＳ４０２において、ブロック１乃至ブロックＸの全てのブロックについてビット深度逆変換処理が行われたと判定された場合、ビット深度逆変換装置４００は、処理をステップＳ４０３に進める。
【０１２０】
ステップＳ４０３において、画像ブロック統合部４０２は、ステップＳ４０１において生成された各ブロックの復元画像を統合し、１枚の復元画像を生成し、ビット深度逆変換処理を終了する。
【０１２１】
このようにすることにより、ビット深度逆変換装置４００は、ブロック毎に生成されたインデックス画像IN,Block(x,y)から復元画像P(x,y)を求めることができる。なお、ビット深度逆変換装置４００は、ビット深度逆変換装置２００の場合と同様に、上位層画像PM(x,y)および下位層画像PＬ(x,y)を生成することもできる。
【０１２２】
その場合、ブロック１ビット深度逆変換部４０１−１乃至ブロックＸビット深度逆変換部４０１−Ｘが、それぞれのブロックについて、上位層画像PM,Block(x,y)および下位層画像PＬ,Block(x,y)を求め、画像ブロック統合部４０２が、復元画像P(x,y)の場合と同様に、各ブロックの上位層画像PM,Block(x,y)および下位層画像PＬ,Block(x,y)を、それぞれ統合し、画像全体の上位層画像PM(x,y)および下位層画像PＬ(x,y)を生成する。
【０１２３】
以上に説明した第３の実施の形態および第４の実施の形態が、画像を複数ブロックに分割する場合の画像処理の説明である。言うまでもなく、画像を複数ブロックに分割した方が、図６で示したヒストグラムの偏りは大きくなるので、より少ないビット数で画素の値域を表現することができる。従って、第３の実施の形態および第４の実施の形態による量子化に伴うビット削減に起因する画質劣化は、より低減される。
【０１２４】
ただし、この場合、Ｘブロック分のテーブルT1（K）乃至TX（K）を送信する必要が生じるので、１個のテーブルT(k)を伝送すればよい第１の実施の形態や第２の実施の形態の方法の方が、その分符号量の増大を抑制することができる。
【０１２５】
＜５．第５の実施の形態＞
［実験例］
本実施の形態においては、上述した各実施の形態におけるビット深度変換と逆変換の方法について、図２１Ａおよび図２１Ｂに示される２つのテスト画像（ビット深度N=12）に対する実験結果の例を説明する。ヒストグラム抽出の結果、図２１Ａに示される医療画像は、非ゼロの画素数u0=1853であり、図２１Ｂに示される写真画像は、非ゼロの画素数u0=2981であった。従って、図２１Ａに示される医療画像は、211(=2048) > 1853なので、M=11ビットで完全な可逆な表現が可能であることがわかる。そのため、本開示の手法を用いれば、上位Ｍビットの上位層インデックス画像IM(x,y)のみで、完全に原画像を復元することができる（PSNR＝∞）。これに対してLloyd-Max法の場合、この条件下でも差分情報が無ければ、原画の復元は不可能である。
【０１２６】
次に、図２１Ａに示される医療画像の実験結果を図２２の表に示す。図２２の表において、縦軸は各処理の種類、横軸は上位層のビット数Mを示している。次にMethod-AとMethod-Bについて説明する。
【０１２７】
実験ではまず、Ｍビットの上位ビット画像IM(x,y)とテーブルT'(k)のみを用いて、Ｎビット画像を復元する。言うまでもなく、下位層の情報が無いので、復元画像は原画像に比べて劣化する。ここでは、Ｍの値を８から１１まで変化させながら画像劣化の度合いを評価する。
【０１２８】
Method-A：上述した式（１７）によって実現される方式で、テーブルT'(K)を直接使用する。
Method-B：上述した式（１８）に示される様にテーブル値の平均値を使用する。
【０１２９】
また、第３の実施の形態および第４の実施の形態の、画像を複数のブロックに分割してから上位層と下位層とに分割する手法が、図２２の表のMethod-A（ブロック分割）、Method-B（ブロック分割）である。
【０１３０】
この場合のMethod-Aは、Ｍの値の減少に伴い、Lloyd-Max法や四捨五入よりも低いPSNRになっている。これは本来の画素値とテーブルとの誤差が大きくなるためである。テーブルの平均を用いたこの場合のMethod-Bにおいては、この問題が改善されている。
【０１３１】
図２２の表においては、従来最も優れているとされていたLloyd-Max法に比べて、Method-B（ブロック分割）の方が、M=8以外のすべての値で、PSNRが向上している。特にM＝10以上でLloyd-Max法に比べた優位性が大きくなっているのが確認できる。また、既に述べた様に、本手法では１１ビットで完全に可逆が実現できる。
【０１３２】
次に図２１Ｂの写真画像の結果について図２３に示す。Lloyd-Max法に比べて、Method-B（ブロック分割）の方が、M=10以上の値で、PSNRが向上している。またM=8では逆にLloyd-Max法よりもかなり悪い値になっている。これより、ＮとＭの差がある程度大きくなると、本来の画素値とテーブルとの誤差が大きくなる傾向が強くなる。
【０１３３】
従って、例えば、ビット深度変換装置として、Lloyd-Max法で量子化（ビット深度変換）を行うLloyd-Max量子化部と、図１７のビット深度変換装置３００と同様の構成を有し、同様の処理（Method-B（ブロック分割）による量子化処理）を行う本手法量子化部と、量子化（ビット深度変換）方法を選択する制御部を設け、その制御部が、ヒストグラム測定の結果、出現度数が１上の画素数Xが、X＞2M-1且つ（N-M）≧P（Pは例えば２）の場合、Lloyd-Max法を選択し、Lloyd-Max量子化部を制御してLloyd-Max法によるビット深度変換処理（量子化処理）を実行させ、それ以外の場合、Method-B（ブロック分割）を選択し、本手法量子化部を制御してMethod-B（ブロック分割）によるビット深度変換処理（量子化処理）を実行させるようにしてもよい。これによって常に最適なビット表現が可能になる。なお、逆変換処理は、選択された各手法に応じた手法で行うようにすればよい。また、Lloyd-Max法との切り替えを行う手法は、Method-B（ブロック分割）以外の本手法であってももちろんよい。
【０１３４】
［式（４）の制約］
次に上述した式（４）におけるテーブル値に対する制約条件の必要性について検証する。仮に、Ｍビットの上位画像IM(x,y)を作成するにあたり、上述した式（４）を無視し、式（３）のMSEを最小化するという条件のみでインデックス画像IN(x,y)を作成するとする。
【０１３５】
図２４は、インデックス画像IN(x,y)に対する上位ビット画像IM(x,y)のPSNRと、原画像P(x,y)に対する復元画像PM(x,y)のPSNRを示したものである。図２４の表から明らかなように、このようにMSEのみを最小化する場合、上位ビット画像とPSNR値は高いものの、復元画像は非常に低いPSNRになる。したがって、式（４）による制約条件を適用することが望ましい。
【０１３６】
また、テーブルのデータ量について検証する。本技術では、上述した式（４）を適用することにより、テーブルT(k)の代わりに、式（１９）のテーブル値の差分Td(k)を保存することができる(0≦k＜2N)。
【０１３７】
図２５および図２６は、このTd(k)をバイナリで書き出し、bzip2アルゴリズムを用いてデータ圧縮した結果を示す。本技術はＭが変化してもテーブルのサイズは変わらないため、T(k)のデータサイズは16ビット(実質12ビット)×2Nとなり、全体で8192バイトとなる。
【０１３８】
これに対して、図２５および図２６に示されるように、Lloyd-maxのテーブルについても前のテーブル値との差分を計算し、同様の処理を行った。こちらのデータサイズは上位画像のビット数Ｍに依存する。また、Lloyd-maxのテーブルのデータ量には下位層を表現するためのデータ量は含まれていない。
【０１３９】
なお、図２５および図２６には、本技術のテーブル値T(k)を直接圧縮した場合のサイズも開示されている。
【０１４０】
図２５および図２６から、T(k)を直接保存せず、Td(k)を保存することの有効性を確認することができる。本技術では、2N個の全てのテーブル値を保持しているにもかかわらず、2MのLloyd-maxとほぼ同程度のデータ量となっている。
【０１４１】
＜６．第６の実施の形態＞
［画像処理装置］
図２７は、第１の実施の形態乃至第４の実施の形態で説明した各装置を処理部として用いた画像処理装置を具体的に実現するブロック図である。これらの構成要素は、例えばカメラシステムに内蔵されている。
【０１４２】
図２７に示される画像処理装置５００は、ビット深度変換処理部５０１、記憶部５０２、およびビット深度逆変換処理部５０３を有する。
【０１４３】
カメラに内蔵された撮像素子（例えばCCD、CMOSセンサ）でキャプチャした映像（Ｎビット）は、ビット深度変換処理部５０１に供給される（図２７の矢印５２１）。ビット深度変換処理部５０１は、その撮像素子画像を、第１の実施の形態または第３の実施の形態で説明した方法でＭビット（Ｎ＞Ｍ）の上位層とそれ以外の下位層とに分割する。
【０１４４】
Ｍビット画像（インデックス画像IM(x,y)）は、記憶部５０２に供給され（図２７の矢印５２２）、記憶（保存）される。通常のデジタルカメラでは、内蔵メモリである記憶部５０２から画像データを読みだしてJPEG圧縮を行い、圧縮ファイルをカメラ外付けのメモリカード等に記録する方法が一般的である。ここでは本技術の本題から逸れるので、省いてある。
【０１４５】
記憶部５０２から読み出されたＭビットの画像データは、ビット深度逆変換処理部５０３に供給される（図２７の矢印５２３）。ビット深度逆変換処理部５０３は、その画像データをＮビットに再度変換する。変換後の復元画像（Ｎビット）は、例えばＮビット表示可能な表示部５０４に供給され（図２７の矢印５２４）る。表示部５０４は、供給された復元画像を表示する。
【０１４６】
このように、インデックス画像のビット深度のビット数を低減させることにより、必要なメモリ容量を低減させることができる。これにより、製造コストや消費電力の増大を抑制することができる。
【０１４７】
以上に説明した各装置は、それぞれ、上述した以外の構成を含むようにしてももちろんよい。また、１つの装置としてだけでなく、複数の装置よりなるシステムとして構成されるようにしてもよい。例えば、撮像素子（CMOS、CCDセンサ）からキャプチャした画像を用いた機器やデバイス、撮像素子画像をメモリに書き込むまでの圧縮回路、デジタルスチルカメラ、動画用カムコーダ、医療用画像カメラ、医療用内視鏡、監視カメラ、デジタルシネマ撮影用カメラ、両眼画像カメラ、多眼画像カメラ、LSIチップでのメモリ削減回路、PC上のオーサリング・ツールまたはそのソフトウェア・モジュール等として構成されるようにしてもよい。
【０１４８】
＜７．第７の実施の形態＞
［パーソナルコンピュータ］
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。この場合、例えば、図２８に示されるようなパーソナルコンピュータとして構成されるようにしてもよい。
【０１４９】
図２８において、パーソナルコンピュータ６００のCPU（Central Processing Unit）６０１は、ROM（Read Only Memory）６０２に記憶されているプログラム、または記憶部６１３からRAM（Random Access Memory）６０３にロードされたプログラムに従って各種の処理を実行する。RAM６０３にはまた、CPU６０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１５０】
CPU６０１、ROM６０２、およびRAM６０３は、バス６０４を介して相互に接続されている。このバス６０４にはまた、入出力インタフェース６１０も接続されている。
【０１５１】
入出力インタフェース６１０には、キーボード、マウスなどよりなる入力部６１１、CRT（Cathode Ray Tube）ディスプレイやLCD（Liquid Crystal Display）等のディスプレイ、並びにスピーカなどよりなる出力部６１２、フラッシュメモリ等SSD（Solid State Drive）やハードディスクなどよりなる記憶部６１３、有線LAN（Local Area Network）や無線LANのインタフェースやモデムなどよりなる通信部６１４が接続されている。通信部６１４は、インターネットを含むネットワークを介しての通信処理を行う。
【０１５２】
入出力インタフェース６１０にはまた、必要に応じてドライブ６１５が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア６２１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部６１３にインストールされる。
【０１５３】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、ネットワークや記録媒体からインストールされる。
【０１５４】
この記録媒体は、例えば、図２８に示されるように、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM（Compact Disc - Read Only Memory）,DVD（Digital Versatile Disc）を含む）、光磁気ディスク（MD（Mini Disc）を含む）、若しくは半導体メモリなどよりなるリムーバブルメディア６２１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているROM６０２や、記憶部６１３に含まれるハードディスクなどにより構成される。
【０１５５】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１５６】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１５７】
また、本明細書において、システムとは、複数のデバイス（装置）により構成される装置全体を表すものである。
【０１５８】
また、以上において、１つの装置（または処理部）として説明した構成が、複数の装置（または処理部）として構成されるようにしてもよい。逆に、以上において複数の装置（または処理部）として説明した構成が、まとめて１つの装置（または処理部）として構成されるようにしてもよい。また、各装置（または各処理部）の構成に上述した以外の構成が付加されるようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置（または処理部）の構成の一部が他の装置（または他の処理部）の構成に含まれるようにしてもよい。つまり、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【０１５９】
なお、本技術は以下のような構成も取ることができる。
（１） Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、
前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、
前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、
前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、
前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部と
を備える画像処理装置。
（２） 前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新する
前記（１）に記載の画像処理装置。
（３） 前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、
前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、
前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、
前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、
前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、
前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成する
前記（１）または（２）に記載の画像処理装置。
（４） ビット深度変換の手法を選択する制御部と、
Lloyd-Max法による量子化を行うLloyd-Max量子化部と
をさらに備え、
前記制御部は、
前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、
それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させる
前記（１）乃至（３）のいずれかに記載の画像処理装置。
（５） 変数Pの値は2である
前記（４）に記載の画像処理装置。
（６） Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、
ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、
テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、
並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、
更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、
インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する
画像処理方法。
（７） Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、
前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部と
を備える画像処理装置。
（８） 前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
前記（７）に記載の画像処理装置。
（９） 前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
前記（７）または（８）に記載の画像処理装置。
（１０） 前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割する
前記（７）乃至（９）のいずれかに記載の画像処理装置。
（１１） 画像処理装置の画像処理方法であって、
復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、
上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する
画像処理方法。
【符号の説明】
【０１６０】
１００ ビット深度変換装置， １０１ ヒストグラム生成部， １０２ 初期テーブル生成部， １０３ ヒストグラムソート部， １０４ マッピング生成部， １０５ インデックス画像生成部， ２００ ビット深度逆変換装置， ２０１ 復元画像生成部， ２０２ 上位層画像生成部， ３００ ビット深度変換装置， ３０１ 画像ブロック分割部， ４００ ビット深度逆変換装置， ４０２ 画像ブロック統合部， ５００ 画像処理装置， ５０１ ビット深度変換処理部， ５０２ 記憶部， ５０３ ビット深度逆変換処理部
【技術分野】
【０００１】
本開示は、画像処理装置および方法に関し、特に、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を可能とすることができるようにした画像処理装置および方法に関する。
【背景技術】
【０００２】
従来、高ビット深度画像の符号化表現については、これまで多数の研究結果が報告されている（例えば、非特許文献１および非特許文献２参照）。
【０００３】
例えば、非特許文献１においては、トーンマッピングを行うことで、低ビット深度画像を作成し、その復号画像と原画像との差分を別の符号化器で符号化する２段構成の符号化方法が提案されている。
【０００４】
また、例えば、非特許文献２においては、トーンマッピングの代わりにLloyd-Max量子化を適用することで、非可逆圧縮時のビットレート低減を実現することが検討されている。
【先行技術文献】
【非特許文献】
【０００５】
【非特許文献１】M.Winken, D.Marpe, etc.，"Bit-depth Scalable Video Coding", Proc. IEEE Intl. Conf. on Image Processing, pp.I-5〜I-7, 2007
【非特許文献２】伊藤、坂東、高村、上倉、八島，"ビット深度変換処理を用いた高ビット深度画像の符号化に関する基礎検討"、2009信学総大，S-5，2009
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、これらの手法の場合、復号画像と原画像との差分のビット数が長くなってしまい、元々の原画像のロスレス表現ができない恐れがあった。
【０００７】
本開示は、このような状況に鑑みて提案されたものであり、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を実現することができるようにすることを目的とする。
【課題を解決するための手段】
【０００８】
本開示の一側面は、Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部とを備える画像処理装置である。
【０００９】
前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新することができる。
【００１０】
前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成することができる。
【００１１】
ビット深度変換の手法を選択する制御部と、Lloyd-Max法による量子化を行うLloyd-Max量子化部とをさらに備え、前記制御部は、前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させることができる。
【００１２】
変数Pの値は2であるようにすることができる。
【００１３】
本開示の一側面は、また、Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する画像処理方法である。
【００１４】
本開示の他の側面は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部とを備える画像処理装置である。
【００１５】
前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元することができる。
【００１６】
前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元することができる。
【００１７】
前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割することができる。
【００１８】
本開示の他の側面は、また、画像処理装置の画像処理方法であって、復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する画像処理方法である。
【００１９】
本開示の一側面においては、Nビット深度の画像の各画素値の出現度数を示すヒストグラムが生成され、生成されたヒストグラムの出現度数が１以上の画素を順番に並べたテーブルが生成され、生成されたテーブルを用いて、ヒストグラム内の値の配置が並び替えられ、生成されたテーブルと、並び替えられたヒストグラムが更新され、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像が生成される。
【００２０】
本開示の他の側面においては、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成されたヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、更新されたテーブルとを用いて、Nビット深度の画像が復元され、Nビット深度のインデックス画像が、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割され、Mビット深度のインデックス画像と、更新されたテーブルとを用いて、Nビット深度の画像が復元される。
【発明の効果】
【００２１】
本開示によれば、画像を処理することができる。特に、高ビット深度画像のビット深度変換において、高ビット深度画像のロスレス表現を実現することができる。
【図面の簡単な説明】
【００２２】
【図１】ビット深度変換装置の主な構成例を示すブロック図である。
【図２】１２ビット画像のヒストグラム全体の例を示す図である。
【図３】１２ビット画像のヒストグラムの一部を拡大した例を示す図である。
【図４】ビット深度変換処理の流れの例を説明するフローチャートである。
【図５】高ビット深度画像の画素値の例を示す図である。
【図６】ヒストグラム分布の例を示す図である。
【図７】初期テーブルの例を示す図である。
【図８】ソートされたヒストグラムの例を示す図である。
【図９】H(k)の更新の様子の例を示す図である。
【図１０】T(k)の更新の様子の例を示す図である。
【図１１】ヒストグラムにおけるH(k)=0の位置の配置自由度を説明する図である。
【図１２】ヒストグラムにおけるH(k)=0の位置の配置自由度を説明する図である。
【図１３】インデックス画像を求める様子の例を説明する図である。
【図１４】インデックス画像を求める様子の例を説明する図である。
【図１５】ビット深度逆変換装置の主な構成例を示すブロック図である。
【図１６】ビット深度逆変換処理の流れの例を説明するフローチャートである。
【図１７】ビット深度変換装置の他の構成例を示すブロック図である。
【図１８】ビット深度変換処理の流れの、他の例を説明するフローチャートである。
【図１９】ビット深度逆変換装置の他の構成例を示すブロック図である。
【図２０】ビット深度逆変換処理の流れの、他の例を説明するフローチャートである。
【図２１】入力画像の例を示す図である。
【図２２】ビット深度変換処理結果の例を説明する図である。
【図２３】ビット深度変換処理結果の他の例を説明する図である。
【図２４】上位ビット画像のPSNRと復元画像のPSNRの例を示す図である。
【図２５】医療画像についてテーブルの情報量の例を示す図である。
【図２６】写真画像についてテーブルの情報量の例を示す図である。
【図２７】画像処理装置の主な構成例を示すブロック図である。
【図２８】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２３】
以下、本技術を実施するための形態（以下実施の形態とする）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（ビット深度変換装置）
２．第２の実施の形態（ビット深度逆変換装置）
３．第３の実施の形態（ビット深度変換装置）
４．第４の実施の形態（ビット深度逆変換装置）
５．第５の実施の形態（実験例）
６．第６の実施の形態（画像処理装置）
７．第７の実施の形態（パーソナルコンピュータ）
【００２４】
＜１．第１の実施の形態＞
［ビット深度変換装置］
図１は、ビット深度変換装置の主な構成例を示すブロック図である。図１に示されるビット深度変換装置１００は、高ビット深度の画像（高ビット深度画像）を入力画像として受け付け、その高ビット深度画像をロスレスに（損失無く）表現することができるインデックス画像を生成する画像処理装置である。
【００２５】
より具体的には、ビット深度変換装置１００は、ＮビットのHDR(High Dynamic Range)画像（高ダイナミックレンジ画像）に対して、Ｍビット(N>=M)の上位ビット部分と下位の差分情報に分けた２層の画像表現法を実現する。この手法は、以下の特徴を持つことを条件としている。
【００２６】
（Ａ）画像を２層表現し、１層目だけを用いて画像を復元した場合にも、高いPSNRを持つこと
（Ｂ）２層全ての情報が得られた場合、元のHDR画像を復元できるロスレス表現となっていること
【００２７】
上記の２つの条件を実現するために、ビット深度変換装置１００は、画像のヒストグラムの偏りと画像の疎性に注目する。画像は一般に、ヒストグラムの頻度に偏りをもっており、かつ、2N種類の輝度値の全てを使い切っているわけではない。図２は、１２ビット深度の画像に対してヒストグラムを作成した例である。図２はヒストグラム全体の図である。図３は、図２の一部を拡大したものである。
【００２８】
図２を見ると全輝度値を利用しているように見えるが、実際には図３のように使用していない輝度値が存在している。すなわち、画像の多くは一般に疎なヒストグラムを持つ。そこでビット深度変換装置１００は、この画像の偏りや疎であるという性質を利用して、画像全体に対して再度マッピングを行う。この処理は、条件（Ｂ）の制約の下で、下位層を切り捨てた場合の誤差が小さくなるように(条件（Ａ）)実行される。
【００２９】
なお、以下においては、説明の便宜上、ビット深度が９ビット以上の場合を高ビット深度として説明するが、本技術は、ビット深度の大きさによって限定されるものではない。
【００３０】
図１に示されるように、ビット深度変換装置１００は、ヒストグラム生成部１０１、初期テーブル生成部１０２、ヒストグラムソート部１０３、マッピング生成部１０４、およびインデックス画像生成部１０５を有する。
【００３１】
［ビット深度変換処理の流れ］
図４のフローチャートを参照して、ビット深度変換処理の流れの例を説明することにより、ビット深度変換装置１００の各部が実行する処理について説明する。また、必要に応じて、図５乃至図１４を参照して説明する。
【００３２】
まずＮビット深度を持つ入力画像P(x,y)（図１の矢印１２１）が入力されると、ヒストグラム生成部１０１は、ステップＳ１０１において、その入力画像P(x,y)について、実際に出現した画素値のヒストグラムIh(n)を作成する（抽出する）。例えば、入力画像P(x,y)の２次元画像が図５のような値を持っている場合、ヒストグラムIh(n)は図６のように分布している。この例の場合、画素値０，２，８、および１３の出現度数はゼロになる。
【００３３】
一般的に、高ビット深度画像は、画素値の種類が少ない、すなわち、ヒストグラムの分布が疎であるものが多いという特徴を有する。したがって、高ビット深度画像においては、出現度数が０の画素値が多くなりやすい。
【００３４】
ヒストグラム生成部１０１は、ステップＳ１０２において、ステップＳ１０１において生成したヒストグラムIh(n)に含まれる出現度数がゼロでない画素値（以下、非ゼロ係数とも称する）の個数u0（以下、非ゼロ個数とも称する。図６の例の場合、u0＝１２）を求める。また、ヒストグラム生成部１０１は、ステップＳ１０３において、その非ゼロ係数の位置（Ih(n)≠０であるｎの位置）nk（以下、非ゼロ位置とも称する）を求める。
【００３５】
ヒストグラムIh(n)、非ゼロ個数u0、および非ゼロ位置nkを求めると、ヒストグラム生成部１０１は、それらをセット（ヒストグラム情報）にして初期テーブル生成部１０２およびヒストグラムソート部１０３に供給する（図１の矢印１２２）。
【００３６】
ステップＳ１０４において、初期テーブル生成部１０２は、ヒストグラム生成部１０１から供給されたヒストグラム情報を用いて、初期テーブルT(k)を生成する。初期テーブルT(k)の例を図７に示す。図７に示されるように、初期テーブルT(k)は、左端から順番にu0個の非ゼロ係数が並び、その後に残りのゼロ係数（出現度数がゼロの画素値）が並ぶ。ここでは便宜上、u0番目の位置nkの値を連続表示している。これは、この後の係数がゼロ係数であることを示すためにも都合が良いからである。尚、初期テーブルT(k)を定式化すると以下の式（１）のようになる。
【００３７】
【数１】
・・・（１）
【００３８】
初期テーブル生成部１０２は、このように生成した初期テーブルT(k)を、ヒストグラムソート部１０３に供給する（図１の矢印１２３）。また、初期テーブル生成部１０２は、生成した初期テーブルT(k)を、マッピング生成部１０４にも供給する（図１の矢印１２４）。
【００３９】
ステップＳ１０５において、ヒストグラムソート部１０３は、ステップＳ１０１乃至ステップＳ１０４において生成された各種情報（ヒストグラムIh(n)、非ゼロ個数u0、非ゼロ位置nk、および初期テーブルT(k)）を用いて、係数を並び替えた新たな（ソート後の）ヒストグラムH(k)を生成する。例えば、ヒストグラムソート部１０３は、以下の式（２）によってヒストグラムH(k)を生成する。
【００４０】
【数２】
・・・（２）
なお、ここで、使用しないテーブル部分には、単調増加の関係を崩さないように最終値と同じものを入れておく。
【００４１】
図８にヒストグラムH(k)の例を示す。このようなヒストグラムH(k)を生成すると、ヒストグラムソート部１０３は、そのヒストグラムH(k)をマッピング生成部１０４に供給する（図１の矢印１２５）。
【００４２】
マッピング生成部１０４は、初期テーブルT(k)と、ヒストグラムH(k)とを入力して、初期テーブルT(k)を更新し、確定したテーブルT'(k)をインデックス画像生成部１０５に供給する（図１の矢印１２６）。つまり、マッピング生成部１０４は、図４のステップＳ１０６乃至ステップＳ１１０の各処理を行う。
【００４３】
その際、マッピング生成部１０４は、下位層を切り捨てた場合の誤差が小さくなるようにマッピングを実行する。より具体的には、マッピング生成部１０４は、Ｎビットのインデックス画像IN(x,y)からL=N-Mビットの下位層を切り捨てた場合のインデックス画像IM(x,y)の誤差を最小とすることを目的とする。問題設定は以下の式（３）および式（４）のようになる。
【００４４】
【数３】
・・・（３）
【数４】
・・・（４）
【００４５】
上述した式（３）は、ヒストグラムH(k)を用いて再定式化することができる。まず、インデックス画像IN(x,y)のある画素において、下位Lビットを切り捨てる際に発生する誤差をq,(1≦q＜2L)とする。IM(x,y)全体において、誤差値qが発生する頻度Hqは、ヒストグラムH(k)を用いて、以下の式（５）のように表現することができる。
【００４６】
【数５】
・・・（５）
【００４７】
したがって、上述した式（３）は、以下の式（６）の表に再定式化することができる。
【００４８】
【数６】
・・・（６）
【００４９】
すなわち、インデックス画像の最適化問題は、ヒストグラムH(k)とテーブルT(k)のマッピング問題に帰着する。
【００５０】
上述した式（６）から、2Lpの位置(q=0)における頻度H(2Lp)は、MSEに影響を及ぼさないことが明らかである。従って、MSEの値を減少させるためには、頻度の順番に応じて、幾つかの画素値を2Lpの位置(p=0,1,…,2M-1)に移動させればよい。2Lpの位置は、合計2M個存在するため、ヒストグラムが疎である限り、この指針に基づいてマッピングが実行される。以下にその手順を示す。
【００５１】
マッピング生成部１０４は、図４のステップＳ１０６において、誤差が目標値より小さいか否かを判定する。すなわち、マッピング生成部１０４は、以下の式（７）若しくは式（８）のうち、少なくともいずれか一方が成立するか否かを判定する。
【００５２】
【数７】
・・・（７）
【数８】
・・・（８）
【００５３】
式（７）は、2Lp以外の位置に画素値が存在しないという条件である。この条件を満たす場合、下位ビットの切り捨てによる誤差は発生しない。また式（８）は、ヒストグラムの2Lpの位置に空きがないことを意味する。後述するように、ヒストグラムとテーブルの移動を１回行う度にu0の値が2L個増えるため、最終的にこの条件を満足し、マッピングが終了する。
【００５４】
このような判定が行われるステップＳ１０６において、誤差が目標値より小さくない、すなわち、式（７）および式（８）がいずれも成立しないと判定した場合、マッピング生成部１０４は、処理をステップＳ１０７に進める。
【００５５】
ステップＳ１０７において、マッピング生成部１０４は、q2H(2Lp+q)の最大値を与えるｐとｑの組み合わせを検出し、これをpm，qmと定義する。
【００５６】
ステップＳ１０８において、マッピング生成部１０４は、以下の式（９）に従ってヒストグラムH(k)の値の更新を行う。つまり、マッピング生成部１０４は、図９に示されるように、k=2Lpm+qm+1,…,u0-1のヒストグラムH(k)をk+2Lの位置に移動する。その後、2Lpm+qmのヒストグラムH(2Lpm+qm)を2L(pm+1)の位置に移動する。すなわち、H(k)は以下の式（９）のように更新される。
【００５７】
【数９】
・・・（９）
【００５８】
ステップＳ１０９において、マッピング生成部１０４は、ヒストグラムH(ｋ)の場合と同様に、画素値のテーブルT(ｋ)の値の更新を行う。ただし、図１０に示されるように、マッピング生成部１０４は、T(k)の単調増加の性質を崩さないように、ヒストグラムが０に設定された部分に対応するテーブルとして、直前のテーブル値をホールドして保持する。この結果、テーブルT(k)は、以下の式（１０）のように更新される。
【００５９】
【数１０】
・・・（１０）
【００６０】
ステップＳ１１０において、マッピング生成部１０４は、以下の式（１１）のように、u0の値の更新を行う。
【００６１】
【数１１】
・・・（１１）
【００６２】
ステップＳ１１０の処理を終了すると、マッピング生成部１０４は、処理をステップＳ１０６に戻す。すなわち、マッピング生成部１０４は、誤差が目標値より小さくなるまでステップＳ１０６乃至ステップＳ１１０の処理を繰り返す。
【００６３】
本開示のアルゴリズムは、上述した式（６）を完全に満たすものではない。例えば、ステップＳ１０８の処理において、ヒストグラムに０値を挿入したが、この零値の挿入には自由度が存在する。本開示のアルゴリズムでは、例えば図１１のような零値の挿入が行われているが、これを図１２に示されるように零値の位置を調整することで、式（６）におけるMSEをさらに低い値にすることができる。
【００６４】
ステップＳ１０６において、誤差が目標値より小さくなったと判定した場合、すなわち、式（７）若しくは式（８）が成立する場合、マッピング生成部１０４は、確定したテーブルT'(k)をインデックス画像生成部１０５に供給し（図１の矢印１２６）、処理をステップＳ１１１に進める。
【００６５】
ステップＳ１１１において、インデックス画像生成部１０５は、その確定したテーブルT'(k)を用いて、インデックス画像IN(x,y)を求める。このインデックス画像IN(x,y)を求める方法として幾つか考えられるが、例えば図１３に示されるように、原画像P(x,y)の画素値から、テーブルT(k)（０≦ｋ＜2N）の値を逆引きする関数R(k)を、以下の式（１２）のように定義する。
【００６６】
【数１２】
・・・（１２）
【００６７】
インデックス画像生成部１０５は、このような関数R(k)を用いて、インデックス画像IN(x,y)を以下の式（１３）のように求める。
【００６８】
【数１３】
・・・（１３）
【００６９】
つまり、図１３に示されるように、T(k)の値からそれに対応するR(k)の値が導き出され、その後に、図１４に示されるように、生成されたR(k)を順番に画素に沿って並べられることにより、IN(x,y)が生成される。
【００７０】
インデックス画像生成部１０５は、インデックス画像IN(x,y)を生成すると、そのインデックス画像IN(x,y)をビット深度変換装置１００の外部に出力する（図１の矢印１２７）。
【００７１】
その際、インデックス画像生成部１０５は、インデックス画像を上位ビット情報IM(x,y)と差分情報IL(x,y)に分離する。つまり、インデックス画像生成部１０５は、インデックス画像IN(x,y)のM+1ビット目を切り捨て、以下の式（１４）のように、上位Ｍビット画像IM(x,y)を生成する。また、インデックス画像生成部１０５は、インデックスの下位N-Mビットを用いて、以下の式（１５）のように、差分情報IL(x,y)を生成する。
【００７２】
【数１４】
・・・（１４）
【数１５】
・・・・（１５）
【００７３】
インデックス画像生成部１０５は、このようにインデックス画像を上位ビット情報IM(x,y)と差分情報IL(x,y)に分離した状態でも出力する。さらに、インデックス画像生成部１０５は、確定したテーブルT'(k)もビット深度変換装置１００の外部に出力する。
【００７４】
ステップＳ１１１の処理を終了すると、インデックス画像生成部１０５は、ビット深度変換処理を終了する。
【００７５】
以上のようにすることにより、ビット深度変換装置１００は、高ビット深度画像を損失なく表現することができる（ロスレス表現を可能にする）。
【００７６】
＜２．第２の実施の形態＞
［ビット深度逆変換装置］
図１５は、ビット深度逆変換装置の主な構成例を示すブロック図である。図１５に示されるビット深度逆変換装置２００は、図１のビット深度変換装置１００に対応する画像処理装置である。ビット深度逆変換装置２００は、ビット深度変換装置１００により生成されたインデックス画像IN(x,y)を用いて所定のビット深度の復元画像を生成する。
【００７７】
図１５に示されるように、ビット深度逆変換装置２００は、復元画像生成部２０１および上位層画像生成部２０２を有する。
【００７８】
［ビット深度逆変換処理の流れ］
図１６のフローチャートを参照して、ビット深度逆変換処理の流れの例を説明することにより、ビット深度逆変換装置２００の各部が実行する処理について説明する。
【００７９】
ビット深度逆変換装置２００には、ビット深度変換装置１００から出力される、確定したテーブルT'(k)およびインデックス画像IN(x,y)が供給される。復元画像生成部２０１および上位層画像生成部２０２は、その確定したテーブルT'(k)およびインデックス画像IN(x,y)（上位ビット情報IM(x,y)と差分情報IL(x,y)も含む）を取得する（図１５の矢印２２１および矢印２２２）。
【００８０】
確定したテーブルT'(k)およびインデックス画像IN(x,y)を取得すると、復元画像生成部２０１は、ステップＳ２０１において、それらを用いて、以下の式（１６）のように、復元画像P(x,y)を求める。
【００８１】
【数１６】
・・・（１６）
【００８２】
復元画像生成部２０１は、求めた復元画像P(x,y)をビット深度逆変換装置２００の外部に出力する（図１５の矢印２２３）。
【００８３】
ステップＳ２０２において、上位層画像生成部２０２は、確定したテーブルT'(k)および上位ビット情報IM(x,y)および差分情報IL(x,y)を用いて、上位層画像PM(x,y)と下位層画像PL(x,y)とを求める。上位層画像PM(x,y)は、インデックス画像IN(x,y)の各画素値の上位Ｍ（Ｍ＜Ｎ）ビット（すなわち、上位ビット情報IM(x,y)）から求めた復元画像である。下位層画像PL(x,y)は、インデックス画像IN(x,y)の各画素値の下位Ｌ（Ｌ＝Ｎ−Ｍ）ビット（すなわち、差分情報IL(x,y)）から求めた復元画像である。
【００８４】
上位層画像生成部２０２は、上位ビット情報IM(x,y)を用いて、以下の式（１７）のように、上位層画像PM(x,y)を求める。
【００８５】
【数１７】
・・・（１７）
【００８６】
この処理は、2N個存在するテーブル値の内、2M個のテーブル値を代表して使用することに相当する。
【００８７】
上位層画像生成部２０２は、式（１７）と同様にして、差分情報IＬ(x,y)を用いて、下位層画像PＬ(x,y)を求める。この処理は、2N個存在するテーブル値の内、2L個のテーブル値を代表して使用することに相当する。
【００８８】
上位層画像生成部２０２は、求めた上位層画像PM(x,y)および下位層画像PＬ(x,y)をビット深度逆変換装置２００の外部に出力する（図１５の矢印２２４および矢印２２５）。
【００８９】
ステップＳ２０２の処理を終了すると、上位層画像生成部２０２は、ビット深度逆変換処理を終了する。
【００９０】
このようにすることにより、ビット深度逆変換装置２００は、インデックス画像IN(x,y)から復元画像P(x,y)（上位層画像PM(x,y)および下位層画像PＬ(x,y)を含む）を求めることができる。
【００９１】
マッピング指針から、頻度の高い画素値に対する差分画像IL(x,y)は０である。それらの画素値に対しては正しいテーブル値に復元される。しかしながら、Ｍの値が小さくなると差分情報IL(x,y)の値が０でない確率が上昇する。その結果、本来の画素値ではない値が復元される確率も増えることになり、その結果復元画像のPSNRが減少してしまう。この場合、テーブル値T(k)を直接使うのではなく、以下の式（１８）のように同一インデックス値に対応するテーブル値の平均を復元画像の画素値として用いるようにしてもよい。このようにすることにより、PSNRの減少を抑制することができる。
【００９２】
【数１８】
・・・（１８）
【００９３】
また、元々のHDR画像が非常に疎であり、初期テーブルの使用数u0が、上位ビット画像で表現できる輝度の個数2Mよりも少ない場合、差分画像IL(x,y)はすべて０となる。その結果、上述した式（１７）のPM(x,y)=P(x,y)となり、PSNRは無限大となる。
【００９４】
［テーブル値T(k)の効率的表現］
なお、テーブル値T(k)は、それぞれＮビットの情報を持つ。しかしながら、本技術では、上述した式（４）に示されるように、輝度の順序を入れ替えないようにしているため、このテーブルT(k)は単調増加の関係にある。そこで、以下の式（１９）のように前のテーブル値との差分Td(k)を計算するようにしてもよい。
【００９５】
【数１９】
・・・（１９）
【００９６】
テーブルT(k)を直接記録せずに、このテーブル値の差分Td(k)を記録することで、テーブルに必要となるデータ量を削減することができる。
【００９７】
＜３．第３の実施の形態＞
［ビット深度変換装置］
図１７は、ビット深度変換装置の主な構成例を示すブロック図である。図１７に示されるビット深度変換装置３００は、高ビット深度画像を複数のブロックに分割し、ブロック毎にインデックス画像を生成する画像処理装置である。
【００９８】
図１７に示されるように、ビット深度変換装置３００は、画像ブロック分割部３０１、並びに、ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘを有する。
【００９９】
画像ブロック分割部３０１は、入力される高ビット深度画像（矢印３２１）を複数のブロックに分割し、各ブロックの画像を、ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘに供給する。
【０１００】
つまり、例えば、画像ブロック分割部３０１は、ブロック１の画像P1(x,y)をブロック１ビット深度変換部３０２−１に供給する（図１７の矢印３２２−１）。また、例えば、画像ブロック分割部３０１は、ブロック２の画像P2(x,y)をブロック２ビット深度変換部３０２−２に供給する（図１７の矢印３２２−２）。さらに、例えば、画像ブロック分割部３０１は、ブロックＸの画像PX(x,y)をブロックＸビット深度変換部３０２−Ｘに供給する（図１７の矢印３２２−Ｘ）。
【０１０１】
ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘは、それぞれ、図１のビット深度変換装置１００と同様の構成を有し、同様の処理を行う処理部である。ブロック１ビット深度変換部３０２−１、ブロック２ビット深度変換部３０２−２、・・・、ブロックＸビット深度変換部３０２−Ｘは、自身が対応するブロックの画像に対して、互いに独立して、ビット深度変換装置１００と同様の処理を行う。
【０１０２】
つまり、例えば、ブロック１ビット深度変換部３０２−１は、ブロック１の画像P1(x,y)に対してビット深度変換処理を行い、ブロック１のインデックス画像IN,1(x,y)とブロック１のテーブルT1(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−１）。また、例えば、ブロック２ビット深度変換部３０２−２は、ブロック２の画像P2(x,y)に対してビット深度変換処理を行い、ブロック２のインデックス画像IN,2(x,y)とブロック２のテーブルT2(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−２）。さらに、例えば、ブロックＸビット深度変換部３０２−Ｘは、ブロックＸの画像PX(x,y)に対してビット深度変換処理を行い、ブロックＸのインデックス画像IN,X(x,y)とブロックＸのテーブルTX(k)をビット深度変換装置３００の外部に出力する（図１７の矢印３２３−Ｘ）。
【０１０３】
［ビット深度変換処理の流れ］
図１８のフローチャートを参照して、この場合の、ビット深度変換処理の流れの例を説明する。
【０１０４】
ステップＳ３０１において、画像ブロック分割部３０１は、入力画像ｐ(x,y)を、Ｘ個のブロック画像P1(x,y)乃至PX(x,y)に分割する。ステップＳ３０２において、ブロック１ビット深度変換部３０２−１乃至ブロックＸビット深度変換部３０２−Ｘの中の処理対象のブロックに対応する処理部は、処理対象ブロックについて、図４のフローチャートを参照して説明したのと同様のビット深度変換処理を行う。ステップＳ３０３において、全てのブロックが処理されたと判定されるまで、ステップＳ３０２の処理が繰り返される。
【０１０５】
つまり、まず、ブロック１ビット深度変換部３０２−１が、ブロック１についてのビット深度変換処理を行い、次に、ブロック２ビット深度変換部３０２−２が、ブロック２についてのビット深度変換処理を行い、ブロック３以降同様に処理が繰り返され、最後にブロックＸビット深度変換部３０２−Ｘが、ブロックＸについてのビット深度変換処理を行う。そして、ステップＳ３０３において、ブロック１乃至ブロックＸの全てのブロックについてビット深度変換処理が行われたと判定された場合、ビット深度変換装置３００は、ビット深度変換処理を終了する。
【０１０６】
このような処理によって、インデックス画像IN,1(x,y)乃至IN,X(x,y)、並びに、テーブルT1（K）乃至TX（K）が生成される。つまり、各ブロックについて、インデックス画像とテーブルが生成される。
【０１０７】
以上のようにすることにより、ビット深度変換装置３００は、高ビット深度画像を損失なく表現することができる（ロスレス表現を可能にする）。
【０１０８】
＜４．第４の実施の形態＞
［ビット深度逆変換装置］
図１９は、ビット深度逆変換装置の主な構成例を示すブロック図である。図１９に示されるビット深度逆変換装置４００は、図１７のビット深度変換装置３００に対応する画像処理装置である。ビット深度逆変換装置４００は、ビット深度変換装置３００により生成された各ブロックのインデックス画像を用いて復元画像を生成する。
【０１０９】
図１９に示されるように、ビット深度逆変換装置４００は、ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘ、並びに、画像ブロック統合部４０２を有する。
【０１１０】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、対応するブロックのインデックス画像とテーブルを取得する。
【０１１１】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、ビット深度変換装置３００により生成されたブロック１のインデックス画像IN,1(x,y)とテーブルT1(k)を取得する（図１９の矢印４２１−１）。また、例えば、ブロック２ビット深度逆変換部４０１−２は、ビット深度変換装置３００により生成されたブロック２のインデックス画像IN,2(x,y)とテーブルT2(k)を取得する（図１９の矢印４２１−２）。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、ビット深度変換装置３００により生成されたブロックＸのインデックス画像IN,X(x,y)とテーブルTX(k)を取得する（図１９の矢印４２１−Ｘ）。
【０１１２】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、互いに独立して、取得したインデックス画像とテーブルを用いて、対応するブロックの復元画像を求める。
【０１１３】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、インデックス画像IN,1(x,y)とテーブルT1(k)を用いて、ブロック１の復元画像P1(x,y)を生成する。また、例えば、ブロック２ビット深度逆変換部４０１−２は、インデックス画像IN,2(x,y)とテーブルT2(k)を用いて、ブロック２の復元画像P2(x,y)を生成する。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、インデックス画像IN,X(x,y)とテーブルTX(k)を用いて、ブロックＸの復元画像PX(x,y)を生成する。
【０１１４】
ブロック１ビット深度逆変換部４０１−１、ブロック２ビット深度逆変換部４０１−２、・・・、ブロックＸビット深度逆変換部４０１−Ｘは、それぞれ、求めた復元画像を画像ブロック統合部４０２に供給する。
【０１１５】
つまり、例えば、ブロック１ビット深度逆変換部４０１−１は、ブロック１の復元画像P1(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−１）。また、例えば、ブロック２ビット深度逆変換部４０１−２は、ブロック２の復元画像P2(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−２）。さらに、例えば、ブロックＸビット深度逆変換部４０１−Ｘは、ブロックＸの復元画像PX(x,y)を、画像ブロック統合部４０２に供給する（図１９の矢印４２２−Ｘ）。
【０１１６】
画像ブロック統合部４０２は、供給された各ブロックの復元画像を統合し、１枚の復元画像P(x,y)を生成し、それをビット深度逆変換装置４００の外部に出力する（図１９の矢印４２３）。
【０１１７】
［ビット深度逆変換処理の流れ］
図２０のフローチャートを参照して、この場合の、ビット深度逆変換処理の流れの例を説明する。
【０１１８】
ステップＳ４０１において、ブロック１ビット深度逆変換部４０１−１乃至ブロックＸビット深度逆変換部４０１−Ｘの中の処理対象のブロックに対応する処理部は、処理対象ブロックについて、図１６のフローチャートを参照して説明したのと同様のビット深度逆変換処理を行う。ステップＳ４０２において、全てのブロックが処理されたと判定されるまで、ステップＳ４０１の処理が繰り返される。
【０１１９】
つまり、まず、ブロック１ビット深度逆変換部４０１−１が、ブロック１についてのビット深度逆変換処理を行い、次に、ブロック２ビット深度逆変換部４０１−２が、ブロック２についてのビット深度逆変換処理を行い、ブロック３以降同様に処理が繰り返され、最後にブロックＸビット深度逆変換部４０１−Ｘが、ブロックＸについてのビット深度逆変換処理を行う。そして、ステップＳ４０２において、ブロック１乃至ブロックＸの全てのブロックについてビット深度逆変換処理が行われたと判定された場合、ビット深度逆変換装置４００は、処理をステップＳ４０３に進める。
【０１２０】
ステップＳ４０３において、画像ブロック統合部４０２は、ステップＳ４０１において生成された各ブロックの復元画像を統合し、１枚の復元画像を生成し、ビット深度逆変換処理を終了する。
【０１２１】
このようにすることにより、ビット深度逆変換装置４００は、ブロック毎に生成されたインデックス画像IN,Block(x,y)から復元画像P(x,y)を求めることができる。なお、ビット深度逆変換装置４００は、ビット深度逆変換装置２００の場合と同様に、上位層画像PM(x,y)および下位層画像PＬ(x,y)を生成することもできる。
【０１２２】
その場合、ブロック１ビット深度逆変換部４０１−１乃至ブロックＸビット深度逆変換部４０１−Ｘが、それぞれのブロックについて、上位層画像PM,Block(x,y)および下位層画像PＬ,Block(x,y)を求め、画像ブロック統合部４０２が、復元画像P(x,y)の場合と同様に、各ブロックの上位層画像PM,Block(x,y)および下位層画像PＬ,Block(x,y)を、それぞれ統合し、画像全体の上位層画像PM(x,y)および下位層画像PＬ(x,y)を生成する。
【０１２３】
以上に説明した第３の実施の形態および第４の実施の形態が、画像を複数ブロックに分割する場合の画像処理の説明である。言うまでもなく、画像を複数ブロックに分割した方が、図６で示したヒストグラムの偏りは大きくなるので、より少ないビット数で画素の値域を表現することができる。従って、第３の実施の形態および第４の実施の形態による量子化に伴うビット削減に起因する画質劣化は、より低減される。
【０１２４】
ただし、この場合、Ｘブロック分のテーブルT1（K）乃至TX（K）を送信する必要が生じるので、１個のテーブルT(k)を伝送すればよい第１の実施の形態や第２の実施の形態の方法の方が、その分符号量の増大を抑制することができる。
【０１２５】
＜５．第５の実施の形態＞
［実験例］
本実施の形態においては、上述した各実施の形態におけるビット深度変換と逆変換の方法について、図２１Ａおよび図２１Ｂに示される２つのテスト画像（ビット深度N=12）に対する実験結果の例を説明する。ヒストグラム抽出の結果、図２１Ａに示される医療画像は、非ゼロの画素数u0=1853であり、図２１Ｂに示される写真画像は、非ゼロの画素数u0=2981であった。従って、図２１Ａに示される医療画像は、211(=2048) > 1853なので、M=11ビットで完全な可逆な表現が可能であることがわかる。そのため、本開示の手法を用いれば、上位Ｍビットの上位層インデックス画像IM(x,y)のみで、完全に原画像を復元することができる（PSNR＝∞）。これに対してLloyd-Max法の場合、この条件下でも差分情報が無ければ、原画の復元は不可能である。
【０１２６】
次に、図２１Ａに示される医療画像の実験結果を図２２の表に示す。図２２の表において、縦軸は各処理の種類、横軸は上位層のビット数Mを示している。次にMethod-AとMethod-Bについて説明する。
【０１２７】
実験ではまず、Ｍビットの上位ビット画像IM(x,y)とテーブルT'(k)のみを用いて、Ｎビット画像を復元する。言うまでもなく、下位層の情報が無いので、復元画像は原画像に比べて劣化する。ここでは、Ｍの値を８から１１まで変化させながら画像劣化の度合いを評価する。
【０１２８】
Method-A：上述した式（１７）によって実現される方式で、テーブルT'(K)を直接使用する。
Method-B：上述した式（１８）に示される様にテーブル値の平均値を使用する。
【０１２９】
また、第３の実施の形態および第４の実施の形態の、画像を複数のブロックに分割してから上位層と下位層とに分割する手法が、図２２の表のMethod-A（ブロック分割）、Method-B（ブロック分割）である。
【０１３０】
この場合のMethod-Aは、Ｍの値の減少に伴い、Lloyd-Max法や四捨五入よりも低いPSNRになっている。これは本来の画素値とテーブルとの誤差が大きくなるためである。テーブルの平均を用いたこの場合のMethod-Bにおいては、この問題が改善されている。
【０１３１】
図２２の表においては、従来最も優れているとされていたLloyd-Max法に比べて、Method-B（ブロック分割）の方が、M=8以外のすべての値で、PSNRが向上している。特にM＝10以上でLloyd-Max法に比べた優位性が大きくなっているのが確認できる。また、既に述べた様に、本手法では１１ビットで完全に可逆が実現できる。
【０１３２】
次に図２１Ｂの写真画像の結果について図２３に示す。Lloyd-Max法に比べて、Method-B（ブロック分割）の方が、M=10以上の値で、PSNRが向上している。またM=8では逆にLloyd-Max法よりもかなり悪い値になっている。これより、ＮとＭの差がある程度大きくなると、本来の画素値とテーブルとの誤差が大きくなる傾向が強くなる。
【０１３３】
従って、例えば、ビット深度変換装置として、Lloyd-Max法で量子化（ビット深度変換）を行うLloyd-Max量子化部と、図１７のビット深度変換装置３００と同様の構成を有し、同様の処理（Method-B（ブロック分割）による量子化処理）を行う本手法量子化部と、量子化（ビット深度変換）方法を選択する制御部を設け、その制御部が、ヒストグラム測定の結果、出現度数が１上の画素数Xが、X＞2M-1且つ（N-M）≧P（Pは例えば２）の場合、Lloyd-Max法を選択し、Lloyd-Max量子化部を制御してLloyd-Max法によるビット深度変換処理（量子化処理）を実行させ、それ以外の場合、Method-B（ブロック分割）を選択し、本手法量子化部を制御してMethod-B（ブロック分割）によるビット深度変換処理（量子化処理）を実行させるようにしてもよい。これによって常に最適なビット表現が可能になる。なお、逆変換処理は、選択された各手法に応じた手法で行うようにすればよい。また、Lloyd-Max法との切り替えを行う手法は、Method-B（ブロック分割）以外の本手法であってももちろんよい。
【０１３４】
［式（４）の制約］
次に上述した式（４）におけるテーブル値に対する制約条件の必要性について検証する。仮に、Ｍビットの上位画像IM(x,y)を作成するにあたり、上述した式（４）を無視し、式（３）のMSEを最小化するという条件のみでインデックス画像IN(x,y)を作成するとする。
【０１３５】
図２４は、インデックス画像IN(x,y)に対する上位ビット画像IM(x,y)のPSNRと、原画像P(x,y)に対する復元画像PM(x,y)のPSNRを示したものである。図２４の表から明らかなように、このようにMSEのみを最小化する場合、上位ビット画像とPSNR値は高いものの、復元画像は非常に低いPSNRになる。したがって、式（４）による制約条件を適用することが望ましい。
【０１３６】
また、テーブルのデータ量について検証する。本技術では、上述した式（４）を適用することにより、テーブルT(k)の代わりに、式（１９）のテーブル値の差分Td(k)を保存することができる(0≦k＜2N)。
【０１３７】
図２５および図２６は、このTd(k)をバイナリで書き出し、bzip2アルゴリズムを用いてデータ圧縮した結果を示す。本技術はＭが変化してもテーブルのサイズは変わらないため、T(k)のデータサイズは16ビット(実質12ビット)×2Nとなり、全体で8192バイトとなる。
【０１３８】
これに対して、図２５および図２６に示されるように、Lloyd-maxのテーブルについても前のテーブル値との差分を計算し、同様の処理を行った。こちらのデータサイズは上位画像のビット数Ｍに依存する。また、Lloyd-maxのテーブルのデータ量には下位層を表現するためのデータ量は含まれていない。
【０１３９】
なお、図２５および図２６には、本技術のテーブル値T(k)を直接圧縮した場合のサイズも開示されている。
【０１４０】
図２５および図２６から、T(k)を直接保存せず、Td(k)を保存することの有効性を確認することができる。本技術では、2N個の全てのテーブル値を保持しているにもかかわらず、2MのLloyd-maxとほぼ同程度のデータ量となっている。
【０１４１】
＜６．第６の実施の形態＞
［画像処理装置］
図２７は、第１の実施の形態乃至第４の実施の形態で説明した各装置を処理部として用いた画像処理装置を具体的に実現するブロック図である。これらの構成要素は、例えばカメラシステムに内蔵されている。
【０１４２】
図２７に示される画像処理装置５００は、ビット深度変換処理部５０１、記憶部５０２、およびビット深度逆変換処理部５０３を有する。
【０１４３】
カメラに内蔵された撮像素子（例えばCCD、CMOSセンサ）でキャプチャした映像（Ｎビット）は、ビット深度変換処理部５０１に供給される（図２７の矢印５２１）。ビット深度変換処理部５０１は、その撮像素子画像を、第１の実施の形態または第３の実施の形態で説明した方法でＭビット（Ｎ＞Ｍ）の上位層とそれ以外の下位層とに分割する。
【０１４４】
Ｍビット画像（インデックス画像IM(x,y)）は、記憶部５０２に供給され（図２７の矢印５２２）、記憶（保存）される。通常のデジタルカメラでは、内蔵メモリである記憶部５０２から画像データを読みだしてJPEG圧縮を行い、圧縮ファイルをカメラ外付けのメモリカード等に記録する方法が一般的である。ここでは本技術の本題から逸れるので、省いてある。
【０１４５】
記憶部５０２から読み出されたＭビットの画像データは、ビット深度逆変換処理部５０３に供給される（図２７の矢印５２３）。ビット深度逆変換処理部５０３は、その画像データをＮビットに再度変換する。変換後の復元画像（Ｎビット）は、例えばＮビット表示可能な表示部５０４に供給され（図２７の矢印５２４）る。表示部５０４は、供給された復元画像を表示する。
【０１４６】
このように、インデックス画像のビット深度のビット数を低減させることにより、必要なメモリ容量を低減させることができる。これにより、製造コストや消費電力の増大を抑制することができる。
【０１４７】
以上に説明した各装置は、それぞれ、上述した以外の構成を含むようにしてももちろんよい。また、１つの装置としてだけでなく、複数の装置よりなるシステムとして構成されるようにしてもよい。例えば、撮像素子（CMOS、CCDセンサ）からキャプチャした画像を用いた機器やデバイス、撮像素子画像をメモリに書き込むまでの圧縮回路、デジタルスチルカメラ、動画用カムコーダ、医療用画像カメラ、医療用内視鏡、監視カメラ、デジタルシネマ撮影用カメラ、両眼画像カメラ、多眼画像カメラ、LSIチップでのメモリ削減回路、PC上のオーサリング・ツールまたはそのソフトウェア・モジュール等として構成されるようにしてもよい。
【０１４８】
＜７．第７の実施の形態＞
［パーソナルコンピュータ］
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。この場合、例えば、図２８に示されるようなパーソナルコンピュータとして構成されるようにしてもよい。
【０１４９】
図２８において、パーソナルコンピュータ６００のCPU（Central Processing Unit）６０１は、ROM（Read Only Memory）６０２に記憶されているプログラム、または記憶部６１３からRAM（Random Access Memory）６０３にロードされたプログラムに従って各種の処理を実行する。RAM６０３にはまた、CPU６０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１５０】
CPU６０１、ROM６０２、およびRAM６０３は、バス６０４を介して相互に接続されている。このバス６０４にはまた、入出力インタフェース６１０も接続されている。
【０１５１】
入出力インタフェース６１０には、キーボード、マウスなどよりなる入力部６１１、CRT（Cathode Ray Tube）ディスプレイやLCD（Liquid Crystal Display）等のディスプレイ、並びにスピーカなどよりなる出力部６１２、フラッシュメモリ等SSD（Solid State Drive）やハードディスクなどよりなる記憶部６１３、有線LAN（Local Area Network）や無線LANのインタフェースやモデムなどよりなる通信部６１４が接続されている。通信部６１４は、インターネットを含むネットワークを介しての通信処理を行う。
【０１５２】
入出力インタフェース６１０にはまた、必要に応じてドライブ６１５が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア６２１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部６１３にインストールされる。
【０１５３】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、ネットワークや記録媒体からインストールされる。
【０１５４】
この記録媒体は、例えば、図２８に示されるように、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM（Compact Disc - Read Only Memory）,DVD（Digital Versatile Disc）を含む）、光磁気ディスク（MD（Mini Disc）を含む）、若しくは半導体メモリなどよりなるリムーバブルメディア６２１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているROM６０２や、記憶部６１３に含まれるハードディスクなどにより構成される。
【０１５５】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１５６】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１５７】
また、本明細書において、システムとは、複数のデバイス（装置）により構成される装置全体を表すものである。
【０１５８】
また、以上において、１つの装置（または処理部）として説明した構成が、複数の装置（または処理部）として構成されるようにしてもよい。逆に、以上において複数の装置（または処理部）として説明した構成が、まとめて１つの装置（または処理部）として構成されるようにしてもよい。また、各装置（または各処理部）の構成に上述した以外の構成が付加されるようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置（または処理部）の構成の一部が他の装置（または他の処理部）の構成に含まれるようにしてもよい。つまり、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【０１５９】
なお、本技術は以下のような構成も取ることができる。
（１） Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、
前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、
前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、
前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、
前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部と
を備える画像処理装置。
（２） 前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新する
前記（１）に記載の画像処理装置。
（３） 前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、
前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、
前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、
前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、
前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、
前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成する
前記（１）または（２）に記載の画像処理装置。
（４） ビット深度変換の手法を選択する制御部と、
Lloyd-Max法による量子化を行うLloyd-Max量子化部と
をさらに備え、
前記制御部は、
前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、
それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させる
前記（１）乃至（３）のいずれかに記載の画像処理装置。
（５） 変数Pの値は2である
前記（４）に記載の画像処理装置。
（６） Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、
ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、
テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、
並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、
更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、
インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する
画像処理方法。
（７） Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、
前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部と
を備える画像処理装置。
（８） 前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
前記（７）に記載の画像処理装置。
（９） 前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
前記（７）または（８）に記載の画像処理装置。
（１０） 前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割する
前記（７）乃至（９）のいずれかに記載の画像処理装置。
（１１） 画像処理装置の画像処理方法であって、
復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、
上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する
画像処理方法。
【符号の説明】
【０１６０】
１００ ビット深度変換装置， １０１ ヒストグラム生成部， １０２ 初期テーブル生成部， １０３ ヒストグラムソート部， １０４ マッピング生成部， １０５ インデックス画像生成部， ２００ ビット深度逆変換装置， ２０１ 復元画像生成部， ２０２ 上位層画像生成部， ３００ ビット深度変換装置， ３０１ 画像ブロック分割部， ４００ ビット深度逆変換装置， ４０２ 画像ブロック統合部， ５００ 画像処理装置， ５０１ ビット深度変換処理部， ５０２ 記憶部， ５０３ ビット深度逆変換処理部
【特許請求の範囲】
【請求項１】
Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、
前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、
前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、
前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、
前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部と
を備える画像処理装置。
【請求項２】
前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新する
請求項１に記載の画像処理装置。
【請求項３】
前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、
前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、
前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、
前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、
前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、
前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成する
請求項１に記載の画像処理装置。
【請求項４】
ビット深度変換の手法を選択する制御部と、
Lloyd-Max法による量子化を行うLloyd-Max量子化部と
をさらに備え、
前記制御部は、
前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、
それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させる
請求項１に記載の画像処理装置。
【請求項５】
変数Pの値は2である
請求項４に記載の画像処理装置。
【請求項６】
Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、
ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、
テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、
並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、
更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、
インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する
画像処理方法。
【請求項７】
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、
前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部と
を備える画像処理装置。
【請求項８】
前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
請求項７に記載の画像処理装置。
【請求項９】
前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
請求項７に記載の画像処理装置。
【請求項１０】
前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割する
請求項７に記載の画像処理装置。
【請求項１１】
画像処理装置の画像処理方法であって、
復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、
上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する
画像処理方法。
【請求項１】
Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置であって、
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成するヒストグラム生成部と、
前記ヒストグラム生成部により生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成するテーブル生成部と、
前記テーブル生成部により生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替える並び替え部と、
前記テーブル生成部により生成されたテーブルと、前記並び替え部により並び替えられたヒストグラムを更新する更新部と、
前記更新部により更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成するインデックス画像生成部と
を備える画像処理装置。
【請求項２】
前記更新部は、（N-M）ビットの下位層の画像を切り捨てた場合の誤差が最小になるように、前記テーブルおよび前記ヒストグラム内の値の配置を並び替えることにより、前記テーブルおよび前記ヒストグラムを更新する
請求項１に記載の画像処理装置。
【請求項３】
前記Nビット深度の画像を複数のブロックに分割する分割部をさらに備え、
前記ヒストグラム生成部は、前記分割部により分割されたブロック毎に独立して前記ヒストグラムを生成し、
前記テーブル生成部は、前記ヒストグラム生成部により生成されたブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記テーブルを生成し、
前記並び替え部は、前記テーブル生成部により生成されたブロック毎のテーブルを用いて、前記ブロック毎のヒストグラムをそれぞれ並び替え、
前記更新部は、前記ブロック毎のテーブルと、前記並び替え部により並び替えられた前記ブロック毎のヒストグラムを更新し、
前記インデックス画像生成部は、前記更新部により更新された前記ブロック毎のテーブルおよび前記ブロック毎のヒストグラムを用いて、前記ブロック毎に独立して前記インデックス画像を生成する
請求項１に記載の画像処理装置。
【請求項４】
ビット深度変換の手法を選択する制御部と、
Lloyd-Max法による量子化を行うLloyd-Max量子化部と
をさらに備え、
前記制御部は、
前記ヒストグラム生成部により生成された前記ヒストグラムから出現度数が１以上の画素数X を検出して、X ＞（2M−１）であり、且つ（N-M）≧ P以上の場合、前記Lloyd-Max量子化部を制御し、Lloyd-max法によるビット深度変換を実行させ、
それ以外の場合、前記テーブル制御部、前記並び替え部、前記更新部、および前記インデックス画像生成部を制御し、前記インデックス画像を生成させる
請求項１に記載の画像処理装置。
【請求項５】
変数Pの値は2である
請求項４に記載の画像処理装置。
【請求項６】
Nビット深度の画像を、Mビット深度の上位層と、それ以外の下位層とに変換する画像処理装置の画像処理方法であって、
ヒストグラム生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、
テーブル生成部は、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、
並び替え部は、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、
更新部は、生成されたテーブルと、並び替えられたヒストグラムを更新し、
インデックス画像生成部は、更新されたテーブルおよびヒストグラムを用いて、Nビット深度のインデックス画像を生成する
画像処理方法。
【請求項７】
Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する復元画像生成部と、
前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する上位層画像生成部と
を備える画像処理装置。
【請求項８】
前記復元画像生成部は、ブロック毎の前記Nビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
請求項７に記載の画像処理装置。
【請求項９】
前記上位層画像生成部は、前記ブロック毎のMビット深度のインデックス画像と、前記ブロック毎の更新されたテーブルとを用いて、Nビット深度のブロック画像を復元する
請求項７に記載の画像処理装置。
【請求項１０】
前記上位層画像生成部は、前記ヒストグラムから出現度数が１以上の画素数Xを検出して、X ≦（2M−１）ならば、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割する
請求項７に記載の画像処理装置。
【請求項１１】
画像処理装置の画像処理方法であって、
復元画像生成部は、Nビット深度の画像の各画素値の出現度数を示すヒストグラムを生成し、生成された前記ヒストグラムの出現度数が１以上の画素を順番に並べたテーブルを生成し、生成されたテーブルを用いて、前記ヒストグラム内の値の配置を並び替え、生成されたテーブルと、並び替えられたヒストグラムを更新し、更新されたテーブルおよびヒストグラムを用いて生成した、Nビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元し、
上位層画像生成部は、前記Nビット深度のインデックス画像を、上位層のMビット深度のインデックス画像と、下位層の（N-M）ビットのインデックス画像に分割し、前記Mビット深度のインデックス画像と、前記更新されたテーブルとを用いて、前記Nビット深度の画像を復元する
画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【公開番号】特開２０１２−２１３１３４（Ｐ２０１２−２１３１３４Ａ）
【公開日】平成２４年１１月１日（２０１２．１１．１）
【国際特許分類】
【出願番号】特願２０１１−２７２４５９（Ｐ２０１１−２７２４５９）
【出願日】平成２３年１２月１３日（２０１１．１２．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【出願人】（３０５０２７４０１）公立大学法人首都大学東京 (385)
【Ｆターム（参考）】
【公開日】平成２４年１１月１日（２０１２．１１．１）
【国際特許分類】
【出願日】平成２３年１２月１３日（２０１１．１２．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【出願人】（３０５０２７４０１）公立大学法人首都大学東京 (385)
【Ｆターム（参考）】
[ Back to top ]