データ処理装置およびデータ処理方法
【課題】データの転送効率を維持した状態で、データ転送に係る消費電力を低減することができるデータ処理装置およびデータ処理方法を提供する。
【解決手段】データバスのバス幅を第１のビット範囲と第２のビット範囲とに分割し、同じ種類の情報を持つ入力データの同一ビットがデータバスの同一ビットで連続して転送されるように、第１のビット範囲用の第１のデータを生成する第１のデータ生成部と、第２のビット範囲用の第２のデータを生成する第２のデータ生成部と、第１のデータと第２のデータとを結合した変換データを生成するデータ結合部と、を具備し、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの変換データを１つの転送単位とし、予め定められた数の転送単位を１つの変換単位として、入力データを変換単位毎に配置するデータ変換部、を備える。
【解決手段】データバスのバス幅を第１のビット範囲と第２のビット範囲とに分割し、同じ種類の情報を持つ入力データの同一ビットがデータバスの同一ビットで連続して転送されるように、第１のビット範囲用の第１のデータを生成する第１のデータ生成部と、第２のビット範囲用の第２のデータを生成する第２のデータ生成部と、第１のデータと第２のデータとを結合した変換データを生成するデータ結合部と、を具備し、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの変換データを１つの転送単位とし、予め定められた数の転送単位を１つの変換単位として、入力データを変換単位毎に配置するデータ変換部、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、データ処理装置およびデータ処理方法に関する。
【背景技術】
【０００２】
静止画用カメラ、動画用カメラ、医療用内視鏡カメラ、または産業用内視鏡カメラなどの撮像装置では、撮像装置の画素数や速度の向上に伴って、膨大な画素のデータ（以下、「画素データ」という）が含まれる画像データを処理している。このような撮像装置においては、撮像装置内の各処理ブロックが撮影によって得られた画像データを処理する際に、データを一時的に記憶するメモリが利用されている。メモリには、各処理段階の画像データが一時記憶される。
【０００３】
図１４は、従来の撮像装置の概略構成を示したブロック図である。例えば、図１４に示した撮像装置における撮影動作では、以下のような手順で画像データの処理が行われている。
（手順１）：まず、撮像処理部が、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ：電荷結合素子）型の固体撮像素子によって得られた画像データを、出力ＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）部を介してメモリに転送して一時記憶する。
（手順２）：続いて、画像処理部が、メモリに一時記憶している画像データを、入力ＤＭＡ部を介して読み出す。そして、画像処理部は、読み出した画像データに対して記録用の画像処理や、表示用の画像処理を行う。その後、画像処理した後の画像データを、出力ＤＭＡ部を介してメモリに転送して一時記憶する。
（手順３）：続いて、表示処理部が、表示用の画像処理がされた画像データを、入力ＤＭＡ部を介して読み出し、表示デバイスに表示させる。
【０００４】
このように、撮像装置では、前段の処理ブロックが、画像データをメモリに一時記憶する。そして、後段の処理ブロックが、メモリに記録されている画像データを読み出して、次の処理を行う。このように、撮像装置内の各処理ブロックが、メモリを介して処理対象の画像データの受け渡しを行うことによって、撮像装置の全体の処理を順次行っている。
【０００５】
近年、静止画用カメラ、動画用カメラなどの撮像装置においては、長い時間連続して使用できることが望まれており、撮像装置内の電気回路の消費電力を低減させる技術が必要とされている。撮像装置の消費電力を低減させるための１つの方法として、各処理ブロック（電気回路）とメモリとの間での画像データの転送速度を高速にする方法が挙げられる。画像データの転送速度の高速化は、例えば、撮像装置が動作するクロックの周波数を高くしたり、各処理ブロックとメモリ間の画像データの転送期間を短縮させたりすることによって実現することができる。これらの方法は、画像データの転送速度を高速にすることによって、画像データの転送に係る消費電力を低減させるものである。
【０００６】
処理ブロックとメモリ間の画像データの転送期間を短縮させるための技術として、特許文献１に開示されているようなパッキングという技術が知られている。特許文献１で開示されたパッキング技術は、画像データ内の各画素データをメモリに転送する際に使用されるデータバスのバス幅を拡張し、隣接する複数の画素データをデータバスに配置（パッキング）することによって、複数の画素データを一度に転送するという技術である。この技術によって、全ての画素データを転送するために要するデータ転送の回数を、画素データを１画素毎に転送する以前のデータ転送に比べて少なくすることができ、画像データのデータ転送に係る期間を短縮することができる。例えば、図１５に示したような、１６行×１６列のベイヤー配列のＣＣＤから得られた画素データをメモリに転送する場合、特許文献１で開示されたパッキング技術では、４画素分の画素データを一度に転送する単位とすることによって、画像データの転送期間を１／４に短縮することができる。これにより、画素データを１画素ずつメモリに転送する場合に比べて、撮像装置内の電気回路の消費電力を低減させることができる。
【０００７】
また、さらに画像データの転送期間を短縮する技術として、ＤＭＡのバースト転送を利用したパッキング方法が考えられる。これは、予め定められた一定のサイクル数でメモリにアクセスする単位である１バーストを、画素データをパッキングする単位として考える方法である。図１６に画素データのパッキングの一例を示す。図１６（ａ）は、特許文献１で開示されたパッキング方法で図１５に示した画素データをパッキングした場合の一例を示し、図１６（ｂ）は、バーストの単位で図１５に示した画素データをパッキングした場合の一例を示している。なお、図１６では、画素データをメモリに転送する際に使用するデータバス（以下、「メモリバス」という）のバス幅（以下、「メモリバス幅」という）を３２ｂｉｔとし、バースト転送における１サイクル分のメモリアクセス（以下、「１転送」という）を４回、すなわち、４転送で１回のバースト転送を行う場合の例を示している。そして、図１６（ａ）および図１６（ｂ）では、それぞれ上から順に、１画素の画素データの分解能、すなわち、画素データのビット数が、９ｂｉｔ、１０ｂｉｔ、１２ｂｉｔ、および１４ｂｉｔである場合の一例を示している。
【０００８】
図１６からわかるように、図１６（ａ）に示した特許文献１で開示されたパッキング方法では、１転送あたり２画素分の画素データがメモリバスに配置され、１バーストあたり８画素分の画素データをメモリに転送することができる。これに対して図１６（ｂ）に示したバースト単位でのパッキング方法では、それぞれ、１４画素分、１２画素分、１０画素分、および９画素分の画素データをメモリに転送することができる。これは、特許文献１で開示されたパッキング方法は、メモリバス幅、すなわち、１転送の単位で画素データを配置（パッキング）するため、配置する複数の画素データのビット数の合計がメモリバス幅を超えないようにする必要がある。このため、特許文献１で開示されたパッキング方法では、メモリバス幅内に画素データを割り当てることができないビット（以下、「未使用ビット」という）が多く存在してしまう。これに対し、バースト単位でのパッキング方法は、１バーストの単位で画素データを配置（パッキング）するため、図１６（ｂ）のように、配置する複数の画素データのビット数の合計がメモリバス幅を超えてしまう場合でも、１バーストを超えなければ次の転送に画素データを配置（パッキング）することができる。すなわち、バースト単位でのパッキング方法では、メモリバス幅が画素データの分解能の整数倍ではない場合においても、１転送の単位を跨いで画素データを配置（マッピング）することができるため、未使用ビットを少なくすることができるのである。このことにより、バースト単位でのパッキング方法は、特許文献１で開示されたパッキング方法よりも、同じ時間で多くの画素データをメモリに転送する、すなわち、画像データの転送期間を短縮することができ、撮像装置内の電気回路の消費電力を、さらに低減させることができる。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００７−３１２３５８号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
一般的に、データの変化（データの“０”→“１”、もしくは“１”→“０”の変化（反転））が少ない方が、消費電力が少ないことが知られている。このため、撮像装置内の各処理ブロック（電気回路）とメモリとの間のメモリバス上のデータの変化を少なくすることによって、撮像装置の消費電力を低減させることも考えられる。図１７は、撮像装置内の処理ブロックとメモリとの間のデータバス（メモリバス）上のデータの変化と消費電力との関係を説明する図である。図１７（ａ）は、図１４に示した撮像装置における撮像処理部とメモリとの間のメモリバスのバス幅が３２ｂｉｔである場合の一例を示している。そして、図１７（ｂ−１）〜（ｂ−３）では、メモリバス上のデータの変化を模式的に示している。図１７の一例においては、メモリバス上のデータの変化がない図１７（ｂ−１）の場合が、最も消費電力が少なく、メモリバス上のデータの変化が最も多い図１７（ｂ−３）の場合が、最も消費電力が多くなる。
【００１１】
このことから、撮像装置内の各処理ブロックとメモリ間のバースト転送において、連続する２転送間の画素データ（例えば、図１６に示した各バースト転送の１転送目と２転送目との画素データ）の変化が多いと、画像データの転送に係る消費電力も多くなってしまうことがわかる。すなわち、メモリバス上の同一ビットが２転送間で変化している個数（ビット数）に比例して、画像データの転送に係る消費電力が変化する。
【００１２】
一般的に、画像データは、隣接する画素間でデータの変化量が小さく、隣接する画素のそれぞれの画素データの同一のビットで比較すると、値が反転しているビットの方が、値が反転していないビットよりも少ないことが予想される。ここで、図１６に示した、特許文献１で開示されたパッキング方法と、バースト単位でのパッキング方法とを比較すると、図１８に示したように、同一色の画素データで同一のビットが揃っている、特許文献１で開示されたパッキング方法の方が、画像データの転送に係る消費電力が少ないと考えられる。なお、図１８は、図１６に示した特許文献１で開示されたパッキング方法と、バースト単位でのパッキング方法とにおいて、１画素の画素データのビット数が９ｂｉｔである場合を示している。
【００１３】
より具体的には、図１８（ａ）に示した特許文献１で開示されたパッキング方法では、範囲Ａに示したメモリバスの最下位ビットは、全て同一色の画素データの同一ビット（最下位ビット）である。これに対して、図１８（ｂ）に示したバースト単位でのパッキング方法では、範囲Ｂに示したメモリバスの最下位ビットは、全て異なる色の画素データの異なるビットである。このことから、バースト単位で画像データをパッキングすることによって、メモリバス上に配置される画素データのビットの位置が、連続する２転送間で異なってしまうと、メモリバス上の同一ビットの変化量が多くなり、画像データの転送に係る消費電力を増加させてしまうことがわかる。
【００１４】
すなわち、図１８（ａ）に示した特許文献１で開示されたパッキング方法は、画像データの転送に係る消費電力が少ないが、データの転送効率が低い。また、図１８（ｂ）に示したバースト単位でのパッキング方法は、データの転送効率はよいが、画像データの転送に係る消費電力が多い。
【００１５】
このように、バースト単位での画素データのパッキングでは、より多くの画素データをメモリバスに配置することによって、結果的に画素データの転送期間を短縮し、画像データの転送に係る消費電力を低減させることができるが、メモリバス上に配置される画素データのビットの位置が、連続する２転送間で異なっているため、画像データの転送に係る消費電力の低減効果を十分に得ることができていない、という問題がある。
【００１６】
また、特許文献１で開示されたパッキング方法においては、例えば、図１９に示したように、画素データをパッキングする１転送内に、３画素分の画素データを配置（パッキング）することができる。しかし、この場合には、例えば、範囲Ｃに示したメモリバスの最下位ビットが、画素データの同一ビット（最下位ビット）ではあるが、異なる色の画素データになってしまう。画素データは、色が異なるとその値が大きく異なる可能性が高く、特許文献１で開示されたパッキング方法でも、１転送内の画素データの配置によっては、画像データの転送に係る消費電力を低減できていないことになってしまう。
【００１７】
本発明は、上記の課題認識に基づいてなされたものであり、データの転送効率を維持した状態で、データ転送に係る消費電力を低減することができるデータ処理装置およびデータ処理方法を提供することを目的としている。
【課題を解決するための手段】
【００１８】
上記の課題を解決するため、本発明のデータ処理装置は、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換部、を備え、前記データ変換部は、前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成部と、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成部と、前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合部と、を具備する、ことを特徴とする。
【００１９】
また、本発明の前記第２のデータ生成部は、前記第２の数の前記入力データを、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記入力データの各ビットを順次割り当てる、ことを特徴とする。
【００２０】
また、本発明の前記第２のデータ生成部は、前記第２の数の前記入力データのそれぞれを、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割し、該分割した上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一のビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のデータで同一のビットに割り当てられるように、前記第２のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、前記上位ビットの入力データを割り当てた後、残っている同一の前記変換単位に含まれる前記第２のデータで連続するように、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを順次割り当てる、ことを特徴とする。
【００２１】
また、本発明の前記第２のデータ生成部は、前記入力データを割り当てた後、残っている前記第２のデータの各ビットに、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータをそれぞれ割り当てる、ことを特徴とする。
【００２２】
また、本発明の前記データ変換部は、前記入力データを予め定められたビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割する入力データ分割部を、さらに備え、前記第１のデータ生成部は、前記第１のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、第２のデータ生成部は、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを割り当てる、ことを特徴とする。
【００２３】
また、本発明のデータ処理装置は、複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換部、を備え、前記データ逆変換部は、前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割部と、前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元部と、前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元部と、前記分離されたそれぞれの前記入力データを選択するデータ選択部と、を具備する、ことを特徴とする。
【００２４】
また、本発明の前記第２のデータは、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記第２の数の前記入力データの各ビットが順次割り当てられている、ことを特徴とする。
【００２５】
また、本発明の前記第２のデータは、前記第２の数の前記入力データのそれぞれが、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割され、該分割された上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一の各ビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のビット範囲の同一の各ビットに割り当てられ、該分割された下位ビットの入力データの各ビットが、前記上位ビットの入力データの各ビットに割り当てられた後、残っている同一の前記変換単位に含まれる前記第２のビット範囲の各ビットに、前記第２のビット範囲で連続するように順次割り当てられている、ことを特徴とする。
【００２６】
また、本発明の前記第２のデータは、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータが割り当てられている、ことを特徴とする。
【００２７】
また、本発明の前記データ逆変換部は、前記第１のビット範囲の各ビットに割り当てられた前記入力データの予め定められたビット数の上位ビットの入力データと、前記第２のビット範囲の各ビットに割り当てられた前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとを結合する入力データ結合部を、さらに備え、前記データ選択部は、前記結合されたそれぞれの前記入力データを選択する、ことを特徴とする。
【００２８】
また、本発明のデータ処理方法は、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換ステップ、を含み、前記データ変換ステップは、前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成ステップと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成ステップと、前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合ステップと、を含む、ことを特徴とする。
【００２９】
また、本発明のデータ処理方法は、複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換ステップ、を含み、前記データ逆変換ステップは、前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割ステップと、前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元ステップと、前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元ステップと、前記分離されたそれぞれの前記入力データを選択するデータ選択ステップと、を含む、ことを特徴とする。
【発明の効果】
【００３０】
本発明によれば、データの転送効率を維持した状態で、データ転送に係る消費電力を低減することができるという効果が得られる。
【図面の簡単な説明】
【００３１】
【図１】本発明の実施形態における撮像装置の概略構成を示したブロック図である。
【図２】本実施形態の撮像装置に備えた第１の構成のデータ変換部の概略構成を示したブロック図である。
【図３】本実施形態の撮像装置に備えた第１の構成のデータ逆変換部の概略構成を示したブロック図である。
【図４】本第１の構成のデータ変換部における第１のデータ配置方法を説明する図である。
【図５】本第１の構成のデータ変換部における第２のデータ配置方法を説明する図である。
【図６】本第１の構成のデータ変換部における第３のデータ配置方法を説明する図である。
【図７】本実施形態の撮像装置に備えた第２の構成のデータ変換部の概略構成を示したブロック図である。
【図８】本実施形態の撮像装置に備えた第２の構成のデータ逆変換部の概略構成を示したブロック図である。
【図９】本第２の構成のデータ変換部における第４のデータ配置方法を説明する図である。
【図１０】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、別の画像データに適用した場合の一例を示した図である。
【図１１】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、さらに別の画像データに適用した場合の一例を示した図である。
【図１２】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、さらに別の画像データに適用した場合の一例を示した図である。
【図１３】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、別のデータに適用した場合の一例を示した図である。
【図１４】従来の撮像装置の概略構成を示したブロック図である。
【図１５】画像データの配列の一例を示した図である。
【図１６】従来のデータパッキングの一例を示した図である。
【図１７】データバス上のデータの変化と消費電力との関係を説明する図である。
【図１８】従来のデータパッキング方法におけるデータ配置の状態の一例を示した図である。
【図１９】従来のデータパッキング方法におけるデータ配置の状態の別の一例を示した図である。
【発明を実施するための形態】
【００３２】
以下、本発明の実施形態について、図面を参照して説明する。図１は、本実施形態における撮像装置の概略構成を示したブロック図である。図１に示した撮像装置１は、ＣＰＵ１０と、メモリ２０と、ＣＣＤ３０と、撮像処理部４０と、画像処理部５０と、表示処理部６０と、表示デバイス７０と、データ変換部４１および５１と、データ逆変換部５２および６２と、出力ＤＭＡ部４５および５５と、入力ＤＭＡ部５６および６６と、を備えている。なお、撮像装置１は、撮影した画像データを記録する機能も有しているが、説明を容易にするため、以下の説明においては、撮影した画像データを表示する場合について説明する。また、図１においては、撮像装置１内の各構成要素（処理ブロック）間での画素データの受け渡しに係るデータバスであるメモリバスの接続のみを示している。
【００３３】
ＣＰＵ１０は、撮像装置１の全体の制御を行う制御装置である。
メモリ２０は、撮像装置１内の各処理ブロックが処理する画素データを一時的に記憶する、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのメモリである。メモリ２０には、撮像装置１内の各処理ブロックによる各処理段階の画素データが一時記憶される。
【００３４】
ＣＣＤ３０は、入射した被写体光を画像信号に変換する、例えば、ベイヤー配列の固体撮像素子である。ＣＣＤ３０は、被写体の画素信号を撮像処理部４０に出力する。
撮像処理部４０は、ＣＣＤ３０から入力された画素信号に対して、予め定められた信号処理を行った画像データを生成する。
【００３５】
画像処理部５０は、撮像処理部４０が生成した画像データに対して、撮像装置１における種々の画像処理を行った画像データを生成する。
表示処理部６０は、画像処理部５０によって画像処理された画像データを、表示デバイス７０に応じた表示データに変換する。表示処理部６０は、変換した表示データを表示デバイス７０に出力する。
表示デバイス７０は、表示データを表示する、例えば、液晶などの表示装置である。
【００３６】
本実施形態の撮像装置１では、ＣＣＤ３０によって撮像された被写体の画素信号を、撮像処理部４０、画像処理部５０、表示処理部６０が順次処理し、表示デバイス７０に表示させる。このとき、各処理段階の画像データは、メモリ２０を介して各処理ブロック間で受け渡される。撮像装置１内のデータ変換部４１および５１と、データ逆変換部５２および６２と、出力ＤＭＡ部４５および５５と、入力ＤＭＡ部５６および６６とは、各処理段階の画像データの受け渡しに係る処理ブロックである。
【００３７】
データ変換部４１および５１は、前段の処理ブロック（図１に示した本実施形態においては、撮像処理部４０または画像処理部５０）から入力された画像データ内の各画素データを、予め定められた配置（パッキング）方法で、メモリバスの各ビットに配置する。データ変換部４１および５１の構成と、データ変換部４１および５１による画素データのパッキング方法に関する詳細な説明は、後述する。
【００３８】
出力ＤＭＡ部４５および５５は、データ変換部４１または５１によってメモリバスの各ビットにパッキングされた画素データからなる画像データを、ＤＭＡアクセスによってメモリ２０に書き込む（記憶させる）。
入力ＤＭＡ部５６および６６は、メモリ２０に記憶されている画像データをＤＭＡアクセスによって読み出し、読み出した画像データを、データ逆変換部５２または６２に出力する。
【００３９】
データ逆変換部５２および６２は、入力ＤＭＡ部５６または６６から入力された画像データに含まれる画素データを、予め定められた配置（パッキング）方法と逆の方法で元の画像データに戻し、後段の処理ブロック（図１に示した本実施形態においては、画像処理部５０または表示処理部６０）に出力する。データ逆変換部５２および６２の構成に関する詳細な説明は、後述する。
【００４０】
ここで、図１に示した撮像装置１における画像データの処理について説明する。撮像装置１における撮影動作では、以下のような手順で画像データの処理が行われる。
（手順１）：まず、撮像処理部４０は、ＣＣＤ３０によって撮像された被写体の画素信号に対して、予め定められた信号処理を行った画像データ（例えば、ＣＣＤ３０の画素の配列に応じた画像データ）を生成する。そして、生成した画像データを、データ変換部４１および出力ＤＭＡ部４５を介して、メモリ２０に転送して一時記憶する。
（手順２）：続いて、画像処理部５０は、メモリ２０に一時記憶している画像データを、入力ＤＭＡ部５６およびデータ逆変換部５２を介して読み出す。そして、画像処理部５０は、読み出した画像データに対して記録用の画像処理や、表示用の画像処理を行った画像データ（例えば、ＲＧＢデータや、ＹＣ４２２点順次フォーマットのＹＣｂＣｒデータ）を生成する。その後、生成した画像データを、再びデータ変換部５１および出力ＤＭＡ部５５を介してメモリ２０に転送して一時記憶する。
（手順３）：続いて、表示処理部６０は、画像処理部５０によって表示用の画像処理がされた画像データや、別途、メモリ２０に記憶しているＯＳＤ（Ｏｎ−Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）表示用の画像データを、入力ＤＭＡ部６６およびデータ逆変換部６２を介して読み出し、表示デバイス７０に表示させる。
【００４１】
なお、撮像装置１が撮影した画像データを記録する場合には、画像データの記録処理を行う図示しない記録処理部が、画像処理部５０によって記録用の画像処理がされた画像データを、図示しない入力ＤＭＡ部およびデータ逆変換部を介して読み出し、読み出した記録用の画像データをメモリカードなどの図示しない画像データ記録部に記録する。また、撮像装置１に、例えば、音を入出力する機能を備えている場合には、音声処理を行う図示しない音声処理部が、撮影時の音声データを、図示しないデータ変換部および出力ＤＭＡ部を介してメモリ２０に記憶する。また、音声処理部が、メモリ２０に記憶している音声データを、図示しない入力ＤＭＡ部およびデータ逆変換部を介して読み出し、読み出した音声データに応じた音声を、スピーカーなどの図示しない音出力部に出力させる。
【００４２】
＜第１の構成＞
次に、撮像装置１内のデータ変換部について説明する。なお、上記に述べたように、データ変換部４１とデータ変換部５１とは、接続される前段の処理ブロックと後段の処理ブロックが異なるのみである。より具体的には、図１に示したように、データ変換部４１は、前段の撮像処理部４０と後段の出力ＤＭＡ部４５との間に配置され、データ変換部５１は、前段の撮画像処理部５０と後段の出力ＤＭＡ部５５との間に配置されている。従って、データ変換部４１とデータ変換部５１とは、入力される画像データと出力する画像データとのデータ形式（フォーマット）が異なるのみである。以下の説明においては、代表してデータ変換部４１について説明する。
【００４３】
図２は、本実施形態の撮像装置１に備えた本第１の構成のデータ変換部４１の概略構成を示したブロック図である。図２に示したように、データ変換部４１は、パック領域１データ生成部４１１と、パック領域２データ生成部４１２と、データ結合部４１３と、を備えている。
【００４４】
なお、以下の説明においては、データ変換部４１に、図１５に示したような、１６行×１６列のベイヤー配列の画像データ（以下、「ベイヤーデータ」という）が入力され、ベイヤーデータ内の各画素データをパッキングする単位を４転送とし、４転送を１回のバースト転送の単位とする、すなわち、１バーストを画素データのパッキング単位とする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバスのバス幅（メモリバス幅）は３２ｂｉｔであるものとして説明する。なお、図１５に示したベイヤーデータでは、各画素データの数字がＣＣＤ３０内の画素の位置を表しており、数字の前の「Ｒ」，「Ｇ」，「Ｂ」がＣＣＤ３０内の画素の色を表している。より具体的には、「Ｒ」がＣＣＤ３０の赤色の画素の画素データ、「Ｇ」がＣＣＤ３０の緑色の画素の画素データ、「Ｂ」がＣＣＤ３０の青色の画素の画素データを表している。
【００４５】
データ変換部４１は、撮像処理部４０から入力された１１ｂｉｔの画素データの各ビットのデータを、予め定められた後述するパッキング方法のいずれか１つの方法で、メモリバス上の各ビットに配置した３２ｂｉｔのパックデータを出力する。データ変換部４１は、パッキング単位を、画素データの連続する各ビットをそのままメモリバス上の連続する各ビットに配置する２２ｂｉｔの領域（以下、「パック領域１」という）と、画素データが配置されずに残っているメモリバス上のビットに画素データの各ビットを分割して配置する１０ｂｉｔの領域（以下、「パック領域２」という）とに分けて、メモリバス上の各ビットに画素データの各ビットを配置する。
【００４６】
なお、データ変換部４１におけるパック領域１に配置される画素データとパック領域２に配置される画素データとは、撮像処理部４０から入力されるデータイネーブル信号に基づいて判別される。このデータイネーブル信号は、データ変換部４１に入力された画素データが、ＣＣＤ３０の何色の画素のデータであるかを表す情報を含んでいる信号である。
【００４７】
パック領域１データ生成部４１１は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域１のデータバス（このデータバスはメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、２画素分の画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置する。そして、画素データを順次配置したメモリバス幅以下のビット数（図２においては、２２ｂｉｔ）のパック領域１の画素データ（以下、「パック領域１データ」という）をデータ結合部４１３に出力する。なお、パック領域１データ生成部４１１は、画素データをメモリ２０にバースト転送する際の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００４８】
パック領域２データ生成部４１２は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域２のデータバス（このデータバスもメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、３画素分の画素データを配置する。そして、画素データを配置したメモリバス幅以下のビット数（図２においては、１０ｂｉｔ）のパック領域２の画素データ（以下、「パック領域２データ」という）をデータ結合部４１３に出力する。なお、パック領域２データ生成部４１２は、予め定められた後述するパッキング方法に応じて、パック領域２データを配置する。
【００４９】
データ結合部４１３は、パック領域１データ生成部４１１から入力されたパック領域１データと、パック領域２データ生成部４１２から入力されたパック領域２データとを結合したパックデータを生成する。そして、データ結合部４１３は、生成したパックデータを順次、出力ＤＭＡ部４５に出力する。なお、データ結合部４１３内には、例えば、２２ｂｉｔのパック領域１データを一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて、２２ｂｉｔのパック領域１データと、１０ｂｉｔのパック領域２データとのタイミングの整合をとって、３２ｂｉｔのパックデータを生成する。
【００５０】
次に、撮像装置１内のデータ逆変換部について説明する。なお、上記に述べたように、データ逆変換部５２とデータ逆変換部６２とは、接続される前段の処理ブロックと後段の処理ブロックが異なるのみである。より具体的には、図１に示したように、データ逆変換部５２は、前段の入力ＤＭＡ部５６と後段の画像処理部５０との間に配置され、データ逆変換部６２は、前段の入力ＤＭＡ部６６と後段の表示処理部６０との間に配置されている。従って、データ逆変換部５２とデータ逆変換部６２とは、入力される画像データと出力する画像データとのデータ形式（フォーマット）が異なるのみである。以下の説明においては、代表してデータ逆変換部５２について説明する。
【００５１】
図３は、本実施形態の撮像装置１に備えた本第１の構成のデータ逆変換部５２の概略構成を示したブロック図である。図３に示したように、データ逆変換部５２は、データ分割部５２１と、パック領域１データ復元部５２２と、パック領域２データ復元部５２３と、データ選択部５２４と、を備えている。
【００５２】
なお、以下の説明においては、データ逆変換部５２に、データ変換部４１によってパッキングされた、４転送をパッキング単位とした１バーストのパックデータが、入力ＤＭＡ部５６を介して入力され、入力されたパックデータを、図１５に示したベイヤーデータに戻す場合について説明する。従って、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとして説明する。
【００５３】
データ逆変換部５２は、入力ＤＭＡ部５６から入力された３２ｂｉｔのパックデータの各ビットに配置されたデータを、予め定められた後述するパッキング方法のいずれか１つの方法と逆の方法で、画像処理部５０が画像処理する元の画像データ（ベイヤーデータ）に戻した１１ｂｉｔの画素データを出力する。データ逆変換部５２では、元の画素データの連続する各ビットがそのままメモリバス上の連続する各ビットに配置された２２ｂｉｔのパック領域１と、元の画素データの各ビットが分割してメモリバス上のビットに配置された１０ｂｉｔのパック領域２とに分けて、メモリバス上の各ビットのデータを、それぞれ元の画素データの各ビットに分配する。
【００５４】
なお、データ逆変換部５２におけるパック領域１に配置された元の画素データとパック領域２に配置された元の画素データとは、画像処理部５０から入力されるデータイネーブル信号に基づいて判別される。このデータイネーブル信号は、画像処理部５０に出力する元の画素データが、ＣＣＤ３０の何色の画素のデータであるかを表す情報を含んでいる信号である。
【００５５】
データ分割部５２１は、パックデータをパック領域１データとパック領域２データとに分割する。そして、データ分割部５２１は、分割したパック領域１データ（図３においては、２２ｂｉｔのパック領域１データ）をパック領域１データ復元部５２２に、パック領域２データ（図３においては、１０ｂｉｔのパック領域２データ）をパック領域２データ復元部５２３に、それぞれ出力する。
【００５６】
パック領域１データ復元部５２２は、データ分割部５２１から入力されたパック領域１データの各ビットに順次配置された、２画素分の元の画素データを、例えば、パック領域１データの上位側のビット（図３においては、１１ｂｉｔ）の画素データと、下位側のビット（図３においては、１１ｂｉｔ）の画素データとに分割する。そして、分割したそれぞれの画素データを、データ選択部５２４に出力する。
【００５７】
パック領域２データ復元部５２３は、画像処理部５０から入力されたデータイネーブル信号に基づいて、データ分割部５２１から入力されたパック領域２データの各ビットに配置された、３画素分の画素データをそれぞれの画素データに分割する。そして、分割したそれぞれの画素データ（図３においては、１１ｂｉｔ）を、データ選択部５２４に出力する。
【００５８】
なお、パック領域２データ復元部５２３は、予め定められた後述するパッキング方法と逆の方法で、それぞれの画素データに分割する。なお、パック領域２データ復元部５２３内には、例えば、パッキング単位（４転送）分のパック領域２データを一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、パック領域２データ内で分割して配置されている１１ｂｉｔの画素データを揃えて、データ選択部５２４に出力する。
【００５９】
データ選択部５２４は、画像処理部５０から入力されたデータイネーブル信号に基づいて、パック領域１データ復元部５２２またはパック領域２データ復元部５２３から入力された画素データを順次選択し、データ逆変換部５２が分割（アンパッキング）した元の画素データとして、画像処理部５０に出力する。なお、データ選択部５２４内には、パック領域１データ復元部５２２およびパック領域２データ復元部５２３からそれぞれ入力された、１１ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、画素データの出力タイミングの整合をとって、それぞれの画素データを順次、画像処理部５０に出力する。
【００６０】
次に、画素データの配置（パッキング）方法について説明する。本実施形態の撮像装置１では、データ変換部４１および５１が入力された画素データをメモリバスに配置したパックデータを生成し、データ逆変換部５２および６２が入力されたパックデータを元の画素データに戻す。なお、以下の説明においては、データ変換部４１に、図１５に示したベイヤーデータ内の各画素データが順次入力され、４転送を１つのパッキング単位とした１バーストのパックデータにパッキングする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとする。
【００６１】
なお、データ逆変換部５２および６２によるパックデータを元の画素データに戻す方法は、データ変換部４１および５１による画素データのパッキング方法と逆の方法であるため、詳細な説明は省略する。
【００６２】
＜第１のデータ配置方法＞
図４は、本第１の構成のデータ変換部４１における本第１のデータ配置方法（パッキング方法）を説明する図である。図４（ａ）は、パックデータ内の画素データの配置を示し、図４（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００６３】
上記に述べたように、画像データは、通常、隣接する画素同士の方が画素データの変化量が小さい。このため、パックデータを構築する際には、バースト転送時にメモリバスの各ビットの変化量が最も小さくなるように、隣接する画素の画素データの同一ビットを、各転送におけるメモリバスの同一のビットに配置することが望ましい。
【００６４】
また、ベイヤー、ＲＧＢ、またはＹＣ４２２点順次など、画像処理部５０が画像処理する際の画像のフォーマットによって、画像データ内の各画素データが表す色の情報が異なる。このため、パックデータを構築する際には、バースト転送時にメモリバスの各ビットの変化量が最も小さくなるように、同一色の画素データを、各転送におけるメモリバスの同一のビットに配置することが望ましい。
【００６５】
本第１のパッキング方法では、パック領域１データ生成部４１１が、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００６６】
また、パック領域２データ生成部４１２が、画素データが配置されずに残っているパックデータ内のパック領域２の連続する４転送間で、画素データがラスター順となるように、画素データの各ビットを詰めてパック領域２データを配置する。
【００６７】
より具体的には、パック領域１データ生成部４１１は、ベイヤーデータ内の各画素データ（「Ｒ０」，「Ｇ１」，「Ｒ２」，「Ｇ３」，「Ｒ４」，「Ｇ５」，「Ｒ６」，「Ｇ７」）を、図４（ａ）に示したように、１転送目に「Ｒ０」および「Ｇ１」、２転送目に「Ｒ２」および「Ｇ３」、３転送目に「Ｒ４」および「Ｇ５」、４転送目に「Ｒ６」および「Ｇ７」を、それぞれメモリバスの最下位ビットから順次配置（パッキング）する。
【００６８】
また、パック領域２データ生成部４１２は、ベイヤーデータ内の各画素データ（「Ｒ８」，「Ｇ９」，「Ｒ１０」）を、図４（ｂ）に示したように、１転送目に「Ｒ８」のビット［０］〜ビット［９］、２転送目に「Ｒ０」のビット［１０］および「Ｇ９」のビット［０］〜ビット［８］、３転送目に「Ｇ９」のビット［９］〜ビット［１０］および「Ｒ１０」のビット［０］〜ビット［７］、４転送目に「Ｒ１０」のビット［８］〜ビット［１０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。
【００６９】
なお、パック領域２内に画素データの全てのビットを配置することができない場合には、次の画素データ（例えば、ベイヤーデータ内の画素データ「Ｇ１１」）をパッキングしない。これは、データ変換部４１は、パッキング単位で各画素データをパッキングするため、「Ｇ１１」の画素データの一部をパッキングすると、「Ｇ１１」のデータがパッキング単位を跨いでしまうことになるためである。従って、画素データが配置されなかったパック領域２内のデータバスのビット（図４においては、４転送目のデータバスのビット［３１］〜ビット［２５］）は、未使用ビットとする。なお、未使用ビットには、全て同じ値のデータ（例えば、全て“１”または全て“０”のデータ）を配置する構成とすることもできる。
【００７０】
このようにして、パックデータを生成することによって、本第１のパッキング方法では、各転送間での画素データのビット位置のずれが、メモリバス幅全体のうち、パック領域２のビットに限定される。さらに、本第１のパッキング方法では、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１内の画素データを配置している。これにより、バースト転送時におけるメモリバスの各ビットの変化量を少なくすることができる。このことにより、本第１のパッキング方法では、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。
【００７１】
＜第２のデータ配置方法＞
図５は、本第１の構成のデータ変換部４１における本第２のデータ配置方法（パッキング方法）を説明する図である。図５（ａ）は、パックデータ内の画素データの配置を示し、図５（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００７２】
本第２のパッキング方法では、パック領域１データ生成部４１１が、第１のパッキング方法と同様に、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。なお、第２のパッキング方法におけるパック領域１のパックデータの配置方法は、第１のパッキング方法と同様であるため、詳細な説明は省略する。
【００７３】
また、パック領域２データ生成部４１２が、画素データが配置されずに残っているパックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割する。そして、分割した画素データの隣接する同一色の画素データが、連続する２転送間でメモリバス上の同一ビットに配置されるように、パック領域２データを配置する。また、分割した残りのビットは、４転送目に配置する。
【００７４】
より具体的には、パック領域２データ生成部４１２は、ベイヤーデータ内の各画素データ（「Ｒ８」，「Ｇ９」，「Ｒ１０」）を、図５（ｂ）に示したように、１転送目に「Ｒ８」のビット［１］〜ビット［１０］、２転送目に「Ｒ１０」のビット［１］〜ビット［１０］、３転送目に「Ｇ９」のビット［１］〜ビット［１０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。また、４転送目に「Ｒ８」のビット［０］、「Ｇ９」のビット［０］、「Ｒ１０」のビット［０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。
【００７５】
なお、パック領域２内に画素データの全てのビットを配置することができない場合においては、第１のパッキング方法と同様に、画素データが配置されなかったパック領域２内のデータバスのビット（図５においては、４転送目のデータバスのビット［３１］〜ビット［２５］）は、未使用ビットとする。
【００７６】
このようにして、本第２のパッキング方法では、パック領域２においても、メモリバス上の同一ビットに各画素データの同一ビットを配置している（図５における１転送目〜３転送目参照）。また、隣接する同一色の画素データを、連続する２転送間に配置している（図５における１転送目および２転送目参照）。そして、１転送目〜３転送目に配置されなかった各画素データのビットを、４転送目に配置している。これにより、第１のパッキング方法よりもさらにバースト転送時におけるメモリバスの各ビットの変化量、特に、パック領域２の各ビットの変化量を少なくすることができる。このことにより、本第２のパッキング方法では、第１のパッキング方法よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【００７７】
なお、図５に示した第２のパッキング方法では、パック領域２に各画素データを配置する際に、各画素データのビット［０］をまとめて配置している場合について説明したが、これは、パック領域２のメモリバス幅が１０ｂｉｔであり、画素データのビット数は１１ｂｉｔであるためである。すなわち、メモリバス上に画素データを配置するとき、１転送内のメモリバスに配置することができなかった各画素データの最下位の１ｂｉｔ（図５においては、各画素データのビット［０］）を、４転送目にまとめて配置したのである。従って、１転送内のメモリバスに配置することができなかった各画素データが複数ビットある場合には、その複数ビットの各画素データを、４転送目にまとめて配置することになる。なお、４転送目にまとめて配置する各画素のビットは、下位ビットが望ましい。これは、画像データは、通常、画素データの下位ビットの方が、隣接する画素同士でも、例えば、撮像装置１内のノイズ成分によって値が異なることが予想されるためである。
【００７８】
＜第３のデータ配置方法＞
図６は、本第１の構成のデータ変換部４１における本第３のデータ配置方法（パッキング方法）を説明する図である。図６（ａ）は、パックデータ内の画素データの配置を示し、図６（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００７９】
本第３のパッキング方法では、パック領域１データ生成部４１１が、第１のパッキング方法および第２のパッキング方法と同様に、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、画素データを配置する。なお、第３のパッキング方法におけるパック領域１のパックデータの配置方法は、第１のパッキング方法および第２のパッキング方法と同様であるため、詳細な説明は省略する。
【００８０】
また、パック領域２データ生成部４１２が、第２のパッキング方法と同様に、画素データが配置されずに残っているパックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割して配置する。さらに、本第３のパッキング方法では、パック領域２データ生成部４１２が、パック領域２内の未使用ビットに、直前の１転送で配置した画素データと同一ビットの画素データを再度配置、すなわち、コピーして配置する。なお、第３のパッキング方法におけるパック領域２の未使用ビット以外のパックデータの配置方法は、第２のパッキング方法と同様であるため、詳細な説明は省略する。
【００８１】
ここで、パック領域２データ生成部４１２による未使用ビットの画素データの配置について、より具体的に説明する。パック領域２データ生成部４１２は、４転送目の未使用ビット（図６においては、４転送目のデータバスのビット［３１］〜ビット［２５］）に、３転送目のデータバスのビット［３１］〜ビット［２５］に配置した画素データ（図６においては、画素データ「Ｇ９」のビット［４］〜ビット［１０］）を、コピーして、再度配置する。
【００８２】
このようにして、本第３のパッキング方法では、パック領域２内の未使用ビットに、直前の１転送で配置した画素データと同一の値を配置している（図６における４転送目参照）。これにより、第２のパッキング方法よりもさらにバースト転送時におけるメモリバスの各ビットの変化量、特に、パック領域２の未使用ビットの変化量を少なくすることができる。このことにより、本第３のパッキング方法では、第２のパッキング方法よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【００８３】
上記に述べたように、本第１の構成のデータ変換部４１および５１では、バースト転送時におけるメモリバスの各ビットの変化量が少なくなるように、画素データを配置することができる。これにより、本第１の構成のデータ変換部４１および５１では、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。このことにより、撮像装置１内の各構成要素（処理ブロック）とメモリ２０との間での画素データの転送、すなわち、撮像装置１内の各構成要素間での画素データの受け渡しに係る消費電力を低減させることができる。
【００８４】
＜第２の構成＞
次に、本第２の構成のデータ変換部について説明する。図７は、本実施形態の撮像装置１に備えた本第２の構成のデータ変換部４３の概略構成を示したブロック図である。図７に示したデータ変換部４３は、第１の構成のデータ変換部４１の代わりに、撮像装置１に備えられる。従って、データ変換部４３は、データ変換部５１の代わりに撮像装置１に備えることもできる。図７に示したように、データ変換部４３は、ビット分割部４３０と、パック領域１データ生成部４３１と、パック領域２データ生成部４３２と、データ結合部４３３と、を備えている。
【００８５】
なお、以下の説明においては、第１の構成と同様に、データ変換部４３に、図１５に示したような、１６行×１６列のベイヤーデータが入力され、４転送をベイヤーデータ内の各画素データのパッキング単位とし、メモリバス幅は３２ｂｉｔである場合について説明する。なお、図７においては、第２の構成と異なり、ベイヤーデータ内の各画素データのビット数が９ｂｉｔであるものとして説明する。
【００８６】
データ変換部４３は、撮像処理部４０から入力された９ｂｉｔの画素データの各ビットのデータを、予め定められた後述するパッキング方法で、メモリバス上の各ビットに配置した３２ｂｉｔのパックデータを出力する。データ変換部４３は、第１の構成のデータ変換部４１と同様に、パッキング単位をパック領域１とパック領域２とに分けてメモリバス上の各ビットに画素データの各ビットを配置する。ただし、メモリバス上の各ビットに画素データの各ビットを配置する方法は、第１の構成のデータ変換部４１と異なる。データ変換部４３によるメモリバスへの画素データの配置方法に関する詳細な説明は、後述する。
【００８７】
ビット分割部４３０は、入力されたそれぞれの画素データを、例えば、上位８ビットの画素データ（以下、「上位画素データ」という）と下位１ビットの画素データ（以下、「下位画素データ」という）とに分割する。そして、分割した上位画素データを、パック領域１データ生成部４３１に出力する。またビット分割部４３０は、分割した下位画素データを、パック領域２データ生成部４３２に出力する。
【００８８】
パック領域１データ生成部４３１は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域１のデータバス（このデータバスはメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、４画素分の上位画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置する。そして、上位画素データを順次配置したメモリバス幅のビット数（図７においては、３２ｂｉｔ）のパック領域１データをデータ結合部４３３に出力する。また、パック領域１データ生成部４３１が、４転送目のパック領域１データをデータ結合部４３３に出力する際には、２画素分の上位画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置した１６ｂｉｔのパック領域１データをデータ結合部４３３に出力する。なお、パック領域１データ生成部４３１は、上位画素データをメモリ２０にバースト転送する際の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００８９】
パック領域２データ生成部４３２は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域２のデータバス（このデータバスもメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、１４画素分の下位画素データを配置する。そして、下位画素データを配置したメモリバス幅以下のビット数（図７においては、１６ｂｉｔ）のパック領域２データをデータ結合部４３３に出力する。なお、パック領域２データ生成部４３２内には、例えば、１６個の１ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて画素データの出力タイミングの整合をとり、４転送目のタイミングでパック領域２データをデータ結合部４３３に出力する。
【００９０】
データ結合部４３３は、パック領域１データ生成部４３１から入力されたパック領域１データと、パック領域２データ生成部４３２から入力されたパック領域２データとを結合したパックデータを生成する。そして、データ結合部４３３は、生成したパックデータを順次、出力ＤＭＡ部４５に出力する。なお、データ結合部４３３は、１転送目〜３転送目までは、パック領域１データ生成部４３１から入力されたパック領域１データを、パックデータとして順次出力ＤＭＡ部４５に出力する。また、データ結合部４３３は、４転送目で、パック領域１データ生成部４３１から入力された１６ｂｉｔのパック領域１データと、パック領域２データ生成部４３２から入力された１６ｂｉｔのパック領域２データとを結合したパックデータを出力ＤＭＡ部４５に出力する。
【００９１】
なお、データ結合部４３３内には、例えば、１６ｂｉｔのパック領域１データを一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて、１６ｂｉｔの４転送目のパック領域１データと、１６ｂｉｔの４転送目のパック領域２データとのタイミングの整合をとって、３２ｂｉｔのパックデータを生成する。
【００９２】
次に、本第２の構成のデータ逆変換部について説明する。図８は、本実施形態の撮像装置１に備えた本第２の構成のデータ逆変換部５４の概略構成を示したブロック図である。図８に示したデータ逆変換部５４は、第１の構成のデータ逆変換部５２の代わりに、撮像装置１に備えられる。従って、データ逆変換部５４は、データ逆変換部６２の代わりに撮像装置１に備えることもできる。図８に示したように、データ逆変換部５４は、データ分割部５４１と、パック領域１データ復元部５４２と、パック領域２データ復元部５４３と、ビット結合部５４０と、データ選択部５４４と、を備えている。
【００９３】
なお、以下の説明においては、第１の構成と同様に、データ逆変換部５４に、データ変換部４３によってパッキングされた、４転送をパッキング単位とした１バーストのパックデータが、入力ＤＭＡ部５６を介して入力され、入力されたパックデータを、図１５に示したベイヤーデータに戻す場合について説明する。従って、ベイヤーデータ内の各画素データのビット数は９ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとして説明する。
【００９４】
データ逆変換部５４は、入力ＤＭＡ部５６から入力された３２ｂｉｔのパックデータの各ビットに配置されたデータを、予め定められた後述するパッキング方法と逆の方法で、画像処理部５０が画像処理する元の画像データ（ベイヤーデータ）に戻した９ｂｉｔの画素データを出力する。データ逆変換部５４は、第１の構成のデータ逆変換部５２と同様に、パッキング単位をパック領域１とパック領域２とに分けて、メモリバス上の各ビットのデータを、それぞれ元の画素データの各ビットに分配する。
【００９５】
データ分割部５４１は、パックデータをパック領域１データとパック領域２データとに分割する。そして、データ分割部５４１は、分割したパック領域１データ（図８においては、３２ｂｉｔのパック領域１データ、または１６ｂｉｔのパック領域１データ）をパック領域１データ復元部５４２に出力する。また、データ分割部５４１は、パック領域２データ（図８においては、１６ｂｉｔのパック領域２データ）をパック領域２データ復元部５４３に出力する。
【００９６】
パック領域１データ復元部５４２は、データ分割部５４１から入力されたパック領域１データの各ビットに順次配置された、４画素分の元の上位画素データを、例えば、パック領域１データの４つの上位画素データ（図８においては、８ｂｉｔ）に分割する。そして、分割したそれぞれの上位画素データを、ビット結合部５４０に出力する。
【００９７】
パック領域２データ復元部５４３は、画像処理部５０から入力されたデータイネーブル信号に基づいて、データ分割部５４１から入力されたパック領域２データの各ビットに配置された、１４画素分の下位画素データをそれぞれの画素データに分割する。そして、分割したそれぞれの下位画素データ（図８においては、１ｂｉｔ）を、ビット結合部５４０に順次出力する。なお、パック領域２データ復元部５４３は、予め定められた後述するパッキング方法と逆の方法で、それぞれの下位画素データに分割する。
【００９８】
ビット結合部５４０は、パック領域１データ復元部５４２から入力された上位画素データと、パック領域２データ復元部５４３から入力された下位画素データとをそれぞれ結合し、結合した画素データをデータ選択部５４４に出力する。なお、ビット結合部５４０内には、例えば、パッキング単位（４転送）分の上位画素データを一時的に保持するメモリ部を備え、パック領域２データ復元部５４３から下位画素データが入力される毎に、入力された下位画素データに対応する上位画素データを結合して、パック領域１データとパック領域２データとに分割して配置されている９ｂｉｔの画素データを揃えて、データ選択部５４４に出力する。
【００９９】
データ選択部５４４は、画像処理部５０から入力されたデータイネーブル信号に基づいて、ビット結合部５４０から入力された画素データを順次選択し、データ逆変換部５４が分割（アンパッキング）した元の画素データとして、画像処理部５０に出力する。なお、データ選択部５４４内には、ビット結合部５４０からそれぞれ入力された、９ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、画素データの出力タイミングの整合をとって、それぞれの画素データを順次、画像処理部５０に出力する。
【０１００】
次に、本第２の構成における画素データの配置（パッキング）方法について説明する。本実施形態の撮像装置１では、例えば、データ変換部４３が入力された画素データをメモリバスに配置したパックデータを生成し、データ逆変換部５４が入力されたパックデータを元の画素データに戻す。なお、以下の説明においては、データ変換部４３に、図１５に示したベイヤーデータ内の各画素データが順次入力され、４転送を１つのパッキング単位とした１バーストのパックデータにパッキングする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は９ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとする。
【０１０１】
なお、データ逆変換部５４によるパックデータを元の画素データに戻す方法は、データ変換部４３による画素データのパッキング方法と逆の方法であるため、詳細な説明は省略する。
【０１０２】
＜第４のデータ配置方法＞
図９は、本第２の構成のデータ変換部４３における本第４のデータ配置方法（パッキング方法）を説明する図である。図９（ａ）は、上述した第２のパッキング方法によって、９ｂｉｔの画素データをメモリバス上に配置した場合の一例を示し、図９（ｂ）は、本第４のパッキング方法によるパックデータ内の画素データの配置を示し、図９（ｃ）は、本第４のパッキング方法によるパックデータ内のパック領域２の画素データの各ビットの配置を示している。
【０１０３】
第４のパッキング方法では、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。また、パックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割し、分割した画素データの隣接する同一色の画素データが、連続する２転送間でメモリバス上の同一ビットに配置されるように、パック領域２データを配置する。
【０１０４】
このことから、第２のパッキング方法では、図９（ａ）に示したように、ベイヤーデータ内の各画素データ（「Ｒ０」，「Ｇ１」，「Ｒ２」，「Ｇ３」，「Ｒ４」，「Ｇ５」，「Ｒ６」，「Ｇ７」，「Ｒ８」，「Ｒ１０」，「Ｒ１２」）が、パック領域１に配置され、ベイヤーデータ内の各画素データ（「Ｇ９」，「Ｇ１１」，「Ｇ１３」）が、パック領域２に配置されることになる。
【０１０５】
図９（ａ）に示した第２のパッキング方法でも、バースト転送時のメモリバスの各ビットの変化量が少なくなっているため、画像データの転送に係る消費電力を低減させることができるが、３転送目におけるメモリバスのビット［２７］〜ビット［３１］と、４転送目におけるメモリバスのビット［１９］〜ビット［２６］とで消費電力が上昇することが予想される。
【０１０６】
画像データは、隣接する画素間で画素データの変化量が小さい場合、画素データの上位ビットは変化せず、下位ビットだけが変化することが予想される。このため、画素データを上位ビットと下位ビットとに分割し、変化量の少ない上位ビットをパック領域１に配置し、変化量が多い下位ビットをパック領域２に配置してパックデータを構築した方が、さらにバースト転送時のメモリバスの各ビットの変化量が少なくなる場合がある。
【０１０７】
本第４のパッキング方法では、ビット分割部４３１が、画素データを上位画素データと下位画素データとに分割する。そして、パック領域１データ生成部４３１が、分割した上位画素データを、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の上位画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。また、パック領域２データ生成部４３２が、分割した下位画素データを、４転送目に配置する。
【０１０８】
より具体的には、ビット分割部４３１が、ベイヤーデータ内の各画素データを、上位画素データ（ビット［８］〜ビット［１］）と、下位画素データ（ビット［０］）とに分割する。そして、パック領域１データ生成部４３１は、図９（ｂ）に示したように、１転送目に「Ｒ０」、「Ｇ１」、「Ｒ８」、および「Ｇ９」、２転送目に「Ｒ２」、「Ｇ３」、「Ｒ１０」、および「Ｇ１１」、３転送目に「Ｒ４」、「Ｇ５」、「Ｒ１２」、および「Ｇ１３」、４転送目に「Ｒ６」および「Ｇ７」の上位画素データを、それぞれメモリバスの最下位ビットから順次配置（パッキング）する。
【０１０９】
また、パック領域２データ生成部４３２は、「Ｒ０」、「Ｇ１」、「Ｒ２」、「Ｇ３」、「Ｒ４」、「Ｇ５」、「Ｒ６」、「Ｇ７」、「Ｒ８」、「Ｇ９」、「Ｒ１０」、「Ｇ１１」、「Ｒ１２」および「Ｇ１３」の下位画素データを、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。なお、４転送目におけるメモリバスのビット［３０］およびビット［３１］は、未使用ビットとする。これは、第１の構成と同様の理由である。
【０１１０】
このようにして、パックデータを生成することによって、本第４のパッキング方法では、第１の構成と同様に、各転送間での画素データのビット位置のずれが、メモリバス幅全体のうち、パック領域２のビットに限定される。さらに、本第４のパッキング方法では、パック領域２が４転送目のみに限定されため、メモリバスに占めるパック領域２の割合を少なくすることができる。これにより、バースト転送時におけるメモリバスの各ビットの変化量を、さらに少なくすることができる。このことにより、本第４のパッキング方法では、第１の構成のパッキング方法（第１〜第３のパッキング方法）よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【０１１１】
なお、本第４のパッキング方法においても、第３のパッキング方法と同様に、図９に示した未使用ビットに、３転送目のデータバスのビット［３０］〜ビット［３１］に配置した画素データ（図９においては、画素データ「Ｇ１３」のビット［７］〜ビット［８］）を、コピーして、再度配置することにより、さらに画像データの転送に係る消費電力を低減させることができる。
【０１１２】
上記に述べたように、本第２の構成のデータ変換部４３では、バースト転送時におけるメモリバスの各ビットの変化量が少なくなるように、画素データを配置することができる。これにより、本第２の構成のデータ変換部４３でも、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。このことにより、第１の構成のデータ変換部４１および５１と同様に、撮像装置１内の各構成要素（処理ブロック）とメモリ２０との間での画素データの転送、すなわち、撮像装置１内の各構成要素間での画素データの受け渡しに係る消費電力を低減させることができる。
【０１１３】
なお、上記に述べた実施形態においては、ベイヤーデータに本実施形態のパッキング方法を適用した場合について説明したが、本実施形態のパッキング方法は、ベイヤーデータへの適用に限定されるものではなく、ＲＧＢデータ、ＹＣ４２２点順次やＹＣ４４４点順次フォーマットのＹＣｂＣｒデータ、またはＯＳＤデータなど、様々な画像データに適用することができる。また、本実施形態のパッキング方法は、画像データへの適用に限定されるものではなく、音声データなど、他の形式のデータに適用することもできる。
【０１１４】
＜適用例＞
次に、本実施形態のパッキング方法を、他の形式の画像データや、画像データ以外のデータに適用した場合の一例について説明する。まず、本実施形態のパッキング方法をＲＧＢデータに適用した場合の一例について説明する。図１０は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、別の画像データ（ＲＧＢデータ）に適用した場合の一例を示した図である。なお、図１０では、８ｂｉｔのＲＧＢデータに、従来のバースト単位でのパッキング方法を適用した一例（図１０（ａ）参照）と、第３のパッキング方法を適用した一例（図１０（ｂ）参照）とを、それぞれ示している。
【０１１５】
図１０（ａ）に示したように、従来のバースト単位でのパッキング方法によって、ＲＧＢデータ（８ｂｉｔ×３色＝２４ｂｉｔ）を単純に配置すると、３２ｂｉｔのメモリバスの全てのビットが、異なる色の画素データになってしまう。これに対して、図１０（ｂ）に示した第３のパッキング方法では、パック領域１のメモリバスの各ビットは、４つの転送とも同一色の画素データの同一ビットとなる。また、パック領域２の４転送目のメモリバスの各ビットの値は、３転送目のメモリバスの各ビットの値を同じ値になる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、パック領域２では、３転送目と４転送目とのメモリバスの各ビットの変化量をなくすことができる。このことにより、画像データの転送に係る消費電力を低減させることができる。
【０１１６】
図１１は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、さらに別の画像データ（ＹＣｂＣｒデータ）に適用した場合の一例を示した図である。なお、図１１では、図１１（ａ）に示したような、１０ｂｉｔのＹ、８ｂｉｔのＣｂおよびＣｒデータに、従来のバースト単位でのパッキング方法を適用した一例（図１１（ｂ）参照）と、第１のパッキング方法を適用した一例（図１１（ｃ）参照）とを、それぞれ示している。
【０１１７】
図１１（ｂ）に示したように、従来のバースト単位でのパッキング方法によって、ＹＣｂＣｒデータを単純に配置すると、メモリバスの全てのビットが、異なる色を表す画素データになってしまう。これに対して、図１１（ｃ）に示した第１のパッキング方法では、パック領域１のメモリバスの各ビットは、同一の色を表す画素データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データの転送に係る消費電力を低減させることができる。また、図１１に示した例からもわかるように、本実施形態のパッキング方法では、それぞれのデータのビット数が異なる場合でも、同様に適用することができる。
【０１１８】
図１２は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、さらに別の画像データ（ＯＳＤデータ）に適用した場合の一例を示した図である。なお、図１２では、６ｂｉｔのＯＳＤデータに、従来のバースト単位でのパッキング方法を適用した一例（図１２（ａ）参照）と、第２のパッキング方法を適用した一例（図１０（ｂ）参照）とを、それぞれ示している。
【０１１９】
図１２（ａ）に示したように、従来のバースト単位でのパッキング方法によって、ＯＳＤデータを単純に配置すると、メモリバスの全てのビットが、異なる表示データの異なるビットになってしまう。これに対して、図１２（ｂ）に示した第２のパッキング方法では、パック領域１のメモリバスの各ビットは、表示データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データの転送に係る消費電力を低減させることができる。また、図１２（ｂ）をみてもわかるように、本実施形態のパッキング方法では、３２ｂｉｔのメモリバス幅のほとんどがパック領域１であるため、より多くの消費電力の低減効果を得ることができる。
【０１２０】
図１３は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、別のデータ（音声データ）に適用した場合の一例を示した図である。なお、図１３では、それぞれ２４ｂｉｔのＲ（右）データおよびＬ（左）データを６４ｂｉｔのメモリバスに適用した場合を示している。そして、図１３（ａ）には、従来のバースト単位でのパッキング方法を適用した一例を示し、図１３（ｂ）には、第２のパッキング方法を適用した一例を示している。
【０１２１】
図１３（ａ）に示したように、従来のバースト単位でのパッキング方法によって、音声データを単純に配置すると、６４ｂｉｔのメモリバスの全てのビットが、異なるビットの音声データになってしまう。これに対して、図１３（ｂ）に示した第２のパッキング方法では、パック領域１のメモリバスの各ビットは、同じ側の音声データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データ以外の他の形式のデータでも、転送に係る消費電力を低減させることができる。
【０１２２】
上記に述べたとおり、本発明を実施するための形態によれば、メモリバス幅をパック領域１とパック領域２とに分ける。そして、パック領域１のメモリバス上の各ビットには、転送するデータの各ビットを、ほぼそのまま配置する。また、パック領域２のメモリバス上の各ビットには、転送するデータの各ビットを分割して配置する。これにより、バースト転送時におけるメモリバスの各ビットの変化量を少なくすることができる。しかも、データの転送効率は、従来と同等のデータ転送効率を維持することができる。これにより、像装置内の各構成要素（処理ブロック）とメモリとの間でのデータの受け渡しに係る消費電力の低減効果を十分に得ることができる。
【０１２３】
なお、本実施形態においては、４転送を１回のバースト転送の単位とし、１バーストをデータのパッキング単位とした場合について説明したが、１回のバースト転送における転送の回数や、データのパッキングの単位は、本発明を実施するための形態に限定されるものではない。例えば、６４転送を１回のバースト転送の単位とし、１バースト内の１６転送をデータのパッキングの単位とする、すなわち、１バースト内に４つのパッキング単位が含まれる構成にすることもできる。また、例えば、１６転送をデータのパッキングの単位とし、８転送を１回のバースト転送の単位とする、すなわち、パッキング単位が２回のバースト転送に跨っている構成にすることもできる。
【０１２４】
また、本実施形態においては、撮像装置内の構成要素間でデータの受け渡しを行う場合のパッキング方法を、いくつかのデータに適用した場合について説明したが、本実施形態のパッキング方法を適用することができる範囲は、本発明を実施するための形態に限定されるものではなく、各構成要素間でデータの受け渡しを行うシステムであれば、どのようなシステムにも適用することができる。
【０１２５】
また、本実施形態においては、例えば、データ変換部を出力ＤＭＡ部の前段の処理ブロックとして配置し、データ逆変換部を入力ＤＭＡ部の後段の処理ブロックとして配置した場合の一例について説明したが、データ変換部およびデータ逆変換部の配置は、本発明を実施するための形態に限定されるものではない。例えば、データ変換部を出力ＤＭＡ部内の構成要素とすることや、データ逆変換部を入力ＤＭＡ部内の構成要素とすることもできる。また、例えば、データ変換部を前段の撮像処理部内の構成要素とすることや、データ逆変換部を後段の画像処理部内の構成要素とすることもできる。
【０１２６】
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。
【符号の説明】
【０１２７】
１・・・撮像装置（データ処理装置）
１０・・・ＣＰＵ（データ処理装置）
２０・・・メモリ（データ処理装置）
３０・・・ＣＣＤ
４０・・・撮像処理部
５０・・・画像処理部
６０・・・表示処理部
７０・・・表示デバイス
４１，５１・・・データ変換部（データ処理装置）
４１１・・・パック領域１データ生成部（第１のデータ生成部）
４１２・・・パック領域２データ生成部（第２のデータ生成部）
４１３・・・データ結合部
５２，６２・・・データ逆変換部（データ処理装置）
５２１・・・データ分割部
５２２・・・パック領域１データ復元部（第１のデータ復元部）
５２３・・・パック領域２データ復元部（第２のデータ復元部）
５２４・・・データ選択部
４５，５５・・・出力ＤＭＡ部
５６，６６・・・入力ＤＭＡ部
４３・・・データ変換部（データ処理装置）
４３０・・・ビット分割部（画素データ分割部）
４３１・・・パック領域１データ生成部（第１のデータ生成部）
４３２・・・パック領域２データ生成部（第２のデータ生成部）
４３３・・・データ結合部
５４・・・データ逆変換部（データ処理装置）
５４１・・・データ分割部
５４２・・・パック領域１データ復元部（第１のデータ復元部）
５４３・・・パック領域２データ復元部（第２のデータ復元部）
５４０・・・ビット結合部（画素データ結合部）
５４４・・・データ選択部
【技術分野】
【０００１】
本発明は、データ処理装置およびデータ処理方法に関する。
【背景技術】
【０００２】
静止画用カメラ、動画用カメラ、医療用内視鏡カメラ、または産業用内視鏡カメラなどの撮像装置では、撮像装置の画素数や速度の向上に伴って、膨大な画素のデータ（以下、「画素データ」という）が含まれる画像データを処理している。このような撮像装置においては、撮像装置内の各処理ブロックが撮影によって得られた画像データを処理する際に、データを一時的に記憶するメモリが利用されている。メモリには、各処理段階の画像データが一時記憶される。
【０００３】
図１４は、従来の撮像装置の概略構成を示したブロック図である。例えば、図１４に示した撮像装置における撮影動作では、以下のような手順で画像データの処理が行われている。
（手順１）：まず、撮像処理部が、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ：電荷結合素子）型の固体撮像素子によって得られた画像データを、出力ＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）部を介してメモリに転送して一時記憶する。
（手順２）：続いて、画像処理部が、メモリに一時記憶している画像データを、入力ＤＭＡ部を介して読み出す。そして、画像処理部は、読み出した画像データに対して記録用の画像処理や、表示用の画像処理を行う。その後、画像処理した後の画像データを、出力ＤＭＡ部を介してメモリに転送して一時記憶する。
（手順３）：続いて、表示処理部が、表示用の画像処理がされた画像データを、入力ＤＭＡ部を介して読み出し、表示デバイスに表示させる。
【０００４】
このように、撮像装置では、前段の処理ブロックが、画像データをメモリに一時記憶する。そして、後段の処理ブロックが、メモリに記録されている画像データを読み出して、次の処理を行う。このように、撮像装置内の各処理ブロックが、メモリを介して処理対象の画像データの受け渡しを行うことによって、撮像装置の全体の処理を順次行っている。
【０００５】
近年、静止画用カメラ、動画用カメラなどの撮像装置においては、長い時間連続して使用できることが望まれており、撮像装置内の電気回路の消費電力を低減させる技術が必要とされている。撮像装置の消費電力を低減させるための１つの方法として、各処理ブロック（電気回路）とメモリとの間での画像データの転送速度を高速にする方法が挙げられる。画像データの転送速度の高速化は、例えば、撮像装置が動作するクロックの周波数を高くしたり、各処理ブロックとメモリ間の画像データの転送期間を短縮させたりすることによって実現することができる。これらの方法は、画像データの転送速度を高速にすることによって、画像データの転送に係る消費電力を低減させるものである。
【０００６】
処理ブロックとメモリ間の画像データの転送期間を短縮させるための技術として、特許文献１に開示されているようなパッキングという技術が知られている。特許文献１で開示されたパッキング技術は、画像データ内の各画素データをメモリに転送する際に使用されるデータバスのバス幅を拡張し、隣接する複数の画素データをデータバスに配置（パッキング）することによって、複数の画素データを一度に転送するという技術である。この技術によって、全ての画素データを転送するために要するデータ転送の回数を、画素データを１画素毎に転送する以前のデータ転送に比べて少なくすることができ、画像データのデータ転送に係る期間を短縮することができる。例えば、図１５に示したような、１６行×１６列のベイヤー配列のＣＣＤから得られた画素データをメモリに転送する場合、特許文献１で開示されたパッキング技術では、４画素分の画素データを一度に転送する単位とすることによって、画像データの転送期間を１／４に短縮することができる。これにより、画素データを１画素ずつメモリに転送する場合に比べて、撮像装置内の電気回路の消費電力を低減させることができる。
【０００７】
また、さらに画像データの転送期間を短縮する技術として、ＤＭＡのバースト転送を利用したパッキング方法が考えられる。これは、予め定められた一定のサイクル数でメモリにアクセスする単位である１バーストを、画素データをパッキングする単位として考える方法である。図１６に画素データのパッキングの一例を示す。図１６（ａ）は、特許文献１で開示されたパッキング方法で図１５に示した画素データをパッキングした場合の一例を示し、図１６（ｂ）は、バーストの単位で図１５に示した画素データをパッキングした場合の一例を示している。なお、図１６では、画素データをメモリに転送する際に使用するデータバス（以下、「メモリバス」という）のバス幅（以下、「メモリバス幅」という）を３２ｂｉｔとし、バースト転送における１サイクル分のメモリアクセス（以下、「１転送」という）を４回、すなわち、４転送で１回のバースト転送を行う場合の例を示している。そして、図１６（ａ）および図１６（ｂ）では、それぞれ上から順に、１画素の画素データの分解能、すなわち、画素データのビット数が、９ｂｉｔ、１０ｂｉｔ、１２ｂｉｔ、および１４ｂｉｔである場合の一例を示している。
【０００８】
図１６からわかるように、図１６（ａ）に示した特許文献１で開示されたパッキング方法では、１転送あたり２画素分の画素データがメモリバスに配置され、１バーストあたり８画素分の画素データをメモリに転送することができる。これに対して図１６（ｂ）に示したバースト単位でのパッキング方法では、それぞれ、１４画素分、１２画素分、１０画素分、および９画素分の画素データをメモリに転送することができる。これは、特許文献１で開示されたパッキング方法は、メモリバス幅、すなわち、１転送の単位で画素データを配置（パッキング）するため、配置する複数の画素データのビット数の合計がメモリバス幅を超えないようにする必要がある。このため、特許文献１で開示されたパッキング方法では、メモリバス幅内に画素データを割り当てることができないビット（以下、「未使用ビット」という）が多く存在してしまう。これに対し、バースト単位でのパッキング方法は、１バーストの単位で画素データを配置（パッキング）するため、図１６（ｂ）のように、配置する複数の画素データのビット数の合計がメモリバス幅を超えてしまう場合でも、１バーストを超えなければ次の転送に画素データを配置（パッキング）することができる。すなわち、バースト単位でのパッキング方法では、メモリバス幅が画素データの分解能の整数倍ではない場合においても、１転送の単位を跨いで画素データを配置（マッピング）することができるため、未使用ビットを少なくすることができるのである。このことにより、バースト単位でのパッキング方法は、特許文献１で開示されたパッキング方法よりも、同じ時間で多くの画素データをメモリに転送する、すなわち、画像データの転送期間を短縮することができ、撮像装置内の電気回路の消費電力を、さらに低減させることができる。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００７−３１２３５８号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
一般的に、データの変化（データの“０”→“１”、もしくは“１”→“０”の変化（反転））が少ない方が、消費電力が少ないことが知られている。このため、撮像装置内の各処理ブロック（電気回路）とメモリとの間のメモリバス上のデータの変化を少なくすることによって、撮像装置の消費電力を低減させることも考えられる。図１７は、撮像装置内の処理ブロックとメモリとの間のデータバス（メモリバス）上のデータの変化と消費電力との関係を説明する図である。図１７（ａ）は、図１４に示した撮像装置における撮像処理部とメモリとの間のメモリバスのバス幅が３２ｂｉｔである場合の一例を示している。そして、図１７（ｂ−１）〜（ｂ−３）では、メモリバス上のデータの変化を模式的に示している。図１７の一例においては、メモリバス上のデータの変化がない図１７（ｂ−１）の場合が、最も消費電力が少なく、メモリバス上のデータの変化が最も多い図１７（ｂ−３）の場合が、最も消費電力が多くなる。
【００１１】
このことから、撮像装置内の各処理ブロックとメモリ間のバースト転送において、連続する２転送間の画素データ（例えば、図１６に示した各バースト転送の１転送目と２転送目との画素データ）の変化が多いと、画像データの転送に係る消費電力も多くなってしまうことがわかる。すなわち、メモリバス上の同一ビットが２転送間で変化している個数（ビット数）に比例して、画像データの転送に係る消費電力が変化する。
【００１２】
一般的に、画像データは、隣接する画素間でデータの変化量が小さく、隣接する画素のそれぞれの画素データの同一のビットで比較すると、値が反転しているビットの方が、値が反転していないビットよりも少ないことが予想される。ここで、図１６に示した、特許文献１で開示されたパッキング方法と、バースト単位でのパッキング方法とを比較すると、図１８に示したように、同一色の画素データで同一のビットが揃っている、特許文献１で開示されたパッキング方法の方が、画像データの転送に係る消費電力が少ないと考えられる。なお、図１８は、図１６に示した特許文献１で開示されたパッキング方法と、バースト単位でのパッキング方法とにおいて、１画素の画素データのビット数が９ｂｉｔである場合を示している。
【００１３】
より具体的には、図１８（ａ）に示した特許文献１で開示されたパッキング方法では、範囲Ａに示したメモリバスの最下位ビットは、全て同一色の画素データの同一ビット（最下位ビット）である。これに対して、図１８（ｂ）に示したバースト単位でのパッキング方法では、範囲Ｂに示したメモリバスの最下位ビットは、全て異なる色の画素データの異なるビットである。このことから、バースト単位で画像データをパッキングすることによって、メモリバス上に配置される画素データのビットの位置が、連続する２転送間で異なってしまうと、メモリバス上の同一ビットの変化量が多くなり、画像データの転送に係る消費電力を増加させてしまうことがわかる。
【００１４】
すなわち、図１８（ａ）に示した特許文献１で開示されたパッキング方法は、画像データの転送に係る消費電力が少ないが、データの転送効率が低い。また、図１８（ｂ）に示したバースト単位でのパッキング方法は、データの転送効率はよいが、画像データの転送に係る消費電力が多い。
【００１５】
このように、バースト単位での画素データのパッキングでは、より多くの画素データをメモリバスに配置することによって、結果的に画素データの転送期間を短縮し、画像データの転送に係る消費電力を低減させることができるが、メモリバス上に配置される画素データのビットの位置が、連続する２転送間で異なっているため、画像データの転送に係る消費電力の低減効果を十分に得ることができていない、という問題がある。
【００１６】
また、特許文献１で開示されたパッキング方法においては、例えば、図１９に示したように、画素データをパッキングする１転送内に、３画素分の画素データを配置（パッキング）することができる。しかし、この場合には、例えば、範囲Ｃに示したメモリバスの最下位ビットが、画素データの同一ビット（最下位ビット）ではあるが、異なる色の画素データになってしまう。画素データは、色が異なるとその値が大きく異なる可能性が高く、特許文献１で開示されたパッキング方法でも、１転送内の画素データの配置によっては、画像データの転送に係る消費電力を低減できていないことになってしまう。
【００１７】
本発明は、上記の課題認識に基づいてなされたものであり、データの転送効率を維持した状態で、データ転送に係る消費電力を低減することができるデータ処理装置およびデータ処理方法を提供することを目的としている。
【課題を解決するための手段】
【００１８】
上記の課題を解決するため、本発明のデータ処理装置は、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換部、を備え、前記データ変換部は、前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成部と、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成部と、前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合部と、を具備する、ことを特徴とする。
【００１９】
また、本発明の前記第２のデータ生成部は、前記第２の数の前記入力データを、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記入力データの各ビットを順次割り当てる、ことを特徴とする。
【００２０】
また、本発明の前記第２のデータ生成部は、前記第２の数の前記入力データのそれぞれを、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割し、該分割した上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一のビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のデータで同一のビットに割り当てられるように、前記第２のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、前記上位ビットの入力データを割り当てた後、残っている同一の前記変換単位に含まれる前記第２のデータで連続するように、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを順次割り当てる、ことを特徴とする。
【００２１】
また、本発明の前記第２のデータ生成部は、前記入力データを割り当てた後、残っている前記第２のデータの各ビットに、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータをそれぞれ割り当てる、ことを特徴とする。
【００２２】
また、本発明の前記データ変換部は、前記入力データを予め定められたビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割する入力データ分割部を、さらに備え、前記第１のデータ生成部は、前記第１のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、第２のデータ生成部は、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを割り当てる、ことを特徴とする。
【００２３】
また、本発明のデータ処理装置は、複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換部、を備え、前記データ逆変換部は、前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割部と、前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元部と、前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元部と、前記分離されたそれぞれの前記入力データを選択するデータ選択部と、を具備する、ことを特徴とする。
【００２４】
また、本発明の前記第２のデータは、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記第２の数の前記入力データの各ビットが順次割り当てられている、ことを特徴とする。
【００２５】
また、本発明の前記第２のデータは、前記第２の数の前記入力データのそれぞれが、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割され、該分割された上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一の各ビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のビット範囲の同一の各ビットに割り当てられ、該分割された下位ビットの入力データの各ビットが、前記上位ビットの入力データの各ビットに割り当てられた後、残っている同一の前記変換単位に含まれる前記第２のビット範囲の各ビットに、前記第２のビット範囲で連続するように順次割り当てられている、ことを特徴とする。
【００２６】
また、本発明の前記第２のデータは、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータが割り当てられている、ことを特徴とする。
【００２７】
また、本発明の前記データ逆変換部は、前記第１のビット範囲の各ビットに割り当てられた前記入力データの予め定められたビット数の上位ビットの入力データと、前記第２のビット範囲の各ビットに割り当てられた前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとを結合する入力データ結合部を、さらに備え、前記データ選択部は、前記結合されたそれぞれの前記入力データを選択する、ことを特徴とする。
【００２８】
また、本発明のデータ処理方法は、順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換ステップ、を含み、前記データ変換ステップは、前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成ステップと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成ステップと、前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合ステップと、を含む、ことを特徴とする。
【００２９】
また、本発明のデータ処理方法は、複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換ステップ、を含み、前記データ逆変換ステップは、前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割ステップと、前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元ステップと、前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元ステップと、前記分離されたそれぞれの前記入力データを選択するデータ選択ステップと、を含む、ことを特徴とする。
【発明の効果】
【００３０】
本発明によれば、データの転送効率を維持した状態で、データ転送に係る消費電力を低減することができるという効果が得られる。
【図面の簡単な説明】
【００３１】
【図１】本発明の実施形態における撮像装置の概略構成を示したブロック図である。
【図２】本実施形態の撮像装置に備えた第１の構成のデータ変換部の概略構成を示したブロック図である。
【図３】本実施形態の撮像装置に備えた第１の構成のデータ逆変換部の概略構成を示したブロック図である。
【図４】本第１の構成のデータ変換部における第１のデータ配置方法を説明する図である。
【図５】本第１の構成のデータ変換部における第２のデータ配置方法を説明する図である。
【図６】本第１の構成のデータ変換部における第３のデータ配置方法を説明する図である。
【図７】本実施形態の撮像装置に備えた第２の構成のデータ変換部の概略構成を示したブロック図である。
【図８】本実施形態の撮像装置に備えた第２の構成のデータ逆変換部の概略構成を示したブロック図である。
【図９】本第２の構成のデータ変換部における第４のデータ配置方法を説明する図である。
【図１０】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、別の画像データに適用した場合の一例を示した図である。
【図１１】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、さらに別の画像データに適用した場合の一例を示した図である。
【図１２】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、さらに別の画像データに適用した場合の一例を示した図である。
【図１３】本実施形態の撮像装置に備えたデータ変換部によるデータ配置方法を、別のデータに適用した場合の一例を示した図である。
【図１４】従来の撮像装置の概略構成を示したブロック図である。
【図１５】画像データの配列の一例を示した図である。
【図１６】従来のデータパッキングの一例を示した図である。
【図１７】データバス上のデータの変化と消費電力との関係を説明する図である。
【図１８】従来のデータパッキング方法におけるデータ配置の状態の一例を示した図である。
【図１９】従来のデータパッキング方法におけるデータ配置の状態の別の一例を示した図である。
【発明を実施するための形態】
【００３２】
以下、本発明の実施形態について、図面を参照して説明する。図１は、本実施形態における撮像装置の概略構成を示したブロック図である。図１に示した撮像装置１は、ＣＰＵ１０と、メモリ２０と、ＣＣＤ３０と、撮像処理部４０と、画像処理部５０と、表示処理部６０と、表示デバイス７０と、データ変換部４１および５１と、データ逆変換部５２および６２と、出力ＤＭＡ部４５および５５と、入力ＤＭＡ部５６および６６と、を備えている。なお、撮像装置１は、撮影した画像データを記録する機能も有しているが、説明を容易にするため、以下の説明においては、撮影した画像データを表示する場合について説明する。また、図１においては、撮像装置１内の各構成要素（処理ブロック）間での画素データの受け渡しに係るデータバスであるメモリバスの接続のみを示している。
【００３３】
ＣＰＵ１０は、撮像装置１の全体の制御を行う制御装置である。
メモリ２０は、撮像装置１内の各処理ブロックが処理する画素データを一時的に記憶する、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのメモリである。メモリ２０には、撮像装置１内の各処理ブロックによる各処理段階の画素データが一時記憶される。
【００３４】
ＣＣＤ３０は、入射した被写体光を画像信号に変換する、例えば、ベイヤー配列の固体撮像素子である。ＣＣＤ３０は、被写体の画素信号を撮像処理部４０に出力する。
撮像処理部４０は、ＣＣＤ３０から入力された画素信号に対して、予め定められた信号処理を行った画像データを生成する。
【００３５】
画像処理部５０は、撮像処理部４０が生成した画像データに対して、撮像装置１における種々の画像処理を行った画像データを生成する。
表示処理部６０は、画像処理部５０によって画像処理された画像データを、表示デバイス７０に応じた表示データに変換する。表示処理部６０は、変換した表示データを表示デバイス７０に出力する。
表示デバイス７０は、表示データを表示する、例えば、液晶などの表示装置である。
【００３６】
本実施形態の撮像装置１では、ＣＣＤ３０によって撮像された被写体の画素信号を、撮像処理部４０、画像処理部５０、表示処理部６０が順次処理し、表示デバイス７０に表示させる。このとき、各処理段階の画像データは、メモリ２０を介して各処理ブロック間で受け渡される。撮像装置１内のデータ変換部４１および５１と、データ逆変換部５２および６２と、出力ＤＭＡ部４５および５５と、入力ＤＭＡ部５６および６６とは、各処理段階の画像データの受け渡しに係る処理ブロックである。
【００３７】
データ変換部４１および５１は、前段の処理ブロック（図１に示した本実施形態においては、撮像処理部４０または画像処理部５０）から入力された画像データ内の各画素データを、予め定められた配置（パッキング）方法で、メモリバスの各ビットに配置する。データ変換部４１および５１の構成と、データ変換部４１および５１による画素データのパッキング方法に関する詳細な説明は、後述する。
【００３８】
出力ＤＭＡ部４５および５５は、データ変換部４１または５１によってメモリバスの各ビットにパッキングされた画素データからなる画像データを、ＤＭＡアクセスによってメモリ２０に書き込む（記憶させる）。
入力ＤＭＡ部５６および６６は、メモリ２０に記憶されている画像データをＤＭＡアクセスによって読み出し、読み出した画像データを、データ逆変換部５２または６２に出力する。
【００３９】
データ逆変換部５２および６２は、入力ＤＭＡ部５６または６６から入力された画像データに含まれる画素データを、予め定められた配置（パッキング）方法と逆の方法で元の画像データに戻し、後段の処理ブロック（図１に示した本実施形態においては、画像処理部５０または表示処理部６０）に出力する。データ逆変換部５２および６２の構成に関する詳細な説明は、後述する。
【００４０】
ここで、図１に示した撮像装置１における画像データの処理について説明する。撮像装置１における撮影動作では、以下のような手順で画像データの処理が行われる。
（手順１）：まず、撮像処理部４０は、ＣＣＤ３０によって撮像された被写体の画素信号に対して、予め定められた信号処理を行った画像データ（例えば、ＣＣＤ３０の画素の配列に応じた画像データ）を生成する。そして、生成した画像データを、データ変換部４１および出力ＤＭＡ部４５を介して、メモリ２０に転送して一時記憶する。
（手順２）：続いて、画像処理部５０は、メモリ２０に一時記憶している画像データを、入力ＤＭＡ部５６およびデータ逆変換部５２を介して読み出す。そして、画像処理部５０は、読み出した画像データに対して記録用の画像処理や、表示用の画像処理を行った画像データ（例えば、ＲＧＢデータや、ＹＣ４２２点順次フォーマットのＹＣｂＣｒデータ）を生成する。その後、生成した画像データを、再びデータ変換部５１および出力ＤＭＡ部５５を介してメモリ２０に転送して一時記憶する。
（手順３）：続いて、表示処理部６０は、画像処理部５０によって表示用の画像処理がされた画像データや、別途、メモリ２０に記憶しているＯＳＤ（Ｏｎ−Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）表示用の画像データを、入力ＤＭＡ部６６およびデータ逆変換部６２を介して読み出し、表示デバイス７０に表示させる。
【００４１】
なお、撮像装置１が撮影した画像データを記録する場合には、画像データの記録処理を行う図示しない記録処理部が、画像処理部５０によって記録用の画像処理がされた画像データを、図示しない入力ＤＭＡ部およびデータ逆変換部を介して読み出し、読み出した記録用の画像データをメモリカードなどの図示しない画像データ記録部に記録する。また、撮像装置１に、例えば、音を入出力する機能を備えている場合には、音声処理を行う図示しない音声処理部が、撮影時の音声データを、図示しないデータ変換部および出力ＤＭＡ部を介してメモリ２０に記憶する。また、音声処理部が、メモリ２０に記憶している音声データを、図示しない入力ＤＭＡ部およびデータ逆変換部を介して読み出し、読み出した音声データに応じた音声を、スピーカーなどの図示しない音出力部に出力させる。
【００４２】
＜第１の構成＞
次に、撮像装置１内のデータ変換部について説明する。なお、上記に述べたように、データ変換部４１とデータ変換部５１とは、接続される前段の処理ブロックと後段の処理ブロックが異なるのみである。より具体的には、図１に示したように、データ変換部４１は、前段の撮像処理部４０と後段の出力ＤＭＡ部４５との間に配置され、データ変換部５１は、前段の撮画像処理部５０と後段の出力ＤＭＡ部５５との間に配置されている。従って、データ変換部４１とデータ変換部５１とは、入力される画像データと出力する画像データとのデータ形式（フォーマット）が異なるのみである。以下の説明においては、代表してデータ変換部４１について説明する。
【００４３】
図２は、本実施形態の撮像装置１に備えた本第１の構成のデータ変換部４１の概略構成を示したブロック図である。図２に示したように、データ変換部４１は、パック領域１データ生成部４１１と、パック領域２データ生成部４１２と、データ結合部４１３と、を備えている。
【００４４】
なお、以下の説明においては、データ変換部４１に、図１５に示したような、１６行×１６列のベイヤー配列の画像データ（以下、「ベイヤーデータ」という）が入力され、ベイヤーデータ内の各画素データをパッキングする単位を４転送とし、４転送を１回のバースト転送の単位とする、すなわち、１バーストを画素データのパッキング単位とする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバスのバス幅（メモリバス幅）は３２ｂｉｔであるものとして説明する。なお、図１５に示したベイヤーデータでは、各画素データの数字がＣＣＤ３０内の画素の位置を表しており、数字の前の「Ｒ」，「Ｇ」，「Ｂ」がＣＣＤ３０内の画素の色を表している。より具体的には、「Ｒ」がＣＣＤ３０の赤色の画素の画素データ、「Ｇ」がＣＣＤ３０の緑色の画素の画素データ、「Ｂ」がＣＣＤ３０の青色の画素の画素データを表している。
【００４５】
データ変換部４１は、撮像処理部４０から入力された１１ｂｉｔの画素データの各ビットのデータを、予め定められた後述するパッキング方法のいずれか１つの方法で、メモリバス上の各ビットに配置した３２ｂｉｔのパックデータを出力する。データ変換部４１は、パッキング単位を、画素データの連続する各ビットをそのままメモリバス上の連続する各ビットに配置する２２ｂｉｔの領域（以下、「パック領域１」という）と、画素データが配置されずに残っているメモリバス上のビットに画素データの各ビットを分割して配置する１０ｂｉｔの領域（以下、「パック領域２」という）とに分けて、メモリバス上の各ビットに画素データの各ビットを配置する。
【００４６】
なお、データ変換部４１におけるパック領域１に配置される画素データとパック領域２に配置される画素データとは、撮像処理部４０から入力されるデータイネーブル信号に基づいて判別される。このデータイネーブル信号は、データ変換部４１に入力された画素データが、ＣＣＤ３０の何色の画素のデータであるかを表す情報を含んでいる信号である。
【００４７】
パック領域１データ生成部４１１は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域１のデータバス（このデータバスはメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、２画素分の画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置する。そして、画素データを順次配置したメモリバス幅以下のビット数（図２においては、２２ｂｉｔ）のパック領域１の画素データ（以下、「パック領域１データ」という）をデータ結合部４１３に出力する。なお、パック領域１データ生成部４１１は、画素データをメモリ２０にバースト転送する際の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００４８】
パック領域２データ生成部４１２は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域２のデータバス（このデータバスもメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、３画素分の画素データを配置する。そして、画素データを配置したメモリバス幅以下のビット数（図２においては、１０ｂｉｔ）のパック領域２の画素データ（以下、「パック領域２データ」という）をデータ結合部４１３に出力する。なお、パック領域２データ生成部４１２は、予め定められた後述するパッキング方法に応じて、パック領域２データを配置する。
【００４９】
データ結合部４１３は、パック領域１データ生成部４１１から入力されたパック領域１データと、パック領域２データ生成部４１２から入力されたパック領域２データとを結合したパックデータを生成する。そして、データ結合部４１３は、生成したパックデータを順次、出力ＤＭＡ部４５に出力する。なお、データ結合部４１３内には、例えば、２２ｂｉｔのパック領域１データを一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて、２２ｂｉｔのパック領域１データと、１０ｂｉｔのパック領域２データとのタイミングの整合をとって、３２ｂｉｔのパックデータを生成する。
【００５０】
次に、撮像装置１内のデータ逆変換部について説明する。なお、上記に述べたように、データ逆変換部５２とデータ逆変換部６２とは、接続される前段の処理ブロックと後段の処理ブロックが異なるのみである。より具体的には、図１に示したように、データ逆変換部５２は、前段の入力ＤＭＡ部５６と後段の画像処理部５０との間に配置され、データ逆変換部６２は、前段の入力ＤＭＡ部６６と後段の表示処理部６０との間に配置されている。従って、データ逆変換部５２とデータ逆変換部６２とは、入力される画像データと出力する画像データとのデータ形式（フォーマット）が異なるのみである。以下の説明においては、代表してデータ逆変換部５２について説明する。
【００５１】
図３は、本実施形態の撮像装置１に備えた本第１の構成のデータ逆変換部５２の概略構成を示したブロック図である。図３に示したように、データ逆変換部５２は、データ分割部５２１と、パック領域１データ復元部５２２と、パック領域２データ復元部５２３と、データ選択部５２４と、を備えている。
【００５２】
なお、以下の説明においては、データ逆変換部５２に、データ変換部４１によってパッキングされた、４転送をパッキング単位とした１バーストのパックデータが、入力ＤＭＡ部５６を介して入力され、入力されたパックデータを、図１５に示したベイヤーデータに戻す場合について説明する。従って、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとして説明する。
【００５３】
データ逆変換部５２は、入力ＤＭＡ部５６から入力された３２ｂｉｔのパックデータの各ビットに配置されたデータを、予め定められた後述するパッキング方法のいずれか１つの方法と逆の方法で、画像処理部５０が画像処理する元の画像データ（ベイヤーデータ）に戻した１１ｂｉｔの画素データを出力する。データ逆変換部５２では、元の画素データの連続する各ビットがそのままメモリバス上の連続する各ビットに配置された２２ｂｉｔのパック領域１と、元の画素データの各ビットが分割してメモリバス上のビットに配置された１０ｂｉｔのパック領域２とに分けて、メモリバス上の各ビットのデータを、それぞれ元の画素データの各ビットに分配する。
【００５４】
なお、データ逆変換部５２におけるパック領域１に配置された元の画素データとパック領域２に配置された元の画素データとは、画像処理部５０から入力されるデータイネーブル信号に基づいて判別される。このデータイネーブル信号は、画像処理部５０に出力する元の画素データが、ＣＣＤ３０の何色の画素のデータであるかを表す情報を含んでいる信号である。
【００５５】
データ分割部５２１は、パックデータをパック領域１データとパック領域２データとに分割する。そして、データ分割部５２１は、分割したパック領域１データ（図３においては、２２ｂｉｔのパック領域１データ）をパック領域１データ復元部５２２に、パック領域２データ（図３においては、１０ｂｉｔのパック領域２データ）をパック領域２データ復元部５２３に、それぞれ出力する。
【００５６】
パック領域１データ復元部５２２は、データ分割部５２１から入力されたパック領域１データの各ビットに順次配置された、２画素分の元の画素データを、例えば、パック領域１データの上位側のビット（図３においては、１１ｂｉｔ）の画素データと、下位側のビット（図３においては、１１ｂｉｔ）の画素データとに分割する。そして、分割したそれぞれの画素データを、データ選択部５２４に出力する。
【００５７】
パック領域２データ復元部５２３は、画像処理部５０から入力されたデータイネーブル信号に基づいて、データ分割部５２１から入力されたパック領域２データの各ビットに配置された、３画素分の画素データをそれぞれの画素データに分割する。そして、分割したそれぞれの画素データ（図３においては、１１ｂｉｔ）を、データ選択部５２４に出力する。
【００５８】
なお、パック領域２データ復元部５２３は、予め定められた後述するパッキング方法と逆の方法で、それぞれの画素データに分割する。なお、パック領域２データ復元部５２３内には、例えば、パッキング単位（４転送）分のパック領域２データを一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、パック領域２データ内で分割して配置されている１１ｂｉｔの画素データを揃えて、データ選択部５２４に出力する。
【００５９】
データ選択部５２４は、画像処理部５０から入力されたデータイネーブル信号に基づいて、パック領域１データ復元部５２２またはパック領域２データ復元部５２３から入力された画素データを順次選択し、データ逆変換部５２が分割（アンパッキング）した元の画素データとして、画像処理部５０に出力する。なお、データ選択部５２４内には、パック領域１データ復元部５２２およびパック領域２データ復元部５２３からそれぞれ入力された、１１ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、画素データの出力タイミングの整合をとって、それぞれの画素データを順次、画像処理部５０に出力する。
【００６０】
次に、画素データの配置（パッキング）方法について説明する。本実施形態の撮像装置１では、データ変換部４１および５１が入力された画素データをメモリバスに配置したパックデータを生成し、データ逆変換部５２および６２が入力されたパックデータを元の画素データに戻す。なお、以下の説明においては、データ変換部４１に、図１５に示したベイヤーデータ内の各画素データが順次入力され、４転送を１つのパッキング単位とした１バーストのパックデータにパッキングする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は１１ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとする。
【００６１】
なお、データ逆変換部５２および６２によるパックデータを元の画素データに戻す方法は、データ変換部４１および５１による画素データのパッキング方法と逆の方法であるため、詳細な説明は省略する。
【００６２】
＜第１のデータ配置方法＞
図４は、本第１の構成のデータ変換部４１における本第１のデータ配置方法（パッキング方法）を説明する図である。図４（ａ）は、パックデータ内の画素データの配置を示し、図４（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００６３】
上記に述べたように、画像データは、通常、隣接する画素同士の方が画素データの変化量が小さい。このため、パックデータを構築する際には、バースト転送時にメモリバスの各ビットの変化量が最も小さくなるように、隣接する画素の画素データの同一ビットを、各転送におけるメモリバスの同一のビットに配置することが望ましい。
【００６４】
また、ベイヤー、ＲＧＢ、またはＹＣ４２２点順次など、画像処理部５０が画像処理する際の画像のフォーマットによって、画像データ内の各画素データが表す色の情報が異なる。このため、パックデータを構築する際には、バースト転送時にメモリバスの各ビットの変化量が最も小さくなるように、同一色の画素データを、各転送におけるメモリバスの同一のビットに配置することが望ましい。
【００６５】
本第１のパッキング方法では、パック領域１データ生成部４１１が、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００６６】
また、パック領域２データ生成部４１２が、画素データが配置されずに残っているパックデータ内のパック領域２の連続する４転送間で、画素データがラスター順となるように、画素データの各ビットを詰めてパック領域２データを配置する。
【００６７】
より具体的には、パック領域１データ生成部４１１は、ベイヤーデータ内の各画素データ（「Ｒ０」，「Ｇ１」，「Ｒ２」，「Ｇ３」，「Ｒ４」，「Ｇ５」，「Ｒ６」，「Ｇ７」）を、図４（ａ）に示したように、１転送目に「Ｒ０」および「Ｇ１」、２転送目に「Ｒ２」および「Ｇ３」、３転送目に「Ｒ４」および「Ｇ５」、４転送目に「Ｒ６」および「Ｇ７」を、それぞれメモリバスの最下位ビットから順次配置（パッキング）する。
【００６８】
また、パック領域２データ生成部４１２は、ベイヤーデータ内の各画素データ（「Ｒ８」，「Ｇ９」，「Ｒ１０」）を、図４（ｂ）に示したように、１転送目に「Ｒ８」のビット［０］〜ビット［９］、２転送目に「Ｒ０」のビット［１０］および「Ｇ９」のビット［０］〜ビット［８］、３転送目に「Ｇ９」のビット［９］〜ビット［１０］および「Ｒ１０」のビット［０］〜ビット［７］、４転送目に「Ｒ１０」のビット［８］〜ビット［１０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。
【００６９】
なお、パック領域２内に画素データの全てのビットを配置することができない場合には、次の画素データ（例えば、ベイヤーデータ内の画素データ「Ｇ１１」）をパッキングしない。これは、データ変換部４１は、パッキング単位で各画素データをパッキングするため、「Ｇ１１」の画素データの一部をパッキングすると、「Ｇ１１」のデータがパッキング単位を跨いでしまうことになるためである。従って、画素データが配置されなかったパック領域２内のデータバスのビット（図４においては、４転送目のデータバスのビット［３１］〜ビット［２５］）は、未使用ビットとする。なお、未使用ビットには、全て同じ値のデータ（例えば、全て“１”または全て“０”のデータ）を配置する構成とすることもできる。
【００７０】
このようにして、パックデータを生成することによって、本第１のパッキング方法では、各転送間での画素データのビット位置のずれが、メモリバス幅全体のうち、パック領域２のビットに限定される。さらに、本第１のパッキング方法では、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１内の画素データを配置している。これにより、バースト転送時におけるメモリバスの各ビットの変化量を少なくすることができる。このことにより、本第１のパッキング方法では、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。
【００７１】
＜第２のデータ配置方法＞
図５は、本第１の構成のデータ変換部４１における本第２のデータ配置方法（パッキング方法）を説明する図である。図５（ａ）は、パックデータ内の画素データの配置を示し、図５（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００７２】
本第２のパッキング方法では、パック領域１データ生成部４１１が、第１のパッキング方法と同様に、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。なお、第２のパッキング方法におけるパック領域１のパックデータの配置方法は、第１のパッキング方法と同様であるため、詳細な説明は省略する。
【００７３】
また、パック領域２データ生成部４１２が、画素データが配置されずに残っているパックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割する。そして、分割した画素データの隣接する同一色の画素データが、連続する２転送間でメモリバス上の同一ビットに配置されるように、パック領域２データを配置する。また、分割した残りのビットは、４転送目に配置する。
【００７４】
より具体的には、パック領域２データ生成部４１２は、ベイヤーデータ内の各画素データ（「Ｒ８」，「Ｇ９」，「Ｒ１０」）を、図５（ｂ）に示したように、１転送目に「Ｒ８」のビット［１］〜ビット［１０］、２転送目に「Ｒ１０」のビット［１］〜ビット［１０］、３転送目に「Ｇ９」のビット［１］〜ビット［１０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。また、４転送目に「Ｒ８」のビット［０］、「Ｇ９」のビット［０］、「Ｒ１０」のビット［０］を、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。
【００７５】
なお、パック領域２内に画素データの全てのビットを配置することができない場合においては、第１のパッキング方法と同様に、画素データが配置されなかったパック領域２内のデータバスのビット（図５においては、４転送目のデータバスのビット［３１］〜ビット［２５］）は、未使用ビットとする。
【００７６】
このようにして、本第２のパッキング方法では、パック領域２においても、メモリバス上の同一ビットに各画素データの同一ビットを配置している（図５における１転送目〜３転送目参照）。また、隣接する同一色の画素データを、連続する２転送間に配置している（図５における１転送目および２転送目参照）。そして、１転送目〜３転送目に配置されなかった各画素データのビットを、４転送目に配置している。これにより、第１のパッキング方法よりもさらにバースト転送時におけるメモリバスの各ビットの変化量、特に、パック領域２の各ビットの変化量を少なくすることができる。このことにより、本第２のパッキング方法では、第１のパッキング方法よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【００７７】
なお、図５に示した第２のパッキング方法では、パック領域２に各画素データを配置する際に、各画素データのビット［０］をまとめて配置している場合について説明したが、これは、パック領域２のメモリバス幅が１０ｂｉｔであり、画素データのビット数は１１ｂｉｔであるためである。すなわち、メモリバス上に画素データを配置するとき、１転送内のメモリバスに配置することができなかった各画素データの最下位の１ｂｉｔ（図５においては、各画素データのビット［０］）を、４転送目にまとめて配置したのである。従って、１転送内のメモリバスに配置することができなかった各画素データが複数ビットある場合には、その複数ビットの各画素データを、４転送目にまとめて配置することになる。なお、４転送目にまとめて配置する各画素のビットは、下位ビットが望ましい。これは、画像データは、通常、画素データの下位ビットの方が、隣接する画素同士でも、例えば、撮像装置１内のノイズ成分によって値が異なることが予想されるためである。
【００７８】
＜第３のデータ配置方法＞
図６は、本第１の構成のデータ変換部４１における本第３のデータ配置方法（パッキング方法）を説明する図である。図６（ａ）は、パックデータ内の画素データの配置を示し、図６（ｂ）は、パックデータ内のパック領域２の画素データの各ビットの配置を示している。
【００７９】
本第３のパッキング方法では、パック領域１データ生成部４１１が、第１のパッキング方法および第２のパッキング方法と同様に、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、画素データを配置する。なお、第３のパッキング方法におけるパック領域１のパックデータの配置方法は、第１のパッキング方法および第２のパッキング方法と同様であるため、詳細な説明は省略する。
【００８０】
また、パック領域２データ生成部４１２が、第２のパッキング方法と同様に、画素データが配置されずに残っているパックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割して配置する。さらに、本第３のパッキング方法では、パック領域２データ生成部４１２が、パック領域２内の未使用ビットに、直前の１転送で配置した画素データと同一ビットの画素データを再度配置、すなわち、コピーして配置する。なお、第３のパッキング方法におけるパック領域２の未使用ビット以外のパックデータの配置方法は、第２のパッキング方法と同様であるため、詳細な説明は省略する。
【００８１】
ここで、パック領域２データ生成部４１２による未使用ビットの画素データの配置について、より具体的に説明する。パック領域２データ生成部４１２は、４転送目の未使用ビット（図６においては、４転送目のデータバスのビット［３１］〜ビット［２５］）に、３転送目のデータバスのビット［３１］〜ビット［２５］に配置した画素データ（図６においては、画素データ「Ｇ９」のビット［４］〜ビット［１０］）を、コピーして、再度配置する。
【００８２】
このようにして、本第３のパッキング方法では、パック領域２内の未使用ビットに、直前の１転送で配置した画素データと同一の値を配置している（図６における４転送目参照）。これにより、第２のパッキング方法よりもさらにバースト転送時におけるメモリバスの各ビットの変化量、特に、パック領域２の未使用ビットの変化量を少なくすることができる。このことにより、本第３のパッキング方法では、第２のパッキング方法よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【００８３】
上記に述べたように、本第１の構成のデータ変換部４１および５１では、バースト転送時におけるメモリバスの各ビットの変化量が少なくなるように、画素データを配置することができる。これにより、本第１の構成のデータ変換部４１および５１では、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。このことにより、撮像装置１内の各構成要素（処理ブロック）とメモリ２０との間での画素データの転送、すなわち、撮像装置１内の各構成要素間での画素データの受け渡しに係る消費電力を低減させることができる。
【００８４】
＜第２の構成＞
次に、本第２の構成のデータ変換部について説明する。図７は、本実施形態の撮像装置１に備えた本第２の構成のデータ変換部４３の概略構成を示したブロック図である。図７に示したデータ変換部４３は、第１の構成のデータ変換部４１の代わりに、撮像装置１に備えられる。従って、データ変換部４３は、データ変換部５１の代わりに撮像装置１に備えることもできる。図７に示したように、データ変換部４３は、ビット分割部４３０と、パック領域１データ生成部４３１と、パック領域２データ生成部４３２と、データ結合部４３３と、を備えている。
【００８５】
なお、以下の説明においては、第１の構成と同様に、データ変換部４３に、図１５に示したような、１６行×１６列のベイヤーデータが入力され、４転送をベイヤーデータ内の各画素データのパッキング単位とし、メモリバス幅は３２ｂｉｔである場合について説明する。なお、図７においては、第２の構成と異なり、ベイヤーデータ内の各画素データのビット数が９ｂｉｔであるものとして説明する。
【００８６】
データ変換部４３は、撮像処理部４０から入力された９ｂｉｔの画素データの各ビットのデータを、予め定められた後述するパッキング方法で、メモリバス上の各ビットに配置した３２ｂｉｔのパックデータを出力する。データ変換部４３は、第１の構成のデータ変換部４１と同様に、パッキング単位をパック領域１とパック領域２とに分けてメモリバス上の各ビットに画素データの各ビットを配置する。ただし、メモリバス上の各ビットに画素データの各ビットを配置する方法は、第１の構成のデータ変換部４１と異なる。データ変換部４３によるメモリバスへの画素データの配置方法に関する詳細な説明は、後述する。
【００８７】
ビット分割部４３０は、入力されたそれぞれの画素データを、例えば、上位８ビットの画素データ（以下、「上位画素データ」という）と下位１ビットの画素データ（以下、「下位画素データ」という）とに分割する。そして、分割した上位画素データを、パック領域１データ生成部４３１に出力する。またビット分割部４３０は、分割した下位画素データを、パック領域２データ生成部４３２に出力する。
【００８８】
パック領域１データ生成部４３１は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域１のデータバス（このデータバスはメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、４画素分の上位画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置する。そして、上位画素データを順次配置したメモリバス幅のビット数（図７においては、３２ｂｉｔ）のパック領域１データをデータ結合部４３３に出力する。また、パック領域１データ生成部４３１が、４転送目のパック領域１データをデータ結合部４３３に出力する際には、２画素分の上位画素データを、例えば、メモリバスの下位ビットに対応した位置のビットから、順次配置した１６ｂｉｔのパック領域１データをデータ結合部４３３に出力する。なお、パック領域１データ生成部４３１は、上位画素データをメモリ２０にバースト転送する際の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。
【００８９】
パック領域２データ生成部４３２は、撮像処理部４０から入力されたデータイネーブル信号に基づいて、パック領域２のデータバス（このデータバスもメモリバスの各ビットに対応しているため、以下の説明においては、「メモリバス」として説明する）の各ビットに、１４画素分の下位画素データを配置する。そして、下位画素データを配置したメモリバス幅以下のビット数（図７においては、１６ｂｉｔ）のパック領域２データをデータ結合部４３３に出力する。なお、パック領域２データ生成部４３２内には、例えば、１６個の１ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて画素データの出力タイミングの整合をとり、４転送目のタイミングでパック領域２データをデータ結合部４３３に出力する。
【００９０】
データ結合部４３３は、パック領域１データ生成部４３１から入力されたパック領域１データと、パック領域２データ生成部４３２から入力されたパック領域２データとを結合したパックデータを生成する。そして、データ結合部４３３は、生成したパックデータを順次、出力ＤＭＡ部４５に出力する。なお、データ結合部４３３は、１転送目〜３転送目までは、パック領域１データ生成部４３１から入力されたパック領域１データを、パックデータとして順次出力ＤＭＡ部４５に出力する。また、データ結合部４３３は、４転送目で、パック領域１データ生成部４３１から入力された１６ｂｉｔのパック領域１データと、パック領域２データ生成部４３２から入力された１６ｂｉｔのパック領域２データとを結合したパックデータを出力ＤＭＡ部４５に出力する。
【００９１】
なお、データ結合部４３３内には、例えば、１６ｂｉｔのパック領域１データを一時的に保持するメモリ部を備え、撮像処理部４０から入力されたデータイネーブル信号に基づいて、１６ｂｉｔの４転送目のパック領域１データと、１６ｂｉｔの４転送目のパック領域２データとのタイミングの整合をとって、３２ｂｉｔのパックデータを生成する。
【００９２】
次に、本第２の構成のデータ逆変換部について説明する。図８は、本実施形態の撮像装置１に備えた本第２の構成のデータ逆変換部５４の概略構成を示したブロック図である。図８に示したデータ逆変換部５４は、第１の構成のデータ逆変換部５２の代わりに、撮像装置１に備えられる。従って、データ逆変換部５４は、データ逆変換部６２の代わりに撮像装置１に備えることもできる。図８に示したように、データ逆変換部５４は、データ分割部５４１と、パック領域１データ復元部５４２と、パック領域２データ復元部５４３と、ビット結合部５４０と、データ選択部５４４と、を備えている。
【００９３】
なお、以下の説明においては、第１の構成と同様に、データ逆変換部５４に、データ変換部４３によってパッキングされた、４転送をパッキング単位とした１バーストのパックデータが、入力ＤＭＡ部５６を介して入力され、入力されたパックデータを、図１５に示したベイヤーデータに戻す場合について説明する。従って、ベイヤーデータ内の各画素データのビット数は９ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとして説明する。
【００９４】
データ逆変換部５４は、入力ＤＭＡ部５６から入力された３２ｂｉｔのパックデータの各ビットに配置されたデータを、予め定められた後述するパッキング方法と逆の方法で、画像処理部５０が画像処理する元の画像データ（ベイヤーデータ）に戻した９ｂｉｔの画素データを出力する。データ逆変換部５４は、第１の構成のデータ逆変換部５２と同様に、パッキング単位をパック領域１とパック領域２とに分けて、メモリバス上の各ビットのデータを、それぞれ元の画素データの各ビットに分配する。
【００９５】
データ分割部５４１は、パックデータをパック領域１データとパック領域２データとに分割する。そして、データ分割部５４１は、分割したパック領域１データ（図８においては、３２ｂｉｔのパック領域１データ、または１６ｂｉｔのパック領域１データ）をパック領域１データ復元部５４２に出力する。また、データ分割部５４１は、パック領域２データ（図８においては、１６ｂｉｔのパック領域２データ）をパック領域２データ復元部５４３に出力する。
【００９６】
パック領域１データ復元部５４２は、データ分割部５４１から入力されたパック領域１データの各ビットに順次配置された、４画素分の元の上位画素データを、例えば、パック領域１データの４つの上位画素データ（図８においては、８ｂｉｔ）に分割する。そして、分割したそれぞれの上位画素データを、ビット結合部５４０に出力する。
【００９７】
パック領域２データ復元部５４３は、画像処理部５０から入力されたデータイネーブル信号に基づいて、データ分割部５４１から入力されたパック領域２データの各ビットに配置された、１４画素分の下位画素データをそれぞれの画素データに分割する。そして、分割したそれぞれの下位画素データ（図８においては、１ｂｉｔ）を、ビット結合部５４０に順次出力する。なお、パック領域２データ復元部５４３は、予め定められた後述するパッキング方法と逆の方法で、それぞれの下位画素データに分割する。
【００９８】
ビット結合部５４０は、パック領域１データ復元部５４２から入力された上位画素データと、パック領域２データ復元部５４３から入力された下位画素データとをそれぞれ結合し、結合した画素データをデータ選択部５４４に出力する。なお、ビット結合部５４０内には、例えば、パッキング単位（４転送）分の上位画素データを一時的に保持するメモリ部を備え、パック領域２データ復元部５４３から下位画素データが入力される毎に、入力された下位画素データに対応する上位画素データを結合して、パック領域１データとパック領域２データとに分割して配置されている９ｂｉｔの画素データを揃えて、データ選択部５４４に出力する。
【００９９】
データ選択部５４４は、画像処理部５０から入力されたデータイネーブル信号に基づいて、ビット結合部５４０から入力された画素データを順次選択し、データ逆変換部５４が分割（アンパッキング）した元の画素データとして、画像処理部５０に出力する。なお、データ選択部５４４内には、ビット結合部５４０からそれぞれ入力された、９ｂｉｔの画素データをそれぞれ一時的に保持するメモリ部を備え、画像処理部５０から入力されたデータイネーブル信号に基づいて、画素データの出力タイミングの整合をとって、それぞれの画素データを順次、画像処理部５０に出力する。
【０１００】
次に、本第２の構成における画素データの配置（パッキング）方法について説明する。本実施形態の撮像装置１では、例えば、データ変換部４３が入力された画素データをメモリバスに配置したパックデータを生成し、データ逆変換部５４が入力されたパックデータを元の画素データに戻す。なお、以下の説明においては、データ変換部４３に、図１５に示したベイヤーデータ内の各画素データが順次入力され、４転送を１つのパッキング単位とした１バーストのパックデータにパッキングする場合について説明する。また、ベイヤーデータ内の各画素データのビット数は９ｂｉｔであり、メモリバス幅は３２ｂｉｔであるものとする。
【０１０１】
なお、データ逆変換部５４によるパックデータを元の画素データに戻す方法は、データ変換部４３による画素データのパッキング方法と逆の方法であるため、詳細な説明は省略する。
【０１０２】
＜第４のデータ配置方法＞
図９は、本第２の構成のデータ変換部４３における本第４のデータ配置方法（パッキング方法）を説明する図である。図９（ａ）は、上述した第２のパッキング方法によって、９ｂｉｔの画素データをメモリバス上に配置した場合の一例を示し、図９（ｂ）は、本第４のパッキング方法によるパックデータ内の画素データの配置を示し、図９（ｃ）は、本第４のパッキング方法によるパックデータ内のパック領域２の画素データの各ビットの配置を示している。
【０１０３】
第４のパッキング方法では、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。また、パックデータ内のパック領域２内で、同一のビット位置を境界として画素データを分割し、分割した画素データの隣接する同一色の画素データが、連続する２転送間でメモリバス上の同一ビットに配置されるように、パック領域２データを配置する。
【０１０４】
このことから、第２のパッキング方法では、図９（ａ）に示したように、ベイヤーデータ内の各画素データ（「Ｒ０」，「Ｇ１」，「Ｒ２」，「Ｇ３」，「Ｒ４」，「Ｇ５」，「Ｒ６」，「Ｇ７」，「Ｒ８」，「Ｒ１０」，「Ｒ１２」）が、パック領域１に配置され、ベイヤーデータ内の各画素データ（「Ｇ９」，「Ｇ１１」，「Ｇ１３」）が、パック領域２に配置されることになる。
【０１０５】
図９（ａ）に示した第２のパッキング方法でも、バースト転送時のメモリバスの各ビットの変化量が少なくなっているため、画像データの転送に係る消費電力を低減させることができるが、３転送目におけるメモリバスのビット［２７］〜ビット［３１］と、４転送目におけるメモリバスのビット［１９］〜ビット［２６］とで消費電力が上昇することが予想される。
【０１０６】
画像データは、隣接する画素間で画素データの変化量が小さい場合、画素データの上位ビットは変化せず、下位ビットだけが変化することが予想される。このため、画素データを上位ビットと下位ビットとに分割し、変化量の少ない上位ビットをパック領域１に配置し、変化量が多い下位ビットをパック領域２に配置してパックデータを構築した方が、さらにバースト転送時のメモリバスの各ビットの変化量が少なくなる場合がある。
【０１０７】
本第４のパッキング方法では、ビット分割部４３１が、画素データを上位画素データと下位画素データとに分割する。そして、パック領域１データ生成部４３１が、分割した上位画素データを、パックデータ内のパック領域１の連続する２転送間のデータにおいて、隣接する同一色の上位画素データが、メモリバス上の同一ビットに配置されるように、パック領域１データを配置する。また、パック領域２データ生成部４３２が、分割した下位画素データを、４転送目に配置する。
【０１０８】
より具体的には、ビット分割部４３１が、ベイヤーデータ内の各画素データを、上位画素データ（ビット［８］〜ビット［１］）と、下位画素データ（ビット［０］）とに分割する。そして、パック領域１データ生成部４３１は、図９（ｂ）に示したように、１転送目に「Ｒ０」、「Ｇ１」、「Ｒ８」、および「Ｇ９」、２転送目に「Ｒ２」、「Ｇ３」、「Ｒ１０」、および「Ｇ１１」、３転送目に「Ｒ４」、「Ｇ５」、「Ｒ１２」、および「Ｇ１３」、４転送目に「Ｒ６」および「Ｇ７」の上位画素データを、それぞれメモリバスの最下位ビットから順次配置（パッキング）する。
【０１０９】
また、パック領域２データ生成部４３２は、「Ｒ０」、「Ｇ１」、「Ｒ２」、「Ｇ３」、「Ｒ４」、「Ｇ５」、「Ｒ６」、「Ｇ７」、「Ｒ８」、「Ｇ９」、「Ｒ１０」、「Ｇ１１」、「Ｒ１２」および「Ｇ１３」の下位画素データを、それぞれパック領域２のメモリバスの下位ビットから順次パッキングする。なお、４転送目におけるメモリバスのビット［３０］およびビット［３１］は、未使用ビットとする。これは、第１の構成と同様の理由である。
【０１１０】
このようにして、パックデータを生成することによって、本第４のパッキング方法では、第１の構成と同様に、各転送間での画素データのビット位置のずれが、メモリバス幅全体のうち、パック領域２のビットに限定される。さらに、本第４のパッキング方法では、パック領域２が４転送目のみに限定されため、メモリバスに占めるパック領域２の割合を少なくすることができる。これにより、バースト転送時におけるメモリバスの各ビットの変化量を、さらに少なくすることができる。このことにより、本第４のパッキング方法では、第１の構成のパッキング方法（第１〜第３のパッキング方法）よりもさらに、画像データの転送に係る消費電力を低減させることができる。
【０１１１】
なお、本第４のパッキング方法においても、第３のパッキング方法と同様に、図９に示した未使用ビットに、３転送目のデータバスのビット［３０］〜ビット［３１］に配置した画素データ（図９においては、画素データ「Ｇ１３」のビット［７］〜ビット［８］）を、コピーして、再度配置することにより、さらに画像データの転送に係る消費電力を低減させることができる。
【０１１２】
上記に述べたように、本第２の構成のデータ変換部４３では、バースト転送時におけるメモリバスの各ビットの変化量が少なくなるように、画素データを配置することができる。これにより、本第２の構成のデータ変換部４３でも、従来のバースト単位でのパッキング方法と同様に、画像データの転送効率を維持すると共に、従来のバースト単位でのパッキング方法よりも、画像データの転送に係る消費電力を低減させることができる。このことにより、第１の構成のデータ変換部４１および５１と同様に、撮像装置１内の各構成要素（処理ブロック）とメモリ２０との間での画素データの転送、すなわち、撮像装置１内の各構成要素間での画素データの受け渡しに係る消費電力を低減させることができる。
【０１１３】
なお、上記に述べた実施形態においては、ベイヤーデータに本実施形態のパッキング方法を適用した場合について説明したが、本実施形態のパッキング方法は、ベイヤーデータへの適用に限定されるものではなく、ＲＧＢデータ、ＹＣ４２２点順次やＹＣ４４４点順次フォーマットのＹＣｂＣｒデータ、またはＯＳＤデータなど、様々な画像データに適用することができる。また、本実施形態のパッキング方法は、画像データへの適用に限定されるものではなく、音声データなど、他の形式のデータに適用することもできる。
【０１１４】
＜適用例＞
次に、本実施形態のパッキング方法を、他の形式の画像データや、画像データ以外のデータに適用した場合の一例について説明する。まず、本実施形態のパッキング方法をＲＧＢデータに適用した場合の一例について説明する。図１０は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、別の画像データ（ＲＧＢデータ）に適用した場合の一例を示した図である。なお、図１０では、８ｂｉｔのＲＧＢデータに、従来のバースト単位でのパッキング方法を適用した一例（図１０（ａ）参照）と、第３のパッキング方法を適用した一例（図１０（ｂ）参照）とを、それぞれ示している。
【０１１５】
図１０（ａ）に示したように、従来のバースト単位でのパッキング方法によって、ＲＧＢデータ（８ｂｉｔ×３色＝２４ｂｉｔ）を単純に配置すると、３２ｂｉｔのメモリバスの全てのビットが、異なる色の画素データになってしまう。これに対して、図１０（ｂ）に示した第３のパッキング方法では、パック領域１のメモリバスの各ビットは、４つの転送とも同一色の画素データの同一ビットとなる。また、パック領域２の４転送目のメモリバスの各ビットの値は、３転送目のメモリバスの各ビットの値を同じ値になる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、パック領域２では、３転送目と４転送目とのメモリバスの各ビットの変化量をなくすことができる。このことにより、画像データの転送に係る消費電力を低減させることができる。
【０１１６】
図１１は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、さらに別の画像データ（ＹＣｂＣｒデータ）に適用した場合の一例を示した図である。なお、図１１では、図１１（ａ）に示したような、１０ｂｉｔのＹ、８ｂｉｔのＣｂおよびＣｒデータに、従来のバースト単位でのパッキング方法を適用した一例（図１１（ｂ）参照）と、第１のパッキング方法を適用した一例（図１１（ｃ）参照）とを、それぞれ示している。
【０１１７】
図１１（ｂ）に示したように、従来のバースト単位でのパッキング方法によって、ＹＣｂＣｒデータを単純に配置すると、メモリバスの全てのビットが、異なる色を表す画素データになってしまう。これに対して、図１１（ｃ）に示した第１のパッキング方法では、パック領域１のメモリバスの各ビットは、同一の色を表す画素データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データの転送に係る消費電力を低減させることができる。また、図１１に示した例からもわかるように、本実施形態のパッキング方法では、それぞれのデータのビット数が異なる場合でも、同様に適用することができる。
【０１１８】
図１２は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、さらに別の画像データ（ＯＳＤデータ）に適用した場合の一例を示した図である。なお、図１２では、６ｂｉｔのＯＳＤデータに、従来のバースト単位でのパッキング方法を適用した一例（図１２（ａ）参照）と、第２のパッキング方法を適用した一例（図１０（ｂ）参照）とを、それぞれ示している。
【０１１９】
図１２（ａ）に示したように、従来のバースト単位でのパッキング方法によって、ＯＳＤデータを単純に配置すると、メモリバスの全てのビットが、異なる表示データの異なるビットになってしまう。これに対して、図１２（ｂ）に示した第２のパッキング方法では、パック領域１のメモリバスの各ビットは、表示データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データの転送に係る消費電力を低減させることができる。また、図１２（ｂ）をみてもわかるように、本実施形態のパッキング方法では、３２ｂｉｔのメモリバス幅のほとんどがパック領域１であるため、より多くの消費電力の低減効果を得ることができる。
【０１２０】
図１３は、本実施形態の撮像装置１に備えたデータ変換部４１によるデータ配置方法（パッキング方法）を、別のデータ（音声データ）に適用した場合の一例を示した図である。なお、図１３では、それぞれ２４ｂｉｔのＲ（右）データおよびＬ（左）データを６４ｂｉｔのメモリバスに適用した場合を示している。そして、図１３（ａ）には、従来のバースト単位でのパッキング方法を適用した一例を示し、図１３（ｂ）には、第２のパッキング方法を適用した一例を示している。
【０１２１】
図１３（ａ）に示したように、従来のバースト単位でのパッキング方法によって、音声データを単純に配置すると、６４ｂｉｔのメモリバスの全てのビットが、異なるビットの音声データになってしまう。これに対して、図１３（ｂ）に示した第２のパッキング方法では、パック領域１のメモリバスの各ビットは、同じ側の音声データの同一ビットとなる。これにより、パック領域１では、バースト転送時のメモリバスの各ビットの変化量を少なくすることができ、画像データ以外の他の形式のデータでも、転送に係る消費電力を低減させることができる。
【０１２２】
上記に述べたとおり、本発明を実施するための形態によれば、メモリバス幅をパック領域１とパック領域２とに分ける。そして、パック領域１のメモリバス上の各ビットには、転送するデータの各ビットを、ほぼそのまま配置する。また、パック領域２のメモリバス上の各ビットには、転送するデータの各ビットを分割して配置する。これにより、バースト転送時におけるメモリバスの各ビットの変化量を少なくすることができる。しかも、データの転送効率は、従来と同等のデータ転送効率を維持することができる。これにより、像装置内の各構成要素（処理ブロック）とメモリとの間でのデータの受け渡しに係る消費電力の低減効果を十分に得ることができる。
【０１２３】
なお、本実施形態においては、４転送を１回のバースト転送の単位とし、１バーストをデータのパッキング単位とした場合について説明したが、１回のバースト転送における転送の回数や、データのパッキングの単位は、本発明を実施するための形態に限定されるものではない。例えば、６４転送を１回のバースト転送の単位とし、１バースト内の１６転送をデータのパッキングの単位とする、すなわち、１バースト内に４つのパッキング単位が含まれる構成にすることもできる。また、例えば、１６転送をデータのパッキングの単位とし、８転送を１回のバースト転送の単位とする、すなわち、パッキング単位が２回のバースト転送に跨っている構成にすることもできる。
【０１２４】
また、本実施形態においては、撮像装置内の構成要素間でデータの受け渡しを行う場合のパッキング方法を、いくつかのデータに適用した場合について説明したが、本実施形態のパッキング方法を適用することができる範囲は、本発明を実施するための形態に限定されるものではなく、各構成要素間でデータの受け渡しを行うシステムであれば、どのようなシステムにも適用することができる。
【０１２５】
また、本実施形態においては、例えば、データ変換部を出力ＤＭＡ部の前段の処理ブロックとして配置し、データ逆変換部を入力ＤＭＡ部の後段の処理ブロックとして配置した場合の一例について説明したが、データ変換部およびデータ逆変換部の配置は、本発明を実施するための形態に限定されるものではない。例えば、データ変換部を出力ＤＭＡ部内の構成要素とすることや、データ逆変換部を入力ＤＭＡ部内の構成要素とすることもできる。また、例えば、データ変換部を前段の撮像処理部内の構成要素とすることや、データ逆変換部を後段の画像処理部内の構成要素とすることもできる。
【０１２６】
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。
【符号の説明】
【０１２７】
１・・・撮像装置（データ処理装置）
１０・・・ＣＰＵ（データ処理装置）
２０・・・メモリ（データ処理装置）
３０・・・ＣＣＤ
４０・・・撮像処理部
５０・・・画像処理部
６０・・・表示処理部
７０・・・表示デバイス
４１，５１・・・データ変換部（データ処理装置）
４１１・・・パック領域１データ生成部（第１のデータ生成部）
４１２・・・パック領域２データ生成部（第２のデータ生成部）
４１３・・・データ結合部
５２，６２・・・データ逆変換部（データ処理装置）
５２１・・・データ分割部
５２２・・・パック領域１データ復元部（第１のデータ復元部）
５２３・・・パック領域２データ復元部（第２のデータ復元部）
５２４・・・データ選択部
４５，５５・・・出力ＤＭＡ部
５６，６６・・・入力ＤＭＡ部
４３・・・データ変換部（データ処理装置）
４３０・・・ビット分割部（画素データ分割部）
４３１・・・パック領域１データ生成部（第１のデータ生成部）
４３２・・・パック領域２データ生成部（第２のデータ生成部）
４３３・・・データ結合部
５４・・・データ逆変換部（データ処理装置）
５４１・・・データ分割部
５４２・・・パック領域１データ復元部（第１のデータ復元部）
５４３・・・パック領域２データ復元部（第２のデータ復元部）
５４０・・・ビット結合部（画素データ結合部）
５４４・・・データ選択部
【特許請求の範囲】
【請求項１】
順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換部、
を備え、
前記データ変換部は、
前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成部と、
前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成部と、
前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合部と、
を具備する、
ことを特徴とするデータ処理装置。
【請求項２】
前記第２のデータ生成部は、
前記第２の数の前記入力データを、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記入力データの各ビットを順次割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項３】
前記第２のデータ生成部は、
前記第２の数の前記入力データのそれぞれを、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割し、
該分割した上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一のビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のデータで同一のビットに割り当てられるように、前記第２のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、
前記上位ビットの入力データを割り当てた後、残っている同一の前記変換単位に含まれる前記第２のデータで連続するように、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを順次割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項４】
前記第２のデータ生成部は、
前記入力データを割り当てた後、残っている前記第２のデータの各ビットに、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータをそれぞれ割り当てる、
ことを特徴とする請求項２または請求項３に記載のデータ処理装置。
【請求項５】
前記データ変換部は、
前記入力データを予め定められたビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割する入力データ分割部を、
さらに備え、
前記第１のデータ生成部は、
前記第１のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、
第２のデータ生成部は、
前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項６】
複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換部、
を備え、
前記データ逆変換部は、
前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割部と、
前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元部と、
前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元部と、
前記分離されたそれぞれの前記入力データを選択するデータ選択部と、
を具備する、
ことを特徴とするデータ処理装置。
【請求項７】
前記第２のデータは、
同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記第２の数の前記入力データの各ビットが順次割り当てられている、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項８】
前記第２のデータは、
前記第２の数の前記入力データのそれぞれが、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割され、
該分割された上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一の各ビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のビット範囲の同一の各ビットに割り当てられ、
該分割された下位ビットの入力データの各ビットが、前記上位ビットの入力データの各ビットに割り当てられた後、残っている同一の前記変換単位に含まれる前記第２のビット範囲の各ビットに、前記第２のビット範囲で連続するように順次割り当てられている、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項９】
前記第２のデータは、
同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータが割り当てられている、
ことを特徴とする請求項７または請求項８に記載のデータ処理装置。
【請求項１０】
前記データ逆変換部は、
前記第１のビット範囲の各ビットに割り当てられた前記入力データの予め定められたビット数の上位ビットの入力データと、前記第２のビット範囲の各ビットに割り当てられた前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとを結合する入力データ結合部を、
さらに備え、
前記データ選択部は、
前記結合されたそれぞれの前記入力データを選択する、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項１１】
順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換ステップ、
を含み、
前記データ変換ステップは、
前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成ステップと、
前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成ステップと、
前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合ステップと、
を含む、
ことを特徴とするデータ処理方法。
【請求項１２】
複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換ステップ、
を含み、
前記データ逆変換ステップは、
前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割ステップと、
前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元ステップと、
前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元ステップと、
前記分離されたそれぞれの前記入力データを選択するデータ選択ステップと、
を含む、
ことを特徴とするデータ処理方法。
【請求項１】
順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換部、
を備え、
前記データ変換部は、
前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成部と、
前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成部と、
前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合部と、
を具備する、
ことを特徴とするデータ処理装置。
【請求項２】
前記第２のデータ生成部は、
前記第２の数の前記入力データを、同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記入力データの各ビットを順次割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項３】
前記第２のデータ生成部は、
前記第２の数の前記入力データのそれぞれを、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割し、
該分割した上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一のビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のデータで同一のビットに割り当てられるように、前記第２のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、
前記上位ビットの入力データを割り当てた後、残っている同一の前記変換単位に含まれる前記第２のデータで連続するように、前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを順次割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項４】
前記第２のデータ生成部は、
前記入力データを割り当てた後、残っている前記第２のデータの各ビットに、同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータをそれぞれ割り当てる、
ことを特徴とする請求項２または請求項３に記載のデータ処理装置。
【請求項５】
前記データ変換部は、
前記入力データを予め定められたビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割する入力データ分割部を、
さらに備え、
前記第１のデータ生成部は、
前記第１のビット範囲の各ビットに前記上位ビットの入力データの各ビットを割り当て、
第２のデータ生成部は、
前記第２のビット範囲の各ビットに前記下位ビットの入力データの各ビットを割り当てる、
ことを特徴とする請求項１に記載のデータ処理装置。
【請求項６】
複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換部、
を備え、
前記データ逆変換部は、
前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割部と、
前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元部と、
前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元部と、
前記分離されたそれぞれの前記入力データを選択するデータ選択部と、
を具備する、
ことを特徴とするデータ処理装置。
【請求項７】
前記第２のデータは、
同一の前記変換単位に含まれる複数の前記転送単位の前記第２のデータ内で連続するように、前記第２のビット範囲の各ビットに前記第２の数の前記入力データの各ビットが順次割り当てられている、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項８】
前記第２のデータは、
前記第２の数の前記入力データのそれぞれが、前記第２のビット数の上位ビットの入力データと、前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとに分割され、
該分割された上位ビットの入力データの内、同じ種類の情報を持つ２つの前記上位ビットの入力データの同一の各ビットが、同一の前記変換単位に含まれる連続する２つの前記転送単位の前記第２のビット範囲の同一の各ビットに割り当てられ、
該分割された下位ビットの入力データの各ビットが、前記上位ビットの入力データの各ビットに割り当てられた後、残っている同一の前記変換単位に含まれる前記第２のビット範囲の各ビットに、前記第２のビット範囲で連続するように順次割り当てられている、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項９】
前記第２のデータは、
同一の前記変換単位に含まれる直前の前記転送単位の前記第２のデータの同一のビットと同じデータが割り当てられている、
ことを特徴とする請求項７または請求項８に記載のデータ処理装置。
【請求項１０】
前記データ逆変換部は、
前記第１のビット範囲の各ビットに割り当てられた前記入力データの予め定められたビット数の上位ビットの入力データと、前記第２のビット範囲の各ビットに割り当てられた前記入力データの全てのビット数から前記上位ビットの入力データのビット数を減算したビット数の下位ビットの入力データとを結合する入力データ結合部を、
さらに備え、
前記データ選択部は、
前記結合されたそれぞれの前記入力データを選択する、
ことを特徴とする請求項６に記載のデータ処理装置。
【請求項１１】
順次入力された複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換して順次転送する際に、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記入力データを前記変換単位毎に配置するデータ変換ステップ、
を含み、
前記データ変換ステップは、
前記データバスのバス幅を、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割し、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータを順次生成する第１のデータ生成ステップと、
前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータを生成する第２のデータ生成ステップと、
前記第１のデータと前記第２のデータとを結合して、前記データバスのバス幅のビット数を持つ前記変換データを生成するデータ結合ステップと、
を含む、
ことを特徴とするデータ処理方法。
【請求項１２】
複数の入力データを、予め定められたビット数のデータバスと同じビット数の変換データに変換し、１つの前記変換データを１つの転送単位とし、予め定められた数の前記転送単位を１つの変換単位として、前記変換単位毎に順次転送されてきた変換データを順次逆変換して、複数の元の前記入力データに復元するデータ逆変換ステップ、
を含み、
前記データ逆変換ステップは、
前記データバスのバス幅が、予め定めた第１のビット数からなる第１のビット範囲と、前記データバスの全てのビット数から前記第１のビット数を減算した第２のビット数からなる第２のビット範囲とに分割され、複数の前記入力データにおいて同じ種類の情報を持つ前記入力データの同一のビットが、前記データバスの同一のビットで連続して転送されるように、予め定められた第１の数の入力データを前記第１のビット範囲に割り当てた第１のデータと、前記第１のデータに割り当てられていない前記入力データの内、予め定められた第２の数の入力データを前記第２のビット範囲に割り当てた第２のデータと、を含む前記変換データを、前記第１のデータと前記第２のデータとに順次分割するデータ分割ステップと、
前記第１のデータに含まれる前記第１の数の前記入力データを、それぞれの前記入力データに分離する第１のデータ復元ステップと、
前記第２のデータに含まれる前記第２の数の前記入力データを、それぞれの前記入力データに分離する第２のデータ復元ステップと、
前記分離されたそれぞれの前記入力データを選択するデータ選択ステップと、
を含む、
ことを特徴とするデータ処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【公開番号】特開２０１２−２０３５４２（Ｐ２０１２−２０３５４２Ａ）
【公開日】平成２４年１０月２２日（２０１２．１０．２２）
【国際特許分類】
【出願番号】特願２０１１−６６０５８（Ｐ２０１１−６６０５８）
【出願日】平成２３年３月２４日（２０１１．３．２４）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
【公開日】平成２４年１０月２２日（２０１２．１０．２２）
【国際特許分類】
【出願日】平成２３年３月２４日（２０１１．３．２４）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
[ Back to top ]