画像処理装置、撮像装置及びプログラム
【課題】一の被写体画像から主要被写体が含まれる画像領域を判別する。
【解決手段】撮像装置１００であって、主要被写体を含む一の被写体画像を撮像して取得する撮像部１と、一の被写体画像における主要被写体に対応する主要画像領域の位置を特定する処理、一の被写体画像における主要画像領域の位置以外の背景領域に対して所定の加工処理を行うＣＰＵ１２と、を備える。
【解決手段】撮像装置１００であって、主要被写体を含む一の被写体画像を撮像して取得する撮像部１と、一の被写体画像における主要被写体に対応する主要画像領域の位置を特定する処理、一の被写体画像における主要画像領域の位置以外の背景領域に対して所定の加工処理を行うＣＰＵ１２と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置及びプログラムに関する。
【背景技術】
【０００２】
従来、撮像した画像から被写体を抽出し、当該被写体と背景画像を合成して合成写真を取得する撮像装置が知られている（例えば、特許文献１参照）。具体的には、絞り値を変更して少なくとも２枚の画像を取得し、被写体抽出用の画像から被写体を抽出して、当該被写体を背景画像と合成する。
【特許文献１】特開２００６−１２８７５４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記特許文献１にあっては、被写体を少なくとも２枚撮影・記録しなければならないので、撮影者にとっては、同じ撮影画角について、撮影条件の異なる画像を少なくとも２枚撮影しなければならないという問題があった。
【０００４】
そこで、本発明の課題は、一の被写体画像から主要被写体が含まれる画像領域を判別することができる画像処理装置、撮像装置及びプログラムを提供することである。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、請求項１に記載の発明の画像処理装置は、
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、を備えることを特徴としている。
【０００６】
請求項２に記載の発明は、請求項１に記載の画像処理装置において、
前記被写体画像を構成する画素集合の輪郭線を抽出する抽出手段と、この抽出手段によって抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、前記主要被写体を描画した主要輪郭線を特定する輪郭線特定手段と、を更に備え、前記位置特定手段は、前記輪郭線特定手段によって特定された前記主要輪郭線で囲まれた画像領域の位置を、前記主要画像領域の位置として特定することを特徴としている。
【０００７】
請求項３に記載の発明は、請求項１に記載の画像処理装置において、
前記一の被写体画像を複数の領域に分割する分割手段と、この分割手段によって分割された夫々の領域について、周波数成分情報を取得する情報取得手段と、を更に備え、前記位置特定手段は、前記情報取得手段によって取得された前記周波数成分情報に基づいて、高周波成分が所定値よりも多い領域を前記第１の画像領域を構成する画像領域と判断することを特徴としている。
【０００８】
請求項４に記載の発明は、請求項１〜３の何れか一項に記載の画像処理装置において、
素材画像を記憶する素材画像記憶手段を更に備え、前記加工処理手段は、前記素材画像記憶手段に記憶されている前記素材画像を前記第２の画像領域に合成する画像合成手段を含むことを特徴としている。
【０００９】
請求項５に記載の発明は、請求項４に記載の画像処理装置において、
前記第２の画像領域における前記素材画像の合成位置を操作により入力する合成位置入力手段と、この合成位置入力検出手段による入力に基づいて、前記素材画像の合成位置を決定する合成位置決定手段と、を更に備え、前記画像合成手段は、前記合成位置決定手段によって決定された前記合成位置に前記素材画像を合成することを特徴としている。
【００１０】
請求項６に記載の発明の撮像装置は、
主要被写体を含む一の被写体画像を取得する撮像手段と、この撮像手段により取得された前記一の被写体画像における前記主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、を備えることを特徴としている。
【００１１】
請求項７に記載の発明のプログラムは、
コンピュータを、一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段、として機能させることを特徴としている。
【発明の効果】
【００１２】
本発明によれば、一の被写体画像から主要被写体が含まれる画像領域を判別することができる。
【発明を実施するための最良の形態】
【００１３】
以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
図１は、本発明を適用した一実施形態の撮像装置１００の外観を模式的に示す図であり、図１（ａ）は、撮像装置１００の正面図を表し、図１（ｂ）は、撮像装置１００の背面図を表し、図１（ｃ）は、撮像装置１００の平面図を表している。また、図２は、撮像装置１００の概略構成を示すブロック図である。
【００１４】
本実施形態の撮像装置１００は、一のモニタ表示用画像や記録用画像における主要被写体Ｓに対応する主要画像領域（第１の画像領域）Ａ１の位置を特定して、当該モニタ表示用画像や記録用画像における主要画像領域Ａ１の位置以外の背景領域（第２の画像領域）Ａ２に対して所定の加工処理を行う。
具体的には、図１（ａ）〜図１（ｃ）に示すように、撮像装置１００は、外形が略直方体状に形成され、その正面側に撮像部１の撮像レンズ１ａが露出するように配設され、撮像レンズ１ａの向かって右上側にストロボ発光窓２が配設されている（図１（ａ）参照）。また、撮像装置１００の背面には、図１（ｂ）に示すように、表示部３の表示画面３ａが露出するように配設され、表示画面３ａの向かって右側に、操作入力部４に備わるメニューキー４ａ、カーソルキー４ｂ及びセットキー４ｃが配設されている。また、撮像装置１００の上面には、操作入力部４に備わるシャッターボタン４ｄ、電源ボタン４ｅが並んで配設されている。
なお、図示は省略するが、例えば、撮像装置１００の左右何れかの側面には、ＰＣ等の外部機器とＵＳＢケーブル（図示略）を介して接続するためのＵＳＢ接続端子５（図２参照）が配設されている。
【００１５】
また、撮像装置１００は、図２に示すように、撮像部１と、ＤＭＡ制御部６と、ワークメモリ７と、画像エンジン８と、表示部３と、表示制御部９と、ＶＲＡＭ１０と、操作入力部４と、ＵＳＢ制御部１１と、ＣＰＵ１２と、フラッシュメモリ１３とを備えている。
【００１６】
撮像部１は、撮像手段として、被写体を連続して撮像して複数の画像フレームを生成する。具体的には、撮像部１は、撮像レンズ１ａと、電子撮像部１ｂと、ＩＳＰ１ｃ等を備えている。
【００１７】
撮像レンズ１ａは、例えば、複数のレンズから構成され、合焦レンズやズームレンズ等を備えている。
電子撮像部１ｂは、撮像レンズ１ａを通過した被写体像を二次元の画像信号に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等から構成されている。また、電子撮像部１ｂは、光電変換された画像信号をＡ／Ｄ変換して、デジタルデータとしてＩＳＰ１ｃに出力する。
なお、電子撮像部１ｂから出力されるデジタルデータは、カラーフィルタ（図示略）の配列（例えば、ベイヤ配列）に従った形式となっている。
ＩＳＰ（Image Signal Processor）１ｃは、入力されたデジタルデータに基づいて、色の調整、データフォーマット変換（例えば、ベイヤ配設から８bitの輝度信号Ｙ、色差信号Ｃｂ，Ｃｒへの変換）等を行う。
【００１８】
撮像部１から出力されるデータ（輝度信号Ｙ、色差信号Ｃｂ，Ｃｒ）は、ＤＭＡ制御部６の制御下にて、ワークメモリ７にＤＭＡ（Direct Memory Access）転送されて格納される。
【００１９】
ワークメモリ７は、例えば、ＤＲＡＭ等で構成され、フラッシュメモリ１３から読み出されたシステムプログラム、各種プログラム、各種データ及び各種パラメータ等を一時的に記憶する。
【００２０】
画像エンジン８は、ワークメモリ７内の輝度信号Ｙ、色差信号Ｃｂ，ＣｒをＲＧＢデータに変換してＶＲＡＭ１０に出力したり、画像撮影時にＪＰＥＧ等の所定のファイルフォーマットに変換してフラッシュメモリ１３に出力する。
【００２１】
また、画像エンジン８は、ＣＰＵ１２の制御下における表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理（後述）にて、モニタ表示用画像や記録用画像に対してフラッシュメモリ１３に記憶されている所望のＣＧ画像５０を合成する。
ここで、画像エンジン８及びＣＰＵ１２は、画像合成手段として機能する。
【００２２】
表示制御部９は、ＶＲＡＭ１０に一時的に記憶されている表示データを読み出して表示部３に表示させる制御を行う。
表示部３は、表示制御部９からの出力信号に基づいて撮像部１により撮像された画像等を表示画面３ａに表示する。具体的には、表示部３は、撮像部１による被写体の撮像により生成された複数の画像フレームに基づいてスルー画像や、フラッシュメモリ１３に記録される本画像（記録画像）や、ＣＧ合成処理にて生成されるＣＧ合成画像Ｉ６（図１０参照）等を表示する。
【００２３】
操作入力部４は、当該撮像装置１００の所定操作を行うためのものであり、メニューキー４ａ、カーソルキー４ｂ、セットキー４ｃ、シャッターボタン４ｄ、電源ボタン４ｅ等を備え、これらのキーやボタンの操作に応じて所定の操作信号をＣＰＵ１２に出力する。
メニューキー４ａは、ユーザによる操作に基づいて、機能選択や表示設定等に係るメニュー画面の表示部３への表示を指示する。
【００２４】
カーソルキー４ｂは、例えば、上下左右のカーソルキー４ｂを備えて構成され、ユーザによる操作に基づいて、メニュー画面に表示される各種項目の選択を指示する。具体的には、撮像装置１００の動作モードとして、例えば、所定サイズの静止画像を撮影する通常撮影モードや、静止画像にＣＧ画像５０を合成するＣＧ合成撮影モード、記録された画像を再生表示する再生モード等の選択を指示する。また、カーソルキー４ｂは、再生モードにて、表示部３に表示される画像の選択を指示する。さらに、カーソルキー４ｂは、ＣＧ合成撮影モードにて、静止画像に合成されるＣＧ画像５０の選択を指示する。
【００２５】
シャッターボタン４ｄは、ユーザによる操作に基づいて、撮像部１による被写体の撮像を指示する。
電源ボタン４ｅは、ユーザによる操作に基づいて、当該撮像装置１００の電源のＯＮ／ＯＦＦを指示する。
【００２６】
ＵＳＢ制御部１１は、ＵＳＢ接続端子５にＵＳＢケーブルを介して接続されたＰＣ等の外部機器との間で、各種データの送受信を制御する。
【００２７】
ＣＰＵ１２は、フラッシュメモリ１３に記憶された撮像装置１００用の各種処理プログラムに従って各種の制御動作を行うものである。
【００２８】
フラッシュメモリ１３は、ＣＰＵ１２の動作に必要な各種プログラムやデータを記憶する。具体的には、フラッシュメモリ１３は、図２に示すように、抽出プログラム１３ａ、輪郭線特定プログラム１３ｂ、ＣＧ合成制御プログラム１３ｃ等を記憶している。
【００２９】
抽出プログラム１３ａは、ＣＰＵ１２を抽出手段として機能させるものである。即ち、抽出プログラム１３ａは、被写体画像を構成する画素集合の輪郭線を抽出する抽出処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２が抽出プログラム１３ａを実行することで、撮像部１により撮像され取得されたモニタ表示用画像や記録用画像に平滑化処理（後述）が施されたものに対して、ソーベルフィルタを用いた３×３のマトリックス演算により１階微分処理を行って、画素集合の輪郭線（エッジ部分）を抽出する（図８（ｂ）参照）。
なお、抽出処理にあっては、ソーベルフィルタの代わりに、例えば、微分フィルタ、プリューウィットフィルタ、ラプラシアンフィルタ等を用いても良いし、これらのうちの何れか二つ以上を用いても良い。
【００３０】
輪郭線特定プログラム１３ｂは、ＣＰＵ１２を輪郭線特定手段として機能させるものである。即ち、輪郭線特定プログラム１３ｂは、抽出処理にて抽出された輪郭線のうち、所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓを描画した外周輪郭（主要輪郭線）Ｌ１を特定する輪郭線特定処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２が輪郭線特定プログラム１３ｂを実行することで、抽出処理後の画像Ｉ２（図８（ｂ）参照）に対してエッジの連結性を高めるための膨張処理、及び所定数よりも画素の連結数の少ない連結成分（画像集合）を除く小領域削除処理を行って、主要被写体Ｓの外周輪郭を特定する。
【００３１】
ＣＧ合成制御プログラム１３ｃは、画像エンジン８に、被写体画像の背景領域Ａ２（第２の画像領域）にＣＧ画像５０を合成させるＣＧ合成処理に係る制御をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２がＣＧ合成制御プログラム１３ｃを実行することで、表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理にて、画像エンジン８に、背景抽出処理（後述）にて抽出された被写体画像の背景領域（第２の画像領域）Ａ２におけるＣＧ合成座標にＣＧ画像５０を合成させる。
【００３２】
また、フラッシュメモリ１３は、素材画像記憶手段として、ＣＧ合成処理にて被写体画像と合成されるＣＧ画像（素材画像）５０を複数記憶する。
さらに、フラッシュメモリ１３は、撮像部１により撮像された本画像（撮影画像）やＣＧ合成処理後のＣＧ合成画像Ｉ６（図１０参照）等を記憶する。
【００３３】
次に、撮像装置１００によるＣＧ合成処理について図３〜図１０を参照して説明する。
なお、以下の説明にあっては、予めユーザによる操作入力部４の所定操作に基づいてＣＧ合成撮影モードに設定されているものとする。
ＣＧ合成処理としては、スルー画像にＣＧ画像５０を合成する表示画像ＣＧ合成処理と、本画像（記録画像）にＣＧ画像５０を合成する撮像画像ＣＧ合成処理がある。
【００３４】
先ず、表示画像ＣＧ合成処理について図３を参照して説明する。
図３は、表示画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【００３５】
撮像装置１００がＣＧ合成撮影モードに設定されていると、図３に示すように、ＣＰＵ１２は、撮像部１によりモニタ表示用画像を撮像して取得する処理を実行する（ステップＳ１Ａ）。
次に、ＣＰＵ１２は、取得したモニタ表示用画像に基づいて、当該モニタ表示用画像におけるＣＧ合成座標を計算するＣＧ合成座標計算処理を実行する（ステップＳ２Ａ：詳細後述）。
続けて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像（モニタ表示用画像）にＣＧ画像５０を合成して（ステップＳ３Ａ）、表示部３は、合成されたＣＧ合成画像Ｉ６（図１０参照）を表示画面３ａに表示する（ステップＳ４Ａ）。
【００３６】
次に、撮像画像ＣＧ合成処理について図４を参照して説明する。
図４は、撮像画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【００３７】
表示画面３ａにスルー画像を表示中や、上記の表示画像ＣＧ合成処理にて合成されたＣＧ合成画像Ｉ６を表示中に、ユーザによりシャッターボタン４ｄが所定操作されると、ＣＰＵ１２は、光学系駆動制御部（図示略）により合焦レンズを光軸方向に移動させて主要被写体Ｓにピントが合っている記録用画像を撮像部１により撮像して取得する処理を実行する（ステップＳ１Ｂ）。
次に、ＣＰＵ１２は、取得した記録用画像に基づいて、当該記録用画像におけるＣＧ合成座標を計算するＣＧ合成座標計算処理を実行する（ステップＳ２Ｂ：詳細後述）。
続けて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、記録用画像にＣＧ画像５０を合成して（ステップＳ３Ｂ）、ＤＭＡ制御部６は、合成されたＣＧ合成画像Ｉ６（図１０参照）をフラッシュメモリ１３に転送して記憶する（ステップＳ４Ｂ）。
【００３８】
次に、ＣＧ合成座標計算処理について、図５〜図９を参照して説明する。
図５は、ＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。また、図６は、ＣＧ合成座標計算処理における小領域削除処理に係る動作の一例を示すフローチャートであり、図７は、Ｇ合成座標計算処理における背景抽出処理に係る動作の一例を示すフローチャートである。また、図８（ａ）及び図８（ｂ）並びに図９（ａ）〜図９（ｃ）は、ＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【００３９】
表示画像ＣＧ合成処理におけるＣＧ合成座標計算処理（ステップＳ２Ａ）と、撮像画像ＣＧ合成処理におけるＣＧ合成座標計算処理（ステップＳ２Ｂ）は、略同様の処理であり、以下にまとめて説明する。
なお、以下に説明するＣＧ合成座標計算処理にあっては、予めユーザによる操作入力部４の所定操作に基づいて、被写体画像に合成される所定のＣＧ画像５０が設定されているものとする。
【００４０】
ＣＧ合成座標計算処理にあっては、図５に示すように、先ず、ＣＰＵ１２は、撮像部１により取得したモニタ表示用画像（記録用画像）Ｉ１の輝度信号Ｙ（図８（ａ）参照）に対して、ガウシアンフィルタを用いて平滑化処理を行って、ノイズを除去する（ステップＳ２１）。
次に、ＣＰＵ１２は、フラッシュメモリ１３内の抽出プログラム１３ａを実行して、平滑化処理後の画像に対してソーベルフィルタを用いた３×３のマトリックス演算により１階微分処理を行って、画素集合の輪郭線（エッジ部分）を抽出する（ステップＳ２２；図８（ｂ）参照）。
【００４１】
次に、ＣＰＵ１２は、フラッシュメモリ１３内の輪郭線特定プログラム１３ｂを実行して、抽出処理後の画像Ｉ２に対してエッジの連結性を高めるために膨張処理を行った後（ステップＳ２３；図９（ａ）参照）、膨張処理後の画像Ｉ３に対して、所定数よりも画素の連結数の少ない孤立した連結成分（画像集合）を除く小領域削除処理を行う（ステップＳ２４；図９（ｂ）参照））。
【００４２】
以下に、小領域削除処理（ステップＳ２４）について図６を参照して詳細に説明する。
図６に示すように、先ず、ＣＰＵ１２は、膨張処理後の画像（２値化された画像）Ｉ３に対して、同じ連結成分を構成する画素集合に同じ番号（ラベル）を付けるラベリングを行って、ラベル数を「LN」に格納する（ステップＳ２４１）。
【００４３】
次に、ＣＰＵ１２は、ループ変数ｎを１に初期化した後（ステップＳ２４２）、ｎ（例えば、ｎ＝１）番目のラベルの連結数を「LS」に格納する（ステップＳ２４３）。そして、ＣＰＵ１２は、予め設定されている所定の閾値DEF_LSと「LS」に格納されているｎ番目のラベルの連結数を比較して、当該「LS」の値が所定の閾値DEF_LSよりも大きいか否かを判定する（ステップＳ２４４）。
ここで、「LS」の値が所定の閾値DEF_LS以下であると判定されると（ステップＳ２４４；ＮＯ）、ＣＰＵ１２は、当該「LS」に係るｎ番目のラベルを小領域と判断して削除する（ステップＳ２４５）。
【００４４】
その後、ＣＰＵ１２は、ラベルの番号に係る「ｎ」を＋１インクリメント（ｎ＝ｎ＋１）する（ステップＳ２４６）。また、ステップＳ２４４にて、「LS」の値が所定の閾値DEF_LSよりも大きいと判定されると、ステップＳ２４６に移行する。
その後、ＣＰＵ１２は、インクリメントされた「ｎ」と「LN」に格納されているラベル数を比較して、当該「LN」の値よりも「ｎ」が大きいか否かを判定する（ステップＳ２４７）。
ここで、「ｎ」が「LN」の値以下であると判定されると（ステップＳ２４７；ＮＯ）、ステップＳ２４３に戻る。
【００４５】
上記の処理を、ステップＳ２４７にて、「ｎ」が「LN」の値よりも大きいと判定されるまで繰り返し実行し（ステップＳ２４７；ＹＥＳ）、全てのラベルに対する処理が行われると、当該小領域削除処理を終了する。図９（ｂ）に、小領域削除処理後の画像Ｉ４を表す。
このようにして、ＣＰＵ１２は、位置特定手段として、モニタ表示用画像や記録用画像における主要被写体Ｓの外周輪郭で囲まれた画像領域の位置を、被写体画像に含まれる主要被写体Ｓに対応する主要画像領域（第１の画像領域）Ａ１の位置として特定する（図９（ｂ）参照）。
【００４６】
その後、図５に示すように、ＣＰＵ１２は、背景抽出処理を行う（ステップＳ２５）。
以下に、背景抽出処理について図７を参照して詳細に説明する。
図７に示すように、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２５１）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像の左端から右側に向けて走査して連結成分の境界（輪郭線）の追跡を行い（ステップＳ２５２）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像の右端から左側に向けて走査して連結成分の境界の追跡を行う（ステップＳ２５３）。
【００４７】
そして、ＣＰＵ１２は、小領域削除処理により特定された主要画像領域Ａ１に到達するまで（黒画素から白画素に変化するまで）の領域を背景領域（第２の画像領域）Ａ２として抽出する（ステップＳ２５４）。
【００４８】
その後、図５に示すように、ＣＰＵ１２は、膨張処理（ステップＳ２２３）による膨張分を修正するために略等しい量の収縮処理を行う（ステップＳ２６；図９（ｃ）参照）。
【００４９】
次に、ＣＰＵ１２は、背景領域Ａ２におけるＣＧ合成座標を算出する。具体的には、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２７）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像Ｉ５の左端から右側に向けて走査して、背景領域Ａ２内でできる限り右側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出し（ステップＳ２８）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像Ｉ５の右端から左側に向けて走査して、背景領域Ａ２内でできる限り左側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出する（ステップＳ２９；図９（ｃ）参照）。
なお、ＣＧ合成座標の上下位置は、例えば、予め略中央に設定されているが、ユーザによる操作入力部４の所定操作に基づいて適宜任意に変更可能となっている。
【００５０】
その後、表示画像ＣＧ合成処理にあっては、図３に示すように、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像とＣＧ画像５０を合成してＣＧ合成画像Ｉ６（図１０参照）を生成し（ステップＳ３Ａ）、続けて、当該ＣＧ合成画像Ｉ６を表示部３の表示画面３ａに表示する（ステップＳ４Ａ）。
また、撮像画像ＣＧ合成処理にあっては、図４に示すように、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、記録用画像とＣＧ画像５０を合成してＣＧ合成画像Ｉ６（図１０参照）を生成し（ステップＳ３Ｂ）、続けて、当該ＣＧ合成画像Ｉ６をフラッシュメモリ１３に転送して記憶する（ステップＳ４Ｂ）。
このようにして、ＣＰＵ１２及び画像エンジン８は、加工処理手段として、モニタ表示用画像や記録用画像の主要画像領域Ａ１以外の背景領域Ａ２に対して所定の加工処理として、表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理を行う。
【００５１】
以上のように、本実施形態の撮像装置１００によれば、一のモニタ表示用画像や記録用画像における主要被写体Ｓに対応する主要画像領域Ａ１の位置を特定して、当該モニタ表示用画像や記録用画像における主要画像領域Ａ１の位置以外の背景領域Ａ２に対してＣＧ合成処理等の所定の加工処理を行うことができる。具体的には、モニタ表示用画像や記録用画像を構成する画素集合の輪郭線を抽出して、抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓの外周輪郭を特定するので、従来のように、被写体画像を２枚撮影することなく、一の被写体画像から主要被写体Ｓが含まれる画像領域を判別することができる。
そして、特定された主要画像領域Ａ１の位置以外の背景領域Ａ２内にフラッシュメモリ１３に記憶されているＣＧ画像５０を合成するので、主要被写体Ｓを除いた背景領域Ａ２の加工を容易に行うことができる。
【００５２】
なお、上記実施形態にあっては、抽出処理後の画像Ｉ２に対して膨張処理を行った後（ステップＳ２３）、膨張処理による膨張分を修正するための収縮処理を行う（ステップＳ２６）ようにしたが、これに限られるものではなく、被写体画像にノイズが少なく、主要被写体Ｓに対応する主要画像領域Ａ１を適正に特定することができる場合には、必ずしも上記の膨張処理や収縮処理を行う必要はない。
【００５３】
また、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
以下に、撮像装置の変形例１〜３について説明する。
【００５４】
＜変形例１＞
変形例１の撮像装置２００は、図１１〜図１６に示すように、ＣＧ合成座標計算処理にて、モニタ表示用画像や記録用画像を複数の画像領域Ｂ、…に分割して、夫々の画像領域Ｂについて、周波数成分情報を取得して、当該周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要画像領域Ａ１を構成する画像領域と判断する処理を行う。
なお、変形例１の撮像装置２００は、以下に説明するＣＧ合成座標計算処理以外の点で上記実施形態の撮像装置１００と略同様の構成をなし、その説明は省略する。
【００５５】
即ち、図１１に示すように、変形例１の撮像装置２００のフラッシュメモリ１３は、抽出プログラム１３ａ、輪郭線特定プログラム１３ｂ、ＣＧ合成制御プログラム１３ｃに加えて、分割プログラム１３ｄ、情報取得プログラム１３ｅを記憶している。
【００５６】
分割プログラム１３ｄは、ＣＰＵ１２を分割手段として機能させるものである。即ち、分割プログラム１３ｄは、モニタ表示用画像（記録用画像）Ｉ７を複数の画像領域Ｂ、…に分割する分割処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２による分割プログラム１３ｄの実行に基づいて、モニタ表示用画像（記録用画像）Ｉ７の輝度信号Ｙ（図１４（ａ）参照）を複数の画像領域Ｂ、…（例えば、縦「ＹＳ」×横「ＸＳ」が６×８の４８領域）に分割する。
【００５７】
情報取得プログラム１３ｅは、ＣＰＵ１２を情報取得手段として機能させるものである。即ち、情報取得プログラム１３ｅは、分割処理によって分割された夫々の画像領域Ｂについて、周波数成分情報を取得する情報取得処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２による情報取得プログラム１３ｅの実行に基づいて、分割処理によって分割された複数の画像領域Ｂ、…（例えば、４８領域）の夫々について、２次元フーリエ変換を行って絶対値をとることにより周波数振幅情報を取得する。
【００５８】
次に、ＣＧ合成座標計算処理について、図１２〜図１５を参照して説明する。
図１２は、ＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。また、図１３は、ＣＧ合成座標計算処理に係る複数の画像領域Ｂ、…の振幅値のソート結果を示す図である。また、図１４（ａ）及び図１４（ｂ）並びに図１５（ａ）〜図１５（ｃ）は、ＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【００５９】
ＣＧ合成座標計算処理にあっては、図１２に示すように、ＣＰＵ１２は、フラッシュメモリ１３内の分割プログラム１３ｄを実行して、横方向の分割数「XS」＝８、縦方向の分割数「YS」＝６として、モニタ表示用画像（記録用画像）Ｉ７の輝度信号Ｙ（図１４（ａ）参照）を複数の画像領域Ｂ、…（例えば、４８領域）に分割する（ステップＳ２０１；図１４（ｂ）参照）。
これにより、複数の画像領域Ｂ、…の各々について、横方向のサイズ（XStep）が輝度信号Ｙの横方向のサイズ（XSize）を「XS」で除算した値となり、縦方向のサイズ（YStep）が輝度信号Ｙの縦方向のサイズ（YSize）を「YS」で除算した値となる（ステップＳ２０２）。例えば、輝度信号Ｙの画像サイズが横方向４００ドット、縦方向２６４ドットの場合、各画像領域ＢのXStepは５０（４００÷８）ドットとなり、YStepは４４（２６４÷６）ドットとなる。
【００６０】
次に、全ての画像領域Ｂについて周波数振幅情報を取得する情報取得処理を行う。
なお、横方向にｘ、縦方向にｙのインデックスを用いて、複数の画像領域Ｂ、…のうち、左上隅の領域をｘ＝１,ｙ＝１とし、右下隅の領域をｘ＝XS,ｙ＝YSとする。
【００６１】
先ず、ＣＰＵ１２は、フラッシュメモリ１３内の情報取得プログラム１３ｅを実行して、ループ変数ｙを１に設定した後（ステップＳ２０３）、ｙの値と縦方向の分割数「YS」を比較して、ｙの値が縦方向の分割数「YS」よりも大きいか否かを判定する（ステップＳ２０４）。
【００６２】
ステップＳ２０４にて、ｙの値が縦方向の分割数「YS」以下であると判定されると（ステップＳ２０４；ＮＯ）、ＣＰＵ１２は、ループ変数ｘを１に設定した後（ステップＳ２０５）、ｘの値と横方向の分割数「XS」を比較して、ｘの値が横方向の分割数「XS」よりも大きいか否かを判定する（ステップＳ２０６）。
ここで、ｘの値が横方向の分割数「XS」以下であると判定されると（ステップＳ２０６；ＮＯ）、ＣＰＵ１２は、複数の領域のうち、ｘ＝１,ｙ＝１の画像領域ＢをI｛x,y｝に格納する（ステップＳ２０７）。
【００６３】
続けて、ＣＰＵ１２は、I｛x,y｝に対して２次元フーリエ変換を行って振幅情報と位相情報を含んだ周波数成分情報を取得した後、絶対値をとることにより周波数振幅情報を算出してFFT_I｛x,y｝に格納する（ステップＳ２０８）。
ここで、各画像領域Ｂについて、周波数振幅情報の原点を中央に移動したものを図１５（ａ）に図示しており、周辺部が白ければ白い程高周波成分が多いことを表している。
そして、ＣＰＵ１２は、FFT_I｛x,y｝に格納されている周波数振幅情報のうち、最大周波数の１／Ｋ（例えば、Ｋ＝２）倍以上のものを積算して、FFT_IS｛x,y｝とする（ステップＳ２０９）。
その後、ＣＰＵ１２は、ループ変数ｘを＋１インクリメント（ｘ＝ｘ＋１）して（ステップＳ２１０）、ステップＳ２０６に移行する。
【００６４】
そして、ステップＳ２０６にて、ｘの値が横方向の分割数「XS」よりも大きいと判定されるまで（ステップＳ２０６；ＹＥＳ）、ステップＳ２０６〜Ｓ２１０の処理を繰り返し実行する。
ｘの値が横方向の分割数「XS」よりも大きいと判定されると（ステップＳ２０６；ＹＥＳ）、ＣＰＵ１２は、ループ変数ｙを＋１インクリメント（ｙ＝ｙ＋１）して（ステップＳ２１１）、ステップＳ２０４に移行する。
【００６５】
そして、ステップＳ２０４にて、ｙの値が縦方向の分割数「YS」よりも大きいと判定されるまで（ステップＳ２０４；ＹＥＳ）、ステップＳ２０４〜Ｓ２１０の処理を繰り返し実行する。
ｙの値が縦方向の分割数「YS」よりも大きいと判定されると（ステップＳ２０４；ＹＥＳ）、ＣＰＵ１２は、高周波成分が多いところを撮影対象、それ以外を背景領域Ａ２とするための判定を行う。
【００６６】
先ず、ＣＰＵ１２は、複数の画像領域Ｂ、…について、離散点からFFT後に得られる最大周波数の１／Ｒ（例えば、Ｒ＝４）以上の周期となる高周波成分の振幅値（例えば、Ｘ周期；４／XStep、Y周期；４／YStep）を加算して、FFT_IS｛x,y｝に代入する（ステップＳ２１２）。これにより、FFT_IS｛x,y｝には、低い周波数を除去した高周波成分の振幅値が代入されることとなり、FFT_IS｛x,y｝の値が大きければ大きい程、その画像領域Ｂの空間周波数は高いことになる。
続けて、ＣＰＵ１２は、複数の画像領域Ｂ、…に係る全てのFFT_IS｛x,y｝をソートして、振幅値が急峻に変化している点を閾値THとする（ステップＳ２１３）。例えば、図１３に示すように、横方向の分割数「XS」＝８とし、縦方向の分割数「YS」＝６とする４８の画像領域Ｂの振幅値をソートした場合、１０００００を境にして振幅値が急峻に変化していることから、閾値THを１０００００とする。
【００６７】
次に、ＣＰＵ１２は、複数の画像領域Ｂ、…について、当該画像領域Ｂに係る全てのFFT_IS｛x,y｝と閾値THを比較して、当該閾値THよりも小さいFFT_IS｛x,y｝の画像領域Ｂを背景領域Ａ２とし、それ以外を主要被写体Ｓ（撮影対象）とする（ステップＳ２１４）。
このようにして、ＣＰＵ１２は、位置特定手段として、周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要被写体Ｓに対応する主要画像領域Ａ１（第１の画像領域）を構成する画像領域と判断する（図１５（ｂ）参照）。
なお、図１５（ｂ）には、背景領域Ａ２を構成する画像領域Ｂが黒く塗りつぶされたものを表しており、それ以外の画像領域Ｂは、主要画像領域Ａ１に対応している。
【００６８】
次に、ＣＰＵ１２は、上記実施形態の撮像装置１００におけるステップＳ２７〜Ｓ２９と略同様の処理を行って、背景領域Ａ２におけるＣＧ合成座標を算出する。具体的には、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２１５）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像Ｉ８の左端から右側に向けて走査して、背景領域Ａ２内でできる限り右側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出し（ステップＳ２１６）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像Ｉ８の右端から左側に向けて走査して、背景領域Ａ２内でできる限り左側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出する（ステップＳ２１７：図１５（ｃ）参照）。
なお、図１５（ｃ）にあっては、ＣＧ合成座標を破線で囲まれた領域Ｃとして表している。
【００６９】
その後、図３におけるステップＳ３Ａ（或いは、図４におけるステップＳ４Ａ）にて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像（或いは、記録用画像）とＣＧ画像５０を合成してＣＧ合成画像Ｉ９（図１６参照）を生成し、続けて、ステップＳ４Ａにて、当該ＣＧ合成画像Ｉ６を表示部３の表示画面３ａに表示する（或いは、ステップＳ４Ｂにて、ＣＧ合成画像Ｉ９をフラッシュメモリ１３に転送して記憶する）。
【００７０】
従って、変形例１の撮像装置２００によれば、ＣＧ合成座標計算処理にて、モニタ表示用画像や記録用画像を複数の画像領域Ｂ、…に分割して、夫々の画像領域Ｂについて、周波数成分情報を取得して、当該周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要画像領域Ａ１を構成する画像領域と判断するので、ノイズに影響されることなく、一の被写体画像から主要被写体Ｓが含まれる画像領域を判別することができる。
【００７１】
＜変形例２＞
変形例２の撮像装置は、図１７（ａ）及び図１７（ｂ）並びに図１８（ａ）及び図１８（ｂ）に示すように、モニタ表示用画像Ｉ１０の背景領域Ａ２内でＣＧ画像５０を合成する位置をユーザによる操作入力部４の所定操作に基づいて入力して、入力された合成位置にＣＧ画像５０を合成する。
なお、変形例２の撮像装置は、以下に説明するＣＧ合成位置決定処理以外の点で上記変形例１の撮像装置２００と略同様の構成をなし、その説明は省略する。
【００７２】
カーソルキー４ｂは、合成位置入力手段として、被写体画像に対するＣＧ画像５０の合成位置を指示入力する。
そして、ＣＰＵ１２は、ユーザによるカーソルキー４ｂの操作に応じて入力された所定の操作信号に基づいて、モニタ表示用画像Ｉ１０におけるＣＧ画像５０の合成位置を決定するＣＧ合成位置決定処理を行う。
具体的には、ユーザにより左カーソルキー（右カーソルキー）４ｂが操作される毎に、ＣＰＵ１２は、モニタ表示用画像Ｉ１０におけるＣＧ画像５０の合成位置を決定していき、モニタ表示用画像Ｉ１０の背景領域Ａ２（図１７（ａ）及び図１８（ａ）参照）内でＣＧ画像５０が主要被写体Ｓに対して左回りに（右回りに）移動する。そして、表示部３の表示画面３ａには、ＣＧ合成位置決定処理にて設定されたＣＧ画像５０の合成位置に基づいて、画像エンジン８によりＣＧ画像５０がモニタ表示用画像Ｉ１０に合成された合成イメージＩ１１（図１７（ｂ）及び図１８（ｂ）参照）が表示されることとなる。
このように、ＣＰＵ１２は、ＣＧ画像５０の合成位置を決定する合成位置決定手段として機能する。
【００７３】
なお、ＣＧ画像５０は、左カーソルキー（右カーソルキー）４ｂの操作回数に応じて移動するようにしても良いし、押圧操作している時間だけ移動するようにしても良い。
【００７４】
従って、変形例２の撮像装置によれば、モニタ表示用画像Ｉ１０の背景領域Ａ２内でＣＧ画像５０を合成する位置をユーザによる操作入力部４の所定操作に基づいて入力して、入力された合成位置にＣＧ画像５０を合成するので、ＣＧ画像５０をモニタ表示画像における任意の位置に合成することができ、ユーザ所望のＣＧ合成画像Ｉ１１を得ることができる。
【００７５】
＜変形例３＞
変形例３の撮像装置は、図１９（ａ）及び図１９（ｂ）に示すように、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲の領域の大きさに基づいて、ＣＧ画像５０の合成位置を自動的に設定する。
具体的には、ＣＰＵ１２は、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲（例えば、上側、左側、右側等）の領域の大きさを判定して、最も大きい領域内にＣＧ画像５０の合成位置を設定する。例えば、ＣＰＵ１２は、主要被写体Ｓから上側縁までの距離Ｄ１、左側縁までの距離Ｄ２、右側縁までの距離Ｄ３を算出して（図１９（ａ）参照）、最も長い距離Ｄ３を有する右側領域をＣＧ画像５０が合成される領域として指定する（図１９（ｂ）参照）。
【００７６】
従って、変形例３の撮像装置によれば、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲の領域の大きさに基づいて、ＣＧ画像５０の合成位置を自動的に設定するので、ユーザが操作入力部４等を所定操作することなく、背景領域Ａ２内の適正な位置にＣＧ画像５０を合成することができる。
【００７７】
なお、上記実施形態にあっては、被写体画像に対する所定の加工処理としてＣＧ合成処理を例示したが、これに限られるものではなく、被写体画像における主要画像領域以外の背景領域に対する加工処理であれば如何なるものであっても良い。
【００７８】
また、上記実施形態にあっては、主要画像領域Ａ１の位置を特定する処理として、被写体画像を構成する画素集合の輪郭線を抽出して、抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓの外周輪郭を特定するようにしたが、処理内容は一例であって、これに限られるものではない。
【００７９】
さらに、素材画像として、ＣＧ画像５０を例示したが、これに限られるものではなく、被写体画像に合成可能なものであれば如何なるものであっても良い。例えば、図示は省略するが、予め撮影しておいた人物や動物の画像などであっても良い。
【００８０】
また、撮像装置１００、２００の構成は、上記実施形態に例示したものは一例であり、これに限られるものではない。
さらに、上記実施形態にあっては、位置特定手段、加工処理手段、抽出手段、輪郭線特定手段、分割手段、情報取得手段、合成位置決定手段としての機能を、ＣＰＵ１２によって所定のプログラム等が実行されることにより実現される構成としたが、これに限られるものではなく、例えば、各種機能を実現するためのロジック回路等から構成しても良い。
【００８１】
加えて、画像合成装置として撮像装置１００、２００を例示したが、これに限られるものではなく、撮像部１により生成した複数の画像データをＵＳＢ接続端子５を介して接続されたコンピュータ等の外部機器に出力して、当該外部機器にて位置特定処理、ＣＧ合成処理、抽出処理、輪郭線特定処理、分割処理、情報取得処理、合成位置決定処理等を行うようにしても良い。
【図面の簡単な説明】
【００８２】
【図１】本発明を適用した一実施形態の撮像装置の外観を模式的に示す図である。
【図２】図１の撮像装置の概略構成を示すブロック図である。
【図３】図１の撮像装置による表示画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【図４】図１の撮像装置による撮像画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【図５】図１の撮像装置によるＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。
【図６】図５のＣＧ合成座標計算処理における小領域削除処理に係る動作の一例を示すフローチャートである。
【図７】図５のＣＧ合成座標計算処理における背景抽出処理に係る動作の一例を示すフローチャートである。
【図８】図５のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図９】図５のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１０】図１の撮像装置によるＣＧ画像の合成処理後の画像を模式的に示す図である。
【図１１】変形例１の撮像装置の概略構成を示すブロック図である。
【図１２】図１１の撮像装置によるＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。
【図１３】図１２のＣＧ合成座標計算処理に係る複数の画像領域の振幅値のソート結果を示す図である。
【図１４】図１２のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１５】図１２のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１６】図１１の撮像装置によるＣＧ画像の合成処理後の画像を模式的に示す図である。
【図１７】変形例２の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【図１８】図１７の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【図１９】変形例３の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【符号の説明】
【００８３】
１００ 撮像装置
１ 撮像部
４ 操作入力部
４ｂ カーソルキー
８ 画像エンジン
１２ ＣＰＵ
１３ フラッシュメモリ
５０ ＣＧ画像
Ｉ６、Ｉ９、Ｉ１１ ＣＧ合成画像
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置及びプログラムに関する。
【背景技術】
【０００２】
従来、撮像した画像から被写体を抽出し、当該被写体と背景画像を合成して合成写真を取得する撮像装置が知られている（例えば、特許文献１参照）。具体的には、絞り値を変更して少なくとも２枚の画像を取得し、被写体抽出用の画像から被写体を抽出して、当該被写体を背景画像と合成する。
【特許文献１】特開２００６−１２８７５４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記特許文献１にあっては、被写体を少なくとも２枚撮影・記録しなければならないので、撮影者にとっては、同じ撮影画角について、撮影条件の異なる画像を少なくとも２枚撮影しなければならないという問題があった。
【０００４】
そこで、本発明の課題は、一の被写体画像から主要被写体が含まれる画像領域を判別することができる画像処理装置、撮像装置及びプログラムを提供することである。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、請求項１に記載の発明の画像処理装置は、
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、を備えることを特徴としている。
【０００６】
請求項２に記載の発明は、請求項１に記載の画像処理装置において、
前記被写体画像を構成する画素集合の輪郭線を抽出する抽出手段と、この抽出手段によって抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、前記主要被写体を描画した主要輪郭線を特定する輪郭線特定手段と、を更に備え、前記位置特定手段は、前記輪郭線特定手段によって特定された前記主要輪郭線で囲まれた画像領域の位置を、前記主要画像領域の位置として特定することを特徴としている。
【０００７】
請求項３に記載の発明は、請求項１に記載の画像処理装置において、
前記一の被写体画像を複数の領域に分割する分割手段と、この分割手段によって分割された夫々の領域について、周波数成分情報を取得する情報取得手段と、を更に備え、前記位置特定手段は、前記情報取得手段によって取得された前記周波数成分情報に基づいて、高周波成分が所定値よりも多い領域を前記第１の画像領域を構成する画像領域と判断することを特徴としている。
【０００８】
請求項４に記載の発明は、請求項１〜３の何れか一項に記載の画像処理装置において、
素材画像を記憶する素材画像記憶手段を更に備え、前記加工処理手段は、前記素材画像記憶手段に記憶されている前記素材画像を前記第２の画像領域に合成する画像合成手段を含むことを特徴としている。
【０００９】
請求項５に記載の発明は、請求項４に記載の画像処理装置において、
前記第２の画像領域における前記素材画像の合成位置を操作により入力する合成位置入力手段と、この合成位置入力検出手段による入力に基づいて、前記素材画像の合成位置を決定する合成位置決定手段と、を更に備え、前記画像合成手段は、前記合成位置決定手段によって決定された前記合成位置に前記素材画像を合成することを特徴としている。
【００１０】
請求項６に記載の発明の撮像装置は、
主要被写体を含む一の被写体画像を取得する撮像手段と、この撮像手段により取得された前記一の被写体画像における前記主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、を備えることを特徴としている。
【００１１】
請求項７に記載の発明のプログラムは、
コンピュータを、一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段、前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段、として機能させることを特徴としている。
【発明の効果】
【００１２】
本発明によれば、一の被写体画像から主要被写体が含まれる画像領域を判別することができる。
【発明を実施するための最良の形態】
【００１３】
以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
図１は、本発明を適用した一実施形態の撮像装置１００の外観を模式的に示す図であり、図１（ａ）は、撮像装置１００の正面図を表し、図１（ｂ）は、撮像装置１００の背面図を表し、図１（ｃ）は、撮像装置１００の平面図を表している。また、図２は、撮像装置１００の概略構成を示すブロック図である。
【００１４】
本実施形態の撮像装置１００は、一のモニタ表示用画像や記録用画像における主要被写体Ｓに対応する主要画像領域（第１の画像領域）Ａ１の位置を特定して、当該モニタ表示用画像や記録用画像における主要画像領域Ａ１の位置以外の背景領域（第２の画像領域）Ａ２に対して所定の加工処理を行う。
具体的には、図１（ａ）〜図１（ｃ）に示すように、撮像装置１００は、外形が略直方体状に形成され、その正面側に撮像部１の撮像レンズ１ａが露出するように配設され、撮像レンズ１ａの向かって右上側にストロボ発光窓２が配設されている（図１（ａ）参照）。また、撮像装置１００の背面には、図１（ｂ）に示すように、表示部３の表示画面３ａが露出するように配設され、表示画面３ａの向かって右側に、操作入力部４に備わるメニューキー４ａ、カーソルキー４ｂ及びセットキー４ｃが配設されている。また、撮像装置１００の上面には、操作入力部４に備わるシャッターボタン４ｄ、電源ボタン４ｅが並んで配設されている。
なお、図示は省略するが、例えば、撮像装置１００の左右何れかの側面には、ＰＣ等の外部機器とＵＳＢケーブル（図示略）を介して接続するためのＵＳＢ接続端子５（図２参照）が配設されている。
【００１５】
また、撮像装置１００は、図２に示すように、撮像部１と、ＤＭＡ制御部６と、ワークメモリ７と、画像エンジン８と、表示部３と、表示制御部９と、ＶＲＡＭ１０と、操作入力部４と、ＵＳＢ制御部１１と、ＣＰＵ１２と、フラッシュメモリ１３とを備えている。
【００１６】
撮像部１は、撮像手段として、被写体を連続して撮像して複数の画像フレームを生成する。具体的には、撮像部１は、撮像レンズ１ａと、電子撮像部１ｂと、ＩＳＰ１ｃ等を備えている。
【００１７】
撮像レンズ１ａは、例えば、複数のレンズから構成され、合焦レンズやズームレンズ等を備えている。
電子撮像部１ｂは、撮像レンズ１ａを通過した被写体像を二次元の画像信号に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等から構成されている。また、電子撮像部１ｂは、光電変換された画像信号をＡ／Ｄ変換して、デジタルデータとしてＩＳＰ１ｃに出力する。
なお、電子撮像部１ｂから出力されるデジタルデータは、カラーフィルタ（図示略）の配列（例えば、ベイヤ配列）に従った形式となっている。
ＩＳＰ（Image Signal Processor）１ｃは、入力されたデジタルデータに基づいて、色の調整、データフォーマット変換（例えば、ベイヤ配設から８bitの輝度信号Ｙ、色差信号Ｃｂ，Ｃｒへの変換）等を行う。
【００１８】
撮像部１から出力されるデータ（輝度信号Ｙ、色差信号Ｃｂ，Ｃｒ）は、ＤＭＡ制御部６の制御下にて、ワークメモリ７にＤＭＡ（Direct Memory Access）転送されて格納される。
【００１９】
ワークメモリ７は、例えば、ＤＲＡＭ等で構成され、フラッシュメモリ１３から読み出されたシステムプログラム、各種プログラム、各種データ及び各種パラメータ等を一時的に記憶する。
【００２０】
画像エンジン８は、ワークメモリ７内の輝度信号Ｙ、色差信号Ｃｂ，ＣｒをＲＧＢデータに変換してＶＲＡＭ１０に出力したり、画像撮影時にＪＰＥＧ等の所定のファイルフォーマットに変換してフラッシュメモリ１３に出力する。
【００２１】
また、画像エンジン８は、ＣＰＵ１２の制御下における表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理（後述）にて、モニタ表示用画像や記録用画像に対してフラッシュメモリ１３に記憶されている所望のＣＧ画像５０を合成する。
ここで、画像エンジン８及びＣＰＵ１２は、画像合成手段として機能する。
【００２２】
表示制御部９は、ＶＲＡＭ１０に一時的に記憶されている表示データを読み出して表示部３に表示させる制御を行う。
表示部３は、表示制御部９からの出力信号に基づいて撮像部１により撮像された画像等を表示画面３ａに表示する。具体的には、表示部３は、撮像部１による被写体の撮像により生成された複数の画像フレームに基づいてスルー画像や、フラッシュメモリ１３に記録される本画像（記録画像）や、ＣＧ合成処理にて生成されるＣＧ合成画像Ｉ６（図１０参照）等を表示する。
【００２３】
操作入力部４は、当該撮像装置１００の所定操作を行うためのものであり、メニューキー４ａ、カーソルキー４ｂ、セットキー４ｃ、シャッターボタン４ｄ、電源ボタン４ｅ等を備え、これらのキーやボタンの操作に応じて所定の操作信号をＣＰＵ１２に出力する。
メニューキー４ａは、ユーザによる操作に基づいて、機能選択や表示設定等に係るメニュー画面の表示部３への表示を指示する。
【００２４】
カーソルキー４ｂは、例えば、上下左右のカーソルキー４ｂを備えて構成され、ユーザによる操作に基づいて、メニュー画面に表示される各種項目の選択を指示する。具体的には、撮像装置１００の動作モードとして、例えば、所定サイズの静止画像を撮影する通常撮影モードや、静止画像にＣＧ画像５０を合成するＣＧ合成撮影モード、記録された画像を再生表示する再生モード等の選択を指示する。また、カーソルキー４ｂは、再生モードにて、表示部３に表示される画像の選択を指示する。さらに、カーソルキー４ｂは、ＣＧ合成撮影モードにて、静止画像に合成されるＣＧ画像５０の選択を指示する。
【００２５】
シャッターボタン４ｄは、ユーザによる操作に基づいて、撮像部１による被写体の撮像を指示する。
電源ボタン４ｅは、ユーザによる操作に基づいて、当該撮像装置１００の電源のＯＮ／ＯＦＦを指示する。
【００２６】
ＵＳＢ制御部１１は、ＵＳＢ接続端子５にＵＳＢケーブルを介して接続されたＰＣ等の外部機器との間で、各種データの送受信を制御する。
【００２７】
ＣＰＵ１２は、フラッシュメモリ１３に記憶された撮像装置１００用の各種処理プログラムに従って各種の制御動作を行うものである。
【００２８】
フラッシュメモリ１３は、ＣＰＵ１２の動作に必要な各種プログラムやデータを記憶する。具体的には、フラッシュメモリ１３は、図２に示すように、抽出プログラム１３ａ、輪郭線特定プログラム１３ｂ、ＣＧ合成制御プログラム１３ｃ等を記憶している。
【００２９】
抽出プログラム１３ａは、ＣＰＵ１２を抽出手段として機能させるものである。即ち、抽出プログラム１３ａは、被写体画像を構成する画素集合の輪郭線を抽出する抽出処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２が抽出プログラム１３ａを実行することで、撮像部１により撮像され取得されたモニタ表示用画像や記録用画像に平滑化処理（後述）が施されたものに対して、ソーベルフィルタを用いた３×３のマトリックス演算により１階微分処理を行って、画素集合の輪郭線（エッジ部分）を抽出する（図８（ｂ）参照）。
なお、抽出処理にあっては、ソーベルフィルタの代わりに、例えば、微分フィルタ、プリューウィットフィルタ、ラプラシアンフィルタ等を用いても良いし、これらのうちの何れか二つ以上を用いても良い。
【００３０】
輪郭線特定プログラム１３ｂは、ＣＰＵ１２を輪郭線特定手段として機能させるものである。即ち、輪郭線特定プログラム１３ｂは、抽出処理にて抽出された輪郭線のうち、所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓを描画した外周輪郭（主要輪郭線）Ｌ１を特定する輪郭線特定処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２が輪郭線特定プログラム１３ｂを実行することで、抽出処理後の画像Ｉ２（図８（ｂ）参照）に対してエッジの連結性を高めるための膨張処理、及び所定数よりも画素の連結数の少ない連結成分（画像集合）を除く小領域削除処理を行って、主要被写体Ｓの外周輪郭を特定する。
【００３１】
ＣＧ合成制御プログラム１３ｃは、画像エンジン８に、被写体画像の背景領域Ａ２（第２の画像領域）にＣＧ画像５０を合成させるＣＧ合成処理に係る制御をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２がＣＧ合成制御プログラム１３ｃを実行することで、表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理にて、画像エンジン８に、背景抽出処理（後述）にて抽出された被写体画像の背景領域（第２の画像領域）Ａ２におけるＣＧ合成座標にＣＧ画像５０を合成させる。
【００３２】
また、フラッシュメモリ１３は、素材画像記憶手段として、ＣＧ合成処理にて被写体画像と合成されるＣＧ画像（素材画像）５０を複数記憶する。
さらに、フラッシュメモリ１３は、撮像部１により撮像された本画像（撮影画像）やＣＧ合成処理後のＣＧ合成画像Ｉ６（図１０参照）等を記憶する。
【００３３】
次に、撮像装置１００によるＣＧ合成処理について図３〜図１０を参照して説明する。
なお、以下の説明にあっては、予めユーザによる操作入力部４の所定操作に基づいてＣＧ合成撮影モードに設定されているものとする。
ＣＧ合成処理としては、スルー画像にＣＧ画像５０を合成する表示画像ＣＧ合成処理と、本画像（記録画像）にＣＧ画像５０を合成する撮像画像ＣＧ合成処理がある。
【００３４】
先ず、表示画像ＣＧ合成処理について図３を参照して説明する。
図３は、表示画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【００３５】
撮像装置１００がＣＧ合成撮影モードに設定されていると、図３に示すように、ＣＰＵ１２は、撮像部１によりモニタ表示用画像を撮像して取得する処理を実行する（ステップＳ１Ａ）。
次に、ＣＰＵ１２は、取得したモニタ表示用画像に基づいて、当該モニタ表示用画像におけるＣＧ合成座標を計算するＣＧ合成座標計算処理を実行する（ステップＳ２Ａ：詳細後述）。
続けて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像（モニタ表示用画像）にＣＧ画像５０を合成して（ステップＳ３Ａ）、表示部３は、合成されたＣＧ合成画像Ｉ６（図１０参照）を表示画面３ａに表示する（ステップＳ４Ａ）。
【００３６】
次に、撮像画像ＣＧ合成処理について図４を参照して説明する。
図４は、撮像画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【００３７】
表示画面３ａにスルー画像を表示中や、上記の表示画像ＣＧ合成処理にて合成されたＣＧ合成画像Ｉ６を表示中に、ユーザによりシャッターボタン４ｄが所定操作されると、ＣＰＵ１２は、光学系駆動制御部（図示略）により合焦レンズを光軸方向に移動させて主要被写体Ｓにピントが合っている記録用画像を撮像部１により撮像して取得する処理を実行する（ステップＳ１Ｂ）。
次に、ＣＰＵ１２は、取得した記録用画像に基づいて、当該記録用画像におけるＣＧ合成座標を計算するＣＧ合成座標計算処理を実行する（ステップＳ２Ｂ：詳細後述）。
続けて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、記録用画像にＣＧ画像５０を合成して（ステップＳ３Ｂ）、ＤＭＡ制御部６は、合成されたＣＧ合成画像Ｉ６（図１０参照）をフラッシュメモリ１３に転送して記憶する（ステップＳ４Ｂ）。
【００３８】
次に、ＣＧ合成座標計算処理について、図５〜図９を参照して説明する。
図５は、ＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。また、図６は、ＣＧ合成座標計算処理における小領域削除処理に係る動作の一例を示すフローチャートであり、図７は、Ｇ合成座標計算処理における背景抽出処理に係る動作の一例を示すフローチャートである。また、図８（ａ）及び図８（ｂ）並びに図９（ａ）〜図９（ｃ）は、ＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【００３９】
表示画像ＣＧ合成処理におけるＣＧ合成座標計算処理（ステップＳ２Ａ）と、撮像画像ＣＧ合成処理におけるＣＧ合成座標計算処理（ステップＳ２Ｂ）は、略同様の処理であり、以下にまとめて説明する。
なお、以下に説明するＣＧ合成座標計算処理にあっては、予めユーザによる操作入力部４の所定操作に基づいて、被写体画像に合成される所定のＣＧ画像５０が設定されているものとする。
【００４０】
ＣＧ合成座標計算処理にあっては、図５に示すように、先ず、ＣＰＵ１２は、撮像部１により取得したモニタ表示用画像（記録用画像）Ｉ１の輝度信号Ｙ（図８（ａ）参照）に対して、ガウシアンフィルタを用いて平滑化処理を行って、ノイズを除去する（ステップＳ２１）。
次に、ＣＰＵ１２は、フラッシュメモリ１３内の抽出プログラム１３ａを実行して、平滑化処理後の画像に対してソーベルフィルタを用いた３×３のマトリックス演算により１階微分処理を行って、画素集合の輪郭線（エッジ部分）を抽出する（ステップＳ２２；図８（ｂ）参照）。
【００４１】
次に、ＣＰＵ１２は、フラッシュメモリ１３内の輪郭線特定プログラム１３ｂを実行して、抽出処理後の画像Ｉ２に対してエッジの連結性を高めるために膨張処理を行った後（ステップＳ２３；図９（ａ）参照）、膨張処理後の画像Ｉ３に対して、所定数よりも画素の連結数の少ない孤立した連結成分（画像集合）を除く小領域削除処理を行う（ステップＳ２４；図９（ｂ）参照））。
【００４２】
以下に、小領域削除処理（ステップＳ２４）について図６を参照して詳細に説明する。
図６に示すように、先ず、ＣＰＵ１２は、膨張処理後の画像（２値化された画像）Ｉ３に対して、同じ連結成分を構成する画素集合に同じ番号（ラベル）を付けるラベリングを行って、ラベル数を「LN」に格納する（ステップＳ２４１）。
【００４３】
次に、ＣＰＵ１２は、ループ変数ｎを１に初期化した後（ステップＳ２４２）、ｎ（例えば、ｎ＝１）番目のラベルの連結数を「LS」に格納する（ステップＳ２４３）。そして、ＣＰＵ１２は、予め設定されている所定の閾値DEF_LSと「LS」に格納されているｎ番目のラベルの連結数を比較して、当該「LS」の値が所定の閾値DEF_LSよりも大きいか否かを判定する（ステップＳ２４４）。
ここで、「LS」の値が所定の閾値DEF_LS以下であると判定されると（ステップＳ２４４；ＮＯ）、ＣＰＵ１２は、当該「LS」に係るｎ番目のラベルを小領域と判断して削除する（ステップＳ２４５）。
【００４４】
その後、ＣＰＵ１２は、ラベルの番号に係る「ｎ」を＋１インクリメント（ｎ＝ｎ＋１）する（ステップＳ２４６）。また、ステップＳ２４４にて、「LS」の値が所定の閾値DEF_LSよりも大きいと判定されると、ステップＳ２４６に移行する。
その後、ＣＰＵ１２は、インクリメントされた「ｎ」と「LN」に格納されているラベル数を比較して、当該「LN」の値よりも「ｎ」が大きいか否かを判定する（ステップＳ２４７）。
ここで、「ｎ」が「LN」の値以下であると判定されると（ステップＳ２４７；ＮＯ）、ステップＳ２４３に戻る。
【００４５】
上記の処理を、ステップＳ２４７にて、「ｎ」が「LN」の値よりも大きいと判定されるまで繰り返し実行し（ステップＳ２４７；ＹＥＳ）、全てのラベルに対する処理が行われると、当該小領域削除処理を終了する。図９（ｂ）に、小領域削除処理後の画像Ｉ４を表す。
このようにして、ＣＰＵ１２は、位置特定手段として、モニタ表示用画像や記録用画像における主要被写体Ｓの外周輪郭で囲まれた画像領域の位置を、被写体画像に含まれる主要被写体Ｓに対応する主要画像領域（第１の画像領域）Ａ１の位置として特定する（図９（ｂ）参照）。
【００４６】
その後、図５に示すように、ＣＰＵ１２は、背景抽出処理を行う（ステップＳ２５）。
以下に、背景抽出処理について図７を参照して詳細に説明する。
図７に示すように、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２５１）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像の左端から右側に向けて走査して連結成分の境界（輪郭線）の追跡を行い（ステップＳ２５２）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像の右端から左側に向けて走査して連結成分の境界の追跡を行う（ステップＳ２５３）。
【００４７】
そして、ＣＰＵ１２は、小領域削除処理により特定された主要画像領域Ａ１に到達するまで（黒画素から白画素に変化するまで）の領域を背景領域（第２の画像領域）Ａ２として抽出する（ステップＳ２５４）。
【００４８】
その後、図５に示すように、ＣＰＵ１２は、膨張処理（ステップＳ２２３）による膨張分を修正するために略等しい量の収縮処理を行う（ステップＳ２６；図９（ｃ）参照）。
【００４９】
次に、ＣＰＵ１２は、背景領域Ａ２におけるＣＧ合成座標を算出する。具体的には、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２７）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像Ｉ５の左端から右側に向けて走査して、背景領域Ａ２内でできる限り右側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出し（ステップＳ２８）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像Ｉ５の右端から左側に向けて走査して、背景領域Ａ２内でできる限り左側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出する（ステップＳ２９；図９（ｃ）参照）。
なお、ＣＧ合成座標の上下位置は、例えば、予め略中央に設定されているが、ユーザによる操作入力部４の所定操作に基づいて適宜任意に変更可能となっている。
【００５０】
その後、表示画像ＣＧ合成処理にあっては、図３に示すように、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像とＣＧ画像５０を合成してＣＧ合成画像Ｉ６（図１０参照）を生成し（ステップＳ３Ａ）、続けて、当該ＣＧ合成画像Ｉ６を表示部３の表示画面３ａに表示する（ステップＳ４Ａ）。
また、撮像画像ＣＧ合成処理にあっては、図４に示すように、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、記録用画像とＣＧ画像５０を合成してＣＧ合成画像Ｉ６（図１０参照）を生成し（ステップＳ３Ｂ）、続けて、当該ＣＧ合成画像Ｉ６をフラッシュメモリ１３に転送して記憶する（ステップＳ４Ｂ）。
このようにして、ＣＰＵ１２及び画像エンジン８は、加工処理手段として、モニタ表示用画像や記録用画像の主要画像領域Ａ１以外の背景領域Ａ２に対して所定の加工処理として、表示画像ＣＧ合成処理や撮像画像ＣＧ合成処理を行う。
【００５１】
以上のように、本実施形態の撮像装置１００によれば、一のモニタ表示用画像や記録用画像における主要被写体Ｓに対応する主要画像領域Ａ１の位置を特定して、当該モニタ表示用画像や記録用画像における主要画像領域Ａ１の位置以外の背景領域Ａ２に対してＣＧ合成処理等の所定の加工処理を行うことができる。具体的には、モニタ表示用画像や記録用画像を構成する画素集合の輪郭線を抽出して、抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓの外周輪郭を特定するので、従来のように、被写体画像を２枚撮影することなく、一の被写体画像から主要被写体Ｓが含まれる画像領域を判別することができる。
そして、特定された主要画像領域Ａ１の位置以外の背景領域Ａ２内にフラッシュメモリ１３に記憶されているＣＧ画像５０を合成するので、主要被写体Ｓを除いた背景領域Ａ２の加工を容易に行うことができる。
【００５２】
なお、上記実施形態にあっては、抽出処理後の画像Ｉ２に対して膨張処理を行った後（ステップＳ２３）、膨張処理による膨張分を修正するための収縮処理を行う（ステップＳ２６）ようにしたが、これに限られるものではなく、被写体画像にノイズが少なく、主要被写体Ｓに対応する主要画像領域Ａ１を適正に特定することができる場合には、必ずしも上記の膨張処理や収縮処理を行う必要はない。
【００５３】
また、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
以下に、撮像装置の変形例１〜３について説明する。
【００５４】
＜変形例１＞
変形例１の撮像装置２００は、図１１〜図１６に示すように、ＣＧ合成座標計算処理にて、モニタ表示用画像や記録用画像を複数の画像領域Ｂ、…に分割して、夫々の画像領域Ｂについて、周波数成分情報を取得して、当該周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要画像領域Ａ１を構成する画像領域と判断する処理を行う。
なお、変形例１の撮像装置２００は、以下に説明するＣＧ合成座標計算処理以外の点で上記実施形態の撮像装置１００と略同様の構成をなし、その説明は省略する。
【００５５】
即ち、図１１に示すように、変形例１の撮像装置２００のフラッシュメモリ１３は、抽出プログラム１３ａ、輪郭線特定プログラム１３ｂ、ＣＧ合成制御プログラム１３ｃに加えて、分割プログラム１３ｄ、情報取得プログラム１３ｅを記憶している。
【００５６】
分割プログラム１３ｄは、ＣＰＵ１２を分割手段として機能させるものである。即ち、分割プログラム１３ｄは、モニタ表示用画像（記録用画像）Ｉ７を複数の画像領域Ｂ、…に分割する分割処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２による分割プログラム１３ｄの実行に基づいて、モニタ表示用画像（記録用画像）Ｉ７の輝度信号Ｙ（図１４（ａ）参照）を複数の画像領域Ｂ、…（例えば、縦「ＹＳ」×横「ＸＳ」が６×８の４８領域）に分割する。
【００５７】
情報取得プログラム１３ｅは、ＣＰＵ１２を情報取得手段として機能させるものである。即ち、情報取得プログラム１３ｅは、分割処理によって分割された夫々の画像領域Ｂについて、周波数成分情報を取得する情報取得処理に係る機能をＣＰＵ１２に実現させるためのプログラムである。
具体的には、ＣＰＵ１２による情報取得プログラム１３ｅの実行に基づいて、分割処理によって分割された複数の画像領域Ｂ、…（例えば、４８領域）の夫々について、２次元フーリエ変換を行って絶対値をとることにより周波数振幅情報を取得する。
【００５８】
次に、ＣＧ合成座標計算処理について、図１２〜図１５を参照して説明する。
図１２は、ＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。また、図１３は、ＣＧ合成座標計算処理に係る複数の画像領域Ｂ、…の振幅値のソート結果を示す図である。また、図１４（ａ）及び図１４（ｂ）並びに図１５（ａ）〜図１５（ｃ）は、ＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【００５９】
ＣＧ合成座標計算処理にあっては、図１２に示すように、ＣＰＵ１２は、フラッシュメモリ１３内の分割プログラム１３ｄを実行して、横方向の分割数「XS」＝８、縦方向の分割数「YS」＝６として、モニタ表示用画像（記録用画像）Ｉ７の輝度信号Ｙ（図１４（ａ）参照）を複数の画像領域Ｂ、…（例えば、４８領域）に分割する（ステップＳ２０１；図１４（ｂ）参照）。
これにより、複数の画像領域Ｂ、…の各々について、横方向のサイズ（XStep）が輝度信号Ｙの横方向のサイズ（XSize）を「XS」で除算した値となり、縦方向のサイズ（YStep）が輝度信号Ｙの縦方向のサイズ（YSize）を「YS」で除算した値となる（ステップＳ２０２）。例えば、輝度信号Ｙの画像サイズが横方向４００ドット、縦方向２６４ドットの場合、各画像領域ＢのXStepは５０（４００÷８）ドットとなり、YStepは４４（２６４÷６）ドットとなる。
【００６０】
次に、全ての画像領域Ｂについて周波数振幅情報を取得する情報取得処理を行う。
なお、横方向にｘ、縦方向にｙのインデックスを用いて、複数の画像領域Ｂ、…のうち、左上隅の領域をｘ＝１,ｙ＝１とし、右下隅の領域をｘ＝XS,ｙ＝YSとする。
【００６１】
先ず、ＣＰＵ１２は、フラッシュメモリ１３内の情報取得プログラム１３ｅを実行して、ループ変数ｙを１に設定した後（ステップＳ２０３）、ｙの値と縦方向の分割数「YS」を比較して、ｙの値が縦方向の分割数「YS」よりも大きいか否かを判定する（ステップＳ２０４）。
【００６２】
ステップＳ２０４にて、ｙの値が縦方向の分割数「YS」以下であると判定されると（ステップＳ２０４；ＮＯ）、ＣＰＵ１２は、ループ変数ｘを１に設定した後（ステップＳ２０５）、ｘの値と横方向の分割数「XS」を比較して、ｘの値が横方向の分割数「XS」よりも大きいか否かを判定する（ステップＳ２０６）。
ここで、ｘの値が横方向の分割数「XS」以下であると判定されると（ステップＳ２０６；ＮＯ）、ＣＰＵ１２は、複数の領域のうち、ｘ＝１,ｙ＝１の画像領域ＢをI｛x,y｝に格納する（ステップＳ２０７）。
【００６３】
続けて、ＣＰＵ１２は、I｛x,y｝に対して２次元フーリエ変換を行って振幅情報と位相情報を含んだ周波数成分情報を取得した後、絶対値をとることにより周波数振幅情報を算出してFFT_I｛x,y｝に格納する（ステップＳ２０８）。
ここで、各画像領域Ｂについて、周波数振幅情報の原点を中央に移動したものを図１５（ａ）に図示しており、周辺部が白ければ白い程高周波成分が多いことを表している。
そして、ＣＰＵ１２は、FFT_I｛x,y｝に格納されている周波数振幅情報のうち、最大周波数の１／Ｋ（例えば、Ｋ＝２）倍以上のものを積算して、FFT_IS｛x,y｝とする（ステップＳ２０９）。
その後、ＣＰＵ１２は、ループ変数ｘを＋１インクリメント（ｘ＝ｘ＋１）して（ステップＳ２１０）、ステップＳ２０６に移行する。
【００６４】
そして、ステップＳ２０６にて、ｘの値が横方向の分割数「XS」よりも大きいと判定されるまで（ステップＳ２０６；ＹＥＳ）、ステップＳ２０６〜Ｓ２１０の処理を繰り返し実行する。
ｘの値が横方向の分割数「XS」よりも大きいと判定されると（ステップＳ２０６；ＹＥＳ）、ＣＰＵ１２は、ループ変数ｙを＋１インクリメント（ｙ＝ｙ＋１）して（ステップＳ２１１）、ステップＳ２０４に移行する。
【００６５】
そして、ステップＳ２０４にて、ｙの値が縦方向の分割数「YS」よりも大きいと判定されるまで（ステップＳ２０４；ＹＥＳ）、ステップＳ２０４〜Ｓ２１０の処理を繰り返し実行する。
ｙの値が縦方向の分割数「YS」よりも大きいと判定されると（ステップＳ２０４；ＹＥＳ）、ＣＰＵ１２は、高周波成分が多いところを撮影対象、それ以外を背景領域Ａ２とするための判定を行う。
【００６６】
先ず、ＣＰＵ１２は、複数の画像領域Ｂ、…について、離散点からFFT後に得られる最大周波数の１／Ｒ（例えば、Ｒ＝４）以上の周期となる高周波成分の振幅値（例えば、Ｘ周期；４／XStep、Y周期；４／YStep）を加算して、FFT_IS｛x,y｝に代入する（ステップＳ２１２）。これにより、FFT_IS｛x,y｝には、低い周波数を除去した高周波成分の振幅値が代入されることとなり、FFT_IS｛x,y｝の値が大きければ大きい程、その画像領域Ｂの空間周波数は高いことになる。
続けて、ＣＰＵ１２は、複数の画像領域Ｂ、…に係る全てのFFT_IS｛x,y｝をソートして、振幅値が急峻に変化している点を閾値THとする（ステップＳ２１３）。例えば、図１３に示すように、横方向の分割数「XS」＝８とし、縦方向の分割数「YS」＝６とする４８の画像領域Ｂの振幅値をソートした場合、１０００００を境にして振幅値が急峻に変化していることから、閾値THを１０００００とする。
【００６７】
次に、ＣＰＵ１２は、複数の画像領域Ｂ、…について、当該画像領域Ｂに係る全てのFFT_IS｛x,y｝と閾値THを比較して、当該閾値THよりも小さいFFT_IS｛x,y｝の画像領域Ｂを背景領域Ａ２とし、それ以外を主要被写体Ｓ（撮影対象）とする（ステップＳ２１４）。
このようにして、ＣＰＵ１２は、位置特定手段として、周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要被写体Ｓに対応する主要画像領域Ａ１（第１の画像領域）を構成する画像領域と判断する（図１５（ｂ）参照）。
なお、図１５（ｂ）には、背景領域Ａ２を構成する画像領域Ｂが黒く塗りつぶされたものを表しており、それ以外の画像領域Ｂは、主要画像領域Ａ１に対応している。
【００６８】
次に、ＣＰＵ１２は、上記実施形態の撮像装置１００におけるステップＳ２７〜Ｓ２９と略同様の処理を行って、背景領域Ａ２におけるＣＧ合成座標を算出する。具体的には、先ず、予めユーザによる操作入力部４の所定操作に基づいて指定されたＣＧ画像５０の合成位置に応じて分岐する（ステップＳ２１５）。
ここで、ＣＧ画像５０の合成位置が主要被写体Ｓの左側に指定されている場合には、画像Ｉ８の左端から右側に向けて走査して、背景領域Ａ２内でできる限り右側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出し（ステップＳ２１６）、一方、ＣＧ画像５０の合成位置が主要被写体Ｓの右側に指定されている場合には、画像Ｉ８の右端から左側に向けて走査して、背景領域Ａ２内でできる限り左側にＣＧ画像５０を合成できるようにＣＧ合成座標を算出する（ステップＳ２１７：図１５（ｃ）参照）。
なお、図１５（ｃ）にあっては、ＣＧ合成座標を破線で囲まれた領域Ｃとして表している。
【００６９】
その後、図３におけるステップＳ３Ａ（或いは、図４におけるステップＳ４Ａ）にて、ＣＰＵ１２がフラッシュメモリ１３内のＣＧ合成制御プログラム１３ｃを実行して、画像エンジン８は、ＣＧ合成座標計算処理にて計算されたＣＧ合成座標に基づいて、スルー画像（或いは、記録用画像）とＣＧ画像５０を合成してＣＧ合成画像Ｉ９（図１６参照）を生成し、続けて、ステップＳ４Ａにて、当該ＣＧ合成画像Ｉ６を表示部３の表示画面３ａに表示する（或いは、ステップＳ４Ｂにて、ＣＧ合成画像Ｉ９をフラッシュメモリ１３に転送して記憶する）。
【００７０】
従って、変形例１の撮像装置２００によれば、ＣＧ合成座標計算処理にて、モニタ表示用画像や記録用画像を複数の画像領域Ｂ、…に分割して、夫々の画像領域Ｂについて、周波数成分情報を取得して、当該周波数成分情報に基づいて、高周波成分が所定値よりも多い画像領域Ｂを主要画像領域Ａ１を構成する画像領域と判断するので、ノイズに影響されることなく、一の被写体画像から主要被写体Ｓが含まれる画像領域を判別することができる。
【００７１】
＜変形例２＞
変形例２の撮像装置は、図１７（ａ）及び図１７（ｂ）並びに図１８（ａ）及び図１８（ｂ）に示すように、モニタ表示用画像Ｉ１０の背景領域Ａ２内でＣＧ画像５０を合成する位置をユーザによる操作入力部４の所定操作に基づいて入力して、入力された合成位置にＣＧ画像５０を合成する。
なお、変形例２の撮像装置は、以下に説明するＣＧ合成位置決定処理以外の点で上記変形例１の撮像装置２００と略同様の構成をなし、その説明は省略する。
【００７２】
カーソルキー４ｂは、合成位置入力手段として、被写体画像に対するＣＧ画像５０の合成位置を指示入力する。
そして、ＣＰＵ１２は、ユーザによるカーソルキー４ｂの操作に応じて入力された所定の操作信号に基づいて、モニタ表示用画像Ｉ１０におけるＣＧ画像５０の合成位置を決定するＣＧ合成位置決定処理を行う。
具体的には、ユーザにより左カーソルキー（右カーソルキー）４ｂが操作される毎に、ＣＰＵ１２は、モニタ表示用画像Ｉ１０におけるＣＧ画像５０の合成位置を決定していき、モニタ表示用画像Ｉ１０の背景領域Ａ２（図１７（ａ）及び図１８（ａ）参照）内でＣＧ画像５０が主要被写体Ｓに対して左回りに（右回りに）移動する。そして、表示部３の表示画面３ａには、ＣＧ合成位置決定処理にて設定されたＣＧ画像５０の合成位置に基づいて、画像エンジン８によりＣＧ画像５０がモニタ表示用画像Ｉ１０に合成された合成イメージＩ１１（図１７（ｂ）及び図１８（ｂ）参照）が表示されることとなる。
このように、ＣＰＵ１２は、ＣＧ画像５０の合成位置を決定する合成位置決定手段として機能する。
【００７３】
なお、ＣＧ画像５０は、左カーソルキー（右カーソルキー）４ｂの操作回数に応じて移動するようにしても良いし、押圧操作している時間だけ移動するようにしても良い。
【００７４】
従って、変形例２の撮像装置によれば、モニタ表示用画像Ｉ１０の背景領域Ａ２内でＣＧ画像５０を合成する位置をユーザによる操作入力部４の所定操作に基づいて入力して、入力された合成位置にＣＧ画像５０を合成するので、ＣＧ画像５０をモニタ表示画像における任意の位置に合成することができ、ユーザ所望のＣＧ合成画像Ｉ１１を得ることができる。
【００７５】
＜変形例３＞
変形例３の撮像装置は、図１９（ａ）及び図１９（ｂ）に示すように、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲の領域の大きさに基づいて、ＣＧ画像５０の合成位置を自動的に設定する。
具体的には、ＣＰＵ１２は、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲（例えば、上側、左側、右側等）の領域の大きさを判定して、最も大きい領域内にＣＧ画像５０の合成位置を設定する。例えば、ＣＰＵ１２は、主要被写体Ｓから上側縁までの距離Ｄ１、左側縁までの距離Ｄ２、右側縁までの距離Ｄ３を算出して（図１９（ａ）参照）、最も長い距離Ｄ３を有する右側領域をＣＧ画像５０が合成される領域として指定する（図１９（ｂ）参照）。
【００７６】
従って、変形例３の撮像装置によれば、被写体画像Ｉ１２の背景領域Ａ２内で主要被写体Ｓの周囲の領域の大きさに基づいて、ＣＧ画像５０の合成位置を自動的に設定するので、ユーザが操作入力部４等を所定操作することなく、背景領域Ａ２内の適正な位置にＣＧ画像５０を合成することができる。
【００７７】
なお、上記実施形態にあっては、被写体画像に対する所定の加工処理としてＣＧ合成処理を例示したが、これに限られるものではなく、被写体画像における主要画像領域以外の背景領域に対する加工処理であれば如何なるものであっても良い。
【００７８】
また、上記実施形態にあっては、主要画像領域Ａ１の位置を特定する処理として、被写体画像を構成する画素集合の輪郭線を抽出して、抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、主要被写体Ｓの外周輪郭を特定するようにしたが、処理内容は一例であって、これに限られるものではない。
【００７９】
さらに、素材画像として、ＣＧ画像５０を例示したが、これに限られるものではなく、被写体画像に合成可能なものであれば如何なるものであっても良い。例えば、図示は省略するが、予め撮影しておいた人物や動物の画像などであっても良い。
【００８０】
また、撮像装置１００、２００の構成は、上記実施形態に例示したものは一例であり、これに限られるものではない。
さらに、上記実施形態にあっては、位置特定手段、加工処理手段、抽出手段、輪郭線特定手段、分割手段、情報取得手段、合成位置決定手段としての機能を、ＣＰＵ１２によって所定のプログラム等が実行されることにより実現される構成としたが、これに限られるものではなく、例えば、各種機能を実現するためのロジック回路等から構成しても良い。
【００８１】
加えて、画像合成装置として撮像装置１００、２００を例示したが、これに限られるものではなく、撮像部１により生成した複数の画像データをＵＳＢ接続端子５を介して接続されたコンピュータ等の外部機器に出力して、当該外部機器にて位置特定処理、ＣＧ合成処理、抽出処理、輪郭線特定処理、分割処理、情報取得処理、合成位置決定処理等を行うようにしても良い。
【図面の簡単な説明】
【００８２】
【図１】本発明を適用した一実施形態の撮像装置の外観を模式的に示す図である。
【図２】図１の撮像装置の概略構成を示すブロック図である。
【図３】図１の撮像装置による表示画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【図４】図１の撮像装置による撮像画像ＣＧ合成処理に係る動作の一例を示すフローチャートである。
【図５】図１の撮像装置によるＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。
【図６】図５のＣＧ合成座標計算処理における小領域削除処理に係る動作の一例を示すフローチャートである。
【図７】図５のＣＧ合成座標計算処理における背景抽出処理に係る動作の一例を示すフローチャートである。
【図８】図５のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図９】図５のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１０】図１の撮像装置によるＣＧ画像の合成処理後の画像を模式的に示す図である。
【図１１】変形例１の撮像装置の概略構成を示すブロック図である。
【図１２】図１１の撮像装置によるＣＧ合成座標計算処理に係る動作の一例を示すフローチャートである。
【図１３】図１２のＣＧ合成座標計算処理に係る複数の画像領域の振幅値のソート結果を示す図である。
【図１４】図１２のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１５】図１２のＣＧ合成座標計算処理を説明するための画像を模式的に示す図である。
【図１６】図１１の撮像装置によるＣＧ画像の合成処理後の画像を模式的に示す図である。
【図１７】変形例２の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【図１８】図１７の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【図１９】変形例３の撮像装置によるＣＧ合成処理に係る画像を模式的に示す図である。
【符号の説明】
【００８３】
１００ 撮像装置
１ 撮像部
４ 操作入力部
４ｂ カーソルキー
８ 画像エンジン
１２ ＣＰＵ
１３ フラッシュメモリ
５０ ＣＧ画像
Ｉ６、Ｉ９、Ｉ１１ ＣＧ合成画像
【特許請求の範囲】
【請求項１】
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記被写体画像を構成する画素集合の輪郭線を抽出する抽出手段と、
この抽出手段によって抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、前記主要被写体を描画した主要輪郭線を特定する輪郭線特定手段と、
を更に備え、
前記位置特定手段は、
前記輪郭線特定手段によって特定された前記主要輪郭線で囲まれた画像領域の位置を、前記主要画像領域の位置として特定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記一の被写体画像を複数の領域に分割する分割手段と、
この分割手段によって分割された夫々の領域について、周波数成分情報を取得する情報取得手段と、
を更に備え、
前記位置特定手段は、
前記情報取得手段によって取得された前記周波数成分情報に基づいて、高周波成分が所定値よりも多い領域を前記第１の画像領域を構成する画像領域と判断することを特徴とする請求項１に記載の画像処理装置。
【請求項４】
素材画像を記憶する素材画像記憶手段を更に備え、
前記加工処理手段は、
前記素材画像記憶手段に記憶されている前記素材画像を前記第２の画像領域に合成する画像合成手段を含むことを特徴とする請求項１〜３の何れか一項に記載の画像処理装置。
【請求項５】
前記第２の画像領域における前記素材画像の合成位置を操作により入力する合成位置入力手段と、
この合成位置入力検出手段による入力に基づいて、前記素材画像の合成位置を決定する合成位置決定手段と、
を更に備え、
前記画像合成手段は、前記合成位置決定手段によって決定された前記合成位置に前記素材画像を合成することを特徴とする請求項４に記載の画像処理装置。
【請求項６】
主要被写体を含む一の被写体画像を取得する撮像手段と、
この撮像手段により取得された前記一の被写体画像における前記主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、
を備えることを特徴とする撮像装置。
【請求項７】
コンピュータを、
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段、
として機能させることを特徴とするプログラム。
【請求項１】
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記被写体画像を構成する画素集合の輪郭線を抽出する抽出手段と、
この抽出手段によって抽出された輪郭線のうちの所定値よりも小さい画素集合の輪郭線を除くことにより、前記主要被写体を描画した主要輪郭線を特定する輪郭線特定手段と、
を更に備え、
前記位置特定手段は、
前記輪郭線特定手段によって特定された前記主要輪郭線で囲まれた画像領域の位置を、前記主要画像領域の位置として特定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記一の被写体画像を複数の領域に分割する分割手段と、
この分割手段によって分割された夫々の領域について、周波数成分情報を取得する情報取得手段と、
を更に備え、
前記位置特定手段は、
前記情報取得手段によって取得された前記周波数成分情報に基づいて、高周波成分が所定値よりも多い領域を前記第１の画像領域を構成する画像領域と判断することを特徴とする請求項１に記載の画像処理装置。
【請求項４】
素材画像を記憶する素材画像記憶手段を更に備え、
前記加工処理手段は、
前記素材画像記憶手段に記憶されている前記素材画像を前記第２の画像領域に合成する画像合成手段を含むことを特徴とする請求項１〜３の何れか一項に記載の画像処理装置。
【請求項５】
前記第２の画像領域における前記素材画像の合成位置を操作により入力する合成位置入力手段と、
この合成位置入力検出手段による入力に基づいて、前記素材画像の合成位置を決定する合成位置決定手段と、
を更に備え、
前記画像合成手段は、前記合成位置決定手段によって決定された前記合成位置に前記素材画像を合成することを特徴とする請求項４に記載の画像処理装置。
【請求項６】
主要被写体を含む一の被写体画像を取得する撮像手段と、
この撮像手段により取得された前記一の被写体画像における前記主要被写体に対応する第１の画像領域の位置を特定する位置特定手段と、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段と、
を備えることを特徴とする撮像装置。
【請求項７】
コンピュータを、
一の被写体画像に含まれる主要被写体に対応する第１の画像領域の位置を特定する位置特定手段、
前記一の被写体画像における、前記位置特定手段により特定された前記第１の画像領域の位置以外の第２の画像領域に対して所定の加工処理を行う加工処理手段、
として機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図９】
【図１１】
【図１２】
【図１３】
【図８】
【図１０】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図９】
【図１１】
【図１２】
【図１３】
【図８】
【図１０】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【公開番号】特開２０１０−２８３４６（Ｐ２０１０−２８３４６Ａ）
【公開日】平成２２年２月４日（２０１０．２．４）
【国際特許分類】
【出願番号】特願２００８−１８５８５４（Ｐ２００８−１８５８５４）
【出願日】平成２０年７月１７日（２００８．７．１７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
【公開日】平成２２年２月４日（２０１０．２．４）
【国際特許分類】
【出願日】平成２０年７月１７日（２００８．７．１７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
[ Back to top ]