画像処理装置、撮像装置、画像処理方法及びプログラム
【課題】人体の部位を撮像した画像の不要部分を消去した、より美しい画像を容易に取得することのできる画像処理装置等を提供する。
【解決手段】画像取得部１４１で取得された人物画像に対し、手領域検出部１１１が、画像の中から人の手が表示された領域を検出する。検出した手領域の、画像の全領域に対する割合が、予め定めた閾値以上であった場合に補正処理を行う。器官範囲特定部１１２が、手領域の中から肌が占める肌範囲と爪が占める爪範囲を特定し、画像補正部１１３が、特定された肌範囲及び爪範囲の画像に対して、各器官に対してユーザ等が予め設定した処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う。
【解決手段】画像取得部１４１で取得された人物画像に対し、手領域検出部１１１が、画像の中から人の手が表示された領域を検出する。検出した手領域の、画像の全領域に対する割合が、予め定めた閾値以上であった場合に補正処理を行う。器官範囲特定部１１２が、手領域の中から肌が占める肌範囲と爪が占める爪範囲を特定し、画像補正部１１３が、特定された肌範囲及び爪範囲の画像に対して、各器官に対してユーザ等が予め設定した処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
デジタルカメラ等で撮影した人の画像をより美しくするため、又は化粧等のシミュレーションを行うために、撮影した画像を補正する機能を有する画像処理装置がある（例えば、特許文献１）。
【０００３】
特許文献１に記載の画像処理方法は、人の顔の画像に対して画像の処理範囲、及び、色等の属性をユーザが指定し、その指定された処理範囲内の属性範囲に属する画素の領域を抽出し、その領域に合成用の画像を合成するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−７８１５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
一方、手等の人体の部位を拡大して撮影することもあり、美しい手の画像を取得するために、手荒れや爪が痛んでいる状態の手を撮影した画像に対し、手の赤みや爪の傷等の不要部分を消去する必要があった。
【０００６】
これに対し、特許文献１に記載の技術と同様の技術を、手等の人体の部位の画像を自動補正する際に利用した場合、細かい処理範囲の指定やその部位特有の属性の指定が必要となり、時間も手間もかかってしまう。
また、手は顔より凹凸が多く平坦な領域も狭いため正確な処理範囲設定が困難であった。
【０００７】
本発明は、上記実情に鑑みてなされたものであり、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を容易に取得することのできる画像処理装置、撮像装置、画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１の観点に係る画像処理装置は、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする。
【０００９】
また、本発明の第２の観点に係る撮像装置は、
被写体像を撮像して画像を取得する撮像手段と、第１の観点に係る画像処理装置を備える、
ことを特徴とする。
【００１０】
また、本発明の第３の観点に係る画像処理方法は、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする。
【００１１】
また、本発明の第４の観点に係るプログラムは、
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させることを特徴とする。
【発明の効果】
【００１２】
本発明に係る画像処理装置、撮像装置、画像処理方法、及びプログラムによれば、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を容易に取得することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態１に係る撮像装置の内部構成を示すブロック図である。
【図２】本発明の実施形態１に係る撮像装置の機能を示す機能ブロック図である。
【図３】手画像補正処理手順を示すフローチャートである。
【図４】手画像補正処理を説明するための図である。
【図５】本発明の実施形態２に係る画像処理装置の内部構成を示すブロック図である。
【図６】本発明の実施形態３に係る画像処理システムの構成を示すブロック図である。
【発明を実施するための形態】
【００１４】
（実施形態１）
以下、本発明の実施形態１について図面を参照して詳細に説明する。
【００１５】
実施形態１に係る撮像装置１は、撮像部で人の手を含む被写体像を撮像し、得られた人の手の画像に画像処理を施す装置であり、画像処理機能を有するデジタルカメラ等の撮像装置である。
【００１６】
撮像装置１は、図１に示すように、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、撮像部１４、操作部１５、記憶部１６、表示部１７を備える。
【００１７】
ＣＰＵ（Central Processing Unit）１１は、演算装置、制御装置等から構成され、ＲＯＭ１３又は記憶部１６に記憶されているプログラムを実行することにより、撮像装置１の各構成部の制御や、画像処理機能等の撮像装置１の有する機能を実現する。
【００１８】
ＲＡＭ（Random Access Memory）１２は、ワーク領域を有する内部メモリで、ＤＲＡＭ (Direct Random Access Memory) 、ＳＤＲＡＭ (Synchronous DRAM) 等から構成されている。ＲＡＭ１２は、撮像部１４が撮像した画像のデータや、記憶部１６に記憶されている画像データに画像処理を施すために、読み出した画像データを一時保存する。また、撮像装置１の有する機能を実現するために制御データの一時保存を行う。
【００１９】
ＲＯＭ（Read Only Memory）１３は、読み出し専用の半導体メモリであり、ＣＰＵ１１が実行するプログラム等を記憶する。
【００２０】
撮像部１４は、撮影レンズ、シャッタ・絞りなどの露出制御部、撮像素子、撮像素子の駆動及び読み出し回路等から構成され、撮影レンズによって形成された被写体像を撮像素子によって画像データに変換して出力する。
【００２１】
操作部１５は、レンズのズーム制御ボタン、シャッタボタン、方向キー・決定キー・ファンクションキー等の各種のキーボタンやダイヤル等から構成され、ユーザからの操作入力を受け付け、受け付けた操作入力に係る信号をＣＰＵ１１に送出する。操作部１５はユーザから、シャッタ操作、ズームレンズ操作、撮像条件や画像処理条件の入力操作等を受け付ける。
【００２２】
記憶部１６は、例えば、フラッシュメモリ等の読み書き可能な不揮発性の半導体メモリから構成され、原画像の画像データや、画像処理後の画像データ、及び、ＣＰＵ１１が実行するプログラムや、そのプログラムが参照する条件データ等を記憶する。これらの記憶されたデータは操作部１５に入力するユーザの操作やＣＰＵ１１の制御により書き換え可能な構成となっている。
【００２３】
表示部１７は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro -Luminescence）ディスプレイ等の表示デバイスから構成され、画像、図形、文字、記号などの情報表示出力を行う。
表示部１７には、画像処理前の原画像や、画像処理後の画像や、画像処理機能の操作画面などを表示する。
【００２４】
以上のように構成された撮像装置１の動作を説明する。
【００２５】
ユーザがシャッタボタンを押すと、撮影レンズによって形成されている被写体像が撮像素子によって画像データに変換され撮像部１４より出力される。
撮像部１４より出力された画像データはＲＡＭ１２に一時保存される。
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
【００２６】
その画像処理の１つが手画像補正処理である。
手画像補正処理について、図２乃至４を用いて説明する。
【００２７】
撮像装置１は、図２に示すように、ＣＰＵ１１から構成される手領域検出部１１１、器官範囲特定部１１２、画像補正部１１３と、撮像部１４から構成される画像取得部１４１と、ＲＡＭ１２から構成される一時記憶部１２１を含み、これらの各機能部により、手画像補正処理機能を実現している。
【００２８】
手画像補正処理の手順を図３のフローチャートに従って説明する。
画像取得部１４１で取得された画像は一時記憶部１２１に一時記憶される。一時記憶された画像に対し、まず、ＣＰＵ１１は人の手の画像を探索する。
探索の結果、人の手の画像が検出された場合に、図３に示す手画像補正処理が開始される。
【００２９】
まず、手領域検出部１１１が、画像の中から人の手が表示された領域を検出する（ステップＳ１０１）。具体的には記憶部１６に予め記憶されている人の手の色、形状等に関する特徴データを参照して、一時記憶部１２１に記憶されている画像の中から、記憶部１６に記憶されている特徴データに一致している人の手の画像が表示されている領域を検出する。そして、検出した領域を示す位置情報を一時記憶部１２１に記憶する。
【００３０】
次に手の画像が表示されている手領域の、画像の全領域に対する割合が、予め定めた閾値（例えば３割）以上であるか否かを判定する（ステップＳ１０２）。
この割合が閾値より低い場合には（例えば３割未満）、手が小さく表示されており、手に傷などがあっても目立たず補正をする必要がないため、以下に述べる補正は行わない（ステップＳ１０２：Ｎｏ）。
【００３１】
ステップ１０２で手領域の割合が閾値以上であると判定された場合には、器官範囲特定部１１２が、一時記憶部１２１に記憶された位置情報が示す手領域の中から手に含まれる器官のうち肌が占める範囲を特定する（ステップＳ１０３）。
【００３２】
ここで、手に含まれる器官のうち、肌と爪は互いに異なる色、形状、凹凸パターンを有しており、記憶部１６には、人の手の肌、爪それぞれの色、形状、凹凸パターン等の特徴情報が予め記憶されている。ここで、凹凸パターンとは、しわや毛穴や骨格による膨らみ等の凹凸に起因する明暗パターンを示す。
【００３３】
器官範囲特定部１１２は、ステップＳ１０３において、記憶部１６に記憶されている肌の色、形状、凹凸パターン等の特徴情報を読み出し、手領域として記憶されている領域の画像の中から、肌の特徴情報に略一致している情報を有する画素が占める範囲、すなわち肌範囲を特定する。
【００３４】
次に、一時記憶部１２１に保存されている画像のうち、特定された肌範囲の画像に対して、予めユーザ等が定めた処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う（ステップＳ１０４）。
【００３５】
スムージング処理により、肌のしわ、毛穴、傷、しみ等を目立たなくすることができる。
また、色調補正により、色白の肌、小麦色の肌など、好みに応じて予め設定した肌の色調に変更することができる。
また、コントラスト補正により、手の画像の肌色の明るい部分と暗い部分の輝度の差を調整でき、ユーザなどの好みに応じたコントラストの画像を取得することができる。
【００３６】
次に、器官範囲特定部１１２が、一時記憶部１２１に記憶された位置情報が示す手領域の中から手に含まれる器官のうち爪が占める範囲を特定する（ステップＳ１０５）。
【００３７】
ステップＳ１０５の爪の範囲の特定は、肌の範囲の特定（ステップ１０３）と同様に、器官範囲特定部１１２が、記憶部１６に記憶されている爪の色、形状、凹凸パターン等の特徴情報を読み出し、手領域として記憶されている領域の画像の中から、爪の特徴情報に略一致している情報を有する画素が占める範囲、すなわち爪範囲を特定する。
【００３８】
次に、一時記憶部１２１に保存されている画像の特定された爪範囲の画像に対して、予めユーザ等が定めた処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う（ステップＳ１０６）。
【００３９】
スムージング処理により、爪の凸凹、スジ、傷等を目立たなくすることができる。
また、色調補正により、明るい色調、光沢があるように見える色調など、好みに応じて予め設定した爪の色調に変更することができる。
また、コントラスト補正により、手の画像の爪の色の明るい部分と暗い部分の輝度の差を調整でき、ユーザなどの好みに応じたコントラストの画像を取得することができる。
【００４０】
以上説明したステップ１０２乃至Ｓ１０６の処理を、図４を用いて説明する。
【００４１】
図４（ａ）には、手の画像を含む原画像の一例を示す。
原画像には、図４（ａ）に示すように、肌の範囲に赤み２０１があり、爪の範囲にはスジ２０２がある。
【００４２】
まず、ステップＳ１０２で、手領域検出部１１１が検出した手領域の、画像の全領域に対する割合が、予め定めた閾値（例えば３割）以上であるか否かを判定する。図４（ａ）に示した画像は、手領域が３割を超えているため（ステップＳ１０２：Ｙｅｓ）、ステップＳ１０３の処理に進む。
【００４３】
ステップＳ１０３では、器官範囲特定部１１２が肌範囲を特定する。図４（ｂ）の一点鎖線で囲んだ範囲２０３が肌範囲と特定されている。
次にステップＳ１０４で、特定された肌範囲内にスムージング処理を行うことで、赤み２０１の部分の画素が周囲の画素の色に近い色に変換され、赤み２０１が消去される。（図４（ｃ）の２０３）。
【００４４】
次に、ステップＳ１０５では、器官範囲特定部１１２が爪範囲を特定する。図４（ｂ）の破線で囲んだ範囲２０４が爪範囲と特定されている。
次にステップＳ１０６で、特定された爪範囲内にスムージング処理を行うことで、スジ２０２の部分の画素が周囲の画素の色に近い色に変換され、スジ２０２が消去される。（図４（ｃ）の２０４）。
【００４５】
なお、図４（ｂ）及び（ｃ）においては、肌及び爪の範囲を示す２０３の一点鎖線、２０４の破線は、手と背景の境界の外側を囲んでいるが、これは図を見やすくするものであり、実際は、手と背景画像の境界、肌と爪の境界に沿って肌及び爪の範囲を特定している。
また、爪も各指毎に範囲特定する。
これにより、境界がぼけることなく、肌の赤みや爪のスジを目立たなくすることができる。
【００４６】
また、時計や指輪などの付属物との境界にそって肌及び爪の範囲を特定することにより、時計や指輪などの画像をぼかすことなく肌の画像に補正を加えることができる。
【００４７】
以上説明した手画像補正処理を施した処理画像は、一時記憶部１２１を構成するＲＡＭ１２より出力され、記憶部１６に保存される（ステップＳ１０７）。
ここで、記憶部１６には画像処理を施す前の原画像に対応付けて保存しても良い。
【００４８】
また、ＲＡＭ１２より出力した処理画像は、表示部１７に出力される。ユーザは、表示部１７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部１６に原画像又は処理画像を保存するようにしてもよい。
【００４９】
以上説明したように、本実施形態においては、撮像部１４が撮像した画像に対し、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施すこととした。これにより、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００５０】
（実施形態２）
以下、本発明の実施形態２について図５を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００５１】
実施形態２に係る画像処理装置２は、外部のデジタルカメラ等で撮像した人物画像を取り込み、その画像に画像処理を施す装置であり、画像処理機能を有する画像処理専用端末、又は、画像処理機能を有するＰＣ（Personal Computer）等の情報処理端末である。
【００５２】
画像処理装置２は、図５に示すように、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、カメラ接続インターフェース２４、操作部２５、記憶部２６、表示部２７を備える。
【００５３】
カメラ接続インターフェース２４に外部のデジタルカメラが接続されると、ＣＰＵ２１が外部のデジタルカメラを認識し、カメラ接続インターフェース２４のデータ送受信機能を起動する。またＣＰＵ２１は画像取得アプリケーションを起動し、表示部２７にそのアプリケーションの操作画面を表示する。
【００５４】
ユーザは、その操作画面に従い、操作部２５に操作入力して、デジタルカメラから画像処理装置２に取り込む画像を選択する。選択された画像の画像データはカメラ接続インターフェースを介して画像処理装置２に取り込まれ、ＲＡＭ２２に一時保存される。
【００５５】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして手画像補正処理があるが、手画像補正処理の内容は実施形態１と同じである。
【００５６】
手画像補正処理を含む画像処理を施して取得した処理画像は、ＲＡＭ２２より出力され、記憶部２６に保存される。
ここで、記憶部２６には画像処理を施す前の原画像も一緒に保存しても良い。
【００５７】
また、ＲＡＭ２２より出力した処理画像は、表示部２７に出力される。ユーザは、表示部２７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部２６に原画像又は処理画像を保存するようにしてもよい。
【００５８】
以上説明したように、本実施形態においては、外部のデジタルカメラ等で撮像した画像を画像処理装置に取り込み、取り込んだ画像に対して、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施すこととした。これにより、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００５９】
（実施形態３）
以下、本発明の実施形態３について図６を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００６０】
実施形態３に係る画像処理システム３は、ネットワーク接続機能を有する撮像装置４が撮像した画像を、ネットワーク５経由で画像処理機能を有する画像処理サーバ６に送信し、画像処理サーバ６がその画像に画像処理を施す画像処理システムである。
【００６１】
撮像装置４は、図６に示すように、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、撮像部４４、操作部４５、記憶部４６、表示部４７、ネットワーク制御部４８を備える。
【００６２】
また、画像処理サーバ６は、図６に示すように、ＣＰＵ６１、ＲＡＭ６２、ＲＯＭ６３、操作部６５、記憶部６６、表示部６７、ネットワーク制御部６８を備える。
【００６３】
撮像装置４の撮像部４４が人の手を含む被写体像を撮像すると、取得された画像データがＲＡＭ４２又は記憶部４６に保存される。ＣＰＵ４１は、保存されている画像データのうち、画像処理サーバ６に送信する画像をユーザの操作、又は事前設定に従って選択する。そして、ネットワーク制御部４８が、選択された画像データを画像処理サーバ６に送信する。
【００６４】
送信された画像データは、ネットワーク５を経由して、画像処理サーバ６のネットワーク制御部６８で受信される。
受信された画像データは、画像処理サーバ６のＲＡＭ６２に一時保存される。
【００６５】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして手画像補正処理があるが、手画像補正の内容は実施形態１と同じである。
【００６６】
手画像補正処理を含む画像処理を施して取得した処理画像は、ＲＡＭ６２より出力され、記憶部６６に保存される。
ここで、記憶部６６には画像処理を施す前の原画像も一緒に保存しても良い。
【００６７】
また、ＲＡＭ６２より出力した処理画像は、ネットワーク制御部６８から送信される。送信された処理画像のデータは、ネットワーク５を経由して撮像装置４のネットワーク制御部４８で受信され、ＲＡＭ４２に一時保存され、表示部４７で表示される。ユーザは、表示部４７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合、記憶部４６に原画像又は処理画像を保存する。
【００６８】
以上説明したように、本実施形態においては、撮像装置で撮像した画像を画像処理サーバにネットワークを経由して送信し、画像処理サーバが受信した画像データに対して、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施し、画像処理を施した処理画像を撮像装置にネットワークを経由して送信し、撮像装置で受信した処理画像を表示、保存することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、ネットワークを経由した画像処理サーバで突出部消去処理を行うことができ、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００６９】
このように本発明は、人体の部位を含む被写体像を撮像した原画像の画像データに対して、人体の部位の領域を検出し、その領域内からその部位に含まれる器官が占める器官範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、各器官範囲の画像に処理を施すこととした。これにより、消去箇所の手動指定を要することなく、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を取得することができる。
【００７０】
なお、本発明は、上記実施の形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。
【００７１】
例えば、上記実施形態において、爪範囲の特定後に、まず、マニキュアによる光沢状態及び色を含む現在の爪画素情報を取得して、取得した爪画素情報に対応して予め定めている処理設定情報に基づいて補正処理を行っても良い。これにより、光沢のあるマニキュアを塗っている爪に対して、スムージング処理を控えるように設定することによりその光沢感を鈍化させることなく爪範囲の補正を行うことができる。
【００７２】
また、肌範囲の特定において、各指、手のひら、手の甲それぞれの範囲の特定を行っても良い。これにより、消去する必要のないしわを残すことができ、手の画像が不自然な画像となることを回避することができる。
【００７３】
また、人の手の画像について、肌や爪範囲について補正処理を行うとしたが、他の人体の部位についてその部位特有の補正処理を行っても良い。例えば、人の脚領域を検出し、脚領域内の肌範囲を特定し、肌の赤みやアザをスムージング処理によって消去する等の補正を行う構成としても良い。
【００７４】
また、撮像した画像や受信した画像をＲＡＭに一時保存し、それに対して画像処理を施し、処理画像を記憶部に保存することとしたが、撮像した画像や受信した画像を記憶部に保存し、ユーザの選択操作に従い、記憶部から画像を読み出して、その画像に対して画像処理を施す構成としても良い。
【００７５】
また、実施形態３において、ネットワーク５を経由して画像データを送受信するとしたが、近距離無線通信など、他の通信手段を用いて、撮像装置４と画像処理サーバ６との間の画像データの送受信を行っても良い。
【００７６】
また、上記実施形態のＣＰＵ２１、６１が実行した画像処理のプログラムを、既存の情報端末に適用することで、当該情報端末を本発明に係る画像処理装置２又は画像処理サーバ６として機能させることも可能である。
【００７７】
このようなプログラムの配布方法は任意であり、例えば、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto Optical Disk）、メモリカード等のコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、携帯電話網やインターネット等の通信ネットワークを介して配布してもよい。
【００７８】
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【００７９】
（付記１）
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする画像処理装置。
【００８０】
（付記２）
前記画像補正処理手段は、前記部位領域が画像の全領域に占める割合が予め定めた割合以上となっている前記人体の部位に対して前記補正処理を行う、
ことを特徴とする付記１に記載の画像処理装置。
【００８１】
（付記３）
前記器官情報は、前記画像処理装置に備えられた記憶手段に記憶された各器官の色又は形状又は凹凸パターンを含む情報と略一致する情報の有無を示す情報である、
ことを特徴とする付記１又は２に記載の画像処理装置。
【００８２】
（付記４）
前記人体の部位は、人の手であり、前記器官は、肌又は爪を含む、
ことを特徴とする付記１乃至３のいずれかに記載の画像処理装置。
【００８３】
（付記５）
前記補正処理は、肌又は爪のスムージング処理又は色調補正処理又はコントラスト補正処理である、
ことを特徴とする付記４に記載の画像処理装置。
【００８４】
（付記６）
前記画像補正処理手段は、前記爪の範囲を補正する際に、マニキュアによる光沢状態及び色を含む爪画素情報から、前記爪画素情報に対応して予め定めた補正処理を行う、
ことを特徴とする付記４又は５に記載の画像処理装置。
【００８５】
（付記７）
被写体像を撮像して画像を取得する撮像手段と、付記１乃至６の何れかに記載の画像処理装置を備える、
ことを特徴とする撮像装置。
【００８６】
（付記８）
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする画像処理方法。
【００８７】
（付記９）
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させるためのプログラム。
【符号の説明】
【００８８】
１ 撮像装置
２ 画像処理装置
３ 画像処理システム
４ 撮像装置
５ ネットワーク
６ 画像処理サーバ
１１、２１、４１、６１ ＣＰＵ
１２、２２、４２、６２ ＲＡＭ
１３、２３、４３、６３ ＲＯＭ
１４、４４ 撮像部
１５、２５、４５、６５ 操作部
１６、２６、４６、６６ 記憶部
１７、２７、４７、６７ 表示部
２４ カメラ接続インターフェース
４８、６８ ネットワーク制御部
１１１ 手領域検出部
１１２ 器官範囲特定部
１１３ 画像補正部
１２１ 一時記憶部
１４１ 画像取得部
２０１ 肌範囲の赤み
２０２ 爪範囲のスジ
２０３ 肌範囲
２０４ 爪範囲
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
デジタルカメラ等で撮影した人の画像をより美しくするため、又は化粧等のシミュレーションを行うために、撮影した画像を補正する機能を有する画像処理装置がある（例えば、特許文献１）。
【０００３】
特許文献１に記載の画像処理方法は、人の顔の画像に対して画像の処理範囲、及び、色等の属性をユーザが指定し、その指定された処理範囲内の属性範囲に属する画素の領域を抽出し、その領域に合成用の画像を合成するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−７８１５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
一方、手等の人体の部位を拡大して撮影することもあり、美しい手の画像を取得するために、手荒れや爪が痛んでいる状態の手を撮影した画像に対し、手の赤みや爪の傷等の不要部分を消去する必要があった。
【０００６】
これに対し、特許文献１に記載の技術と同様の技術を、手等の人体の部位の画像を自動補正する際に利用した場合、細かい処理範囲の指定やその部位特有の属性の指定が必要となり、時間も手間もかかってしまう。
また、手は顔より凹凸が多く平坦な領域も狭いため正確な処理範囲設定が困難であった。
【０００７】
本発明は、上記実情に鑑みてなされたものであり、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を容易に取得することのできる画像処理装置、撮像装置、画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１の観点に係る画像処理装置は、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする。
【０００９】
また、本発明の第２の観点に係る撮像装置は、
被写体像を撮像して画像を取得する撮像手段と、第１の観点に係る画像処理装置を備える、
ことを特徴とする。
【００１０】
また、本発明の第３の観点に係る画像処理方法は、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする。
【００１１】
また、本発明の第４の観点に係るプログラムは、
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させることを特徴とする。
【発明の効果】
【００１２】
本発明に係る画像処理装置、撮像装置、画像処理方法、及びプログラムによれば、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を容易に取得することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態１に係る撮像装置の内部構成を示すブロック図である。
【図２】本発明の実施形態１に係る撮像装置の機能を示す機能ブロック図である。
【図３】手画像補正処理手順を示すフローチャートである。
【図４】手画像補正処理を説明するための図である。
【図５】本発明の実施形態２に係る画像処理装置の内部構成を示すブロック図である。
【図６】本発明の実施形態３に係る画像処理システムの構成を示すブロック図である。
【発明を実施するための形態】
【００１４】
（実施形態１）
以下、本発明の実施形態１について図面を参照して詳細に説明する。
【００１５】
実施形態１に係る撮像装置１は、撮像部で人の手を含む被写体像を撮像し、得られた人の手の画像に画像処理を施す装置であり、画像処理機能を有するデジタルカメラ等の撮像装置である。
【００１６】
撮像装置１は、図１に示すように、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、撮像部１４、操作部１５、記憶部１６、表示部１７を備える。
【００１７】
ＣＰＵ（Central Processing Unit）１１は、演算装置、制御装置等から構成され、ＲＯＭ１３又は記憶部１６に記憶されているプログラムを実行することにより、撮像装置１の各構成部の制御や、画像処理機能等の撮像装置１の有する機能を実現する。
【００１８】
ＲＡＭ（Random Access Memory）１２は、ワーク領域を有する内部メモリで、ＤＲＡＭ (Direct Random Access Memory) 、ＳＤＲＡＭ (Synchronous DRAM) 等から構成されている。ＲＡＭ１２は、撮像部１４が撮像した画像のデータや、記憶部１６に記憶されている画像データに画像処理を施すために、読み出した画像データを一時保存する。また、撮像装置１の有する機能を実現するために制御データの一時保存を行う。
【００１９】
ＲＯＭ（Read Only Memory）１３は、読み出し専用の半導体メモリであり、ＣＰＵ１１が実行するプログラム等を記憶する。
【００２０】
撮像部１４は、撮影レンズ、シャッタ・絞りなどの露出制御部、撮像素子、撮像素子の駆動及び読み出し回路等から構成され、撮影レンズによって形成された被写体像を撮像素子によって画像データに変換して出力する。
【００２１】
操作部１５は、レンズのズーム制御ボタン、シャッタボタン、方向キー・決定キー・ファンクションキー等の各種のキーボタンやダイヤル等から構成され、ユーザからの操作入力を受け付け、受け付けた操作入力に係る信号をＣＰＵ１１に送出する。操作部１５はユーザから、シャッタ操作、ズームレンズ操作、撮像条件や画像処理条件の入力操作等を受け付ける。
【００２２】
記憶部１６は、例えば、フラッシュメモリ等の読み書き可能な不揮発性の半導体メモリから構成され、原画像の画像データや、画像処理後の画像データ、及び、ＣＰＵ１１が実行するプログラムや、そのプログラムが参照する条件データ等を記憶する。これらの記憶されたデータは操作部１５に入力するユーザの操作やＣＰＵ１１の制御により書き換え可能な構成となっている。
【００２３】
表示部１７は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro -Luminescence）ディスプレイ等の表示デバイスから構成され、画像、図形、文字、記号などの情報表示出力を行う。
表示部１７には、画像処理前の原画像や、画像処理後の画像や、画像処理機能の操作画面などを表示する。
【００２４】
以上のように構成された撮像装置１の動作を説明する。
【００２５】
ユーザがシャッタボタンを押すと、撮影レンズによって形成されている被写体像が撮像素子によって画像データに変換され撮像部１４より出力される。
撮像部１４より出力された画像データはＲＡＭ１２に一時保存される。
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
【００２６】
その画像処理の１つが手画像補正処理である。
手画像補正処理について、図２乃至４を用いて説明する。
【００２７】
撮像装置１は、図２に示すように、ＣＰＵ１１から構成される手領域検出部１１１、器官範囲特定部１１２、画像補正部１１３と、撮像部１４から構成される画像取得部１４１と、ＲＡＭ１２から構成される一時記憶部１２１を含み、これらの各機能部により、手画像補正処理機能を実現している。
【００２８】
手画像補正処理の手順を図３のフローチャートに従って説明する。
画像取得部１４１で取得された画像は一時記憶部１２１に一時記憶される。一時記憶された画像に対し、まず、ＣＰＵ１１は人の手の画像を探索する。
探索の結果、人の手の画像が検出された場合に、図３に示す手画像補正処理が開始される。
【００２９】
まず、手領域検出部１１１が、画像の中から人の手が表示された領域を検出する（ステップＳ１０１）。具体的には記憶部１６に予め記憶されている人の手の色、形状等に関する特徴データを参照して、一時記憶部１２１に記憶されている画像の中から、記憶部１６に記憶されている特徴データに一致している人の手の画像が表示されている領域を検出する。そして、検出した領域を示す位置情報を一時記憶部１２１に記憶する。
【００３０】
次に手の画像が表示されている手領域の、画像の全領域に対する割合が、予め定めた閾値（例えば３割）以上であるか否かを判定する（ステップＳ１０２）。
この割合が閾値より低い場合には（例えば３割未満）、手が小さく表示されており、手に傷などがあっても目立たず補正をする必要がないため、以下に述べる補正は行わない（ステップＳ１０２：Ｎｏ）。
【００３１】
ステップ１０２で手領域の割合が閾値以上であると判定された場合には、器官範囲特定部１１２が、一時記憶部１２１に記憶された位置情報が示す手領域の中から手に含まれる器官のうち肌が占める範囲を特定する（ステップＳ１０３）。
【００３２】
ここで、手に含まれる器官のうち、肌と爪は互いに異なる色、形状、凹凸パターンを有しており、記憶部１６には、人の手の肌、爪それぞれの色、形状、凹凸パターン等の特徴情報が予め記憶されている。ここで、凹凸パターンとは、しわや毛穴や骨格による膨らみ等の凹凸に起因する明暗パターンを示す。
【００３３】
器官範囲特定部１１２は、ステップＳ１０３において、記憶部１６に記憶されている肌の色、形状、凹凸パターン等の特徴情報を読み出し、手領域として記憶されている領域の画像の中から、肌の特徴情報に略一致している情報を有する画素が占める範囲、すなわち肌範囲を特定する。
【００３４】
次に、一時記憶部１２１に保存されている画像のうち、特定された肌範囲の画像に対して、予めユーザ等が定めた処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う（ステップＳ１０４）。
【００３５】
スムージング処理により、肌のしわ、毛穴、傷、しみ等を目立たなくすることができる。
また、色調補正により、色白の肌、小麦色の肌など、好みに応じて予め設定した肌の色調に変更することができる。
また、コントラスト補正により、手の画像の肌色の明るい部分と暗い部分の輝度の差を調整でき、ユーザなどの好みに応じたコントラストの画像を取得することができる。
【００３６】
次に、器官範囲特定部１１２が、一時記憶部１２１に記憶された位置情報が示す手領域の中から手に含まれる器官のうち爪が占める範囲を特定する（ステップＳ１０５）。
【００３７】
ステップＳ１０５の爪の範囲の特定は、肌の範囲の特定（ステップ１０３）と同様に、器官範囲特定部１１２が、記憶部１６に記憶されている爪の色、形状、凹凸パターン等の特徴情報を読み出し、手領域として記憶されている領域の画像の中から、爪の特徴情報に略一致している情報を有する画素が占める範囲、すなわち爪範囲を特定する。
【００３８】
次に、一時記憶部１２１に保存されている画像の特定された爪範囲の画像に対して、予めユーザ等が定めた処理設定情報に基づいて、スムージング処理、色調補正、コントラスト補正等を行う（ステップＳ１０６）。
【００３９】
スムージング処理により、爪の凸凹、スジ、傷等を目立たなくすることができる。
また、色調補正により、明るい色調、光沢があるように見える色調など、好みに応じて予め設定した爪の色調に変更することができる。
また、コントラスト補正により、手の画像の爪の色の明るい部分と暗い部分の輝度の差を調整でき、ユーザなどの好みに応じたコントラストの画像を取得することができる。
【００４０】
以上説明したステップ１０２乃至Ｓ１０６の処理を、図４を用いて説明する。
【００４１】
図４（ａ）には、手の画像を含む原画像の一例を示す。
原画像には、図４（ａ）に示すように、肌の範囲に赤み２０１があり、爪の範囲にはスジ２０２がある。
【００４２】
まず、ステップＳ１０２で、手領域検出部１１１が検出した手領域の、画像の全領域に対する割合が、予め定めた閾値（例えば３割）以上であるか否かを判定する。図４（ａ）に示した画像は、手領域が３割を超えているため（ステップＳ１０２：Ｙｅｓ）、ステップＳ１０３の処理に進む。
【００４３】
ステップＳ１０３では、器官範囲特定部１１２が肌範囲を特定する。図４（ｂ）の一点鎖線で囲んだ範囲２０３が肌範囲と特定されている。
次にステップＳ１０４で、特定された肌範囲内にスムージング処理を行うことで、赤み２０１の部分の画素が周囲の画素の色に近い色に変換され、赤み２０１が消去される。（図４（ｃ）の２０３）。
【００４４】
次に、ステップＳ１０５では、器官範囲特定部１１２が爪範囲を特定する。図４（ｂ）の破線で囲んだ範囲２０４が爪範囲と特定されている。
次にステップＳ１０６で、特定された爪範囲内にスムージング処理を行うことで、スジ２０２の部分の画素が周囲の画素の色に近い色に変換され、スジ２０２が消去される。（図４（ｃ）の２０４）。
【００４５】
なお、図４（ｂ）及び（ｃ）においては、肌及び爪の範囲を示す２０３の一点鎖線、２０４の破線は、手と背景の境界の外側を囲んでいるが、これは図を見やすくするものであり、実際は、手と背景画像の境界、肌と爪の境界に沿って肌及び爪の範囲を特定している。
また、爪も各指毎に範囲特定する。
これにより、境界がぼけることなく、肌の赤みや爪のスジを目立たなくすることができる。
【００４６】
また、時計や指輪などの付属物との境界にそって肌及び爪の範囲を特定することにより、時計や指輪などの画像をぼかすことなく肌の画像に補正を加えることができる。
【００４７】
以上説明した手画像補正処理を施した処理画像は、一時記憶部１２１を構成するＲＡＭ１２より出力され、記憶部１６に保存される（ステップＳ１０７）。
ここで、記憶部１６には画像処理を施す前の原画像に対応付けて保存しても良い。
【００４８】
また、ＲＡＭ１２より出力した処理画像は、表示部１７に出力される。ユーザは、表示部１７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部１６に原画像又は処理画像を保存するようにしてもよい。
【００４９】
以上説明したように、本実施形態においては、撮像部１４が撮像した画像に対し、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施すこととした。これにより、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００５０】
（実施形態２）
以下、本発明の実施形態２について図５を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００５１】
実施形態２に係る画像処理装置２は、外部のデジタルカメラ等で撮像した人物画像を取り込み、その画像に画像処理を施す装置であり、画像処理機能を有する画像処理専用端末、又は、画像処理機能を有するＰＣ（Personal Computer）等の情報処理端末である。
【００５２】
画像処理装置２は、図５に示すように、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、カメラ接続インターフェース２４、操作部２５、記憶部２６、表示部２７を備える。
【００５３】
カメラ接続インターフェース２４に外部のデジタルカメラが接続されると、ＣＰＵ２１が外部のデジタルカメラを認識し、カメラ接続インターフェース２４のデータ送受信機能を起動する。またＣＰＵ２１は画像取得アプリケーションを起動し、表示部２７にそのアプリケーションの操作画面を表示する。
【００５４】
ユーザは、その操作画面に従い、操作部２５に操作入力して、デジタルカメラから画像処理装置２に取り込む画像を選択する。選択された画像の画像データはカメラ接続インターフェースを介して画像処理装置２に取り込まれ、ＲＡＭ２２に一時保存される。
【００５５】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして手画像補正処理があるが、手画像補正処理の内容は実施形態１と同じである。
【００５６】
手画像補正処理を含む画像処理を施して取得した処理画像は、ＲＡＭ２２より出力され、記憶部２６に保存される。
ここで、記憶部２６には画像処理を施す前の原画像も一緒に保存しても良い。
【００５７】
また、ＲＡＭ２２より出力した処理画像は、表示部２７に出力される。ユーザは、表示部２７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部２６に原画像又は処理画像を保存するようにしてもよい。
【００５８】
以上説明したように、本実施形態においては、外部のデジタルカメラ等で撮像した画像を画像処理装置に取り込み、取り込んだ画像に対して、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施すこととした。これにより、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００５９】
（実施形態３）
以下、本発明の実施形態３について図６を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００６０】
実施形態３に係る画像処理システム３は、ネットワーク接続機能を有する撮像装置４が撮像した画像を、ネットワーク５経由で画像処理機能を有する画像処理サーバ６に送信し、画像処理サーバ６がその画像に画像処理を施す画像処理システムである。
【００６１】
撮像装置４は、図６に示すように、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、撮像部４４、操作部４５、記憶部４６、表示部４７、ネットワーク制御部４８を備える。
【００６２】
また、画像処理サーバ６は、図６に示すように、ＣＰＵ６１、ＲＡＭ６２、ＲＯＭ６３、操作部６５、記憶部６６、表示部６７、ネットワーク制御部６８を備える。
【００６３】
撮像装置４の撮像部４４が人の手を含む被写体像を撮像すると、取得された画像データがＲＡＭ４２又は記憶部４６に保存される。ＣＰＵ４１は、保存されている画像データのうち、画像処理サーバ６に送信する画像をユーザの操作、又は事前設定に従って選択する。そして、ネットワーク制御部４８が、選択された画像データを画像処理サーバ６に送信する。
【００６４】
送信された画像データは、ネットワーク５を経由して、画像処理サーバ６のネットワーク制御部６８で受信される。
受信された画像データは、画像処理サーバ６のＲＡＭ６２に一時保存される。
【００６５】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして手画像補正処理があるが、手画像補正の内容は実施形態１と同じである。
【００６６】
手画像補正処理を含む画像処理を施して取得した処理画像は、ＲＡＭ６２より出力され、記憶部６６に保存される。
ここで、記憶部６６には画像処理を施す前の原画像も一緒に保存しても良い。
【００６７】
また、ＲＡＭ６２より出力した処理画像は、ネットワーク制御部６８から送信される。送信された処理画像のデータは、ネットワーク５を経由して撮像装置４のネットワーク制御部４８で受信され、ＲＡＭ４２に一時保存され、表示部４７で表示される。ユーザは、表示部４７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合、記憶部４６に原画像又は処理画像を保存する。
【００６８】
以上説明したように、本実施形態においては、撮像装置で撮像した画像を画像処理サーバにネットワークを経由して送信し、画像処理サーバが受信した画像データに対して、人の手の領域を検出し、その領域内で、肌や爪の器官の特徴情報に一致する肌範囲又は爪範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、肌範囲又は爪範囲の画像に処理を施し、画像処理を施した処理画像を撮像装置にネットワークを経由して送信し、撮像装置で受信した処理画像を表示、保存することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、ネットワークを経由した画像処理サーバで突出部消去処理を行うことができ、肌の赤みや爪のスジ等不要部分を消去した、より美しい人の手の画像を取得することができる。
【００６９】
このように本発明は、人体の部位を含む被写体像を撮像した原画像の画像データに対して、人体の部位の領域を検出し、その領域内からその部位に含まれる器官が占める器官範囲を特定し、それぞれ予め設定した処理設定情報に基づいて、各器官範囲の画像に処理を施すこととした。これにより、消去箇所の手動指定を要することなく、人体の部位を撮像した画像の不要部分を消去した、より美しい画像を取得することができる。
【００７０】
なお、本発明は、上記実施の形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。
【００７１】
例えば、上記実施形態において、爪範囲の特定後に、まず、マニキュアによる光沢状態及び色を含む現在の爪画素情報を取得して、取得した爪画素情報に対応して予め定めている処理設定情報に基づいて補正処理を行っても良い。これにより、光沢のあるマニキュアを塗っている爪に対して、スムージング処理を控えるように設定することによりその光沢感を鈍化させることなく爪範囲の補正を行うことができる。
【００７２】
また、肌範囲の特定において、各指、手のひら、手の甲それぞれの範囲の特定を行っても良い。これにより、消去する必要のないしわを残すことができ、手の画像が不自然な画像となることを回避することができる。
【００７３】
また、人の手の画像について、肌や爪範囲について補正処理を行うとしたが、他の人体の部位についてその部位特有の補正処理を行っても良い。例えば、人の脚領域を検出し、脚領域内の肌範囲を特定し、肌の赤みやアザをスムージング処理によって消去する等の補正を行う構成としても良い。
【００７４】
また、撮像した画像や受信した画像をＲＡＭに一時保存し、それに対して画像処理を施し、処理画像を記憶部に保存することとしたが、撮像した画像や受信した画像を記憶部に保存し、ユーザの選択操作に従い、記憶部から画像を読み出して、その画像に対して画像処理を施す構成としても良い。
【００７５】
また、実施形態３において、ネットワーク５を経由して画像データを送受信するとしたが、近距離無線通信など、他の通信手段を用いて、撮像装置４と画像処理サーバ６との間の画像データの送受信を行っても良い。
【００７６】
また、上記実施形態のＣＰＵ２１、６１が実行した画像処理のプログラムを、既存の情報端末に適用することで、当該情報端末を本発明に係る画像処理装置２又は画像処理サーバ６として機能させることも可能である。
【００７７】
このようなプログラムの配布方法は任意であり、例えば、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto Optical Disk）、メモリカード等のコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、携帯電話網やインターネット等の通信ネットワークを介して配布してもよい。
【００７８】
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【００７９】
（付記１）
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする画像処理装置。
【００８０】
（付記２）
前記画像補正処理手段は、前記部位領域が画像の全領域に占める割合が予め定めた割合以上となっている前記人体の部位に対して前記補正処理を行う、
ことを特徴とする付記１に記載の画像処理装置。
【００８１】
（付記３）
前記器官情報は、前記画像処理装置に備えられた記憶手段に記憶された各器官の色又は形状又は凹凸パターンを含む情報と略一致する情報の有無を示す情報である、
ことを特徴とする付記１又は２に記載の画像処理装置。
【００８２】
（付記４）
前記人体の部位は、人の手であり、前記器官は、肌又は爪を含む、
ことを特徴とする付記１乃至３のいずれかに記載の画像処理装置。
【００８３】
（付記５）
前記補正処理は、肌又は爪のスムージング処理又は色調補正処理又はコントラスト補正処理である、
ことを特徴とする付記４に記載の画像処理装置。
【００８４】
（付記６）
前記画像補正処理手段は、前記爪の範囲を補正する際に、マニキュアによる光沢状態及び色を含む爪画素情報から、前記爪画素情報に対応して予め定めた補正処理を行う、
ことを特徴とする付記４又は５に記載の画像処理装置。
【００８５】
（付記７）
被写体像を撮像して画像を取得する撮像手段と、付記１乃至６の何れかに記載の画像処理装置を備える、
ことを特徴とする撮像装置。
【００８６】
（付記８）
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする画像処理方法。
【００８７】
（付記９）
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させるためのプログラム。
【符号の説明】
【００８８】
１ 撮像装置
２ 画像処理装置
３ 画像処理システム
４ 撮像装置
５ ネットワーク
６ 画像処理サーバ
１１、２１、４１、６１ ＣＰＵ
１２、２２、４２、６２ ＲＡＭ
１３、２３、４３、６３ ＲＯＭ
１４、４４ 撮像部
１５、２５、４５、６５ 操作部
１６、２６、４６、６６ 記憶部
１７、２７、４７、６７ 表示部
２４ カメラ接続インターフェース
４８、６８ ネットワーク制御部
１１１ 手領域検出部
１１２ 器官範囲特定部
１１３ 画像補正部
１２１ 一時記憶部
１４１ 画像取得部
２０１ 肌範囲の赤み
２０２ 爪範囲のスジ
２０３ 肌範囲
２０４ 爪範囲
【特許請求の範囲】
【請求項１】
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記画像補正処理手段は、前記部位領域が画像の全領域に占める割合が予め定めた割合以上となっている前記人体の部位に対して前記補正処理を行う、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記器官情報は、前記画像処理装置に備えられた記憶手段に記憶された各器官の色又は形状又は凹凸パターンを含む情報と略一致する情報の有無を示す情報である、
ことを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記人体の部位は、人の手であり、前記器官は、肌又は爪を含む、
ことを特徴とする請求項１乃至３のいずれかに記載の画像処理装置。
【請求項５】
前記補正処理は、肌又は爪のスムージング処理又は色調補正処理又はコントラスト補正処理である、
ことを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記画像補正処理手段は、前記爪の範囲を補正する際に、マニキュアによる光沢状態及び色を含む爪画素情報から、前記爪画素情報に対応して予め定めた補正処理を行う、
ことを特徴とする請求項４又は５に記載の画像処理装置。
【請求項７】
被写体像を撮像して画像を取得する撮像手段と、請求項１乃至６の何れかに記載の画像処理装置を備える、
ことを特徴とする撮像装置。
【請求項８】
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする画像処理方法。
【請求項９】
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させるためのプログラム。
【請求項１】
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手段と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手段と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記画像補正処理手段は、前記部位領域が画像の全領域に占める割合が予め定めた割合以上となっている前記人体の部位に対して前記補正処理を行う、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記器官情報は、前記画像処理装置に備えられた記憶手段に記憶された各器官の色又は形状又は凹凸パターンを含む情報と略一致する情報の有無を示す情報である、
ことを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記人体の部位は、人の手であり、前記器官は、肌又は爪を含む、
ことを特徴とする請求項１乃至３のいずれかに記載の画像処理装置。
【請求項５】
前記補正処理は、肌又は爪のスムージング処理又は色調補正処理又はコントラスト補正処理である、
ことを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記画像補正処理手段は、前記爪の範囲を補正する際に、マニキュアによる光沢状態及び色を含む爪画素情報から、前記爪画素情報に対応して予め定めた補正処理を行う、
ことを特徴とする請求項４又は５に記載の画像処理装置。
【請求項７】
被写体像を撮像して画像を取得する撮像手段と、請求項１乃至６の何れかに記載の画像処理装置を備える、
ことを特徴とする撮像装置。
【請求項８】
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得ステップと、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定ステップと、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理ステップと、
を有することを特徴とする画像処理方法。
【請求項９】
コンピュータに、
画像から人体の部位の画像を検出し、前記人体の部位の領域情報を取得する部位領域情報取得手順と、
前記部位の領域情報が示す領域から、前記部位に含まれる器官の器官情報を抽出し、前記器官情報から前記器官が占める範囲を特定する器官範囲特定手順と、
前記器官が占める範囲の画像を、各々の器官に対して予め定めた補正処理を行う画像補正処理手順と、
を実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２０１２−１８１７８５（Ｐ２０１２−１８１７８５Ａ）
【公開日】平成２４年９月２０日（２０１２．９．２０）
【国際特許分類】
【出願番号】特願２０１１−４５８１４（Ｐ２０１１−４５８１４）
【出願日】平成２３年３月３日（２０１１．３．３）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
【公開日】平成２４年９月２０日（２０１２．９．２０）
【国際特許分類】
【出願日】平成２３年３月３日（２０１１．３．３）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
[ Back to top ]