画像処理装置、撮像装置、画像処理方法及びプログラム
【課題】人物画像の不要部分を消去した、より美しい人物画像を容易に取得することのできる画像処理装置等を提供する。
【解決手段】画像取得部１４１で取得された人物画像に対し、顔検出部１１１は、人物画像の中から人物の顔の位置、向きを特定し、特定した顔の位置、向きに基づいて人物の頭頂部及び側頭部を特定する。輪郭抽出部１１２は、人物画像の輪郭を抽出する。画像補正部１１３は、輪郭抽出部１１２が抽出した人物画像の輪郭のうち、顔検出部１１１が特定した頭頂部、側頭部周辺を探索し、輪郭から外側に飛び出している突出部（飛び出した髪の毛）の画素を特定する。画像補正部１１３は、特定した突出部の画素情報を周辺の背景色の画素情報に置き換えることにより、突出部を消去する。
【解決手段】画像取得部１４１で取得された人物画像に対し、顔検出部１１１は、人物画像の中から人物の顔の位置、向きを特定し、特定した顔の位置、向きに基づいて人物の頭頂部及び側頭部を特定する。輪郭抽出部１１２は、人物画像の輪郭を抽出する。画像補正部１１３は、輪郭抽出部１１２が抽出した人物画像の輪郭のうち、顔検出部１１１が特定した頭頂部、側頭部周辺を探索し、輪郭から外側に飛び出している突出部（飛び出した髪の毛）の画素を特定する。画像補正部１１３は、特定した突出部の画素情報を周辺の背景色の画素情報に置き換えることにより、突出部を消去する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
デジタルカメラ等で撮影した人物画像をより美しくするため、又は化粧や髪の毛のカラーリングのシミュレーションを行うために、撮影した画像を補正する機能を有する画像処理装置がある（例えば、特許文献１、２）。
【０００３】
特許文献１に記載の画像処理方法は、ユーザが画像の処理範囲、及び、色等の属性を指定し、その指定された処理範囲内の属性範囲に属する画素の領域を抽出し、その領域に合成用の画像を合成するものである。
【０００４】
また、特許文献２に記載の画像補正方法は、ユーザが画像の処理範囲、及び、頭髪色を指定し、その指定された処理範囲内の画素の色情報に基づいて、肌領域、及び頭髪領域をそれぞれ抽出し、それぞれの色情報を補正するものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−７８１５８号公報
【特許文献２】特開２００７−８７１２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
人物の画像は、人物の髪の毛がまとまっており、飛び出した髪の毛のような不要部分がない方がより美しく見えるが、飛び出した毛を消去するために特許文献１又は２に記載の技術を利用する場合には、細かい処理範囲の指定が必要となり、時間も手間もかかっていた。また、飛び出した髪の毛のような細かい領域の抽出は時間がかかり、正確に抽出するのも困難であった。
【０００７】
本発明は、上記実情に鑑みてなされたものであり、人物画像の不要部分を消去した、より美しい人物画像を容易に取得することのできる画像処理装置、撮像装置、画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１の観点に係る画像処理装置は、
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする。
【０００９】
また、本発明の第２の観点に係る撮像装置は、
被写体像を撮像して画像を取得する撮像手段と、第１の観点に係る画像処理装置を有することを特徴とする。
【００１０】
また、本発明の第３の観点に係る画像処理方法は、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする。
【００１１】
また、本発明の第４の観点に係るプログラムは、
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させることを特徴とする。
【発明の効果】
【００１２】
本発明に係る画像処理装置、撮像装置、画像処理方法、及びプログラムによれば、人物画像の不要部分を消去した、より美しい人物画像を容易に取得することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態１に係る撮像装置の内部構成を示すブロック図である。
【図２】本発明の実施形態１に係る撮像装置の機能を示す機能ブロック図である。
【図３】突出部消去処理手順を示すフローチャートである。
【図４】突出部消去処理を説明するための図である。
【図５】本発明の実施形態２に係る画像処理装置の内部構成を示すブロック図である。
【図６】本発明の実施形態３に係る画像処理システムの構成を示すブロック図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施形態１について図面を参照して詳細に説明する。
【００１５】
実施形態１に係る撮像装置１は、撮像部で人物を含む被写体像を撮像し、得られた人物画像に画像処理を施す装置であり、画像処理機能を有するデジタルカメラ等の撮像装置である。
【００１６】
撮像装置１は、図１に示すように、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、撮像部１４、操作部１５、記憶部１６、表示部１７を備える。
【００１７】
ＣＰＵ（Central Processing Unit）１１は、演算装置、制御装置等から構成され、ＲＯＭ１３又は記憶部１６に記憶されているプログラムを実行することにより、撮像装置１の各構成部の制御や、画像処理機能等の撮像装置１の有する機能を実現する。
【００１８】
ＲＡＭ（Random Access Memory）１２は、ワーク領域を有する内部メモリで、ＤＲＡＭ (Direct Random Access Memory) 、ＳＤＲＡＭ (Synchronous DRAM) 等から構成されている。ＲＡＭ１２は、撮像部１４が撮像した画像のデータや、記憶部１６に記憶されている画像データに画像処理を施すために、読み出した画像データを一時保存する。また、撮像装置１の有する機能を実現するために制御データの一時保存を行う。
【００１９】
ＲＯＭ（Read Only Memory）１３は、読み出し専用の半導体メモリであり、ＣＰＵ１１が実行するプログラム等を記憶する。
【００２０】
撮像部１４は、撮影レンズ、シャッタ・絞りなどの露出制御部、撮像素子、撮像素子の駆動及び読み出し回路等から構成され、撮影レンズによって形成された被写体像を撮像素子によって画像データに変換して出力する。
【００２１】
操作部１５は、レンズのズーム制御ボタン、シャッタボタン、方向キー・決定キー・ファンクションキー等の各種のキーボタンやダイヤル等から構成され、ユーザからの操作入力を受け付け、受け付けた操作入力に係る信号をＣＰＵ１１に送出する。操作部１５はユーザから、シャッタ操作、ズームレンズ操作、撮像条件や画像処理条件の入力操作等を受け付ける。
【００２２】
記憶部１６は、例えば、フラッシュメモリ等の読み書き可能な不揮発性の半導体メモリから構成され、原画像の画像データや、画像処理後の画像データ、及び、ＣＰＵが実行するプログラムや、そのプログラムが参照する条件データ等を記憶する。これらの記憶されたデータは操作部１５に入力するユーザの操作やＣＰＵ１１の制御により書き換え可能な構成となっている。
【００２３】
表示部１７は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro -Luminescence）ディスプレイ等の表示デバイスから構成され、画像、図形、文字、記号などの情報表示出力を行う。
表示部１７には、画像処理前の原画像や、画像処理後の画像や、画像処理機能の操作画面などを表示する。
【００２４】
以上のように構成された撮像装置１の動作を説明する。
【００２５】
ユーザがシャッタボタンを押すと、撮影レンズによって形成されている被写体像が撮像素子によって画像データに変換され撮像部１４より出力される。
撮像部１４より出力された画像データはＲＡＭ１２に一時保存される。
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
【００２６】
その画像処理の１つが突出部消去処理である。
突出部消去処理について、図２乃至４を用いて説明する。
【００２７】
撮像装置１は、図２に示すように、ＣＰＵ１１から構成される顔検出部１１１、輪郭抽出部１１２、画像補正部１１３と、撮像部１４から構成される画像取得部１４１と、ＲＡＭ１２から構成される一時記憶部１２１を含み、これらの各機能部により、突出部消去処理機能を実現している。
【００２８】
突出部消去処理の手順を図３のフローチャートに従って説明する。
画像取得部１４１で取得された画像は一時記憶部１２１に一時記憶される。一時記憶された画像に対し、まず、ＣＰＵ１１は人物画像を探索する。
探索の結果、人物画像が検出された場合に、図３に示す突出部消去処理が開始される。
【００２９】
まず、顔検出部１１１が、人物画像の中から人物の顔の位置、向きを特定する（Ｓ１０１）。具体的には記憶部１６に予め記憶されている人物の顔の目、鼻、口等のパーツに関する特徴データを参照して、一時記憶部１２１に記憶されている人物画像の中の人物の目、鼻、口等のパーツの位置、大きさを検出する。検出された目、鼻、口等のパーツの相対位置、相対的な大きさ等から、顔の位置、向きを特定する。
【００３０】
人物の顔の位置、向きを特定した結果、特定された位置にある顔画像の一例を図４（ａ）に示す。この例の顔画像は図４（ａ）に示すように正面を向いている。
【００３１】
また、顔検出部１１１は、特定した顔の位置、向きから、人物の頭頂部及び側頭部を特定する（Ｓ１０２）。これは、人の髪の毛は、頭頂部や側頭部周辺から飛び出していることが多いことを利用するものである。
【００３２】
次に、輪郭抽出部１１２は、一時記憶部１２１に記憶されている人物画像の輪郭を抽出する（Ｓ１０３）。具体的には、画像中で明るさや色が急に変化する箇所を探索することで、人物画像の輪郭を抽出する。顔画像の周辺はまとまった髪の毛があることから、黒や茶色から、急に背景色に変化する箇所を探索することで、人物画像の輪郭を抽出する。輪郭を抽出した画像が図４（ｂ）である。
【００３３】
次に、画像補正部１１３は、輪郭抽出部１１２が抽出した人物画像の輪郭のうち、顔検出部１１１が特定した頭頂部、側頭部周辺を探索し、輪郭から外側に飛び出している突出部の画素を特定する。つまり、図４（ｃ）に示す点線で囲まれた箇所を探索し、まとまった髪の毛の輪郭から外側に飛び出している髪の毛がある画素を特定する（Ｓ１０４）。
【００３４】
画像補正部１１３は、Ｓ１０４で特定した突出部（飛び出した髪の毛）の画素情報を周辺の背景色の画素情報に置き換えることにより、突出部を消去する（Ｓ１０５）。ここで、置き換える背景色の画素情報は、まとまった髪の毛のある領域の画素情報（ここでは黒や茶色の画素）は使用しない。
【００３５】
このようにして突出部を消去することで、図４（ｄ）に示すように、飛び出した髪の毛のない、髪の毛がまとまっている人物画像を取得することができる。
【００３６】
以上説明した突出部消去処理及びその他の画像処理を施して取得した処理画像は、一時記憶部１２１を構成するＲＡＭ１２より出力され、記憶部１６に保存される。
ここで、記憶部１６には画像処理を施す前の原画像も一緒に保存しても良い。
【００３７】
また、ＲＡＭ１２より出力した処理画像は、表示部１７に出力される。ユーザは、表示部１７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部１６に原画像又は処理画像を保存するようにしてもよい。
【００３８】
以上説明したように、本実施形態においては、撮像部１４が撮像した画像に対し、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去することとした。これにより、飛び出した髪の毛のない髪の毛のまとまったより美しい人物画像を取得することができる。
【００３９】
以下、本発明の実施形態２について図５を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００４０】
実施形態２に係る画像処理装置２は、外部のデジタルカメラ等で撮像した人物画像を取り込み、その画像に画像処理を施す装置であり、画像処理機能を有する画像処理専用端末、又は、画像処理機能を有するＰＣ（Personal Computer）等の情報処理端末である。
【００４１】
画像処理装置２は、図５に示すように、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、カメラ接続インターフェース２４、操作部２５、記憶部２６、表示部２７を備える。
【００４２】
カメラ接続インターフェース２４に外部のデジタルカメラが接続されると、ＣＰＵ２１が外部のデジタルカメラを認識し、カメラ接続インターフェース２４のデータ送受信機能を起動する。またＣＰＵ２１は画像取得アプリケーションを起動し、表示部２７にそのアプリケーションの操作画面を表示する。
【００４３】
ユーザは、その操作画面に従い、操作部２５に操作入力して、デジタルカメラから画像処理装置２に取り込む画像を選択する。選択された画像の画像データはカメラ接続インターフェースを介して画像処理装置２に取り込まれ、ＲＡＭ２２に一時保存される。
【００４４】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして突出部消去処理があるが、突出部消去処理の内容は実施形態１と同じである。
【００４５】
突出部消去処理を含む画像処理を施して取得した処理画像は、ＲＡＭ２２より出力され、記憶部２６に保存される。
ここで、記憶部２６には画像処理を施す前の原画像も一緒に保存しても良い。
【００４６】
また、ＲＡＭ２２より出力した処理画像は、表示部２７に出力される。ユーザは、表示部２７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部２６に原画像又は処理画像を保存するようにしてもよい。
【００４７】
以上説明したように、本実施形態においては、外部のデジタルカメラ等で撮像した画像を画像処理装置に取り込み、取り込んだ画像に対して人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、撮像装置を接続した画像処理装置で突出部消去処理を行うことができ、飛び出した髪の毛のない髪の毛のまとまったより美しい人物画像を取得することができる。
【００４８】
以下、本発明の実施形態３について図６を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００４９】
実施形態３に係る画像処理システム３は、ネットワーク接続機能を有する撮像装置４が撮像した画像を、ネットワーク５経由で画像処理機能を有する画像処理サーバ６に送信し、画像処理サーバ６がその画像に画像処理を施す画像処理システムである。
【００５０】
撮像装置４は、図６に示すように、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、撮像部４４、操作部４５、記憶部４６、表示部４７、ネットワーク制御部４８を備える。
【００５１】
また、画像処理サーバ６は、図６に示すように、ＣＰＵ６１、ＲＡＭ６２、ＲＯＭ６３、操作部６５、記憶部６６、表示部６７、ネットワーク制御部６８を備える。
【００５２】
撮像装置４の撮像部４４が人物を含む被写体像を撮像すると、取得された画像データがＲＡＭ４１又は記憶部４６に保存される。ＣＰＵ４１は、保存されている画像データのうち、画像処理サーバに送信する画像をユーザの操作、又は事前設定に従って選択する。そして、ネットワーク制御部４８が、選択された画像データを画像処理サーバに送信する。
【００５３】
送信された画像データは、ネットワーク５を経由して、画像処理サーバ６のネットワーク制御部６８で受信される。
受信された画像データは、画像処理サーバ６のＲＡＭ６２に一時保存される。
【００５４】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして突出部消去処理があるが、突出部消去処理の内容は実施形態１と同じである。
【００５５】
突出部消去処理を含む画像処理を施して取得した処理画像は、ＲＡＭ６２より出力され、記憶部６６に保存される。
ここで、記憶部６６には画像処理を施す前の原画像も一緒に保存しても良い。
【００５６】
また、ＲＡＭ６２より出力した処理画像は、ネットワーク制御部６８から送信される。送信された処理画像のデータは、ネットワーク５を経由して撮像装置４のネットワーク制御部で受信され、ＲＡＭ４２に一時保存され、表示部４７で表示される。ユーザは、表示部４７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合、記憶部４６に原画像又は処理画像を保存する。
【００５７】
以上説明したように、本実施形態においては、撮像装置で撮像した画像を画像処理サーバにネットワークを経由して送信し、画像処理サーバが受信した画像データに対して、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去する画像処理を施し、画像処理を施した処理画像を撮像装置にネットワークを経由して送信し、撮像装置で受信した処理画像を表示、保存することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、ネットワークを経由した画像処理サーバで突出部消去処理を行うことができ、飛び出した髪の毛のない髪の毛のまとまった、より美しい人物画像を取得することができる。
【００５８】
このように本発明は、人物を含む被写体像を撮像した原画像の画像データに対して、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去する画像処理を施して、処理画像を取得、保存することとした。これにより、消去箇所の手動指定を要することなく飛び出した髪の毛を消去し、髪の毛のまとまった、より美しい人物画像を取得することができる。
【００５９】
なお、本発明は、上記実施の形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。
【００６０】
例えば、上記実施形態において、突出部は、まとまった髪の毛から飛び出した数本の髪の毛としたが、顔検出の代わりに人体検出を行い、人体の衣服部分を特定し、衣服部分の輪郭から飛び出した繊維を特定して消去する構成としても良い。
【００６１】
また、撮像した画像や受信した画像をＲＡＭに一時保存し、それに対して画像処理を施し、処理画像を記憶部に保存することとしたが、撮像した画像や受信した画像を記憶部に保存し、ユーザの選択操作に従い、記憶部から画像を読み出して、その画像に対して画像処理を施す構成としても良い。
【００６２】
また、実施形態３において、ネットワーク５を経由して画像データを送受信するとしたが、近距離無線通信など、他の通信手段を用いて、撮像装置と画像処理サーバとの間の画像データの送受信を行っても良い。
【００６３】
また、上記実施形態のＣＰＵが実行した画像処理のプログラムを、既存の情報端末に適用することで、当該情報端末を本発明に係る画像処理装置又は画像処理サーバとして機能させることも可能である。
【００６４】
このようなプログラムの配布方法は任意であり、例えば、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto Optical Disk）、メモリカード等のコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、携帯電話網やインターネット等の通信ネットワークを介して配布してもよい。
【００６５】
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【００６６】
（付記１）
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする画像処理装置。
【００６７】
（付記２）
前記突出物は髪の毛を含み、
前記突出物特定手段は、人体の頭部の輪郭から外周に突出している髪の毛を特定する、
ことを特徴とする付記１に記載の画像処理装置。
【００６８】
（付記３）
前記人体情報取得手段は、画像から人物の顔を抽出し、顔の位置及び向きを含む人体情報を取得し、
前記突出物特定手段は、前記人体情報に基づいて前記頭部の頂部又は側部を判別し、まとまった髪の毛があるエリアを特定し、当該エリアの輪郭から外周に突出した髪の毛を特定する、
ことを特徴とする付記２に記載の画像処理装置。
【００６９】
（付記４）
前記突出物消去手段で置き換える周辺の画素情報は、前記まとまった髪の毛があるエリアを除く他のエリアの画素情報である、
ことを特徴とする付記３に記載の画素処理装置。
【００７０】
（付記５）
前記人体情報取得手段は、画像から人物が身につけている衣服を検出し、衣服の位置を含む人体情報を取得し、
前記突出物特定手段は、人体が身につけている衣服の輪郭から外周に突出している繊維を特定する、
ことを特徴とする付記１に記載の画像処理装置。
【００７１】
（付記６）
被写体像を撮像して画像を取得する撮像手段と、付記１乃至５の何れかに記載の画像処理装置を有することを特徴とする撮像装置。
【００７２】
（付記７）
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする画像処理方法。
【００７３】
（付記８）
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させるためのプログラム。
【符号の説明】
【００７４】
１ 撮像装置
２ 画像処理装置
３ 画像処理システム
４ 撮像装置
５ ネットワーク
６ 画像処理サーバ
１１、２１、４１、６１ ＣＰＵ
１２、２２、４２、６２ ＲＡＭ
１３、２３、４３、６３ ＲＯＭ
１４、４４ 撮像部
１５、２５、４５、６５ 操作部
１６、２６、４６、６６ 記憶部
１７、２７、４７、６７ 表示部
２４ カメラ接続インターフェース
４８、６８ ネットワーク制御部
１１１ 顔検出部
１１２ 輪郭抽出部
１１３ 画像補正部
１４１ 画像取得部
１２１ 一時記憶部
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
デジタルカメラ等で撮影した人物画像をより美しくするため、又は化粧や髪の毛のカラーリングのシミュレーションを行うために、撮影した画像を補正する機能を有する画像処理装置がある（例えば、特許文献１、２）。
【０００３】
特許文献１に記載の画像処理方法は、ユーザが画像の処理範囲、及び、色等の属性を指定し、その指定された処理範囲内の属性範囲に属する画素の領域を抽出し、その領域に合成用の画像を合成するものである。
【０００４】
また、特許文献２に記載の画像補正方法は、ユーザが画像の処理範囲、及び、頭髪色を指定し、その指定された処理範囲内の画素の色情報に基づいて、肌領域、及び頭髪領域をそれぞれ抽出し、それぞれの色情報を補正するものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−７８１５８号公報
【特許文献２】特開２００７−８７１２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
人物の画像は、人物の髪の毛がまとまっており、飛び出した髪の毛のような不要部分がない方がより美しく見えるが、飛び出した毛を消去するために特許文献１又は２に記載の技術を利用する場合には、細かい処理範囲の指定が必要となり、時間も手間もかかっていた。また、飛び出した髪の毛のような細かい領域の抽出は時間がかかり、正確に抽出するのも困難であった。
【０００７】
本発明は、上記実情に鑑みてなされたものであり、人物画像の不要部分を消去した、より美しい人物画像を容易に取得することのできる画像処理装置、撮像装置、画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１の観点に係る画像処理装置は、
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする。
【０００９】
また、本発明の第２の観点に係る撮像装置は、
被写体像を撮像して画像を取得する撮像手段と、第１の観点に係る画像処理装置を有することを特徴とする。
【００１０】
また、本発明の第３の観点に係る画像処理方法は、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする。
【００１１】
また、本発明の第４の観点に係るプログラムは、
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させることを特徴とする。
【発明の効果】
【００１２】
本発明に係る画像処理装置、撮像装置、画像処理方法、及びプログラムによれば、人物画像の不要部分を消去した、より美しい人物画像を容易に取得することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態１に係る撮像装置の内部構成を示すブロック図である。
【図２】本発明の実施形態１に係る撮像装置の機能を示す機能ブロック図である。
【図３】突出部消去処理手順を示すフローチャートである。
【図４】突出部消去処理を説明するための図である。
【図５】本発明の実施形態２に係る画像処理装置の内部構成を示すブロック図である。
【図６】本発明の実施形態３に係る画像処理システムの構成を示すブロック図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施形態１について図面を参照して詳細に説明する。
【００１５】
実施形態１に係る撮像装置１は、撮像部で人物を含む被写体像を撮像し、得られた人物画像に画像処理を施す装置であり、画像処理機能を有するデジタルカメラ等の撮像装置である。
【００１６】
撮像装置１は、図１に示すように、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、撮像部１４、操作部１５、記憶部１６、表示部１７を備える。
【００１７】
ＣＰＵ（Central Processing Unit）１１は、演算装置、制御装置等から構成され、ＲＯＭ１３又は記憶部１６に記憶されているプログラムを実行することにより、撮像装置１の各構成部の制御や、画像処理機能等の撮像装置１の有する機能を実現する。
【００１８】
ＲＡＭ（Random Access Memory）１２は、ワーク領域を有する内部メモリで、ＤＲＡＭ (Direct Random Access Memory) 、ＳＤＲＡＭ (Synchronous DRAM) 等から構成されている。ＲＡＭ１２は、撮像部１４が撮像した画像のデータや、記憶部１６に記憶されている画像データに画像処理を施すために、読み出した画像データを一時保存する。また、撮像装置１の有する機能を実現するために制御データの一時保存を行う。
【００１９】
ＲＯＭ（Read Only Memory）１３は、読み出し専用の半導体メモリであり、ＣＰＵ１１が実行するプログラム等を記憶する。
【００２０】
撮像部１４は、撮影レンズ、シャッタ・絞りなどの露出制御部、撮像素子、撮像素子の駆動及び読み出し回路等から構成され、撮影レンズによって形成された被写体像を撮像素子によって画像データに変換して出力する。
【００２１】
操作部１５は、レンズのズーム制御ボタン、シャッタボタン、方向キー・決定キー・ファンクションキー等の各種のキーボタンやダイヤル等から構成され、ユーザからの操作入力を受け付け、受け付けた操作入力に係る信号をＣＰＵ１１に送出する。操作部１５はユーザから、シャッタ操作、ズームレンズ操作、撮像条件や画像処理条件の入力操作等を受け付ける。
【００２２】
記憶部１６は、例えば、フラッシュメモリ等の読み書き可能な不揮発性の半導体メモリから構成され、原画像の画像データや、画像処理後の画像データ、及び、ＣＰＵが実行するプログラムや、そのプログラムが参照する条件データ等を記憶する。これらの記憶されたデータは操作部１５に入力するユーザの操作やＣＰＵ１１の制御により書き換え可能な構成となっている。
【００２３】
表示部１７は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro -Luminescence）ディスプレイ等の表示デバイスから構成され、画像、図形、文字、記号などの情報表示出力を行う。
表示部１７には、画像処理前の原画像や、画像処理後の画像や、画像処理機能の操作画面などを表示する。
【００２４】
以上のように構成された撮像装置１の動作を説明する。
【００２５】
ユーザがシャッタボタンを押すと、撮影レンズによって形成されている被写体像が撮像素子によって画像データに変換され撮像部１４より出力される。
撮像部１４より出力された画像データはＲＡＭ１２に一時保存される。
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
【００２６】
その画像処理の１つが突出部消去処理である。
突出部消去処理について、図２乃至４を用いて説明する。
【００２７】
撮像装置１は、図２に示すように、ＣＰＵ１１から構成される顔検出部１１１、輪郭抽出部１１２、画像補正部１１３と、撮像部１４から構成される画像取得部１４１と、ＲＡＭ１２から構成される一時記憶部１２１を含み、これらの各機能部により、突出部消去処理機能を実現している。
【００２８】
突出部消去処理の手順を図３のフローチャートに従って説明する。
画像取得部１４１で取得された画像は一時記憶部１２１に一時記憶される。一時記憶された画像に対し、まず、ＣＰＵ１１は人物画像を探索する。
探索の結果、人物画像が検出された場合に、図３に示す突出部消去処理が開始される。
【００２９】
まず、顔検出部１１１が、人物画像の中から人物の顔の位置、向きを特定する（Ｓ１０１）。具体的には記憶部１６に予め記憶されている人物の顔の目、鼻、口等のパーツに関する特徴データを参照して、一時記憶部１２１に記憶されている人物画像の中の人物の目、鼻、口等のパーツの位置、大きさを検出する。検出された目、鼻、口等のパーツの相対位置、相対的な大きさ等から、顔の位置、向きを特定する。
【００３０】
人物の顔の位置、向きを特定した結果、特定された位置にある顔画像の一例を図４（ａ）に示す。この例の顔画像は図４（ａ）に示すように正面を向いている。
【００３１】
また、顔検出部１１１は、特定した顔の位置、向きから、人物の頭頂部及び側頭部を特定する（Ｓ１０２）。これは、人の髪の毛は、頭頂部や側頭部周辺から飛び出していることが多いことを利用するものである。
【００３２】
次に、輪郭抽出部１１２は、一時記憶部１２１に記憶されている人物画像の輪郭を抽出する（Ｓ１０３）。具体的には、画像中で明るさや色が急に変化する箇所を探索することで、人物画像の輪郭を抽出する。顔画像の周辺はまとまった髪の毛があることから、黒や茶色から、急に背景色に変化する箇所を探索することで、人物画像の輪郭を抽出する。輪郭を抽出した画像が図４（ｂ）である。
【００３３】
次に、画像補正部１１３は、輪郭抽出部１１２が抽出した人物画像の輪郭のうち、顔検出部１１１が特定した頭頂部、側頭部周辺を探索し、輪郭から外側に飛び出している突出部の画素を特定する。つまり、図４（ｃ）に示す点線で囲まれた箇所を探索し、まとまった髪の毛の輪郭から外側に飛び出している髪の毛がある画素を特定する（Ｓ１０４）。
【００３４】
画像補正部１１３は、Ｓ１０４で特定した突出部（飛び出した髪の毛）の画素情報を周辺の背景色の画素情報に置き換えることにより、突出部を消去する（Ｓ１０５）。ここで、置き換える背景色の画素情報は、まとまった髪の毛のある領域の画素情報（ここでは黒や茶色の画素）は使用しない。
【００３５】
このようにして突出部を消去することで、図４（ｄ）に示すように、飛び出した髪の毛のない、髪の毛がまとまっている人物画像を取得することができる。
【００３６】
以上説明した突出部消去処理及びその他の画像処理を施して取得した処理画像は、一時記憶部１２１を構成するＲＡＭ１２より出力され、記憶部１６に保存される。
ここで、記憶部１６には画像処理を施す前の原画像も一緒に保存しても良い。
【００３７】
また、ＲＡＭ１２より出力した処理画像は、表示部１７に出力される。ユーザは、表示部１７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部１６に原画像又は処理画像を保存するようにしてもよい。
【００３８】
以上説明したように、本実施形態においては、撮像部１４が撮像した画像に対し、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去することとした。これにより、飛び出した髪の毛のない髪の毛のまとまったより美しい人物画像を取得することができる。
【００３９】
以下、本発明の実施形態２について図５を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００４０】
実施形態２に係る画像処理装置２は、外部のデジタルカメラ等で撮像した人物画像を取り込み、その画像に画像処理を施す装置であり、画像処理機能を有する画像処理専用端末、又は、画像処理機能を有するＰＣ（Personal Computer）等の情報処理端末である。
【００４１】
画像処理装置２は、図５に示すように、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、カメラ接続インターフェース２４、操作部２５、記憶部２６、表示部２７を備える。
【００４２】
カメラ接続インターフェース２４に外部のデジタルカメラが接続されると、ＣＰＵ２１が外部のデジタルカメラを認識し、カメラ接続インターフェース２４のデータ送受信機能を起動する。またＣＰＵ２１は画像取得アプリケーションを起動し、表示部２７にそのアプリケーションの操作画面を表示する。
【００４３】
ユーザは、その操作画面に従い、操作部２５に操作入力して、デジタルカメラから画像処理装置２に取り込む画像を選択する。選択された画像の画像データはカメラ接続インターフェースを介して画像処理装置２に取り込まれ、ＲＡＭ２２に一時保存される。
【００４４】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして突出部消去処理があるが、突出部消去処理の内容は実施形態１と同じである。
【００４５】
突出部消去処理を含む画像処理を施して取得した処理画像は、ＲＡＭ２２より出力され、記憶部２６に保存される。
ここで、記憶部２６には画像処理を施す前の原画像も一緒に保存しても良い。
【００４６】
また、ＲＡＭ２２より出力した処理画像は、表示部２７に出力される。ユーザは、表示部２７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合のみ、記憶部２６に原画像又は処理画像を保存するようにしてもよい。
【００４７】
以上説明したように、本実施形態においては、外部のデジタルカメラ等で撮像した画像を画像処理装置に取り込み、取り込んだ画像に対して人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、撮像装置を接続した画像処理装置で突出部消去処理を行うことができ、飛び出した髪の毛のない髪の毛のまとまったより美しい人物画像を取得することができる。
【００４８】
以下、本発明の実施形態３について図６を参照して詳細に説明する。実施形態１と同一の機能を有する構成部については同じ名称を付し、説明を省略する。
【００４９】
実施形態３に係る画像処理システム３は、ネットワーク接続機能を有する撮像装置４が撮像した画像を、ネットワーク５経由で画像処理機能を有する画像処理サーバ６に送信し、画像処理サーバ６がその画像に画像処理を施す画像処理システムである。
【００５０】
撮像装置４は、図６に示すように、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、撮像部４４、操作部４５、記憶部４６、表示部４７、ネットワーク制御部４８を備える。
【００５１】
また、画像処理サーバ６は、図６に示すように、ＣＰＵ６１、ＲＡＭ６２、ＲＯＭ６３、操作部６５、記憶部６６、表示部６７、ネットワーク制御部６８を備える。
【００５２】
撮像装置４の撮像部４４が人物を含む被写体像を撮像すると、取得された画像データがＲＡＭ４１又は記憶部４６に保存される。ＣＰＵ４１は、保存されている画像データのうち、画像処理サーバに送信する画像をユーザの操作、又は事前設定に従って選択する。そして、ネットワーク制御部４８が、選択された画像データを画像処理サーバに送信する。
【００５３】
送信された画像データは、ネットワーク５を経由して、画像処理サーバ６のネットワーク制御部６８で受信される。
受信された画像データは、画像処理サーバ６のＲＡＭ６２に一時保存される。
【００５４】
一時保存された画像データに対して、事前にユーザが設定した画像処理条件に従って各種画像処理が施される。
その画像処理の１つとして突出部消去処理があるが、突出部消去処理の内容は実施形態１と同じである。
【００５５】
突出部消去処理を含む画像処理を施して取得した処理画像は、ＲＡＭ６２より出力され、記憶部６６に保存される。
ここで、記憶部６６には画像処理を施す前の原画像も一緒に保存しても良い。
【００５６】
また、ＲＡＭ６２より出力した処理画像は、ネットワーク制御部６８から送信される。送信された処理画像のデータは、ネットワーク５を経由して撮像装置４のネットワーク制御部で受信され、ＲＡＭ４２に一時保存され、表示部４７で表示される。ユーザは、表示部４７に表示された画像を視認することができる。ここで、ユーザに原画像又は処理画像を保存するか否かの判断を促し、ユーザが保存すると選択した場合、記憶部４６に原画像又は処理画像を保存する。
【００５７】
以上説明したように、本実施形態においては、撮像装置で撮像した画像を画像処理サーバにネットワークを経由して送信し、画像処理サーバが受信した画像データに対して、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去する画像処理を施し、画像処理を施した処理画像を撮像装置にネットワークを経由して送信し、撮像装置で受信した処理画像を表示、保存することとした。これにより、画像処理機能を有さない撮像装置で撮像した画像であっても、ネットワークを経由した画像処理サーバで突出部消去処理を行うことができ、飛び出した髪の毛のない髪の毛のまとまった、より美しい人物画像を取得することができる。
【００５８】
このように本発明は、人物を含む被写体像を撮像した原画像の画像データに対して、人物画像の検出、顔の位置、向きの検出、輪郭抽出を行って得られた情報に基づいて、人物の頭部の輪郭から飛び出した突出部を消去する画像処理を施して、処理画像を取得、保存することとした。これにより、消去箇所の手動指定を要することなく飛び出した髪の毛を消去し、髪の毛のまとまった、より美しい人物画像を取得することができる。
【００５９】
なお、本発明は、上記実施の形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。
【００６０】
例えば、上記実施形態において、突出部は、まとまった髪の毛から飛び出した数本の髪の毛としたが、顔検出の代わりに人体検出を行い、人体の衣服部分を特定し、衣服部分の輪郭から飛び出した繊維を特定して消去する構成としても良い。
【００６１】
また、撮像した画像や受信した画像をＲＡＭに一時保存し、それに対して画像処理を施し、処理画像を記憶部に保存することとしたが、撮像した画像や受信した画像を記憶部に保存し、ユーザの選択操作に従い、記憶部から画像を読み出して、その画像に対して画像処理を施す構成としても良い。
【００６２】
また、実施形態３において、ネットワーク５を経由して画像データを送受信するとしたが、近距離無線通信など、他の通信手段を用いて、撮像装置と画像処理サーバとの間の画像データの送受信を行っても良い。
【００６３】
また、上記実施形態のＣＰＵが実行した画像処理のプログラムを、既存の情報端末に適用することで、当該情報端末を本発明に係る画像処理装置又は画像処理サーバとして機能させることも可能である。
【００６４】
このようなプログラムの配布方法は任意であり、例えば、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto Optical Disk）、メモリカード等のコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、携帯電話網やインターネット等の通信ネットワークを介して配布してもよい。
【００６５】
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【００６６】
（付記１）
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする画像処理装置。
【００６７】
（付記２）
前記突出物は髪の毛を含み、
前記突出物特定手段は、人体の頭部の輪郭から外周に突出している髪の毛を特定する、
ことを特徴とする付記１に記載の画像処理装置。
【００６８】
（付記３）
前記人体情報取得手段は、画像から人物の顔を抽出し、顔の位置及び向きを含む人体情報を取得し、
前記突出物特定手段は、前記人体情報に基づいて前記頭部の頂部又は側部を判別し、まとまった髪の毛があるエリアを特定し、当該エリアの輪郭から外周に突出した髪の毛を特定する、
ことを特徴とする付記２に記載の画像処理装置。
【００６９】
（付記４）
前記突出物消去手段で置き換える周辺の画素情報は、前記まとまった髪の毛があるエリアを除く他のエリアの画素情報である、
ことを特徴とする付記３に記載の画素処理装置。
【００７０】
（付記５）
前記人体情報取得手段は、画像から人物が身につけている衣服を検出し、衣服の位置を含む人体情報を取得し、
前記突出物特定手段は、人体が身につけている衣服の輪郭から外周に突出している繊維を特定する、
ことを特徴とする付記１に記載の画像処理装置。
【００７１】
（付記６）
被写体像を撮像して画像を取得する撮像手段と、付記１乃至５の何れかに記載の画像処理装置を有することを特徴とする撮像装置。
【００７２】
（付記７）
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする画像処理方法。
【００７３】
（付記８）
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させるためのプログラム。
【符号の説明】
【００７４】
１ 撮像装置
２ 画像処理装置
３ 画像処理システム
４ 撮像装置
５ ネットワーク
６ 画像処理サーバ
１１、２１、４１、６１ ＣＰＵ
１２、２２、４２、６２ ＲＡＭ
１３、２３、４３、６３ ＲＯＭ
１４、４４ 撮像部
１５、２５、４５、６５ 操作部
１６、２６、４６、６６ 記憶部
１７、２７、４７、６７ 表示部
２４ カメラ接続インターフェース
４８、６８ ネットワーク制御部
１１１ 顔検出部
１１２ 輪郭抽出部
１１３ 画像補正部
１４１ 画像取得部
１２１ 一時記憶部
【特許請求の範囲】
【請求項１】
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記突出物は髪の毛を含み、
前記突出物特定手段は、人体の頭部の輪郭から外周に突出している髪の毛を特定する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記人体情報取得手段は、画像から人物の顔を抽出し、顔の位置及び向きを含む人体情報を取得し、
前記突出物特定手段は、前記人体情報に基づいて前記頭部の頂部又は側部を判別し、まとまった髪の毛があるエリアを特定し、当該エリアの輪郭から外周に突出した髪の毛を特定する、
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記突出物消去手段で置き換える周辺の画素情報は、前記まとまった髪の毛があるエリアを除く他のエリアの画素情報である、
ことを特徴とする請求項３に記載の画素処理装置。
【請求項５】
前記人体情報取得手段は、画像から人物が身につけている衣服を検出し、衣服の位置を含む人体情報を取得し、
前記突出物特定手段は、人体が身につけている衣服の輪郭から外周に突出している繊維を特定する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
被写体像を撮像して画像を取得する撮像手段と、請求項１乃至５の何れかに記載の画像処理装置を有することを特徴とする撮像装置。
【請求項７】
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする画像処理方法。
【請求項８】
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させるためのプログラム。
【請求項１】
画像から人物画像を検出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手段と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手段と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手段と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記突出物は髪の毛を含み、
前記突出物特定手段は、人体の頭部の輪郭から外周に突出している髪の毛を特定する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記人体情報取得手段は、画像から人物の顔を抽出し、顔の位置及び向きを含む人体情報を取得し、
前記突出物特定手段は、前記人体情報に基づいて前記頭部の頂部又は側部を判別し、まとまった髪の毛があるエリアを特定し、当該エリアの輪郭から外周に突出した髪の毛を特定する、
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記突出物消去手段で置き換える周辺の画素情報は、前記まとまった髪の毛があるエリアを除く他のエリアの画素情報である、
ことを特徴とする請求項３に記載の画素処理装置。
【請求項５】
前記人体情報取得手段は、画像から人物が身につけている衣服を検出し、衣服の位置を含む人体情報を取得し、
前記突出物特定手段は、人体が身につけている衣服の輪郭から外周に突出している繊維を特定する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
被写体像を撮像して画像を取得する撮像手段と、請求項１乃至５の何れかに記載の画像処理装置を有することを特徴とする撮像装置。
【請求項７】
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得ステップと、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得ステップと、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定ステップと、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去ステップと、
を有することを特徴とする画像処理方法。
【請求項８】
コンピュータに、
画像から人物画像を抽出し、人体の部位の位置及び向きを含む人体情報を取得する人体情報取得手順と、
画像から輪郭を抽出し、前記輪郭の位置を含む輪郭情報を取得する輪郭情報取得手順と、
取得した前記人体情報と前記輪郭情報に基づいて、人体の輪郭から人体の外周に突出している突出物の位置を特定する突出物特定手順と、
前記突出物の画素情報をその周辺の画素情報に置き換えて前記突出物を消去する突出物消去手順と、
を実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２０１２−１７４０７６（Ｐ２０１２−１７４０７６Ａ）
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願番号】特願２０１１−３６６１６（Ｐ２０１１−３６６１６）
【出願日】平成２３年２月２３日（２０１１．２．２３）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願日】平成２３年２月２３日（２０１１．２．２３）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
[ Back to top ]