画像処理装置および画像処理方法
【課題】人物の影が写るリアリティのある合成画像を作成することができるようにする。
【解決手段】写真シール機は、撮影画像に基づいて、人物の部分を１００％の透過率で透過させるとともに、撮影時に背景カーテンに投影された人物の影の部分を所定の透過率で透過させるマスク画像を生成する。写真シール機は、生成したマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出された人物の部分と影の部分を背景画像に合成することによって合成画像を生成する。本発明は写真シール機に適用することができる。
【解決手段】写真シール機は、撮影画像に基づいて、人物の部分を１００％の透過率で透過させるとともに、撮影時に背景カーテンに投影された人物の影の部分を所定の透過率で透過させるマスク画像を生成する。写真シール機は、生成したマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出された人物の部分と影の部分を背景画像に合成することによって合成画像を生成する。本発明は写真シール機に適用することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、特に、人物の影が写るリアリティのある合成画像を作成することができるようにした画像処理装置および画像処理方法に関する。
【背景技術】
【０００２】
利用者を撮影し、撮影画像に対して利用者に編集を行わせ、編集後の画像をシール紙に印刷して提供する写真シール機が知られている。このような写真シール機は娯楽（遊戯）施設等に設置される。
【０００３】
写真シール機によって提供される１ゲームの流れは、通常、撮影空間内にいる利用者を被写体として撮影し、利用者を編集空間に移動させ、編集空間内で行われる操作に従って画像を編集し、編集後の画像である編集画像をシール紙に印刷して排出するという流れになる。例えば撮影空間は、写真シール機の筐体自体やカーテンなどにより外部から仕切られている。
【０００４】
このような写真シール機の中には、撮影空間における撮影処理時に、カメラにより取り込んだ画像から利用者の領域を抽出し、抽出した領域と、合成用画像とをリアルタイムで合成して表示する機能が搭載されているものがある。これにより、利用者は、撮影空間には実際にない風景と自分たちが合成された合成画像を見たり、静止画として保存したりすることが可能になる。
【０００５】
カメラにより取り込んだ画像から利用者の領域を抽出するための処理として、通常、マスク画像を用いたクロマキ処理が行われる。
【０００６】
特許文献１には、被写体の輪郭の外側に向かうにつれて階調を変化させたマスクパターンを使用することによって、被写体と背景画像との境界部における色調を段階的に変化させる技術が開示されている。
【０００７】
特許文献２には、撮影画像と背景画像を合成する際、撮影画像を２値化することによって得られたマスク画像の輪郭をぼかし、背景画像の彩度と明度が反映するようにマスク画像の輪郭の色調を補正する技術が開示されている。
【０００８】
特許文献３には、２値化したマスク画像を縮小した画像（縮小マスク画像）と、マスク画像を拡大した画像（拡大マスク画像）を作成し、縮小マスク画像と拡大マスク画像の差分領域に光彩（グロー）効果やぼかし処理等の画像処理を施す技術が開示されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】実用新案登録第３０５８６６４号
【特許文献２】特開２０００−２２４４１０号公報
【特許文献３】特開２００６−０６０７１９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
上述した技術によれば、被写体の輪郭付近にぼかし処理等の画像処理を施すことによって背景画像と被写体が滑らかに合成された合成画像を得ることができるが、その合成画像は、利用者の背中側にある壁面に投影される利用者自身の影が消えてしまうことによってリアリティのない、不自然な仕上がりの画像になってしまう。
【００１１】
本発明はこのような状況に鑑みてなされたものであり、人物の影が写るリアリティのある合成画像を作成することができるようにするものである。
【課題を解決するための手段】
【００１２】
本発明の画像処理装置は、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させる第１のマスク画像を生成するマスク画像生成手段と、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する合成手段とを備える。
【００１３】
前記マスク画像生成手段には、前記撮影画像の各画素の色に基づいて、前記被写体の部分と、前記被写体の影の部分と、それ以外の部分とを検出し、前記第１のマスク画像を生成させることができる。
【００１４】
前記合成手段には、前記第１のマスク画像を用いて抽出した前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成して得られた合成画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、再度、前記背景画像に合成させることができる。
【００１５】
前記合成手段には、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成させることができる。
【００１６】
前記色背景画像は、前記背景画像の色と同じ色の物に投影する影の色の画像であるようにすることができる。
【００１７】
前記合成手段には、前記撮影画像の撮影モードに応じて明るさを変えた前記色背景画像を用いさせることができる。
【００１８】
前記マスク画像生成手段には、前記撮影画像に基づいて、前記被写体の部分を透過させるとともに前記被写体の輪郭の周りの一定の部分を所定の透過率で透過させる第２のマスク画像を生成させ、前記合成手段には、前記撮影画像から、前記被写体の部分と前記被写体の輪郭の周りの部分とを前記第２のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成させることができる。
【００１９】
前記合成手段には、前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成する前に、前記被写体の影の部分の色の調整を行わせることができる。
【００２０】
前記マスク画像生成手段には、前記第１のマスク画像を加工させ、前記合成手段には、加工された前記第１のマスク画像を用いて、前記被写体の部分と前記被写体の影の部分とを抽出させることができる。
【００２１】
前記マスク画像生成手段には、前記第１のマスク画像の加工として、前記第１のマスク画像のコントラストをトーンカーブに従って調整する処理と、前記第１のマスク画像の輪郭をぼかす処理とのうちの少なくともいずれかの処理を行わせることができる。
【００２２】
本発明の画像処理方法は、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像を生成し、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成するステップを含む。
【００２３】
本発明においては、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像が生成される。また、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出され、前記被写体の背景となる画像である背景画像に合成される。
【発明の効果】
【００２４】
本発明によれば、人物の影が写るリアリティのある合成画像を作成することができる。
【図面の簡単な説明】
【００２５】
【図１】画像処理部の構成例を示すブロック図である。
【図２】カメラによる撮影の様子を示す図である。
【図３】合成処理の第１の例を示す図である。
【図４】図３の撮影画像を拡大して示す図である。
【図５】図３のマスク画像を拡大して示す図である。
【図６】従来のマスク画像とマスク画像生成部により生成されるマスク画像を示す図である。
【図７】図３の合成画像を拡大して示す図である。
【図８】合成処理の第２の例を示す図である。
【図９】合成処理の第３の例を示す図である。
【図１０】合成処理の第５の例を示す図である。
【図１１】合成処理の第６の例を示す図である。
【図１２】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第１の例を示す図である。
【図１３】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第２の例を示す図である。
【図１４】マスク画像の加工の例を示す図である。
【図１５】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第３の例を示す図である。
【図１６】マスク画像の加工の例を示す図である。
【図１７】合成処理に用いるマスク画像の組み合わせの例について説明する図である。
【図１８】写真シール機の外観の構成例を示す斜視図である。
【図１９】カーテンを取り付けた状態の写真シール機の外観を示す斜視図である。
【図２０】写真シール機の外観を他の角度からみた斜視図である。
【図２１】利用者の移動について説明する図である。
【図２２】撮影部の構成例を示す図である。
【図２３】撮影部の色について説明する図である。
【図２４】背景部の構成例を示す図である。
【図２５】編集部の構成例を示す図である。
【図２６】事後接客部の構成例を示す図である。
【図２７】写真シール機の内部の構成例を示すブロック図である。
【図２８】写真シール作成ゲームを提供する処理について説明するフローチャートである。
【図２９】図２８のステップＳ２において行われる本撮影処理について説明するフローチャートである。
【図３０】撮影空間における画面表示の例を示す図である。
【図３１】撮影空間における画面表示の例を示す図である。
【図３２】図２８のステップＳ３において行われる被写体の画像処理について説明するフローチャートである。
【図３３】撮影空間における画面表示の例を示す図である。
【図３４】撮影空間における画面表示の例を示す図である。
【図３５】図２８のステップＳ５において行われる撮影画像の画像処理について説明するフローチャートである。
【図３６】編集空間における画面表示の例を示す図である。
【図３７】編集空間における画面表示の例を示す図である。
【図３８】写真シール機の他の外観の構成例を示す斜視図である。
【図３９】カーテンを取り付けた状態の図３８の写真シール機の外観を示す斜視図である。
【図４０】図３８の写真シール機の外観を他の角度からみた斜視図である。
【図４１】利用者の移動について説明する図である。
【図４２】編集部の正面の構成例を示す図である。
【図４３】編集部の側面の構成例を示す図である。
【図４４】事中接客部の構成例を示す図である。
【図４５】図３８の写真シール機の内部の構成例を示すブロック図である。
【図４６】写真シール作成ゲームを提供する処理について説明するフローチャートである。
【発明を実施するための形態】
【００２６】
以下、本発明を実施するための形態について説明する。説明は以下の順序で行う。
１．合成処理について
２．写真シール機の構成と動作について
【００２７】
＜合成処理について＞
［画像処理部の構成例］
図１は、画像処理部１００１の構成例を示すブロック図である。図１の画像処理部１００１が、後述する写真シール機１において実現される。
【００２８】
画像処理部１００１は、撮影画像取得部１０１１、マスク画像生成部１０１２、合成部１０１３、および背景画像取得部１０１４により構成される。
【００２９】
撮影画像取得部１０１１は、カメラにより撮影された画像である撮影画像を取得する。図２はカメラによる撮影の様子を示す図であり、図２に示すように、パネルやカーテンなどを背景として、その壁面の前に立っている人物を撮影して得られた撮影画像が撮影画像取得部１０１１により取得される。
【００３０】
図２の例においては２人の人物が撮影を行っている。撮影画像取得部１０１１により取得された画像には２人の人物が写り、２人の人物の背景の色は、２人の人物の後方にある背景カーテンの色と同じ色になる。背景カーテンは、例えば、緑色などの一色のカーテンである。このようにして撮影され、撮影画像取得部１０１１により取得された撮影画像はマスク画像生成部１０１２と合成部１０１３に供給される。
【００３１】
マスク画像生成部１０１２は、撮影画像取得部１０１１から供給された撮影画像に基づいてマスク画像を生成し、合成部１０１３に出力する。マスク画像生成部１０１２が生成するマスク画像は、人物の部分を１００％の透過率で透過させるとともに、撮影時に背景カーテンに投影された人物の影の部分を所定の透過率で透過させるマスク画像である。
【００３２】
合成部１０１３は、マスク画像生成部１０１２により生成されたマスク画像を用いて、撮影画像取得部１０１１から供給された撮影画像に写る人物の部分と影の部分とを抽出する。また、合成部１０１３は、撮影画像から抽出した人物の部分と影の部分を、背景画像取得部１０１４から供給された背景画像に合成することによって合成画像を生成する。
【００３３】
合成部１０１３による画像の合成は、撮影画像から抽出した部分を、背景画像取得部１０１４から供給された背景画像の上に重ねるようにして行われる。合成画像には、人物の影の部分も含まれることになる。
【００３４】
背景画像取得部１０１４は、白色などの所定の色の画像や、柄のある画像を取得し、背景画像として合成部１０１３に出力する。背景画像は、撮影画像のサイズ（画素数）と同じサイズの画像であり、予め用意されている。
【００３５】
人物の影の部分を所定の透過率で抽出できるマスク画像を用いて合成を行うことによって、人物の影の部分を合成画像に含ませることができ、背景画像を実際に背景にして撮影したような、リアリティのある、自然な仕上がりの合成画像を作成することが可能になる。
【００３６】
［合成処理の第１の例］
図３は、画像処理部１００１による合成処理の第１の例を示す図である。
【００３７】
図３に示すように、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分が撮影画像から抽出され、抽出された人物の部分と影の部分が背景画像に合成されることによって合成画像が生成される。各画像について説明する。
【００３８】
図４は、図３の撮影画像を拡大して示す図である。撮影画像には２人の人物が写り、人物の輪郭より外側であって、人物の輪郭の近くには、ところどころに、撮影時に背景カーテンに投影した人物の影が写っている。図４において影を付して示すように、２人の人物の間や、それぞれの人物の足の間などに影が多く写ることになる。
【００３９】
また、撮影画像のうち、人物の輪郭の外側の部分には背景カーテンが写る。背景カーテンが写る部分の色は、人物の影が映っている部分を除いて、背景カーテンの色と同じ色になる。図４において斜めの格子を付して示す部分は背景カーテンが写っている部分を示す。背景カーテンに投影する人物の影であるから、影の部分の色は、背景カーテンの色を若干暗めにしたような色になる。
【００４０】
図５は、図３のマスク画像を拡大して示す図である。図４の撮影画像が撮影画像取得部１０１１により取得された場合、マスク画像生成部１０１２は、撮影画像のうち、背景カーテンの色と同じ色の部分と、背景カーテンの色を若干暗めにした色の部分と、それ以外の色の部分とを、各画素の画素値に基づいて検出する。
【００４１】
マスク画像生成部１０１２は、背景カーテンの色と同じ色の部分の透過率を０％、背景カーテンの色を若干暗めにした色の部分の透過率を所定の透過率、それ以外の色の部分の透過率を１００％とすることによって、図５に示すようなマスク画像を生成する。背景カーテンの色の部分と背景カーテンの色を若干暗めにした色の部分以外の部分は、人物が写る部分になる。
【００４２】
図５に示すマスク画像のうち、黒色の部分は、背景カーテンの色と同じ色の部分、すなわち透過率が０％である部分を表し、黒色と白色が混在している部分は、背景カーテンの色を若干暗めにした色の部分、すなわち透過率が所定の透過率である部分を表す。白色の部分（見え方によっては薄いチェック柄が付されているように見える部分）は、人物の部分、すなわち透過率が１００％の部分を表す。
【００４３】
なお、マスク画像生成部１０１２は、撮影画像に写る背景カーテンの色の暗さに応じて、対応する部分の透過率を変えるようにしてマスク画像を生成する。より暗い背景カーテンの色が検出された部分、すなわち明度の小さい部分は、その明度に応じて透過率が大きくなり、より明るい背景カーテンの色が検出された部分、すなわち明度の大きい部分は、その明度に応じて透過率が小さくなる。
【００４４】
マスク画像生成部１０１２が生成するマスク画像のうちの、撮影画像において背景カーテンが写っている部分に対応する部分の透過率は、その全体が均一の透過率というわけではなく、部分的な明度の違いに応じて異なる透過率になることになる。例えば上方から照明を当てた状態で撮影画像の撮影が行われた場合、より明度の高い背景カーテンの色が検出された画像の上の方に対応する部分の透過率はより低くなるとともに、より明度の低い背景カーテンの色が検出された画像の下の方に対応する部分の透過率はより高くなり、結果として、マスク画像生成部１０１２が生成するマスク画像においては、上下で透過率が異なることになる。
【００４５】
このように、マスク画像の生成は、背景カーテンの色と同じ色が検出された部分の透過率を０％にするようにして行われる。従来のマスク画像の生成方法によれば、背景カーテンの色として検出する色の明度の幅が広く、これにより、透過率が０％になる部分が比較的広くなるのに対して、マスク画像生成部１０１２は明度の幅を狭くして背景カーテンの色と同じ色の部分の検出を行うため、従来の方法により生成されるマスク画像と較べて、透過率が０％になる部分が狭いマスク画像が生成される。
【００４６】
図６は、従来のマスク画像と、マスク画像生成部１０１２により生成されるマスク画像を示す図である。図６の左側は従来のマスク画像を表し、右側はマスク画像生成部１０１２により生成されるマスク画像を表す。
【００４７】
図６の左側に示すように、従来のマスク画像においては、人物の輪郭全体を囲む一定の幅の部分が所定の透過率を有する部分となるのに対して、マスク画像生成部１０１２により生成されるマスク画像においては、人物の輪郭より外側であって、実際に人物の影が写っていた部分が所定の透過率を有する部分になる。例えば、人物の下方に光が当たりにくい環境で撮影を行う場合、人物の特に下半身の周りには影が多く写り、その影の部分が所定の透過率を有するマスク画像が生成されることになる。
【００４８】
図７は、図３の合成画像を拡大して示す図である。合成部１０１３は、図５のマスク画像を用いることによって、人物が写っている部分と、実際に背景カーテンに投影された人物の影が写っている部分とを撮影画像から抽出し、抽出した画像を、背景画像取得部１０１４から供給された背景画像に合成することによって図７の合成画像を生成する。
【００４９】
合成部１０１３は、撮影画像から抽出した人物の部分と影の部分とを背景画像に重ねて合成を行う。影の部分は所定の透過率を有する形で撮影画像から抽出されているから、合成画像のうちの影の部分の画素値は、撮影画像から抽出された影の部分の画素の画素値と、背景画像の対応する画素の画素値とを透過率に応じて混合した画素値となる。
【００５０】
図７に示すように、合成画像には、マスク画像を用いることによって撮影画像から抽出された２人の人物と、撮影時に背景カーテンに投影した２人の影が写る。また、人物と影の部分以外の部分は背景画像の色の部分になる。図７において、人物の背景となる白色の部分は、その部分が背景画像の色の部分であることを表す。
【００５１】
以上のようにして生成したマスク画像を用いることによって、人物が写っている部分と、実際に背景カーテンに投影された人物の影の部分とを撮影画像から抽出することが可能になる。また、撮影画像における影の写り方によっては半透明領域（所定の透過率を有する領域）が増えることになり、これにより、背景と人物との境界が滑らかになじんだ状態の合成画像を得ることが可能になる。
【００５２】
さらに、背景画像に人物の影が写り込んだリアリティのある合成画像を生成することが可能になる。
【００５３】
［合成処理の第２の例］
図８は、画像処理部１００１による合成処理の第２の例を示す図である。図８の合成処理においては、マスク画像を用いて人物の部分と影の部分を抽出し、他の画像に合成する処理が２回繰り返される。
【００５４】
図８の上段に示す１段目の合成処理は、図３に示す合成処理と同じ処理である。図３に示す合成処理によって得られた合成画像を合成画像Ａとする。
【００５５】
図８の合成処理によって合成画像を生成する場合、合成部１０１３は、矢印＃１の先に示すように、２段目の合成処理として、撮影画像からではなく合成画像Ａから、人物の部分と影の部分をマスク画像を用いて抽出する。２段目の合成処理に用いられるマスク画像は１段目の合成処理に用いられるマスク画像と同じ画像である。また、２段目の合成処理に用いられる背景画像は１段目の合成処理に用いられる背景画像と同じ画像である。
【００５６】
合成部１０１３は、１段目の合成処理に用いたマスク画像と同じマスク画像を用いて合成画像Ａから抽出した人物の部分と影の部分を背景画像に再度合成し、合成画像Ｂを生成する。
【００５７】
図３に示す合成処理の場合、合成画像に写る影の部分の色は、背景カーテンの色を若干暗めにした色と背景画像を混合した色になる。例えば影の部分の色が暗めの緑色であり、背景画像の色が赤色であるといったように、撮影画像から抽出された影の部分の色が、背景画像の色と同じ色の背景の前に立って撮影した場合に写る影の色と違う色である場合、合成画像に写る影が違和感のある影に見えてしまう。
【００５８】
図８に示すように、１段目の合成処理によって合成画像Ａを生成した後、マスク画像を用いて人物の部分と影の部分を合成画像Ａから抽出し、背景画像に再度合成することにより、合成画像Ｂに写る影の色を、違和感のない色にすることが可能になる。
【００５９】
以下、適宜、図８に示すように画像の合成を２回繰り返す合成処理を２段階合成処理という。
【００６０】
［合成処理の第３の例］
図９は、画像処理部１００１による合成処理の第３の例を示す図である。図９の合成処理においては、２段目の合成処理に用いる背景画像と異なる画像が、１段目の合成処理時に背景画像として用いられる。
【００６１】
図９の合成処理によって合成画像を生成する場合、背景画像取得部１０１４は、背景画像と、その背景画像に対応する影色背景画像を取得し、合成部１０１３に出力する。影色背景画像は、例えば背景画像の色と同じ色の平面の前に立って撮影した場合に写る影の色として想定される色の画像であり、背景画像と対応付けて背景画像取得部１０１４により予め管理されている。影色背景画像の色は、背景カーテンの色とは異なる色であり、例えば、背景画像の色を若干暗めにした色である。図９の影色背景画像や合成画像において垂直水平方向の格子を付して示す部分の色は、影色背景画像の色と同じ色の部分を表す。
【００６２】
図９の上段に示す１段目の合成処理は、背景画像の代わりに影色背景画像を用いる点を除いて、図８の１段目の合成処理と同じ処理である。
【００６３】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。合成画像Ｃに写る影の部分の色は、撮影画像から抽出された影の部分の色と、影色背景画像の色とを混合した色になる。
【００６４】
また、合成部１０１３は、矢印＃１１の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像を用いて抽出する。合成部１０１３は、１段目の合成処理に用いたマスク画像と同じマスク画像を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｄを生成する。
【００６５】
このように、背景画像に適した色の画像を影色背景画像として用意しておき、人物の影の色として背景画像の色ではなく影色背景画像の色を用いることにより、合成画像Ｄに写る影の色を、背景画像の色に対して違和感のない色にすることが可能になる。
【００６６】
例えば、背景画像がピンク色である場合、その背景画像に対して、撮影画像から抽出した灰色の影の部分を合成したときには影の部分が汚れに見えてしまうが、赤色や茶色などの、ピンク色を暗めにした色の画像を影色背景画像として用いることによって、ピンク色の背景画像に合成したときに違和感のない、赤色や茶色の影を背景画像に写り込ませることが可能になる。
【００６７】
［合成処理の第４の例］
撮影モードに応じて影色背景画像の色を変えるようにしてもよい。
【００６８】
例えば、逆光の雰囲気の画像を撮影するモードである逆光モードと、順光の雰囲気の画像を撮影するモードである順光モードが撮影モードとして用意されているものとする。被写体としての利用者（後述する写真シール機１の利用者）は、逆光モードと順光モードのうちのいずれかのモードを選択し、撮影を行うことになる。
【００６９】
例えば、逆光モードが選択された場合、影色背景画像として、順光モードが選択された場合に用いられる影色背景画像と同系色であるが、明るめの色の画像が選択され、図９を参照して説明した１段目の合成処理が行われる。
【００７０】
また、順光モードが選択された場合、影色背景画像として、逆光モードが選択された場合に用いられる影色背景画像と同系色であるが、暗めの色の画像が選択され、図９を参照して説明した１段目の合成処理が行われる。
【００７１】
例えば、背景画像がピンク色であるとすると、順光モードにおいては、暗めの茶色の影色背景画像が用いられ、逆光モードにおいては、明るめの赤色の影色背景画像が用いられる。背景画像取得部１０１４は、このような影色背景画像を撮影モードに応じて取得し、合成部１０１３に出力する。
【００７２】
２段目の合成処理を行って最終的に得られる合成画像に写る影の部分の色は、逆光モードである場合には明るめの色になり、順光モードである場合には暗めの色になる。
【００７３】
これにより、逆光で撮影したときに写る影や、順光で撮影したときに写る影を表現することができ、リアリティのある合成画像を生成することが可能になる。
【００７４】
［合成処理の第５の例］
図１０は、画像処理部１００１による合成処理の第５の例を示す図である。図１０の合成処理においては、２段目の合成処理に用いるマスク画像と異なるマスク画像を用いて１段目の合成処理が行われる。
【００７５】
図１０の合成処理によって合成画像を生成する場合、マスク画像生成部１０１２は、撮影画像の画素値に基づいて、背景カーテンと同じ色の部分と、それ以外の色の部分とを検出する。
【００７６】
マスク画像生成部１０１２は、背景カーテンと同じ色の部分以外の部分を人物の部分として、人物の部分を１００％の透過率で透過させるとともに、例えば人物の輪郭に沿って人物の周囲全体の一定の幅の部分を所定の透過率で透過させるマスク画像を生成する。背景カーテンが写る部分の透過率は０％になる。以下、適宜、人物の部分の透過率が１００％、人物の輪郭に沿って確保される一定の幅の部分の透過率が所定の透過率、背景カーテンの部分の透過率が０％のマスク画像を従来のマスク画像という。
【００７７】
図１０の上段に示す１段目の合成処理は、画像の抽出に用いるマスク画像が異なる点を除いて、図９の１段目の合成処理と同じ処理である。
【００７８】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成された従来のマスク画像を用いて、人物の部分と人物の周りの部分を撮影画像から抽出し、抽出した人物の部分と人物の周りの部分を影色背景画像に合成することによって合成画像Ｅを生成する。合成画像Ｅに写る人物の周りの部分の色は、撮影画像から抽出された人物の周りの部分の色と、影色背景画像の色とを混合した色になる。
【００７９】
また、合成部１０１３は、矢印＃２１の先に示すように、２段目の合成処理として、合成画像Ｅから、人物の部分と影の部分をマスク画像（図９のマスク画像と同じマスク画像）を用いて抽出する。合成部１０１３は、１段目の合成処理に用いた従来のマスク画像と異なるマスク画像を用いて合成画像Ｅから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｆを生成する。
【００８０】
従来のマスク画像は、人物の周りの部分を所定の透過率で透過させるものであるため、合成画像Ｅに写る人物の周りの色には影色背景画像の色が含まれる。合成画像Ｅから人物の部分と影の部分とをマスク画像を用いて抽出し、背景画像に合成することによっても、背景画像の色に適した色の影を背景画像に写り込ませることが可能になる。
【００８１】
［合成処理の第６の例］
図１１は、画像処理部１００１による合成処理の第６の例を示す図である。図１１の合成処理においては、１段目の合成処理と２段目の合成処理の間に、影の色を調整する処理が行われる。
【００８２】
図８の１段目の合成処理と２段目の合成処理の間に影の色を調整する場合について説明するが、図９、図１０の２段階合成処理においても、同様の処理を、１段目の合成処理と２段目の合成処理の間に行うようにすることが可能である。
【００８３】
図１１の合成処理によって合成画像を生成する場合、マスク画像生成部１０１２は、撮影画像に基づいて生成したマスク画像の白領域と黒領域を反転させることによって、図１１に示すような背景マスク画像を生成する。
【００８４】
合成部１０１３は、図８の１段目の合成処理が終了した後、１段目の合成処理によって得られた合成画像Ａから、背景の部分（人物以外の部分）を背景マスク画像に基づいて抽出する。合成部１０１３は、抽出した背景の部分の色を調整し、色を調整した背景の部分と人物の部分とを合成することによって、合成画像Ａ’を生成する。背景マスク画像を用いて抽出した人物の部分以外の背景の部分の色を調整することは、人物の影の部分の色をも調整することになる。
【００８５】
背景の部分の色の調整は、色相、彩度、明度のうちの少なくともいずれかを調整するようにして行われる。背景の部分の色をどのように調整するのかは、例えば背景画像に対応付けて予め決められており、背景画像の色と同じ色の平面に写る影の色として適した色になるような調整が行われる。合成部１０１３は、合成画像Ａ’を合成画像Ａとして用いて、図８の２段目の合成処理を行う。
【００８６】
このように、１段目の合成処理の合成結果から抽出した背景の部分の色相・彩度・明度を調整してから２段目の合成処理を行うことによっても、適した色の影を背景画像に写り込ませることが可能になる。
【００８７】
［合成処理の第７の例］
２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像を加工したマスク画像を使用するようにしてもよい。マスク画像の加工には次の処理が含まれる。
１．トーンカーブを用いたコントラスト調整
２．ぼかし処理
３．影の部分を対象としたぼかし処理
４．トーンカーブを用いたコントラスト調整とぼかし処理
５．トーンカーブを用いたコントラスト調整と影の部分を対象としたぼかし処理
【００８８】
１．トーンカーブを用いたコントラスト調整
図１２は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像のコントラストを調整して得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１２の処理は、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【００８９】
すなわち、合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【００９０】
マスク画像生成部１０１２は、矢印＃３１に示すように、１段目の合成処理に使用したマスク画像のコントラストを調整することによってマスク画像MA1を生成する。マスク画像MA1は、例えば、１段目の合成処理に使用したマスク画像と較べて、所定の透過率を有する部分、すなわち影の部分の面積が異なる画像であったり、各位置の透過率が異なる画像である。
【００９１】
合成部１０１３は、矢印＃３２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA1を用いて抽出する。合成部１０１３は、マスク画像MA1を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｇを生成する。
【００９２】
マスク画像のコントラストを調整することによって影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。
【００９３】
２．ぼかし処理
図１３は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像にぼかし処理を行うことによって得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１３の処理も、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【００９４】
すなわち、合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【００９５】
マスク画像生成部１０１２は、矢印＃４１に示すように、１段目の合成処理に使用したマスク画像を対象としてぼかし処理を行い、マスク画像MA2を生成する。マスク画像MA2は、例えば、１段目の合成処理に使用したマスク画像と較べて、人物の輪郭と影の輪郭がぼけた（コントラストが低い）画像である。
【００９６】
合成部１０１３は、矢印＃４２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA2を用いて抽出する。合成部１０１３は、マスク画像MA2を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｈを生成する。
【００９７】
これにより、マスク画像に含まれるノイズを除去することができ、滑らかな影を合成画像Ｃから抽出し、背景画像に合成することができる。また、人物の輪郭と影をぼかすことによって、柔らかい雰囲気の合成画像を生成することができる。
【００９８】
３．影の部分を対象としたぼかし処理
図１４は、マスク画像の加工の例を示す図である。図１４の処理により、図１３に示すようにしてマスク画像全体をぼかすのとは異なり、人物の輪郭を残しつつ、影の部分のみをぼかすことが可能になる。
【００９９】
はじめに、マスク画像生成部１０１２は、矢印＃５１に示すように、１段目の合成処理に使用したマスク画像を対象としてぼかし処理を行うことによって、人物の輪郭と影の輪郭がぼけた画像であるマスク画像MA2を生成する。図１４のマスク画像MA2は、図１３のマスク画像MA2と同じ画像である。
【０１００】
また、マスク画像生成部１０１２は、矢印＃５２に示すように、１段目の合成処理に使用したマスク画像と、マスク画像MA2との差（差の絶対値）を求め、差分画像を生成する。矢印＃５２の先に示す差分画像のうち、黒色の部分は、１段目の合成処理に使用したマスク画像とマスク画像MA2との差がない部分を表し、白色の部分は差がある部分を表す。
【０１０１】
マスク画像生成部１０１２は、矢印＃５３，＃５４，＃５５の先に示すように、１段目の合成処理に使用したマスク画像と差分画像とマスク画像MA2に基づいてマスク画像MA3を生成する。例えば、マスク画像生成部１０１２は、１段目の合成処理に使用したマスク画像に含まれる人物の輪郭を差分画像を用いて抽出し、抽出した輪郭をマスク画像MA2に合成することによってマスク画像MA3を生成する。
【０１０２】
マスク画像MA3は、人物の輪郭がマスク画像MA2よりはっきりとしているが、影の輪郭がマスク画像MA2の影の輪郭と同様にぼけた画像になる。合成部１０１３は、このようにしてマスク画像生成部１０１２により生成されたマスク画像MA3を用いて、図１３の２段目の合成処理を行うことになる。
【０１０３】
これにより、マスク画像に含まれるノイズを除去することができ、滑らかな影を抽出し、背景画像に合成することができる。また、影のみをぼかすことによって、人物の輪郭ははっきりとしつつも、影のみが柔らかい雰囲気の合成画像を生成することができる。
【０１０４】
４．トーンカーブを用いたコントラスト調整とぼかし処理
図１５は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像のコントラストを調整した後、さらにぼかし処理を行って得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１５の処理も、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【０１０５】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【０１０６】
マスク画像生成部１０１２は、矢印＃６１に示すように、１段目の合成処理に使用したマスク画像のコントラストを調整し、さらに、ぼかし処理を行うことによってマスク画像MA4を生成する。マスク画像MA4は、例えば、１段目の合成処理に使用したマスク画像と較べて、所定の透過率を有する部分、すなわち影の部分の面積が異なる画像であったり、各位置の透過率が異なる画像である。また、マスク画像MA4は、１段目の合成処理に使用したマスク画像と較べて、人物の輪郭と影の輪郭がぼけた画像である。
【０１０７】
合成部１０１３は、矢印＃６２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA4を用いて抽出する。合成部１０１３は、マスク画像MA4を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｉを生成する。
【０１０８】
マスク画像のコントラストを調整することにより影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。また、マスク画像に含まれるノイズを除去することができ、滑らかな影を抽出し、背景画像に合成することができる。
【０１０９】
５．トーンカーブを用いたコントラスト調整と影の部分を対象としたぼかし処理
図１６は、マスク画像の加工の例を示す図である。
【０１１０】
はじめに、マスク画像生成部１０１２は、１段目の合成処理に使用したマスク画像のコントラストを調整することによって生成したマスク画像MA1を対象としてぼかし処理を行い、矢印＃７１に示すように、人物の輪郭と影の輪郭がぼけた画像であるマスク画像MA4を生成する。図１６のマスク画像MA1は、１段目の合成処理に使用したマスク画像のコントラストを調整することによって生成された、図１２のマスク画像MA1と同じ画像である。また、図１６のマスク画像MA4は図１５のマスク画像MA4と同じ画像である。
【０１１１】
また、マスク画像生成部１０１２は、矢印＃７２に示すように、マスク画像MA1とマスク画像MA4との差を表す差分画像を生成する。矢印＃７２の先に示す差分画像のうち、黒色の部分は、マスク画像MA1とマスク画像MA4との差がない部分を表し、白色の部分は差がある部分を表す。
【０１１２】
マスク画像生成部１０１２は、矢印＃７３，＃７４，＃７５の先に示すように、マスク画像MA1と差分画像とマスク画像MA4に基づいてマスク画像MA5を生成する。例えば、マスク画像生成部１０１２は、マスク画像MA1に含まれる人物の輪郭を差分画像を用いて抽出し、抽出した輪郭をマスク画像MA4に合成することによってマスク画像MA5を生成する。
【０１１３】
マスク画像MA5は、人物の輪郭がマスク画像MA4よりはっきりとしているが、影の輪郭がマスク画像MA4の影の輪郭と同様にぼけた画像になる。合成部１０１３は、このようにしてマスク画像生成部１０１２により生成されたマスク画像MA5を用いて、図１５の２段目の合成処理を行うことになる。
【０１１４】
これにより、マスク画像のコントラストを調整することによって影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。また、影のみをぼかすことによって、人物の輪郭ははっきりとしつつも、影のみが柔らかい雰囲気の合成画像を生成することができる。
【０１１５】
［合成処理の第８の例］
図１７は、合成処理に用いるマスク画像の組み合わせの例について説明する図である。ここでは、１段目の合成処理に用いるマスク画像をマスク画像Ｘ、２段目の合成処理に用いるマスク画像をマスク画像Ｙとして説明する。
【０１１６】
以上においては、１段目の合成処理に使用したマスク画像を加工して得られたマスク画像を２段目の合成処理に用いるものとしたが、そのように、撮影画像に基づいて生成したマスク画像を加工して得られたマスク画像を、１段目の合成処理に用いるようにすることも可能である。また、撮影画像に基づいて生成したマスク画像を加工して得られたマスク画像を、１段目の合成処理と２段目の合成処理の両方で用いるようにすることも可能である。
【０１１７】
例えば、マスク画像Ｘ，Ｙとして、図１６の処理によって生成したマスク画像MA5を用いて１段目の合成処理と２段目の合成処理をそれぞれ行うようにすることも可能である。
【０１１８】
また、マスク画像Ｘ，Ｙとして、上述したマスク画像MA1乃至MA4のいずれかを用いて１段目の合成処理と２段目の合成処理をそれぞれ行うようにすることも可能である。
【０１１９】
１段目の合成処理と２段目の合成処理に同じマスク画像を用いることにより、より自然な状態で人物が合成された合成画像を生成することが可能になる。１段目の合成処理と２段目の合成処理で用いるマスク画像が異なる場合、例えば、２段目の合成処理で用いるマスク画像の影の部分が１段目の合成処理で用いるマスク画像の影の部分より広いときには、１段目の合成処理により得られた合成画像に含まれる背景画像の色（影色背景画像の色）が、人物の輪郭によって縁取りされたようなものになってしまうことがあるが、そのようなことを防ぐことができる。
【０１２０】
＜写真シール機の構成と動作について＞
次に、以上のような合成処理を行う写真シール機の構成と動作について説明する。
【０１２１】
［写真シール機の外観構成］
図１８は、本発明の一実施形態に係る写真シール機１の外観の構成例を示す斜視図である。図１の画像処理部１００１が、図１８の写真シール機１において実現される。
【０１２２】
写真シール機１は、撮影や編集等の作業を利用者にゲームとして行わせ、撮影画像や編集済み画像を提供する代わりに利用者より代金を受け取るゲーム機である。写真シール機１はゲームセンタなどの店舗に設置される。利用者は１人であることもあるし、複数人であることもある。
【０１２３】
写真シール機１が提供するゲームで遊ぶ利用者は、代金を投入し、自身が被写体となって撮影を行い、撮影によって得られた撮影画像の中から選択した編集対象の画像に対して、手書きの線画やスタンプ画像を合成する編集機能を用いて編集を行うことにより、撮影画像を彩り豊かな画像にする。利用者は、編集済みの画像が印刷されたシール紙を受け取って一連のゲームを終了させることになる。
【０１２４】
図１８に示すように、写真シール機１は、主に、撮影ユニット１１、編集部１２、および事後接客部１３から構成される。撮影ユニット１１と編集部１２が接した状態で設置され、編集部１２と事後接客部１３が接した状態で設置される。
【０１２５】
撮影ユニット１１は、撮影部２１と背景部２２から構成される。撮影部２１と背景部２２は所定の距離だけ離れて設置され、撮影部２１と背景部２２の間に形成される空間である撮影空間において撮影処理が行われる。図２の撮影の様子は、写真シール機１の撮影空間での撮影の様子を示している。
【０１２６】
撮影部２１は撮影処理を利用者に行わせる装置である。撮影部２１は、撮影空間に入り、撮影処理を行っている利用者の正面に位置する。撮影空間を正面に望む面を構成する撮影部２１の正面パネル４１には、撮影処理時に利用者により用いられるタッチパネルモニタなどが設けられる。撮影空間にいる利用者から見て左側の面を左側面、右側の面を右側面とすると、撮影部２１の左側面が側面パネル４２Ａにより構成され、右側面が側面パネル４２Ｂにより構成される。
【０１２７】
背景部２２は、正面を向いて撮影処理を行っている利用者の背面側に位置する板状の部材である背面パネル５１、背面パネル５１の左端に取り付けられ、側面パネル４２Ａより横幅の狭い板状の部材である側面パネル５２Ａ、および、背面パネル５１の右端に取り付けられ、側面パネル４２Ｂより横幅の狭い板状の部材である側面パネル５２Ｂ（図２０）から構成される。
【０１２８】
撮影部２１の左側面を構成する側面パネル４２Ａと背景部２２の側面パネル５２Ａは、ほぼ同一平面に設けられ、それぞれの上部が板状の部材である連結部２３Ａによって連結される。また、撮影部２１の右側面を構成する側面パネル４２Ｂと背景部２２の側面パネル５２Ｂは、ほぼ同一平面に設けられ、それぞれの上部が板状の部材である連結部２３Ｂによって連結される。
【０１２９】
撮影部２１の側面パネル４２Ａ、連結部２３Ａ、および背景部２２の側面パネル５２Ａに囲まれることによって形成される開口が撮影空間の出入り口Ｇ１となる。撮影部２１の側面パネル４２Ｂ、連結部２３Ｂ、および背景部２２の側面パネル５２Ｂに囲まれることによって形成される開口も撮影空間の出入り口Ｇ２となる。
【０１３０】
背景部２２の上部には、背面パネル５１、側面パネル５２Ａ、および側面パネル５２Ｂに支持される形で背景カーテンユニット２５が設けられる。背景カーテンユニット２５には、色または柄の異なる、背景に利用する巻き取り式の背景カーテンが複数収納される。背景カーテンユニット２５は、撮影部２１に設けられたカメラ等による撮影と連動して動作し、撮影の際に、例えば利用者により選択された色のカーテンを下ろし、その他のカーテンを巻き取る。
【０１３１】
複数のカーテンを１枚のクロマキ用のカーテンとし、昇降式の背景カーテンとして用意してもよい。また、クロマキ用のカーテンを予め撮影空間の背面に張り付けるとともに、合成用の背景画像を複数種類用意し、編集処理において利用者が所望する背景画像をカーテンの部分に合成することができるようにしてもよい。
【０１３２】
撮影空間の上方には、撮影部２１の正面パネル４１、連結部２３Ａ、連結部２３Ｂ、および背景カーテンユニット２５に囲まれる開口が形成され、その開口の一部を覆うように天井ストロボユニット２４が設けられる。天井ストロボユニット２４の一端が連結部２３Ａに固定され、他端が連結部２３Ｂに固定される。天井ストロボユニット２４は、撮影に合わせて撮影空間内に向けて発光するストロボを内蔵する。天井ストロボユニット２４を構成するストロボの内部には蛍光灯が設けられており、撮影空間の照明としても機能する。
【０１３３】
図１９に示すように、撮影空間の上方に形成される開口のうち、天井ストロボユニット２４を挟んで前方の部分は天井前方カーテン６１で覆われ、後方の部分は天井後方カーテン６２で覆われる。天井前方カーテン６１の少なくとも内側の色は黒色などの暗い色とされ、天井後方カーテン６２の少なくとも内側の色は白色などの明るい色とされる。
【０１３４】
また、図１９に示すように、撮影空間の出入り口Ｇ１には側面カーテン６３が取り付けられる。反対側の出入り口である出入り口Ｇ２にも図示せぬ側面カーテンが取り付けられる。撮影空間の出入り口Ｇ１およびＧ２に取り付けられる側面カーテンの少なくとも内側の色は黒色などの暗い色とされる。
【０１３５】
図１８の説明に戻り、編集部１２は、撮影処理によって得られた画像を編集する処理である編集処理を利用者に行わせる装置である。編集部１２は、一方の側面が撮影部２１の正面パネル４１の背面に接するように撮影ユニット１１に連結して設けられる。編集部１２には、編集処理時に利用者により用いられるタブレット内蔵モニタなどの構成が設けられる。
【０１３６】
図１８に示す編集部１２の構成を正面側の構成とすると、２組の利用者が同時に編集処理を行うことができるように、編集部１２の正面側と背面側には編集処理に用いられる構成がそれぞれ設けられる。
【０１３７】
編集部１２の正面側は、床面に対して垂直な面であり、側面パネル４２Ａとほぼ平行な面である面７１と、面７１の上方に形成された斜面７２から構成され、編集処理に用いられる構成が斜面７２に設けられる。斜面７２の左側には、柱状の形状を有し、照明装置７４の一端を支持する支持部７３Ａが設けられる。支持部７３Ａの上面にはカーテンレール２６を支持する支持部７５が設けられる。斜面７２の右側にも、照明装置７４の他端を支持する支持部７３Ｂ（図２０）が設けられる。
【０１３８】
編集部１２の上方にはカーテンレール２６が取り付けられる。カーテンレール２６は、上から見たときの形状がコの字状となるように３本のレール２６Ａ乃至２６Ｃを組み合わせて構成される。平行に設けられるレール２６Ａと２６Ｂの一端は、連結部２３Ａと連結部２３Ｂにそれぞれ固定され、他端に残りの一本のレール２６Ｃの両端が接合される。
【０１３９】
カーテンレール２６には、編集部１２の正面前方の空間と背面前方の空間の内部が外から見えないようにカーテンが取り付けられる。カーテンレール２６に取り付けられたカーテンにより囲まれる編集部１２の正面前方の空間と背面前方の空間が、利用者が編集処理を行う編集空間となる。
【０１４０】
図２０は、写真シール機１を別の角度から見た斜視図である。
【０１４１】
事後接客部１３は事後接客処理を利用者に行わせる装置である。事後接客処理には、撮影画像や編集済みの画像を携帯電話機などの携帯端末に送信する処理、ミニゲームを利用者に行わせる処理、アンケートに答えさせる処理などが含まれる。
【０１４２】
図２０に示すように、事後接客部１３は、所定の厚さを有する板状の筐体を有しており、その背面が編集部１２の左側面に接するように編集部１２に連結して設けられる。事後接客部１３の正面には、事後接客処理時に利用者により用いられるタブレット内蔵モニタや、撮影画像や編集済みの画像が印刷されたシール紙が排出される排出口などが設けられる。事後接客部１３の正面前方の空間が、シール紙への印刷が終わるのを待っている利用者が事後接客処理を行う事後接客空間となる。
【０１４３】
ここで、写真シール作成ゲームの流れと、それに伴う利用者の移動について図２１を参照して説明する。図２１は、写真シール機１を上から見た平面図である。
【０１４４】
写真シール機１の利用者は、白抜き矢印＃１で示すように出入り口Ｇ１から、または白抜き矢印＃２で示すように出入り口Ｇ２から、撮影部２１と背景部２２の間に形成された撮影空間Ａ１に入り、撮影部２１に設けられたカメラやタッチパネルモニタなど利用して撮影処理を行う。
【０１４５】
撮影処理を終えた利用者は、白抜き矢印＃３で示すように出入り口Ｇ１を使って撮影空間Ａ１から出て編集空間Ａ２−１に移動するか、白抜き矢印＃４で示すように出入り口Ｇ２を使って撮影空間Ａ１から出て編集空間Ａ２−２に移動する。
【０１４６】
編集空間Ａ２−１は、編集部１２の正面側の編集空間であり、編集空間Ａ２−２は、編集部１２の背面側の編集空間である。編集空間Ａ２−１と編集空間Ａ２−２のいずれの空間に移動するのかが、撮影部２１のタッチパネルモニタの画面表示などによって案内される。例えば２つの編集空間のうちの空いている方の空間が移動先として案内される。編集空間Ａ２−１または編集空間Ａ２−２に移動した利用者は編集処理を開始する。編集空間Ａ２−１の利用者と、編集空間Ａ２−２の利用者は同時に編集処理を行うことができる。
【０１４７】
編集処理が終了した後、撮影画像や編集済みの画像の中から選択された画像の印刷が開始される。画像の印刷中、編集処理を終えた利用者は、編集空間Ａ２−１で編集処理を行っていた場合には白抜き矢印＃５で示すように編集空間Ａ２−１から事後接客空間Ａ３に移動して事後接客処理を行う。また、編集処理を終えた利用者は、編集空間Ａ２−２で編集処理を行っていた場合には白抜き矢印＃６で示すように編集空間Ａ２−２から事後接客空間Ａ３に移動し、事後接客空間Ａ３において事後接客処理を行う。
【０１４８】
画像の印刷が終了したとき、利用者は、事後接客部１３に設けられた排出口からシール紙を受け取り、一連の写真シール作成ゲームを終えることになる。
【０１４９】
［各装置の構成］
次に、各装置の構成について説明する。
【０１５０】
図２２は、撮影部２１の正面の構成例を示す図である。撮影部２１は、正面パネル４１、側面パネル４２Ａ、および側面パネル４２Ｂが、箱状の形状を有するベース部４３に取り付けられることによって構成される。
【０１５１】
正面パネル４１は撮影空間Ａ１で撮影処理を行う利用者の正面に位置し、側面パネル４２Ａと側面パネル４２Ｂは、それぞれ、撮影空間Ａ１で撮影処理を行う利用者の左側、右側に位置する。側面パネル４２Ａの上方には連結部２３Ａが固定され、側面パネル４２Ｂの上方には連結部２３Ｂが固定される。
【０１５２】
正面パネル４１のほぼ中央には撮影・表示ユニット８１が設けられる。撮影・表示ユニット８１は、カメラ９１、正面ストロボ９２、およびタッチパネルモニタ９３から構成される。
【０１５３】
カメラ９１は、CCD(Charge Coupled Device)などの撮像素子により構成され、撮影空間Ａ１にいる利用者を撮影する。カメラ９１により取り込まれた動画像は、タッチパネルモニタ９３にリアルタイムで表示される。利用者により撮影が指示されたときなどの所定のタイミングでカメラ９１により取り込まれた画像は撮影画像（静止画像）として保存される。図２に示すカメラが、図２２のカメラ９１に相当する。
【０１５４】
カメラ９１を囲むように発光面が設けられた正面ストロボ９２は、他のストロボと同様にカメラ９１による撮影に合わせて発光し、被写体としての利用者の顔付近を正面から照射する。
【０１５５】
カメラ９１の下側に設けられたタッチパネルモニタ９３は、LCD(Liquid Crystal Display)などのモニタと、それに積層されたタッチパネルにより構成される。タッチパネルモニタ９３は、カメラ９１により取り込まれた動画像を表示するライブビューモニタとしての機能と、各種のGUI(Graphical User Interface)画像を表示し、利用者の選択操作をタッチパネルにより受け付ける機能とを備えている。タッチパネルモニタ９３には、適宜、背景等の画像が合成された後の動画像が表示される。
【０１５６】
また、タッチパネルモニタ９３には、合成処理によって生成された合成画像が撮影処理時などの所定のタイミングで表示される。
【０１５７】
正面パネル４１には、撮影・表示ユニット８１の位置を基準として、上方に上ストロボ８２が設置される。また、左方に左ストロボ８３が設置され、右方に右ストロボ８４が設置される。撮影・表示ユニット８１の下方の位置には、ベース部４３の上面が一部突出する形で下ストロボ８５が設けられる。
【０１５８】
上ストロボ８２は、利用者を上前方から照射する。左ストロボ８３は、利用者を左前方から照射し、右ストロボ８４は、利用者を右前方から照射する。下ストロボ８５は、利用者を下前方から照射する。
【０１５９】
ベース部４３には利用者の足元を照射する足元ストロボ８６も設けられる。上ストロボ８２、左ストロボ８３、右ストロボ８４、下ストロボ８５、および足元ストロボ８６の内部には蛍光灯が設けられており、天井ストロボユニット２４を構成するストロボの内部の蛍光灯と合わせて、撮影空間Ａ１内の照明として用いられる。
【０１６０】
足元ストロボ８６の右側には、利用者がお金を投入する硬貨投入返却口８７が設けられる。
【０１６１】
下ストロボ８５を挟んでベース部４３の上面の左右に形成されるスペース４３Ａおよび４３Ｂは、撮影処理を行う利用者が手荷物等を置くための荷物置き場として用いられる。正面パネル４１の例えば天井付近には、撮影処理の案内音声、BGM(Back Ground Music)、効果音等の音を出力するスピーカも設けられる。
【０１６２】
このような構成を有する撮影部２１の各部のうち、正面パネル４１、側面パネル４２Ａ、側面パネル４２Ｂ、およびベース部４３の撮影空間Ａ１に面する部分の色と、連結部２３Ａ、連結部２３Ｂの内側の色は、図２３に色を付して示すように黒色などの暗い色とされる。図１９を参照して説明したように、撮影空間Ａ１の天井前方の開口に取り付けられる天井前方カーテン６１の内側の色と、出入り口Ｇ１およびＧ２に取り付けられるカーテンの内側の色が暗い色であることもあって、撮影空間Ａ１の前方の色は全体的に暗い色となる。
【０１６３】
後述するように、背景部２２には撮影空間Ａ１にいる利用者を背面側から照射するストロボが設けられる。撮影空間Ａ１の前方の色を全体的に暗い色にすることによって、背景部２２に設けられるストロボからの光が撮影空間Ａ１内で反射し、利用者を照射してしまうことを防ぐことができ、意図した明るさで撮影を行うことが可能になる。
【０１６４】
すなわち、背景部２２の両端に設けられたストロボからの光のうち、利用者にあたらない光の反射は出入り口Ｇ１およびＧ２に取り付けられた側面カーテンの内側で防ぐことができる。また、撮影部２１の正面に設けられた例えば下ストロボ８５からの光のうち、利用者にあたらない光の反射は天井前方カーテン６１の内側で防ぐことができる。撮影部２１の正面に設けられた左ストロボ８３および右ストロボ８４からの光のうち、利用者にあたらない光の反射は側面パネル４２Ａ、側面パネル４２Ｂの内側で防ぐことができる。
【０１６５】
また、図１９を参照して説明したように、撮影空間Ａ１の天井後方の開口に取り付けられる天井後方カーテン６２の内側の色は明るい色であり、撮影空間Ａ１の後方の色は全体的に明るい色となる。
【０１６６】
撮影空間Ａ１の後方の色を全体的に明るい色にすることによって、撮影部２１に設けられるストロボからの光を撮影空間Ａ１内で反射させ、利用者を後方から照射することが可能になる。利用者を後方から照射して撮影を行うことによって、逆光で撮影したときと同様に、利用者の輪郭が柔らかい雰囲気で写っている画像を撮影することが可能になる。
【０１６７】
図２４は、背景部２２の撮影空間Ａ１側の構成例を示す図である。
【０１６８】
上述したように、背面パネル５１の上方には背景カーテンユニット２５が設けられる。背景カーテンユニット２５のほぼ中央には、撮影空間Ａ１内で撮影処理を行っている利用者を後方中央から照射する背面中央ストロボ１０１が取り付けられる。
【０１６９】
背面パネル５１の上方であって、出入り口Ｇ１側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を左後方から照射する背面左ストロボ１０２が取り付けられる。また、背面パネル５１の上方であって、出入り口Ｇ２側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を右後方から照射する背面右ストロボ１０３が取り付けられる。
【０１７０】
図２５は、編集部１２の正面側（編集空間Ａ２−１側）の構成例を示す図である。
【０１７１】
斜面７２のほぼ中央には、タブレット内蔵モニタ１３１が設けられる。タブレット内蔵モニタ１３１を挟んで左側にタッチペン１３２Ａが設けられ、右側にタッチペン１３２Ｂが設けられる。
【０１７２】
タブレット内蔵モニタ１３１は、タッチペン１３２Ａまたは１３２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１３１には、例えば、編集対象画像として選択された撮影画像の編集に用いられる画面である編集画面が表示される。２人で同時に編集作業を行う場合、タッチペン１３２Ａは一方の利用者により用いられ、タッチペン１３２Ｂは他方の利用者により用いられる。
【０１７３】
編集部１２の左側には事後接客部１３が設けられる。
【０１７４】
図２６は、事後接客部１３の正面側の構成例を示す図である。
【０１７５】
事後接客部１３の上方中央にはタブレット内蔵モニタ１６１が設けられる。タブレット内蔵モニタ１６１を挟んで左側にタッチペン１６２Ａが設けられ、右側にタッチペン１６２Ｂが設けられる。タブレット内蔵モニタ１６１もタブレット内蔵モニタ１３１と同様に、タッチペン１６２Ａまたは１６２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１６１には、ミニゲームなどの事後接客処理に用いられる画面が表示される。
【０１７６】
タブレット内蔵モニタ１６１の下には非接触型ICリーダ／ライタ１６３が設けられ、非接触型ICリーダ／ライタ１６３の下にはシール紙排出口１６４が設けられる。シール紙排出口１６４の下にはスピーカ１６５が設けられる。
【０１７７】
非接触型ICリーダ／ライタ１６３は、近接された非接触型ICと通信を行い、非接触型ICからのデータの読み出しや非接触型ICに対するデータの書き込みを行う。
【０１７８】
シール紙排出口１６４には、編集空間Ａ２−１の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙、または、編集空間Ａ２−２の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙が排出される。編集部１２の内部にはプリンタが設けられており、画像の印刷がそのプリンタにより行われる。
【０１７９】
スピーカ１６５は、事後接客処理の案内音声、BGM、効果音等の音を出力する。
【０１８０】
［写真シール機の内部構成］
次に、写真シール機１の内部構成について説明する。図２７は、写真シール機１の内部の構成例を示すブロック図である。上述した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。
【０１８１】
制御部２０１はCPU(Central Processing Unit)などよりなり、ROM(Read Only Memory)２０６や記憶部２０２に記憶されているプログラムを実行し、写真シール機１の全体の動作を制御する。制御部２０１には、記憶部２０２、通信部２０３、ドライブ２０４、ROM２０６、RAM(Random Access Memory)２０７が接続される。制御部２０１には、撮影部２０８、編集部２０９、事後接客部２１０、および印刷部２１１の各構成も接続される。
【０１８２】
制御部２０１においては、所定のプログラムが実行されることによって、図１の構成を有する画像処理部１００１が実現される。カメラ９１により撮影が行われることによって得られた撮影画像が画像処理部１００１の撮影画像取得部１０１１により取得され、記憶部２０２に記憶されている背景画像や影色背景画像が背景画像取得部１０１４により取得される。
【０１８３】
画像処理部１００１の合成部１０１３により生成された合成画像は、合成部１０１３からタッチパネルモニタ９３やタブレット内蔵モニタ１３１に供給され、表示される。利用者は、自分の影が写り込んでいる合成画像を見ることができる。
【０１８４】
記憶部２０２は、ハードディスクやフラッシュメモリなどの不揮発性の記憶媒体からなり、制御部２０１から供給された各種の設定情報を記憶する。記憶部２０２に記憶されている情報は制御部２０１により適宜読み出される。
【０１８５】
通信部２０３はインターネットなどのネットワークのインタフェースであり、制御部２０１による制御に従って外部の装置と通信を行う。
【０１８６】
ドライブ２０４には、光ディスクや半導体メモリなどよりなるリムーバブルメディア２０５が適宜装着される。ドライブ２０４によりリムーバブルメディア２０５から読み出されたコンピュータプログラムやデータは、制御部２０１に供給され、記憶部２０２に記憶されたり、インストールされたりする。
【０１８７】
ROM２０６には、制御部２０１において実行されるプログラムやデータが記憶されている。RAM２０７は、制御部２０１が処理するデータやプログラムを一時的に記憶する。
【０１８８】
撮影部２０８は、撮影空間Ａ１における撮影処理を行う構成である硬貨処理部２２１、背景制御部２２２、照明制御部２２３、カメラ９１、タッチパネルモニタ９３、およびスピーカ２２４から構成される。
【０１８９】
硬貨処理部２２１は、硬貨投入返却口８７に対する硬貨の投入を検出する。硬貨処理部２２１は、３００円などの所定の金額分の硬貨が投入されたことを検出した場合、そのことを表す起動信号を制御部２０１に出力する。
【０１９０】
背景制御部２２２は、制御部２０１より供給される背景制御信号に従って背景カーテンユニット２５に収納されている背景カーテンの上げ下ろしを行う。背景カーテンの選択が利用者により手動で行われるようにしてもよい。
【０１９１】
照明制御部２２３は、制御部２０１より供給される照明制御信号に従って、撮影空間Ａ１内の各ストロボの発光を制御する。
【０１９２】
カメラ９１は、制御部２０１による制御に従って撮影を行い、撮影によって得られた画像を制御部２０１に出力する。
【０１９３】
編集部２０９Ａは、編集空間Ａ２−１における編集処理を行う構成として編集部１２の正面側に設けられるタブレット内蔵モニタ１３１、タッチペン１３２Ａ，１３２Ｂ、およびスピーカ２３１から構成される。編集部２０９Ｂも編集部２０９Ａと同一の構成を有しており、編集空間Ａ２−２における編集処理を行う。
【０１９４】
タブレット内蔵モニタ１３１は、制御部２０１による制御に従って編集画面を表示し、編集画面に対する利用者の操作を検出する。利用者の操作の内容を表す信号は制御部２０１に供給され、編集対象の撮影画像の編集が行われる。
【０１９５】
事後接客部２１０は、事後接客空間Ａ３における事後接客処理を行う構成であるタブレット内蔵モニタ１６１、タッチペン１６２Ａ，１６２Ｂ、非接触型ICリーダ／ライタ１６３、およびスピーカ１６５から構成される。
【０１９６】
印刷部２１１は、印刷処理を行う構成であるプリンタ２４１、およびシール紙ユニット２４２から構成される。プリンタ２４１は、撮影画像、または編集処理によって得られた編集済みの画像を、プリンタ２４１に装着されたシール紙ユニット２４２に収納されているシール紙に印刷し、シール紙排出口１６４に排出する。一点鎖線で囲んで示す事後接客部２１０と印刷部２１１が、事後接客空間Ａ３にいる利用者を相手とした処理を行う構成となる。
【０１９７】
［写真シール機の動作］
ここで、図２８のフローチャートを参照して、写真シール作成ゲームを提供する写真シール機１の処理について説明する。
【０１９８】
ステップＳ１において、写真シール機１の制御部２０１は、所定の金額分の硬貨が投入されたか否かを硬貨処理部２２１から供給される信号に基づいて判定し、投入されたと判定するまで待機する。
【０１９９】
硬貨が投入されたとステップＳ１において判定した場合、ステップＳ２において、制御部２０１は、撮影部２０８を制御し、本撮影処理を行う。本撮影処理により、撮影空間Ａ１にいる利用者を被写体として撮影が行われる。本撮影処理については図２９のフローチャートを参照して後述する。
【０２００】
ステップＳ３において、制御部２０１は被写体の画像処理を行う。被写体の画像処理により、本撮影処理によって得られた撮影画像の明るさの調整などの各種の処理が行われる。被写体の画像処理については図３２のフローチャートを参照して後述する。
【０２０１】
ステップＳ４において、制御部２０１は、撮影空間Ａ１にいる利用者に対して、編集空間Ａ２−１または編集空間Ａ２−２への移動を案内する。編集空間Ａ２−１または編集空間Ａ２−２への移動の案内は、撮影部２０８のタッチパネルモニタ９３に画面を表示させることによって、または音声をスピーカ２２４から出力させることによって行われる。
【０２０２】
ステップＳ５において、制御部２０１は、撮影画像の画像処理を行う。撮影画像の画像処理は、編集対象画像として選択された撮影画像に合成する画像を利用者に選択させ、選択された画像を撮影画像に合成したりする処理である。撮影画像の画像処理については図３５のフローチャートを参照して後述する。
【０２０３】
ステップＳ６において、制御部２０１は、編集部２０９Ａまたは編集部２０９Ｂを制御し、編集処理を行う。制御部２０１は、編集画面をタブレット内蔵モニタ１３１に表示させ、利用者による編集操作に従って、編集対象として選択された撮影画像の編集を行う。編集が終了したとき、制御部２０１は、印刷する画像の選択画面をタブレット内蔵モニタ１３１に表示させ、印刷する画像を利用者に選択させる。印刷する画像の選択画面には、撮影画像や編集済みの画像が表示され、その中から所定の枚数の画像が選択される。
【０２０４】
ステップＳ７において、制御部２０１は、編集空間Ａ２−１または編集空間Ａ２−２で編集処理を終えた利用者に対して事後接客空間Ａ３への移動を案内する。事後接客空間Ａ３への移動の案内は、タブレット内蔵モニタ１３１に画面を表示させることによって、または音声をスピーカ２３１から出力させることによって行われる。
【０２０５】
ステップＳ８において、制御部２０１は、事後接客部２１０を制御し、事後接客処理を行う。例えば、撮影画像や編集済みの画像を携帯端末に送信する処理を事後接客処理として行う場合、制御部２０１は、携帯端末の電子メールアドレスの入力画面や、送信する画像の選択画面をタブレット内蔵モニタ１６１に表示させ、利用者による操作に応じて画像を送信する。また、ミニゲームを利用者に行わせる処理を事後接客処理として行う場合、制御部２０１は、ミニゲームの画面をタブレット内蔵モニタ１６１に表示させる。アンケートに答えさせる処理を事後接客処理として行う場合、制御部２０１は、アンケート画面をタブレット内蔵モニタ１６１に表示させ、利用者による回答を取得する。
【０２０６】
ステップＳ８において事後接客処理を行うことと並行して、ステップＳ９において、制御部２０１は印刷処理を行う。制御部２０１は、利用者により選択された画像をプリンタ２４１に出力してシール紙に印刷させる。
【０２０７】
印刷が終了したとき、ステップＳ１０において、プリンタ２４１は、画像が印刷されたシール紙をシール紙排出口１６４に排出し、処理を終了させる。
【０２０８】
次に、図２９のフローチャートを参照して、図２８のステップＳ２において行われる本撮影処理について説明する。
【０２０９】
ステップＳ２１において、制御部２０１は、写り選択画面をタッチパネルモニタ９３に表示させ、利用者による写り選択を受け付ける。写り選択は、色合いやシャープネス等の、撮影画像の画質の選択である。制御部２０１は、利用者により選択された写りに応じて、カメラ９１により撮影された画像の画質を調整する。
【０２１０】
ステップＳ２２において、制御部２０１は、撮影方法の案内画面をタッチパネルモニタ９３に表示させる。撮影方法の案内画面を表示した後、制御部２０１は、カメラ９１を制御し、画像の取り込みを開始させる。
【０２１１】
ステップＳ２３において、制御部２０１は、カメラ９１により取り込まれた動画像をタッチパネルモニタ９３に表示させる（ライブビュー表示を行う）。
【０２１２】
図３０は、ライブビュー表示の例を示す図である。ライブビュー表示の画面のほぼ中央にはカメラ９１により取り込まれた動画像である画像５０１が表示され、その周りには、ポーズの取り方を案内するメッセージなどが表示されている。
【０２１３】
ライブビュー表示の画面に表示される画像５０１は、例えば１段目の合成処理を行うことによって得られた合成画像である。制御部２０１の画像処理部１００１は、カメラ９１により取り込まれた動画像を構成する各画像を撮影画像として１段目の合成処理を行うことになる。１段目の合成処理を行うことによって生成された例えば図８の合成画像Ａ、図９の合成画像Ｃなどの合成画像が、タッチパネルモニタ９３に供給され、画像５０１として表示される。
【０２１４】
２段目の合成処理を行うことによって得られた合成画像がライブビュー表示の画面に表示されるようにしてもよい。合成処理に用いられる背景画像は、利用者により選択されるようにしてもよいし、写真シール機１により自動的に選択されるようにしてもよい。
【０２１５】
ステップＳ２４において、制御部２０１は、タッチパネルモニタ９３にカウントダウンインジケータを表示し、撮影タイミングを利用者に通知する。
【０２１６】
撮影タイミングになったとき、ステップＳ２５において、制御部２０１は、カメラ９１を制御して撮影を行い、静止画像である撮影画像を取得する。
【０２１７】
ステップＳ２６において、制御部２０１は、撮影画像をタッチパネルモニタ９３に表示し、撮影結果を利用者に確認させる。
【０２１８】
図３１は、撮影結果の確認画面の例を示す図である。撮影結果の確認画面のほぼ中央には撮影画像である画像５１１が表示され、その周りには、撮影結果であることを案内するメッセージなどが表示されている。
【０２１９】
撮影結果の確認画面に表示される画像５１１は、例えば２段目の合成処理を行うことによって得られた合成画像である。制御部２０１の画像処理部１００１は、撮影タイミングに合わせてカメラ９１により取り込まれた撮影画像を対象として２段階合成処理を行うことになる。２段階合成処理を行うことによって最終的に生成された例えば図８の合成画像Ｂ、図９の合成画像Ｄなどの合成画像が、タッチパネルモニタ９３に供給され、画像５１１として表示される。
【０２２０】
ステップＳ２７において、制御部２０１は、撮影を所定回数繰り返し行ったか否かを判定する。制御部２０１は、撮影を所定回数行っていないとステップＳ２７において判定した場合、ステップＳ２３に戻り、以上の処理を繰り返し行う。
【０２２１】
一方、撮影を６回などの所定の回数繰り返し行ったとステップＳ２７において判定した場合、ステップＳ２８において、制御部２０１は、撮影可能時間内であるか否かを判定する。例えば、本撮影処理を開始してからの時間が、本撮影処理に割り当てられた時間を経過していない場合、撮影可能時間内であるとして判定される。
【０２２２】
撮影可能時間内であるとステップＳ２８において判定した場合、ステップＳ２９において、制御部２０１は、ボーナス撮影の案内画面をタッチパネルモニタ９３に表示させる。ボーナス撮影は、ステップＳ２５において行われる通常の撮影と異なる形で行われる撮影であり、例えば、カメラ９１により取り込まれた動画像に対して合成用の画像がリアルタイムで合成され、その合成結果の画像がライブビュー表示される。
【０２２３】
ステップＳ３０において、制御部２０１は、動画像に合成する合成用の画像である撮影用合成用画像を例えば記憶部２０２から読み出す。撮影用合成用画像が予め決められているのではなく、複数種類の画像の中から撮影用合成用画像を利用者に選択させるようにしてもよい。
【０２２４】
ステップＳ３１において、制御部２０１は、カメラ９１により取り込まれた動画像の各画像に撮影用合成用画像を合成し、合成結果をタッチパネルモニタ９３に表示させてライブビュー表示を行う。図３０を参照して説明した場合と同様に、ボーナス撮影時のライブビュー表示の画面に、１段目の合成処理によって得られた合成画像、または２段目の合成処理によって得られた合成画像が表示されるようにしてもよい。
【０２２５】
ステップＳ３２において、制御部２０１はボーナス撮影を行う。すなわち、制御部２０１は、タッチパネルモニタ９３にカウントダウンインジケータを表示し、撮影タイミングを利用者に通知する。
【０２２６】
撮影タイミングになったとき、ステップＳ３３において、制御部２０１は、カメラ９１を制御して撮影を行い、撮影画像を取得する。
【０２２７】
ステップＳ３４において、制御部２０１は、ボーナス撮影によって得られた撮影画像をタッチパネルモニタ９３に表示し、撮影結果を利用者に確認させる。図３１を参照して説明した場合と同様に、ボーナス撮影時の撮影結果の確認画面に、２段階合成処理によって得られた合成画像が表示されるようにしてもよい。
【０２２８】
ボーナス撮影の結果の確認が行われた後、またはステップＳ２８において撮影可能時間内ではないと判定された場合、図２８のステップＳ２に戻り、それ以降の処理が行われる。
【０２２９】
次に、図３２のフローチャートを参照して、図２８のステップＳ３において行われる被写体の画像処理について説明する。
【０２３０】
ステップＳ４１において、制御部２０１は、撮影画像に写る利用者の目のサイズの選択に用いられる目サイズ選択画面をタッチパネルモニタ９３に表示させ、利用者による選択を受け付ける。例えば、制御部２０１は、本撮影処理によって得られた複数の撮影画像（利用者が被写体として写っている画像）の中から所定の撮影画像を選択し、選択した撮影画像に写る利用者の目を検出する。制御部２０１は、検出した目のサイズを変えることによって、写っている目のサイズが異なる複数の画像を生成し、目サイズ選択画面に表示させる。利用者は、自分が実際に写っている画像を見て目のサイズを選択することができる。
【０２３１】
図３３は、利用者自身が写されている撮影画像を使用して、被写体（利用者）の目のサイズを選択するのに用いられる目サイズ選択画面の例を示す図である。
【０２３２】
目サイズ選択画面には、本撮影処理によって得られた撮影画像５２１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、目サイズ選択画面には、６枚の撮影画像である撮影画像５２１−１乃至５２１−６が、画面の中央から左側の位置に表示される。
【０２３３】
撮影画像５２１−１乃至５２１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２３４】
撮影画像５２１−１乃至５２１−６の上方には、利用者自身が写されている撮影画像５２１−１乃至５２１−６により目のサイズの確認ができることを示す「目の大きさを自分の顔で確認してね」の文字が表示されている。
【０２３５】
目サイズ選択画面の右側には、目サイズ選択ボタン５２２−１乃至５２２−３が上から順に表示される。目サイズ選択ボタン５２２−１には、「ナチュラルｅｙｅ」という文字と、目のサイズが自然な大きさのモデルの目の画像とが表示されている。目サイズ選択ボタン５２２−２には、「パッチリｅｙｅ」という文字と、目のサイズが若干大きな（例えば、自然な大きさよりも１割程度大きな）モデルの目の画像とが表示されている。また、目サイズ選択ボタン５２２−２には、この大きさの目サイズを選択することが推奨されることを示唆する「おすすめ」の文字がハート形の図形とともに表示されている。
【０２３６】
目サイズ選択ボタン５２２−３には、「ボリュームｅｙｅ」という文字と、目のサイズが比較的大きな（例えば、自然な大きさよりも２割程度大きな）モデルの目の画像とが表示されている。また、目サイズ選択ボタン５２２−１乃至５２２−３の右方には、上から下に向かう矢印が表示されるとともに、その矢印の上方に「natural」という文字が表示され、その矢印の下方に「big」という文字が表示されている。つまり、目サイズ選択ボタン５２２−１、目サイズ選択ボタン５２２−２、および目サイズ選択ボタン５２２−３の順に下に向かうにしたがって、目サイズが大きくなることを示している。
【０２３７】
また、目サイズ選択画面の右下には、目のサイズの選択を決定するときに操作される決定ボタン５２３が表示されており、決定ボタン５２３には、「決定」という文字が表示されている。なお、目サイズ選択画面の上辺には、目のサイズの選択に用いられる画面であることを示す「目の大きさを選んでね！」という文字が表示される。また、目サイズ選択画面の右上側の「Time」と表示されている箇所には、目のサイズの選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２３８】
このような目サイズ選択画面がタッチパネルモニタ９３に表示され、利用者が、目サイズ選択ボタン５２２−１乃至５２２−３のいずれかを選択すると、制御部２０１は、利用者による選択を受け付ける。そして、制御部２０１は、利用者により選択されたサイズの目が写されている画像になるように、撮影画像５２１−１乃至５２１−６の被写体の目のサイズを一括して変更する。
【０２３９】
例えば、利用者が、目サイズ選択ボタン５２２−１を選択すると、制御部２０１は、画像から被写体の目を検出して、撮影画像５２１−１乃至５２１−６の被写体の目のサイズが自然な大きさとなるように変更する画像処理を施す。そして、制御部２０１は、その変更が反映された撮影画像５２１−１乃至５２１−６で目サイズ選択画面の表示を更新する。このとき、制御部２０１は、本撮影処理によって得られた全ての撮影画像５２１に対して、それぞれの撮影画像５２１に複数の被写体が写されていれば、その全ての被写体の目サイズを変更する画像処理を一括で施す画像処理を行う。
【０２４０】
同様に、利用者が、目サイズ選択ボタン５２２−２を選択すると、制御部２０１は、撮影画像５２１−１乃至５２１−６の被写体の目のサイズが若干大きくなるように変更し、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。また、利用者が、目サイズ選択ボタン５２２−３を選択すると、制御部２０１は、撮影画像５２１−１乃至５２１−６に写る利用者の目のサイズが比較的大きくなるように変更し、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。
【０２４１】
そして、利用者が、目のサイズの選択を行った後に決定ボタン５２３を選択すると、その時点で撮影画像５２１−１乃至５２１−６に反映されていた大きさで、被写体の目のサイズの選択が決定される。
【０２４２】
このように、写真シール機１では、目のサイズが選択されると、制御部２０１は、撮影画像５２１−１乃至５２１−６の被写体の目のサイズを変更する画像処理を行って、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。従って、利用者は、目のサイズの変更が反映された利用者自身が表示される撮影画像５２１−１乃至５２１−６を確認しながら、最適な目のサイズを選択することができる。これにより、写真シール機１では、所望の目サイズとなるように画像処理が施された利用者が写る撮影画像５２１−１乃至５２１−６を提供することができる。
【０２４３】
なお、図３３では、予め用意されたモデルの目の画像が目サイズ選択ボタン５２２−１乃至５２２−３に表示されているが、例えば、撮影画像５２１−１乃至５２１−６に写されているいずれかの被写体（利用者自身）の目を使用してもよい。即ち、撮影画像５２１−１乃至５２１−６から、被写体の目を含む所定範囲を切り出して、その切り出した画像の目の大きさを適宜変更して目サイズ選択ボタン５２２−１乃至５２２−３に表示することができる。また、目のサイズの変更には、例えば、目の大きさ自体を変更する他、黒目の大きさを変更したり、まつ毛のボリュームを変更したりすることが含まれる。
【０２４４】
図３２の説明に戻り、ステップＳ４２において、制御部２０１は、利用者による操作に応じて目のサイズを選択する。
【０２４５】
ステップＳ４３において、制御部２０１は、利用者により選択されたサイズの目が写っている画像になるように、全ての撮影画像に写る利用者の目のサイズを一括して変更する。
【０２４６】
ステップＳ４４において、制御部２０１は、目のサイズを変更した撮影画像をタッチパネルモニタ９３に表示し、目のサイズの変更結果を利用者に確認させる。
【０２４７】
ステップＳ４５において、制御部２０１は、決定ボタン５２３が押されたか否かをタッチパネルモニタ９３から供給された情報に基づいて判定し、押されていないと判定した場合、ステップＳ４２に戻り、以上の処理を繰り返す。
【０２４８】
一方、決定ボタンが押されたとステップＳ４５において判定した場合、ステップＳ４６において、制御部２０１は、目のサイズを決定し、決定した目のサイズを表す情報を記憶部２０２などに記憶させて保存する。被写体の画像処理の終了後にタブレット内蔵モニタ１３１に表示される編集対象画像の選択画面や編集画面には、利用者により選択されたサイズで利用者の目が写っている撮影画像が表示される。
【０２４９】
ステップＳ４７において、制御部２０１は、撮影画像の明るさの選択に用いられる明るさ選択画面をタッチパネルモニタ９３に表示させ、利用者による選択を受け付ける。例えば、制御部２０１は、本撮影処理によって得られた複数の撮影画像の中から所定の撮影画像を選択し、選択した撮影画像の明るさを変えることによって明るさの異なる複数の画像を生成する。制御部２０１は、生成した複数の画像を明るさ選択画面に表示させ、画像の明るさを利用者に選択させる。利用者は、自分が実際に写っている画像を見て画像の明るさを選択することができる。
【０２５０】
図３４は、利用者自身が写されている撮影画像を使用して、被写体の明るさを選択するのに用いられる明るさ選択画面の例を示す図である。
【０２５１】
明るさ選択画面には、本撮影処理によって得られた撮影画像５３１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、明るさ選択画面には、６枚の撮影画像である撮影画像５３１−１乃至５３１−６が、画面の中央から左側の位置に表示される。
【０２５２】
撮影画像５３１−１乃至５３１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２５３】
また、撮影画像５３１−１乃至５３１−６の上方には、利用者自身が写されている撮影画像５３１−１乃至５３１−６により被写体の明るさの確認ができることを示す「明るさを自分の顔で確認してね」の文字が表示されている。
【０２５４】
明るさ選択画面の右側には、明るさ選択ボタン５３２−１乃至５３２−５が上から順に表示される。明るさ選択ボタン５３２−１乃至５３２−５には、「１」から「５」までの数値がそれぞれ表示されているとともに、明るさの異なるモデルがそれぞれ表示されている。明るさ選択ボタン５３２−１乃至５３２−５の「１」から「５」までの数値は、明るさの程度を示しており、数値が大きくなるほど被写体が暗い色合いとなる。
【０２５５】
また、明るさ選択ボタン５３２−３には、標準の（自然な）明るさのモデルの画像が表示されている。そして、明るさ選択ボタン５３２−２には、若干明るい色合いの（例えば、自然な明るさよりも１割程度明るさを増加した）モデルの画像が表示され、明るさ選択ボタン５３２−１には、比較的明るい色合いの（例えば、自然な明るさよりも２割程度明るさを増加した）モデルの画像が表示される。一方、明るさ選択ボタン５３２−４には、若干暗い色合いの（例えば、自然な明るさよりも１割程度明るさを低減した）モデルの画像が表示され、明るさ選択ボタン５３２−５のモデルは、比較的暗い色合いの（例えば、自然な明るさよりも２割程度明るさを低減した）モデルの画像が表示される。
【０２５６】
また、明るさ選択ボタン５３２−１乃至５３２−５の右方には、上から下に向かって順に、「美白」、「おすすめ」、および「美黒」という文字が表示されている。つまり、明るさ選択ボタン５３２−１乃至５３２−５の並びにおいて、上側が被写体を明るくし、下側が被写体を暗くすることを示している。
【０２５７】
また、明るさ選択画面の右下側には、被写体の明るさを決定するときに操作される決定ボタン５３３が表示されており、決定ボタン５３３には、「決定」という文字が表示されている。なお、明るさ選択画面の上辺には、被写体の明るさの選択に用いられる画面であることを示唆する「好きな明るさを選んでね！」という文字が表示される。また、明るさ選択画面の右上側の「Time」と表示されている箇所には、被写体の明るさの選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２５８】
このような明るさ選択画面がタッチパネルモニタ９３に表示され、利用者が、明るさ選択ボタン５３２−１乃至５３２−５のいずれかを選択すると、制御部２０１は、利用者による選択を受け付ける。そして、制御部２０１は、利用者により選択された明るさで被写体が写されている画像になるように、撮影画像５３１−１乃至５３１−６の被写体の明るさを一括して変更する画像処理を行う。
【０２５９】
例えば、利用者が、明るさ選択ボタン５３２−３を選択すると、制御部２０１は、画像から被写体を検出して、撮影画像５３１−１乃至５３１−６の被写体の明るさが自然な明るさとなるように変更する画像処理を施す。そして、制御部２０１は、その変更が反映された撮影画像５３１−１乃至５３１−６で明るさ選択画面の表示を更新する。このとき、制御部２０１は、本撮影処理によって得られた全ての撮影画像５３１に対して、それぞれの撮影画像５３１に複数の被写体が写されていれば、その全ての被写体の明るさを変更する画像処理を一括で施す。
【０２６０】
同様に、利用者が、明るさ選択ボタン５３２−２を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが若干明るくなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。また、利用者が、明るさ選択ボタン５３２−１を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが比較的明るくなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。一方、利用者が、明るさ選択ボタン５３２−４を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが若干暗くなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。また、利用者が、明るさ選択ボタン５３２−５を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが比較的暗くなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。
【０２６１】
そして、利用者が、被写体の明るさの選択を行った後に決定ボタン５３３を選択すると、その時点で撮影画像５３１−１乃至５３１−６に反映されていた明るさで、被写体の明るさの選択が決定される。
【０２６２】
このように、写真シール機１では、被写体の明るさが選択されると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさを変更する画像処理を行って、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。従って、利用者は、明るさの変更が反映された利用者自身が表示される撮影画像５３１−１乃至５３１−６を確認しながら、最適な被写体の明るさを選択することができる。これにより、写真シール機１では、所望の明るさとなるように画像処理が施された利用者が写る撮影画像５３１−１乃至５３１−６を提供することができる。
【０２６３】
なお、図３４では、予め用意されたモデルの顔の画像が明るさ選択ボタン５３２−１乃至５３２−５に表示されているが、例えば、撮影画像５３１−１乃至５３１−６に写されているいずれかの被写体（利用者自身）の顔を使用してもよい。即ち、撮影画像５３１−１乃至５３１−６から、被写体の顔を含む所定範囲を切り出して、その切り出した画像の被写体の明るさを適宜変更して明るさ選択ボタン５３２−１乃至５３２−５に表示することができる。
【０２６４】
また、被写体の明るさを選択する処理が、上述したような被写体の目のサイズを選択する処理の後に行われる場合、撮影画像５３１−１乃至５３１−６には、目のサイズの変更が反映された被写体が表示される。
【０２６５】
図３２の説明に戻り、ステップＳ４８において、制御部２０１は、利用者による操作に応じて明るさを選択する。
【０２６６】
ステップＳ４９において、制御部２０１は、利用者により選択された明るさの画像になるように、全ての撮影画像の明るさを一括して変更する。
【０２６７】
ステップＳ５０において、制御部２０１は、明るさを変更した撮影画像をタッチパネルモニタ９３に表示し、明るさの変更結果を利用者に確認させる。
【０２６８】
ステップＳ５１において、制御部２０１は、決定ボタン５３３が押されたか否かをタッチパネルモニタ９３から供給された情報に基づいて判定し、押されていないと判定した場合、ステップＳ４８に戻り、以上の処理を繰り返す。
【０２６９】
一方、決定ボタンが押されたとステップＳ５１において判定した場合、ステップＳ５２において、制御部２０１は、画像の明るさを決定し、決定した明るさを表す情報を記憶部２０２などに記憶させて保存する。被写体の画像処理の終了後にタッチパネルモニタ９３に表示される編集対象の画像の選択画面やタブレット内蔵モニタ１３１に表示される編集画面には、利用者により選択された明るさの撮影画像が表示される。
【０２７０】
このように、被写体の画像処理は、撮影画像に写る利用者の目のサイズと撮影画像の明るさを選択する処理である。その後、図２８のステップＳ３に戻り、それ以降の処理が行われる。
【０２７１】
次に、図３５のフローチャートを参照して、図２８のステップＳ５において行われる撮影画像の画像処理について説明する。撮影画像の画像処理は、編集空間Ａ２−１、または編集空間Ａ２−２にいる利用者を対象として行われる処理である。
【０２７２】
ステップＳ６１において、制御部２０１は、編集対象画像の選択画面をタブレット内蔵モニタ１３１に表示させ、利用者による選択を受け付ける。
【０２７３】
図３６は、利用者自身が写されている撮影画像を使用して、編集対象の画像を選択するのに用いられる選択画面の例を示す図である。
【０２７４】
編集対象画像の選択画面には、本撮影処理によって得られた撮影画像５４１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、編集対象画像の選択画面には、６枚の撮影画像である撮影画像５４１−１乃至５４１−６が、画面の中央から左側の位置に表示される。
【０２７５】
撮影画像５４１−１乃至５４１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２７６】
撮影画像５４１−１乃至５４１−６の上方には、利用者自身が写されている撮影画像５４１−１乃至５４１−６の中から編集対象の画像を選択できることを示す「落書きする画像を選んでね」の文字が表示されている。
【０２７７】
編集対象画像の選択画面の右側には、撮影画像５４１−１乃至５４１−６の全ての撮影画像を編集対象画像として選択するときに操作される全部選択ボタン５４２と、撮影画像５４１−１乃至５４１−６のうちの所定の撮影画像を編集対象画像として選択するときに操作される決定ボタン５４３とが表示される。全部選択ボタン５４２を押したとき、撮影画像５４１−１乃至５４１−６の全ての撮影画像が編集対象画像として保存され、撮影画像５４１−１乃至５４１−６のうちの所定の撮影画像を選択した状態で決定ボタン５４３を押したとき、選択している撮影画像が編集対象画像として保存される。
【０２７８】
図３５の説明に戻り、ステップＳ６２において、制御部２０１は、編集対象画像として図３６の選択画面から選択された撮影画像を記憶部２０２に記憶させて保存する。
【０２７９】
ステップＳ６３において、制御部２０１は、撮影用合成用画像の選択画面をタブレット内蔵モニタ１３１に表示させる。
【０２８０】
図３７は、撮影画像に写されている被写体の背景に用いる撮影用合成用画像を選択するのに用いられる撮影用合成用画像の選択画面の例を示す図である。
【０２８１】
上述したように、２段階合成処理を行うことによって得られた合成画像は、本撮影処理時や被写体の画像処理時、または編集対象画像の選択時に表示される。撮影用合成用画像を選択時にも複数の背景画像に合成するようにして２段階合成処理が行われ、図３７の選択画面が表示される。
【０２８２】
撮影用合成用画像の選択画面には、撮影用合成用画像の分類ボタンの表示領域である表示領域５５１、合成画像の表示領域である表示領域５５２、および、撮影画像と選択済みの合成画像の表示領域である表示領域５５３が設けられる。
【０２８３】
表示領域５５１には、ノーマルボタン５５４、柄ボタン５５５、およびセットボタン５５６が表示される。図３７の例では、黒色で反転表示されているノーマルボタン５５４が選択されている。
【０２８４】
ノーマルボタン５５４および柄ボタン５５５は、予め用意された複数の撮影用合成用画像の中から、利用者が、所望の撮影用合成用画像を選択するときに操作される。ノーマルボタン５５４を選択することにより、各種の色からなる撮影用合成用画像の中から所望の撮影用合成用画像を選択することができる。また、柄ボタン５５５を選択することにより、各種の柄からなる撮影用合成用画像の中から所望の撮影用合成用画像を選択することができる。
【０２８５】
セットボタン５５６は、複数の撮影用合成用画像のセットの中から、利用者が所望の撮影用合成用画像のセットを選択するときに操作される。撮影用合成用画像のセットは、例えば、各種の色および柄からなる複数種類の撮影用合成用画像の中から、撮影枚数（例えば、６枚）に従って、任意の種類の撮影用合成用画像が組み合わされて、予め用意されている。
【０２８６】
表示領域５５２には複数の合成画像が表示される。合成画像は、２段階合成処理のうちの１段目の合成処理を行うことによって生成された合成結果の画像である。２段階合成処理によって最終的に得られた合成画像が表示領域５５２に表示されるようにしてもよい。
【０２８７】
表示領域５５３には、撮影画像と選択済みの合成画像が表示される。撮影画像と選択済みの合成画像は、２段階合成処理のうちの１段目の合成処理を行うことによって生成された合成結果の画像である。２段階合成処理によって最終的に得られた合成画像が表示領域５５３に表示されるようにしてもよい。
【０２８８】
表示領域５５１に表示されているボタンを操作することによって撮影用合成用画像が選択された場合、制御部２０１の画像処理部１００１は、表示領域５５３において選択されている撮影画像を取得し、上述したようにしてマスク画像を生成する。画像処理部１００１は、撮影画像に写る利用者の部分と影の部分をマスク画像を用いて抽出し、選択されたそれぞれの撮影用合成用画像に合成することによって複数の合成画像を生成し、表示領域５５２に並べて表示させる。
【０２８９】
図３７の例では、それぞれ異なる色の撮影用合成用画像を背景画像として用いて１段目の合成処理を行うことによって得られた２７枚（３行×９列）の合成画像が表示領域５５２に示されている。
【０２９０】
例えば、利用者が、合成画像の表示領域５５２に表示されている複数の合成画像の中から、任意の合成画像を選択すると、その合成画像に合成されている撮影用合成用画像が選択される。そして、利用者により選択された合成画像には、既に選択されたことを示唆する「済」のマークが表示される。また、直前に選択された合成画像には、利用者が選択したばかりであることを示唆する「SELECT」の文字が表示される。
【０２９１】
表示領域５５３には、表示領域５５２から選択された合成画像である合成画像５５７と、６枚の撮影画像のうち、撮影用合成用画像がまだ選択されていない撮影画像である撮影画像５５８が表示される。図３７の例では、表示領域５５３には、合成画像５５７−１乃至５５７−４と、撮影画像５５８−５，５５８−６が表示されている。また、合成画像５５７−１乃至５５７−４の下には、キャンセルボタン５５９−１乃至５５９−４がそれぞれ表示されている。
【０２９２】
例えば、撮影用合成用画像の選択画面が最初に表示されたときには、表示領域５５３には６枚の撮影画像５５８が表示される。なお、表示領域５５３では、本撮影処理によって撮影された順番で左側から順に撮影画像５５８が表示され、左端に表示された撮影画像５５８から順に合成画像の選択が行われる。表示領域５５３に表示される撮影画像５５８は、上述した被写体の画像処理により、被写体の目のサイズと明るさが変更された画像である。
【０２９３】
利用者が、１枚目の撮影画像５５８に対して、合成画像の表示領域５５２に表示されている複数の合成画像の中から、所望の合成画像を選択することにより、その合成画像に合成されている撮影用合成用画像が選択される。これに従って、１枚目の撮影画像５５８の表示が、利用者により選択された合成画像５５７−１に更新される。つまり、１枚目の撮影画像５５８に替えて、１枚目の撮影画像５５８の被写体の背景に、利用者により選択された撮影用合成用画像が合成された合成画像５５７−１が表示される。さらに、合成画像５５７−１の下方に、キャンセルボタン５５９−１が表示される。
【０２９４】
以下、同様に、利用者が、２枚目の撮影画像５５８、３枚目の撮影画像５５８、および４枚目の撮影画像５５８に対して撮影用合成用画像を順番に選択すると、その選択に従って、合成画像５５７−２乃至５５７−４がそれぞれ表示される。さらに、合成画像５５７−２乃至５５７−４の下に、キャンセルボタン５５９−２乃至５５９−４がそれぞれ表示される。
【０２９５】
このように、図３７には、４枚目の撮影画像５５８に対して撮影用合成用画像が選択された時点での撮影用合成用画像の選択画面が示されている。
【０２９６】
従って、この撮影用合成用画像の選択画面では、撮影画像５５８−５に対する撮影用合成用画像の選択が行われる。そのことを示すため、撮影画像５５８−５を囲うように枠５６０が表示されるとともに、撮影画像および合成画像の表示領域５５３の上方に「５枚目の背景を選んでね！」という文字が表示される。
【０２９７】
また、撮影画像および合成画像の表示領域５５３の左方には、キャンセルボタン５５９により選択済みの撮影用合成用画像のキャンセルができることを示す「キャンセルボタンで選んだ背景をキャンセルできるよ」という文字が表示されている。即ち、キャンセルボタン５５９を操作することで、その上方に表示されている合成画像５５７に合成されている撮影用合成用画像の選択をキャンセルして、撮影用合成用画像を選び直すことができる。また、撮影用合成用画像の選択画面の右上側の「Time」と表示されている箇所には、撮影用合成用画像の選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２９８】
合成画像の表示領域５５２の右側には、人を消すボタン５６１が表示されている。
【０２９９】
人を消すボタン５６１は、表示領域５５２に表示されている合成画像を、被写体が合成されていない状態に表示を変更する際に操作される。例えば、通常、表示領域５５２には、撮影画像の被写体と撮影用合成用画像とが合成された合成画像が表示されるが、被写体によって撮影用合成用画像の色や柄を確認し難い場合があると想定される。そのような場合には、利用者が人を消すボタン５６１を操作することで、表示領域５５２には撮影用合成用画像（つまり、背景のみ）が表示されることになり、利用者が、撮影用合成用画像の色や柄を確認し易くなる。
【０３００】
また、人を消すボタン５６１が操作され、表示領域５５２に撮影用合成用画像が表示されるのと同時に、人を消すボタン５６１に表示されていた文字は「人を表示する」に変更される。そして、表示領域５５２の表示が撮影用合成用画像であるときに、利用者が人を消すボタン５６１を操作すると、表示領域５５２が元に戻り、図３７に示すように、被写体の背景に撮影用合成用画像が合成された合成画像が表示領域５５２に表示される。
【０３０１】
図３５の説明に戻り、ステップＳ６４において、制御部２０１は、図３７の選択画面に対する利用者の操作に応じて撮影用合成用画像を決定する。
【０３０２】
ステップＳ６５において、制御部２０１は、撮影画像の画像処理を開始してから所定の時間が経過したか否かを判定し、所定の時間が経過していないと判定した場合、ステップＳ６４以降の処理を繰り返す。一方、制御部２０１は、所定の時間が経過したと判定した場合、図２８のステップＳ５に戻り、それ以降の処理を行う。
【０３０３】
このように、写真シール作成ゲームを提供する一連の処理においては、利用者が写っている画像を表示するために２段階合成処理が複数回行われる。これにより、利用者の影が写り込んでいるリアリティのある合成画像を利用者に確認させることができる。なお、２段階合成処理によって生成された合成画像に対しては、適宜、編集処理において編集が施され、編集が施された合成画像がシール紙に印刷される。
【０３０４】
［写真シール機の外観構成］
図３８は、写真シール機１の外観の他の構成例を示す斜視図である。上述した構成と同じ構成には同じ符号を付してある。図１の画像処理部１００１が、図３８の写真シール機１において実現される。図３８の写真シール機１においても、図１８の写真シール機１において行われるのと同様にして２段階合成処理が行われる。
【０３０５】
図３８に示すように、写真シール機１は、主に、撮影ユニット１１、編集部１２、および事中接客部３０１から構成される。編集部１２と事中接客部３０１が接した状態で設置され、撮影ユニット１１は、編集部１２と事中接客部３０１から離れた位置に設置される。
【０３０６】
撮影ユニット１１は、撮影部２１と背景部２２から構成される。撮影部２１と背景部２２は所定の距離だけ離れて設置され、撮影部２１と背景部２２の間に形成される撮影空間において撮影処理が行われる。
【０３０７】
撮影部２１は撮影処理を利用者に行わせる装置である。撮影部２１は、撮影空間に入り、撮影処理を行っている利用者の正面に位置する。撮影空間を正面に望む面を構成する撮影部２１の正面パネル４１には、撮影処理時に利用者により用いられるタッチパネルモニタなどが設けられる。撮影空間にいる利用者から見て左側の面を左側面、右側の面を右側面とすると、撮影部２１の左側面が側面パネル４２Ａにより構成され、右側面が側面パネル４２Ｂにより構成される。
【０３０８】
背景部２２は、正面を向いて撮影処理を行っている利用者の背面側に位置する板状の部材である背面パネル５１から構成される。背景部２２の上部には、背面パネル５１に支持される形で背景カーテンユニット２５が設けられる。背景カーテンユニット２５には、色または柄の異なる、背景に利用する巻き取り式の背景カーテンが複数収納される。背景カーテンユニット２５は、撮影部２１に設けられたカメラ等による撮影と連動して動作し、撮影の際に、例えば利用者により選択された色のカーテンを下ろし、その他のカーテンを巻き取る。
【０３０９】
撮影部２１の左側面を構成する側面パネル４２Ａの上部と背景カーテンユニット２５は、板状の部材である連結部２３Ａによって連結される。また、撮影部２１の右側面を構成する側面パネル４２Ｂの上部と背景カーテンユニット２５は、板状の部材である連結部２３Ｂによって連結される。
【０３１０】
撮影部２１の側面パネル４２Ａ、連結部２３Ａ、および背景部２２の背面パネル５１に囲まれることによって形成される開口が撮影空間の出入り口Ｇ１となる。撮影部２１の側面パネル４２Ｂ、連結部２３Ｂ、および背景部２２の背面パネル５１に囲まれることによって形成される開口も撮影空間の出入り口Ｇ２となる。
【０３１１】
撮影空間の上方には、撮影部２１の正面パネル４１、連結部２３Ａ、連結部２３Ｂ、および背景カーテンユニット２５に囲まれる開口が形成され、その開口の一部を覆うように天井ストロボユニット２４が設けられる。天井ストロボユニット２４の一端が連結部２３Ａに固定され、他端が連結部２３Ｂに固定される。天井ストロボユニット２４は、撮影に合わせて撮影空間内に向けて発光するストロボを内蔵する。天井ストロボユニット２４を構成するストロボの内部には蛍光灯が設けられており、撮影空間の照明としても機能する。
【０３１２】
正面パネル４１の背面側には、所定の距離だけ離れた位置に、正面パネル４１の背面に対して正面が向くように事中接客部３０１が設けられる。事中接客部３０１は、事中接客処理を利用者に行わせる装置である。事中接客処理として、上述した被写体の画像処理が行われる。図３８の写真シール機１の利用者は、撮影処理に含まれる本撮影処理と被写体の画像処理のうち、本撮影処理のみを撮影空間で行い、被写体の画像処理については、事中接客部３０１の正面前方に形成される事中接客空間で行うことになる。
【０３１３】
事中接客部３０１は、所定の厚さを有する板状の筐体を有しており、その背面が編集部１２の右側面に接するように編集部１２に連結して設けられる。事中接客部３０１の正面には、事中接客処理時に利用者により用いられるタブレット内蔵モニタが設けられる。
【０３１４】
事中接客部３０１の上方には連結レール３０２が取り付けられる。連結レールは３本のレール３０２Ａ乃至３０２Ｃを組み合わせて構成される。レール３０２Ａの一端は連結部２３Ａに固定され、他端は、レール３０２Ａの延長上にあるカーテンレール２６のレール２６Ａと接合される。レール３０２Ｂの一端は連結部２３Ｂに固定され、他端は、レール３０２Ｂの延長上にあるカーテンレール２６のレール２６Ｂと接合される。レール３０２Ｃの一端は、レール３０２Ａとレール２６Ａの接合部に接合され、他端は、レール３０２Ｂとレール２６Ｂの接合部に接合される。
【０３１５】
図３８に示す編集部１２の構成を正面側の構成とすると、レール３０２Ｃには、事中接客空間と編集部１２の正面側の編集空間とを仕切る仕切りカーテン３０３Ａ、および、事中接客空間と編集部１２の背面側の編集空間とを仕切る仕切りカーテン３０３Ｂが取り付けられる。仕切りカーテン３０３Ａと３０３Ｂは、事中接客部３０１の正面とほぼ平行に取り付けられる。
【０３１６】
事中接客空間と編集空間を仕切るカーテンが事中接客部３０１の正面とほぼ平行に取り付けられることにより、事中接客部３０１の正面に設けられるタブレット内蔵モニタ１６１などを用いて事中接客処理を終えた利用者は、その向きのまま、編集空間に移動することができる。また、仕切りカーテン３０３Ａと３０３Ｂを、各空間にいる利用者の足元が見える高さに取り付けることによって、編集空間への移動を容易に行わせることができる。仕切りカーテン３０３Ａと３０３Ｂの代わりに、事中接客空間と編集空間を仕切るパネルを設けてもよい。
【０３１７】
編集部１２は、撮影処理によって得られた画像を編集する処理である編集処理を利用者に行わせる装置である。編集部１２には、編集処理時に利用者により用いられるタブレット内蔵モニタなどの構成が設けられる。２組の利用者が同時に編集処理を行うことができるように、編集部１２の正面側と背面側には編集処理に用いられる構成がそれぞれ設けられる。
【０３１８】
編集部１２の正面側は、床面に対して垂直な面であり、側面パネル４２Ａとほぼ平行な面である面７１と、面７１の上方に形成された斜面７２から構成され、編集処理に用いられる構成が斜面７２に設けられる。斜面７２の左側には、柱状の形状を有し、照明装置７４の一端を支持する支持部７３Ａが設けられる。支持部７３Ａの上面にはカーテンレール２６を支持する支持部７５が設けられる。斜面７２の右側にも、照明装置７４の他端を支持する支持部７３Ｂ（図４０）が設けられる。
【０３１９】
編集部１２の上方にはカーテンレール２６が取り付けられる。カーテンレール２６は、上から見たときの形状がコの字状となるように３本のレール２６Ａ乃至２６Ｃを組み合わせて構成される。レール２６Ａの一端は、連結レールのレール３０２Ａと接合され、レール２６Ａの他端はレール２６Ｃの一端と接合される。レール２６Ｂの一端は、連結レールのレール３０２Ｂと接合され、レール２６Ｂの他端はレール２６Ｃの他端と接合される。
【０３２０】
カーテンレール２６には、編集部１２の正面前方の空間と背面前方の空間の内部が外から見えないようにカーテンが取り付けられる。カーテンレール２６に取り付けられたカーテンにより囲まれる編集部１２の正面前方の空間と背面前方の空間が、利用者が編集処理を行う空間である編集空間となる。
【０３２１】
図３９は、カーテンを取り付けた状態の写真シール機１の外観を示す図である。
【０３２２】
図３９に示すように、撮影空間の出入り口Ｇ１には側面カーテン６３が取り付けられる。反対側の出入り口である出入り口Ｇ２にも図示せぬ側面カーテンが取り付けられる。撮影空間の出入り口Ｇ１およびＧ２に取り付けられる側面カーテンの少なくとも内側の色は黒色などの暗い色とされる。
【０３２３】
また、撮影空間の上方に形成される開口のうち、天井ストロボユニット２４を挟んで前方の部分は天井前方カーテン６１で覆われ、後方の部分は天井後方カーテン６２で覆われる。天井前方カーテン６１の少なくとも内側の色は黒色などの暗い色とされ、天井後方カーテン６２の少なくとも内側の色は白色などの明るい色とされる。
【０３２４】
事中接客空間の上方に設けられるレール３０２Ａにはカーテン３１１Ａが取り付けられ、レール３０２Ｂにはカーテン３１１Ｂが取り付けられる。編集空間の上方に設けられるレール２６Ａにはカーテン３１２Ａが取り付けられ、レール２６Ｂにはカーテン３１２Ｂが取り付けられる。
【０３２５】
図４０は、図３８の写真シール機１を別の角度から見た斜視図である。
【０３２６】
編集部１２の左側面７６には、撮影画像や編集済みの画像が印刷されたシール紙が排出されるシール紙排出口１６４が設けられる。編集部１２の左側面７６の前方の空間が、利用者がシール紙の印刷が終わるのを待つ印刷待ち空間となる。
【０３２７】
ここで、図３８の写真シール機１により提供される写真シール作成ゲームの流れと、それに伴う利用者の移動について図４１を参照して説明する。図４１は、写真シール機１を上から見た平面図である。
【０３２８】
写真シール機１の利用者は、白抜き矢印＃１１で示すように出入り口Ｇ１から、または白抜き矢印＃１２で示すように出入り口Ｇ２から、撮影部２１と背景部２２の間に形成された撮影空間Ａ１に入り、撮影部２１に設けられたカメラやタッチパネルモニタなど利用して撮影処理のうちの本撮影処理を行う。
【０３２９】
本撮影処理を終えた利用者は、白抜き矢印＃１３で示すように出入り口Ｇ１を使って撮影空間Ａ１から出て事中接客空間Ａ１１に移動するか、白抜き矢印＃１４で示すように出入り口Ｇ２を使って撮影空間Ａ１から出て事中接客空間Ａ１１に移動し、被写体の画像処理を行う。
【０３３０】
被写体の画像処理を終えた利用者は、白抜き矢印＃１５で示すように事中接客空間Ａ１１から出て編集空間Ａ２−１に移動するか、白抜き矢印＃１６で示すように事中接客空間Ａ１１から出て編集空間Ａ２−２に移動する。
【０３３１】
編集空間Ａ２−１は、編集部１２の正面側の編集空間であり、編集空間Ａ２−２は、編集部１２の背面側の編集空間である。編集空間Ａ２−１と編集空間Ａ２−２のいずれの空間に移動するのかが、事中接客部３０１のタッチパネルモニタの画面表示などによって案内される。例えば２つの編集空間のうちの空いている方の空間が移動先として案内される。編集空間Ａ２−１または編集空間Ａ２−２に移動した利用者は編集処理を開始する。編集空間Ａ２−１の利用者と、編集空間Ａ２−２の利用者は同時に編集処理を行うことができる。
【０３３２】
編集処理が終了した後、撮影画像や編集済みの画像の中から選択された画像の印刷が開始される。画像の印刷中、編集処理を終えた利用者は、編集空間Ａ２−１で編集処理を行っていた場合には白抜き矢印＃１７で示すように編集空間Ａ２−１から印刷待ち空間Ａ１２に移動して印刷が終わるのを待つ。また、編集処理を終えた利用者は、編集空間Ａ２−２で編集処理を行っていた場合には白抜き矢印＃１８で示すように編集空間Ａ２−２から印刷待ち空間Ａ１２に移動し、印刷待ち空間Ａ１２において印刷が終わるのを待つ。
【０３３３】
画像の印刷が終了したとき、利用者は、編集部１２の左側面７６に設けられたシール紙排出口１６４からシール紙を受け取り、一連の写真シール作成ゲームを終えることになる。
【０３３４】
このように、事中接客空間Ａ１１を設け、被写体の画像処理を、本撮影処理を行う撮影空間Ａ１とは別の空間である事中接客空間Ａ１１で行わせることにより、被写体の画像処理を利用者に集中して行わせることが可能になる。また、撮影空間Ａ１では本撮影処理のみを行わせることにより、本撮影処理にも利用者を集中させることが可能になる。
【０３３５】
本撮影処理と被写体の画像処理を撮影空間Ａ１で行わせ、編集対象画像の選択などの、撮影画像の編集前の処理を事中接客空間Ａ１１で行わせるようにしてもよい。
【０３３６】
［各装置の構成］
次に、各装置の構成について説明する。撮影部２１の正面の構成は図２２および図２３に示す構成と同じである。また、背景部２２の撮影空間Ａ１側の構成は図２４に示す構成と同じである。
【０３３７】
図４２は、編集部１２の正面側（編集空間Ａ２−１側）の構成例を示す図である。
【０３３８】
斜面７２のほぼ中央には、タブレット内蔵モニタ１３１が設けられる。タブレット内蔵モニタ１３１を挟んで左側にタッチペン１３２Ａが設けられ、右側にタッチペン１３２Ｂが設けられる。
【０３３９】
タブレット内蔵モニタ１３１は、タッチペン１３２Ａまたは１３２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１３１には、例えば、編集対象画像として選択された撮影画像の編集に用いられる画面である編集画面が表示される。２人で同時に編集作業を行う場合、タッチペン１３２Ａは一方の利用者により用いられ、タッチペン１３２Ｂは他方の利用者により用いられる。
【０３４０】
編集部１２の右側には事中接客部３０１が設けられる。
【０３４１】
図４３は、編集部１２の左側面の構成例を示す図である。
【０３４２】
編集部１２の左側面７６にはシール紙排出口１６４が設けられる。シール紙排出口１６４には、編集空間Ａ２−１の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙、または、編集空間Ａ２−２の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙が排出される。編集部１２の内部にはプリンタが設けられており、画像の印刷がそのプリンタにより行われる。
【０３４３】
編集空間Ａ２−２側の斜面７７には、斜面７２に設けられる図４２の構成と同じ構成が設けられる。
【０３４４】
図４４は、事中接客部３０１の正面の構成例を示す図である。
【０３４５】
事中接客部３０１の構成は、シール紙排出口１６４が設けられていない点を除いて事後接客部１３の構成と同じである。事中接客部３０１の上方中央にはタブレット内蔵モニタ１６１が設けられる。タブレット内蔵モニタ１６１を挟んで左側にタッチペン１６２Ａが設けられ、右側にタッチペン１６２Ｂが設けられる。タブレット内蔵モニタ１６１もタブレット内蔵モニタ１３１と同様に、タッチペン１６２Ａまたは１６２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。
【０３４６】
タブレット内蔵モニタ１６１の下には非接触型ICリーダ／ライタ１６３が設けられ、非接触型ICリーダ／ライタ１６３の下方にはスピーカ１６５が設けられる。非接触型ICリーダ／ライタ１６３は、近接された非接触型ICと通信を行い、非接触型ICからのデータの読み出しや非接触型ICに対するデータの書き込みを行う。スピーカ１６５は、事中接客処理の案内音声、BGM、効果音等の音を出力する。
【０３４７】
［写真シール機の内部構成］
図４５は、図３８の写真シール機１の内部の構成例を示すブロック図である。図２７を参照して説明した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。
【０３４８】
制御部２０１においては、所定のプログラムが実行されることによって、図１の構成を有する画像処理部１００１が実現される。カメラ９１により撮影が行われることによって得られた撮影画像が画像処理部１００１の撮影画像取得部１０１１により取得され、記憶部２０２に記憶されている背景画像や影色背景画像が背景画像取得部１０１４により取得される。
【０３４９】
事中接客部３５１は、事中接客空間Ａ１１における事中接客処理を行う構成であるタブレット内蔵モニタ１６１、タッチペン１６２Ａ，１６２Ｂ、非接触型ICリーダ／ライタ１６３、およびスピーカ１６５から構成される。
【０３５０】
［写真シール機の動作］
ここで、図４６のフローチャートを参照して、写真シール作成ゲームを提供する図３８の写真シール機１の処理について説明する。
【０３５１】
ステップＳ１０１において、写真シール機１の制御部２０１は、所定の金額分の硬貨が投入されたか否かを硬貨処理部２２１から供給される信号に基づいて判定し、投入されたと判定するまで待機する。
【０３５２】
硬貨が投入されたとステップＳ１０１において判定した場合、ステップＳ１０２において、制御部２０１は、撮影部２０８を制御し、本撮影処理を行う。図２９のフローチャートを参照して説明したように、本撮影処理により、撮影空間Ａ１にいる利用者を被写体として撮影が行われる。
【０３５３】
ステップＳ１０３において、制御部２０１は、撮影空間Ａ１にいる利用者に対して、事中接客空間Ａ１１への移動を案内する。事中接客空間Ａ１１への移動の案内は、撮影部２０８のタッチパネルモニタ９３に画面を表示させることによって、または音声をスピーカ２２４から出力させることによって行われる。
【０３５４】
ステップＳ１０４において、制御部２０１は、事中接客部３５１を制御し、事中接客空間Ａ１１にいる利用者による操作に応じて被写体の画像処理を行う。図３２のフローチャートを参照して説明した被写体の画像処理により、本撮影処理によって得られた撮影画像に写る利用者の目のサイズの選択と、撮影画像の明るさの選択が事中接客空間Ａ１１にいる利用者によって行われる。目のサイズの選択に用いられる選択画面と、撮影画像の明るさの調整に用いられる選択画面は事中接客部３０１のタブレット内蔵モニタ１６１に表示される。
【０３５５】
ステップＳ１０５において、制御部２０１は、事中接客空間Ａ１１にいる利用者に対して、編集空間Ａ２−１または編集空間Ａ２−２への移動を案内する。編集空間Ａ２−１または編集空間Ａ２−２への移動の案内は、事中接客部３５１のタブレット内蔵モニタ１６１に画面を表示させることによって、または音声をスピーカ１６５から出力させることによって行われる。
【０３５６】
ステップＳ１０６において、制御部２０１は、図３５のフローチャートを参照して説明した撮影画像の画像処理を行う。
【０３５７】
ステップＳ１０７において、制御部２０１は、編集部２０９Ａまたは編集部２０９Ｂを制御し、編集処理を行う。制御部２０１は、編集画面をタブレット内蔵モニタ１３１に表示させ、利用者による編集操作に従って、編集対象として選択された撮影画像の編集を行う。編集が終了したとき、制御部２０１は、印刷する画像の選択画面をタブレット内蔵モニタ１３１に表示させ、印刷する画像を利用者に選択させる。印刷する画像の選択画面には、撮影画像や編集済みの画像が表示され、その中から所定の枚数の画像が選択される。
【０３５８】
ステップＳ１０８において、制御部２０１は、編集空間Ａ２−１または編集空間Ａ２−２で編集処理を終えた利用者に対して印刷待ち空間Ａ１２への移動を案内する。印刷待ち空間Ａ１２への移動の案内は、タブレット内蔵モニタ１３１に画面を表示させることによって、または音声をスピーカ２３１から出力させることによって行われる。印刷待ち空間Ａ１２への移動を案内する前、事後接客処理が編集空間Ａ２−１または編集空間Ａ２−２において行われるようにしてもよい。
【０３５９】
ステップＳ１０９において、制御部２０１は印刷処理を行う。制御部２０１は、利用者により選択された画像をプリンタ２４１に出力してシール紙に印刷させる。
【０３６０】
印刷が終了したとき、ステップＳ１１０において、プリンタ２４１は、画像が印刷されたシール紙をシール紙排出口１６４に排出し、処理を終了させる。
【０３６１】
なお、非接触型ICリーダ／ライタ１６３を、事中接客部３０１ではなく編集部１２に設けるようにしてもよい。また、図１８の写真シール機１のように、図３８の写真シール機１にも図２６のような構成を有する事後接客部１３を設けるようにしてもよい。
【０３６２】
以上のように、図３８の外観構成を有する写真シール機１において２段階合成処理が行われるようにすることも可能である。撮影画像の画像処理が事中接客空間Ａ１１にいる利用者を対象として行われるようにしてもよい。
【０３６３】
本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０３６４】
１ 写真シール機， １１ 撮影ユニット， １２ 編集部， １３ 事後接客部， ２１ 撮影部， ２２ 背景部， １００１ 画像処理部， １０１１ 撮影画像取得部， １０１２ マスク画像生成部， １０１３ 合成部， １０１４ 背景画像取得部
【技術分野】
【０００１】
本発明は、特に、人物の影が写るリアリティのある合成画像を作成することができるようにした画像処理装置および画像処理方法に関する。
【背景技術】
【０００２】
利用者を撮影し、撮影画像に対して利用者に編集を行わせ、編集後の画像をシール紙に印刷して提供する写真シール機が知られている。このような写真シール機は娯楽（遊戯）施設等に設置される。
【０００３】
写真シール機によって提供される１ゲームの流れは、通常、撮影空間内にいる利用者を被写体として撮影し、利用者を編集空間に移動させ、編集空間内で行われる操作に従って画像を編集し、編集後の画像である編集画像をシール紙に印刷して排出するという流れになる。例えば撮影空間は、写真シール機の筐体自体やカーテンなどにより外部から仕切られている。
【０００４】
このような写真シール機の中には、撮影空間における撮影処理時に、カメラにより取り込んだ画像から利用者の領域を抽出し、抽出した領域と、合成用画像とをリアルタイムで合成して表示する機能が搭載されているものがある。これにより、利用者は、撮影空間には実際にない風景と自分たちが合成された合成画像を見たり、静止画として保存したりすることが可能になる。
【０００５】
カメラにより取り込んだ画像から利用者の領域を抽出するための処理として、通常、マスク画像を用いたクロマキ処理が行われる。
【０００６】
特許文献１には、被写体の輪郭の外側に向かうにつれて階調を変化させたマスクパターンを使用することによって、被写体と背景画像との境界部における色調を段階的に変化させる技術が開示されている。
【０００７】
特許文献２には、撮影画像と背景画像を合成する際、撮影画像を２値化することによって得られたマスク画像の輪郭をぼかし、背景画像の彩度と明度が反映するようにマスク画像の輪郭の色調を補正する技術が開示されている。
【０００８】
特許文献３には、２値化したマスク画像を縮小した画像（縮小マスク画像）と、マスク画像を拡大した画像（拡大マスク画像）を作成し、縮小マスク画像と拡大マスク画像の差分領域に光彩（グロー）効果やぼかし処理等の画像処理を施す技術が開示されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】実用新案登録第３０５８６６４号
【特許文献２】特開２０００−２２４４１０号公報
【特許文献３】特開２００６−０６０７１９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
上述した技術によれば、被写体の輪郭付近にぼかし処理等の画像処理を施すことによって背景画像と被写体が滑らかに合成された合成画像を得ることができるが、その合成画像は、利用者の背中側にある壁面に投影される利用者自身の影が消えてしまうことによってリアリティのない、不自然な仕上がりの画像になってしまう。
【００１１】
本発明はこのような状況に鑑みてなされたものであり、人物の影が写るリアリティのある合成画像を作成することができるようにするものである。
【課題を解決するための手段】
【００１２】
本発明の画像処理装置は、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させる第１のマスク画像を生成するマスク画像生成手段と、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する合成手段とを備える。
【００１３】
前記マスク画像生成手段には、前記撮影画像の各画素の色に基づいて、前記被写体の部分と、前記被写体の影の部分と、それ以外の部分とを検出し、前記第１のマスク画像を生成させることができる。
【００１４】
前記合成手段には、前記第１のマスク画像を用いて抽出した前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成して得られた合成画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、再度、前記背景画像に合成させることができる。
【００１５】
前記合成手段には、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成させることができる。
【００１６】
前記色背景画像は、前記背景画像の色と同じ色の物に投影する影の色の画像であるようにすることができる。
【００１７】
前記合成手段には、前記撮影画像の撮影モードに応じて明るさを変えた前記色背景画像を用いさせることができる。
【００１８】
前記マスク画像生成手段には、前記撮影画像に基づいて、前記被写体の部分を透過させるとともに前記被写体の輪郭の周りの一定の部分を所定の透過率で透過させる第２のマスク画像を生成させ、前記合成手段には、前記撮影画像から、前記被写体の部分と前記被写体の輪郭の周りの部分とを前記第２のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成させることができる。
【００１９】
前記合成手段には、前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成する前に、前記被写体の影の部分の色の調整を行わせることができる。
【００２０】
前記マスク画像生成手段には、前記第１のマスク画像を加工させ、前記合成手段には、加工された前記第１のマスク画像を用いて、前記被写体の部分と前記被写体の影の部分とを抽出させることができる。
【００２１】
前記マスク画像生成手段には、前記第１のマスク画像の加工として、前記第１のマスク画像のコントラストをトーンカーブに従って調整する処理と、前記第１のマスク画像の輪郭をぼかす処理とのうちの少なくともいずれかの処理を行わせることができる。
【００２２】
本発明の画像処理方法は、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像を生成し、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成するステップを含む。
【００２３】
本発明においては、撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像が生成される。また、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出され、前記被写体の背景となる画像である背景画像に合成される。
【発明の効果】
【００２４】
本発明によれば、人物の影が写るリアリティのある合成画像を作成することができる。
【図面の簡単な説明】
【００２５】
【図１】画像処理部の構成例を示すブロック図である。
【図２】カメラによる撮影の様子を示す図である。
【図３】合成処理の第１の例を示す図である。
【図４】図３の撮影画像を拡大して示す図である。
【図５】図３のマスク画像を拡大して示す図である。
【図６】従来のマスク画像とマスク画像生成部により生成されるマスク画像を示す図である。
【図７】図３の合成画像を拡大して示す図である。
【図８】合成処理の第２の例を示す図である。
【図９】合成処理の第３の例を示す図である。
【図１０】合成処理の第５の例を示す図である。
【図１１】合成処理の第６の例を示す図である。
【図１２】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第１の例を示す図である。
【図１３】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第２の例を示す図である。
【図１４】マスク画像の加工の例を示す図である。
【図１５】１段目の合成処理と２段目の合成処理とで異なるマスク画像を用いる場合の２段階合成処理の第３の例を示す図である。
【図１６】マスク画像の加工の例を示す図である。
【図１７】合成処理に用いるマスク画像の組み合わせの例について説明する図である。
【図１８】写真シール機の外観の構成例を示す斜視図である。
【図１９】カーテンを取り付けた状態の写真シール機の外観を示す斜視図である。
【図２０】写真シール機の外観を他の角度からみた斜視図である。
【図２１】利用者の移動について説明する図である。
【図２２】撮影部の構成例を示す図である。
【図２３】撮影部の色について説明する図である。
【図２４】背景部の構成例を示す図である。
【図２５】編集部の構成例を示す図である。
【図２６】事後接客部の構成例を示す図である。
【図２７】写真シール機の内部の構成例を示すブロック図である。
【図２８】写真シール作成ゲームを提供する処理について説明するフローチャートである。
【図２９】図２８のステップＳ２において行われる本撮影処理について説明するフローチャートである。
【図３０】撮影空間における画面表示の例を示す図である。
【図３１】撮影空間における画面表示の例を示す図である。
【図３２】図２８のステップＳ３において行われる被写体の画像処理について説明するフローチャートである。
【図３３】撮影空間における画面表示の例を示す図である。
【図３４】撮影空間における画面表示の例を示す図である。
【図３５】図２８のステップＳ５において行われる撮影画像の画像処理について説明するフローチャートである。
【図３６】編集空間における画面表示の例を示す図である。
【図３７】編集空間における画面表示の例を示す図である。
【図３８】写真シール機の他の外観の構成例を示す斜視図である。
【図３９】カーテンを取り付けた状態の図３８の写真シール機の外観を示す斜視図である。
【図４０】図３８の写真シール機の外観を他の角度からみた斜視図である。
【図４１】利用者の移動について説明する図である。
【図４２】編集部の正面の構成例を示す図である。
【図４３】編集部の側面の構成例を示す図である。
【図４４】事中接客部の構成例を示す図である。
【図４５】図３８の写真シール機の内部の構成例を示すブロック図である。
【図４６】写真シール作成ゲームを提供する処理について説明するフローチャートである。
【発明を実施するための形態】
【００２６】
以下、本発明を実施するための形態について説明する。説明は以下の順序で行う。
１．合成処理について
２．写真シール機の構成と動作について
【００２７】
＜合成処理について＞
［画像処理部の構成例］
図１は、画像処理部１００１の構成例を示すブロック図である。図１の画像処理部１００１が、後述する写真シール機１において実現される。
【００２８】
画像処理部１００１は、撮影画像取得部１０１１、マスク画像生成部１０１２、合成部１０１３、および背景画像取得部１０１４により構成される。
【００２９】
撮影画像取得部１０１１は、カメラにより撮影された画像である撮影画像を取得する。図２はカメラによる撮影の様子を示す図であり、図２に示すように、パネルやカーテンなどを背景として、その壁面の前に立っている人物を撮影して得られた撮影画像が撮影画像取得部１０１１により取得される。
【００３０】
図２の例においては２人の人物が撮影を行っている。撮影画像取得部１０１１により取得された画像には２人の人物が写り、２人の人物の背景の色は、２人の人物の後方にある背景カーテンの色と同じ色になる。背景カーテンは、例えば、緑色などの一色のカーテンである。このようにして撮影され、撮影画像取得部１０１１により取得された撮影画像はマスク画像生成部１０１２と合成部１０１３に供給される。
【００３１】
マスク画像生成部１０１２は、撮影画像取得部１０１１から供給された撮影画像に基づいてマスク画像を生成し、合成部１０１３に出力する。マスク画像生成部１０１２が生成するマスク画像は、人物の部分を１００％の透過率で透過させるとともに、撮影時に背景カーテンに投影された人物の影の部分を所定の透過率で透過させるマスク画像である。
【００３２】
合成部１０１３は、マスク画像生成部１０１２により生成されたマスク画像を用いて、撮影画像取得部１０１１から供給された撮影画像に写る人物の部分と影の部分とを抽出する。また、合成部１０１３は、撮影画像から抽出した人物の部分と影の部分を、背景画像取得部１０１４から供給された背景画像に合成することによって合成画像を生成する。
【００３３】
合成部１０１３による画像の合成は、撮影画像から抽出した部分を、背景画像取得部１０１４から供給された背景画像の上に重ねるようにして行われる。合成画像には、人物の影の部分も含まれることになる。
【００３４】
背景画像取得部１０１４は、白色などの所定の色の画像や、柄のある画像を取得し、背景画像として合成部１０１３に出力する。背景画像は、撮影画像のサイズ（画素数）と同じサイズの画像であり、予め用意されている。
【００３５】
人物の影の部分を所定の透過率で抽出できるマスク画像を用いて合成を行うことによって、人物の影の部分を合成画像に含ませることができ、背景画像を実際に背景にして撮影したような、リアリティのある、自然な仕上がりの合成画像を作成することが可能になる。
【００３６】
［合成処理の第１の例］
図３は、画像処理部１００１による合成処理の第１の例を示す図である。
【００３７】
図３に示すように、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分が撮影画像から抽出され、抽出された人物の部分と影の部分が背景画像に合成されることによって合成画像が生成される。各画像について説明する。
【００３８】
図４は、図３の撮影画像を拡大して示す図である。撮影画像には２人の人物が写り、人物の輪郭より外側であって、人物の輪郭の近くには、ところどころに、撮影時に背景カーテンに投影した人物の影が写っている。図４において影を付して示すように、２人の人物の間や、それぞれの人物の足の間などに影が多く写ることになる。
【００３９】
また、撮影画像のうち、人物の輪郭の外側の部分には背景カーテンが写る。背景カーテンが写る部分の色は、人物の影が映っている部分を除いて、背景カーテンの色と同じ色になる。図４において斜めの格子を付して示す部分は背景カーテンが写っている部分を示す。背景カーテンに投影する人物の影であるから、影の部分の色は、背景カーテンの色を若干暗めにしたような色になる。
【００４０】
図５は、図３のマスク画像を拡大して示す図である。図４の撮影画像が撮影画像取得部１０１１により取得された場合、マスク画像生成部１０１２は、撮影画像のうち、背景カーテンの色と同じ色の部分と、背景カーテンの色を若干暗めにした色の部分と、それ以外の色の部分とを、各画素の画素値に基づいて検出する。
【００４１】
マスク画像生成部１０１２は、背景カーテンの色と同じ色の部分の透過率を０％、背景カーテンの色を若干暗めにした色の部分の透過率を所定の透過率、それ以外の色の部分の透過率を１００％とすることによって、図５に示すようなマスク画像を生成する。背景カーテンの色の部分と背景カーテンの色を若干暗めにした色の部分以外の部分は、人物が写る部分になる。
【００４２】
図５に示すマスク画像のうち、黒色の部分は、背景カーテンの色と同じ色の部分、すなわち透過率が０％である部分を表し、黒色と白色が混在している部分は、背景カーテンの色を若干暗めにした色の部分、すなわち透過率が所定の透過率である部分を表す。白色の部分（見え方によっては薄いチェック柄が付されているように見える部分）は、人物の部分、すなわち透過率が１００％の部分を表す。
【００４３】
なお、マスク画像生成部１０１２は、撮影画像に写る背景カーテンの色の暗さに応じて、対応する部分の透過率を変えるようにしてマスク画像を生成する。より暗い背景カーテンの色が検出された部分、すなわち明度の小さい部分は、その明度に応じて透過率が大きくなり、より明るい背景カーテンの色が検出された部分、すなわち明度の大きい部分は、その明度に応じて透過率が小さくなる。
【００４４】
マスク画像生成部１０１２が生成するマスク画像のうちの、撮影画像において背景カーテンが写っている部分に対応する部分の透過率は、その全体が均一の透過率というわけではなく、部分的な明度の違いに応じて異なる透過率になることになる。例えば上方から照明を当てた状態で撮影画像の撮影が行われた場合、より明度の高い背景カーテンの色が検出された画像の上の方に対応する部分の透過率はより低くなるとともに、より明度の低い背景カーテンの色が検出された画像の下の方に対応する部分の透過率はより高くなり、結果として、マスク画像生成部１０１２が生成するマスク画像においては、上下で透過率が異なることになる。
【００４５】
このように、マスク画像の生成は、背景カーテンの色と同じ色が検出された部分の透過率を０％にするようにして行われる。従来のマスク画像の生成方法によれば、背景カーテンの色として検出する色の明度の幅が広く、これにより、透過率が０％になる部分が比較的広くなるのに対して、マスク画像生成部１０１２は明度の幅を狭くして背景カーテンの色と同じ色の部分の検出を行うため、従来の方法により生成されるマスク画像と較べて、透過率が０％になる部分が狭いマスク画像が生成される。
【００４６】
図６は、従来のマスク画像と、マスク画像生成部１０１２により生成されるマスク画像を示す図である。図６の左側は従来のマスク画像を表し、右側はマスク画像生成部１０１２により生成されるマスク画像を表す。
【００４７】
図６の左側に示すように、従来のマスク画像においては、人物の輪郭全体を囲む一定の幅の部分が所定の透過率を有する部分となるのに対して、マスク画像生成部１０１２により生成されるマスク画像においては、人物の輪郭より外側であって、実際に人物の影が写っていた部分が所定の透過率を有する部分になる。例えば、人物の下方に光が当たりにくい環境で撮影を行う場合、人物の特に下半身の周りには影が多く写り、その影の部分が所定の透過率を有するマスク画像が生成されることになる。
【００４８】
図７は、図３の合成画像を拡大して示す図である。合成部１０１３は、図５のマスク画像を用いることによって、人物が写っている部分と、実際に背景カーテンに投影された人物の影が写っている部分とを撮影画像から抽出し、抽出した画像を、背景画像取得部１０１４から供給された背景画像に合成することによって図７の合成画像を生成する。
【００４９】
合成部１０１３は、撮影画像から抽出した人物の部分と影の部分とを背景画像に重ねて合成を行う。影の部分は所定の透過率を有する形で撮影画像から抽出されているから、合成画像のうちの影の部分の画素値は、撮影画像から抽出された影の部分の画素の画素値と、背景画像の対応する画素の画素値とを透過率に応じて混合した画素値となる。
【００５０】
図７に示すように、合成画像には、マスク画像を用いることによって撮影画像から抽出された２人の人物と、撮影時に背景カーテンに投影した２人の影が写る。また、人物と影の部分以外の部分は背景画像の色の部分になる。図７において、人物の背景となる白色の部分は、その部分が背景画像の色の部分であることを表す。
【００５１】
以上のようにして生成したマスク画像を用いることによって、人物が写っている部分と、実際に背景カーテンに投影された人物の影の部分とを撮影画像から抽出することが可能になる。また、撮影画像における影の写り方によっては半透明領域（所定の透過率を有する領域）が増えることになり、これにより、背景と人物との境界が滑らかになじんだ状態の合成画像を得ることが可能になる。
【００５２】
さらに、背景画像に人物の影が写り込んだリアリティのある合成画像を生成することが可能になる。
【００５３】
［合成処理の第２の例］
図８は、画像処理部１００１による合成処理の第２の例を示す図である。図８の合成処理においては、マスク画像を用いて人物の部分と影の部分を抽出し、他の画像に合成する処理が２回繰り返される。
【００５４】
図８の上段に示す１段目の合成処理は、図３に示す合成処理と同じ処理である。図３に示す合成処理によって得られた合成画像を合成画像Ａとする。
【００５５】
図８の合成処理によって合成画像を生成する場合、合成部１０１３は、矢印＃１の先に示すように、２段目の合成処理として、撮影画像からではなく合成画像Ａから、人物の部分と影の部分をマスク画像を用いて抽出する。２段目の合成処理に用いられるマスク画像は１段目の合成処理に用いられるマスク画像と同じ画像である。また、２段目の合成処理に用いられる背景画像は１段目の合成処理に用いられる背景画像と同じ画像である。
【００５６】
合成部１０１３は、１段目の合成処理に用いたマスク画像と同じマスク画像を用いて合成画像Ａから抽出した人物の部分と影の部分を背景画像に再度合成し、合成画像Ｂを生成する。
【００５７】
図３に示す合成処理の場合、合成画像に写る影の部分の色は、背景カーテンの色を若干暗めにした色と背景画像を混合した色になる。例えば影の部分の色が暗めの緑色であり、背景画像の色が赤色であるといったように、撮影画像から抽出された影の部分の色が、背景画像の色と同じ色の背景の前に立って撮影した場合に写る影の色と違う色である場合、合成画像に写る影が違和感のある影に見えてしまう。
【００５８】
図８に示すように、１段目の合成処理によって合成画像Ａを生成した後、マスク画像を用いて人物の部分と影の部分を合成画像Ａから抽出し、背景画像に再度合成することにより、合成画像Ｂに写る影の色を、違和感のない色にすることが可能になる。
【００５９】
以下、適宜、図８に示すように画像の合成を２回繰り返す合成処理を２段階合成処理という。
【００６０】
［合成処理の第３の例］
図９は、画像処理部１００１による合成処理の第３の例を示す図である。図９の合成処理においては、２段目の合成処理に用いる背景画像と異なる画像が、１段目の合成処理時に背景画像として用いられる。
【００６１】
図９の合成処理によって合成画像を生成する場合、背景画像取得部１０１４は、背景画像と、その背景画像に対応する影色背景画像を取得し、合成部１０１３に出力する。影色背景画像は、例えば背景画像の色と同じ色の平面の前に立って撮影した場合に写る影の色として想定される色の画像であり、背景画像と対応付けて背景画像取得部１０１４により予め管理されている。影色背景画像の色は、背景カーテンの色とは異なる色であり、例えば、背景画像の色を若干暗めにした色である。図９の影色背景画像や合成画像において垂直水平方向の格子を付して示す部分の色は、影色背景画像の色と同じ色の部分を表す。
【００６２】
図９の上段に示す１段目の合成処理は、背景画像の代わりに影色背景画像を用いる点を除いて、図８の１段目の合成処理と同じ処理である。
【００６３】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。合成画像Ｃに写る影の部分の色は、撮影画像から抽出された影の部分の色と、影色背景画像の色とを混合した色になる。
【００６４】
また、合成部１０１３は、矢印＃１１の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像を用いて抽出する。合成部１０１３は、１段目の合成処理に用いたマスク画像と同じマスク画像を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｄを生成する。
【００６５】
このように、背景画像に適した色の画像を影色背景画像として用意しておき、人物の影の色として背景画像の色ではなく影色背景画像の色を用いることにより、合成画像Ｄに写る影の色を、背景画像の色に対して違和感のない色にすることが可能になる。
【００６６】
例えば、背景画像がピンク色である場合、その背景画像に対して、撮影画像から抽出した灰色の影の部分を合成したときには影の部分が汚れに見えてしまうが、赤色や茶色などの、ピンク色を暗めにした色の画像を影色背景画像として用いることによって、ピンク色の背景画像に合成したときに違和感のない、赤色や茶色の影を背景画像に写り込ませることが可能になる。
【００６７】
［合成処理の第４の例］
撮影モードに応じて影色背景画像の色を変えるようにしてもよい。
【００６８】
例えば、逆光の雰囲気の画像を撮影するモードである逆光モードと、順光の雰囲気の画像を撮影するモードである順光モードが撮影モードとして用意されているものとする。被写体としての利用者（後述する写真シール機１の利用者）は、逆光モードと順光モードのうちのいずれかのモードを選択し、撮影を行うことになる。
【００６９】
例えば、逆光モードが選択された場合、影色背景画像として、順光モードが選択された場合に用いられる影色背景画像と同系色であるが、明るめの色の画像が選択され、図９を参照して説明した１段目の合成処理が行われる。
【００７０】
また、順光モードが選択された場合、影色背景画像として、逆光モードが選択された場合に用いられる影色背景画像と同系色であるが、暗めの色の画像が選択され、図９を参照して説明した１段目の合成処理が行われる。
【００７１】
例えば、背景画像がピンク色であるとすると、順光モードにおいては、暗めの茶色の影色背景画像が用いられ、逆光モードにおいては、明るめの赤色の影色背景画像が用いられる。背景画像取得部１０１４は、このような影色背景画像を撮影モードに応じて取得し、合成部１０１３に出力する。
【００７２】
２段目の合成処理を行って最終的に得られる合成画像に写る影の部分の色は、逆光モードである場合には明るめの色になり、順光モードである場合には暗めの色になる。
【００７３】
これにより、逆光で撮影したときに写る影や、順光で撮影したときに写る影を表現することができ、リアリティのある合成画像を生成することが可能になる。
【００７４】
［合成処理の第５の例］
図１０は、画像処理部１００１による合成処理の第５の例を示す図である。図１０の合成処理においては、２段目の合成処理に用いるマスク画像と異なるマスク画像を用いて１段目の合成処理が行われる。
【００７５】
図１０の合成処理によって合成画像を生成する場合、マスク画像生成部１０１２は、撮影画像の画素値に基づいて、背景カーテンと同じ色の部分と、それ以外の色の部分とを検出する。
【００７６】
マスク画像生成部１０１２は、背景カーテンと同じ色の部分以外の部分を人物の部分として、人物の部分を１００％の透過率で透過させるとともに、例えば人物の輪郭に沿って人物の周囲全体の一定の幅の部分を所定の透過率で透過させるマスク画像を生成する。背景カーテンが写る部分の透過率は０％になる。以下、適宜、人物の部分の透過率が１００％、人物の輪郭に沿って確保される一定の幅の部分の透過率が所定の透過率、背景カーテンの部分の透過率が０％のマスク画像を従来のマスク画像という。
【００７７】
図１０の上段に示す１段目の合成処理は、画像の抽出に用いるマスク画像が異なる点を除いて、図９の１段目の合成処理と同じ処理である。
【００７８】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成された従来のマスク画像を用いて、人物の部分と人物の周りの部分を撮影画像から抽出し、抽出した人物の部分と人物の周りの部分を影色背景画像に合成することによって合成画像Ｅを生成する。合成画像Ｅに写る人物の周りの部分の色は、撮影画像から抽出された人物の周りの部分の色と、影色背景画像の色とを混合した色になる。
【００７９】
また、合成部１０１３は、矢印＃２１の先に示すように、２段目の合成処理として、合成画像Ｅから、人物の部分と影の部分をマスク画像（図９のマスク画像と同じマスク画像）を用いて抽出する。合成部１０１３は、１段目の合成処理に用いた従来のマスク画像と異なるマスク画像を用いて合成画像Ｅから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｆを生成する。
【００８０】
従来のマスク画像は、人物の周りの部分を所定の透過率で透過させるものであるため、合成画像Ｅに写る人物の周りの色には影色背景画像の色が含まれる。合成画像Ｅから人物の部分と影の部分とをマスク画像を用いて抽出し、背景画像に合成することによっても、背景画像の色に適した色の影を背景画像に写り込ませることが可能になる。
【００８１】
［合成処理の第６の例］
図１１は、画像処理部１００１による合成処理の第６の例を示す図である。図１１の合成処理においては、１段目の合成処理と２段目の合成処理の間に、影の色を調整する処理が行われる。
【００８２】
図８の１段目の合成処理と２段目の合成処理の間に影の色を調整する場合について説明するが、図９、図１０の２段階合成処理においても、同様の処理を、１段目の合成処理と２段目の合成処理の間に行うようにすることが可能である。
【００８３】
図１１の合成処理によって合成画像を生成する場合、マスク画像生成部１０１２は、撮影画像に基づいて生成したマスク画像の白領域と黒領域を反転させることによって、図１１に示すような背景マスク画像を生成する。
【００８４】
合成部１０１３は、図８の１段目の合成処理が終了した後、１段目の合成処理によって得られた合成画像Ａから、背景の部分（人物以外の部分）を背景マスク画像に基づいて抽出する。合成部１０１３は、抽出した背景の部分の色を調整し、色を調整した背景の部分と人物の部分とを合成することによって、合成画像Ａ’を生成する。背景マスク画像を用いて抽出した人物の部分以外の背景の部分の色を調整することは、人物の影の部分の色をも調整することになる。
【００８５】
背景の部分の色の調整は、色相、彩度、明度のうちの少なくともいずれかを調整するようにして行われる。背景の部分の色をどのように調整するのかは、例えば背景画像に対応付けて予め決められており、背景画像の色と同じ色の平面に写る影の色として適した色になるような調整が行われる。合成部１０１３は、合成画像Ａ’を合成画像Ａとして用いて、図８の２段目の合成処理を行う。
【００８６】
このように、１段目の合成処理の合成結果から抽出した背景の部分の色相・彩度・明度を調整してから２段目の合成処理を行うことによっても、適した色の影を背景画像に写り込ませることが可能になる。
【００８７】
［合成処理の第７の例］
２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像を加工したマスク画像を使用するようにしてもよい。マスク画像の加工には次の処理が含まれる。
１．トーンカーブを用いたコントラスト調整
２．ぼかし処理
３．影の部分を対象としたぼかし処理
４．トーンカーブを用いたコントラスト調整とぼかし処理
５．トーンカーブを用いたコントラスト調整と影の部分を対象としたぼかし処理
【００８８】
１．トーンカーブを用いたコントラスト調整
図１２は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像のコントラストを調整して得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１２の処理は、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【００８９】
すなわち、合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【００９０】
マスク画像生成部１０１２は、矢印＃３１に示すように、１段目の合成処理に使用したマスク画像のコントラストを調整することによってマスク画像MA1を生成する。マスク画像MA1は、例えば、１段目の合成処理に使用したマスク画像と較べて、所定の透過率を有する部分、すなわち影の部分の面積が異なる画像であったり、各位置の透過率が異なる画像である。
【００９１】
合成部１０１３は、矢印＃３２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA1を用いて抽出する。合成部１０１３は、マスク画像MA1を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｇを生成する。
【００９２】
マスク画像のコントラストを調整することによって影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。
【００９３】
２．ぼかし処理
図１３は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像にぼかし処理を行うことによって得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１３の処理も、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【００９４】
すなわち、合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【００９５】
マスク画像生成部１０１２は、矢印＃４１に示すように、１段目の合成処理に使用したマスク画像を対象としてぼかし処理を行い、マスク画像MA2を生成する。マスク画像MA2は、例えば、１段目の合成処理に使用したマスク画像と較べて、人物の輪郭と影の輪郭がぼけた（コントラストが低い）画像である。
【００９６】
合成部１０１３は、矢印＃４２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA2を用いて抽出する。合成部１０１３は、マスク画像MA2を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｈを生成する。
【００９７】
これにより、マスク画像に含まれるノイズを除去することができ、滑らかな影を合成画像Ｃから抽出し、背景画像に合成することができる。また、人物の輪郭と影をぼかすことによって、柔らかい雰囲気の合成画像を生成することができる。
【００９８】
３．影の部分を対象としたぼかし処理
図１４は、マスク画像の加工の例を示す図である。図１４の処理により、図１３に示すようにしてマスク画像全体をぼかすのとは異なり、人物の輪郭を残しつつ、影の部分のみをぼかすことが可能になる。
【００９９】
はじめに、マスク画像生成部１０１２は、矢印＃５１に示すように、１段目の合成処理に使用したマスク画像を対象としてぼかし処理を行うことによって、人物の輪郭と影の輪郭がぼけた画像であるマスク画像MA2を生成する。図１４のマスク画像MA2は、図１３のマスク画像MA2と同じ画像である。
【０１００】
また、マスク画像生成部１０１２は、矢印＃５２に示すように、１段目の合成処理に使用したマスク画像と、マスク画像MA2との差（差の絶対値）を求め、差分画像を生成する。矢印＃５２の先に示す差分画像のうち、黒色の部分は、１段目の合成処理に使用したマスク画像とマスク画像MA2との差がない部分を表し、白色の部分は差がある部分を表す。
【０１０１】
マスク画像生成部１０１２は、矢印＃５３，＃５４，＃５５の先に示すように、１段目の合成処理に使用したマスク画像と差分画像とマスク画像MA2に基づいてマスク画像MA3を生成する。例えば、マスク画像生成部１０１２は、１段目の合成処理に使用したマスク画像に含まれる人物の輪郭を差分画像を用いて抽出し、抽出した輪郭をマスク画像MA2に合成することによってマスク画像MA3を生成する。
【０１０２】
マスク画像MA3は、人物の輪郭がマスク画像MA2よりはっきりとしているが、影の輪郭がマスク画像MA2の影の輪郭と同様にぼけた画像になる。合成部１０１３は、このようにしてマスク画像生成部１０１２により生成されたマスク画像MA3を用いて、図１３の２段目の合成処理を行うことになる。
【０１０３】
これにより、マスク画像に含まれるノイズを除去することができ、滑らかな影を抽出し、背景画像に合成することができる。また、影のみをぼかすことによって、人物の輪郭ははっきりとしつつも、影のみが柔らかい雰囲気の合成画像を生成することができる。
【０１０４】
４．トーンカーブを用いたコントラスト調整とぼかし処理
図１５は、２段目の合成処理に使用するマスク画像として、１段目の合成処理に使用したマスク画像のコントラストを調整した後、さらにぼかし処理を行って得られたマスク画像を使用する場合の２段階合成処理の例を示す図である。図１５の処理も、２段目の合成処理に使用するマスク画像が異なる点を除いて図９の処理と同様である。
【０１０５】
合成部１０１３は、１段目の合成処理として、撮影画像に基づいて生成されたマスク画像を用いて、人物の部分と影の部分を撮影画像から抽出し、抽出した人物の部分と影の部分を影色背景画像に合成することによって合成画像Ｃを生成する。
【０１０６】
マスク画像生成部１０１２は、矢印＃６１に示すように、１段目の合成処理に使用したマスク画像のコントラストを調整し、さらに、ぼかし処理を行うことによってマスク画像MA4を生成する。マスク画像MA4は、例えば、１段目の合成処理に使用したマスク画像と較べて、所定の透過率を有する部分、すなわち影の部分の面積が異なる画像であったり、各位置の透過率が異なる画像である。また、マスク画像MA4は、１段目の合成処理に使用したマスク画像と較べて、人物の輪郭と影の輪郭がぼけた画像である。
【０１０７】
合成部１０１３は、矢印＃６２の先に示すように、２段目の合成処理として、合成画像Ｃから、人物の部分と影の部分をマスク画像MA4を用いて抽出する。合成部１０１３は、マスク画像MA4を用いて合成画像Ｃから抽出した人物の部分と影の部分を背景画像に合成し、合成画像Ｉを生成する。
【０１０８】
マスク画像のコントラストを調整することにより影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。また、マスク画像に含まれるノイズを除去することができ、滑らかな影を抽出し、背景画像に合成することができる。
【０１０９】
５．トーンカーブを用いたコントラスト調整と影の部分を対象としたぼかし処理
図１６は、マスク画像の加工の例を示す図である。
【０１１０】
はじめに、マスク画像生成部１０１２は、１段目の合成処理に使用したマスク画像のコントラストを調整することによって生成したマスク画像MA1を対象としてぼかし処理を行い、矢印＃７１に示すように、人物の輪郭と影の輪郭がぼけた画像であるマスク画像MA4を生成する。図１６のマスク画像MA1は、１段目の合成処理に使用したマスク画像のコントラストを調整することによって生成された、図１２のマスク画像MA1と同じ画像である。また、図１６のマスク画像MA4は図１５のマスク画像MA4と同じ画像である。
【０１１１】
また、マスク画像生成部１０１２は、矢印＃７２に示すように、マスク画像MA1とマスク画像MA4との差を表す差分画像を生成する。矢印＃７２の先に示す差分画像のうち、黒色の部分は、マスク画像MA1とマスク画像MA4との差がない部分を表し、白色の部分は差がある部分を表す。
【０１１２】
マスク画像生成部１０１２は、矢印＃７３，＃７４，＃７５の先に示すように、マスク画像MA1と差分画像とマスク画像MA4に基づいてマスク画像MA5を生成する。例えば、マスク画像生成部１０１２は、マスク画像MA1に含まれる人物の輪郭を差分画像を用いて抽出し、抽出した輪郭をマスク画像MA4に合成することによってマスク画像MA5を生成する。
【０１１３】
マスク画像MA5は、人物の輪郭がマスク画像MA4よりはっきりとしているが、影の輪郭がマスク画像MA4の影の輪郭と同様にぼけた画像になる。合成部１０１３は、このようにしてマスク画像生成部１０１２により生成されたマスク画像MA5を用いて、図１５の２段目の合成処理を行うことになる。
【０１１４】
これにより、マスク画像のコントラストを調整することによって影の濃さや広がりを調整することができ、例えば影の存在が目立つ合成画像を生成することが可能になる。また、影のみをぼかすことによって、人物の輪郭ははっきりとしつつも、影のみが柔らかい雰囲気の合成画像を生成することができる。
【０１１５】
［合成処理の第８の例］
図１７は、合成処理に用いるマスク画像の組み合わせの例について説明する図である。ここでは、１段目の合成処理に用いるマスク画像をマスク画像Ｘ、２段目の合成処理に用いるマスク画像をマスク画像Ｙとして説明する。
【０１１６】
以上においては、１段目の合成処理に使用したマスク画像を加工して得られたマスク画像を２段目の合成処理に用いるものとしたが、そのように、撮影画像に基づいて生成したマスク画像を加工して得られたマスク画像を、１段目の合成処理に用いるようにすることも可能である。また、撮影画像に基づいて生成したマスク画像を加工して得られたマスク画像を、１段目の合成処理と２段目の合成処理の両方で用いるようにすることも可能である。
【０１１７】
例えば、マスク画像Ｘ，Ｙとして、図１６の処理によって生成したマスク画像MA5を用いて１段目の合成処理と２段目の合成処理をそれぞれ行うようにすることも可能である。
【０１１８】
また、マスク画像Ｘ，Ｙとして、上述したマスク画像MA1乃至MA4のいずれかを用いて１段目の合成処理と２段目の合成処理をそれぞれ行うようにすることも可能である。
【０１１９】
１段目の合成処理と２段目の合成処理に同じマスク画像を用いることにより、より自然な状態で人物が合成された合成画像を生成することが可能になる。１段目の合成処理と２段目の合成処理で用いるマスク画像が異なる場合、例えば、２段目の合成処理で用いるマスク画像の影の部分が１段目の合成処理で用いるマスク画像の影の部分より広いときには、１段目の合成処理により得られた合成画像に含まれる背景画像の色（影色背景画像の色）が、人物の輪郭によって縁取りされたようなものになってしまうことがあるが、そのようなことを防ぐことができる。
【０１２０】
＜写真シール機の構成と動作について＞
次に、以上のような合成処理を行う写真シール機の構成と動作について説明する。
【０１２１】
［写真シール機の外観構成］
図１８は、本発明の一実施形態に係る写真シール機１の外観の構成例を示す斜視図である。図１の画像処理部１００１が、図１８の写真シール機１において実現される。
【０１２２】
写真シール機１は、撮影や編集等の作業を利用者にゲームとして行わせ、撮影画像や編集済み画像を提供する代わりに利用者より代金を受け取るゲーム機である。写真シール機１はゲームセンタなどの店舗に設置される。利用者は１人であることもあるし、複数人であることもある。
【０１２３】
写真シール機１が提供するゲームで遊ぶ利用者は、代金を投入し、自身が被写体となって撮影を行い、撮影によって得られた撮影画像の中から選択した編集対象の画像に対して、手書きの線画やスタンプ画像を合成する編集機能を用いて編集を行うことにより、撮影画像を彩り豊かな画像にする。利用者は、編集済みの画像が印刷されたシール紙を受け取って一連のゲームを終了させることになる。
【０１２４】
図１８に示すように、写真シール機１は、主に、撮影ユニット１１、編集部１２、および事後接客部１３から構成される。撮影ユニット１１と編集部１２が接した状態で設置され、編集部１２と事後接客部１３が接した状態で設置される。
【０１２５】
撮影ユニット１１は、撮影部２１と背景部２２から構成される。撮影部２１と背景部２２は所定の距離だけ離れて設置され、撮影部２１と背景部２２の間に形成される空間である撮影空間において撮影処理が行われる。図２の撮影の様子は、写真シール機１の撮影空間での撮影の様子を示している。
【０１２６】
撮影部２１は撮影処理を利用者に行わせる装置である。撮影部２１は、撮影空間に入り、撮影処理を行っている利用者の正面に位置する。撮影空間を正面に望む面を構成する撮影部２１の正面パネル４１には、撮影処理時に利用者により用いられるタッチパネルモニタなどが設けられる。撮影空間にいる利用者から見て左側の面を左側面、右側の面を右側面とすると、撮影部２１の左側面が側面パネル４２Ａにより構成され、右側面が側面パネル４２Ｂにより構成される。
【０１２７】
背景部２２は、正面を向いて撮影処理を行っている利用者の背面側に位置する板状の部材である背面パネル５１、背面パネル５１の左端に取り付けられ、側面パネル４２Ａより横幅の狭い板状の部材である側面パネル５２Ａ、および、背面パネル５１の右端に取り付けられ、側面パネル４２Ｂより横幅の狭い板状の部材である側面パネル５２Ｂ（図２０）から構成される。
【０１２８】
撮影部２１の左側面を構成する側面パネル４２Ａと背景部２２の側面パネル５２Ａは、ほぼ同一平面に設けられ、それぞれの上部が板状の部材である連結部２３Ａによって連結される。また、撮影部２１の右側面を構成する側面パネル４２Ｂと背景部２２の側面パネル５２Ｂは、ほぼ同一平面に設けられ、それぞれの上部が板状の部材である連結部２３Ｂによって連結される。
【０１２９】
撮影部２１の側面パネル４２Ａ、連結部２３Ａ、および背景部２２の側面パネル５２Ａに囲まれることによって形成される開口が撮影空間の出入り口Ｇ１となる。撮影部２１の側面パネル４２Ｂ、連結部２３Ｂ、および背景部２２の側面パネル５２Ｂに囲まれることによって形成される開口も撮影空間の出入り口Ｇ２となる。
【０１３０】
背景部２２の上部には、背面パネル５１、側面パネル５２Ａ、および側面パネル５２Ｂに支持される形で背景カーテンユニット２５が設けられる。背景カーテンユニット２５には、色または柄の異なる、背景に利用する巻き取り式の背景カーテンが複数収納される。背景カーテンユニット２５は、撮影部２１に設けられたカメラ等による撮影と連動して動作し、撮影の際に、例えば利用者により選択された色のカーテンを下ろし、その他のカーテンを巻き取る。
【０１３１】
複数のカーテンを１枚のクロマキ用のカーテンとし、昇降式の背景カーテンとして用意してもよい。また、クロマキ用のカーテンを予め撮影空間の背面に張り付けるとともに、合成用の背景画像を複数種類用意し、編集処理において利用者が所望する背景画像をカーテンの部分に合成することができるようにしてもよい。
【０１３２】
撮影空間の上方には、撮影部２１の正面パネル４１、連結部２３Ａ、連結部２３Ｂ、および背景カーテンユニット２５に囲まれる開口が形成され、その開口の一部を覆うように天井ストロボユニット２４が設けられる。天井ストロボユニット２４の一端が連結部２３Ａに固定され、他端が連結部２３Ｂに固定される。天井ストロボユニット２４は、撮影に合わせて撮影空間内に向けて発光するストロボを内蔵する。天井ストロボユニット２４を構成するストロボの内部には蛍光灯が設けられており、撮影空間の照明としても機能する。
【０１３３】
図１９に示すように、撮影空間の上方に形成される開口のうち、天井ストロボユニット２４を挟んで前方の部分は天井前方カーテン６１で覆われ、後方の部分は天井後方カーテン６２で覆われる。天井前方カーテン６１の少なくとも内側の色は黒色などの暗い色とされ、天井後方カーテン６２の少なくとも内側の色は白色などの明るい色とされる。
【０１３４】
また、図１９に示すように、撮影空間の出入り口Ｇ１には側面カーテン６３が取り付けられる。反対側の出入り口である出入り口Ｇ２にも図示せぬ側面カーテンが取り付けられる。撮影空間の出入り口Ｇ１およびＧ２に取り付けられる側面カーテンの少なくとも内側の色は黒色などの暗い色とされる。
【０１３５】
図１８の説明に戻り、編集部１２は、撮影処理によって得られた画像を編集する処理である編集処理を利用者に行わせる装置である。編集部１２は、一方の側面が撮影部２１の正面パネル４１の背面に接するように撮影ユニット１１に連結して設けられる。編集部１２には、編集処理時に利用者により用いられるタブレット内蔵モニタなどの構成が設けられる。
【０１３６】
図１８に示す編集部１２の構成を正面側の構成とすると、２組の利用者が同時に編集処理を行うことができるように、編集部１２の正面側と背面側には編集処理に用いられる構成がそれぞれ設けられる。
【０１３７】
編集部１２の正面側は、床面に対して垂直な面であり、側面パネル４２Ａとほぼ平行な面である面７１と、面７１の上方に形成された斜面７２から構成され、編集処理に用いられる構成が斜面７２に設けられる。斜面７２の左側には、柱状の形状を有し、照明装置７４の一端を支持する支持部７３Ａが設けられる。支持部７３Ａの上面にはカーテンレール２６を支持する支持部７５が設けられる。斜面７２の右側にも、照明装置７４の他端を支持する支持部７３Ｂ（図２０）が設けられる。
【０１３８】
編集部１２の上方にはカーテンレール２６が取り付けられる。カーテンレール２６は、上から見たときの形状がコの字状となるように３本のレール２６Ａ乃至２６Ｃを組み合わせて構成される。平行に設けられるレール２６Ａと２６Ｂの一端は、連結部２３Ａと連結部２３Ｂにそれぞれ固定され、他端に残りの一本のレール２６Ｃの両端が接合される。
【０１３９】
カーテンレール２６には、編集部１２の正面前方の空間と背面前方の空間の内部が外から見えないようにカーテンが取り付けられる。カーテンレール２６に取り付けられたカーテンにより囲まれる編集部１２の正面前方の空間と背面前方の空間が、利用者が編集処理を行う編集空間となる。
【０１４０】
図２０は、写真シール機１を別の角度から見た斜視図である。
【０１４１】
事後接客部１３は事後接客処理を利用者に行わせる装置である。事後接客処理には、撮影画像や編集済みの画像を携帯電話機などの携帯端末に送信する処理、ミニゲームを利用者に行わせる処理、アンケートに答えさせる処理などが含まれる。
【０１４２】
図２０に示すように、事後接客部１３は、所定の厚さを有する板状の筐体を有しており、その背面が編集部１２の左側面に接するように編集部１２に連結して設けられる。事後接客部１３の正面には、事後接客処理時に利用者により用いられるタブレット内蔵モニタや、撮影画像や編集済みの画像が印刷されたシール紙が排出される排出口などが設けられる。事後接客部１３の正面前方の空間が、シール紙への印刷が終わるのを待っている利用者が事後接客処理を行う事後接客空間となる。
【０１４３】
ここで、写真シール作成ゲームの流れと、それに伴う利用者の移動について図２１を参照して説明する。図２１は、写真シール機１を上から見た平面図である。
【０１４４】
写真シール機１の利用者は、白抜き矢印＃１で示すように出入り口Ｇ１から、または白抜き矢印＃２で示すように出入り口Ｇ２から、撮影部２１と背景部２２の間に形成された撮影空間Ａ１に入り、撮影部２１に設けられたカメラやタッチパネルモニタなど利用して撮影処理を行う。
【０１４５】
撮影処理を終えた利用者は、白抜き矢印＃３で示すように出入り口Ｇ１を使って撮影空間Ａ１から出て編集空間Ａ２−１に移動するか、白抜き矢印＃４で示すように出入り口Ｇ２を使って撮影空間Ａ１から出て編集空間Ａ２−２に移動する。
【０１４６】
編集空間Ａ２−１は、編集部１２の正面側の編集空間であり、編集空間Ａ２−２は、編集部１２の背面側の編集空間である。編集空間Ａ２−１と編集空間Ａ２−２のいずれの空間に移動するのかが、撮影部２１のタッチパネルモニタの画面表示などによって案内される。例えば２つの編集空間のうちの空いている方の空間が移動先として案内される。編集空間Ａ２−１または編集空間Ａ２−２に移動した利用者は編集処理を開始する。編集空間Ａ２−１の利用者と、編集空間Ａ２−２の利用者は同時に編集処理を行うことができる。
【０１４７】
編集処理が終了した後、撮影画像や編集済みの画像の中から選択された画像の印刷が開始される。画像の印刷中、編集処理を終えた利用者は、編集空間Ａ２−１で編集処理を行っていた場合には白抜き矢印＃５で示すように編集空間Ａ２−１から事後接客空間Ａ３に移動して事後接客処理を行う。また、編集処理を終えた利用者は、編集空間Ａ２−２で編集処理を行っていた場合には白抜き矢印＃６で示すように編集空間Ａ２−２から事後接客空間Ａ３に移動し、事後接客空間Ａ３において事後接客処理を行う。
【０１４８】
画像の印刷が終了したとき、利用者は、事後接客部１３に設けられた排出口からシール紙を受け取り、一連の写真シール作成ゲームを終えることになる。
【０１４９】
［各装置の構成］
次に、各装置の構成について説明する。
【０１５０】
図２２は、撮影部２１の正面の構成例を示す図である。撮影部２１は、正面パネル４１、側面パネル４２Ａ、および側面パネル４２Ｂが、箱状の形状を有するベース部４３に取り付けられることによって構成される。
【０１５１】
正面パネル４１は撮影空間Ａ１で撮影処理を行う利用者の正面に位置し、側面パネル４２Ａと側面パネル４２Ｂは、それぞれ、撮影空間Ａ１で撮影処理を行う利用者の左側、右側に位置する。側面パネル４２Ａの上方には連結部２３Ａが固定され、側面パネル４２Ｂの上方には連結部２３Ｂが固定される。
【０１５２】
正面パネル４１のほぼ中央には撮影・表示ユニット８１が設けられる。撮影・表示ユニット８１は、カメラ９１、正面ストロボ９２、およびタッチパネルモニタ９３から構成される。
【０１５３】
カメラ９１は、CCD(Charge Coupled Device)などの撮像素子により構成され、撮影空間Ａ１にいる利用者を撮影する。カメラ９１により取り込まれた動画像は、タッチパネルモニタ９３にリアルタイムで表示される。利用者により撮影が指示されたときなどの所定のタイミングでカメラ９１により取り込まれた画像は撮影画像（静止画像）として保存される。図２に示すカメラが、図２２のカメラ９１に相当する。
【０１５４】
カメラ９１を囲むように発光面が設けられた正面ストロボ９２は、他のストロボと同様にカメラ９１による撮影に合わせて発光し、被写体としての利用者の顔付近を正面から照射する。
【０１５５】
カメラ９１の下側に設けられたタッチパネルモニタ９３は、LCD(Liquid Crystal Display)などのモニタと、それに積層されたタッチパネルにより構成される。タッチパネルモニタ９３は、カメラ９１により取り込まれた動画像を表示するライブビューモニタとしての機能と、各種のGUI(Graphical User Interface)画像を表示し、利用者の選択操作をタッチパネルにより受け付ける機能とを備えている。タッチパネルモニタ９３には、適宜、背景等の画像が合成された後の動画像が表示される。
【０１５６】
また、タッチパネルモニタ９３には、合成処理によって生成された合成画像が撮影処理時などの所定のタイミングで表示される。
【０１５７】
正面パネル４１には、撮影・表示ユニット８１の位置を基準として、上方に上ストロボ８２が設置される。また、左方に左ストロボ８３が設置され、右方に右ストロボ８４が設置される。撮影・表示ユニット８１の下方の位置には、ベース部４３の上面が一部突出する形で下ストロボ８５が設けられる。
【０１５８】
上ストロボ８２は、利用者を上前方から照射する。左ストロボ８３は、利用者を左前方から照射し、右ストロボ８４は、利用者を右前方から照射する。下ストロボ８５は、利用者を下前方から照射する。
【０１５９】
ベース部４３には利用者の足元を照射する足元ストロボ８６も設けられる。上ストロボ８２、左ストロボ８３、右ストロボ８４、下ストロボ８５、および足元ストロボ８６の内部には蛍光灯が設けられており、天井ストロボユニット２４を構成するストロボの内部の蛍光灯と合わせて、撮影空間Ａ１内の照明として用いられる。
【０１６０】
足元ストロボ８６の右側には、利用者がお金を投入する硬貨投入返却口８７が設けられる。
【０１６１】
下ストロボ８５を挟んでベース部４３の上面の左右に形成されるスペース４３Ａおよび４３Ｂは、撮影処理を行う利用者が手荷物等を置くための荷物置き場として用いられる。正面パネル４１の例えば天井付近には、撮影処理の案内音声、BGM(Back Ground Music)、効果音等の音を出力するスピーカも設けられる。
【０１６２】
このような構成を有する撮影部２１の各部のうち、正面パネル４１、側面パネル４２Ａ、側面パネル４２Ｂ、およびベース部４３の撮影空間Ａ１に面する部分の色と、連結部２３Ａ、連結部２３Ｂの内側の色は、図２３に色を付して示すように黒色などの暗い色とされる。図１９を参照して説明したように、撮影空間Ａ１の天井前方の開口に取り付けられる天井前方カーテン６１の内側の色と、出入り口Ｇ１およびＧ２に取り付けられるカーテンの内側の色が暗い色であることもあって、撮影空間Ａ１の前方の色は全体的に暗い色となる。
【０１６３】
後述するように、背景部２２には撮影空間Ａ１にいる利用者を背面側から照射するストロボが設けられる。撮影空間Ａ１の前方の色を全体的に暗い色にすることによって、背景部２２に設けられるストロボからの光が撮影空間Ａ１内で反射し、利用者を照射してしまうことを防ぐことができ、意図した明るさで撮影を行うことが可能になる。
【０１６４】
すなわち、背景部２２の両端に設けられたストロボからの光のうち、利用者にあたらない光の反射は出入り口Ｇ１およびＧ２に取り付けられた側面カーテンの内側で防ぐことができる。また、撮影部２１の正面に設けられた例えば下ストロボ８５からの光のうち、利用者にあたらない光の反射は天井前方カーテン６１の内側で防ぐことができる。撮影部２１の正面に設けられた左ストロボ８３および右ストロボ８４からの光のうち、利用者にあたらない光の反射は側面パネル４２Ａ、側面パネル４２Ｂの内側で防ぐことができる。
【０１６５】
また、図１９を参照して説明したように、撮影空間Ａ１の天井後方の開口に取り付けられる天井後方カーテン６２の内側の色は明るい色であり、撮影空間Ａ１の後方の色は全体的に明るい色となる。
【０１６６】
撮影空間Ａ１の後方の色を全体的に明るい色にすることによって、撮影部２１に設けられるストロボからの光を撮影空間Ａ１内で反射させ、利用者を後方から照射することが可能になる。利用者を後方から照射して撮影を行うことによって、逆光で撮影したときと同様に、利用者の輪郭が柔らかい雰囲気で写っている画像を撮影することが可能になる。
【０１６７】
図２４は、背景部２２の撮影空間Ａ１側の構成例を示す図である。
【０１６８】
上述したように、背面パネル５１の上方には背景カーテンユニット２５が設けられる。背景カーテンユニット２５のほぼ中央には、撮影空間Ａ１内で撮影処理を行っている利用者を後方中央から照射する背面中央ストロボ１０１が取り付けられる。
【０１６９】
背面パネル５１の上方であって、出入り口Ｇ１側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を左後方から照射する背面左ストロボ１０２が取り付けられる。また、背面パネル５１の上方であって、出入り口Ｇ２側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を右後方から照射する背面右ストロボ１０３が取り付けられる。
【０１７０】
図２５は、編集部１２の正面側（編集空間Ａ２−１側）の構成例を示す図である。
【０１７１】
斜面７２のほぼ中央には、タブレット内蔵モニタ１３１が設けられる。タブレット内蔵モニタ１３１を挟んで左側にタッチペン１３２Ａが設けられ、右側にタッチペン１３２Ｂが設けられる。
【０１７２】
タブレット内蔵モニタ１３１は、タッチペン１３２Ａまたは１３２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１３１には、例えば、編集対象画像として選択された撮影画像の編集に用いられる画面である編集画面が表示される。２人で同時に編集作業を行う場合、タッチペン１３２Ａは一方の利用者により用いられ、タッチペン１３２Ｂは他方の利用者により用いられる。
【０１７３】
編集部１２の左側には事後接客部１３が設けられる。
【０１７４】
図２６は、事後接客部１３の正面側の構成例を示す図である。
【０１７５】
事後接客部１３の上方中央にはタブレット内蔵モニタ１６１が設けられる。タブレット内蔵モニタ１６１を挟んで左側にタッチペン１６２Ａが設けられ、右側にタッチペン１６２Ｂが設けられる。タブレット内蔵モニタ１６１もタブレット内蔵モニタ１３１と同様に、タッチペン１６２Ａまたは１６２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１６１には、ミニゲームなどの事後接客処理に用いられる画面が表示される。
【０１７６】
タブレット内蔵モニタ１６１の下には非接触型ICリーダ／ライタ１６３が設けられ、非接触型ICリーダ／ライタ１６３の下にはシール紙排出口１６４が設けられる。シール紙排出口１６４の下にはスピーカ１６５が設けられる。
【０１７７】
非接触型ICリーダ／ライタ１６３は、近接された非接触型ICと通信を行い、非接触型ICからのデータの読み出しや非接触型ICに対するデータの書き込みを行う。
【０１７８】
シール紙排出口１６４には、編集空間Ａ２−１の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙、または、編集空間Ａ２−２の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙が排出される。編集部１２の内部にはプリンタが設けられており、画像の印刷がそのプリンタにより行われる。
【０１７９】
スピーカ１６５は、事後接客処理の案内音声、BGM、効果音等の音を出力する。
【０１８０】
［写真シール機の内部構成］
次に、写真シール機１の内部構成について説明する。図２７は、写真シール機１の内部の構成例を示すブロック図である。上述した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。
【０１８１】
制御部２０１はCPU(Central Processing Unit)などよりなり、ROM(Read Only Memory)２０６や記憶部２０２に記憶されているプログラムを実行し、写真シール機１の全体の動作を制御する。制御部２０１には、記憶部２０２、通信部２０３、ドライブ２０４、ROM２０６、RAM(Random Access Memory)２０７が接続される。制御部２０１には、撮影部２０８、編集部２０９、事後接客部２１０、および印刷部２１１の各構成も接続される。
【０１８２】
制御部２０１においては、所定のプログラムが実行されることによって、図１の構成を有する画像処理部１００１が実現される。カメラ９１により撮影が行われることによって得られた撮影画像が画像処理部１００１の撮影画像取得部１０１１により取得され、記憶部２０２に記憶されている背景画像や影色背景画像が背景画像取得部１０１４により取得される。
【０１８３】
画像処理部１００１の合成部１０１３により生成された合成画像は、合成部１０１３からタッチパネルモニタ９３やタブレット内蔵モニタ１３１に供給され、表示される。利用者は、自分の影が写り込んでいる合成画像を見ることができる。
【０１８４】
記憶部２０２は、ハードディスクやフラッシュメモリなどの不揮発性の記憶媒体からなり、制御部２０１から供給された各種の設定情報を記憶する。記憶部２０２に記憶されている情報は制御部２０１により適宜読み出される。
【０１８５】
通信部２０３はインターネットなどのネットワークのインタフェースであり、制御部２０１による制御に従って外部の装置と通信を行う。
【０１８６】
ドライブ２０４には、光ディスクや半導体メモリなどよりなるリムーバブルメディア２０５が適宜装着される。ドライブ２０４によりリムーバブルメディア２０５から読み出されたコンピュータプログラムやデータは、制御部２０１に供給され、記憶部２０２に記憶されたり、インストールされたりする。
【０１８７】
ROM２０６には、制御部２０１において実行されるプログラムやデータが記憶されている。RAM２０７は、制御部２０１が処理するデータやプログラムを一時的に記憶する。
【０１８８】
撮影部２０８は、撮影空間Ａ１における撮影処理を行う構成である硬貨処理部２２１、背景制御部２２２、照明制御部２２３、カメラ９１、タッチパネルモニタ９３、およびスピーカ２２４から構成される。
【０１８９】
硬貨処理部２２１は、硬貨投入返却口８７に対する硬貨の投入を検出する。硬貨処理部２２１は、３００円などの所定の金額分の硬貨が投入されたことを検出した場合、そのことを表す起動信号を制御部２０１に出力する。
【０１９０】
背景制御部２２２は、制御部２０１より供給される背景制御信号に従って背景カーテンユニット２５に収納されている背景カーテンの上げ下ろしを行う。背景カーテンの選択が利用者により手動で行われるようにしてもよい。
【０１９１】
照明制御部２２３は、制御部２０１より供給される照明制御信号に従って、撮影空間Ａ１内の各ストロボの発光を制御する。
【０１９２】
カメラ９１は、制御部２０１による制御に従って撮影を行い、撮影によって得られた画像を制御部２０１に出力する。
【０１９３】
編集部２０９Ａは、編集空間Ａ２−１における編集処理を行う構成として編集部１２の正面側に設けられるタブレット内蔵モニタ１３１、タッチペン１３２Ａ，１３２Ｂ、およびスピーカ２３１から構成される。編集部２０９Ｂも編集部２０９Ａと同一の構成を有しており、編集空間Ａ２−２における編集処理を行う。
【０１９４】
タブレット内蔵モニタ１３１は、制御部２０１による制御に従って編集画面を表示し、編集画面に対する利用者の操作を検出する。利用者の操作の内容を表す信号は制御部２０１に供給され、編集対象の撮影画像の編集が行われる。
【０１９５】
事後接客部２１０は、事後接客空間Ａ３における事後接客処理を行う構成であるタブレット内蔵モニタ１６１、タッチペン１６２Ａ，１６２Ｂ、非接触型ICリーダ／ライタ１６３、およびスピーカ１６５から構成される。
【０１９６】
印刷部２１１は、印刷処理を行う構成であるプリンタ２４１、およびシール紙ユニット２４２から構成される。プリンタ２４１は、撮影画像、または編集処理によって得られた編集済みの画像を、プリンタ２４１に装着されたシール紙ユニット２４２に収納されているシール紙に印刷し、シール紙排出口１６４に排出する。一点鎖線で囲んで示す事後接客部２１０と印刷部２１１が、事後接客空間Ａ３にいる利用者を相手とした処理を行う構成となる。
【０１９７】
［写真シール機の動作］
ここで、図２８のフローチャートを参照して、写真シール作成ゲームを提供する写真シール機１の処理について説明する。
【０１９８】
ステップＳ１において、写真シール機１の制御部２０１は、所定の金額分の硬貨が投入されたか否かを硬貨処理部２２１から供給される信号に基づいて判定し、投入されたと判定するまで待機する。
【０１９９】
硬貨が投入されたとステップＳ１において判定した場合、ステップＳ２において、制御部２０１は、撮影部２０８を制御し、本撮影処理を行う。本撮影処理により、撮影空間Ａ１にいる利用者を被写体として撮影が行われる。本撮影処理については図２９のフローチャートを参照して後述する。
【０２００】
ステップＳ３において、制御部２０１は被写体の画像処理を行う。被写体の画像処理により、本撮影処理によって得られた撮影画像の明るさの調整などの各種の処理が行われる。被写体の画像処理については図３２のフローチャートを参照して後述する。
【０２０１】
ステップＳ４において、制御部２０１は、撮影空間Ａ１にいる利用者に対して、編集空間Ａ２−１または編集空間Ａ２−２への移動を案内する。編集空間Ａ２−１または編集空間Ａ２−２への移動の案内は、撮影部２０８のタッチパネルモニタ９３に画面を表示させることによって、または音声をスピーカ２２４から出力させることによって行われる。
【０２０２】
ステップＳ５において、制御部２０１は、撮影画像の画像処理を行う。撮影画像の画像処理は、編集対象画像として選択された撮影画像に合成する画像を利用者に選択させ、選択された画像を撮影画像に合成したりする処理である。撮影画像の画像処理については図３５のフローチャートを参照して後述する。
【０２０３】
ステップＳ６において、制御部２０１は、編集部２０９Ａまたは編集部２０９Ｂを制御し、編集処理を行う。制御部２０１は、編集画面をタブレット内蔵モニタ１３１に表示させ、利用者による編集操作に従って、編集対象として選択された撮影画像の編集を行う。編集が終了したとき、制御部２０１は、印刷する画像の選択画面をタブレット内蔵モニタ１３１に表示させ、印刷する画像を利用者に選択させる。印刷する画像の選択画面には、撮影画像や編集済みの画像が表示され、その中から所定の枚数の画像が選択される。
【０２０４】
ステップＳ７において、制御部２０１は、編集空間Ａ２−１または編集空間Ａ２−２で編集処理を終えた利用者に対して事後接客空間Ａ３への移動を案内する。事後接客空間Ａ３への移動の案内は、タブレット内蔵モニタ１３１に画面を表示させることによって、または音声をスピーカ２３１から出力させることによって行われる。
【０２０５】
ステップＳ８において、制御部２０１は、事後接客部２１０を制御し、事後接客処理を行う。例えば、撮影画像や編集済みの画像を携帯端末に送信する処理を事後接客処理として行う場合、制御部２０１は、携帯端末の電子メールアドレスの入力画面や、送信する画像の選択画面をタブレット内蔵モニタ１６１に表示させ、利用者による操作に応じて画像を送信する。また、ミニゲームを利用者に行わせる処理を事後接客処理として行う場合、制御部２０１は、ミニゲームの画面をタブレット内蔵モニタ１６１に表示させる。アンケートに答えさせる処理を事後接客処理として行う場合、制御部２０１は、アンケート画面をタブレット内蔵モニタ１６１に表示させ、利用者による回答を取得する。
【０２０６】
ステップＳ８において事後接客処理を行うことと並行して、ステップＳ９において、制御部２０１は印刷処理を行う。制御部２０１は、利用者により選択された画像をプリンタ２４１に出力してシール紙に印刷させる。
【０２０７】
印刷が終了したとき、ステップＳ１０において、プリンタ２４１は、画像が印刷されたシール紙をシール紙排出口１６４に排出し、処理を終了させる。
【０２０８】
次に、図２９のフローチャートを参照して、図２８のステップＳ２において行われる本撮影処理について説明する。
【０２０９】
ステップＳ２１において、制御部２０１は、写り選択画面をタッチパネルモニタ９３に表示させ、利用者による写り選択を受け付ける。写り選択は、色合いやシャープネス等の、撮影画像の画質の選択である。制御部２０１は、利用者により選択された写りに応じて、カメラ９１により撮影された画像の画質を調整する。
【０２１０】
ステップＳ２２において、制御部２０１は、撮影方法の案内画面をタッチパネルモニタ９３に表示させる。撮影方法の案内画面を表示した後、制御部２０１は、カメラ９１を制御し、画像の取り込みを開始させる。
【０２１１】
ステップＳ２３において、制御部２０１は、カメラ９１により取り込まれた動画像をタッチパネルモニタ９３に表示させる（ライブビュー表示を行う）。
【０２１２】
図３０は、ライブビュー表示の例を示す図である。ライブビュー表示の画面のほぼ中央にはカメラ９１により取り込まれた動画像である画像５０１が表示され、その周りには、ポーズの取り方を案内するメッセージなどが表示されている。
【０２１３】
ライブビュー表示の画面に表示される画像５０１は、例えば１段目の合成処理を行うことによって得られた合成画像である。制御部２０１の画像処理部１００１は、カメラ９１により取り込まれた動画像を構成する各画像を撮影画像として１段目の合成処理を行うことになる。１段目の合成処理を行うことによって生成された例えば図８の合成画像Ａ、図９の合成画像Ｃなどの合成画像が、タッチパネルモニタ９３に供給され、画像５０１として表示される。
【０２１４】
２段目の合成処理を行うことによって得られた合成画像がライブビュー表示の画面に表示されるようにしてもよい。合成処理に用いられる背景画像は、利用者により選択されるようにしてもよいし、写真シール機１により自動的に選択されるようにしてもよい。
【０２１５】
ステップＳ２４において、制御部２０１は、タッチパネルモニタ９３にカウントダウンインジケータを表示し、撮影タイミングを利用者に通知する。
【０２１６】
撮影タイミングになったとき、ステップＳ２５において、制御部２０１は、カメラ９１を制御して撮影を行い、静止画像である撮影画像を取得する。
【０２１７】
ステップＳ２６において、制御部２０１は、撮影画像をタッチパネルモニタ９３に表示し、撮影結果を利用者に確認させる。
【０２１８】
図３１は、撮影結果の確認画面の例を示す図である。撮影結果の確認画面のほぼ中央には撮影画像である画像５１１が表示され、その周りには、撮影結果であることを案内するメッセージなどが表示されている。
【０２１９】
撮影結果の確認画面に表示される画像５１１は、例えば２段目の合成処理を行うことによって得られた合成画像である。制御部２０１の画像処理部１００１は、撮影タイミングに合わせてカメラ９１により取り込まれた撮影画像を対象として２段階合成処理を行うことになる。２段階合成処理を行うことによって最終的に生成された例えば図８の合成画像Ｂ、図９の合成画像Ｄなどの合成画像が、タッチパネルモニタ９３に供給され、画像５１１として表示される。
【０２２０】
ステップＳ２７において、制御部２０１は、撮影を所定回数繰り返し行ったか否かを判定する。制御部２０１は、撮影を所定回数行っていないとステップＳ２７において判定した場合、ステップＳ２３に戻り、以上の処理を繰り返し行う。
【０２２１】
一方、撮影を６回などの所定の回数繰り返し行ったとステップＳ２７において判定した場合、ステップＳ２８において、制御部２０１は、撮影可能時間内であるか否かを判定する。例えば、本撮影処理を開始してからの時間が、本撮影処理に割り当てられた時間を経過していない場合、撮影可能時間内であるとして判定される。
【０２２２】
撮影可能時間内であるとステップＳ２８において判定した場合、ステップＳ２９において、制御部２０１は、ボーナス撮影の案内画面をタッチパネルモニタ９３に表示させる。ボーナス撮影は、ステップＳ２５において行われる通常の撮影と異なる形で行われる撮影であり、例えば、カメラ９１により取り込まれた動画像に対して合成用の画像がリアルタイムで合成され、その合成結果の画像がライブビュー表示される。
【０２２３】
ステップＳ３０において、制御部２０１は、動画像に合成する合成用の画像である撮影用合成用画像を例えば記憶部２０２から読み出す。撮影用合成用画像が予め決められているのではなく、複数種類の画像の中から撮影用合成用画像を利用者に選択させるようにしてもよい。
【０２２４】
ステップＳ３１において、制御部２０１は、カメラ９１により取り込まれた動画像の各画像に撮影用合成用画像を合成し、合成結果をタッチパネルモニタ９３に表示させてライブビュー表示を行う。図３０を参照して説明した場合と同様に、ボーナス撮影時のライブビュー表示の画面に、１段目の合成処理によって得られた合成画像、または２段目の合成処理によって得られた合成画像が表示されるようにしてもよい。
【０２２５】
ステップＳ３２において、制御部２０１はボーナス撮影を行う。すなわち、制御部２０１は、タッチパネルモニタ９３にカウントダウンインジケータを表示し、撮影タイミングを利用者に通知する。
【０２２６】
撮影タイミングになったとき、ステップＳ３３において、制御部２０１は、カメラ９１を制御して撮影を行い、撮影画像を取得する。
【０２２７】
ステップＳ３４において、制御部２０１は、ボーナス撮影によって得られた撮影画像をタッチパネルモニタ９３に表示し、撮影結果を利用者に確認させる。図３１を参照して説明した場合と同様に、ボーナス撮影時の撮影結果の確認画面に、２段階合成処理によって得られた合成画像が表示されるようにしてもよい。
【０２２８】
ボーナス撮影の結果の確認が行われた後、またはステップＳ２８において撮影可能時間内ではないと判定された場合、図２８のステップＳ２に戻り、それ以降の処理が行われる。
【０２２９】
次に、図３２のフローチャートを参照して、図２８のステップＳ３において行われる被写体の画像処理について説明する。
【０２３０】
ステップＳ４１において、制御部２０１は、撮影画像に写る利用者の目のサイズの選択に用いられる目サイズ選択画面をタッチパネルモニタ９３に表示させ、利用者による選択を受け付ける。例えば、制御部２０１は、本撮影処理によって得られた複数の撮影画像（利用者が被写体として写っている画像）の中から所定の撮影画像を選択し、選択した撮影画像に写る利用者の目を検出する。制御部２０１は、検出した目のサイズを変えることによって、写っている目のサイズが異なる複数の画像を生成し、目サイズ選択画面に表示させる。利用者は、自分が実際に写っている画像を見て目のサイズを選択することができる。
【０２３１】
図３３は、利用者自身が写されている撮影画像を使用して、被写体（利用者）の目のサイズを選択するのに用いられる目サイズ選択画面の例を示す図である。
【０２３２】
目サイズ選択画面には、本撮影処理によって得られた撮影画像５２１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、目サイズ選択画面には、６枚の撮影画像である撮影画像５２１−１乃至５２１−６が、画面の中央から左側の位置に表示される。
【０２３３】
撮影画像５２１−１乃至５２１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２３４】
撮影画像５２１−１乃至５２１−６の上方には、利用者自身が写されている撮影画像５２１−１乃至５２１−６により目のサイズの確認ができることを示す「目の大きさを自分の顔で確認してね」の文字が表示されている。
【０２３５】
目サイズ選択画面の右側には、目サイズ選択ボタン５２２−１乃至５２２−３が上から順に表示される。目サイズ選択ボタン５２２−１には、「ナチュラルｅｙｅ」という文字と、目のサイズが自然な大きさのモデルの目の画像とが表示されている。目サイズ選択ボタン５２２−２には、「パッチリｅｙｅ」という文字と、目のサイズが若干大きな（例えば、自然な大きさよりも１割程度大きな）モデルの目の画像とが表示されている。また、目サイズ選択ボタン５２２−２には、この大きさの目サイズを選択することが推奨されることを示唆する「おすすめ」の文字がハート形の図形とともに表示されている。
【０２３６】
目サイズ選択ボタン５２２−３には、「ボリュームｅｙｅ」という文字と、目のサイズが比較的大きな（例えば、自然な大きさよりも２割程度大きな）モデルの目の画像とが表示されている。また、目サイズ選択ボタン５２２−１乃至５２２−３の右方には、上から下に向かう矢印が表示されるとともに、その矢印の上方に「natural」という文字が表示され、その矢印の下方に「big」という文字が表示されている。つまり、目サイズ選択ボタン５２２−１、目サイズ選択ボタン５２２−２、および目サイズ選択ボタン５２２−３の順に下に向かうにしたがって、目サイズが大きくなることを示している。
【０２３７】
また、目サイズ選択画面の右下には、目のサイズの選択を決定するときに操作される決定ボタン５２３が表示されており、決定ボタン５２３には、「決定」という文字が表示されている。なお、目サイズ選択画面の上辺には、目のサイズの選択に用いられる画面であることを示す「目の大きさを選んでね！」という文字が表示される。また、目サイズ選択画面の右上側の「Time」と表示されている箇所には、目のサイズの選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２３８】
このような目サイズ選択画面がタッチパネルモニタ９３に表示され、利用者が、目サイズ選択ボタン５２２−１乃至５２２−３のいずれかを選択すると、制御部２０１は、利用者による選択を受け付ける。そして、制御部２０１は、利用者により選択されたサイズの目が写されている画像になるように、撮影画像５２１−１乃至５２１−６の被写体の目のサイズを一括して変更する。
【０２３９】
例えば、利用者が、目サイズ選択ボタン５２２−１を選択すると、制御部２０１は、画像から被写体の目を検出して、撮影画像５２１−１乃至５２１−６の被写体の目のサイズが自然な大きさとなるように変更する画像処理を施す。そして、制御部２０１は、その変更が反映された撮影画像５２１−１乃至５２１−６で目サイズ選択画面の表示を更新する。このとき、制御部２０１は、本撮影処理によって得られた全ての撮影画像５２１に対して、それぞれの撮影画像５２１に複数の被写体が写されていれば、その全ての被写体の目サイズを変更する画像処理を一括で施す画像処理を行う。
【０２４０】
同様に、利用者が、目サイズ選択ボタン５２２−２を選択すると、制御部２０１は、撮影画像５２１−１乃至５２１−６の被写体の目のサイズが若干大きくなるように変更し、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。また、利用者が、目サイズ選択ボタン５２２−３を選択すると、制御部２０１は、撮影画像５２１−１乃至５２１−６に写る利用者の目のサイズが比較的大きくなるように変更し、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。
【０２４１】
そして、利用者が、目のサイズの選択を行った後に決定ボタン５２３を選択すると、その時点で撮影画像５２１−１乃至５２１−６に反映されていた大きさで、被写体の目のサイズの選択が決定される。
【０２４２】
このように、写真シール機１では、目のサイズが選択されると、制御部２０１は、撮影画像５２１−１乃至５２１−６の被写体の目のサイズを変更する画像処理を行って、その変更が反映された撮影画像５２１−１乃至５２１−６を表示する。従って、利用者は、目のサイズの変更が反映された利用者自身が表示される撮影画像５２１−１乃至５２１−６を確認しながら、最適な目のサイズを選択することができる。これにより、写真シール機１では、所望の目サイズとなるように画像処理が施された利用者が写る撮影画像５２１−１乃至５２１−６を提供することができる。
【０２４３】
なお、図３３では、予め用意されたモデルの目の画像が目サイズ選択ボタン５２２−１乃至５２２−３に表示されているが、例えば、撮影画像５２１−１乃至５２１−６に写されているいずれかの被写体（利用者自身）の目を使用してもよい。即ち、撮影画像５２１−１乃至５２１−６から、被写体の目を含む所定範囲を切り出して、その切り出した画像の目の大きさを適宜変更して目サイズ選択ボタン５２２−１乃至５２２−３に表示することができる。また、目のサイズの変更には、例えば、目の大きさ自体を変更する他、黒目の大きさを変更したり、まつ毛のボリュームを変更したりすることが含まれる。
【０２４４】
図３２の説明に戻り、ステップＳ４２において、制御部２０１は、利用者による操作に応じて目のサイズを選択する。
【０２４５】
ステップＳ４３において、制御部２０１は、利用者により選択されたサイズの目が写っている画像になるように、全ての撮影画像に写る利用者の目のサイズを一括して変更する。
【０２４６】
ステップＳ４４において、制御部２０１は、目のサイズを変更した撮影画像をタッチパネルモニタ９３に表示し、目のサイズの変更結果を利用者に確認させる。
【０２４７】
ステップＳ４５において、制御部２０１は、決定ボタン５２３が押されたか否かをタッチパネルモニタ９３から供給された情報に基づいて判定し、押されていないと判定した場合、ステップＳ４２に戻り、以上の処理を繰り返す。
【０２４８】
一方、決定ボタンが押されたとステップＳ４５において判定した場合、ステップＳ４６において、制御部２０１は、目のサイズを決定し、決定した目のサイズを表す情報を記憶部２０２などに記憶させて保存する。被写体の画像処理の終了後にタブレット内蔵モニタ１３１に表示される編集対象画像の選択画面や編集画面には、利用者により選択されたサイズで利用者の目が写っている撮影画像が表示される。
【０２４９】
ステップＳ４７において、制御部２０１は、撮影画像の明るさの選択に用いられる明るさ選択画面をタッチパネルモニタ９３に表示させ、利用者による選択を受け付ける。例えば、制御部２０１は、本撮影処理によって得られた複数の撮影画像の中から所定の撮影画像を選択し、選択した撮影画像の明るさを変えることによって明るさの異なる複数の画像を生成する。制御部２０１は、生成した複数の画像を明るさ選択画面に表示させ、画像の明るさを利用者に選択させる。利用者は、自分が実際に写っている画像を見て画像の明るさを選択することができる。
【０２５０】
図３４は、利用者自身が写されている撮影画像を使用して、被写体の明るさを選択するのに用いられる明るさ選択画面の例を示す図である。
【０２５１】
明るさ選択画面には、本撮影処理によって得られた撮影画像５３１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、明るさ選択画面には、６枚の撮影画像である撮影画像５３１−１乃至５３１−６が、画面の中央から左側の位置に表示される。
【０２５２】
撮影画像５３１−１乃至５３１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２５３】
また、撮影画像５３１−１乃至５３１−６の上方には、利用者自身が写されている撮影画像５３１−１乃至５３１−６により被写体の明るさの確認ができることを示す「明るさを自分の顔で確認してね」の文字が表示されている。
【０２５４】
明るさ選択画面の右側には、明るさ選択ボタン５３２−１乃至５３２−５が上から順に表示される。明るさ選択ボタン５３２−１乃至５３２−５には、「１」から「５」までの数値がそれぞれ表示されているとともに、明るさの異なるモデルがそれぞれ表示されている。明るさ選択ボタン５３２−１乃至５３２−５の「１」から「５」までの数値は、明るさの程度を示しており、数値が大きくなるほど被写体が暗い色合いとなる。
【０２５５】
また、明るさ選択ボタン５３２−３には、標準の（自然な）明るさのモデルの画像が表示されている。そして、明るさ選択ボタン５３２−２には、若干明るい色合いの（例えば、自然な明るさよりも１割程度明るさを増加した）モデルの画像が表示され、明るさ選択ボタン５３２−１には、比較的明るい色合いの（例えば、自然な明るさよりも２割程度明るさを増加した）モデルの画像が表示される。一方、明るさ選択ボタン５３２−４には、若干暗い色合いの（例えば、自然な明るさよりも１割程度明るさを低減した）モデルの画像が表示され、明るさ選択ボタン５３２−５のモデルは、比較的暗い色合いの（例えば、自然な明るさよりも２割程度明るさを低減した）モデルの画像が表示される。
【０２５６】
また、明るさ選択ボタン５３２−１乃至５３２−５の右方には、上から下に向かって順に、「美白」、「おすすめ」、および「美黒」という文字が表示されている。つまり、明るさ選択ボタン５３２−１乃至５３２−５の並びにおいて、上側が被写体を明るくし、下側が被写体を暗くすることを示している。
【０２５７】
また、明るさ選択画面の右下側には、被写体の明るさを決定するときに操作される決定ボタン５３３が表示されており、決定ボタン５３３には、「決定」という文字が表示されている。なお、明るさ選択画面の上辺には、被写体の明るさの選択に用いられる画面であることを示唆する「好きな明るさを選んでね！」という文字が表示される。また、明るさ選択画面の右上側の「Time」と表示されている箇所には、被写体の明るさの選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２５８】
このような明るさ選択画面がタッチパネルモニタ９３に表示され、利用者が、明るさ選択ボタン５３２−１乃至５３２−５のいずれかを選択すると、制御部２０１は、利用者による選択を受け付ける。そして、制御部２０１は、利用者により選択された明るさで被写体が写されている画像になるように、撮影画像５３１−１乃至５３１−６の被写体の明るさを一括して変更する画像処理を行う。
【０２５９】
例えば、利用者が、明るさ選択ボタン５３２−３を選択すると、制御部２０１は、画像から被写体を検出して、撮影画像５３１−１乃至５３１−６の被写体の明るさが自然な明るさとなるように変更する画像処理を施す。そして、制御部２０１は、その変更が反映された撮影画像５３１−１乃至５３１−６で明るさ選択画面の表示を更新する。このとき、制御部２０１は、本撮影処理によって得られた全ての撮影画像５３１に対して、それぞれの撮影画像５３１に複数の被写体が写されていれば、その全ての被写体の明るさを変更する画像処理を一括で施す。
【０２６０】
同様に、利用者が、明るさ選択ボタン５３２−２を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが若干明るくなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。また、利用者が、明るさ選択ボタン５３２−１を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが比較的明るくなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。一方、利用者が、明るさ選択ボタン５３２−４を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが若干暗くなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。また、利用者が、明るさ選択ボタン５３２−５を選択すると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさが比較的暗くなるように変更し、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。
【０２６１】
そして、利用者が、被写体の明るさの選択を行った後に決定ボタン５３３を選択すると、その時点で撮影画像５３１−１乃至５３１−６に反映されていた明るさで、被写体の明るさの選択が決定される。
【０２６２】
このように、写真シール機１では、被写体の明るさが選択されると、制御部２０１は、撮影画像５３１−１乃至５３１−６の被写体の明るさを変更する画像処理を行って、その変更が反映された撮影画像５３１−１乃至５３１−６を表示する。従って、利用者は、明るさの変更が反映された利用者自身が表示される撮影画像５３１−１乃至５３１−６を確認しながら、最適な被写体の明るさを選択することができる。これにより、写真シール機１では、所望の明るさとなるように画像処理が施された利用者が写る撮影画像５３１−１乃至５３１−６を提供することができる。
【０２６３】
なお、図３４では、予め用意されたモデルの顔の画像が明るさ選択ボタン５３２−１乃至５３２−５に表示されているが、例えば、撮影画像５３１−１乃至５３１−６に写されているいずれかの被写体（利用者自身）の顔を使用してもよい。即ち、撮影画像５３１−１乃至５３１−６から、被写体の顔を含む所定範囲を切り出して、その切り出した画像の被写体の明るさを適宜変更して明るさ選択ボタン５３２−１乃至５３２−５に表示することができる。
【０２６４】
また、被写体の明るさを選択する処理が、上述したような被写体の目のサイズを選択する処理の後に行われる場合、撮影画像５３１−１乃至５３１−６には、目のサイズの変更が反映された被写体が表示される。
【０２６５】
図３２の説明に戻り、ステップＳ４８において、制御部２０１は、利用者による操作に応じて明るさを選択する。
【０２６６】
ステップＳ４９において、制御部２０１は、利用者により選択された明るさの画像になるように、全ての撮影画像の明るさを一括して変更する。
【０２６７】
ステップＳ５０において、制御部２０１は、明るさを変更した撮影画像をタッチパネルモニタ９３に表示し、明るさの変更結果を利用者に確認させる。
【０２６８】
ステップＳ５１において、制御部２０１は、決定ボタン５３３が押されたか否かをタッチパネルモニタ９３から供給された情報に基づいて判定し、押されていないと判定した場合、ステップＳ４８に戻り、以上の処理を繰り返す。
【０２６９】
一方、決定ボタンが押されたとステップＳ５１において判定した場合、ステップＳ５２において、制御部２０１は、画像の明るさを決定し、決定した明るさを表す情報を記憶部２０２などに記憶させて保存する。被写体の画像処理の終了後にタッチパネルモニタ９３に表示される編集対象の画像の選択画面やタブレット内蔵モニタ１３１に表示される編集画面には、利用者により選択された明るさの撮影画像が表示される。
【０２７０】
このように、被写体の画像処理は、撮影画像に写る利用者の目のサイズと撮影画像の明るさを選択する処理である。その後、図２８のステップＳ３に戻り、それ以降の処理が行われる。
【０２７１】
次に、図３５のフローチャートを参照して、図２８のステップＳ５において行われる撮影画像の画像処理について説明する。撮影画像の画像処理は、編集空間Ａ２−１、または編集空間Ａ２−２にいる利用者を対象として行われる処理である。
【０２７２】
ステップＳ６１において、制御部２０１は、編集対象画像の選択画面をタブレット内蔵モニタ１３１に表示させ、利用者による選択を受け付ける。
【０２７３】
図３６は、利用者自身が写されている撮影画像を使用して、編集対象の画像を選択するのに用いられる選択画面の例を示す図である。
【０２７４】
編集対象画像の選択画面には、本撮影処理によって得られた撮影画像５４１が表示される。例えば図２９を参照して説明したように撮影を６回繰り返し行ったときには６枚の撮影画像が得られており、編集対象画像の選択画面には、６枚の撮影画像である撮影画像５４１−１乃至５４１−６が、画面の中央から左側の位置に表示される。
【０２７５】
撮影画像５４１−１乃至５４１−６は、例えば２段階合成処理によって最終的に得られた合成画像である。
【０２７６】
撮影画像５４１−１乃至５４１−６の上方には、利用者自身が写されている撮影画像５４１−１乃至５４１−６の中から編集対象の画像を選択できることを示す「落書きする画像を選んでね」の文字が表示されている。
【０２７７】
編集対象画像の選択画面の右側には、撮影画像５４１−１乃至５４１−６の全ての撮影画像を編集対象画像として選択するときに操作される全部選択ボタン５４２と、撮影画像５４１−１乃至５４１−６のうちの所定の撮影画像を編集対象画像として選択するときに操作される決定ボタン５４３とが表示される。全部選択ボタン５４２を押したとき、撮影画像５４１−１乃至５４１−６の全ての撮影画像が編集対象画像として保存され、撮影画像５４１−１乃至５４１−６のうちの所定の撮影画像を選択した状態で決定ボタン５４３を押したとき、選択している撮影画像が編集対象画像として保存される。
【０２７８】
図３５の説明に戻り、ステップＳ６２において、制御部２０１は、編集対象画像として図３６の選択画面から選択された撮影画像を記憶部２０２に記憶させて保存する。
【０２７９】
ステップＳ６３において、制御部２０１は、撮影用合成用画像の選択画面をタブレット内蔵モニタ１３１に表示させる。
【０２８０】
図３７は、撮影画像に写されている被写体の背景に用いる撮影用合成用画像を選択するのに用いられる撮影用合成用画像の選択画面の例を示す図である。
【０２８１】
上述したように、２段階合成処理を行うことによって得られた合成画像は、本撮影処理時や被写体の画像処理時、または編集対象画像の選択時に表示される。撮影用合成用画像を選択時にも複数の背景画像に合成するようにして２段階合成処理が行われ、図３７の選択画面が表示される。
【０２８２】
撮影用合成用画像の選択画面には、撮影用合成用画像の分類ボタンの表示領域である表示領域５５１、合成画像の表示領域である表示領域５５２、および、撮影画像と選択済みの合成画像の表示領域である表示領域５５３が設けられる。
【０２８３】
表示領域５５１には、ノーマルボタン５５４、柄ボタン５５５、およびセットボタン５５６が表示される。図３７の例では、黒色で反転表示されているノーマルボタン５５４が選択されている。
【０２８４】
ノーマルボタン５５４および柄ボタン５５５は、予め用意された複数の撮影用合成用画像の中から、利用者が、所望の撮影用合成用画像を選択するときに操作される。ノーマルボタン５５４を選択することにより、各種の色からなる撮影用合成用画像の中から所望の撮影用合成用画像を選択することができる。また、柄ボタン５５５を選択することにより、各種の柄からなる撮影用合成用画像の中から所望の撮影用合成用画像を選択することができる。
【０２８５】
セットボタン５５６は、複数の撮影用合成用画像のセットの中から、利用者が所望の撮影用合成用画像のセットを選択するときに操作される。撮影用合成用画像のセットは、例えば、各種の色および柄からなる複数種類の撮影用合成用画像の中から、撮影枚数（例えば、６枚）に従って、任意の種類の撮影用合成用画像が組み合わされて、予め用意されている。
【０２８６】
表示領域５５２には複数の合成画像が表示される。合成画像は、２段階合成処理のうちの１段目の合成処理を行うことによって生成された合成結果の画像である。２段階合成処理によって最終的に得られた合成画像が表示領域５５２に表示されるようにしてもよい。
【０２８７】
表示領域５５３には、撮影画像と選択済みの合成画像が表示される。撮影画像と選択済みの合成画像は、２段階合成処理のうちの１段目の合成処理を行うことによって生成された合成結果の画像である。２段階合成処理によって最終的に得られた合成画像が表示領域５５３に表示されるようにしてもよい。
【０２８８】
表示領域５５１に表示されているボタンを操作することによって撮影用合成用画像が選択された場合、制御部２０１の画像処理部１００１は、表示領域５５３において選択されている撮影画像を取得し、上述したようにしてマスク画像を生成する。画像処理部１００１は、撮影画像に写る利用者の部分と影の部分をマスク画像を用いて抽出し、選択されたそれぞれの撮影用合成用画像に合成することによって複数の合成画像を生成し、表示領域５５２に並べて表示させる。
【０２８９】
図３７の例では、それぞれ異なる色の撮影用合成用画像を背景画像として用いて１段目の合成処理を行うことによって得られた２７枚（３行×９列）の合成画像が表示領域５５２に示されている。
【０２９０】
例えば、利用者が、合成画像の表示領域５５２に表示されている複数の合成画像の中から、任意の合成画像を選択すると、その合成画像に合成されている撮影用合成用画像が選択される。そして、利用者により選択された合成画像には、既に選択されたことを示唆する「済」のマークが表示される。また、直前に選択された合成画像には、利用者が選択したばかりであることを示唆する「SELECT」の文字が表示される。
【０２９１】
表示領域５５３には、表示領域５５２から選択された合成画像である合成画像５５７と、６枚の撮影画像のうち、撮影用合成用画像がまだ選択されていない撮影画像である撮影画像５５８が表示される。図３７の例では、表示領域５５３には、合成画像５５７−１乃至５５７−４と、撮影画像５５８−５，５５８−６が表示されている。また、合成画像５５７−１乃至５５７−４の下には、キャンセルボタン５５９−１乃至５５９−４がそれぞれ表示されている。
【０２９２】
例えば、撮影用合成用画像の選択画面が最初に表示されたときには、表示領域５５３には６枚の撮影画像５５８が表示される。なお、表示領域５５３では、本撮影処理によって撮影された順番で左側から順に撮影画像５５８が表示され、左端に表示された撮影画像５５８から順に合成画像の選択が行われる。表示領域５５３に表示される撮影画像５５８は、上述した被写体の画像処理により、被写体の目のサイズと明るさが変更された画像である。
【０２９３】
利用者が、１枚目の撮影画像５５８に対して、合成画像の表示領域５５２に表示されている複数の合成画像の中から、所望の合成画像を選択することにより、その合成画像に合成されている撮影用合成用画像が選択される。これに従って、１枚目の撮影画像５５８の表示が、利用者により選択された合成画像５５７−１に更新される。つまり、１枚目の撮影画像５５８に替えて、１枚目の撮影画像５５８の被写体の背景に、利用者により選択された撮影用合成用画像が合成された合成画像５５７−１が表示される。さらに、合成画像５５７−１の下方に、キャンセルボタン５５９−１が表示される。
【０２９４】
以下、同様に、利用者が、２枚目の撮影画像５５８、３枚目の撮影画像５５８、および４枚目の撮影画像５５８に対して撮影用合成用画像を順番に選択すると、その選択に従って、合成画像５５７−２乃至５５７−４がそれぞれ表示される。さらに、合成画像５５７−２乃至５５７−４の下に、キャンセルボタン５５９−２乃至５５９−４がそれぞれ表示される。
【０２９５】
このように、図３７には、４枚目の撮影画像５５８に対して撮影用合成用画像が選択された時点での撮影用合成用画像の選択画面が示されている。
【０２９６】
従って、この撮影用合成用画像の選択画面では、撮影画像５５８−５に対する撮影用合成用画像の選択が行われる。そのことを示すため、撮影画像５５８−５を囲うように枠５６０が表示されるとともに、撮影画像および合成画像の表示領域５５３の上方に「５枚目の背景を選んでね！」という文字が表示される。
【０２９７】
また、撮影画像および合成画像の表示領域５５３の左方には、キャンセルボタン５５９により選択済みの撮影用合成用画像のキャンセルができることを示す「キャンセルボタンで選んだ背景をキャンセルできるよ」という文字が表示されている。即ち、キャンセルボタン５５９を操作することで、その上方に表示されている合成画像５５７に合成されている撮影用合成用画像の選択をキャンセルして、撮影用合成用画像を選び直すことができる。また、撮影用合成用画像の選択画面の右上側の「Time」と表示されている箇所には、撮影用合成用画像の選択を行うことができる制限時間がカウントダウン方式で表示される。
【０２９８】
合成画像の表示領域５５２の右側には、人を消すボタン５６１が表示されている。
【０２９９】
人を消すボタン５６１は、表示領域５５２に表示されている合成画像を、被写体が合成されていない状態に表示を変更する際に操作される。例えば、通常、表示領域５５２には、撮影画像の被写体と撮影用合成用画像とが合成された合成画像が表示されるが、被写体によって撮影用合成用画像の色や柄を確認し難い場合があると想定される。そのような場合には、利用者が人を消すボタン５６１を操作することで、表示領域５５２には撮影用合成用画像（つまり、背景のみ）が表示されることになり、利用者が、撮影用合成用画像の色や柄を確認し易くなる。
【０３００】
また、人を消すボタン５６１が操作され、表示領域５５２に撮影用合成用画像が表示されるのと同時に、人を消すボタン５６１に表示されていた文字は「人を表示する」に変更される。そして、表示領域５５２の表示が撮影用合成用画像であるときに、利用者が人を消すボタン５６１を操作すると、表示領域５５２が元に戻り、図３７に示すように、被写体の背景に撮影用合成用画像が合成された合成画像が表示領域５５２に表示される。
【０３０１】
図３５の説明に戻り、ステップＳ６４において、制御部２０１は、図３７の選択画面に対する利用者の操作に応じて撮影用合成用画像を決定する。
【０３０２】
ステップＳ６５において、制御部２０１は、撮影画像の画像処理を開始してから所定の時間が経過したか否かを判定し、所定の時間が経過していないと判定した場合、ステップＳ６４以降の処理を繰り返す。一方、制御部２０１は、所定の時間が経過したと判定した場合、図２８のステップＳ５に戻り、それ以降の処理を行う。
【０３０３】
このように、写真シール作成ゲームを提供する一連の処理においては、利用者が写っている画像を表示するために２段階合成処理が複数回行われる。これにより、利用者の影が写り込んでいるリアリティのある合成画像を利用者に確認させることができる。なお、２段階合成処理によって生成された合成画像に対しては、適宜、編集処理において編集が施され、編集が施された合成画像がシール紙に印刷される。
【０３０４】
［写真シール機の外観構成］
図３８は、写真シール機１の外観の他の構成例を示す斜視図である。上述した構成と同じ構成には同じ符号を付してある。図１の画像処理部１００１が、図３８の写真シール機１において実現される。図３８の写真シール機１においても、図１８の写真シール機１において行われるのと同様にして２段階合成処理が行われる。
【０３０５】
図３８に示すように、写真シール機１は、主に、撮影ユニット１１、編集部１２、および事中接客部３０１から構成される。編集部１２と事中接客部３０１が接した状態で設置され、撮影ユニット１１は、編集部１２と事中接客部３０１から離れた位置に設置される。
【０３０６】
撮影ユニット１１は、撮影部２１と背景部２２から構成される。撮影部２１と背景部２２は所定の距離だけ離れて設置され、撮影部２１と背景部２２の間に形成される撮影空間において撮影処理が行われる。
【０３０７】
撮影部２１は撮影処理を利用者に行わせる装置である。撮影部２１は、撮影空間に入り、撮影処理を行っている利用者の正面に位置する。撮影空間を正面に望む面を構成する撮影部２１の正面パネル４１には、撮影処理時に利用者により用いられるタッチパネルモニタなどが設けられる。撮影空間にいる利用者から見て左側の面を左側面、右側の面を右側面とすると、撮影部２１の左側面が側面パネル４２Ａにより構成され、右側面が側面パネル４２Ｂにより構成される。
【０３０８】
背景部２２は、正面を向いて撮影処理を行っている利用者の背面側に位置する板状の部材である背面パネル５１から構成される。背景部２２の上部には、背面パネル５１に支持される形で背景カーテンユニット２５が設けられる。背景カーテンユニット２５には、色または柄の異なる、背景に利用する巻き取り式の背景カーテンが複数収納される。背景カーテンユニット２５は、撮影部２１に設けられたカメラ等による撮影と連動して動作し、撮影の際に、例えば利用者により選択された色のカーテンを下ろし、その他のカーテンを巻き取る。
【０３０９】
撮影部２１の左側面を構成する側面パネル４２Ａの上部と背景カーテンユニット２５は、板状の部材である連結部２３Ａによって連結される。また、撮影部２１の右側面を構成する側面パネル４２Ｂの上部と背景カーテンユニット２５は、板状の部材である連結部２３Ｂによって連結される。
【０３１０】
撮影部２１の側面パネル４２Ａ、連結部２３Ａ、および背景部２２の背面パネル５１に囲まれることによって形成される開口が撮影空間の出入り口Ｇ１となる。撮影部２１の側面パネル４２Ｂ、連結部２３Ｂ、および背景部２２の背面パネル５１に囲まれることによって形成される開口も撮影空間の出入り口Ｇ２となる。
【０３１１】
撮影空間の上方には、撮影部２１の正面パネル４１、連結部２３Ａ、連結部２３Ｂ、および背景カーテンユニット２５に囲まれる開口が形成され、その開口の一部を覆うように天井ストロボユニット２４が設けられる。天井ストロボユニット２４の一端が連結部２３Ａに固定され、他端が連結部２３Ｂに固定される。天井ストロボユニット２４は、撮影に合わせて撮影空間内に向けて発光するストロボを内蔵する。天井ストロボユニット２４を構成するストロボの内部には蛍光灯が設けられており、撮影空間の照明としても機能する。
【０３１２】
正面パネル４１の背面側には、所定の距離だけ離れた位置に、正面パネル４１の背面に対して正面が向くように事中接客部３０１が設けられる。事中接客部３０１は、事中接客処理を利用者に行わせる装置である。事中接客処理として、上述した被写体の画像処理が行われる。図３８の写真シール機１の利用者は、撮影処理に含まれる本撮影処理と被写体の画像処理のうち、本撮影処理のみを撮影空間で行い、被写体の画像処理については、事中接客部３０１の正面前方に形成される事中接客空間で行うことになる。
【０３１３】
事中接客部３０１は、所定の厚さを有する板状の筐体を有しており、その背面が編集部１２の右側面に接するように編集部１２に連結して設けられる。事中接客部３０１の正面には、事中接客処理時に利用者により用いられるタブレット内蔵モニタが設けられる。
【０３１４】
事中接客部３０１の上方には連結レール３０２が取り付けられる。連結レールは３本のレール３０２Ａ乃至３０２Ｃを組み合わせて構成される。レール３０２Ａの一端は連結部２３Ａに固定され、他端は、レール３０２Ａの延長上にあるカーテンレール２６のレール２６Ａと接合される。レール３０２Ｂの一端は連結部２３Ｂに固定され、他端は、レール３０２Ｂの延長上にあるカーテンレール２６のレール２６Ｂと接合される。レール３０２Ｃの一端は、レール３０２Ａとレール２６Ａの接合部に接合され、他端は、レール３０２Ｂとレール２６Ｂの接合部に接合される。
【０３１５】
図３８に示す編集部１２の構成を正面側の構成とすると、レール３０２Ｃには、事中接客空間と編集部１２の正面側の編集空間とを仕切る仕切りカーテン３０３Ａ、および、事中接客空間と編集部１２の背面側の編集空間とを仕切る仕切りカーテン３０３Ｂが取り付けられる。仕切りカーテン３０３Ａと３０３Ｂは、事中接客部３０１の正面とほぼ平行に取り付けられる。
【０３１６】
事中接客空間と編集空間を仕切るカーテンが事中接客部３０１の正面とほぼ平行に取り付けられることにより、事中接客部３０１の正面に設けられるタブレット内蔵モニタ１６１などを用いて事中接客処理を終えた利用者は、その向きのまま、編集空間に移動することができる。また、仕切りカーテン３０３Ａと３０３Ｂを、各空間にいる利用者の足元が見える高さに取り付けることによって、編集空間への移動を容易に行わせることができる。仕切りカーテン３０３Ａと３０３Ｂの代わりに、事中接客空間と編集空間を仕切るパネルを設けてもよい。
【０３１７】
編集部１２は、撮影処理によって得られた画像を編集する処理である編集処理を利用者に行わせる装置である。編集部１２には、編集処理時に利用者により用いられるタブレット内蔵モニタなどの構成が設けられる。２組の利用者が同時に編集処理を行うことができるように、編集部１２の正面側と背面側には編集処理に用いられる構成がそれぞれ設けられる。
【０３１８】
編集部１２の正面側は、床面に対して垂直な面であり、側面パネル４２Ａとほぼ平行な面である面７１と、面７１の上方に形成された斜面７２から構成され、編集処理に用いられる構成が斜面７２に設けられる。斜面７２の左側には、柱状の形状を有し、照明装置７４の一端を支持する支持部７３Ａが設けられる。支持部７３Ａの上面にはカーテンレール２６を支持する支持部７５が設けられる。斜面７２の右側にも、照明装置７４の他端を支持する支持部７３Ｂ（図４０）が設けられる。
【０３１９】
編集部１２の上方にはカーテンレール２６が取り付けられる。カーテンレール２６は、上から見たときの形状がコの字状となるように３本のレール２６Ａ乃至２６Ｃを組み合わせて構成される。レール２６Ａの一端は、連結レールのレール３０２Ａと接合され、レール２６Ａの他端はレール２６Ｃの一端と接合される。レール２６Ｂの一端は、連結レールのレール３０２Ｂと接合され、レール２６Ｂの他端はレール２６Ｃの他端と接合される。
【０３２０】
カーテンレール２６には、編集部１２の正面前方の空間と背面前方の空間の内部が外から見えないようにカーテンが取り付けられる。カーテンレール２６に取り付けられたカーテンにより囲まれる編集部１２の正面前方の空間と背面前方の空間が、利用者が編集処理を行う空間である編集空間となる。
【０３２１】
図３９は、カーテンを取り付けた状態の写真シール機１の外観を示す図である。
【０３２２】
図３９に示すように、撮影空間の出入り口Ｇ１には側面カーテン６３が取り付けられる。反対側の出入り口である出入り口Ｇ２にも図示せぬ側面カーテンが取り付けられる。撮影空間の出入り口Ｇ１およびＧ２に取り付けられる側面カーテンの少なくとも内側の色は黒色などの暗い色とされる。
【０３２３】
また、撮影空間の上方に形成される開口のうち、天井ストロボユニット２４を挟んで前方の部分は天井前方カーテン６１で覆われ、後方の部分は天井後方カーテン６２で覆われる。天井前方カーテン６１の少なくとも内側の色は黒色などの暗い色とされ、天井後方カーテン６２の少なくとも内側の色は白色などの明るい色とされる。
【０３２４】
事中接客空間の上方に設けられるレール３０２Ａにはカーテン３１１Ａが取り付けられ、レール３０２Ｂにはカーテン３１１Ｂが取り付けられる。編集空間の上方に設けられるレール２６Ａにはカーテン３１２Ａが取り付けられ、レール２６Ｂにはカーテン３１２Ｂが取り付けられる。
【０３２５】
図４０は、図３８の写真シール機１を別の角度から見た斜視図である。
【０３２６】
編集部１２の左側面７６には、撮影画像や編集済みの画像が印刷されたシール紙が排出されるシール紙排出口１６４が設けられる。編集部１２の左側面７６の前方の空間が、利用者がシール紙の印刷が終わるのを待つ印刷待ち空間となる。
【０３２７】
ここで、図３８の写真シール機１により提供される写真シール作成ゲームの流れと、それに伴う利用者の移動について図４１を参照して説明する。図４１は、写真シール機１を上から見た平面図である。
【０３２８】
写真シール機１の利用者は、白抜き矢印＃１１で示すように出入り口Ｇ１から、または白抜き矢印＃１２で示すように出入り口Ｇ２から、撮影部２１と背景部２２の間に形成された撮影空間Ａ１に入り、撮影部２１に設けられたカメラやタッチパネルモニタなど利用して撮影処理のうちの本撮影処理を行う。
【０３２９】
本撮影処理を終えた利用者は、白抜き矢印＃１３で示すように出入り口Ｇ１を使って撮影空間Ａ１から出て事中接客空間Ａ１１に移動するか、白抜き矢印＃１４で示すように出入り口Ｇ２を使って撮影空間Ａ１から出て事中接客空間Ａ１１に移動し、被写体の画像処理を行う。
【０３３０】
被写体の画像処理を終えた利用者は、白抜き矢印＃１５で示すように事中接客空間Ａ１１から出て編集空間Ａ２−１に移動するか、白抜き矢印＃１６で示すように事中接客空間Ａ１１から出て編集空間Ａ２−２に移動する。
【０３３１】
編集空間Ａ２−１は、編集部１２の正面側の編集空間であり、編集空間Ａ２−２は、編集部１２の背面側の編集空間である。編集空間Ａ２−１と編集空間Ａ２−２のいずれの空間に移動するのかが、事中接客部３０１のタッチパネルモニタの画面表示などによって案内される。例えば２つの編集空間のうちの空いている方の空間が移動先として案内される。編集空間Ａ２−１または編集空間Ａ２−２に移動した利用者は編集処理を開始する。編集空間Ａ２−１の利用者と、編集空間Ａ２−２の利用者は同時に編集処理を行うことができる。
【０３３２】
編集処理が終了した後、撮影画像や編集済みの画像の中から選択された画像の印刷が開始される。画像の印刷中、編集処理を終えた利用者は、編集空間Ａ２−１で編集処理を行っていた場合には白抜き矢印＃１７で示すように編集空間Ａ２−１から印刷待ち空間Ａ１２に移動して印刷が終わるのを待つ。また、編集処理を終えた利用者は、編集空間Ａ２−２で編集処理を行っていた場合には白抜き矢印＃１８で示すように編集空間Ａ２−２から印刷待ち空間Ａ１２に移動し、印刷待ち空間Ａ１２において印刷が終わるのを待つ。
【０３３３】
画像の印刷が終了したとき、利用者は、編集部１２の左側面７６に設けられたシール紙排出口１６４からシール紙を受け取り、一連の写真シール作成ゲームを終えることになる。
【０３３４】
このように、事中接客空間Ａ１１を設け、被写体の画像処理を、本撮影処理を行う撮影空間Ａ１とは別の空間である事中接客空間Ａ１１で行わせることにより、被写体の画像処理を利用者に集中して行わせることが可能になる。また、撮影空間Ａ１では本撮影処理のみを行わせることにより、本撮影処理にも利用者を集中させることが可能になる。
【０３３５】
本撮影処理と被写体の画像処理を撮影空間Ａ１で行わせ、編集対象画像の選択などの、撮影画像の編集前の処理を事中接客空間Ａ１１で行わせるようにしてもよい。
【０３３６】
［各装置の構成］
次に、各装置の構成について説明する。撮影部２１の正面の構成は図２２および図２３に示す構成と同じである。また、背景部２２の撮影空間Ａ１側の構成は図２４に示す構成と同じである。
【０３３７】
図４２は、編集部１２の正面側（編集空間Ａ２−１側）の構成例を示す図である。
【０３３８】
斜面７２のほぼ中央には、タブレット内蔵モニタ１３１が設けられる。タブレット内蔵モニタ１３１を挟んで左側にタッチペン１３２Ａが設けられ、右側にタッチペン１３２Ｂが設けられる。
【０３３９】
タブレット内蔵モニタ１３１は、タッチペン１３２Ａまたは１３２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１３１には、例えば、編集対象画像として選択された撮影画像の編集に用いられる画面である編集画面が表示される。２人で同時に編集作業を行う場合、タッチペン１３２Ａは一方の利用者により用いられ、タッチペン１３２Ｂは他方の利用者により用いられる。
【０３４０】
編集部１２の右側には事中接客部３０１が設けられる。
【０３４１】
図４３は、編集部１２の左側面の構成例を示す図である。
【０３４２】
編集部１２の左側面７６にはシール紙排出口１６４が設けられる。シール紙排出口１６４には、編集空間Ａ２−１の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙、または、編集空間Ａ２−２の利用者が編集処理を行うことによって作成した画像が印刷されたシール紙が排出される。編集部１２の内部にはプリンタが設けられており、画像の印刷がそのプリンタにより行われる。
【０３４３】
編集空間Ａ２−２側の斜面７７には、斜面７２に設けられる図４２の構成と同じ構成が設けられる。
【０３４４】
図４４は、事中接客部３０１の正面の構成例を示す図である。
【０３４５】
事中接客部３０１の構成は、シール紙排出口１６４が設けられていない点を除いて事後接客部１３の構成と同じである。事中接客部３０１の上方中央にはタブレット内蔵モニタ１６１が設けられる。タブレット内蔵モニタ１６１を挟んで左側にタッチペン１６２Ａが設けられ、右側にタッチペン１６２Ｂが設けられる。タブレット内蔵モニタ１６１もタブレット内蔵モニタ１３１と同様に、タッチペン１６２Ａまたは１６２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。
【０３４６】
タブレット内蔵モニタ１６１の下には非接触型ICリーダ／ライタ１６３が設けられ、非接触型ICリーダ／ライタ１６３の下方にはスピーカ１６５が設けられる。非接触型ICリーダ／ライタ１６３は、近接された非接触型ICと通信を行い、非接触型ICからのデータの読み出しや非接触型ICに対するデータの書き込みを行う。スピーカ１６５は、事中接客処理の案内音声、BGM、効果音等の音を出力する。
【０３４７】
［写真シール機の内部構成］
図４５は、図３８の写真シール機１の内部の構成例を示すブロック図である。図２７を参照して説明した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。
【０３４８】
制御部２０１においては、所定のプログラムが実行されることによって、図１の構成を有する画像処理部１００１が実現される。カメラ９１により撮影が行われることによって得られた撮影画像が画像処理部１００１の撮影画像取得部１０１１により取得され、記憶部２０２に記憶されている背景画像や影色背景画像が背景画像取得部１０１４により取得される。
【０３４９】
事中接客部３５１は、事中接客空間Ａ１１における事中接客処理を行う構成であるタブレット内蔵モニタ１６１、タッチペン１６２Ａ，１６２Ｂ、非接触型ICリーダ／ライタ１６３、およびスピーカ１６５から構成される。
【０３５０】
［写真シール機の動作］
ここで、図４６のフローチャートを参照して、写真シール作成ゲームを提供する図３８の写真シール機１の処理について説明する。
【０３５１】
ステップＳ１０１において、写真シール機１の制御部２０１は、所定の金額分の硬貨が投入されたか否かを硬貨処理部２２１から供給される信号に基づいて判定し、投入されたと判定するまで待機する。
【０３５２】
硬貨が投入されたとステップＳ１０１において判定した場合、ステップＳ１０２において、制御部２０１は、撮影部２０８を制御し、本撮影処理を行う。図２９のフローチャートを参照して説明したように、本撮影処理により、撮影空間Ａ１にいる利用者を被写体として撮影が行われる。
【０３５３】
ステップＳ１０３において、制御部２０１は、撮影空間Ａ１にいる利用者に対して、事中接客空間Ａ１１への移動を案内する。事中接客空間Ａ１１への移動の案内は、撮影部２０８のタッチパネルモニタ９３に画面を表示させることによって、または音声をスピーカ２２４から出力させることによって行われる。
【０３５４】
ステップＳ１０４において、制御部２０１は、事中接客部３５１を制御し、事中接客空間Ａ１１にいる利用者による操作に応じて被写体の画像処理を行う。図３２のフローチャートを参照して説明した被写体の画像処理により、本撮影処理によって得られた撮影画像に写る利用者の目のサイズの選択と、撮影画像の明るさの選択が事中接客空間Ａ１１にいる利用者によって行われる。目のサイズの選択に用いられる選択画面と、撮影画像の明るさの調整に用いられる選択画面は事中接客部３０１のタブレット内蔵モニタ１６１に表示される。
【０３５５】
ステップＳ１０５において、制御部２０１は、事中接客空間Ａ１１にいる利用者に対して、編集空間Ａ２−１または編集空間Ａ２−２への移動を案内する。編集空間Ａ２−１または編集空間Ａ２−２への移動の案内は、事中接客部３５１のタブレット内蔵モニタ１６１に画面を表示させることによって、または音声をスピーカ１６５から出力させることによって行われる。
【０３５６】
ステップＳ１０６において、制御部２０１は、図３５のフローチャートを参照して説明した撮影画像の画像処理を行う。
【０３５７】
ステップＳ１０７において、制御部２０１は、編集部２０９Ａまたは編集部２０９Ｂを制御し、編集処理を行う。制御部２０１は、編集画面をタブレット内蔵モニタ１３１に表示させ、利用者による編集操作に従って、編集対象として選択された撮影画像の編集を行う。編集が終了したとき、制御部２０１は、印刷する画像の選択画面をタブレット内蔵モニタ１３１に表示させ、印刷する画像を利用者に選択させる。印刷する画像の選択画面には、撮影画像や編集済みの画像が表示され、その中から所定の枚数の画像が選択される。
【０３５８】
ステップＳ１０８において、制御部２０１は、編集空間Ａ２−１または編集空間Ａ２−２で編集処理を終えた利用者に対して印刷待ち空間Ａ１２への移動を案内する。印刷待ち空間Ａ１２への移動の案内は、タブレット内蔵モニタ１３１に画面を表示させることによって、または音声をスピーカ２３１から出力させることによって行われる。印刷待ち空間Ａ１２への移動を案内する前、事後接客処理が編集空間Ａ２−１または編集空間Ａ２−２において行われるようにしてもよい。
【０３５９】
ステップＳ１０９において、制御部２０１は印刷処理を行う。制御部２０１は、利用者により選択された画像をプリンタ２４１に出力してシール紙に印刷させる。
【０３６０】
印刷が終了したとき、ステップＳ１１０において、プリンタ２４１は、画像が印刷されたシール紙をシール紙排出口１６４に排出し、処理を終了させる。
【０３６１】
なお、非接触型ICリーダ／ライタ１６３を、事中接客部３０１ではなく編集部１２に設けるようにしてもよい。また、図１８の写真シール機１のように、図３８の写真シール機１にも図２６のような構成を有する事後接客部１３を設けるようにしてもよい。
【０３６２】
以上のように、図３８の外観構成を有する写真シール機１において２段階合成処理が行われるようにすることも可能である。撮影画像の画像処理が事中接客空間Ａ１１にいる利用者を対象として行われるようにしてもよい。
【０３６３】
本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０３６４】
１ 写真シール機， １１ 撮影ユニット， １２ 編集部， １３ 事後接客部， ２１ 撮影部， ２２ 背景部， １００１ 画像処理部， １０１１ 撮影画像取得部， １０１２ マスク画像生成部， １０１３ 合成部， １０１４ 背景画像取得部
【特許請求の範囲】
【請求項１】
撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させる第１のマスク画像を生成するマスク画像生成手段と、
前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する合成手段と
を備える画像処理装置。
【請求項２】
前記マスク画像生成手段は、前記撮影画像の各画素の色に基づいて、前記被写体の部分と、前記被写体の影の部分と、それ以外の部分とを検出し、前記第１のマスク画像を生成する
請求項１に記載の画像処理装置。
【請求項３】
前記合成手段は、前記第１のマスク画像を用いて抽出した前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成して得られた合成画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、再度、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項４】
前記合成手段は、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項５】
前記色背景画像は、前記背景画像の色と同じ色の物に投影する影の色の画像である
請求項４に記載の画像処理装置。
【請求項６】
前記合成手段は、前記撮影画像の撮影モードに応じて明るさを変えた前記色背景画像を用いる
請求項４または５に記載の画像処理装置。
【請求項７】
前記マスク画像生成手段は、前記撮影画像に基づいて、前記被写体の部分を透過させるとともに前記被写体の輪郭の周りの一定の部分を所定の透過率で透過させる第２のマスク画像を生成し、
前記合成手段は、前記撮影画像から、前記被写体の部分と前記被写体の輪郭の周りの部分とを前記第２のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項８】
前記合成手段は、前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成する前に、前記被写体の影の部分の色の調整を行う
請求項１乃至７のいずれかに記載の画像処理装置。
【請求項９】
前記マスク画像生成手段は、前記第１のマスク画像を加工し、
前記合成手段は、加工された前記第１のマスク画像を用いて、前記被写体の部分と前記被写体の影の部分とを抽出する
請求項１乃至８のいずれかに記載の画像処理装置。
【請求項１０】
前記マスク画像生成手段は、前記第１のマスク画像の加工として、前記第１のマスク画像のコントラストをトーンカーブに従って調整する処理と、前記第１のマスク画像の輪郭をぼかす処理とのうちの少なくともいずれかの処理を行う
請求項９に記載の画像処理装置。
【請求項１１】
撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像を生成し、
前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する
ステップを含む画像処理方法。
【請求項１】
撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させる第１のマスク画像を生成するマスク画像生成手段と、
前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する合成手段と
を備える画像処理装置。
【請求項２】
前記マスク画像生成手段は、前記撮影画像の各画素の色に基づいて、前記被写体の部分と、前記被写体の影の部分と、それ以外の部分とを検出し、前記第１のマスク画像を生成する
請求項１に記載の画像処理装置。
【請求項３】
前記合成手段は、前記第１のマスク画像を用いて抽出した前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成して得られた合成画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、再度、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項４】
前記合成手段は、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項５】
前記色背景画像は、前記背景画像の色と同じ色の物に投影する影の色の画像である
請求項４に記載の画像処理装置。
【請求項６】
前記合成手段は、前記撮影画像の撮影モードに応じて明るさを変えた前記色背景画像を用いる
請求項４または５に記載の画像処理装置。
【請求項７】
前記マスク画像生成手段は、前記撮影画像に基づいて、前記被写体の部分を透過させるとともに前記被写体の輪郭の周りの一定の部分を所定の透過率で透過させる第２のマスク画像を生成し、
前記合成手段は、前記撮影画像から、前記被写体の部分と前記被写体の輪郭の周りの部分とを前記第２のマスク画像を用いて抽出し、前記背景画像と色が異なる画像である色背景画像に合成して得られた合成画像を前記撮影画像として、前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記第１のマスク画像を用いて抽出し、前記背景画像に合成する
請求項１または２に記載の画像処理装置。
【請求項８】
前記合成手段は、前記被写体の部分と前記被写体の影の部分とを前記背景画像に合成する前に、前記被写体の影の部分の色の調整を行う
請求項１乃至７のいずれかに記載の画像処理装置。
【請求項９】
前記マスク画像生成手段は、前記第１のマスク画像を加工し、
前記合成手段は、加工された前記第１のマスク画像を用いて、前記被写体の部分と前記被写体の影の部分とを抽出する
請求項１乃至８のいずれかに記載の画像処理装置。
【請求項１０】
前記マスク画像生成手段は、前記第１のマスク画像の加工として、前記第１のマスク画像のコントラストをトーンカーブに従って調整する処理と、前記第１のマスク画像の輪郭をぼかす処理とのうちの少なくともいずれかの処理を行う
請求項９に記載の画像処理装置。
【請求項１１】
撮影画像に基づいて、前記撮影画像に写る被写体の部分を透過させるとともに、撮影時に前記被写体の後方にある物に投影した前記被写体の影の部分を所定の透過率で透過させるマスク画像を生成し、
前記撮影画像から、前記被写体の部分と前記被写体の影の部分とを前記マスク画像を用いて抽出し、前記被写体の背景となる画像である背景画像に合成する
ステップを含む画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図４４】
【図４５】
【図４６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【図３７】
【図３８】
【図３９】
【図４０】
【図４１】
【図４２】
【図４３】
【図４４】
【図４５】
【図４６】
【公開番号】特開２０１２−２３５３１４（Ｐ２０１２−２３５３１４Ａ）
【公開日】平成２４年１１月２９日（２０１２．１１．２９）
【国際特許分類】
【出願番号】特願２０１１−１０２４４４（Ｐ２０１１−１０２４４４）
【出願日】平成２３年４月２８日（２０１１．４．２８）
【出願人】（３０７０１００９６）フリュー株式会社 (210)
【Ｆターム（参考）】
【公開日】平成２４年１１月２９日（２０１２．１１．２９）
【国際特許分類】
【出願日】平成２３年４月２８日（２０１１．４．２８）
【出願人】（３０７０１００９６）フリュー株式会社 (210)
【Ｆターム（参考）】
[ Back to top ]