画像処理装置、及びプログラム
【課題】サイン等の文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供する。
【解決手段】
記録済の撮影画像データに、特定のアートフィルタを用いた第１のフィルタ処理を施す（Ｓ１１）。アートフィルタのパラメータを変更した後（Ｓ１２）、パラメータを変更したアートフィルタを用いた第２のフィルタ処理をサイン画像等のデータに施す（Ｓ１３）。しかる後、フィルタ処理をサイン画像等のデータを、フィルタ処理後の撮影画像データに合成し、サイン等の文字を含む非写実的画像のデータを生成する（Ｓ１５，Ｓ１６）。生成した文字付きの非写実的画像において、文字部分と背景の画像部分とを視覚的に差別化することができる。
【解決手段】
記録済の撮影画像データに、特定のアートフィルタを用いた第１のフィルタ処理を施す（Ｓ１１）。アートフィルタのパラメータを変更した後（Ｓ１２）、パラメータを変更したアートフィルタを用いた第２のフィルタ処理をサイン画像等のデータに施す（Ｓ１３）。しかる後、フィルタ処理をサイン画像等のデータを、フィルタ処理後の撮影画像データに合成し、サイン等の文字を含む非写実的画像のデータを生成する（Ｓ１５，Ｓ１６）。生成した文字付きの非写実的画像において、文字部分と背景の画像部分とを視覚的に差別化することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字を含む非写実的画像を原画像から生成する画像処理技術に関するものである。
【背景技術】
【０００２】
従来、例えば下記特許文献１には、デジタルカメラ等により撮影され画像データとして記録された撮影画像を絵画風の画像等に変換する技術が記載されている。一般に、撮影画像（写真）のような写実的な画像は写実的画像と呼ばれ、絵画風の画像や、コンピュータグラフックによる画像等のように写実的ではない画像は非写実的画像と呼ばれている。
【０００３】
一方、撮影画像を例えば絵画風の画像等の非写実的画像に変換し、新たな作品として鑑賞をする場合には、撮影画像に予めサイン等の文字を付加しておけば、より鑑賞に適した非写実的画像を得ることができる。画像に文字を付加する技術については、下記特許文献２等において公知である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−３１６８８号公報
【特許文献２】特開平１１−１８７２９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、サイン等の文字を付加した撮影画像を非写実的画像に変換する場合には、変換後の非写実的画像に与えられる効果の内容によってはサインが判読しづらくなる。つまりサインが背景となる画像部分に埋もれてしまうという問題があった。
【０００６】
本発明は、かかる従来の課題に鑑みてなされたものであり、サイン等の文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の第１の観点に係る画像処理装置にあっては、原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段とを備えたことを特徴とする。
【０００８】
また、本発明の第１の観点に係るプログラムにあっては、コンピュータを、原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、前記第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段として機能させることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、サイン等の文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明に係るデジタルフォトフレームのハードウェア構成を示す概略ブロック図である。
【図２】デジタルフォトフレームの機能の要部を示す機能ブロック図である。
【図３】エフェクトモードにおけるＣＰＵの処理手順を示すフローチャートである。
【図４】（ａ）は、文字を含む非写実的画像の一例を示す図、（ｂ）は、（ａ）の要部拡大図に相当する模式図である。
【図５】文字を含む非写実的画像の他の例を示す、図４（ａ）に対応する図である。
【発明を実施するための形態】
【００１１】
以下、本発明の一実施形態について説明する。本実施形態は、主としてデジタルカメラ等により撮影され画像データとして記録された画像、つまり写真を表示する機能を有するデジタルフォトフレーム（以下、ＤＰＦという。）に関するものである。
【００１２】
図１は、本発明を適用したＤＰＦ１のハードウェア構成を示す概略ブロック図である。ＤＰＦ１は、ＣＰＵ（Central Processing Unit）１０１によってシステムの全体を制御される構成である。ＣＰＵ１０１には、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access memory）１０３、メディアコントローラ１０４、操作キー群２０１、ディスプレイ３０１が接続されている。
【００１３】
ＲＯＭ１０２は、ＣＰＵ１０１にシステム全体を制御させるための複数種のプログラムやデータが記憶されているメモリである。ＲＯＭ１０２に記憶されているプログラムには、ＣＰＵ１０１を本実施形態での第１の変換手段、第２の変換手段、合成手段、文字領域検出手段として機能させる表示制御プログラム１０２ａが含まれる。
【００１４】
また、ＲＯＭ１０２に記憶されているデータには、ＣＰＵ１０１が、任意の画像データを対象として文字認識処理を行う際に使用される、種々の文字の形状等の特徴を示す文字パターンデータ等が含まれる。文字認識処理は、画像データにより表される画像から文字が存在する文字領域を認識する処理である。
【００１５】
ＲＡＭ１０３は、具体的にはＳＤＲＡＭ（Synchronous dynamic random-access memory）等である。
【００１６】
メディアコントローラ１０４は、ＤＰＦ１の図示しない本体に設けられているメモリカードスロットに着脱自在に装着された記録メディア４０と、ＣＰＵ１０１との間におけるデータの入出力を制御する入出力インターフェースである。
【００１７】
記録メディア４０には、デジタルカメラ等において撮影により取得された画像（写真）を表す画像データが複数記録されている。画像データは、例えばＪＰＥＧ（Joint Photographic Expert Group）方式により圧縮され、撮影日時等の付加情報と共に静止画ファイルとして記録メディア４０に記憶されている。なお、以下の説明では撮影により取得された画像を撮影画像といい、撮影画像を表す画像データを撮影画像データという。
【００１８】
操作キー群２０１は、電源スイッチ及び複数の操作スイッチから構成される。ＣＰＵ１０１は、操作キー群２０１における操作キー等の操作状態を定常的にスキャンすることにより、所定のキー操作によるユーザからの種々の指示を検知する。
【００１９】
ディスプレイ３０１は、バックライト付きのカラー液晶表示パネルと、ＣＰＵ１０１から供給される画像データ等の表示データに応じてカラー液晶表示パネルを駆動し、画像データにより表される画像等をカラー液晶表示パネルに表示させる駆動回路とから構成される。
【００２０】
図２は、ＤＰＦ１が有する機能の要部を示す機能ブロック図である。ＤＰＦ１は、制御部１０と、操作部２０、表示部３０を有している。制御部１０は、文字領域検出部１１と、第１の変換部１２、第２の変換部１３、画像合成部１４、表示制御部１５、記憶部１６から構成される。
【００２１】
操作部２０は、ＤＰＦ１に対するユーザからの各種の指示を検知する機能部分であり、図１に示した操作キー群２０１により実現される。
【００２２】
表示部３０は、記録メディア４０に記録されている撮影画像データにより表される撮影画像や、他の画像データにより表される画像を表示したり、ユーザがＤＰＦ１を操作する際に必要とする各種の操作画面を表示したりする。表示部３０は、図１に示したディスプレイ３０１により実現される。
【００２３】
文字領域検出部１１は、記録メディア４０に記録されている任意の撮影画像データに対して文字領域検出処理を行う。文字領域検出処理は、画像データにより表される撮影画像において文字が表現されている文字領域を検出し、検出した文字領域の画像内での位置を示す位置情報を取得する処理である。文字領域検出部１１は、図１に示したＣＰＵ１０１により実現される。
【００２４】
第１の変換部１２は、記録メディア４０に記録されている任意の撮影画像データに、特定のフィルタ処理を施すことによって、処理対象の撮影画像データにより表される撮影画像（原画像）を、鑑賞を目的とした特定の視覚的効果を与えた非写実的画像に変換する。第１の変換部１２が撮影画像に与える鑑賞を目的とした特定の視覚的効果が、本実施形態における第１の視覚的効果である。特定の視覚的効果は、例えば水彩画、油絵画、鉛筆画、パステル画等の特定の絵画の画風等である。
【００２５】
第１の変換部１２が、任意の撮影画像データに施すことができるフィルタ処理の種類は複数であり、第１の変換部１２は複数種類の視覚的効果を変換後の非写実的画像に与えることができる。第１の変換部１２は、図１に示したＣＰＵ１０１により実現される。
【００２６】
第２の変換部１３は、記録メディア４０に記録されているサイン画像のデータ、又は文字領域検出部１１が任意の画像から検出した文字領域の画像（以下、文字領域画像という。）を表すデータに、特定のフィルタ処理を施すことによって、サイン画像や文字領域画像を、特定の視覚的効果を与えた非写実的画像に変換する。
【００２７】
但し、第２の変換部１３が行うフィルタ処理は、第１の変換部１２が行うフィルタ処理とは内容が異なり、第２の変換部１３が、サイン画像や文字領域画像に与える特定の視覚的効果は、第１の変換部１２が原画像に与える視覚的効果とは異なるものである。第２の変換部１２がサイン画像や文字領域画像に与える特定の視覚的効果が、本実施形態における第２の視覚的効果である。
【００２８】
また、第２の変換部１３によるフィルタ処理後のサイン画像や文字領域画像が、本実施形態における効果付き文字である。第２の変換部１３は、図１に示したＣＰＵ１０１により実現される。
【００２９】
なお、以下の説明においては、第１の変換部１２が行うフィルタ処理を第１のフィルタ処理といい、かつ第２の変換部１３が行うフィルタ処理を第２のフィルタ処理という。また、第１の変換部１２による原画像の非写実的画像への変換、及び第２の変換部１３によるサイン画像や文字領域画像の非写実的画像への変換をアート変換という。
【００３０】
画像合成部１４は、第１の変換部１２によるアート変換後の撮影画像を表す画像データに、第２の変換部１３によるアート変換後のサイン画像や文字領域画像を表す画像データを合成することにより、文字を含む非写実的画像を表す画像データを生成する。画像合成部１４は、図１に示したＣＰＵ１０１により実現される。
【００３１】
表示制御部１５は、記録メディア４０に記録されている任意の画像データにより表される画像や、画像合成部１４が生成した画像データにより表される文字を含む非写実的画像を表示部３０に表示させる。表示制御部１５は、図１に示したＣＰＵ１０１により実現される。
【００３２】
記憶部１６は、文字領域検出部１１が任意の画像から検出した文字領域画像を表すデータである文字領域画像データや、表示制御部１５が表示部３０に表示させる種々の画像のデータを一時的に記憶する。記憶部１６は、図１に示したＲＡＭ１０３により実現される。
【００３３】
次に、以上の構成からなるＤＰＦ１の動作について説明する。ＤＰＦ１には表示モードとして、通常モードとエフェクトモードとが用意されている。表示モードの切替は、ユーザが操作キー群２０１の所定の操作キーを操作することによって適宜可能となっている。
【００３４】
通常モードは、記録メディア４０に記録されている撮影画像データにより表される撮影画像をディスプレイ３０１にそのまま表示する表示モードである。エフェクトモードは、撮影画像を、文字を含む非写実的画像に変換してディスプレイ３０１に表示する表示モードである。
【００３５】
以下、エフェクトモードにおけるＤＰＦ１の具体的な動作について説明する。エフェクトモードにおいてユーザは所定のキー操作によって、表示対象の撮影画像を選択する。
【００３６】
図３は、エフェクトモードにおいて、制御部１０（ＣＰＵ１０１）がＲＯＭ１０２に記憶されている表示制御プログラム１０２ａに従って実行する処理であって、表示対象の撮影画像が選択された後の処理を示したフローチャートである。
【００３７】
エフェクトモードにおいて制御部１０は、表示対象の撮影画像が選択された後、ユーザにより選択された撮影画像を表す撮影画像データを記録メディア４０から読み出し、記憶部１６（ＲＡＭ１０３）に一時記憶する（ステップＳ１）。
【００３８】
次に、文字領域検出部１１（ＣＰＵ１０１）が、記憶部１６に記憶された撮影画像データを処理対象として文字領域検出処理を行う（ステップＳ２）。ステップＳ２の処理において文字領域検出部１１は、撮影画像データにより表される撮影画像において文字が表現されている文字領域を検出し、検出した文字領域の撮影画像内での位置を示す位置情報を取得する。
【００３９】
文字領域検出部１１による文字領域の検出方法は、例えば特開２００９−２５９１９０公報に記載されている、特徴標準辞書の文字カテゴリの構造情報を利用して、文字画像から文字パターンを抽出する公知の技術等を適用した方法である。つまり特徴標準辞書の文字カテゴリと類似する特徴を有する領域を文字領域として検出する方法である。
【００４０】
文字領域の検出が成功した場合（ステップＳ３：ＹＥＳ）、制御部１０は、文字領域検出部１１が検出した文字領域の画像データを撮影画像から切り出し（ステップＳ４）、切り出した画像データを、文字領域検出部１１が取得した文字領域の位置情報と共に、撮影画像データとは別に記憶部１６に一時記憶する（ステップＳ５）。ステップＳ４において制御部１０が切り出す画像データは、撮影画像において表現されている背景を含まない文字のみを表す画像データである。
【００４１】
一方、ステップＳ２の処理において文字領域が検出できなかった場合には（ステップＳ３：ＮＯ）、制御部１０は、サイン画像の選択画面を表示部３０（ディスプレイ３０１）に表示させる（ステップＳ６）。ステップＳ６において制御部１０は、記録メディア４０から、予め記録されている１又は複数のサイン画像データを読み出し、サイン画像データにより表されるサイン画像を表示部３０に表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望するサイン画像を選択させる。
【００４２】
その後、制御部１０は、ユーザによりサイン画像が選択されたら（ステップＳ７：ＹＥＳ）、選択されたサイン画像を表すサイン画像データを記憶部１６に一時記憶する（ステップＳ８）。
【００４３】
つまり、ステップＳ２〜Ｓ８の処理によって、記憶部１６には、撮影画像データから切り出された文字領域画像データ、又はサイン画像データのいずれか一方の画像データが一時記憶される。
【００４４】
引き続き、制御部１０は、アートフィルタの選択画面を表示部３０に表示させる（ステップＳ９）。ステップＳ６において制御部１０は、ＤＰＦ１に予め用意されている複数種類のフィルタ処理に応じてそれぞれ命名された複数種のアートフィルタの名称（記号でもよい。）を表示した選択画面を表示部３０に表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望するアートフィルタを選択させる。
【００４５】
なお、アートフィルタとは、複数のフィルタ処理の種類をユーザに示すために使用される用語であり、例えば市販のソフトウエアパッケージであるＡｄｏｂｅシステム社によるＡｄｏｂｅＰｈｏｔｏｓｈｏｐ（商標）において用いられているような「アーティスティックフィルター」の種類を示す用語（「色鉛筆」、「水彩画」等）と同じものである。
【００４６】
その後、ユーザによりアートフィルタが選択されたら（ステップＳ１０：ＹＥＳ）、第１の変換部１２（ＣＰＵ１０１）が、選択されたアートフィルタに対応する第１のフィルタ処理を、記憶部１６に記憶されている処理対象の撮影画像データに施すアート変換を行う（ステップＳ１１）。ステップＳ１１において第１の変換部１２は、アート変換後の撮影画像データ、つまり撮影画像に特定の視覚的効果を与えた非写実的画像を表す画像データを記憶部１６に記憶する。
【００４７】
第１の変換部１２が処理対象の撮影画像データに施す第１のフィルタ処理は、例えば本発明の背景技術として説明した特開２００６−３１６８８号公報に記載されている下記の技術等の公知の技術を適用した方法によって、撮影画像データにより表される画像に特定の視覚的効果を与える処理である。特開２００６−３１６８８号公報に記載されている技術は、画像データに含まれる画素について、色などを判断基準の一つとして各画素をグループ化し、画像データを複数の基本領域に分割し、基本領域を表現の単位領域とする。さらに各々の基本領域の特徴に基づいて統合した複数の基本領域を表現の単位領域とする。そして、各々の単位領域の特徴に基づいて各々の単位領域に含まれる画素の色を決定する技術である。
【００４８】
また、第１のフィルタ処理は、例えばＡｄｏｂｅシステム社によるＡｄｏｂｅＰｈｏｔｏｓｈｏｐ（商標）において画像の加工に用いられている画像処理技術によっても実現することができる。
【００４９】
次に、第２の変換部１３（ＣＰＵ１０１）が、第２のフィルタ処理の内容を設定する（ステップＳ１２）。ステップＳ１２の処理は、第１の変換部１２が第１のフィルタ処理に際して使用した設定値を、第２の変換部１３が第２のフィルタ処理において使用する設定値に変更する処理である。第２の変換部１３が変更する設定値は、第１のフィルタ処理による変換後の非写実的画像に与える視覚的効果を左右する設定値である。
【００５０】
また、第２の変換部１３が変更する設定値は、ＤＰＦ１に予め用意されているフィルタ処理の種類毎に予め決められている規定の設定値であり、第１の変換部１２が第１のフィルタ処理として実行したフィルタ処理に対応する規定の設定値である。規定の設定値は、例えばフィルタ処理後の画像内における筆触の太さ、筆触の密度、筆触の向きを左右する設定値である。ここで、筆触とは、絵画などにおける絵筆の効果、すなわち筆さばきによって生じた色調・明暗やリズム感などの表現を形成する絵筆の作用のことであり、筆ざわり、タッチと同義である。設定値が、フィルタ処理後の画像内における筆触の太さ、筆触の密度、筆触の向きを左右する設定値である場合、設定値には以下のような値が設定される。
【００５１】
設定値がフィルタ処理後の画像内における筆触の太さを左右する設定値である場合、変更後の設定値は、筆触の太さを、例えば変更前の設定値で得られる筆触の太さの３倍以上、又は３分の１以下の太さとする値である。つまり変更後における設定値は、筆触の太さを、変更前の設定値で得られる筆触の太さとの違いが見た目で分かる程度の太さとする値である。
【００５２】
また、設定値がフィルタ処理後の画像内における筆触の密度を左右する設定値である場合、変更後の設定値は、筆触の密度を、例えば変更前の設定値で得られる筆触の密度の２倍以上、又は２分の１以下の密度とする値である。つまり変更後における設定値は、筆触の密度を、変更前の設定値で得られる筆触の密度との違いが見た目で分かる程度の密度とする値である。ここで、フィルタ処理後の画像内における筆触の密度とは、例えばフィルタ処理後の画像内にハッチングとして認識される平行して点在する同一又は異なる長さの多数の線が表れる場合における線の本数である。
【００５３】
また、設定値がフィルタ処理後の画像内における筆触の向きを左右する設定値である場合、変更後の設定値は、筆触の向きを、例えば変更前の設定値で得られる筆触の向きを、筆触の傾き角度が例えば３０度〜９０度異なる向きとする値である。つまり変更後における設定値は、筆触の向きを、変更前の設定値で得られる筆触の向きとの違いが見た目で分かる程度の向きとする値である。
【００５４】
また、ステップＳ１２の処理において第２の変換部１３は、規定の設定値を変更する際、設定値の変更度合をサイン画像や文字領域画像の撮影画像の大きさに対する相対的な大きさに応じて変化させる。例えば第２の変換部１３は、サイン画像や文字領域画像の大きさレベルを、予め決められている基準に従い「大」又は「小」のいずれのレベルであるか判断する。そして、第２の変換部１３は、大きさレベルが「小」のときには、大きさレベルが「大」のときよりも大きな変更度合で設定値を変更する。
【００５５】
引き続き、第２の変換部１３は、第２のフィルタ処理を記憶部１６に記憶されている文字領域画像データ、又はサイン画像データに施すアート変換を行う（ステップＳ１３）。第２のフィルタ処理は、第１の変換部１２による第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理を、ステップＳ１２の処理で変更した設定値を用いて行うフィルタ処理である。ステップＳ１３において第２の変換部１３は、アート変換後の文字領域画像データ、又はサイン画像データ、つまり撮影画像とは異なる特定の視覚的効果を与えた非写実的画像を表す画像データを記憶部１６に記憶する。以下の説明では、ステップＳ１３の処理で第２の変換部１３が記憶部１６に記憶する画像データにより表される非写実的画像を、便宜的に効果付き文字という。
【００５６】
次に、画像合成部１４（ＣＰＵ１０１）が、まず、第２の変換部１３における第２のフィルタ処理の対象がサイン画像であったか否かを確認する（ステップＳ１４）。そして、画像合成部１４は、第２のフィルタ処理の対象がサイン画像であった場合には（ステップＳ１４：ＹＥＳ）、効果付き文字を表す画像データを、アート変換後の撮影画像の予め決められている特定位置に上書き合成する（ステップＳ１５）。画像合成部１４は、合成後の画像データを記憶部１６に記憶する。
【００５７】
また、画像合成部１４は、第２のフィルタ処理の対象が文字領域画像であった場合には（ステップＳ１４：ＮＯ）、効果付き文字を表す画像データを、アート変換後の撮影画像における元の位置に上書き合成する（ステップＳ１６）。画像合成部１４は、合成後の画像データを記憶部１６に記憶する。
【００５８】
その後、表示制御部１５（ＣＰＵ１０１）が、ステップＳ１５、又はステップＳ１６の処理において記憶部１６に記憶された合成後の画像データを表示部３０（ディスプレイ３０１）へ送り、表示部３０において文字を含む非写実的画像を表示させる（ステップＳ１７）。
【００５９】
図４（ａ）は、ステップＳ１７の処理に伴いディスプレイ３０１に表示される文字を含む非写実的画像Ａ、つまり背景となるアート変換後の撮影画像Ｂに効果付き文字Ｃが合成された画像の一例を示す図である。また、図４（ｂ）は、効果付き文字Ｃの周辺を示す拡大図である。図４（ｂ）は、第１のフィルタ処理によりアート変換後の撮影画像Ｂに与えられる視覚的効果と、第２のフィルタ処理によりアート変換後の効果付き文字Ｃに与えられる視覚的効果との違いが筆触の向きである場合を便宜的に示した図である。
【００６０】
また、図５は、アート変換後の撮影画像Ｂに与えられる視覚的効果と、アート変換後の効果付き文字Ｃに与えられる視覚的効果との違いが筆触の太さである場合の例を便宜的に示した図４（ｂ）に対応する図である。
【００６１】
ここで、アート変換後の撮影画像Ｂに合成されるアート変換後の効果付き文字Ｃは、アート変換前の撮影画像から切り出された文字領域画像、又はサイン画像に、撮影画像とは異なる視覚的効果を与えた非写実的画像である。
【００６２】
そのため、効果付き文字Ｃには、背景のアート変換後の撮影画像Ｂとは異なる雰囲気を確保することができ、効果付き文字Ｃと背景のアート変換後の撮影画像Ｂとを視覚的に差別化することができる。よって、文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することができる。
【００６３】
また、第２のフィルタ処理を、第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理であるとともに、第１のフィルタ処理で使用した設定値を変更して使用する処理とし、かつ第１のフィルタ処理で使用した設定値の変更を以下のようにした。すなわち、第１のフィルタ処理で使用した設定値を、サイン画像や文字領域画像の大きさレベルが「小」のときには、大きさレベルが「大」のときよりも大きな変更度合で変更するようにした。したがって、効果付き文字が小さい場合には、アート変換後の撮影画像との雰囲気の違いを、効果付き文字が大きい場合に比べて顕著なものとすることにより、より確実に効果付き文字とアート変換後の撮影画像とを視覚的に差別化することができる。
【００６４】
（変形等）
本実施形態においては、アート変換前の撮影画像のから切り出された文字領域画像、又はサイン画像に施す第２のフィルタ処理が、第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理を、第１のフィルタ処理とは異なる設定値を用いて行う処理である構成について説明した。しかし、ＤＰＦ１には、第２のフィルタ処理を第１のフィルタ処理とは全く異なるアルゴリズムに基づくフィルタ処理とした構成を採用してもよい。例えば第１のフィルタ処理を、撮影画像を油絵風の画像に変換する処理とするとともに、第２のフィルタ処理を、撮影画像を鉛筆画風の画像に変換する処理としてもよい。
【００６５】
また、第２のフィルタ処理は、文字領域画像、又はサイン画像の色を、単にアート変換後の撮影画像の合成箇所における背景色に対してネガポジ反転した色に変更する処理としてもよい。
【００６６】
また、本実施形態においては、サイン画像を効果付き文字にアート変換し、アート変換後の撮影画像に合成するとき、効果付き文字をアート変換後の撮影画像の予め決められている特定位置に合成する場合について説明した。
【００６７】
しかし、効果付き文字の合成位置を、予め決められた設定規則に従い自動的に設定するようにしてもよい。合成位置の設定規則としては、例えば（ａ）画像の隅であること、（ｂ）画像の下部であること、（ｃ）注目領域ではないこと、（ｄ）ピントの合っている位置から離れていることの複数の条件をより多く満たすといったものである。なお、（ｃ）の注目領域とは、例えば撮影画像から公知の顔検出技術により検出した人物の顔領域である。
【００６８】
また、本実施形態においては、ＤＰＦ１が非写実的画像に変換して表示する画像が、写真撮影により得られた画像（写真）である場合について説明した。しかし、本発明において非写実的画像への変換対象となる原画像は、写真撮影により得られた画像に限らず、例えば写真をスキャナで読み取り画像データとして記録されたものであっても構わない。
【００６９】
また、本実施形態においては、本発明をＤＰＦに採用した場合について説明したが、本発明は、所定の画像処理機能を備えたものであれば、ＤＰＦ以外の他の装置にも適用することができる。他の装置としては、例えばデジタルカメラや、デジタルカメラが内蔵された携帯電話端末等の任意の携帯情報端末、汎用的なパーソナルコンピュータ、プリンタである。
【符号の説明】
【００７０】
１ ＤＰＦ
１０ 制御部
１１ 文字領域検出部
１２ 第１の変換部
１３ 第２の変換部
１４ 画像合成部
１５ 表示制御部
１６ 記憶部
２０ 操作部
３０ 表示部
４０ 記録メディア
１０１ ＣＰＵ
１０２ ＲＯＭ
１０２ａ 表示制御プログラム
１０３ ＲＡＭ
１０４ メディアコントローラ
２０１ 操作キー群
３０１ ディスプレイ
Ａ 文字を含む非写実的画像
Ｂ アート変換後の撮影画像
Ｃ 効果付き文字
【技術分野】
【０００１】
本発明は、文字を含む非写実的画像を原画像から生成する画像処理技術に関するものである。
【背景技術】
【０００２】
従来、例えば下記特許文献１には、デジタルカメラ等により撮影され画像データとして記録された撮影画像を絵画風の画像等に変換する技術が記載されている。一般に、撮影画像（写真）のような写実的な画像は写実的画像と呼ばれ、絵画風の画像や、コンピュータグラフックによる画像等のように写実的ではない画像は非写実的画像と呼ばれている。
【０００３】
一方、撮影画像を例えば絵画風の画像等の非写実的画像に変換し、新たな作品として鑑賞をする場合には、撮影画像に予めサイン等の文字を付加しておけば、より鑑賞に適した非写実的画像を得ることができる。画像に文字を付加する技術については、下記特許文献２等において公知である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−３１６８８号公報
【特許文献２】特開平１１−１８７２９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、サイン等の文字を付加した撮影画像を非写実的画像に変換する場合には、変換後の非写実的画像に与えられる効果の内容によってはサインが判読しづらくなる。つまりサインが背景となる画像部分に埋もれてしまうという問題があった。
【０００６】
本発明は、かかる従来の課題に鑑みてなされたものであり、サイン等の文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の第１の観点に係る画像処理装置にあっては、原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段とを備えたことを特徴とする。
【０００８】
また、本発明の第１の観点に係るプログラムにあっては、コンピュータを、原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、前記第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段として機能させることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、サイン等の文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明に係るデジタルフォトフレームのハードウェア構成を示す概略ブロック図である。
【図２】デジタルフォトフレームの機能の要部を示す機能ブロック図である。
【図３】エフェクトモードにおけるＣＰＵの処理手順を示すフローチャートである。
【図４】（ａ）は、文字を含む非写実的画像の一例を示す図、（ｂ）は、（ａ）の要部拡大図に相当する模式図である。
【図５】文字を含む非写実的画像の他の例を示す、図４（ａ）に対応する図である。
【発明を実施するための形態】
【００１１】
以下、本発明の一実施形態について説明する。本実施形態は、主としてデジタルカメラ等により撮影され画像データとして記録された画像、つまり写真を表示する機能を有するデジタルフォトフレーム（以下、ＤＰＦという。）に関するものである。
【００１２】
図１は、本発明を適用したＤＰＦ１のハードウェア構成を示す概略ブロック図である。ＤＰＦ１は、ＣＰＵ（Central Processing Unit）１０１によってシステムの全体を制御される構成である。ＣＰＵ１０１には、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access memory）１０３、メディアコントローラ１０４、操作キー群２０１、ディスプレイ３０１が接続されている。
【００１３】
ＲＯＭ１０２は、ＣＰＵ１０１にシステム全体を制御させるための複数種のプログラムやデータが記憶されているメモリである。ＲＯＭ１０２に記憶されているプログラムには、ＣＰＵ１０１を本実施形態での第１の変換手段、第２の変換手段、合成手段、文字領域検出手段として機能させる表示制御プログラム１０２ａが含まれる。
【００１４】
また、ＲＯＭ１０２に記憶されているデータには、ＣＰＵ１０１が、任意の画像データを対象として文字認識処理を行う際に使用される、種々の文字の形状等の特徴を示す文字パターンデータ等が含まれる。文字認識処理は、画像データにより表される画像から文字が存在する文字領域を認識する処理である。
【００１５】
ＲＡＭ１０３は、具体的にはＳＤＲＡＭ（Synchronous dynamic random-access memory）等である。
【００１６】
メディアコントローラ１０４は、ＤＰＦ１の図示しない本体に設けられているメモリカードスロットに着脱自在に装着された記録メディア４０と、ＣＰＵ１０１との間におけるデータの入出力を制御する入出力インターフェースである。
【００１７】
記録メディア４０には、デジタルカメラ等において撮影により取得された画像（写真）を表す画像データが複数記録されている。画像データは、例えばＪＰＥＧ（Joint Photographic Expert Group）方式により圧縮され、撮影日時等の付加情報と共に静止画ファイルとして記録メディア４０に記憶されている。なお、以下の説明では撮影により取得された画像を撮影画像といい、撮影画像を表す画像データを撮影画像データという。
【００１８】
操作キー群２０１は、電源スイッチ及び複数の操作スイッチから構成される。ＣＰＵ１０１は、操作キー群２０１における操作キー等の操作状態を定常的にスキャンすることにより、所定のキー操作によるユーザからの種々の指示を検知する。
【００１９】
ディスプレイ３０１は、バックライト付きのカラー液晶表示パネルと、ＣＰＵ１０１から供給される画像データ等の表示データに応じてカラー液晶表示パネルを駆動し、画像データにより表される画像等をカラー液晶表示パネルに表示させる駆動回路とから構成される。
【００２０】
図２は、ＤＰＦ１が有する機能の要部を示す機能ブロック図である。ＤＰＦ１は、制御部１０と、操作部２０、表示部３０を有している。制御部１０は、文字領域検出部１１と、第１の変換部１２、第２の変換部１３、画像合成部１４、表示制御部１５、記憶部１６から構成される。
【００２１】
操作部２０は、ＤＰＦ１に対するユーザからの各種の指示を検知する機能部分であり、図１に示した操作キー群２０１により実現される。
【００２２】
表示部３０は、記録メディア４０に記録されている撮影画像データにより表される撮影画像や、他の画像データにより表される画像を表示したり、ユーザがＤＰＦ１を操作する際に必要とする各種の操作画面を表示したりする。表示部３０は、図１に示したディスプレイ３０１により実現される。
【００２３】
文字領域検出部１１は、記録メディア４０に記録されている任意の撮影画像データに対して文字領域検出処理を行う。文字領域検出処理は、画像データにより表される撮影画像において文字が表現されている文字領域を検出し、検出した文字領域の画像内での位置を示す位置情報を取得する処理である。文字領域検出部１１は、図１に示したＣＰＵ１０１により実現される。
【００２４】
第１の変換部１２は、記録メディア４０に記録されている任意の撮影画像データに、特定のフィルタ処理を施すことによって、処理対象の撮影画像データにより表される撮影画像（原画像）を、鑑賞を目的とした特定の視覚的効果を与えた非写実的画像に変換する。第１の変換部１２が撮影画像に与える鑑賞を目的とした特定の視覚的効果が、本実施形態における第１の視覚的効果である。特定の視覚的効果は、例えば水彩画、油絵画、鉛筆画、パステル画等の特定の絵画の画風等である。
【００２５】
第１の変換部１２が、任意の撮影画像データに施すことができるフィルタ処理の種類は複数であり、第１の変換部１２は複数種類の視覚的効果を変換後の非写実的画像に与えることができる。第１の変換部１２は、図１に示したＣＰＵ１０１により実現される。
【００２６】
第２の変換部１３は、記録メディア４０に記録されているサイン画像のデータ、又は文字領域検出部１１が任意の画像から検出した文字領域の画像（以下、文字領域画像という。）を表すデータに、特定のフィルタ処理を施すことによって、サイン画像や文字領域画像を、特定の視覚的効果を与えた非写実的画像に変換する。
【００２７】
但し、第２の変換部１３が行うフィルタ処理は、第１の変換部１２が行うフィルタ処理とは内容が異なり、第２の変換部１３が、サイン画像や文字領域画像に与える特定の視覚的効果は、第１の変換部１２が原画像に与える視覚的効果とは異なるものである。第２の変換部１２がサイン画像や文字領域画像に与える特定の視覚的効果が、本実施形態における第２の視覚的効果である。
【００２８】
また、第２の変換部１３によるフィルタ処理後のサイン画像や文字領域画像が、本実施形態における効果付き文字である。第２の変換部１３は、図１に示したＣＰＵ１０１により実現される。
【００２９】
なお、以下の説明においては、第１の変換部１２が行うフィルタ処理を第１のフィルタ処理といい、かつ第２の変換部１３が行うフィルタ処理を第２のフィルタ処理という。また、第１の変換部１２による原画像の非写実的画像への変換、及び第２の変換部１３によるサイン画像や文字領域画像の非写実的画像への変換をアート変換という。
【００３０】
画像合成部１４は、第１の変換部１２によるアート変換後の撮影画像を表す画像データに、第２の変換部１３によるアート変換後のサイン画像や文字領域画像を表す画像データを合成することにより、文字を含む非写実的画像を表す画像データを生成する。画像合成部１４は、図１に示したＣＰＵ１０１により実現される。
【００３１】
表示制御部１５は、記録メディア４０に記録されている任意の画像データにより表される画像や、画像合成部１４が生成した画像データにより表される文字を含む非写実的画像を表示部３０に表示させる。表示制御部１５は、図１に示したＣＰＵ１０１により実現される。
【００３２】
記憶部１６は、文字領域検出部１１が任意の画像から検出した文字領域画像を表すデータである文字領域画像データや、表示制御部１５が表示部３０に表示させる種々の画像のデータを一時的に記憶する。記憶部１６は、図１に示したＲＡＭ１０３により実現される。
【００３３】
次に、以上の構成からなるＤＰＦ１の動作について説明する。ＤＰＦ１には表示モードとして、通常モードとエフェクトモードとが用意されている。表示モードの切替は、ユーザが操作キー群２０１の所定の操作キーを操作することによって適宜可能となっている。
【００３４】
通常モードは、記録メディア４０に記録されている撮影画像データにより表される撮影画像をディスプレイ３０１にそのまま表示する表示モードである。エフェクトモードは、撮影画像を、文字を含む非写実的画像に変換してディスプレイ３０１に表示する表示モードである。
【００３５】
以下、エフェクトモードにおけるＤＰＦ１の具体的な動作について説明する。エフェクトモードにおいてユーザは所定のキー操作によって、表示対象の撮影画像を選択する。
【００３６】
図３は、エフェクトモードにおいて、制御部１０（ＣＰＵ１０１）がＲＯＭ１０２に記憶されている表示制御プログラム１０２ａに従って実行する処理であって、表示対象の撮影画像が選択された後の処理を示したフローチャートである。
【００３７】
エフェクトモードにおいて制御部１０は、表示対象の撮影画像が選択された後、ユーザにより選択された撮影画像を表す撮影画像データを記録メディア４０から読み出し、記憶部１６（ＲＡＭ１０３）に一時記憶する（ステップＳ１）。
【００３８】
次に、文字領域検出部１１（ＣＰＵ１０１）が、記憶部１６に記憶された撮影画像データを処理対象として文字領域検出処理を行う（ステップＳ２）。ステップＳ２の処理において文字領域検出部１１は、撮影画像データにより表される撮影画像において文字が表現されている文字領域を検出し、検出した文字領域の撮影画像内での位置を示す位置情報を取得する。
【００３９】
文字領域検出部１１による文字領域の検出方法は、例えば特開２００９−２５９１９０公報に記載されている、特徴標準辞書の文字カテゴリの構造情報を利用して、文字画像から文字パターンを抽出する公知の技術等を適用した方法である。つまり特徴標準辞書の文字カテゴリと類似する特徴を有する領域を文字領域として検出する方法である。
【００４０】
文字領域の検出が成功した場合（ステップＳ３：ＹＥＳ）、制御部１０は、文字領域検出部１１が検出した文字領域の画像データを撮影画像から切り出し（ステップＳ４）、切り出した画像データを、文字領域検出部１１が取得した文字領域の位置情報と共に、撮影画像データとは別に記憶部１６に一時記憶する（ステップＳ５）。ステップＳ４において制御部１０が切り出す画像データは、撮影画像において表現されている背景を含まない文字のみを表す画像データである。
【００４１】
一方、ステップＳ２の処理において文字領域が検出できなかった場合には（ステップＳ３：ＮＯ）、制御部１０は、サイン画像の選択画面を表示部３０（ディスプレイ３０１）に表示させる（ステップＳ６）。ステップＳ６において制御部１０は、記録メディア４０から、予め記録されている１又は複数のサイン画像データを読み出し、サイン画像データにより表されるサイン画像を表示部３０に表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望するサイン画像を選択させる。
【００４２】
その後、制御部１０は、ユーザによりサイン画像が選択されたら（ステップＳ７：ＹＥＳ）、選択されたサイン画像を表すサイン画像データを記憶部１６に一時記憶する（ステップＳ８）。
【００４３】
つまり、ステップＳ２〜Ｓ８の処理によって、記憶部１６には、撮影画像データから切り出された文字領域画像データ、又はサイン画像データのいずれか一方の画像データが一時記憶される。
【００４４】
引き続き、制御部１０は、アートフィルタの選択画面を表示部３０に表示させる（ステップＳ９）。ステップＳ６において制御部１０は、ＤＰＦ１に予め用意されている複数種類のフィルタ処理に応じてそれぞれ命名された複数種のアートフィルタの名称（記号でもよい。）を表示した選択画面を表示部３０に表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望するアートフィルタを選択させる。
【００４５】
なお、アートフィルタとは、複数のフィルタ処理の種類をユーザに示すために使用される用語であり、例えば市販のソフトウエアパッケージであるＡｄｏｂｅシステム社によるＡｄｏｂｅＰｈｏｔｏｓｈｏｐ（商標）において用いられているような「アーティスティックフィルター」の種類を示す用語（「色鉛筆」、「水彩画」等）と同じものである。
【００４６】
その後、ユーザによりアートフィルタが選択されたら（ステップＳ１０：ＹＥＳ）、第１の変換部１２（ＣＰＵ１０１）が、選択されたアートフィルタに対応する第１のフィルタ処理を、記憶部１６に記憶されている処理対象の撮影画像データに施すアート変換を行う（ステップＳ１１）。ステップＳ１１において第１の変換部１２は、アート変換後の撮影画像データ、つまり撮影画像に特定の視覚的効果を与えた非写実的画像を表す画像データを記憶部１６に記憶する。
【００４７】
第１の変換部１２が処理対象の撮影画像データに施す第１のフィルタ処理は、例えば本発明の背景技術として説明した特開２００６−３１６８８号公報に記載されている下記の技術等の公知の技術を適用した方法によって、撮影画像データにより表される画像に特定の視覚的効果を与える処理である。特開２００６−３１６８８号公報に記載されている技術は、画像データに含まれる画素について、色などを判断基準の一つとして各画素をグループ化し、画像データを複数の基本領域に分割し、基本領域を表現の単位領域とする。さらに各々の基本領域の特徴に基づいて統合した複数の基本領域を表現の単位領域とする。そして、各々の単位領域の特徴に基づいて各々の単位領域に含まれる画素の色を決定する技術である。
【００４８】
また、第１のフィルタ処理は、例えばＡｄｏｂｅシステム社によるＡｄｏｂｅＰｈｏｔｏｓｈｏｐ（商標）において画像の加工に用いられている画像処理技術によっても実現することができる。
【００４９】
次に、第２の変換部１３（ＣＰＵ１０１）が、第２のフィルタ処理の内容を設定する（ステップＳ１２）。ステップＳ１２の処理は、第１の変換部１２が第１のフィルタ処理に際して使用した設定値を、第２の変換部１３が第２のフィルタ処理において使用する設定値に変更する処理である。第２の変換部１３が変更する設定値は、第１のフィルタ処理による変換後の非写実的画像に与える視覚的効果を左右する設定値である。
【００５０】
また、第２の変換部１３が変更する設定値は、ＤＰＦ１に予め用意されているフィルタ処理の種類毎に予め決められている規定の設定値であり、第１の変換部１２が第１のフィルタ処理として実行したフィルタ処理に対応する規定の設定値である。規定の設定値は、例えばフィルタ処理後の画像内における筆触の太さ、筆触の密度、筆触の向きを左右する設定値である。ここで、筆触とは、絵画などにおける絵筆の効果、すなわち筆さばきによって生じた色調・明暗やリズム感などの表現を形成する絵筆の作用のことであり、筆ざわり、タッチと同義である。設定値が、フィルタ処理後の画像内における筆触の太さ、筆触の密度、筆触の向きを左右する設定値である場合、設定値には以下のような値が設定される。
【００５１】
設定値がフィルタ処理後の画像内における筆触の太さを左右する設定値である場合、変更後の設定値は、筆触の太さを、例えば変更前の設定値で得られる筆触の太さの３倍以上、又は３分の１以下の太さとする値である。つまり変更後における設定値は、筆触の太さを、変更前の設定値で得られる筆触の太さとの違いが見た目で分かる程度の太さとする値である。
【００５２】
また、設定値がフィルタ処理後の画像内における筆触の密度を左右する設定値である場合、変更後の設定値は、筆触の密度を、例えば変更前の設定値で得られる筆触の密度の２倍以上、又は２分の１以下の密度とする値である。つまり変更後における設定値は、筆触の密度を、変更前の設定値で得られる筆触の密度との違いが見た目で分かる程度の密度とする値である。ここで、フィルタ処理後の画像内における筆触の密度とは、例えばフィルタ処理後の画像内にハッチングとして認識される平行して点在する同一又は異なる長さの多数の線が表れる場合における線の本数である。
【００５３】
また、設定値がフィルタ処理後の画像内における筆触の向きを左右する設定値である場合、変更後の設定値は、筆触の向きを、例えば変更前の設定値で得られる筆触の向きを、筆触の傾き角度が例えば３０度〜９０度異なる向きとする値である。つまり変更後における設定値は、筆触の向きを、変更前の設定値で得られる筆触の向きとの違いが見た目で分かる程度の向きとする値である。
【００５４】
また、ステップＳ１２の処理において第２の変換部１３は、規定の設定値を変更する際、設定値の変更度合をサイン画像や文字領域画像の撮影画像の大きさに対する相対的な大きさに応じて変化させる。例えば第２の変換部１３は、サイン画像や文字領域画像の大きさレベルを、予め決められている基準に従い「大」又は「小」のいずれのレベルであるか判断する。そして、第２の変換部１３は、大きさレベルが「小」のときには、大きさレベルが「大」のときよりも大きな変更度合で設定値を変更する。
【００５５】
引き続き、第２の変換部１３は、第２のフィルタ処理を記憶部１６に記憶されている文字領域画像データ、又はサイン画像データに施すアート変換を行う（ステップＳ１３）。第２のフィルタ処理は、第１の変換部１２による第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理を、ステップＳ１２の処理で変更した設定値を用いて行うフィルタ処理である。ステップＳ１３において第２の変換部１３は、アート変換後の文字領域画像データ、又はサイン画像データ、つまり撮影画像とは異なる特定の視覚的効果を与えた非写実的画像を表す画像データを記憶部１６に記憶する。以下の説明では、ステップＳ１３の処理で第２の変換部１３が記憶部１６に記憶する画像データにより表される非写実的画像を、便宜的に効果付き文字という。
【００５６】
次に、画像合成部１４（ＣＰＵ１０１）が、まず、第２の変換部１３における第２のフィルタ処理の対象がサイン画像であったか否かを確認する（ステップＳ１４）。そして、画像合成部１４は、第２のフィルタ処理の対象がサイン画像であった場合には（ステップＳ１４：ＹＥＳ）、効果付き文字を表す画像データを、アート変換後の撮影画像の予め決められている特定位置に上書き合成する（ステップＳ１５）。画像合成部１４は、合成後の画像データを記憶部１６に記憶する。
【００５７】
また、画像合成部１４は、第２のフィルタ処理の対象が文字領域画像であった場合には（ステップＳ１４：ＮＯ）、効果付き文字を表す画像データを、アート変換後の撮影画像における元の位置に上書き合成する（ステップＳ１６）。画像合成部１４は、合成後の画像データを記憶部１６に記憶する。
【００５８】
その後、表示制御部１５（ＣＰＵ１０１）が、ステップＳ１５、又はステップＳ１６の処理において記憶部１６に記憶された合成後の画像データを表示部３０（ディスプレイ３０１）へ送り、表示部３０において文字を含む非写実的画像を表示させる（ステップＳ１７）。
【００５９】
図４（ａ）は、ステップＳ１７の処理に伴いディスプレイ３０１に表示される文字を含む非写実的画像Ａ、つまり背景となるアート変換後の撮影画像Ｂに効果付き文字Ｃが合成された画像の一例を示す図である。また、図４（ｂ）は、効果付き文字Ｃの周辺を示す拡大図である。図４（ｂ）は、第１のフィルタ処理によりアート変換後の撮影画像Ｂに与えられる視覚的効果と、第２のフィルタ処理によりアート変換後の効果付き文字Ｃに与えられる視覚的効果との違いが筆触の向きである場合を便宜的に示した図である。
【００６０】
また、図５は、アート変換後の撮影画像Ｂに与えられる視覚的効果と、アート変換後の効果付き文字Ｃに与えられる視覚的効果との違いが筆触の太さである場合の例を便宜的に示した図４（ｂ）に対応する図である。
【００６１】
ここで、アート変換後の撮影画像Ｂに合成されるアート変換後の効果付き文字Ｃは、アート変換前の撮影画像から切り出された文字領域画像、又はサイン画像に、撮影画像とは異なる視覚的効果を与えた非写実的画像である。
【００６２】
そのため、効果付き文字Ｃには、背景のアート変換後の撮影画像Ｂとは異なる雰囲気を確保することができ、効果付き文字Ｃと背景のアート変換後の撮影画像Ｂとを視覚的に差別化することができる。よって、文字を含む非写実的画像として、文字が背景部分に埋もれていない非写実的画像を提供することができる。
【００６３】
また、第２のフィルタ処理を、第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理であるとともに、第１のフィルタ処理で使用した設定値を変更して使用する処理とし、かつ第１のフィルタ処理で使用した設定値の変更を以下のようにした。すなわち、第１のフィルタ処理で使用した設定値を、サイン画像や文字領域画像の大きさレベルが「小」のときには、大きさレベルが「大」のときよりも大きな変更度合で変更するようにした。したがって、効果付き文字が小さい場合には、アート変換後の撮影画像との雰囲気の違いを、効果付き文字が大きい場合に比べて顕著なものとすることにより、より確実に効果付き文字とアート変換後の撮影画像とを視覚的に差別化することができる。
【００６４】
（変形等）
本実施形態においては、アート変換前の撮影画像のから切り出された文字領域画像、又はサイン画像に施す第２のフィルタ処理が、第１のフィルタ処理と同一のアルゴリズムによるフィルタ処理を、第１のフィルタ処理とは異なる設定値を用いて行う処理である構成について説明した。しかし、ＤＰＦ１には、第２のフィルタ処理を第１のフィルタ処理とは全く異なるアルゴリズムに基づくフィルタ処理とした構成を採用してもよい。例えば第１のフィルタ処理を、撮影画像を油絵風の画像に変換する処理とするとともに、第２のフィルタ処理を、撮影画像を鉛筆画風の画像に変換する処理としてもよい。
【００６５】
また、第２のフィルタ処理は、文字領域画像、又はサイン画像の色を、単にアート変換後の撮影画像の合成箇所における背景色に対してネガポジ反転した色に変更する処理としてもよい。
【００６６】
また、本実施形態においては、サイン画像を効果付き文字にアート変換し、アート変換後の撮影画像に合成するとき、効果付き文字をアート変換後の撮影画像の予め決められている特定位置に合成する場合について説明した。
【００６７】
しかし、効果付き文字の合成位置を、予め決められた設定規則に従い自動的に設定するようにしてもよい。合成位置の設定規則としては、例えば（ａ）画像の隅であること、（ｂ）画像の下部であること、（ｃ）注目領域ではないこと、（ｄ）ピントの合っている位置から離れていることの複数の条件をより多く満たすといったものである。なお、（ｃ）の注目領域とは、例えば撮影画像から公知の顔検出技術により検出した人物の顔領域である。
【００６８】
また、本実施形態においては、ＤＰＦ１が非写実的画像に変換して表示する画像が、写真撮影により得られた画像（写真）である場合について説明した。しかし、本発明において非写実的画像への変換対象となる原画像は、写真撮影により得られた画像に限らず、例えば写真をスキャナで読み取り画像データとして記録されたものであっても構わない。
【００６９】
また、本実施形態においては、本発明をＤＰＦに採用した場合について説明したが、本発明は、所定の画像処理機能を備えたものであれば、ＤＰＦ以外の他の装置にも適用することができる。他の装置としては、例えばデジタルカメラや、デジタルカメラが内蔵された携帯電話端末等の任意の携帯情報端末、汎用的なパーソナルコンピュータ、プリンタである。
【符号の説明】
【００７０】
１ ＤＰＦ
１０ 制御部
１１ 文字領域検出部
１２ 第１の変換部
１３ 第２の変換部
１４ 画像合成部
１５ 表示制御部
１６ 記憶部
２０ 操作部
３０ 表示部
４０ 記録メディア
１０１ ＣＰＵ
１０２ ＲＯＭ
１０２ａ 表示制御プログラム
１０３ ＲＡＭ
１０４ メディアコントローラ
２０１ 操作キー群
３０１ ディスプレイ
Ａ 文字を含む非写実的画像
Ｂ アート変換後の撮影画像
Ｃ 効果付き文字
【特許請求の範囲】
【請求項１】
原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、
第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段と
を備えたことを特徴とする画像処理装置。
【請求項２】
前記第２の変換手段は、
前記文字の筆触の太さ、筆触の密度、筆触の向きの少なくとも１つを、前記非写実的画像の筆触の太さ、筆触の密度、筆触の向きとは異なるものに変換する
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記原画像から文字が表現されている文字領域を検出する文字領域検出手段を備え、
前記第２の変換手段は、
前記文字領域検出手段が検出した文字領域に表現されている文字を第２の視覚的効果を与えた効果付き文字に変換し、
前記合成手段は、
前記非写実的画像において前記文字領域検出手段が検出した文字領域に対し前記第２の変換手段により変換された効果付き文字を合成する
ことを特徴とする請求項１又は２記載の画像処理装置。
【請求項４】
コンピュータを、
原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段
として機能させることを特徴とするプログラム。
【請求項１】
原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、
第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段と
を備えたことを特徴とする画像処理装置。
【請求項２】
前記第２の変換手段は、
前記文字の筆触の太さ、筆触の密度、筆触の向きの少なくとも１つを、前記非写実的画像の筆触の太さ、筆触の密度、筆触の向きとは異なるものに変換する
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記原画像から文字が表現されている文字領域を検出する文字領域検出手段を備え、
前記第２の変換手段は、
前記文字領域検出手段が検出した文字領域に表現されている文字を第２の視覚的効果を与えた効果付き文字に変換し、
前記合成手段は、
前記非写実的画像において前記文字領域検出手段が検出した文字領域に対し前記第２の変換手段により変換された効果付き文字を合成する
ことを特徴とする請求項１又は２記載の画像処理装置。
【請求項４】
コンピュータを、
原画像を、第１の視覚的効果を与えた非写実的画像に変換する第１の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に合成すべき文字を、前記第１の視覚的効果とは内容の異なる第２の視覚的効果を与えた効果付き文字に変換する第２の変換手段と、
前記第１の画像変換手段により変換された非写実的画像に、前記第２の変換手段により変換された効果付き文字を合成し、文字を含む非写実的画像を生成する合成手段
として機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１１−１７５３０９（Ｐ２０１１−１７５３０９Ａ）
【公開日】平成２３年９月８日（２０１１．９．８）
【国際特許分類】
【出願番号】特願２０１０−３６７８８（Ｐ２０１０−３６７８８）
【出願日】平成２２年２月２３日（２０１０．２．２３）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
【公開日】平成２３年９月８日（２０１１．９．８）
【国際特許分類】
【出願日】平成２２年２月２３日（２０１０．２．２３）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
[ Back to top ]