画像表示装置、画像表示方法、およびプログラム
【課題】類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことのできる画像表示装置、画像表示方法、およびプログラムを提供する。
【解決手段】基準画像に類似する画像を検索する類似画像検索部１１ａと、検索された類似画像を示す類似画像画面を表示させる第１の表示制御部１１ｂと、類似画像画面に示された類似画像８５とこの類似画像に所定の順番で連続する非類似画像８７とを含み、かつ類似画像８５と非類似画像８７とを区別して示す拡張類似画像画面を表示させる第２の表示制御部１１ｃと、第１の表示制御部１１ｂおよび第２の表示制御部１１ｃを少なくとも制御して、類似画像画面から拡張類似画像画面に切換える制御部１１を備える。
【解決手段】基準画像に類似する画像を検索する類似画像検索部１１ａと、検索された類似画像を示す類似画像画面を表示させる第１の表示制御部１１ｂと、類似画像画面に示された類似画像８５とこの類似画像に所定の順番で連続する非類似画像８７とを含み、かつ類似画像８５と非類似画像８７とを区別して示す拡張類似画像画面を表示させる第２の表示制御部１１ｃと、第１の表示制御部１１ｂおよび第２の表示制御部１１ｃを少なくとも制御して、類似画像画面から拡張類似画像画面に切換える制御部１１を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法、およびプログラムに関し、詳しくは、多数の画像の中から、類似画像を検索し、この検索結果を表示する画像表示装置、画像表示方法、およびプログラムに関する。
【背景技術】
【０００２】
最近は、風景画像や人物画像等の被写体の種類、あるいは撮影された人物の顔を検出する技術が飛躍的に進歩してきている。この技術を利用して、撮影画像の間で被写体の類似度を評価し、多数の画像の中から希望の画像を検索する画像検索装置が種々提案されている。
【０００３】
例えば、特許文献１には、基準となる撮影画像の横に縮小サイズの撮影画像を縦に並べて表示するカメラが提案されている。また、特許文献２には、抽出された類似画像を類似度の順番でサムネイル画像列によって表示し、この表示の際に、最初は連番ではなく、例えば１０番飛びで並べるようにした画像検索装置が提案されている。この画像検索装置によれば、検索された類似画像数が多い場合であっても、希望する画像に短時間でたどり着くことができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３５２７８０号公報
【特許文献２】特開２００７−２２６５３６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
類似画像検索が利用される場面では、基準画像に類似する特定の類似画像を検索すれば終了ということばかりではなく、特定の類似画像が見つかった後に、その特定の類似画像と同時期に撮影された画像もあわせて見て楽しむことも多い。しかし、従来の類似画像表示では、検索された類似画像または基準とされた画像だけが表示され、検索で排除された画像を鑑賞できるような配慮はなされていない。
【０００６】
そこで、検索された特定の類似画像と同時期に撮影された画像も鑑賞したい場合には、類似画像表示画面を終了し、インデックス表示画面あるいは１コマ表示画面に切り換えて、特定の類似画像を表示させる操作を行う必要があった。すなわち、従来の類似画像表示画面では、類似画像を見つけた後に、その類似画像に前後する画像の表示を簡単に行うことができなかった。
【０００７】
本発明は、このような事情を鑑みてなされたものであり、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことのできる画像表示装置、画像表示方法、およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため第１の発明に係わる画像表示装置は、基準画像に類似する画像を検索する類似画像検索部と、検索された類似画像を示す類似画像画面を表示させる第１の表示制御部と、上記類似画像画面に示された類似画像と当該類似画像に所定の順番で連続する非類似画像とを含み、かつ当該類似画像と非類似画像とを区別して示す拡張類似画像画面を表示させる第２の表示制御部と、上記第１の表示制御部および上記第２の表示制御部を少なくとも制御して、上記類似画像画面から上記拡張類似画像画面に切換える制御部と、を備える。
【０００９】
第２の発明に係わる画像表示装置は、上記第１の発明において、上記制御部は、上記類似画像画面で類似画像が選択された場合に、上記類似画像画面から上記拡張類似画像画面への切換えを行い、上記第２の表示制御部は、上記類似画像画面で選択された類似画像と当該選択された類似画像に所定の順番で連続する非類似画像を上記拡張類似画像画面に表示する。
第３の発明に係わる画像表示装置は、上記第１の発明において、上記第２の表示制御部は、上記所定の順番を撮影日の順番とする。
【００１０】
第４の発明に係わる画像表示装置は、上記第１の発明において、上記第２の表示制御部は、上記拡張類似画像画面に上記基準画像を含ませて表示させる。
第５の発明に係わる画像表示装置は、上記第１の発明において、画像を記憶する画像記憶部を備え、上記類似画像検索部は、上記画像記憶部に記憶された画像の中から指定された画像を上記基準画像とする。
【００１１】
第６の発明に係わる画像表示装置は、上記第１の発明において、撮像部を備えるカメラに搭載され、上記類似画像検索部は、上記撮像部により出力されるライブビュー画像を上記基準画像として、上記類似画像を検索し、上記表示制御部は、ライブビュー画像の画面に検索された類似画像の縮小画像を表示させる。
第７の発明に係わる画像表示装置は、上記第６の発明において、上記類似画像検索部は、上記ライブビュー画像の被写体変化に応じて、上記基準画像を変化させて上記類似画像を検索し、上記制御部は、さらに上記類似画像検索部を制御し、上記拡張類似画像画面に切り換えて、当該拡張類似画像画面において指示があった場合には、上記類似画像検索部にライブビュー画像の変化にかかわらず基準画像を変化させないように制御する。
【００１２】
第８の発明に係わる画像表示方法は、類似画像検索部を備える画像表示装置の表示部に類似画像を表示させる表示方法であって、上記類似画像検索部により基準画像に類似する画像を検索する工程と、上記検索された類似画像が含まれる画面を理事画像画面として表示させる第１の表示工程と、上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示工程と、を含む。
【００１３】
第９の発明に係わるプログラムは、コンピュータに類似画像を表示部に表示させるためのプログラムであって、基準画像に類似する画像を検索するステップと、上記検索された類似画像が含まれる画面を類似画像画面として表示させる第１の表示工ステップと、上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示ステップと、をコンピュータに実行させる。
【発明の効果】
【００１４】
本発明によれば、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことのできる画像表示装置、画像表示方法、およびプログラムを提供することができる。
【００１５】
特に、第１の発明によれば、類似画像と類似画像の周辺の画像を比較して鑑賞することができる。また、第２の発明によれば、非類似画像を含む画面への切換え操作が容易にできる。また、第３の発明によれば、類似画像と同時期に撮影された画像を簡単に鑑賞できる。また、第４の発明によれば、検索の元になった画像の確認も容易に行うことができる。
【００１６】
また、第５の発明によれば、撮影された画像と類似の画像を容易に鑑賞することができる。また、第６の発明によれば、ライブビューを基準画像に設定することができ、基準画像の選択の幅が広がり、また、撮影時に再生画像を楽しむことができ、撮影と再生の敷居が低くなる。
【００１７】
また、第７の発明によれば、ライブビューにより頻繁に被写体が変化する場合であっても、基準画像を固定することによりじっくり画像を鑑賞することができる。また、第８および第９の発明によれば、類似画像と類似画像の周辺の画像を比較して鑑賞することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態に係わるカメラの主として電気回路の構成を示すブロック図である。
【図２】本発明の一実施形態に係わるカメラにおける類似画像画面を示す図である。
【図３】本発明の一実施形態に係わるカメラにおいて、拡張類似画像画面を示す図である。
【図４】本発明の一実施形態に係わるカメラにおいて、類似画像画面、拡張類似画像画面、拡張類似１コマ画面、ＬＶ単純画面の間での切換えを示す図である。
【図５】本発明の一実施形態に係わるカメラにおいて、ＬＶ類似画像画面において、レリーズ操作された場合の画面を示す図である。
【図６】本発明の一実施形態に係わるカメラにおいて、ＬＶ拡張類似画像画面において、レリーズ操作された場合の画面を示す図である。
【図７】本発明の一実施形態に係わるカメラにおいて、テレワイド操作によって拡張類似画像画面の分割数を変更する様子を示す図である。
【図８】本発明に一実施形態に係わるカメラにおいて、再生モードにおける類似画像画面と拡張類似画像画面の切換えを示す図である。
【図９】本発明の一実施形態に係わるカメラの動作を示すフローチャートである。
【図１０】本発明の一実施形態に係わるカメラの撮影モード処理の動作を示すフローチャートである。
【図１１】本発明の一実施形態に係わるカメラの類似画面表示処理の動作を示すフローチャートである。
【図１２】本発明の一実施形態に係わるカメラの拡張類似画面表示処理の動作を示すフローチャートである。
【図１３】本発明の一実施形態に係わるカメラの拡張類似１コマ画面表示処理の動作を示すフローチャートである。
【図１４】本発明の一実施形態に係わるカメラの再生モード処理の動作を示すフローチャートである。
【図１５】本発明の一実施形態に係わるカメラの再生モードにおける類似画面表示処理の動作を示すフローチャートである。
【発明を実施するための形態】
【００１９】
以下、図面に従って本発明を適用したカメラを用いて好ましい実施形態について説明する。本発明の好ましい一実施形態に係わるカメラは、デジタルカメラであり、撮像部を有し、この撮像部によって被写体像を画像データに変換し、この変換された画像データに基づいて、被写体像を本体の背面に配置した表示部にライブビュー表示する。撮影者はライブビュー表示を観察することにより、構図やシャッタチャンスを決定する。レリーズ操作時には、画像データが記録媒体に記録される。記録媒体に記録された画像データは、再生モードを選択すると、表示部に再生表示することができる。
【００２０】
図１は、本発明の一実施形態に係わるカメラの構成を示すブロック図である。制御部（ＣＰＵ：Central Processing Unit）１１は、プログラム／データ記憶部１３に記憶された制御プログラムに従って動作し、カメラの全体制御を行う。制御部１１内には、類似画像検索部１１ａ、第１の表示制御部１１ｂ、および第２の表示制御部１１ｃが設けられている。制御部１１内の１１ａ、１１ｂ、１１ｃは、制御プログラムにより実行される処理の一部であるので、制御部１１に含まれる機能部として説明する。
【００２１】
類似画像検索部１１ａは、後述する画像記憶部２５に格納されている画像データの中から、基準画像と類似の画像を検索する。具体的には、基準画像としては、ライブビュー表示中は、このライブビュー画像であり、再生表示中には選択された再生画像である。また、類似画像検索部１１ａは、基準画像と画像記憶部２５に記憶されている画像のサムネイル画像の２値化処理を行い、この２値化情報（輝度）に基づいて特徴点を抽出する。この２値化処理によって特徴点を抽出し顔が画像に含まれているか否かを判定する場合には、左右の瞳位置、左右の鼻孔位置、顔の特徴点を用いて行う。また、眼、鼻、口等の顔パーツ自体の形状の特徴も顔の判定にあたって使用する。また、人物、動物、風景等のジャンルに対応する属性の有無について各画像について抽出を行う。これらの属性の抽出に当たっては、プログラム／データ記憶部１３に記憶されている類似画像検索用のデータベースを利用する。
【００２２】
また、類似画像検索部１１ａは、基準画像に対して、検索対象となる画像の類似する程度を表わす類似度Ｐを、検索対象となる画像ごとに判定する。すなわち、抽出された特徴点を用いて、基準画像との類似度Ｐを数値化し、この類似度Ｐを用いて類似画像を選択する。
【００２３】
第１の表示制御部１１ｂは、類似画像検索部１１ａによって検索された類似画像を示す類似画像画面を、後述する表示部２７に表示するための制御を行う。また、第２の表示制御部１１ｃは、前述の類似画像画面に示された類似画像と、この類似画像に所定の順番で連続する非類似画像とを含み、かつ類似画像と非類似画像とを区別して示す拡張類似画像画面を、表示部２７に表示するための制御を行う。
【００２４】
また、制御部１１は、第１の表示制御部１１ｂおよび第２の表示制御部１１ｃを少なくとも制御して、類似画像画面から拡張類似画像画面に切換える制御機能を有する。具体的には、類似画像画面で類似画像が選択された場合に、類似画像画面から拡張類似画像画面への切換えを行う。このとき、第２の表示制御部１１ｃは、類似画像画面で選択された類似画像とこの選択された類似画像に所定の順番で連続する非類似画像を拡張類似画像画面に表示させる。また、制御部１１は、拡張類似画像画面から類似画像画面への切換えも行う。
【００２５】
制御部１１には、プログラム／データ記憶部１３、ボタン操作部１４、タッチ操作部１５、およびバス３０が接続されている。プログラム／データ記憶部１３には前述したように制御部１１において実行するプログラムが記憶されており、また各種データも記憶されている。
【００２６】
ボタン操作部１４は、ユーザがカメラに指示を与えるための各種操作部材を有する。各種操作部材としては、電源釦、レリーズ釦、メニュー釦、再生釦等を有し、各種操作部材の操作状態の検出結果を制御部１１に出力する。タッチ操作部１５は、表示部２７の前面または表示部２７と一体に構成され、ユーザの指等による表示部２７の画面５５（図２参照）のタッチ状態に応じて検知信号を制御部１１に出力する。
【００２７】
バス３０には、前述の制御部１１の他に、撮像部２０、ＳＤＲＡＭ（Dynamic Random Access Memory）２１、画像処理部２２、表示処理部２６、圧縮伸張部２３、記録再生部２４が接続されている。撮像部２０は、被写体像を結像させるための撮影レンズ、被写体像を画像データに変換するための撮像素子、及びこれらの処理回路、撮影レンズの光路中に介挿された絞り及びシャッタ等を含む。撮像部２０によって生成された画像データはバス３０に出力される。
【００２８】
ＳＤＲＡＭ２１は電気的に書き換え可能な揮発性の一時記憶メモリであり、撮像部２０から出力される画像データの一時記憶に用いられる。画像処理部２２は、デジタル画像データのデジタル的増幅（デジタルゲイン調整処理）、ホワイトバランス、色補正、ガンマ（γ）補正、コントラスト補正、ライブビュー表示用画像生成、動画画像生成等の各種の画像処理を行なう。
【００２９】
圧縮伸張部２３はＳＤＲＡＭ２１に一時記憶された静止画や動画の画像データをＪＰＥＧやＴＩＦＦ等の圧縮方式により圧縮し、また表示等のために伸張するための回路である。なお、画像圧縮はＪＰＥＧやＴＩＦＦに限らず、他の圧縮方式も適用できる。
【００３０】
表示処理部２６は、撮影時にはライブビュー表示を、レリーズ時にはレックビュー表示を、再生時には再生画像を、表示部２７に表示させる。また、第１の表示制御部１１ｂからの指示に基づき、表示中の基準画像と類似する類似画像の表示を行う。さらに、第２の表示制御部１１ｃからの指示に基づき、類似画像に併せて類似画像と連続する非類似画像の表示を行い、また、これらの画像がタッチされた場合には、タッチされた画像を拡大して表示する拡大類似画像の表示を行う。表示部２７は、表示処理部２６に接続されており、カメラ１０の本体の背面等に配置された液晶モニタや有機ＥＬ等のディスプレイを有し、表示処理部２６の制御によりディスプレイの画面に所定の画像が表示される。
【００３１】
記録再生部２４は、圧縮伸張部２３において圧縮された画像データを画像記憶部２５に記憶し、また、画像記憶部２５に記憶された撮影画像の画像データを読み出す。この読み出された画像データは、圧縮伸張部２３において伸張され、この伸張された画像データに基づいて、表示部２７に画像が再生表示される。画像記憶部２５は、記録再生部２４に接続されており、デジタルカメラ本体に内蔵、または装填可能な画像データの記録媒体である。この画像記憶部２５に、撮影画像が格納されている。
【００３２】
次に、図２ないし図８を用いて、本実施形態における類似画像を表示する類似画像表示画面と、類似画像と非類似画像を表示する拡張類似画像表示画面について説明する。図２は、類似画像表示モードが設定されている場合において、表示部２７の画面５５にライブビュー（ＬＶ）表示がされている様子を示す。図２（ａ）は、画面５５に犬がライブビュー表示されている。この犬の画像に複数の＋印で示されるのは、特徴点５４である。特徴点５４は、画像の輝度に基づいて、類似画像検索部１１ａが抽出した特徴的な位置である。図２（ａ）は、特徴点５４に基づいて、動物を検出した例を示す。同様に、図２（ｂ）は、特徴点５４に基づいて、人物の顔を検出した例を示し、図２（ｃ）は、特徴点５４からは顔を検出できず、色相から色検出と判断した例である。
【００３３】
画面５５の左上にはモード表示５１が配置されており、モード表示５１の「ＬＶ」はライブビュー表示であることを示す。画面５５の下部には、類似画像列５６が表示されている。この類似画像列５６は、特徴点５４に基づいて、類似画像検索部１１ａによって類似度Ｐが判定され、類似度Ｐが選択レベル以上であるとして選択された類似画像が横一列に表示される。
【００３４】
類似画像列５６の両脇に配置されたスクロールアイコン５７ａ、５７ｂをタッチすることにより、所望の方向に、類似画像をスクロールすることができる。なお、図２（ａ）では、類似画像列５６が一端側にあることから、スクロールアイコン５７ｂは表示されていない。
【００３５】
類似画像列５６の下側には、スクロールバー５８が配置され、このスクロールバー５８内にはスライダ５９が配置されている。スクロールバー５８内におけるスライダ５９の位置は、選択された類似画像の中で、現在、表示されている画像の位置を示している。従って、ユーザがスクロールアイコン５７ａ、または５７ｂをタッチすることにより、タッチされたアイコンの方向に、表示される類似画像列が移動し、この移動に応じて、スライダ５９も移動する。
【００３６】
第１の表示制御部１１ｂによって、図２に示すように類似画像表示がなされている状態で、類似画像列５６中の１つの類似画像をタッチすると、第２の表示制御部１１ｃによって、図３に示すような拡張類似画像画面を表示する。類似画像画面は、類似画像検索部１１ａによって検索された類似画像を表示するが、拡張類似画像画面は、画像番号が類似画像と連続する非類似画像も併せて一緒に表示する。
【００３７】
図３（ａ）に示す拡張類似画像画面の画面５５の左上部には、検索条件８１が表示され、その下側には子画面８２が表示される。子画面８２には、撮影時にはライブビュー画像が表示され、また、再生時には再生画像が表示される。子画面８２に表示されている画像が基準画像となり、類似画像検索部１１ａは画像記憶部２５に格納されている画像の中から類似画像を検索する。
【００３８】
類似画像検索部１１ａは、子画面８２に表示されている画像を基準に類似画像を検索するが、検索条件６１は、この類似画像の検索の際に判定された基準画像の属性、例えば、人物の顔、動物、色検出等を表示する。図３（ａ）〜（ｃ）の例では、人物の顔であることから、「ｆ」と表示される。なお、図２（ａ）の動物の場合には、動物であることから「Ａ」と表示され、図２（ｃ）の色の場合には、色であることから「Ｃ」と表示される。
【００３９】
子画面８２に表示されている画像を基準画像として、類似画像検索部１１ａは類似画像を検索し、検索された類似画像は、画面５５に類似画像５５として表示される。この類似画像５５の表示の際には、画像番号８６が表示され、かつ類似画像は、明るく、十分視認できるように表示される。また、類似画像８５とは連番の非類似画像８７は、画像番号８６が表示されると共に暗くして表示される。図３（ａ）に示す例は、図２（ｂ）において、画像番号８６が５１の類似画像がタッチされた場合の拡張類似画像画面であり、この場合には、画像番号８６が５１から６６までの類似画像および非類似画像が表示される。複数の類似画像８５と複数の非類似画像８７は、図３に示すように、４×４の縮小（サムネイル）画像として表示される。以下、縮小画像をサムネイルあるいはサムネイル画像と表現する。
【００４０】
本実施形態においては、撮影画像は画像記憶部２５に記憶されているが、この記憶にあたっては、撮影日時順に順番が付与されて記憶される。前述の画像番号８６は、この付与された順番に相当する。なお、非類似画像８７は、本実施形態においては、暗く表示したが、これに限らず、低コントラストで表示したり、またハーフトーンで表示するようにしてもよい。また、類似画像と非類似画像の枠表示を変えるようにしてもよく、サムネイルのサイズを変えるようしてもよい。いずれにしても、類似画像８５と非類似画像８７を識別できるような表示であればよい。
【００４１】
類似画像８５および非類似画像８７の下側には、明暗切換アイコン９４が表示されている。この明暗切換アイコン９４は、暗く表示されている非類似画像８７を明るくする表示させるためのアイコンである。この明暗切換アイコン９４をユーザがタッチすると、図３（ｃ）に示すように、非類似画像８７も明るく表示されることから、非類似画像を十分見ることができる。
【００４２】
明暗切換アイコン９４の脇には、明暗表示９５が表示されている。この明暗表示９５は、明暗切換アイコン９４によって非類似画像８７を明示表示しているか、暗示表示しているかを示す。図３（ｂ）に示す状態で、明暗切換アイコン９４をタッチすると、明示状態に切り換わり、明暗表示９５も明るい表示に切り換わる。
【００４３】
類似画像８５および非類似画像８７からなるサムネイル画像の脇には、スクロールバー９１が表示される。このスクロールバー９１上には、撮影年度９３ａ、９３ｂが表示され、類似画像８５および非類似画像８７が表示されている撮影年度に相当する位置に、カーソル９２が表示される。このカーソル９２は、画像全体をボリュームとして、その中で現在表示している画像の位置を示している。このカーソル９２の位置をみれば、いつ頃撮影した画像かを知ることができる。スクロールバー９１上をユーザがタッチしながらスライドすると、類似画像８５および非類似画像８７はスクロールし、またカーソル９２もこの動きに併せてスクロールする。
【００４４】
子画面６２の下側には、ＬＶロックアイコン８３が表示されている。子画面６２にライブビュー画像が表示されている場合には、ライブビュー画像が刻々と変化する場合がある。ライブビュー画像が変化すると、図３（ａ）から図３（ｂ）に示すように、類似画像８５が変化し、またこの類似画像８５の連番の非類似画像８７も表示される。ライブビュー画像の変化にも関わらず、類似画像を固定しておきたい場合には、ＬＶロックアイコン８３をタッチすることにより、子画面６２の画像を固定し、類似画像もロックする（図８（ｃ）参照）。なお、ＬＶロックアイコン８３がタッチされ、ＬＶロックが設定されると、ＬＶロックアイコン８３の表示形態が変化する（図３の例では、破線から実線）。
【００４５】
次に、図４を用いて、類似画像画面、拡張類似画像画面、拡張類似１コマ画面、ＬＶ単純画面の切換について説明する。図４（ａ）は、類似画像画面であり、図２（ｂ）に示した画面と同様である。この類似画像画面の類似画像列５６の内の１つの類似画像をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に切り換わる。このとき、類似画像列５６の内のタッチされた類似画像が、拡張類似画像画面の類似画像８５として表示される。
【００４６】
また、図４（ｂ）に示す拡張類似画像画面において、子画像６２に表示されているライブビュー画像をタッチすると、図４（ａ）に示す類似画像画面に戻る。さらに、拡張類似画像画面において、サムネイル画像の内の類似画像８５および非類似画像８７のいずれか１つをタッチすると、図４（ｃ）に示す拡張類似画像１コマ画面に切り換わる。この拡張類似画像１コマ画面では、タッチされた類似画像８５または非類似画像８７が、画面５５に１コマ画像９８（図４（ｂ）（ｃ）に示す例では、画像番号が５１の類似画像）として、大きく表示される。
【００４７】
拡張類似画像１コマ画面の１コマ画像９８の左右には、スクロールアイコン９７ａ、９７ｂが表示されている。このスクロールアイコン９７ａ、９７ｂのいずれかをタッチすると、アイコンの向きの方向に画像が進み、または戻る。この場合、変更された画像が非類似画像であっても表示される。
【００４８】
また、１コマ画像９８の下側には、ジャンプアイコン９９が表示されており、このジャンプアイコン９９をユーザがタッチすると、ジャンプオン状態になって、スクロールアイコン９７ａ、９７ｂをタッチするたびに、類似画像８５のみが順番に表示される。一方、ジャンプオフ状態では、スクロールアイコン９７ａ、９７ｂをタッチするたびに、類似画像または非類似画像が１コマずつ表示される。なお、ジャンプアイコン９９がタッチされジャンプモードになると、「ジャンプオン」と表示され、再びタッチされてジャンプモードが解除されると、「ジャンプオフ」と表示される。
【００４９】
１コマ画像９８の右下側には、戻しアイコン９６が表示されている。図４（ｃ）に示す拡張類似画像１コマ画面において、戻しアイコン９６をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に戻る。また、図４（ｃ）に示す拡張類似画像１コマ画面において、ボタン操作部１４の内の１つであるレリーズ釦を半押しする（１ｓｔレリーズ操作）と、図４（ａ）に示す類似画像画面に戻る。
【００５０】
拡張類似画像１コマ画面に切り換わると、ライブビュー表示中であっても、ライブビュー画像が表示されず、ライブビュー画像と類似もしくは非類似の画像が再生されるので、実質的には再生モードに切り換わったのと同等である。
【００５１】
また、図４（ｄ）に示す類似画像画面において、画面５５の右端を下方向にタッチしながらスライドさせると（下方向へのドラッグ）、類似画像列５６およびスクロールバー５８等が画面５５の下側に移動し、図４（ｅ）に示すように画面５５から隠される。類似画像列５６およびスクロールバー５８等が画面５５から隠されると、通常のライブビュー（ＬＶ）単純画面となる。また、このＬＶ単純画面において、右端を上方向にタッチしながらスライドさせると、類似画像列５６およびスクロールバー５８等が画面５５の上側に移動し、図４（ｄ）に示すように画面５５に現われる。
【００５２】
次に、ライブビュー表示中に類似画像画面において、レリーズ釦が操作された場合の画像変化について、図５を用いて説明する。図５（ａ）に示す類似画像画面は、図２（ｂ）、図４（ａ）に示した類似画像画面と同様であり、この状態でボタン操作部１４の内のレリーズ釦の全押しがなされると、撮影動作が実行され、このときの撮像部２０から出力された画像が画像記憶部２５に記録される。
【００５３】
上述の撮影動作が実行される際に、記録される画像がレックビュー表示されるが、本実施形態においては、図５（ｂ）に示すように、画面５５の下段のサムネイル表示されている類似画像列５６の最後に移動するかのようなアニメーション表示を行う。そして、撮影後に、類似画像列５６の一番最後に縮小画像５６ａでサムネイル画像を表示させる。
【００５４】
次に、ライブビュー表示中に拡張類似画像画面において、レリーズ釦が操作された場合の画像変化について、図６を用いて説明する。図６（ａ）に示す類似画像画面は、図３（ａ）、図４（ｂ）に示した拡張類似画像画面と同様であり、この状態でボタン操作部１４の内のレリーズ釦の全押しがなされると、撮影動作が実行され、このときの撮像部２０から出力された画像が画像記憶部２５に記録される。
【００５５】
上述の撮影動作が実行される際に、類似画像画面の場合と同様に、記録される画像がレックビュー表示されるが、本実施形態においては、図６（ｂ）に示すように、画面５５の下段の隅に移動し、そして、図６（ｃ）に示すように消失するかのようなアニメーション表示を行う。拡張類似画像画面においては、撮影画像は最終的には消失するようなアニメーション表示が行われることから、類似画像画面の場合とは異なって、撮影後に表示される類似画像８５と非類似画像８７からなるサムネイル画像には変化はない。
【００５６】
次に、拡張類似画像画面におけるサムネイル画像の分割画像数の変更について、図７を用いて説明する。図７（ａ）は、図３（ａ）、図４（ｂ）と同じ拡張類似画像画面である。この画面においては、類似画像８５と非類似画像８７からなるサムネイル画像は、４×４で１６分割表示されている。この状態において、焦点距離（ズーム）をテレ側に移動させるテレ操作を行うと、図７（ｂ）に示すようにサムネイル画像は、３×３で９分割表示に変更される。
【００５７】
また、図７（ａ）の状態において、焦点距離をワイド側に移動させるワイド操作を行うと、図７（ｃ）に示すようにサムネイル画像は、５×５で２５分割表示変更される。なお、本実施形態においては、拡張類似画像画面において、テレ操作やワイド操作が行われても、ライブビュー画像への焦点距離の変化は反映させない。
【００５８】
図２ないし図７における説明においては、ライブビュー表示の際の類似画像画面や拡張類似画像画面の場合であったが、本実施形態は、再生モードにおいても同様に類似画像画面や拡張類似画像画面での表示を行うことができる。再生モードが設定されている場合の類似画像画面や拡張類似画像画面等の切換えについて、図８を用いて説明する。
【００５９】
図８（ａ）は、再生モードにおける類似画像画面であり、画面５５には、画像記憶部２５から読み出された画像が表示される。この読み出された画像を基準画像として、画像検索部１１ａは類似画像を検索し、ライブビュー表示時と同様に、検索された類似画像を類似画像列５６に表示する。
【００６０】
また、画面５５の左上には、撮影画像のコマ番号１０１が表示されており（図８（ａ）に示す例では、１５コマ目の画像）、また右上には、再生モードであることを示すモードアイコン１０２（図８（ａ）に示す例では、再生モードであることを示す「ＰＢ」（Playback））が表示されている。
【００６１】
この図８（ａ）に示す類似画像画面において、画面５５の右端を下方向にドラッグすると、類似画像列５６およびスクロールバー５８等は下方向に移動し、画面５５から隠れ、図８（ｃ）に示すような通常１コマ再生モードにおける再生画面となる。また、この通常１コマ再生モードにおける再生画面において、画面５５の右端を上方向にドラッグすると、類似画像列５６およびスクロールバー５８等は上方向に移動し、画面５５から現われ、図８（ａ）に示す類似画像画面となる。
【００６２】
また、図８（ａ）に示す類似画像画面において、類似画像列５６の内のいずれか１つの類似画像にタッチすると、図８（ｂ）に示すような拡張類似画像画面に変化する。この拡張類似画像画面において、子画面８２には画像記憶部２５から指定して読み出された再生画像が表示され、この子画面８２の再生画像が類似画像検索の際の基準画像となる。これ以外の拡張類似画像画面の構成は、ライブビュー表示の場合と同様であるので、詳しい説明は省略する。なお、図８（ｂ）に示す拡張類似画像画面において、子画面８２をタッチすると、図８（ａ）に示す類似画像画面に戻る点は、ライブビュー表示の場合と同様である。
【００６３】
図８（ｂ）に示す拡張類似画像画面において、類似画像８５および非類似画像８７からなるサムネイル画像の内のいずれか１コマをタッチすると、図８（ｄ）に示す拡張類似画像１コマ画面に切り換わる。再生モードにおける拡張類似画像１コマ画面もライブビュー表示の場合と同様であるが、再生モードの場合には、再生アイコン１０３が表示されている。拡張類似画像１コマ画面において、戻しアイコン９６をタッチすると、図８（ｂ）に示す拡張類似画像画面に戻る。また、再生アイコン１０３をタッチすると、図８（ａ）に示す類似画像画面に戻る。
【００６４】
次に、本実施形態に係わるカメラの動作について、図９ないし図１５に示すフローチャートを用いて説明する。このフローチャートはプログラム／データ記憶部１３に記憶されているプログラムに従って制御部１１によって実行される。
【００６５】
カメラ１０がパワーオンとなり、動作がスタートすると、まず、図９に示すフローチャートにおいて、撮影モードか否かの判定を行う（Ｓ１１）。このカメラ１０には、撮影モードと再生モードが用意されており、再生釦が操作され再生モードでなければ撮影モード判定される。この判定の結果、撮影モードでなかった場合には、再生モードであることから、再生モード処理を行う（Ｓ１３）。ここでは、画像記憶部２５に記憶されている画像を読み出し、表示部２７に表示する。この再生モード処理については、図１４に示すフローチャートを用いて後述する。
【００６６】
一方、ステップＳ１１における判定の結果、撮影モードであった場合には、次に、撮影モード処理を行う（Ｓ１２）。ここでは、単純なライブビュー表示、または類似画像画面等のライブビュー表示を行い、また、レリーズ操作がなされた際には、撮像部２０において取得した画像を、画像記憶部２５に記録する。この撮影モード処理については、図１０に示すフローチャートを用いて後述する。
【００６７】
ステップＳ１２における撮影モード処理を実行すると、またはステップＳ１３における再生モード処理を実行すると、電源オフ処理を行い（Ｓ１４）、このフローを終了する。なお、電源オフ処理がなされても、ボタン操作部１４の１つである電源釦の操作状態は監視されており、電源釦が操作されると、ステップＳ１１からスタートする。
【００６８】
次に、ステップＳ１２における撮影モード処理について、図１０に示すフローチャートを用いて説明する。撮影モード処理のフローに入ると、まず、スタート時か、すなわち、電源がオンとなり動作を開始してから最初の撮影モード処理か否かを判定する（Ｓ２１）。
【００６９】
ステップＳ２１における判定の結果、スタート時であれば、次に類似画面表示処理を行う（Ｓ２４）。このステップでは、第１の表示制御部１１ｂが、図２において示した類似画像画面を表示部２７に表示するための処理を行う。このサブルーチンについては、図１１を用いて後述する。
【００７０】
ステップＳ２１における判定の結果、スタート時でなければ、次に、画面変更操作がなされたか否かの判定を行う（Ｓ２２）。本実施形態においては、デフォルトモードとして、類似画像画面が表示部２７に表示されるが、図４を用いて説明したように、ユーザの画面変更操作に応じて画面の変更が行われるので、このステップでは、図４において説明したような変更操作がなされたか否かの判定を行う。
【００７１】
ステップＳ２２における判定の結果、画面変更操作がなされた場合には、切換え先変更設定を行う（Ｓ２３）。ここでは、ステップＳ２２において判定された画面変更操作に応じて、類似画像画面を表示する場合にはステップＳ２４の類似画面表示処理に、ライブビュー単純画面を表示する場合にはステップＳ２５のＬＶ単純画面表示処理に、拡張類似画像画面を表示する場合にはステップＳ２６の拡張類似画面表示処理に、拡張類似画像１コマ画面を表示する場合には、ステップＳ２７の拡張類似１コマ画面表示処理に、それぞれ切換え先の変更を設定する。ステップＳ２２における判定の結果、変更操作がなされていなかった場合には、ステップＳ２４〜Ｓ２７の表示処理を変更することなく、前回と同様の表示処理を実行する。
【００７２】
画面がＬＶ単純画面の場合には、ＬＶ単純画面表示処理を実行する（Ｓ２５）。ここでは、図４（ｅ）を用いて説明したように、類似画像を表示することなく、撮像部２０からの画像を表示部２７に表示する。
【００７３】
また、画面が拡張類似画像画面の場合には、拡張類似画面表示処理を実行する（Ｓ２６）。ここでは、図３を用いて説明したように、ライブビュー画像を子画面８２に表示し、子画面８２に表示している画像を基準画像として、これと類似する類似画像８５と、類似画像８５と連番の非類似画像８７を縮小してサムネイル画像で表示する。この拡張類似画面表示処理のサブルーチンについては、図１２を用いて後述する。
【００７４】
また、画面が拡張類似画像１コマ画面の場合には、拡張類似１コマ画面表示処理を実行する（Ｓ２７）。ここでは、図４（ｃ）を用いて説明したように、拡張類似画像画面において表示されている類似画像８５および非類似画像８７からなるサムネイル画像の内からユーザがいずれか１つを選択し、その選択された画像の拡大表示を行う。また、スクロールアイコン９７ａ、９７ｂやジャンプアイコン９９のタッチ操作に応じて、類似画像８５や非類似画像８７の表示が行われる。この拡張類似１コマ画面表示処理のサブルーチンについては、図１３を用いて後述する。
【００７５】
ステップＳ２４〜Ｓ２７における画面表示処理を行うと、次に、レリーズ操作がなされたか否かの判定を行う（Ｓ２８）。ここでは、ボタン操作部１４の１つであるレリーズ釦の操作状態を検出し、レリーズ釦が押し込まれた場合にレリーズ操作と判定する。
【００７６】
ステップＳ２８における判定の結果、レリーズ操作であった場合には、次に、撮影処理を行う（Ｓ２９）。撮影処理では、撮像部２０から取得した画像を画像処理部２２が画像処理し、圧縮伸張部２３が圧縮処理した後、画像記憶部２５に記憶する。また、類似画像画面を表示中にレリーズ操作があった場合には、レックビュー表示として、図５を用いて説明したように、画面５５に表示されている画像が、類似画像列５６の最後に移動するかのようなアニメーション表示を行う。また、拡張類似画像画面を表示中にレリーズ操作があった場合には、レックビュー表示として、図６を用いて説明したように、子画面６２に表示中の画像が類似画像８５や非類似画像８７からなるサムネイル画像の下側に移動し消失するようなアニメーション表示を行う。
【００７７】
ステップＳ２９における撮影処理が終わると、またはステップＳ２８における判定の結果、レリーズ操作でなかった場合には、パワーオフか否かの判定を行う（Ｓ３０）。ここでは、ボタン操作部１４の１つであるパワースイッチの状態を検出し、パワーオン状態で再度パワースイッチが操作された場合には、パワーオフと判定する。
【００７８】
ステップＳ３０における判定の結果、パワーオフであった場合には、元のフローに戻り、ステップＳ１４において電源オフ処理を行う。一方、ステップＳ３０における判定の結果、パワーオフでなかった場合には、次に、撮影再生モード切換か否かの判定を行う（Ｓ３１）。ここでは、ボタン操作部１４の内の１つである再生釦の操作状態を判定し、操作されていなければ、撮影モードと判定し、ステップＳ２１に戻る。ステップＳ３１における判定の結果、撮影モードから再生モードに切り換えられた場合には、ステップＳ１１に戻る。
【００７９】
次に、ステップＳ２４における類似画面表示処理のサブルーチンについて、図１１を用いて説明する。このフローに入ると、ステップＳ２１と同様に、スタート時か否かの判定を行う（Ｓ４１）。この判定の結果、スタート時でなければ、ライブビュー画像の被写体に変化があるか否かを判定する（Ｓ４２）。スタート時でなければ、類似画像の検索を行っており、この場合、ライブビュー画像に変化がなければ、前回、検索した類似画像をそのまま使用すればよいことから、このステップでライブビュー画像の変化を判定している。
【００８０】
ステップＳ４２における判定の結果、ライブビュー画像の被写体に変化が有った場合、または、ステップＳ４１における判定の結果、スタート時であった場合には、次に、ライブビュー画像の被写体の特徴を抽出する（Ｓ４３）。ここでは、ライブビュー画像を基準画像とし、類似画像検索部１１ａが、図２を用いて説明したような特徴点５４の抽出を行う。
【００８１】
特徴抽出を行うと、次に、画像記憶部２５から類似画像の抽出を行う（Ｓ４４）。ここでは、類似画像検索部１１ａが、ステップＳ４３において取得した特徴を利用し、基準画像のライブビュー画像と類似する画像を、画像記憶部２５に格納されている画像の中から検索する。この場合、被写体に応じたキーワードに基づいて検索を行う。このキーワードはメニュー画面を用いて、ユーザが手動設定しても構わないが、本実施形態においては、被写体の特徴点５４に応じて自動的に設定する。キーワードとしては、顔、色、ペットの種類、撮影時間（朝、有）等がある。例えば、図２（ｂ）のように、被写体として顔が見つかれば、検索ワードとして顔が優先する。
【００８２】
類似画像の抽出を行うと、次に、類似画面を作成し、表示する（Ｓ４５）。ここでは、第１の表示制御部１１ｂが、ステップＳ４４において検索された類似画像に基づいて、図２を用いて説明したような類似画像画面を作成し、この類似画像画面を表示部２７に表示する。
【００８３】
ステップＳ４５において類似画面を作成し表示すると、または、ステップＳ４２における判定の結果、ライブビュー画像の被写体に変化がなかった場合には、次に、類似画像列スクロール指示がなされたか否かの判定を行う（Ｓ４６）。図２を用いて説明したように、スクロールアイコン５７ａ、５７ｂのいずれかをタッチすると、アイコンの指し示す方向に類似画像列５６の類似画像が変化する。そこで、このステップでは、スクロールアイコン５７ａ、５７ｂのいずれかタッチされたか否かを判定する。
【００８４】
ステップＳ４６における判定の結果、スクロール指示があった場合には、スクロール指示に応じて、スクロール表示を行う（Ｓ４７）。ここでは、第１の表示制御部１１ｂがスクロールアイコン５７ａ、５７ｂのタッチ状態に応じて、類似画像列５６の類似画像を変化させる。
【００８５】
ステップＳ４７におけるスクロール指示を実行すると、またはステップＳ４６における判定の結果、スクロール指示がなかった場合には、類似画面表示処理を終了し、元のフローに戻る。
【００８６】
次に、ステップＳ２６における拡張類似画面表示処理のサブルーチンについて、図１２を用いて説明する。このフローに入ると、ステップＳ２１と同様に、スタート時か否かの判定を行う（Ｓ５１）。この判定の結果、スタート時であれば、ステップＳ４２と同様にライブビュー画像の被写体に変化があるか否かの判定を行う（Ｓ５２ａ）。
【００８７】
ステップＳ５２ａにおける判定の結果、ライブビュー画像の被写体に変化がある場合には、またはステップＳ５１における判定の結果、スタート時でなかった場合には、次に、ライブビュー画像の被写体の特徴を抽出し、拡張類似画面の作成を行う（Ｓ５２ｂ）。ここでは、前述のステップＳ４３、Ｓ４４と同様に、類似画像検索部１１ａが、ライブビュー画像の被写体の特徴を抽出し、画像記憶部２５から類似画像を抽出する。そして、この抽出した類似画像を用いて、第２の表示制御部１１ｃが、図３に示したような拡張類似画面を作成し、表示部２７に表示する。
【００８８】
拡張類似画面を表示すると、またはステップＳ５２ａにおける判定の結果、ライブビュー画像に変化がなかった場合には、次に、非表示明るさ変更操作があるか否かの判定行う（Ｓ５３）。図３（ｃ）を用いて説明したように、明暗切換アイコン９４をタッチすると非類似画像８７の明暗が切り換えられるので、このステップでは、明暗切換アイコン９４がタッチされたか否かの判定を行う。
【００８９】
ステップＳ５３における判定の結果、非表示明るさ変更操作があった場合には、次に、現在非類似も明るいか否かの判定を行う（Ｓ５４）。ここでは、非類似画像８７を明るく表示しているか否かを判定する。この判定の結果、非類似画像８７も明るかった場合には、非類似画像８７を暗く表示する（Ｓ５６）。一方、ステップＳ５４における判定の結果、非類似画像８７は明るくなかった場合には、非類似画像８７も明るく表示する（Ｓ５５）。
【００９０】
ステップＳ５３における判定の結果、非表示明るさ変更操作がない場合には、次に、テレワイド（ＴＷ）操作があるか否かの判定を行う（Ｓ５７）。ここでは、ボタン操作部１４の内の１つのズームボタンの操作状態、すなわち、テレ側に操作されているか、ワイド側に操作されているかを判定する。
【００９１】
ステップＳ５７における判定の結果、ＴＷ操作があった場合には、次に、分割数を変更して表示する（Ｓ５８）。図７を用いて説明したように、テレ側に操作された場合には、分割数を減らし、ワイド側に操作された場合には分割数を増やして、類似画像８５および非類似画像８７をサムネイル表示する。
【００９２】
ステップＳ５７における判定の結果、ＴＷ操作がなかった場合には、次に、スクロール操作がなされたか否かの判定を行う（Ｓ５９）。図３（ｂ）を用いて説明したように、ユーザがスクロールバー９１上をタッチしながらスライドする（スクロール操作）と、スクロール表示がなされる。そこで、このステップでは、スクロールバー９１上でスクロール操作がなされたか否かの判定を行う。
【００９３】
ステップＳ５９における判定の結果、スクロール操作がなされていた場合には、スクロール処理を行う（Ｓ６０）。ここでは、スクロールの方向を検知し、この方向に類似画像８５や非類似画像８７が移動するような表示を行う。
【００９４】
ステップＳ５９における判定の結果、スクロール操作がなされていなかった場合には、次にライブビュー（ＬＶ）ロック操作があるか否かの判定を行う（Ｓ６１）。図３を用いて説明したように、画面５５にはＬＶロックアイコン８３が表示されており、このＬＶロックアイコン８３をタッチすると、ライブビュー画像が固定される。そこで、このステップでは、ＬＶロックアイコン８３がタッチされたか否かを判定する。
【００９５】
ステップＳ６１における判定の結果、ＬＶロック操作があった場合には、次に、ロック処理を行う（Ｓ６２）。ここでは、再び、ＬＶロックアイコン８３がタッチされて、ＬＶロックが解除されるまで、類似画像検索部１１ａによる類似画像の検索の際に、基準となるライブビュー画像の更新を行わない。
【００９６】
ステップＳ６１における判定の結果、ＬＶロック操作がなされていなかった場合には、次に、１のサムネイル画像の選択がなされたか否かの判定を行う（Ｓ６３）。図４（ｃ）を用いて説明したように、拡張類似画像画面において、類似画像８５または非類似画像８７からなるサムネイル画像のいずれか１つの画像がタッチされると、タッチされた類似画像８５が１コマだけ拡大表示され、拡張類似画像１コマ画面に切り換わる。そこで、このステップでは、サムネイル画像の内の１つがタッチされたか否かを判定する。
【００９７】
ステップＳ６３における判定の結果、１つのサムネイル画像の選択がなされた場合には、ステップＳ２７（図１０参照）に進み、拡張類似１コマ画面表示処理のサブルーチンを実行する。一方、ステップＳ６３における判定の結果、１つのサムネイル画像の選択がなされていなかった場合には、元のフローに戻る。
【００９８】
次に、ステップＳ２７における拡張類似１コマ画面表示処理のサブルーチンについて、図１３を用いて説明する。このフローに入ると、まず、１コマ表示を行う（Ｓ７１）。拡張類似画像１コマ画面は、図４（ｃ）を用いて説明したように、図４（ｂ）に示す拡張類似画像画面において、類似画像８５または非類似画像８７からなるサムネイル画像の内のいずれか１コマの画像をタッチした場合には、表示される画面であり、このステップでは、ユーザがタッチした１コマの画像を図４（ｃ）に示すように、拡大して表示する。
【００９９】
１コマ表示を行うと、次に、スクロール操作がなされたか否かの判定を行う（Ｓ７２）。拡張類似画像１コマ画面に表示されるスクロールアイコン９７ａ、９７ｂのいずれかをタッチすると、画像が進みまたは戻し処理がなされる。そこで、このステップでは、スクロールアイコン９７ａ、９７ｂのいずれかがタッチされたか否かを判定する。
【０１００】
ステップＳ７２における判定の結果、スクロール操作がなされた場合には、次に、「非類似をジャンプする」設定か否かの判定を行う（Ｓ７３）。図４（ｃ）を用いて前述したように、ジャンプアイコン９９が設定されている場合には（ジャンプオン時）、スクロールアイコン９７ａ、９７ｂがタッチされた場合には、タッチされるたびに類似画像８５のみが順次表示され、非類似画像８７は表示されない。一方、ジャンプアイコン９９が設定されていない場合には（ジャンプオフ時）、スクロールアイコン９７ａ、９７ｂがタッチされた場合には、タッチされるたびに類似画像８５および非類似画像８７の配列順、すなわち、撮影日時順に表示される。したがって、このステップでは、ジャンプアイコン９９がタッチされ、非類似画像をジャンプする（ジャンプオン）設定になっているか否かを判定する。
【０１０１】
ステップＳ７３における判定の結果、「非類似画像をジャンプする」設定になっていた場合には、非類似画像をジャンプして表示する（Ｓ７５）。ここでは、スクロールアイコン９７ａ、９７ｂのタッチに応じて、類似画像８５のみを順次表示する。一方、ステップＳ７３における判定の結果、「非類似画像をジャンプする」設定になっていなかった場合には、非類似画像も表示する（Ｓ７４）。ここでは、スクロールアイコン９７ａ、９７ｂのタッチに応じて、類似画像８５および非類似画像８７からなるサムネイル画像の中で、撮影日時順に順次表示する。
【０１０２】
ステップＳ７２における判定の結果、スクロール操作がなされていなかった場合には、次に、戻しアイコンの操作がなされたか否かを判定する（Ｓ７６）。図４（ｃ）を用いて説明したように、拡張類似画像１コマ画面において、戻しアイコン９６をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に戻る。そこで、このステップでは、戻しアイコン９６がタッチされたか否かを判定する。この判定の結果、戻しアイコン９６がタッチされた場合には、ステップＳ２６に進み、拡張類似画面表示処理を実行する。
【０１０３】
ステップＳ７６における判定の結果、戻しアイコンの操作がなされていなかった場合には、次に、１ｓｔレリーズがなされたか否かの判定を行う（Ｓ７７）。ここでは、ボタン操作部１４の１つであるレリーズ釦の半押し操作がなされたか否かの判定を行う。この判定の結果、１ｓｔレリーズであった場合には、ステップＳ２４に進み、類似画面表示処理を実行する。
【０１０４】
ステップＳ７７における判定の結果、１ｓｔレリーズではなかった場合、またはステップＳ７４またはＳ７５におけるスクロール操作における表示を行うと、拡張類似１コマ画面表示処理を終了し、元のフローに戻る。
【０１０５】
次に、ステップＳ１３における再生モード処理のサブルーチンについて、図１４を用いて説明する。再生モードは、画像記憶部２５に格納されている撮影画像を読み出し、表示部２７に再生表示を行うモードであり、この再生表示を行う１コマ画像を基準画像として、画像記憶部２５に記憶されている画像と類似する画像を表示することができる。
【０１０６】
再生モード処理のフローは、図１０に示した撮影モード処理において、ステップＳ２８のレリーズ操作と、ステップＳ２９の撮影処理を除いただけである。また、再生モードでは、撮影モード処理におけるライブビュー画像を、画像記憶部２５から読み出された再生画像に置き換えるだけである。そこで、撮影モード処理のフローと同様の処理を実行するステップについては、同一のステップ番号を付し、詳しい説明は省略する。
【０１０７】
次に、再生モード処理におけるステップＳ２４における類似画面表示処理について、図１５を用いて説明する。この類似画面表示処理のフローに入ると、まず、選択された画像の被写体の特徴抽出を行う（Ｓ９１）。再生モード処理に入ると、サムネイル表示等の中から画像を選択するので、類似画像検索部１１ａは、選択された画像の特徴点５４を抽出する。
【０１０８】
ステップＳ９１において特徴抽出を行うと、次に、画像記憶部２５から類似画像の抽出を行う（Ｓ９２）。ここでは、画像検索部１１ａが、再生用に選択された画像を基準画像とし、ステップＳ４４と同様にして、画像記憶部２５に格納された画像の中から類似画像を検索する。
【０１０９】
ステップＳ９２において類似画像の抽出を行うと、次に、類似画像を作成し、表示する（Ｓ９３）。ここでは、第１の表示制御部１１ｂが、図８（ａ）に示したような類似画像画面を作成し、表示部２７に表示する。
【０１１０】
類似画面を作成し、表示すると、次に、類似画像列スクロール指示が有るか否かの判定を行う（Ｓ９４）。再生表示の際にもスクロールアイコン５７ａ、５７ｂが表示されるので（図８（ａ）参照）、このステップでは、スクロールアイコン５７ａ、５７ｂのいずれかがタッチされたか否かを判定する。
【０１１１】
ステップＳ９４における判定の結果、スクロール指示があった場合には、次に、スクロール表示を行う（Ｓ９５）。ここでは、スクロールアイコン５７ａ、５７ｂのタッチ状態に応じて、類似画像列５６の画像を移動させて表示する。
【０１１２】
ステップＳ９５のスクロール表示を行うと、またはステップＳ９４における判定の結果、スクロール指示がなかった場合には、類似画面表示処理のフローを終了して、元のフローに戻る。
【０１１３】
再生モード処理におけるステップＳ２６における拡張類似画面表示処理のサブルーチンは、図１２に示した撮影モード処理における拡張類似画面表示処理のサブルーチンにおいて、Ｓ６１のＬＶロック操作の判定と、Ｓ６２のロック処理を除いただけであり、他のステップでは同様であることから、フローチャートおよび詳しい説明は省略する。
【０１１４】
また、再生モード処理におけるステップＳ２７の拡張類似１コマ画面表示処理のサブルーチンは、図１３に示した撮影モード処理における拡張類似１コマ画面表示処理のサブルーチンと実質的に同じである。但し、ステップＳ７７において、１ｓｔレリーズがあったか否かを判定しているが、再生モード処理の場合には、図８（ｄ）に示す再生アイコン１０３をタッチしたか否かの判定に置き換えればよい。これ以外のステップは同様の処理を行えばよいことから、フローチャートおよび詳しい説明は省略する。
【０１１５】
以上説明したように、本発明の一実施形態においては、第１の表示制御部１１ｂによって、基準画像に類似する類似画像を表示させ、また第２の表示制御部１１ｃによって、基準画像に類似する類似画像を表示させると共に、非類似の画像も表示させるようにしている。このため、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことができる。
【０１１６】
なお、本発明の一実施形態においては、ライブビュー表示の際と再生表示の際の両方のモードにおいて、類似画像の検索と表示を行うようにしていたが、いずれか一方だけでもよい。また、本発明の一実施形態においては、画像表示装置をカメラに搭載した例を説明したが、パーソナルコンピュータ等の機器に搭載し、これらの機器に記憶した画像を表示する際にも、本発明を適用することができる。また、拡張類似画面で類似画像と非類似画像を、撮影日時順の番号に従って並べるように説明したが、これに限るものではない。並び順としては、撮影位置の順番でもよく、あるいは、予め定めたグループの中での順番でもよい。
【０１１７】
また、本発明の一実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話や携帯情報端末（ＰＤＡ：Personal Digital Assist）、ゲーム機器等に内蔵されるカメラでも構わない。
【０１１８】
本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【０１１９】
１０・・・カメラ、１１・・・制御部（ＣＰＵ）、１１ａ・・・類似画像検索部、１１ｂ・・・第１の表示制御部、１１ｃ・・・第２の表示制御部、１３・・・プログラム／データ記憶部、１４・・・ボタン操作部、１５・・・タッチ操作部、２０・・・撮像部、２１・・・ＳＤＲＡＭ、２２・・・画像処理部、２３・・・圧縮伸張部、２４・・・記録再生部、２５・・・画像記憶部、２６・・・表示処理部、２７・・・表示部、３０・・・バス、５１・・・モード表示、５４・・・特徴点、５５・・・画面、５６・・・類似画像列、５６ａ・・・縮小画像、５７ａ・・・スクロールアイコン、５７ｂ・・・スクロールアイコン、５８・・・スクロールバー、５９・・・スライダ、８１・・・検索条件、８２・・・子画面、８３・・・ＬＶロックアイコン、８５・・・類似画像、８６・・・画像番号、８７・・・非類似画像、９１・・・スクロールバー、９２・・・カーソル、９３ａ・・・撮影年度、９３ｂ・・・撮影年度、９４・・・明暗切換アイコン、９５・・・明暗表示、９６・・・戻しアイコン、９７ａ・・・スクロールアイコン、９７ｂ・・・スクロールアイコン、９８・・・１コマ画像、９９・・・ジャンプアイコン、１０１・・・コマ番号、１０２・・・モードアイコン、１０３・・・再生アイコン
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法、およびプログラムに関し、詳しくは、多数の画像の中から、類似画像を検索し、この検索結果を表示する画像表示装置、画像表示方法、およびプログラムに関する。
【背景技術】
【０００２】
最近は、風景画像や人物画像等の被写体の種類、あるいは撮影された人物の顔を検出する技術が飛躍的に進歩してきている。この技術を利用して、撮影画像の間で被写体の類似度を評価し、多数の画像の中から希望の画像を検索する画像検索装置が種々提案されている。
【０００３】
例えば、特許文献１には、基準となる撮影画像の横に縮小サイズの撮影画像を縦に並べて表示するカメラが提案されている。また、特許文献２には、抽出された類似画像を類似度の順番でサムネイル画像列によって表示し、この表示の際に、最初は連番ではなく、例えば１０番飛びで並べるようにした画像検索装置が提案されている。この画像検索装置によれば、検索された類似画像数が多い場合であっても、希望する画像に短時間でたどり着くことができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３５２７８０号公報
【特許文献２】特開２００７−２２６５３６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
類似画像検索が利用される場面では、基準画像に類似する特定の類似画像を検索すれば終了ということばかりではなく、特定の類似画像が見つかった後に、その特定の類似画像と同時期に撮影された画像もあわせて見て楽しむことも多い。しかし、従来の類似画像表示では、検索された類似画像または基準とされた画像だけが表示され、検索で排除された画像を鑑賞できるような配慮はなされていない。
【０００６】
そこで、検索された特定の類似画像と同時期に撮影された画像も鑑賞したい場合には、類似画像表示画面を終了し、インデックス表示画面あるいは１コマ表示画面に切り換えて、特定の類似画像を表示させる操作を行う必要があった。すなわち、従来の類似画像表示画面では、類似画像を見つけた後に、その類似画像に前後する画像の表示を簡単に行うことができなかった。
【０００７】
本発明は、このような事情を鑑みてなされたものであり、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことのできる画像表示装置、画像表示方法、およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため第１の発明に係わる画像表示装置は、基準画像に類似する画像を検索する類似画像検索部と、検索された類似画像を示す類似画像画面を表示させる第１の表示制御部と、上記類似画像画面に示された類似画像と当該類似画像に所定の順番で連続する非類似画像とを含み、かつ当該類似画像と非類似画像とを区別して示す拡張類似画像画面を表示させる第２の表示制御部と、上記第１の表示制御部および上記第２の表示制御部を少なくとも制御して、上記類似画像画面から上記拡張類似画像画面に切換える制御部と、を備える。
【０００９】
第２の発明に係わる画像表示装置は、上記第１の発明において、上記制御部は、上記類似画像画面で類似画像が選択された場合に、上記類似画像画面から上記拡張類似画像画面への切換えを行い、上記第２の表示制御部は、上記類似画像画面で選択された類似画像と当該選択された類似画像に所定の順番で連続する非類似画像を上記拡張類似画像画面に表示する。
第３の発明に係わる画像表示装置は、上記第１の発明において、上記第２の表示制御部は、上記所定の順番を撮影日の順番とする。
【００１０】
第４の発明に係わる画像表示装置は、上記第１の発明において、上記第２の表示制御部は、上記拡張類似画像画面に上記基準画像を含ませて表示させる。
第５の発明に係わる画像表示装置は、上記第１の発明において、画像を記憶する画像記憶部を備え、上記類似画像検索部は、上記画像記憶部に記憶された画像の中から指定された画像を上記基準画像とする。
【００１１】
第６の発明に係わる画像表示装置は、上記第１の発明において、撮像部を備えるカメラに搭載され、上記類似画像検索部は、上記撮像部により出力されるライブビュー画像を上記基準画像として、上記類似画像を検索し、上記表示制御部は、ライブビュー画像の画面に検索された類似画像の縮小画像を表示させる。
第７の発明に係わる画像表示装置は、上記第６の発明において、上記類似画像検索部は、上記ライブビュー画像の被写体変化に応じて、上記基準画像を変化させて上記類似画像を検索し、上記制御部は、さらに上記類似画像検索部を制御し、上記拡張類似画像画面に切り換えて、当該拡張類似画像画面において指示があった場合には、上記類似画像検索部にライブビュー画像の変化にかかわらず基準画像を変化させないように制御する。
【００１２】
第８の発明に係わる画像表示方法は、類似画像検索部を備える画像表示装置の表示部に類似画像を表示させる表示方法であって、上記類似画像検索部により基準画像に類似する画像を検索する工程と、上記検索された類似画像が含まれる画面を理事画像画面として表示させる第１の表示工程と、上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示工程と、を含む。
【００１３】
第９の発明に係わるプログラムは、コンピュータに類似画像を表示部に表示させるためのプログラムであって、基準画像に類似する画像を検索するステップと、上記検索された類似画像が含まれる画面を類似画像画面として表示させる第１の表示工ステップと、上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示ステップと、をコンピュータに実行させる。
【発明の効果】
【００１４】
本発明によれば、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことのできる画像表示装置、画像表示方法、およびプログラムを提供することができる。
【００１５】
特に、第１の発明によれば、類似画像と類似画像の周辺の画像を比較して鑑賞することができる。また、第２の発明によれば、非類似画像を含む画面への切換え操作が容易にできる。また、第３の発明によれば、類似画像と同時期に撮影された画像を簡単に鑑賞できる。また、第４の発明によれば、検索の元になった画像の確認も容易に行うことができる。
【００１６】
また、第５の発明によれば、撮影された画像と類似の画像を容易に鑑賞することができる。また、第６の発明によれば、ライブビューを基準画像に設定することができ、基準画像の選択の幅が広がり、また、撮影時に再生画像を楽しむことができ、撮影と再生の敷居が低くなる。
【００１７】
また、第７の発明によれば、ライブビューにより頻繁に被写体が変化する場合であっても、基準画像を固定することによりじっくり画像を鑑賞することができる。また、第８および第９の発明によれば、類似画像と類似画像の周辺の画像を比較して鑑賞することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態に係わるカメラの主として電気回路の構成を示すブロック図である。
【図２】本発明の一実施形態に係わるカメラにおける類似画像画面を示す図である。
【図３】本発明の一実施形態に係わるカメラにおいて、拡張類似画像画面を示す図である。
【図４】本発明の一実施形態に係わるカメラにおいて、類似画像画面、拡張類似画像画面、拡張類似１コマ画面、ＬＶ単純画面の間での切換えを示す図である。
【図５】本発明の一実施形態に係わるカメラにおいて、ＬＶ類似画像画面において、レリーズ操作された場合の画面を示す図である。
【図６】本発明の一実施形態に係わるカメラにおいて、ＬＶ拡張類似画像画面において、レリーズ操作された場合の画面を示す図である。
【図７】本発明の一実施形態に係わるカメラにおいて、テレワイド操作によって拡張類似画像画面の分割数を変更する様子を示す図である。
【図８】本発明に一実施形態に係わるカメラにおいて、再生モードにおける類似画像画面と拡張類似画像画面の切換えを示す図である。
【図９】本発明の一実施形態に係わるカメラの動作を示すフローチャートである。
【図１０】本発明の一実施形態に係わるカメラの撮影モード処理の動作を示すフローチャートである。
【図１１】本発明の一実施形態に係わるカメラの類似画面表示処理の動作を示すフローチャートである。
【図１２】本発明の一実施形態に係わるカメラの拡張類似画面表示処理の動作を示すフローチャートである。
【図１３】本発明の一実施形態に係わるカメラの拡張類似１コマ画面表示処理の動作を示すフローチャートである。
【図１４】本発明の一実施形態に係わるカメラの再生モード処理の動作を示すフローチャートである。
【図１５】本発明の一実施形態に係わるカメラの再生モードにおける類似画面表示処理の動作を示すフローチャートである。
【発明を実施するための形態】
【００１９】
以下、図面に従って本発明を適用したカメラを用いて好ましい実施形態について説明する。本発明の好ましい一実施形態に係わるカメラは、デジタルカメラであり、撮像部を有し、この撮像部によって被写体像を画像データに変換し、この変換された画像データに基づいて、被写体像を本体の背面に配置した表示部にライブビュー表示する。撮影者はライブビュー表示を観察することにより、構図やシャッタチャンスを決定する。レリーズ操作時には、画像データが記録媒体に記録される。記録媒体に記録された画像データは、再生モードを選択すると、表示部に再生表示することができる。
【００２０】
図１は、本発明の一実施形態に係わるカメラの構成を示すブロック図である。制御部（ＣＰＵ：Central Processing Unit）１１は、プログラム／データ記憶部１３に記憶された制御プログラムに従って動作し、カメラの全体制御を行う。制御部１１内には、類似画像検索部１１ａ、第１の表示制御部１１ｂ、および第２の表示制御部１１ｃが設けられている。制御部１１内の１１ａ、１１ｂ、１１ｃは、制御プログラムにより実行される処理の一部であるので、制御部１１に含まれる機能部として説明する。
【００２１】
類似画像検索部１１ａは、後述する画像記憶部２５に格納されている画像データの中から、基準画像と類似の画像を検索する。具体的には、基準画像としては、ライブビュー表示中は、このライブビュー画像であり、再生表示中には選択された再生画像である。また、類似画像検索部１１ａは、基準画像と画像記憶部２５に記憶されている画像のサムネイル画像の２値化処理を行い、この２値化情報（輝度）に基づいて特徴点を抽出する。この２値化処理によって特徴点を抽出し顔が画像に含まれているか否かを判定する場合には、左右の瞳位置、左右の鼻孔位置、顔の特徴点を用いて行う。また、眼、鼻、口等の顔パーツ自体の形状の特徴も顔の判定にあたって使用する。また、人物、動物、風景等のジャンルに対応する属性の有無について各画像について抽出を行う。これらの属性の抽出に当たっては、プログラム／データ記憶部１３に記憶されている類似画像検索用のデータベースを利用する。
【００２２】
また、類似画像検索部１１ａは、基準画像に対して、検索対象となる画像の類似する程度を表わす類似度Ｐを、検索対象となる画像ごとに判定する。すなわち、抽出された特徴点を用いて、基準画像との類似度Ｐを数値化し、この類似度Ｐを用いて類似画像を選択する。
【００２３】
第１の表示制御部１１ｂは、類似画像検索部１１ａによって検索された類似画像を示す類似画像画面を、後述する表示部２７に表示するための制御を行う。また、第２の表示制御部１１ｃは、前述の類似画像画面に示された類似画像と、この類似画像に所定の順番で連続する非類似画像とを含み、かつ類似画像と非類似画像とを区別して示す拡張類似画像画面を、表示部２７に表示するための制御を行う。
【００２４】
また、制御部１１は、第１の表示制御部１１ｂおよび第２の表示制御部１１ｃを少なくとも制御して、類似画像画面から拡張類似画像画面に切換える制御機能を有する。具体的には、類似画像画面で類似画像が選択された場合に、類似画像画面から拡張類似画像画面への切換えを行う。このとき、第２の表示制御部１１ｃは、類似画像画面で選択された類似画像とこの選択された類似画像に所定の順番で連続する非類似画像を拡張類似画像画面に表示させる。また、制御部１１は、拡張類似画像画面から類似画像画面への切換えも行う。
【００２５】
制御部１１には、プログラム／データ記憶部１３、ボタン操作部１４、タッチ操作部１５、およびバス３０が接続されている。プログラム／データ記憶部１３には前述したように制御部１１において実行するプログラムが記憶されており、また各種データも記憶されている。
【００２６】
ボタン操作部１４は、ユーザがカメラに指示を与えるための各種操作部材を有する。各種操作部材としては、電源釦、レリーズ釦、メニュー釦、再生釦等を有し、各種操作部材の操作状態の検出結果を制御部１１に出力する。タッチ操作部１５は、表示部２７の前面または表示部２７と一体に構成され、ユーザの指等による表示部２７の画面５５（図２参照）のタッチ状態に応じて検知信号を制御部１１に出力する。
【００２７】
バス３０には、前述の制御部１１の他に、撮像部２０、ＳＤＲＡＭ（Dynamic Random Access Memory）２１、画像処理部２２、表示処理部２６、圧縮伸張部２３、記録再生部２４が接続されている。撮像部２０は、被写体像を結像させるための撮影レンズ、被写体像を画像データに変換するための撮像素子、及びこれらの処理回路、撮影レンズの光路中に介挿された絞り及びシャッタ等を含む。撮像部２０によって生成された画像データはバス３０に出力される。
【００２８】
ＳＤＲＡＭ２１は電気的に書き換え可能な揮発性の一時記憶メモリであり、撮像部２０から出力される画像データの一時記憶に用いられる。画像処理部２２は、デジタル画像データのデジタル的増幅（デジタルゲイン調整処理）、ホワイトバランス、色補正、ガンマ（γ）補正、コントラスト補正、ライブビュー表示用画像生成、動画画像生成等の各種の画像処理を行なう。
【００２９】
圧縮伸張部２３はＳＤＲＡＭ２１に一時記憶された静止画や動画の画像データをＪＰＥＧやＴＩＦＦ等の圧縮方式により圧縮し、また表示等のために伸張するための回路である。なお、画像圧縮はＪＰＥＧやＴＩＦＦに限らず、他の圧縮方式も適用できる。
【００３０】
表示処理部２６は、撮影時にはライブビュー表示を、レリーズ時にはレックビュー表示を、再生時には再生画像を、表示部２７に表示させる。また、第１の表示制御部１１ｂからの指示に基づき、表示中の基準画像と類似する類似画像の表示を行う。さらに、第２の表示制御部１１ｃからの指示に基づき、類似画像に併せて類似画像と連続する非類似画像の表示を行い、また、これらの画像がタッチされた場合には、タッチされた画像を拡大して表示する拡大類似画像の表示を行う。表示部２７は、表示処理部２６に接続されており、カメラ１０の本体の背面等に配置された液晶モニタや有機ＥＬ等のディスプレイを有し、表示処理部２６の制御によりディスプレイの画面に所定の画像が表示される。
【００３１】
記録再生部２４は、圧縮伸張部２３において圧縮された画像データを画像記憶部２５に記憶し、また、画像記憶部２５に記憶された撮影画像の画像データを読み出す。この読み出された画像データは、圧縮伸張部２３において伸張され、この伸張された画像データに基づいて、表示部２７に画像が再生表示される。画像記憶部２５は、記録再生部２４に接続されており、デジタルカメラ本体に内蔵、または装填可能な画像データの記録媒体である。この画像記憶部２５に、撮影画像が格納されている。
【００３２】
次に、図２ないし図８を用いて、本実施形態における類似画像を表示する類似画像表示画面と、類似画像と非類似画像を表示する拡張類似画像表示画面について説明する。図２は、類似画像表示モードが設定されている場合において、表示部２７の画面５５にライブビュー（ＬＶ）表示がされている様子を示す。図２（ａ）は、画面５５に犬がライブビュー表示されている。この犬の画像に複数の＋印で示されるのは、特徴点５４である。特徴点５４は、画像の輝度に基づいて、類似画像検索部１１ａが抽出した特徴的な位置である。図２（ａ）は、特徴点５４に基づいて、動物を検出した例を示す。同様に、図２（ｂ）は、特徴点５４に基づいて、人物の顔を検出した例を示し、図２（ｃ）は、特徴点５４からは顔を検出できず、色相から色検出と判断した例である。
【００３３】
画面５５の左上にはモード表示５１が配置されており、モード表示５１の「ＬＶ」はライブビュー表示であることを示す。画面５５の下部には、類似画像列５６が表示されている。この類似画像列５６は、特徴点５４に基づいて、類似画像検索部１１ａによって類似度Ｐが判定され、類似度Ｐが選択レベル以上であるとして選択された類似画像が横一列に表示される。
【００３４】
類似画像列５６の両脇に配置されたスクロールアイコン５７ａ、５７ｂをタッチすることにより、所望の方向に、類似画像をスクロールすることができる。なお、図２（ａ）では、類似画像列５６が一端側にあることから、スクロールアイコン５７ｂは表示されていない。
【００３５】
類似画像列５６の下側には、スクロールバー５８が配置され、このスクロールバー５８内にはスライダ５９が配置されている。スクロールバー５８内におけるスライダ５９の位置は、選択された類似画像の中で、現在、表示されている画像の位置を示している。従って、ユーザがスクロールアイコン５７ａ、または５７ｂをタッチすることにより、タッチされたアイコンの方向に、表示される類似画像列が移動し、この移動に応じて、スライダ５９も移動する。
【００３６】
第１の表示制御部１１ｂによって、図２に示すように類似画像表示がなされている状態で、類似画像列５６中の１つの類似画像をタッチすると、第２の表示制御部１１ｃによって、図３に示すような拡張類似画像画面を表示する。類似画像画面は、類似画像検索部１１ａによって検索された類似画像を表示するが、拡張類似画像画面は、画像番号が類似画像と連続する非類似画像も併せて一緒に表示する。
【００３７】
図３（ａ）に示す拡張類似画像画面の画面５５の左上部には、検索条件８１が表示され、その下側には子画面８２が表示される。子画面８２には、撮影時にはライブビュー画像が表示され、また、再生時には再生画像が表示される。子画面８２に表示されている画像が基準画像となり、類似画像検索部１１ａは画像記憶部２５に格納されている画像の中から類似画像を検索する。
【００３８】
類似画像検索部１１ａは、子画面８２に表示されている画像を基準に類似画像を検索するが、検索条件６１は、この類似画像の検索の際に判定された基準画像の属性、例えば、人物の顔、動物、色検出等を表示する。図３（ａ）〜（ｃ）の例では、人物の顔であることから、「ｆ」と表示される。なお、図２（ａ）の動物の場合には、動物であることから「Ａ」と表示され、図２（ｃ）の色の場合には、色であることから「Ｃ」と表示される。
【００３９】
子画面８２に表示されている画像を基準画像として、類似画像検索部１１ａは類似画像を検索し、検索された類似画像は、画面５５に類似画像５５として表示される。この類似画像５５の表示の際には、画像番号８６が表示され、かつ類似画像は、明るく、十分視認できるように表示される。また、類似画像８５とは連番の非類似画像８７は、画像番号８６が表示されると共に暗くして表示される。図３（ａ）に示す例は、図２（ｂ）において、画像番号８６が５１の類似画像がタッチされた場合の拡張類似画像画面であり、この場合には、画像番号８６が５１から６６までの類似画像および非類似画像が表示される。複数の類似画像８５と複数の非類似画像８７は、図３に示すように、４×４の縮小（サムネイル）画像として表示される。以下、縮小画像をサムネイルあるいはサムネイル画像と表現する。
【００４０】
本実施形態においては、撮影画像は画像記憶部２５に記憶されているが、この記憶にあたっては、撮影日時順に順番が付与されて記憶される。前述の画像番号８６は、この付与された順番に相当する。なお、非類似画像８７は、本実施形態においては、暗く表示したが、これに限らず、低コントラストで表示したり、またハーフトーンで表示するようにしてもよい。また、類似画像と非類似画像の枠表示を変えるようにしてもよく、サムネイルのサイズを変えるようしてもよい。いずれにしても、類似画像８５と非類似画像８７を識別できるような表示であればよい。
【００４１】
類似画像８５および非類似画像８７の下側には、明暗切換アイコン９４が表示されている。この明暗切換アイコン９４は、暗く表示されている非類似画像８７を明るくする表示させるためのアイコンである。この明暗切換アイコン９４をユーザがタッチすると、図３（ｃ）に示すように、非類似画像８７も明るく表示されることから、非類似画像を十分見ることができる。
【００４２】
明暗切換アイコン９４の脇には、明暗表示９５が表示されている。この明暗表示９５は、明暗切換アイコン９４によって非類似画像８７を明示表示しているか、暗示表示しているかを示す。図３（ｂ）に示す状態で、明暗切換アイコン９４をタッチすると、明示状態に切り換わり、明暗表示９５も明るい表示に切り換わる。
【００４３】
類似画像８５および非類似画像８７からなるサムネイル画像の脇には、スクロールバー９１が表示される。このスクロールバー９１上には、撮影年度９３ａ、９３ｂが表示され、類似画像８５および非類似画像８７が表示されている撮影年度に相当する位置に、カーソル９２が表示される。このカーソル９２は、画像全体をボリュームとして、その中で現在表示している画像の位置を示している。このカーソル９２の位置をみれば、いつ頃撮影した画像かを知ることができる。スクロールバー９１上をユーザがタッチしながらスライドすると、類似画像８５および非類似画像８７はスクロールし、またカーソル９２もこの動きに併せてスクロールする。
【００４４】
子画面６２の下側には、ＬＶロックアイコン８３が表示されている。子画面６２にライブビュー画像が表示されている場合には、ライブビュー画像が刻々と変化する場合がある。ライブビュー画像が変化すると、図３（ａ）から図３（ｂ）に示すように、類似画像８５が変化し、またこの類似画像８５の連番の非類似画像８７も表示される。ライブビュー画像の変化にも関わらず、類似画像を固定しておきたい場合には、ＬＶロックアイコン８３をタッチすることにより、子画面６２の画像を固定し、類似画像もロックする（図８（ｃ）参照）。なお、ＬＶロックアイコン８３がタッチされ、ＬＶロックが設定されると、ＬＶロックアイコン８３の表示形態が変化する（図３の例では、破線から実線）。
【００４５】
次に、図４を用いて、類似画像画面、拡張類似画像画面、拡張類似１コマ画面、ＬＶ単純画面の切換について説明する。図４（ａ）は、類似画像画面であり、図２（ｂ）に示した画面と同様である。この類似画像画面の類似画像列５６の内の１つの類似画像をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に切り換わる。このとき、類似画像列５６の内のタッチされた類似画像が、拡張類似画像画面の類似画像８５として表示される。
【００４６】
また、図４（ｂ）に示す拡張類似画像画面において、子画像６２に表示されているライブビュー画像をタッチすると、図４（ａ）に示す類似画像画面に戻る。さらに、拡張類似画像画面において、サムネイル画像の内の類似画像８５および非類似画像８７のいずれか１つをタッチすると、図４（ｃ）に示す拡張類似画像１コマ画面に切り換わる。この拡張類似画像１コマ画面では、タッチされた類似画像８５または非類似画像８７が、画面５５に１コマ画像９８（図４（ｂ）（ｃ）に示す例では、画像番号が５１の類似画像）として、大きく表示される。
【００４７】
拡張類似画像１コマ画面の１コマ画像９８の左右には、スクロールアイコン９７ａ、９７ｂが表示されている。このスクロールアイコン９７ａ、９７ｂのいずれかをタッチすると、アイコンの向きの方向に画像が進み、または戻る。この場合、変更された画像が非類似画像であっても表示される。
【００４８】
また、１コマ画像９８の下側には、ジャンプアイコン９９が表示されており、このジャンプアイコン９９をユーザがタッチすると、ジャンプオン状態になって、スクロールアイコン９７ａ、９７ｂをタッチするたびに、類似画像８５のみが順番に表示される。一方、ジャンプオフ状態では、スクロールアイコン９７ａ、９７ｂをタッチするたびに、類似画像または非類似画像が１コマずつ表示される。なお、ジャンプアイコン９９がタッチされジャンプモードになると、「ジャンプオン」と表示され、再びタッチされてジャンプモードが解除されると、「ジャンプオフ」と表示される。
【００４９】
１コマ画像９８の右下側には、戻しアイコン９６が表示されている。図４（ｃ）に示す拡張類似画像１コマ画面において、戻しアイコン９６をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に戻る。また、図４（ｃ）に示す拡張類似画像１コマ画面において、ボタン操作部１４の内の１つであるレリーズ釦を半押しする（１ｓｔレリーズ操作）と、図４（ａ）に示す類似画像画面に戻る。
【００５０】
拡張類似画像１コマ画面に切り換わると、ライブビュー表示中であっても、ライブビュー画像が表示されず、ライブビュー画像と類似もしくは非類似の画像が再生されるので、実質的には再生モードに切り換わったのと同等である。
【００５１】
また、図４（ｄ）に示す類似画像画面において、画面５５の右端を下方向にタッチしながらスライドさせると（下方向へのドラッグ）、類似画像列５６およびスクロールバー５８等が画面５５の下側に移動し、図４（ｅ）に示すように画面５５から隠される。類似画像列５６およびスクロールバー５８等が画面５５から隠されると、通常のライブビュー（ＬＶ）単純画面となる。また、このＬＶ単純画面において、右端を上方向にタッチしながらスライドさせると、類似画像列５６およびスクロールバー５８等が画面５５の上側に移動し、図４（ｄ）に示すように画面５５に現われる。
【００５２】
次に、ライブビュー表示中に類似画像画面において、レリーズ釦が操作された場合の画像変化について、図５を用いて説明する。図５（ａ）に示す類似画像画面は、図２（ｂ）、図４（ａ）に示した類似画像画面と同様であり、この状態でボタン操作部１４の内のレリーズ釦の全押しがなされると、撮影動作が実行され、このときの撮像部２０から出力された画像が画像記憶部２５に記録される。
【００５３】
上述の撮影動作が実行される際に、記録される画像がレックビュー表示されるが、本実施形態においては、図５（ｂ）に示すように、画面５５の下段のサムネイル表示されている類似画像列５６の最後に移動するかのようなアニメーション表示を行う。そして、撮影後に、類似画像列５６の一番最後に縮小画像５６ａでサムネイル画像を表示させる。
【００５４】
次に、ライブビュー表示中に拡張類似画像画面において、レリーズ釦が操作された場合の画像変化について、図６を用いて説明する。図６（ａ）に示す類似画像画面は、図３（ａ）、図４（ｂ）に示した拡張類似画像画面と同様であり、この状態でボタン操作部１４の内のレリーズ釦の全押しがなされると、撮影動作が実行され、このときの撮像部２０から出力された画像が画像記憶部２５に記録される。
【００５５】
上述の撮影動作が実行される際に、類似画像画面の場合と同様に、記録される画像がレックビュー表示されるが、本実施形態においては、図６（ｂ）に示すように、画面５５の下段の隅に移動し、そして、図６（ｃ）に示すように消失するかのようなアニメーション表示を行う。拡張類似画像画面においては、撮影画像は最終的には消失するようなアニメーション表示が行われることから、類似画像画面の場合とは異なって、撮影後に表示される類似画像８５と非類似画像８７からなるサムネイル画像には変化はない。
【００５６】
次に、拡張類似画像画面におけるサムネイル画像の分割画像数の変更について、図７を用いて説明する。図７（ａ）は、図３（ａ）、図４（ｂ）と同じ拡張類似画像画面である。この画面においては、類似画像８５と非類似画像８７からなるサムネイル画像は、４×４で１６分割表示されている。この状態において、焦点距離（ズーム）をテレ側に移動させるテレ操作を行うと、図７（ｂ）に示すようにサムネイル画像は、３×３で９分割表示に変更される。
【００５７】
また、図７（ａ）の状態において、焦点距離をワイド側に移動させるワイド操作を行うと、図７（ｃ）に示すようにサムネイル画像は、５×５で２５分割表示変更される。なお、本実施形態においては、拡張類似画像画面において、テレ操作やワイド操作が行われても、ライブビュー画像への焦点距離の変化は反映させない。
【００５８】
図２ないし図７における説明においては、ライブビュー表示の際の類似画像画面や拡張類似画像画面の場合であったが、本実施形態は、再生モードにおいても同様に類似画像画面や拡張類似画像画面での表示を行うことができる。再生モードが設定されている場合の類似画像画面や拡張類似画像画面等の切換えについて、図８を用いて説明する。
【００５９】
図８（ａ）は、再生モードにおける類似画像画面であり、画面５５には、画像記憶部２５から読み出された画像が表示される。この読み出された画像を基準画像として、画像検索部１１ａは類似画像を検索し、ライブビュー表示時と同様に、検索された類似画像を類似画像列５６に表示する。
【００６０】
また、画面５５の左上には、撮影画像のコマ番号１０１が表示されており（図８（ａ）に示す例では、１５コマ目の画像）、また右上には、再生モードであることを示すモードアイコン１０２（図８（ａ）に示す例では、再生モードであることを示す「ＰＢ」（Playback））が表示されている。
【００６１】
この図８（ａ）に示す類似画像画面において、画面５５の右端を下方向にドラッグすると、類似画像列５６およびスクロールバー５８等は下方向に移動し、画面５５から隠れ、図８（ｃ）に示すような通常１コマ再生モードにおける再生画面となる。また、この通常１コマ再生モードにおける再生画面において、画面５５の右端を上方向にドラッグすると、類似画像列５６およびスクロールバー５８等は上方向に移動し、画面５５から現われ、図８（ａ）に示す類似画像画面となる。
【００６２】
また、図８（ａ）に示す類似画像画面において、類似画像列５６の内のいずれか１つの類似画像にタッチすると、図８（ｂ）に示すような拡張類似画像画面に変化する。この拡張類似画像画面において、子画面８２には画像記憶部２５から指定して読み出された再生画像が表示され、この子画面８２の再生画像が類似画像検索の際の基準画像となる。これ以外の拡張類似画像画面の構成は、ライブビュー表示の場合と同様であるので、詳しい説明は省略する。なお、図８（ｂ）に示す拡張類似画像画面において、子画面８２をタッチすると、図８（ａ）に示す類似画像画面に戻る点は、ライブビュー表示の場合と同様である。
【００６３】
図８（ｂ）に示す拡張類似画像画面において、類似画像８５および非類似画像８７からなるサムネイル画像の内のいずれか１コマをタッチすると、図８（ｄ）に示す拡張類似画像１コマ画面に切り換わる。再生モードにおける拡張類似画像１コマ画面もライブビュー表示の場合と同様であるが、再生モードの場合には、再生アイコン１０３が表示されている。拡張類似画像１コマ画面において、戻しアイコン９６をタッチすると、図８（ｂ）に示す拡張類似画像画面に戻る。また、再生アイコン１０３をタッチすると、図８（ａ）に示す類似画像画面に戻る。
【００６４】
次に、本実施形態に係わるカメラの動作について、図９ないし図１５に示すフローチャートを用いて説明する。このフローチャートはプログラム／データ記憶部１３に記憶されているプログラムに従って制御部１１によって実行される。
【００６５】
カメラ１０がパワーオンとなり、動作がスタートすると、まず、図９に示すフローチャートにおいて、撮影モードか否かの判定を行う（Ｓ１１）。このカメラ１０には、撮影モードと再生モードが用意されており、再生釦が操作され再生モードでなければ撮影モード判定される。この判定の結果、撮影モードでなかった場合には、再生モードであることから、再生モード処理を行う（Ｓ１３）。ここでは、画像記憶部２５に記憶されている画像を読み出し、表示部２７に表示する。この再生モード処理については、図１４に示すフローチャートを用いて後述する。
【００６６】
一方、ステップＳ１１における判定の結果、撮影モードであった場合には、次に、撮影モード処理を行う（Ｓ１２）。ここでは、単純なライブビュー表示、または類似画像画面等のライブビュー表示を行い、また、レリーズ操作がなされた際には、撮像部２０において取得した画像を、画像記憶部２５に記録する。この撮影モード処理については、図１０に示すフローチャートを用いて後述する。
【００６７】
ステップＳ１２における撮影モード処理を実行すると、またはステップＳ１３における再生モード処理を実行すると、電源オフ処理を行い（Ｓ１４）、このフローを終了する。なお、電源オフ処理がなされても、ボタン操作部１４の１つである電源釦の操作状態は監視されており、電源釦が操作されると、ステップＳ１１からスタートする。
【００６８】
次に、ステップＳ１２における撮影モード処理について、図１０に示すフローチャートを用いて説明する。撮影モード処理のフローに入ると、まず、スタート時か、すなわち、電源がオンとなり動作を開始してから最初の撮影モード処理か否かを判定する（Ｓ２１）。
【００６９】
ステップＳ２１における判定の結果、スタート時であれば、次に類似画面表示処理を行う（Ｓ２４）。このステップでは、第１の表示制御部１１ｂが、図２において示した類似画像画面を表示部２７に表示するための処理を行う。このサブルーチンについては、図１１を用いて後述する。
【００７０】
ステップＳ２１における判定の結果、スタート時でなければ、次に、画面変更操作がなされたか否かの判定を行う（Ｓ２２）。本実施形態においては、デフォルトモードとして、類似画像画面が表示部２７に表示されるが、図４を用いて説明したように、ユーザの画面変更操作に応じて画面の変更が行われるので、このステップでは、図４において説明したような変更操作がなされたか否かの判定を行う。
【００７１】
ステップＳ２２における判定の結果、画面変更操作がなされた場合には、切換え先変更設定を行う（Ｓ２３）。ここでは、ステップＳ２２において判定された画面変更操作に応じて、類似画像画面を表示する場合にはステップＳ２４の類似画面表示処理に、ライブビュー単純画面を表示する場合にはステップＳ２５のＬＶ単純画面表示処理に、拡張類似画像画面を表示する場合にはステップＳ２６の拡張類似画面表示処理に、拡張類似画像１コマ画面を表示する場合には、ステップＳ２７の拡張類似１コマ画面表示処理に、それぞれ切換え先の変更を設定する。ステップＳ２２における判定の結果、変更操作がなされていなかった場合には、ステップＳ２４〜Ｓ２７の表示処理を変更することなく、前回と同様の表示処理を実行する。
【００７２】
画面がＬＶ単純画面の場合には、ＬＶ単純画面表示処理を実行する（Ｓ２５）。ここでは、図４（ｅ）を用いて説明したように、類似画像を表示することなく、撮像部２０からの画像を表示部２７に表示する。
【００７３】
また、画面が拡張類似画像画面の場合には、拡張類似画面表示処理を実行する（Ｓ２６）。ここでは、図３を用いて説明したように、ライブビュー画像を子画面８２に表示し、子画面８２に表示している画像を基準画像として、これと類似する類似画像８５と、類似画像８５と連番の非類似画像８７を縮小してサムネイル画像で表示する。この拡張類似画面表示処理のサブルーチンについては、図１２を用いて後述する。
【００７４】
また、画面が拡張類似画像１コマ画面の場合には、拡張類似１コマ画面表示処理を実行する（Ｓ２７）。ここでは、図４（ｃ）を用いて説明したように、拡張類似画像画面において表示されている類似画像８５および非類似画像８７からなるサムネイル画像の内からユーザがいずれか１つを選択し、その選択された画像の拡大表示を行う。また、スクロールアイコン９７ａ、９７ｂやジャンプアイコン９９のタッチ操作に応じて、類似画像８５や非類似画像８７の表示が行われる。この拡張類似１コマ画面表示処理のサブルーチンについては、図１３を用いて後述する。
【００７５】
ステップＳ２４〜Ｓ２７における画面表示処理を行うと、次に、レリーズ操作がなされたか否かの判定を行う（Ｓ２８）。ここでは、ボタン操作部１４の１つであるレリーズ釦の操作状態を検出し、レリーズ釦が押し込まれた場合にレリーズ操作と判定する。
【００７６】
ステップＳ２８における判定の結果、レリーズ操作であった場合には、次に、撮影処理を行う（Ｓ２９）。撮影処理では、撮像部２０から取得した画像を画像処理部２２が画像処理し、圧縮伸張部２３が圧縮処理した後、画像記憶部２５に記憶する。また、類似画像画面を表示中にレリーズ操作があった場合には、レックビュー表示として、図５を用いて説明したように、画面５５に表示されている画像が、類似画像列５６の最後に移動するかのようなアニメーション表示を行う。また、拡張類似画像画面を表示中にレリーズ操作があった場合には、レックビュー表示として、図６を用いて説明したように、子画面６２に表示中の画像が類似画像８５や非類似画像８７からなるサムネイル画像の下側に移動し消失するようなアニメーション表示を行う。
【００７７】
ステップＳ２９における撮影処理が終わると、またはステップＳ２８における判定の結果、レリーズ操作でなかった場合には、パワーオフか否かの判定を行う（Ｓ３０）。ここでは、ボタン操作部１４の１つであるパワースイッチの状態を検出し、パワーオン状態で再度パワースイッチが操作された場合には、パワーオフと判定する。
【００７８】
ステップＳ３０における判定の結果、パワーオフであった場合には、元のフローに戻り、ステップＳ１４において電源オフ処理を行う。一方、ステップＳ３０における判定の結果、パワーオフでなかった場合には、次に、撮影再生モード切換か否かの判定を行う（Ｓ３１）。ここでは、ボタン操作部１４の内の１つである再生釦の操作状態を判定し、操作されていなければ、撮影モードと判定し、ステップＳ２１に戻る。ステップＳ３１における判定の結果、撮影モードから再生モードに切り換えられた場合には、ステップＳ１１に戻る。
【００７９】
次に、ステップＳ２４における類似画面表示処理のサブルーチンについて、図１１を用いて説明する。このフローに入ると、ステップＳ２１と同様に、スタート時か否かの判定を行う（Ｓ４１）。この判定の結果、スタート時でなければ、ライブビュー画像の被写体に変化があるか否かを判定する（Ｓ４２）。スタート時でなければ、類似画像の検索を行っており、この場合、ライブビュー画像に変化がなければ、前回、検索した類似画像をそのまま使用すればよいことから、このステップでライブビュー画像の変化を判定している。
【００８０】
ステップＳ４２における判定の結果、ライブビュー画像の被写体に変化が有った場合、または、ステップＳ４１における判定の結果、スタート時であった場合には、次に、ライブビュー画像の被写体の特徴を抽出する（Ｓ４３）。ここでは、ライブビュー画像を基準画像とし、類似画像検索部１１ａが、図２を用いて説明したような特徴点５４の抽出を行う。
【００８１】
特徴抽出を行うと、次に、画像記憶部２５から類似画像の抽出を行う（Ｓ４４）。ここでは、類似画像検索部１１ａが、ステップＳ４３において取得した特徴を利用し、基準画像のライブビュー画像と類似する画像を、画像記憶部２５に格納されている画像の中から検索する。この場合、被写体に応じたキーワードに基づいて検索を行う。このキーワードはメニュー画面を用いて、ユーザが手動設定しても構わないが、本実施形態においては、被写体の特徴点５４に応じて自動的に設定する。キーワードとしては、顔、色、ペットの種類、撮影時間（朝、有）等がある。例えば、図２（ｂ）のように、被写体として顔が見つかれば、検索ワードとして顔が優先する。
【００８２】
類似画像の抽出を行うと、次に、類似画面を作成し、表示する（Ｓ４５）。ここでは、第１の表示制御部１１ｂが、ステップＳ４４において検索された類似画像に基づいて、図２を用いて説明したような類似画像画面を作成し、この類似画像画面を表示部２７に表示する。
【００８３】
ステップＳ４５において類似画面を作成し表示すると、または、ステップＳ４２における判定の結果、ライブビュー画像の被写体に変化がなかった場合には、次に、類似画像列スクロール指示がなされたか否かの判定を行う（Ｓ４６）。図２を用いて説明したように、スクロールアイコン５７ａ、５７ｂのいずれかをタッチすると、アイコンの指し示す方向に類似画像列５６の類似画像が変化する。そこで、このステップでは、スクロールアイコン５７ａ、５７ｂのいずれかタッチされたか否かを判定する。
【００８４】
ステップＳ４６における判定の結果、スクロール指示があった場合には、スクロール指示に応じて、スクロール表示を行う（Ｓ４７）。ここでは、第１の表示制御部１１ｂがスクロールアイコン５７ａ、５７ｂのタッチ状態に応じて、類似画像列５６の類似画像を変化させる。
【００８５】
ステップＳ４７におけるスクロール指示を実行すると、またはステップＳ４６における判定の結果、スクロール指示がなかった場合には、類似画面表示処理を終了し、元のフローに戻る。
【００８６】
次に、ステップＳ２６における拡張類似画面表示処理のサブルーチンについて、図１２を用いて説明する。このフローに入ると、ステップＳ２１と同様に、スタート時か否かの判定を行う（Ｓ５１）。この判定の結果、スタート時であれば、ステップＳ４２と同様にライブビュー画像の被写体に変化があるか否かの判定を行う（Ｓ５２ａ）。
【００８７】
ステップＳ５２ａにおける判定の結果、ライブビュー画像の被写体に変化がある場合には、またはステップＳ５１における判定の結果、スタート時でなかった場合には、次に、ライブビュー画像の被写体の特徴を抽出し、拡張類似画面の作成を行う（Ｓ５２ｂ）。ここでは、前述のステップＳ４３、Ｓ４４と同様に、類似画像検索部１１ａが、ライブビュー画像の被写体の特徴を抽出し、画像記憶部２５から類似画像を抽出する。そして、この抽出した類似画像を用いて、第２の表示制御部１１ｃが、図３に示したような拡張類似画面を作成し、表示部２７に表示する。
【００８８】
拡張類似画面を表示すると、またはステップＳ５２ａにおける判定の結果、ライブビュー画像に変化がなかった場合には、次に、非表示明るさ変更操作があるか否かの判定行う（Ｓ５３）。図３（ｃ）を用いて説明したように、明暗切換アイコン９４をタッチすると非類似画像８７の明暗が切り換えられるので、このステップでは、明暗切換アイコン９４がタッチされたか否かの判定を行う。
【００８９】
ステップＳ５３における判定の結果、非表示明るさ変更操作があった場合には、次に、現在非類似も明るいか否かの判定を行う（Ｓ５４）。ここでは、非類似画像８７を明るく表示しているか否かを判定する。この判定の結果、非類似画像８７も明るかった場合には、非類似画像８７を暗く表示する（Ｓ５６）。一方、ステップＳ５４における判定の結果、非類似画像８７は明るくなかった場合には、非類似画像８７も明るく表示する（Ｓ５５）。
【００９０】
ステップＳ５３における判定の結果、非表示明るさ変更操作がない場合には、次に、テレワイド（ＴＷ）操作があるか否かの判定を行う（Ｓ５７）。ここでは、ボタン操作部１４の内の１つのズームボタンの操作状態、すなわち、テレ側に操作されているか、ワイド側に操作されているかを判定する。
【００９１】
ステップＳ５７における判定の結果、ＴＷ操作があった場合には、次に、分割数を変更して表示する（Ｓ５８）。図７を用いて説明したように、テレ側に操作された場合には、分割数を減らし、ワイド側に操作された場合には分割数を増やして、類似画像８５および非類似画像８７をサムネイル表示する。
【００９２】
ステップＳ５７における判定の結果、ＴＷ操作がなかった場合には、次に、スクロール操作がなされたか否かの判定を行う（Ｓ５９）。図３（ｂ）を用いて説明したように、ユーザがスクロールバー９１上をタッチしながらスライドする（スクロール操作）と、スクロール表示がなされる。そこで、このステップでは、スクロールバー９１上でスクロール操作がなされたか否かの判定を行う。
【００９３】
ステップＳ５９における判定の結果、スクロール操作がなされていた場合には、スクロール処理を行う（Ｓ６０）。ここでは、スクロールの方向を検知し、この方向に類似画像８５や非類似画像８７が移動するような表示を行う。
【００９４】
ステップＳ５９における判定の結果、スクロール操作がなされていなかった場合には、次にライブビュー（ＬＶ）ロック操作があるか否かの判定を行う（Ｓ６１）。図３を用いて説明したように、画面５５にはＬＶロックアイコン８３が表示されており、このＬＶロックアイコン８３をタッチすると、ライブビュー画像が固定される。そこで、このステップでは、ＬＶロックアイコン８３がタッチされたか否かを判定する。
【００９５】
ステップＳ６１における判定の結果、ＬＶロック操作があった場合には、次に、ロック処理を行う（Ｓ６２）。ここでは、再び、ＬＶロックアイコン８３がタッチされて、ＬＶロックが解除されるまで、類似画像検索部１１ａによる類似画像の検索の際に、基準となるライブビュー画像の更新を行わない。
【００９６】
ステップＳ６１における判定の結果、ＬＶロック操作がなされていなかった場合には、次に、１のサムネイル画像の選択がなされたか否かの判定を行う（Ｓ６３）。図４（ｃ）を用いて説明したように、拡張類似画像画面において、類似画像８５または非類似画像８７からなるサムネイル画像のいずれか１つの画像がタッチされると、タッチされた類似画像８５が１コマだけ拡大表示され、拡張類似画像１コマ画面に切り換わる。そこで、このステップでは、サムネイル画像の内の１つがタッチされたか否かを判定する。
【００９７】
ステップＳ６３における判定の結果、１つのサムネイル画像の選択がなされた場合には、ステップＳ２７（図１０参照）に進み、拡張類似１コマ画面表示処理のサブルーチンを実行する。一方、ステップＳ６３における判定の結果、１つのサムネイル画像の選択がなされていなかった場合には、元のフローに戻る。
【００９８】
次に、ステップＳ２７における拡張類似１コマ画面表示処理のサブルーチンについて、図１３を用いて説明する。このフローに入ると、まず、１コマ表示を行う（Ｓ７１）。拡張類似画像１コマ画面は、図４（ｃ）を用いて説明したように、図４（ｂ）に示す拡張類似画像画面において、類似画像８５または非類似画像８７からなるサムネイル画像の内のいずれか１コマの画像をタッチした場合には、表示される画面であり、このステップでは、ユーザがタッチした１コマの画像を図４（ｃ）に示すように、拡大して表示する。
【００９９】
１コマ表示を行うと、次に、スクロール操作がなされたか否かの判定を行う（Ｓ７２）。拡張類似画像１コマ画面に表示されるスクロールアイコン９７ａ、９７ｂのいずれかをタッチすると、画像が進みまたは戻し処理がなされる。そこで、このステップでは、スクロールアイコン９７ａ、９７ｂのいずれかがタッチされたか否かを判定する。
【０１００】
ステップＳ７２における判定の結果、スクロール操作がなされた場合には、次に、「非類似をジャンプする」設定か否かの判定を行う（Ｓ７３）。図４（ｃ）を用いて前述したように、ジャンプアイコン９９が設定されている場合には（ジャンプオン時）、スクロールアイコン９７ａ、９７ｂがタッチされた場合には、タッチされるたびに類似画像８５のみが順次表示され、非類似画像８７は表示されない。一方、ジャンプアイコン９９が設定されていない場合には（ジャンプオフ時）、スクロールアイコン９７ａ、９７ｂがタッチされた場合には、タッチされるたびに類似画像８５および非類似画像８７の配列順、すなわち、撮影日時順に表示される。したがって、このステップでは、ジャンプアイコン９９がタッチされ、非類似画像をジャンプする（ジャンプオン）設定になっているか否かを判定する。
【０１０１】
ステップＳ７３における判定の結果、「非類似画像をジャンプする」設定になっていた場合には、非類似画像をジャンプして表示する（Ｓ７５）。ここでは、スクロールアイコン９７ａ、９７ｂのタッチに応じて、類似画像８５のみを順次表示する。一方、ステップＳ７３における判定の結果、「非類似画像をジャンプする」設定になっていなかった場合には、非類似画像も表示する（Ｓ７４）。ここでは、スクロールアイコン９７ａ、９７ｂのタッチに応じて、類似画像８５および非類似画像８７からなるサムネイル画像の中で、撮影日時順に順次表示する。
【０１０２】
ステップＳ７２における判定の結果、スクロール操作がなされていなかった場合には、次に、戻しアイコンの操作がなされたか否かを判定する（Ｓ７６）。図４（ｃ）を用いて説明したように、拡張類似画像１コマ画面において、戻しアイコン９６をユーザがタッチすると、図４（ｂ）に示す拡張類似画像画面に戻る。そこで、このステップでは、戻しアイコン９６がタッチされたか否かを判定する。この判定の結果、戻しアイコン９６がタッチされた場合には、ステップＳ２６に進み、拡張類似画面表示処理を実行する。
【０１０３】
ステップＳ７６における判定の結果、戻しアイコンの操作がなされていなかった場合には、次に、１ｓｔレリーズがなされたか否かの判定を行う（Ｓ７７）。ここでは、ボタン操作部１４の１つであるレリーズ釦の半押し操作がなされたか否かの判定を行う。この判定の結果、１ｓｔレリーズであった場合には、ステップＳ２４に進み、類似画面表示処理を実行する。
【０１０４】
ステップＳ７７における判定の結果、１ｓｔレリーズではなかった場合、またはステップＳ７４またはＳ７５におけるスクロール操作における表示を行うと、拡張類似１コマ画面表示処理を終了し、元のフローに戻る。
【０１０５】
次に、ステップＳ１３における再生モード処理のサブルーチンについて、図１４を用いて説明する。再生モードは、画像記憶部２５に格納されている撮影画像を読み出し、表示部２７に再生表示を行うモードであり、この再生表示を行う１コマ画像を基準画像として、画像記憶部２５に記憶されている画像と類似する画像を表示することができる。
【０１０６】
再生モード処理のフローは、図１０に示した撮影モード処理において、ステップＳ２８のレリーズ操作と、ステップＳ２９の撮影処理を除いただけである。また、再生モードでは、撮影モード処理におけるライブビュー画像を、画像記憶部２５から読み出された再生画像に置き換えるだけである。そこで、撮影モード処理のフローと同様の処理を実行するステップについては、同一のステップ番号を付し、詳しい説明は省略する。
【０１０７】
次に、再生モード処理におけるステップＳ２４における類似画面表示処理について、図１５を用いて説明する。この類似画面表示処理のフローに入ると、まず、選択された画像の被写体の特徴抽出を行う（Ｓ９１）。再生モード処理に入ると、サムネイル表示等の中から画像を選択するので、類似画像検索部１１ａは、選択された画像の特徴点５４を抽出する。
【０１０８】
ステップＳ９１において特徴抽出を行うと、次に、画像記憶部２５から類似画像の抽出を行う（Ｓ９２）。ここでは、画像検索部１１ａが、再生用に選択された画像を基準画像とし、ステップＳ４４と同様にして、画像記憶部２５に格納された画像の中から類似画像を検索する。
【０１０９】
ステップＳ９２において類似画像の抽出を行うと、次に、類似画像を作成し、表示する（Ｓ９３）。ここでは、第１の表示制御部１１ｂが、図８（ａ）に示したような類似画像画面を作成し、表示部２７に表示する。
【０１１０】
類似画面を作成し、表示すると、次に、類似画像列スクロール指示が有るか否かの判定を行う（Ｓ９４）。再生表示の際にもスクロールアイコン５７ａ、５７ｂが表示されるので（図８（ａ）参照）、このステップでは、スクロールアイコン５７ａ、５７ｂのいずれかがタッチされたか否かを判定する。
【０１１１】
ステップＳ９４における判定の結果、スクロール指示があった場合には、次に、スクロール表示を行う（Ｓ９５）。ここでは、スクロールアイコン５７ａ、５７ｂのタッチ状態に応じて、類似画像列５６の画像を移動させて表示する。
【０１１２】
ステップＳ９５のスクロール表示を行うと、またはステップＳ９４における判定の結果、スクロール指示がなかった場合には、類似画面表示処理のフローを終了して、元のフローに戻る。
【０１１３】
再生モード処理におけるステップＳ２６における拡張類似画面表示処理のサブルーチンは、図１２に示した撮影モード処理における拡張類似画面表示処理のサブルーチンにおいて、Ｓ６１のＬＶロック操作の判定と、Ｓ６２のロック処理を除いただけであり、他のステップでは同様であることから、フローチャートおよび詳しい説明は省略する。
【０１１４】
また、再生モード処理におけるステップＳ２７の拡張類似１コマ画面表示処理のサブルーチンは、図１３に示した撮影モード処理における拡張類似１コマ画面表示処理のサブルーチンと実質的に同じである。但し、ステップＳ７７において、１ｓｔレリーズがあったか否かを判定しているが、再生モード処理の場合には、図８（ｄ）に示す再生アイコン１０３をタッチしたか否かの判定に置き換えればよい。これ以外のステップは同様の処理を行えばよいことから、フローチャートおよび詳しい説明は省略する。
【０１１５】
以上説明したように、本発明の一実施形態においては、第１の表示制御部１１ｂによって、基準画像に類似する類似画像を表示させ、また第２の表示制御部１１ｃによって、基準画像に類似する類似画像を表示させると共に、非類似の画像も表示させるようにしている。このため、類似画像画面と非類似画像が含まれる画面との切換えが容易に行うことができる。
【０１１６】
なお、本発明の一実施形態においては、ライブビュー表示の際と再生表示の際の両方のモードにおいて、類似画像の検索と表示を行うようにしていたが、いずれか一方だけでもよい。また、本発明の一実施形態においては、画像表示装置をカメラに搭載した例を説明したが、パーソナルコンピュータ等の機器に搭載し、これらの機器に記憶した画像を表示する際にも、本発明を適用することができる。また、拡張類似画面で類似画像と非類似画像を、撮影日時順の番号に従って並べるように説明したが、これに限るものではない。並び順としては、撮影位置の順番でもよく、あるいは、予め定めたグループの中での順番でもよい。
【０１１７】
また、本発明の一実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話や携帯情報端末（ＰＤＡ：Personal Digital Assist）、ゲーム機器等に内蔵されるカメラでも構わない。
【０１１８】
本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【０１１９】
１０・・・カメラ、１１・・・制御部（ＣＰＵ）、１１ａ・・・類似画像検索部、１１ｂ・・・第１の表示制御部、１１ｃ・・・第２の表示制御部、１３・・・プログラム／データ記憶部、１４・・・ボタン操作部、１５・・・タッチ操作部、２０・・・撮像部、２１・・・ＳＤＲＡＭ、２２・・・画像処理部、２３・・・圧縮伸張部、２４・・・記録再生部、２５・・・画像記憶部、２６・・・表示処理部、２７・・・表示部、３０・・・バス、５１・・・モード表示、５４・・・特徴点、５５・・・画面、５６・・・類似画像列、５６ａ・・・縮小画像、５７ａ・・・スクロールアイコン、５７ｂ・・・スクロールアイコン、５８・・・スクロールバー、５９・・・スライダ、８１・・・検索条件、８２・・・子画面、８３・・・ＬＶロックアイコン、８５・・・類似画像、８６・・・画像番号、８７・・・非類似画像、９１・・・スクロールバー、９２・・・カーソル、９３ａ・・・撮影年度、９３ｂ・・・撮影年度、９４・・・明暗切換アイコン、９５・・・明暗表示、９６・・・戻しアイコン、９７ａ・・・スクロールアイコン、９７ｂ・・・スクロールアイコン、９８・・・１コマ画像、９９・・・ジャンプアイコン、１０１・・・コマ番号、１０２・・・モードアイコン、１０３・・・再生アイコン
【特許請求の範囲】
【請求項１】
基準画像に類似する画像を検索する類似画像検索部と、
検索された類似画像を示す類似画像画面を表示させる第１の表示制御部と、
上記類似画像画面に示された類似画像と当該類似画像に所定の順番で連続する非類似画像とを含み、かつ当該類似画像と非類似画像とを区別して示す拡張類似画像画面を表示させる第２の表示制御部と、
上記第１の表示制御部および上記第２の表示制御部を少なくとも制御して、上記類似画像画面から上記拡張類似画像画面に切換える制御部と、
を備えることを特徴とする画像表示装置。
【請求項２】
上記制御部は、上記類似画像画面で類似画像が選択された場合に、上記類似画像画面から上記拡張類似画像画面への切換えを行い、
上記第２の表示制御部は、上記類似画像画面で選択された類似画像と当該選択された類似画像に所定の順番で連続する非類似画像を上記拡張類似画像画面に表示する、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項３】
上記第２の表示制御部は、上記所定の順番を撮影日の順番とすることを特徴とする請求項１に記載の画像表示装置。
【請求項４】
上記第２の表示制御部は、上記拡張類似画像画面に上記基準画像を含ませて表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項５】
画像を記憶する画像記憶部を備え、
上記類似画像検索部は、上記画像記憶部に記憶された画像の中から指定された画像を上記基準画像とする、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項６】
撮像部を備えるカメラに搭載され、
上記類似画像検索部は、上記撮像部により出力されるライブビュー画像を上記基準画像として、上記類似画像を検索し、
上記表示制御部は、ライブビュー画像の画面に検索された類似画像の縮小画像を表示させる、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項７】
上記類似画像検索部は、上記ライブビュー画像の被写体変化に応じて、上記基準画像を変化させて上記類似画像を検索し、
上記制御部は、さらに上記類似画像検索部を制御し、上記拡張類似画像画面に切り換えて、当該拡張類似画像画面において指示があった場合には、上記類似画像検索部にライブビュー画像の変化にかかわらず基準画像を変化させないように制御する、
ことを特徴とする請求項６に記載の画像表示装置。
【請求項８】
類似画像検索部を備える画像表示装置の表示部に類似画像を表示させる表示方法であって、
上記類似画像検索部により基準画像に類似する画像を検索する工程と、
上記検索された類似画像が含まれる画面を理事画像画面として表示させる第１の表示工程と、
上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示工程と、
を含むことを特徴とする画像表示方法。
【請求項９】
コンピュータに類似画像を表示部に表示させるためのプログラムであって、
基準画像に類似する画像を検索するステップと、
上記検索された類似画像が含まれる画面を類似画像画面として表示させる第１の表示工ステップと、
上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示ステップと、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１】
基準画像に類似する画像を検索する類似画像検索部と、
検索された類似画像を示す類似画像画面を表示させる第１の表示制御部と、
上記類似画像画面に示された類似画像と当該類似画像に所定の順番で連続する非類似画像とを含み、かつ当該類似画像と非類似画像とを区別して示す拡張類似画像画面を表示させる第２の表示制御部と、
上記第１の表示制御部および上記第２の表示制御部を少なくとも制御して、上記類似画像画面から上記拡張類似画像画面に切換える制御部と、
を備えることを特徴とする画像表示装置。
【請求項２】
上記制御部は、上記類似画像画面で類似画像が選択された場合に、上記類似画像画面から上記拡張類似画像画面への切換えを行い、
上記第２の表示制御部は、上記類似画像画面で選択された類似画像と当該選択された類似画像に所定の順番で連続する非類似画像を上記拡張類似画像画面に表示する、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項３】
上記第２の表示制御部は、上記所定の順番を撮影日の順番とすることを特徴とする請求項１に記載の画像表示装置。
【請求項４】
上記第２の表示制御部は、上記拡張類似画像画面に上記基準画像を含ませて表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項５】
画像を記憶する画像記憶部を備え、
上記類似画像検索部は、上記画像記憶部に記憶された画像の中から指定された画像を上記基準画像とする、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項６】
撮像部を備えるカメラに搭載され、
上記類似画像検索部は、上記撮像部により出力されるライブビュー画像を上記基準画像として、上記類似画像を検索し、
上記表示制御部は、ライブビュー画像の画面に検索された類似画像の縮小画像を表示させる、
ことを特徴とする請求項１に記載の画像表示装置。
【請求項７】
上記類似画像検索部は、上記ライブビュー画像の被写体変化に応じて、上記基準画像を変化させて上記類似画像を検索し、
上記制御部は、さらに上記類似画像検索部を制御し、上記拡張類似画像画面に切り換えて、当該拡張類似画像画面において指示があった場合には、上記類似画像検索部にライブビュー画像の変化にかかわらず基準画像を変化させないように制御する、
ことを特徴とする請求項６に記載の画像表示装置。
【請求項８】
類似画像検索部を備える画像表示装置の表示部に類似画像を表示させる表示方法であって、
上記類似画像検索部により基準画像に類似する画像を検索する工程と、
上記検索された類似画像が含まれる画面を理事画像画面として表示させる第１の表示工程と、
上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示工程と、
を含むことを特徴とする画像表示方法。
【請求項９】
コンピュータに類似画像を表示部に表示させるためのプログラムであって、
基準画像に類似する画像を検索するステップと、
上記検索された類似画像が含まれる画面を類似画像画面として表示させる第１の表示工ステップと、
上記類似画像画面に示された類似画像の中でいずれかの類似画像が選択された場合に、当該選択された類似画像に所定の順番で連続する非類似画像とを含み、かつ当該選択された類似画像と非類似画像とを区別して拡張類似画像画面として表示させる第２の表示ステップと、
をコンピュータに実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１１−２５７９８０（Ｐ２０１１−２５７９８０Ａ）
【公開日】平成２３年１２月２２日（２０１１．１２．２２）
【国際特許分類】
【出願番号】特願２０１０−１３１７９９（Ｐ２０１０−１３１７９９）
【出願日】平成２２年６月９日（２０１０．６．９）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２３年１２月２２日（２０１１．１２．２２）
【国際特許分類】
【出願日】平成２２年６月９日（２０１０．６．９）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]