画像表示装置および撮像装置

【課題】ユーザーの嗜好に基づいて不要な画像を判別し、画像を削除または圧縮することができる画像表示装置および撮像装置を提供する。
【解決手段】メモリ１０３は画像を記憶する。モニタ部１０６は、再生された画像を表示する。閲覧検出部１０７は、ユーザーが筐体を把持していることを検出する。制御装置１０８は、ユーザーが筐体を把持していることが検出されたときの画像の再生状況に基づいて画像を選択し、選択した画像を削除または圧縮する。

【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を表示する画像表示装置に関する。また、本発明は、画像表示装置を有する撮像装置にも関する。
【背景技術】
【０００２】
一般に、デジタルカメラ、ビデオカメラ等の撮像装置では、取得された画像が撮像装置内部のメモリに記録される。このような撮像装置においては、メモリの容量分の画像が記録されると、それ以上メモリに画像を記録できないため、メモリの空き容量が確保されるまで撮影ができなくなるといった問題が発生する。このような問題の発生を防止するために、撮影前にユーザーが不要な画像を削除または圧縮し、メモリの空き容量を確保する必要がある。しかし、メモリに記録された多くの画像の中から不要なものを判別するのはかなり面倒である。このようなユーザーが行う判別を撮像装置が自動で行い、メモリ内のデータを自動で削除または圧縮できれば大変便利である。
【０００３】
従来、不要な画像を自動で判別して、その情報を元にメモリ内の画像を削除または圧縮する方法として種々の方法が提案されている。例えば特許文献１では、デジタルカメラにおいて、重要度を付加した画像を記録媒体に記録し、記録媒体の残容量が所定値以下になった場合に、重要度に基づいて画像を削除または圧縮する方法が記載されている。この方法では、画像を撮影した際の手振れの度合いが大きいほど重要度が低く設定され、この重要度が低い画像が不要なものと判別されて自動で削除または圧縮される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１７７８３８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、手振れの度合いが大きい画像が必ずしもユーザーにとって不要なものとは限らない。特許文献１に記載の撮像装置では、手振れの度合いの大きい画像がユーザーのお気に入りの画像であった場合、ユーザーの嗜好に反してその画像は不要なものと判別され、削除または圧縮されることになる。不要な画像かどうかを判別する際には、手振れ等の画質に関わる情報よりもユーザーの嗜好の方が重要な要因となる。
【０００６】
本発明は、上述した課題に鑑みてなされたものであって、ユーザーの嗜好に基づいて不要な画像を判別し、画像を削除または圧縮することができる画像表示装置および撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、上記の課題を解決するためになされたもので、画像を記憶する記憶部と、前記画像を再生し表示する表示部と、ユーザーが筐体を把持していることを検出する検出部と、ユーザーが前記筐体を把持していることが検出されたときの前記画像の再生状況に基づいて前記画像を選択する選択部と、前記選択部によって選択された前記画像を削除または圧縮する制御部と、を有することを特徴とする画像表示装置である。
【０００８】
また、本発明の画像表示装置において、前記選択部は、最後に前記画像が再生されてから経過した時間と、ユーザーが前記筐体を把持していることが検出されている間に前記画像が再生された時間とに基づいて前記画像を選択することを特徴とする。
【０００９】
また、本発明の画像表示装置において、前記検出部は、前記筐体の動きを検出することを特徴とする。
【００１０】
また、本発明の画像表示装置において、前記検出部は、前記筐体に加えられる圧力を検出することを特徴とする。
【００１１】
また、本発明は、上記の画像表示装置と、前記画像を生成する撮像素子と、を有することを特徴とする撮像装置である。
【発明の効果】
【００１２】
本発明の画像表示装置および撮像装置は、ユーザーが筐体を把持していることが検出されたときの画像の再生状況に基づいて画像を選択し、選択した画像を削除または圧縮する。ユーザーが筐体を把持しているか否かを考慮することで、画像の再生時にユーザーが本当に画像を見ているか否かを推定することが可能となる。これによって、画像に対するユーザーの嗜好を判別することが可能となるので、ユーザーの嗜好に基づいて不要な画像を判別し、画像を削除または圧縮することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施形態による撮像装置の構成を示すブロック図である。
【図２】本発明の第１の実施形態による撮像装置の背面図である。
【図３】本発明の第１の実施形態による撮像装置の動作の手順を示すフローチャートである。
【図４】本発明の第１の実施形態における画像再生情報の内容を示す参考図である。
【図５】本発明の第１の実施形態におけるメモリ状態を示す参考図である。
【図６】本発明の第１の実施形態におけるメモリ状態を示す参考図である。
【図７】本発明の第１の実施形態におけるメモリ状態を示す参考図である。
【図８】本発明の第２の実施形態による撮像装置の動作の手順を示すフローチャートである。
【図９】本発明の第２の実施形態におけるメモリ状態を示す参考図である。
【図１０】本発明の第２の実施形態におけるメモリ状態を示す参考図である。
【図１１】本発明の第２の実施形態におけるメモリ状態を示す参考図である。
【図１２】本発明の第２の実施形態におけるメモリ状態を示す参考図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照し、本発明の実施形態を説明する。
【００１５】
（第１の実施形態）
まず、本発明の第１の実施形態を説明する。図１は、本実施形態による撮像装置の構成を示している。図１に示す撮像装置１００は、レンズ１０１、撮像素子１０２、メモリ１０３、画像処理部１０４、表示制御部１０５、モニタ部１０６、閲覧検出部１０７、および制御装置１０８を有する。なお、メモリ１０３、画像処理部１０４、表示制御部１０５、モニタ部１０６、閲覧検出部１０７、および制御装置１０８は、本発明の画像表示装置の構成例となる。
【００１６】
レンズ１０１は、外光を取り込み撮像素子１０２に投影する。撮像素子１０２は、レンズ１０１より取り込んだ光を画像信号に変換する。メモリ１０３は画像信号を記憶する。画像処理部１０４は、メモリ１０３に記憶された画像信号を読み出し各種の画像処理を行う。表示制御部１０５は、画像信号を表示用信号に変換する。モニタ部１０６は、表示制御部１０５から出力された表示用信号に基づいて画像を表示する。閲覧検出部１０７は、ユーザーが画像の閲覧時に撮像装置１００の筐体を把持していることを検出する。制御装置１０８は撮像装置１００全体を制御する。
【００１７】
閲覧検出部１０７は、ユーザーがカメラを把持していることを検出し、制御装置１０８に検出結果を通知することが可能な機構であればどんなものでも構わない。一例として、閲覧検出部１０７は加速度センサーと信号処理回路を有し、撮像装置１００の筐体の動きである手振れを検出する。この手振れの検出方法は、従来の手振れ補正機構で用いられている検出方法と同様である。閲覧検出部１０７が検出する手振れの量に基づいて、ユーザーが撮像装置１００の筐体を把持しているか否かを判定することが可能である。あるいは、撮像装置１００が従来の手振れ補正機構を有する場合、閲覧検出部１０７は、手振れを補正するために撮像素子１０２を移動させるときの移動量を検出してもよい。この移動量も、手振れ量に応じた量となる。
【００１８】
また、閲覧検出部１０７を圧力センサーで構成し、ユーザーが撮像装置１００の筐体を把持するときにユーザーの手によって筐体に加えられる圧力を検出してもよい。図２は、撮像装置１００の筐体の表面に圧力センサーを配置した状態の一例を示している。撮像装置１００の筐体側面において、ユーザーが把持しやすい位置に、圧力センサー１０７ａ，１０７ｂが配置されている。
【００１９】
次に、撮像装置１００の動作を、撮影モードと画像再生モードの２つに分けて説明する。図３は、撮像装置１００の動作を示している。ユーザーが撮像装置１００の電源を投入すると、撮像装置１００は動作を開始する。ユーザーによって撮影モードが選択されて（ステップＳ１０７）、撮影が実行される（ステップＳ１１１）と、撮像装置１００は、レンズ１０１を介して撮像素子１０２に受光させ、撮像素子１０２から出力される画像信号をメモリ１０３に保存する（ステップＳ１１２）。この処理を繰り返すことで、撮影した画像がメモリ１０３に蓄積されていく。
【００２０】
撮影により画像がメモリ１０３に保存された状態で画像再生モードが選択された場合（ステップＳ１０１）、制御装置１０８は画像処理部１０４に命令を出力する。画像処理部１０４は、メモリ１０３に保存されている画像から、モニタ部１０６が表示する画像のサイズに加工した表示画像を作成し、メモリ１０３に保存する（ステップＳ１０２）。
【００２１】
続いて、制御装置１０８は表示制御部１０５に命令を出力する。表示制御部１０５は、ステップＳ１０２でメモリ１０３に保存された表示画像を読み出し、モニタ部１０６に出力する。モニタ部１０６は、再生された画像を表示する（ステップＳ１０３）。
【００２２】
ステップＳ１０３の処理時、閲覧検出部１０７は、ユーザーが撮像装置１００を把持していることを一定周期で検出する。手振れ量、撮像素子１０２の移動量、または筐体表面の圧力量が予め設定した閾値を超えた場合、閲覧検出部１０７は、ユーザーが撮像装置１００を把持していることを検出する。ユーザーが撮像装置１００を把持していることが検出されている期間において、制御装置１０８は時間（画像の再生時間）を計測する。
【００２３】
ステップＳ１０３の処理後、ユーザーが再生する画像を切り替えた場合（ステップＳ１０４）、制御装置１０８は再生時間の計測を終了すると共に画像に対応する画像再生情報をメモリ１０３から読み出し（ステップＳ１０５）、更新した新しい画像再生情報をメモリ１０３に保存する（ステップＳ１０６）。
【００２４】
ここで画像再生情報について説明する。図４は画像再生情報の一例を示している。画像再生情報とは、再生経過日数４０１、累積再生時間４０２、および再生重要度指数４０３で構成される情報である。再生経過日数４０１は、最後に画像を再生してから経過した日数である。累積再生時間４０２は、制御装置１０８が計測した画像の再生時間を、同じ画像が再生される毎に累計した時間である。再生重要度指数４０３は、再生経過日数４０１と累積再生時間４０２から算出される値であり、ユーザーが画像をどれくらい気に入っているのかを示す指標である。再生重要度指数４０３の値が高いほど、ユーザーにとって重要な画像であると判別されやすくなる。図２の場合、再生重要度指数４０３は、累積再生時間４０２を再生経過日数４０１で割ることによって算出されているが、再生重要度指数４０３の算出方法はこの限りではない。
【００２５】
ＰＣなどで扱われる動画や文書データの場合、再生回数で重要度を推定することができる。これに対して、デジタルカメラなどの撮像装置で扱われる再生画像の場合、ユーザーが画像を１つずつ順に閲覧することが多く、再生回数に差が生じにくいため、再生回数で画像の重要度を推定することが難しい。そこで、本実施形態では、ユーザーが画像を再生した時間に着目し、再生時間が長い画像の重要度が高いと推定している。
【００２６】
画像の再生が開始された後、ユーザーが画像の再生中に撮像装置１００をどこかに置いて手放した場合、ユーザーが画像を見ていない可能性もある。そこで、本実施形態では、画像の再生中にユーザーが撮像装置１００を把持していれば、ユーザーが本当に画像を見ていると推定し、把持している間の再生時間を計測することで、画像の重要度を推定する精度を向上させている。
【００２７】
ただし、古い画像ほど累積再生時間が長くなるので、再生経過日数も考慮して重要度を推定している。本実施形態では、ユーザーのお気に入りの画像は高頻度で再生されると仮定し、最後に画像が再生されてからの経過日数である再生経過日数が短い画像の重要度が高いと推定している。したがって、累積再生時間が長い、かつ再生経過日数が短いほど、再生重要度指数が高くなる。
【００２８】
図５はステップＳ１０６の処理後のメモリ状態を示している。図５に示すように、インデックス情報５０１〜５０３、画像再生情報５０４〜５０６、および画像情報５０７〜５０９がメモリ１０３に保存されている。インデックス情報は、画像をメモリ１０３から読み出す際に必要なアドレスや画像の名称などの情報で構成されている。例えばインデックス情報５０１には、対応する画像再生情報５０４のアドレス、画像情報５０７のアドレス、および画像情報５０７の名称が保存されている。画像情報５０７がモニタ部１０６に出力された後、再生する画像情報が画像情報５０７から別の画像情報に切り替わった場合、制御装置１０８は、インデックス情報５０１が示す画像再生情報５０４を読み出し、再生経過日数、累積再生時間、および再生重要度指数の値を更新する。
【００２９】
画像再生モードではなく撮影モードが選択された場合（ステップＳ１０７）、制御装置１０８は、メモリ１０３において、撮影した画像を書込み可能な領域があるか否かを判断する（ステップＳ１０８）。書込み可能な領域がない場合、制御装置１０８はメモリ１０３から全ての画像の画像再生情報を読み出し（ステップＳ１０９）、その中で最も再生重要度指数が小さい画像のインデックス情報を選択して削除する（ステップＳ１１０）。
【００３０】
図６は、図５の画像再生情報５０５の再生重要度指数が最も小さかった場合のメモリ状態を表している。図６に示すように、図５のインデックス情報５０２が削除され、領域６０１となる。この処理により、領域６０２および領域６０３のアドレスを示すインデックス情報がメモリ１０３に存在しないため、これらの領域は空き領域となる。
【００３１】
ステップＳ１０８〜Ｓ１１０の処理は、メモリ１０３に画像を書込み可能な領域が確保されるまで、繰り返し実行される。メモリ１０３に領域を確保できれば、ユーザーは撮影を実行できる（ステップＳ１１１）。撮影時には、レンズ１０１を介して受光した光が撮像素子１０２によって画像信号に変換され、撮像素子１０２から出力される画像がメモリ１０３に保存される（ステップＳ１１２）。ユーザーが撮像装置１００の電源を切る（Ｓ１１３）と、撮像装置１００は処理を終了する。
【００３２】
図７は、図６に示した状態において新たな画像情報がメモリ１０３に書き込まれた状態を示している。図７に示すように、新たなインデックス情報７０１が追加され、インデックス情報７０１が示す領域に新たな画像再生情報７０２と画像情報７０３がそれぞれ保存される。
【００３３】
上述したように、本実施形態によれば、ユーザーが筐体を把持していることが検出されたときの画像の再生状況（画像の再生時間等）に基づいて画像を選択し、選択した画像を削除することによって、ユーザーの嗜好に基づいて不要な画像を判別し、画像を削除することができる。また、ユーザーのお気に入りの画像を誤って削除することを防ぐことができる。
【００３４】
（第２の実施形態）
次に、本発明の第２の実施形態を説明する。本実施形態による撮像装置の構成は、第１の実施形態による撮像装置の構成（図１）と同様であるので、説明を省略する。
【００３５】
以下、本実施形態による撮像装置１００の動作を、撮影モードと画像再生モードの２つに分けて説明する。図８は、撮像装置１００の動作を示している。ユーザーが撮像装置１００の電源を投入すると、撮像装置１００は動作を開始する。ユーザーによって撮影モードが選択されて（ステップＳ２０７）、撮影が実行される（ステップＳ２１４）と、撮像装置１００は、レンズ１０１を介して撮像素子１０２に受光させ、撮像素子１０２から出力される画像信号をメモリ１０３に保存する（ステップＳ２１５）。この処理を繰り返すことで、撮影した画像がメモリ１０３に蓄積されていく。
【００３６】
撮影により画像がメモリ１０３に保存された状態で画像再生モードが選択された場合（ステップＳ２０１）、制御装置１０８は画像処理部１０４に命令を出力する。画像処理部１０４は、メモリ１０３に保存されている画像から、モニタ部１０６が表示する画像のサイズに加工した表示画像を作成し、メモリ１０３に保存する（ステップＳ２０２）。
【００３７】
続いて、制御装置１０８は表示制御部１０５に命令を出力する。表示制御部１０５は、ステップＳ２０２でメモリ１０３に保存された表示画像を読み出し、モニタ部１０６に出力する。モニタ部１０６は、再生された画像を表示する（ステップＳ２０３）。
【００３８】
ステップＳ２０３の処理時、閲覧検出部１０７は、ユーザーが撮像装置１００を把持していることを一定周期で検出する。手振れ量、撮像素子１０２の移動量、または筐体表面の圧力量が予め設定した閾値を超えた場合、閲覧検出部１０７は、ユーザーが撮像装置１００を把持していることを検出する。ユーザーが撮像装置１００を把持していることが検出されている期間において、制御装置１０８は時間（画像の再生時間）を計測する。
【００３９】
ステップＳ２０３の処理後、ユーザーが再生する画像を切り替えた場合（ステップＳ２０４）、制御装置１０８は再生時間の計測を終了すると共に画像に対応する画像再生情報をメモリ１０３から読み出し（ステップＳ２０５）、更新した新しい画像再生情報をメモリ１０３に保存する（ステップＳ２０６）。画像再生情報の内容は第１の実施形態と同様である。
【００４０】
図９はステップＳ２０６の処理後のメモリ配置を示している。図９に示すように、インデックス情報９０１〜９０３、画像再生情報９０４〜９０６、および画像情報９０７〜９０９がメモリ１０３に保存されている。メモリ１０３には、圧縮画像を保存するための圧縮画像領域と、非圧縮画像を保存するための非圧縮画像領域とが確保されている。画像情報９０７〜９０９は非圧縮画像であり、非圧縮画像領域に保存されている。画像情報９０７がモニタ部１０６に出力された後、再生する画像情報が画像情報９０７から別の画像情報に切り替わった場合、制御装置１０８はインデックス情報９０１から画像再生情報９０４を読み出し、再生経過日数、累積再生時間、および再生重要度指数の値を更新する。
【００４１】
画像再生モードではなく撮影モードが再び選択された場合（ステップＳ２０７）、制御装置１０８は、メモリ１０３において、撮影した画像を書込み可能な領域があるか否かを判断する（ステップＳ２０８）。書込み可能な領域がない場合、制御装置１０８はメモリ１０３から全ての非圧縮画像の画像再生情報を読み出し（ステップＳ２０９）、その中で最も再生重要度指数の値が小さい画像を選択して圧縮する（ステップＳ２１０）。
【００４２】
非可逆圧縮を用いて画像を圧縮すると画質が劣化する。そこで、本実施形態では、ユーザーのお気に入りの画像（再生重要度指数の値が大きい画像）は非圧縮画像のままでメモリ１０３に保存され、不要な画像（再生重要度指数の値が小さい画像）は、圧縮画像としてメモリ１０３に保存される。
【００４３】
図１０は、図９の画像再生情報９０５の再生重要度指数が最も小さかった場合のメモリ状態を示している。図１０では、図９の画像情報９０８を圧縮した情報が、圧縮画像領域に画像情報１００１として保存される。同時にインデックス情報９０２が画像情報１００１のアドレスを示す値に更新され、インデックス情報１００２として保存される。この処理により、領域１００３のアドレスを示すインデックス情報がメモリ１０３に存在しなくなるため、この領域は空き領域となる。
【００４４】
圧縮画像領域に十分な空き領域がなくなった場合（ステップＳ２１１）、制御装置１０８は、最も再生重要度指数が小さい画像情報を圧縮し、その画像情報が格納されていたメモリ１０３の領域を新たな圧縮画像領域として確保する（ステップＳ２１２，Ｓ２１３）。
【００４５】
図１１は、図１０に示したメモリ状態（圧縮画像領域に十分な空き領域がなくなった状態）において、新たな圧縮画像領域を確保した状態を示している。図１１では、図１０の画像情報１００４を圧縮した情報が画像情報１１０２として保存される。同時にインデックス情報１００５が画像情報１１０２のアドレスを示す値に更新され、インデックス情報１１０３として保存される。この処理により、領域１１０１のアドレスを示すインデックス情報がメモリ１０３に存在しなくなるため、領域１１０１が圧縮画像領域として確保される。この処理で圧縮対象となる画像は、非圧縮画像の中で最も再生重要度指数の小さい画像である。
【００４６】
ステップＳ２０８〜Ｓ２１３の処理は、メモリ１０３に画像を書込み可能な領域が確保されるまで、繰り返し実行される。メモリ１０３に領域を確保できれば、ユーザーは撮影を実行できる（ステップＳ２１４）。撮影時には、レンズ１０１を介して受光した光が撮像素子１０２によって画像信号に変換され、撮像素子１０２から出力される画像がメモリ１０３に保存される（ステップＳ２１５）。ユーザーが撮像装置１００の電源を切る（Ｓ２１６）と、撮像装置１００は処理を終了する。
【００４７】
図１２は、図１１に示したメモリ状態において、新たな画像情報が書き込まれた状態を示している。図１２では、新たなインデックス情報１２０１が追加され、空き領域に新たな画像再生情報１２０２、画像情報１２０３がそれぞれ保存される。
【００４８】
上述したように、本実施形態によれば、ユーザーが筐体を把持していることが検出されたときの画像の再生状況（画像の再生時間等）に基づいて画像を選択し、選択した画像を圧縮することによって、ユーザーの嗜好に基づいて不要な画像を判別し、画像を圧縮することができる。本実施形態では、ユーザーの嗜好を誤判定した場合でも、画像を削除した場合とは異なり、圧縮された画像が保存されているので、ユーザーが望めば圧縮画像を伸張することができる。
【００４９】
以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成は上記の実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【符号の説明】
【００５０】
１０１・・・レンズ、１０２・・・撮像素子、１０３・・・メモリ（記憶部）、１０４・・・画像処理部、１０５・・・表示制御部、１０６・・・モニタ部（表示部）、１０７・・・閲覧検出部（検出部）、１０８・・・制御装置（選択部、制御部）

【特許請求の範囲】
【請求項１】
画像を記憶する記憶部と、
前記画像を再生し表示する表示部と、
ユーザーが筐体を把持していることを検出する検出部と、
ユーザーが前記筐体を把持していることが検出されたときの前記画像の再生状況に基づいて前記画像を選択する選択部と、
前記選択部によって選択された前記画像を削除または圧縮する制御部と、
を有することを特徴とする画像表示装置。
【請求項２】
前記選択部は、最後に前記画像が再生されてから経過した時間と、ユーザーが前記筐体を把持していることが検出されている間に前記画像が再生された時間とに基づいて前記画像を選択することを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記検出部は、前記筐体の動きを検出することを特徴とする請求項１に記載の画像表示装置。
【請求項４】
前記検出部は、前記筐体に加えられる圧力を検出することを特徴とする請求項１に記載の画像表示装置。
【請求項５】
請求項１〜請求項４のいずれかに記載の画像表示装置と、
前記画像を生成する撮像素子と、
を有することを特徴とする撮像装置。

【図１】