情報処理装置及びその制御方法、並びにプログラム、撮像装置及び撮像システム
【課題】ライブ映像のピント合わせとフォーカス調整をより簡便に行うことができる情報処理装置を提供する。
【解決手段】撮像装置１５０と通信手段で接続される情報処理装置１００において、撮像装置１５０から画像データを取得する画像取得部１０と、撮像装置１５０を制御する遠隔撮影制御部８とを備える。また、画像データに基くライブ映像を表示する表示部４と、撮像装置１５０の状態情報を取得する状態取得部９とを備える。
【解決手段】撮像装置１５０と通信手段で接続される情報処理装置１００において、撮像装置１５０から画像データを取得する画像取得部１０と、撮像装置１５０を制御する遠隔撮影制御部８とを備える。また、画像データに基くライブ映像を表示する表示部４と、撮像装置１５０の状態情報を取得する状態取得部９とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及びその制御方法、並びにプログラム、撮像装置及び情報処理装置と撮像装置からなる撮像システムに関する。
【背景技術】
【０００２】
従来から、ＣＣＤセンサのような撮像素子から得られる映像情報をメモリカード等の記録媒体に静止画として記録するようにした電子カメラに代表される撮像装置と、パソコン等の情報処理装置からなる撮像システム（遠隔制御システム）が知られている。
【０００３】
この撮像システムにおいては、情報処理装置から撮像装置に対して制御コマンドを送信することで、情報処理装置から撮遠隔撮影を行うことができる。
【０００４】
上記撮像システムは、撮像装置内の記憶メディアの容量に左右されず、転送先の情報処理装置が有する大容量の外部記憶（記録）装置へ画像を転送するため、大量の撮影画像を記憶媒体の容量を気にせずに撮影することができる。
【０００５】
また、上記撮像システムは、撮像データの転送先として、情報処理装置上に有している外部記憶装置等を指定しておき、遠隔撮影後、生成された画像データを予め設定しておいた所望の保存先に転送格納することができる。
【０００６】
また、撮像装置においても、被写体のライブ映像を表示するいわゆるライブビュー表示を、例えば、液晶表示装置等に表示することが可能なものが知られている。
【０００７】
このような撮像装置において、ピント確認ボタンを備えて、このボタン押下により、所定の領域が拡大され、更に再度ピント確認ボタンを押下すると、より拡大されて表示される技術が提案されている（特許文献１参照）。
【０００８】
また、マニュアルフォーカスによるピント合わせを容易に行うことができるように、ピントを合わせる測距フレームでの合焦評価値の度合いによりライブ映像の拡大率を変化させる撮像装置が提案されている（特許文献２参照）。
【０００９】
一方、撮像装置からライブビュー画像を情報処理装置側に転送して、情報処理装置に接続される表示装置上に表示して、遠隔制御しながら、ライブ映像を確認できるような撮像システムも存在している。
【００１０】
このような撮像システムでは、情報処理装置側の操作系に拡大ボタン等のユーザーインターフェースがある。そして、ユーザー（操作者）が必要に応じて、ライブ映像の拡大をするために拡大ボタンを押下することで、撮像装置に拡大命令を送って、ピント合わせをしやすい表示状態に変更している。
【特許文献１】特開２００５−３９５７号公報
【特許文献２】特開２００８−７９１２４号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
しかしながら、特許文献１、２に記載されているような、撮像装置におけるライブ映像の表示部は、装置本体に備えられている比較的小さな液晶表示装置である。そのために、仮令、拡大したとしても、表示画素が少ないという問題から、ライブ映像全体として間引いた縮小画像を表示しているため、拡大するとぼやけてしまう等の弊害があった。
【００１２】
また、撮像システムにおいては、撮影画像の表示が情報処理装置に接続される別の表示装置で行われるので、上記の問題を回避することができる。しかし、ユーザーが自ら拡大したいという意図をもって情報処理装置上で遠隔操作をする必要があり、自動化がされておらず、ピント調整を意識した操作系になっていなかった。
【００１３】
本発明の目的は、ライブ映像のピント合わせとフォーカス調整をより簡便に行うことができる情報処理装置及びその制御方法、並びにプログラム、撮像装置及び撮像システムを提供することにある。
【課題を解決するための手段】
【００１４】
上記目的を達成するために、請求項１記載の情報処理装置は、撮像装置と通信手段で接続される情報処理装置において、前記撮像装置から画像データを取得する画像取得手段と、前記撮像装置を制御する遠隔制御手段と、前記画像データに基くライブ映像を表示する表示手段と、前記撮像装置の状態情報を取得する状態取得手段とを備えることを特徴とする。
【００１５】
請求項９記載の情報処理装置の制御方法は、通信手段で撮像装置と接続される情報処理装置の制御方法において、前記撮像装置から画像データを取得する画像取得ステップと、前記撮像装置を制御する遠隔制御ステップと、前記画像データに基くライブ映像を表示する表示ステップと、前記撮像装置の状態情報を取得する状態取得ステップとを備えることを特徴とする。
【００１６】
請求項１０記載のプログラムは、通信手段で撮像装置と接続される情報処理装置の制御方法をコンピュータに実行させるプログラムにおいて、前記情報処理装置の制御方法は、前記撮像装置から画像データを取得する画像取得ステップと、前記撮像装置を制御する遠隔制御ステップと、前記画像データに基くライブ映像を表示する表示ステップと、前記撮像装置の状態情報を取得する状態取得ステップとを備えることを特徴とする。
【００１７】
請求項１１記載の撮像装置は、情報処理装置と通信手段で接続される撮像装置において、前記情報処理装置の遠隔操作により要求される前記撮像装置の状態情報を通知する通知手段と、前記情報処理装置の遠隔操作により要求される画像データの領域のライブ映像の拡大処理を行う拡大処理手段とを備えることを特徴とする。
【００１８】
請求項１２記載の撮像システムは、請求項１記載の情報処理装置と請求項１１記載の撮像装置とから構成される。
【発明の効果】
【００１９】
本発明の情報処理装置によれば、ライブ映像のピント合わせとフォーカス調整をより簡便に行うことができる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明を図面を参照しながら詳細に説明する。
【００２１】
（第１の実施の形態）
図１は、本発明の第１の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【００２２】
図１に示す撮像システムは、デジタルカメラ等の電子カメラからなる撮像装置１５０と、撮像装置１５０と通信手段で論理接続される情報処理装置１００とを有して構成されている。尚、ここでいう論理接続とは、撮像装置１５０と外部制御装置である情報処理装置１００とを、例えば、ＩＥＥＥ１３９４やＵＳＢ２．０等の通信手段（通信回線）を介して双方向に接続することを意味する。
【００２３】
撮像装置１５０は、撮影レンズ１０１、撮像素子としてのＣＣＤ１０２、Ａ／Ｄ変換器１０３、メモリコントローラ１０４、撮影画像等を表示する表示部１０５、信号処理部（拡大処理手段）１１０、画像格納メモリ１１１、中央処理装置としてのカメラＣＰＵ１１２を備える。
【００２４】
また、撮像装置１５０は、圧縮伸張回路部１１３、操作部１１４、メモリカード１３０が着脱されるカードインターフェース（Ｉ／Ｆ）１１５、撮像装置１５０の動作を規定する制御プログラムを格納するカメラＲＯＭ１２０を備える。
【００２５】
図２（ａ）（ｂ）は、図１における撮影レンズ１０１の構成と表示部４のライブビュー表示を示す図である。
【００２６】
図２に示すように、撮影レンズ１０１においては、例として。固定レンズ２００と２２０、そして、倍率を変化させるための可動レンズ２１０、更に、焦点の調節を行うための可動レンズ２３０が構成されている。実際のピントの調整は、焦点調節用可動レンズ２３０を移動させることで行われる。
【００２７】
尚、図１、図２には示していないが、撮影レンズ１０１には、焦点を合わせるためにレンズユニットを駆動するための駆動ユニット、絞り羽を動作させるためのモータや、その制御を行うレンズＣＰＵが含まれている。
【００２８】
図１に戻り、情報処理装置１００は、中央処理装置としてのＣＰＵ２０、ＲＯＭ１、通信部２、ＲＡＭ３、ＣＲＴやＬＣＤディスプレイ等の表示部４、キーボードに代表される入力部５、プログラムや画像データ、各種の情報等を保存する外部記憶部６を備える。
【００２９】
また、情報処理装置１００において、ＣＰＵ２０とＲＡＭ３に展開される制御プログラムから、通信処理部７、遠隔撮影制御部８及び状態取得部（設定取得部）９、そして画像取得部１０が構成される。
【００３０】
つまり、情報処理装置１００の画像取得部１０、状態取得部９、遠隔撮影を行い制御するための遠隔撮影制御部８及び通信処理部７が、情報処理装置１００のＲＡＭ３で動作しており、状態取得部９により、撮像装置１５０の現在の撮影設定状態（状態情報）を取得する。
【００３１】
この状態取得部９により取得された撮像装置１５０の撮影設定に係る状態情報は、例えば、外部記憶部６に保存される。そして、遠隔撮影制御部８及び通信処理部７、画像取得部１０により、新しい状態情報を撮像装置１５０に対して送信する。これにより、撮影装置１００の設定の変更を行い、その設定で撮影した画像に係る画像データを情報処理装置１００の外部記憶部６に取り込むことができる。
【００３２】
更に、撮像装置１５０のカメラＲＯＭ１２０は、カメラＣＰＵ１１２がその制御プログラムを実行することにより、情報処理装置１００との通信を司る通信部１２１と、撮像装置１５０の制御を行う制御部１２２とで構成される。この制御部１２２による制御により、実際の撮像（撮影）動作が行われている。
【００３３】
撮像装置１５０と情報処理装置１００との組み合わせによる撮像システムにおいて、ライブ映像表示が行うことができる。尚、ライブビュー表示（ライブ映像表示）を行うには、通常は、以下のような動作制御を行う。
【００３４】
即ち、レンズ１０１を通して到達した撮影光束がＣＣＤ１０２に到達し、所定のフレームレート（１秒間の撮影画像数）での撮影でＣＣＤ１０２が取得した画像データが、連続的にＡ／Ｄ変換器１０３、信号処理部１１０等の映像化に必要な処理ブロックを通る。
【００３５】
そして、その画像データが、動画像として、撮像装置１５０の通信部１２１、情報処理装置１００の通信部２を連続的に経由して、情報処理装置１００内の表示部４に表示される。
【００３６】
こうして、ユーザーは、撮像装置１５０のファインダあるいは、背面等に装備される表示部１０５を覗かなくても、遠隔制御している情報処理装置１００上で、そのライブ映像を確認することができる。
【００３７】
更に、第１の実施の形態において、情報処理装置１００は、撮像装置１５０に対して、ライブ映像の送信中に、撮像装置１５０の作動状態として、撮影レンズ１０１の駆動量の大きさを一定時間毎に通知するよう指示する。あるいは、一定時間毎でなくて、駆動量が変化したらでもよいし、あるいは一定量以下になったら、通知するように指示してもよい。
【００３８】
これにより、情報処理装置１００が受信しているライブ映像のフォーカス調整状態が、ピントが合いつつある状態なのか、あるいは撮影レンズ１０１を大きく移動させている最中で、まったくピントがまだ合っていない状態なのか、把握することができる。
【００３９】
ピントが合いつつあれば、情報処理装置１００は、撮像装置１５０に対して、全体表示でライブ映像を送信するのではなく、ある所定の倍率で拡大した画像を送信するように指示する。これにより、撮像装置１５０から拡大されたライブ映像を受信し、この拡大ライブ映像を表示することにより、更にピントを確認しやすくなる。
【００４０】
このとき、ＡＦセンサ（オートフォーカスセンサ）が作動している領域を中心に拡大してもよいし、ライブ映像中に人物が撮影されているのであれば、その認識した人物像を中心に拡大してもよい。
【００４１】
そして、更に、撮影レンズ１０１の駆動量が小さくなれば、そのライブ映像はピントがあっている状態にまで、フォーカスの調整が済みつつある。そこで、情報処理装置１００は、最大倍率で拡大するように撮像装置１５０に対して、拡大命令を発行する。
【００４２】
これにより、レンズ駆動量というトリガでもって、ピント調整において情報処理装置１００が適切な表示倍率を選択して、撮像装置１５０に対してライブ映像の拡大指示を出すことで、ユーザーの手間を煩わすことなく、簡便にピントを確認し調整することができる。
【００４３】
（第１の動作例）
図３は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第１の動作例の手順を示すフローチャートである。
【００４４】
本処理は、情報処理装置１００のＣＰＵ２０の制御の下に実行される。
【００４５】
まず、ステップＳ３０１において、情報処理装置１００（のＣＰＵ２０）は、撮像装置１５０にライブ映像の送信を要求し、撮像装置１５０から送られてくるライブ映像の、情報処理装置１００の表示部４におけるライブビュー表示を開始する。
【００４６】
ステップＳ３０２において、情報処理装置１００は、撮像装置１５０のフォーカス調整情報として、レンズ駆動量を通知するように、その通知命令を発行する。これにより、逐次、撮影レンズ１０１がピントを合わせようとして移動するたびに、どの程度の移動を行ったかが情報処理装置１００に通知される。
【００４７】
ステップＳ３０３において、情報処理装置１００は、撮像装置１５０からライブ映像を受信する。
【００４８】
ここで、撮像装置１５０からレンズ駆動量の受信があれば（ステップＳ３０４）、更に、その通知された駆動量に応じて、処理が分岐される。
【００４９】
本動作例においては、駆動量の大きさを３つに区分して、駆動量少（移動区分Ａ）、駆動量中（移動区分Ｂ）、そして移動量大（移動区分Ｃ）としている。
【００５０】
ステップＳ３０５において、移動区分Ａにあるときは、ほとんど、撮影レンズ１０１の駆動量がない、つまり、ピントが合いつつあるということで、情報処理装置１００は、ライブ映像の１０倍拡大命令を撮像装置１００に発行する（ステップＳ３０６）。
【００５１】
また、ステップＳ３０７において、移動区分Ｂにあるときは、情報処理装置１００は、５倍拡大命令を撮像装置１５０に発行する（ステップＳ３０８）。
【００５２】
移動区分ＡでもＢでもない、つまりＣ区分（移動量大）の場合は、フォーカスを合わせるために、大きく撮影レンズ１０１が移動中ということで、情報処理装置１００は、撮像装置１５０に全体表示命令を発行する（ステップＳ３０９）。
【００５３】
そして、処理はステップＳ３０３に戻り、情報処理装置１００は、撮像装置１５０から送信される指定された倍率に変倍されたライブ映像を表示することになる。
【００５４】
これらの一連の動作の例を前述した図２に示す。
【００５５】
図２においては、焦点調節用の可動レンズ２３０の位置の変化に応じて、情報処理装置１００上のライブビュー表示画面が変化している様子を図示している。
【００５６】
つまり、（ａ）に示すように、可動レンズ２３０がピントを合わせるために、レンズ初期位置Ｌ０からＬ１に大きく移動している場合（つまり駆動量はＬ１−Ｌ０で、区分Ｃ）は、以下の表示となる。即ち、表示部４のライブビュー表示画面に表示されるライブ映像は全体表示になる。
【００５７】
そして、（ｂ）に示すように、ピントがあってきて、可動レンズ２３０の移動量が徐々に少なくなり、Ｌ１からＬ２に入る（駆動量はＬ２−Ｌ１で区分Ｂ）と、ライブビュー表示画面に表示されるライブ映像は５倍拡大モードに移行する。更に、駆動量が小さくなり、区分Ａに入れば、１０倍拡大モードに遷移する。
【００５８】
このように、撮影レンズ１０１の駆動量に応じて、ライブ映像の拡大率が変化することで、フォーカスの調整状態に応じて、画面表示が切り替わり、ピントの状態を確認しやすくなる。
【００５９】
本動作例においては、適宜、駆動量が変化するたびに、通知するように設定したが、区分Ａ、Ｂ、Ｃのいずれかの領域に相当する駆動量範囲に移動した場合にのみ、通知するように指示してもよい。
【００６０】
また、拡大表示する領域は、撮像装置１５０が焦点を合わせているオートフォーカスフレームを中心に拡大するが、ライブ映像に主被写体として人物が撮影されている場合は、人物の顔認識を同時に行い、主被写体の人物の顔を中心に拡大してもよい。
【００６１】
また、拡大表示後の領域が全体画面のどの部分かを別画面に表示して、ユーザーが自在に領域を指定できるような形態も考えられる。
【００６２】
（第２の動作例）
次に、ライブ映像表示処理の第２の動作例について説明する。
【００６３】
第１の動作例においては、フォーカス調整情報として、撮影レンズ１０１の駆動量情報を取り上げた。第２の動作例においては、ＡＦセンサの評価値出力情報を通知させて、実際にオートフォーカスがどの程度作動しているかを確認してライブ映像の倍率を変化させようというものである。
【００６４】
図４は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第２の動作例の手順を示すフローチャートである。また、図５は、図１の撮像システムの合焦評価値と撮影レンズ１０１の位置の関係を示す図である。即ち、ＡＦセンサの評価値出力が、ピントの調節度合いにどのような変化をするか一般的な出力例を示す図である。
【００６５】
図５において、撮影レンズ１０１が駆動命令を受けて移動を始めると、合焦の度合い、つまりピントの合い具合を示すＡＦセンサの出力が変化する。横軸は撮影レンズ１０１の移動量を示している。ピントが合い始めると、その評価出力値は、急激に上昇して、焦点が合った位置を境に、評価値は減少し始める。
【００６６】
そこで、第２の動作例では、ＡＦセンサの予めわかっている特性出力を、ＡＦ１未満、ＡＦ１以上、最大値（ＡＦピーク）に分けて、それぞれを検出した場合に、情報処理装置１００に送信するように設定し、以下のように制御する。
【００６７】
以下、図４のフローチャートを説明する。
【００６８】
まず、ステップＳ４０１において、情報処理装置１００は、ライブ映像の送信を要求し、撮像装置１５０から送られてくるライブ映像の表示部４におけるライブビュー表示を開始する。
【００６９】
ステップＳ４０２において、情報処理装置１００は、撮像装置１５０のフォーカス調整情報（状態情報）として、ＡＦ評価値出力の指示命令を発行する。これにより撮影レンズ１０１が駆動され、ＡＦセンサの評価値出力が変化していくたびに、その評価値が、撮像装置１５０から情報処理装置１００に送信される。
【００７０】
ステップＳ４０３において、情報処理装置１００は、撮像装置１５０からライブ映像を受信する。
【００７１】
ステップＳ４０４において、情報処理装置１００は、ＡＦセンサの評価値の出力を受信すると、出力区分により処理が以下のように分岐する。
【００７２】
ステップＳ４０５において、評価値がＡＦ１未満であれば、情報処理装置１００は、ＡＦを合わせるために急激に評価値が変わっているものと判断して、全体表示を行う（ステップＳ４０６）。
【００７３】
ステップＳ４０７において、情報処理装置１００は、撮像装置１５０がＡＦピークを検出しているかどうかを判断する。そうであれば、ステップＳ４０８において、情報処理装置１００は、使用しているＡＦフレームを中心として表示領域を１０倍に拡大する。そうでないならば、ステップＳ４０９において、情報処理装置１００は、表示領域を５倍に拡大する。
【００７４】
更に、ＡＦ１未満の出力に戻ったら、再度全体表示に戻るような構成にすれば、より拡大、全体表示の自動切り替えの利便性が高くなる。
【００７５】
また、使用している撮影レンズ１０１の種類によって、そのＡＦ評価値出力カーブは変化するので、レンズ毎にＡＦ１の設定が変更できるようにしてもよい。
【００７６】
第２の動作例の場合も、ピントの合い具合を示すＡＦセンサ評価値の出力に応じて、ライブ映像の拡大率が自動的に変化することで、画面表示が切り替わり、ピントの微調整をしやすくできる。
【００７７】
（第３の動作例）
次に、ライブ映像表示処理の第３の動作例について説明する。
【００７８】
前述の２つの動作例は、撮影レンズ１０１の駆動量の値と、ＡＦセンサの評価値に応じて、ライブ映像表示の内容を変更させたものであった。
【００７９】
第３の動作例においては、手ぶれ補正機構の動作を検出するものである。
【００８０】
即ち、手ぶれ補正機構が動作している場合は、画像の上下、あるいは左右の手ぶれによる振動が減少している状態にあるので、ライブ映像の表示は、注視しても、画像のゆれがなく、じっくりとピントを調整するような状態になっている。そこで、このときに、自動的に拡大してライブ映像をより見やすくするものである。
【００８１】
図６は、図１における情報処理装置１００の表示部４に表示されるライブ映像のイメージを示す図である。
【００８２】
図６（ａ）に示すように、手ぶれ補正装置がオフの状態では、ライブ映像は上下左右に細かい手ぶれによる振動が見受けられる。このとき、手ぶれ補正装置の動作がオン状態になると、この上下左右の微細振動が補正されて、ライブ映像は安定した状態で表示されるようになる。
【００８３】
ここで、情報処理装置１００は、予め設定されている拡大率でライブ映像の送信を、撮像装置１５０に命令し、（ｂ）に示すように、この拡大されたライブ映像を、表示部４に表示する。これにより、ピントの調整が容易に行えるようになる。
【００８４】
手ぶれ補正装置には、レンズユニット内に備えるものや、撮像装置本体内に備えられて、撮像センサであるＣＣＤ自体の位置を補正するもの等、いくつかのタイプがあるが、いずれのものも適用することができる。
【００８５】
図７は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第３の動作例の手順を示すフローチャートである。
【００８６】
まず、ステップＳ７０１において、情報処理装置１００は、ライブビューの表示を開始する。
【００８７】
ステップＳ７０２において、情報処理装置１００は、撮像装置１５０に対して、手ぶれ補正装置の状態（オンかオフか）を通知するよう命令を発行する。
【００８８】
ステップＳ７０３において、情報処理装置１００は、撮像装置１５０からのライブ映像の受信を行い、これを表示部４に表示する。
【００８９】
ステップＳ７０４において、情報処理装置１００は、手ぶれ補正装置の状態通知を撮像装置１５０から受信した場合は、次のステップＳ７０５において、手ぶれ補正装置がオンの状態なのかどうかを判断する。
【００９０】
手ぶれ補正装置がオン状態であれば、ステップＳ７０６において、情報処理装置１００は、予め設定してあるＮ倍の拡大表示命令を撮像装置１５０に対して発行する。これは、ユーザーの選択可能な初期設定値として、ＡＦフレームを中心とした領域に対して倍率選択できるようになっていてもよい。例えば、手ぶれ補正装置が作動開始したら、Ｎ=５として、通常の５倍拡大モードに移行する。
【００９１】
手ぶれ補正装置がオフ状態であれば、ステップＳ７０７において、情報処理装置１００は、Ｎ=１である全体表示命令を撮像装置１５０に対して発行して、再度、フレーミングを確認しやすいように全体表示を行う。
【００９２】
このように、手ぶれ補正装置の動作状況を鑑みて、ライブ映像の詳細な確認がしやすい状況になったところで、拡大率を変化させるので、ピントの状態を容易に確認することができる。
【００９３】
（第２の実施の形態）
図８は、本発明の第２の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【００９４】
第２の実施の形態のシステム構成は、図１に準じているが、情報処理装置１００において、更に、情報処理装置１００から撮像装置１５０の撮影レンズ１０１を駆動するためのユーザーインターフェースを持つフォーカス調整部１１を備えている。
【００９５】
本実施の形態は、撮像装置１５０の状態情報として、オートフォーカスモードなのか、マニュアルフォーカスモードなのかを示す情報を利用する。
【００９６】
特に、マニュアルフォーカスモードに設定された場合には、撮像装置１５０において、撮影レンズ１０１のフォーカス調整のためのレンズ駆動制御はしないので、情報処理装置１００から撮影レンズ１０１の移動命令を発行する必要がある。
【００９７】
第２の実施の形態によれば、マニュアルモードを検出すると、自動的に、フォーカス調整部１１に用意されるフォーカス調整画面をライブビュー画面が表示されている画面に加えて、同時に使用できるように表示する。こうして、情報処理装置１００から撮影レンズ１０１を駆動する。
【００９８】
図９は、図８の撮像システムの動作概略と表示画面の例を示す図である。
【００９９】
図９に示すように、撮影レンズ１０１の駆動量が大（＜＜＜または＞＞＞）、中（＜＜または＞＞）、少（＜または＞）の３段階で用意され、そのボタンの種類によって撮影レンズ１０１の移動量を変化させることができる。
【０１００】
これによって、即座に、撮影レンズ１０１の位置制御に入ることができ、かつ、調整状態が進めば、自動的に適切な拡大表示へとライブ映像の表示も変化する。ユーザーが自らの操作で、調整画面を表示したり、拡大ボタンを押下する必要がないというメリットがある。
【０１０１】
尚、ボタンの種類に応じて、表示領域の倍率指定を変化させてもよい。例えば、レンズ移動量大のボタンの押下の場合は、全体表示、中の場合は、５倍拡大、少の場合は、１０倍拡大のように、設定しておいてもよい。
【０１０２】
また、本発明の目的は、以下の処理を実行することによっても達成される。即ち、上述した実施の形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムまたは装置に供給し、そのシステムまたは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出す処理である。
【０１０３】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０１０４】
また、プログラムコードを供給するための記憶媒体としては、次のものを用いることができる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等である。または、プログラムコードをネットワークを介してダウンロードしてもよい。
【０１０５】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現される場合も本発明に含まれる。加えて、そのプログラムコードの指示に基き、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれる。
【０１０６】
更に、上述した実施の形態の機能が以下の処理によって実現される場合も本発明に含まれる。即ち、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基き、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う場合である。
【図面の簡単な説明】
【０１０７】
【図１】本発明の第１の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【図２】図１における撮影レンズ１０１の構成と表示部４のライブビュー表示を示す図である。
【図３】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第１の動作例の手順を示すフローチャートである。
【図４】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第２の動作例の手順を示すフローチャートである。
【図５】図１の撮像システムの合焦評価値と撮影レンズ１０１の位置の関係を示す図である。
【図６】図１における情報処理装置１００の表示部４に表示されるライブ映像のイメージを示す図である。
【図７】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第３の動作例の手順を示すフローチャートである。
【図８】本発明の第２の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【図９】図８の撮像システムの動作概略と表示画面の例を示す図である。
【符号の説明】
【０１０８】
１ ＲＯＭ
２ 通信部
３ ＲＡＭ
４ 表示部
５ 入力部
６ 外部記憶部
７ 通信処理部
８ 遠隔撮影制御部
９ 状態取得部
１０ 画像取得部
１１ フォーカス調整部
２０ ＣＰＵ
１００ 情報処理装置
１１０ 信号処理部
１１２ カメラＣＰＵ
１２２ 制御部
１５０ 撮像装置
【技術分野】
【０００１】
本発明は、情報処理装置及びその制御方法、並びにプログラム、撮像装置及び情報処理装置と撮像装置からなる撮像システムに関する。
【背景技術】
【０００２】
従来から、ＣＣＤセンサのような撮像素子から得られる映像情報をメモリカード等の記録媒体に静止画として記録するようにした電子カメラに代表される撮像装置と、パソコン等の情報処理装置からなる撮像システム（遠隔制御システム）が知られている。
【０００３】
この撮像システムにおいては、情報処理装置から撮像装置に対して制御コマンドを送信することで、情報処理装置から撮遠隔撮影を行うことができる。
【０００４】
上記撮像システムは、撮像装置内の記憶メディアの容量に左右されず、転送先の情報処理装置が有する大容量の外部記憶（記録）装置へ画像を転送するため、大量の撮影画像を記憶媒体の容量を気にせずに撮影することができる。
【０００５】
また、上記撮像システムは、撮像データの転送先として、情報処理装置上に有している外部記憶装置等を指定しておき、遠隔撮影後、生成された画像データを予め設定しておいた所望の保存先に転送格納することができる。
【０００６】
また、撮像装置においても、被写体のライブ映像を表示するいわゆるライブビュー表示を、例えば、液晶表示装置等に表示することが可能なものが知られている。
【０００７】
このような撮像装置において、ピント確認ボタンを備えて、このボタン押下により、所定の領域が拡大され、更に再度ピント確認ボタンを押下すると、より拡大されて表示される技術が提案されている（特許文献１参照）。
【０００８】
また、マニュアルフォーカスによるピント合わせを容易に行うことができるように、ピントを合わせる測距フレームでの合焦評価値の度合いによりライブ映像の拡大率を変化させる撮像装置が提案されている（特許文献２参照）。
【０００９】
一方、撮像装置からライブビュー画像を情報処理装置側に転送して、情報処理装置に接続される表示装置上に表示して、遠隔制御しながら、ライブ映像を確認できるような撮像システムも存在している。
【００１０】
このような撮像システムでは、情報処理装置側の操作系に拡大ボタン等のユーザーインターフェースがある。そして、ユーザー（操作者）が必要に応じて、ライブ映像の拡大をするために拡大ボタンを押下することで、撮像装置に拡大命令を送って、ピント合わせをしやすい表示状態に変更している。
【特許文献１】特開２００５−３９５７号公報
【特許文献２】特開２００８−７９１２４号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
しかしながら、特許文献１、２に記載されているような、撮像装置におけるライブ映像の表示部は、装置本体に備えられている比較的小さな液晶表示装置である。そのために、仮令、拡大したとしても、表示画素が少ないという問題から、ライブ映像全体として間引いた縮小画像を表示しているため、拡大するとぼやけてしまう等の弊害があった。
【００１２】
また、撮像システムにおいては、撮影画像の表示が情報処理装置に接続される別の表示装置で行われるので、上記の問題を回避することができる。しかし、ユーザーが自ら拡大したいという意図をもって情報処理装置上で遠隔操作をする必要があり、自動化がされておらず、ピント調整を意識した操作系になっていなかった。
【００１３】
本発明の目的は、ライブ映像のピント合わせとフォーカス調整をより簡便に行うことができる情報処理装置及びその制御方法、並びにプログラム、撮像装置及び撮像システムを提供することにある。
【課題を解決するための手段】
【００１４】
上記目的を達成するために、請求項１記載の情報処理装置は、撮像装置と通信手段で接続される情報処理装置において、前記撮像装置から画像データを取得する画像取得手段と、前記撮像装置を制御する遠隔制御手段と、前記画像データに基くライブ映像を表示する表示手段と、前記撮像装置の状態情報を取得する状態取得手段とを備えることを特徴とする。
【００１５】
請求項９記載の情報処理装置の制御方法は、通信手段で撮像装置と接続される情報処理装置の制御方法において、前記撮像装置から画像データを取得する画像取得ステップと、前記撮像装置を制御する遠隔制御ステップと、前記画像データに基くライブ映像を表示する表示ステップと、前記撮像装置の状態情報を取得する状態取得ステップとを備えることを特徴とする。
【００１６】
請求項１０記載のプログラムは、通信手段で撮像装置と接続される情報処理装置の制御方法をコンピュータに実行させるプログラムにおいて、前記情報処理装置の制御方法は、前記撮像装置から画像データを取得する画像取得ステップと、前記撮像装置を制御する遠隔制御ステップと、前記画像データに基くライブ映像を表示する表示ステップと、前記撮像装置の状態情報を取得する状態取得ステップとを備えることを特徴とする。
【００１７】
請求項１１記載の撮像装置は、情報処理装置と通信手段で接続される撮像装置において、前記情報処理装置の遠隔操作により要求される前記撮像装置の状態情報を通知する通知手段と、前記情報処理装置の遠隔操作により要求される画像データの領域のライブ映像の拡大処理を行う拡大処理手段とを備えることを特徴とする。
【００１８】
請求項１２記載の撮像システムは、請求項１記載の情報処理装置と請求項１１記載の撮像装置とから構成される。
【発明の効果】
【００１９】
本発明の情報処理装置によれば、ライブ映像のピント合わせとフォーカス調整をより簡便に行うことができる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明を図面を参照しながら詳細に説明する。
【００２１】
（第１の実施の形態）
図１は、本発明の第１の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【００２２】
図１に示す撮像システムは、デジタルカメラ等の電子カメラからなる撮像装置１５０と、撮像装置１５０と通信手段で論理接続される情報処理装置１００とを有して構成されている。尚、ここでいう論理接続とは、撮像装置１５０と外部制御装置である情報処理装置１００とを、例えば、ＩＥＥＥ１３９４やＵＳＢ２．０等の通信手段（通信回線）を介して双方向に接続することを意味する。
【００２３】
撮像装置１５０は、撮影レンズ１０１、撮像素子としてのＣＣＤ１０２、Ａ／Ｄ変換器１０３、メモリコントローラ１０４、撮影画像等を表示する表示部１０５、信号処理部（拡大処理手段）１１０、画像格納メモリ１１１、中央処理装置としてのカメラＣＰＵ１１２を備える。
【００２４】
また、撮像装置１５０は、圧縮伸張回路部１１３、操作部１１４、メモリカード１３０が着脱されるカードインターフェース（Ｉ／Ｆ）１１５、撮像装置１５０の動作を規定する制御プログラムを格納するカメラＲＯＭ１２０を備える。
【００２５】
図２（ａ）（ｂ）は、図１における撮影レンズ１０１の構成と表示部４のライブビュー表示を示す図である。
【００２６】
図２に示すように、撮影レンズ１０１においては、例として。固定レンズ２００と２２０、そして、倍率を変化させるための可動レンズ２１０、更に、焦点の調節を行うための可動レンズ２３０が構成されている。実際のピントの調整は、焦点調節用可動レンズ２３０を移動させることで行われる。
【００２７】
尚、図１、図２には示していないが、撮影レンズ１０１には、焦点を合わせるためにレンズユニットを駆動するための駆動ユニット、絞り羽を動作させるためのモータや、その制御を行うレンズＣＰＵが含まれている。
【００２８】
図１に戻り、情報処理装置１００は、中央処理装置としてのＣＰＵ２０、ＲＯＭ１、通信部２、ＲＡＭ３、ＣＲＴやＬＣＤディスプレイ等の表示部４、キーボードに代表される入力部５、プログラムや画像データ、各種の情報等を保存する外部記憶部６を備える。
【００２９】
また、情報処理装置１００において、ＣＰＵ２０とＲＡＭ３に展開される制御プログラムから、通信処理部７、遠隔撮影制御部８及び状態取得部（設定取得部）９、そして画像取得部１０が構成される。
【００３０】
つまり、情報処理装置１００の画像取得部１０、状態取得部９、遠隔撮影を行い制御するための遠隔撮影制御部８及び通信処理部７が、情報処理装置１００のＲＡＭ３で動作しており、状態取得部９により、撮像装置１５０の現在の撮影設定状態（状態情報）を取得する。
【００３１】
この状態取得部９により取得された撮像装置１５０の撮影設定に係る状態情報は、例えば、外部記憶部６に保存される。そして、遠隔撮影制御部８及び通信処理部７、画像取得部１０により、新しい状態情報を撮像装置１５０に対して送信する。これにより、撮影装置１００の設定の変更を行い、その設定で撮影した画像に係る画像データを情報処理装置１００の外部記憶部６に取り込むことができる。
【００３２】
更に、撮像装置１５０のカメラＲＯＭ１２０は、カメラＣＰＵ１１２がその制御プログラムを実行することにより、情報処理装置１００との通信を司る通信部１２１と、撮像装置１５０の制御を行う制御部１２２とで構成される。この制御部１２２による制御により、実際の撮像（撮影）動作が行われている。
【００３３】
撮像装置１５０と情報処理装置１００との組み合わせによる撮像システムにおいて、ライブ映像表示が行うことができる。尚、ライブビュー表示（ライブ映像表示）を行うには、通常は、以下のような動作制御を行う。
【００３４】
即ち、レンズ１０１を通して到達した撮影光束がＣＣＤ１０２に到達し、所定のフレームレート（１秒間の撮影画像数）での撮影でＣＣＤ１０２が取得した画像データが、連続的にＡ／Ｄ変換器１０３、信号処理部１１０等の映像化に必要な処理ブロックを通る。
【００３５】
そして、その画像データが、動画像として、撮像装置１５０の通信部１２１、情報処理装置１００の通信部２を連続的に経由して、情報処理装置１００内の表示部４に表示される。
【００３６】
こうして、ユーザーは、撮像装置１５０のファインダあるいは、背面等に装備される表示部１０５を覗かなくても、遠隔制御している情報処理装置１００上で、そのライブ映像を確認することができる。
【００３７】
更に、第１の実施の形態において、情報処理装置１００は、撮像装置１５０に対して、ライブ映像の送信中に、撮像装置１５０の作動状態として、撮影レンズ１０１の駆動量の大きさを一定時間毎に通知するよう指示する。あるいは、一定時間毎でなくて、駆動量が変化したらでもよいし、あるいは一定量以下になったら、通知するように指示してもよい。
【００３８】
これにより、情報処理装置１００が受信しているライブ映像のフォーカス調整状態が、ピントが合いつつある状態なのか、あるいは撮影レンズ１０１を大きく移動させている最中で、まったくピントがまだ合っていない状態なのか、把握することができる。
【００３９】
ピントが合いつつあれば、情報処理装置１００は、撮像装置１５０に対して、全体表示でライブ映像を送信するのではなく、ある所定の倍率で拡大した画像を送信するように指示する。これにより、撮像装置１５０から拡大されたライブ映像を受信し、この拡大ライブ映像を表示することにより、更にピントを確認しやすくなる。
【００４０】
このとき、ＡＦセンサ（オートフォーカスセンサ）が作動している領域を中心に拡大してもよいし、ライブ映像中に人物が撮影されているのであれば、その認識した人物像を中心に拡大してもよい。
【００４１】
そして、更に、撮影レンズ１０１の駆動量が小さくなれば、そのライブ映像はピントがあっている状態にまで、フォーカスの調整が済みつつある。そこで、情報処理装置１００は、最大倍率で拡大するように撮像装置１５０に対して、拡大命令を発行する。
【００４２】
これにより、レンズ駆動量というトリガでもって、ピント調整において情報処理装置１００が適切な表示倍率を選択して、撮像装置１５０に対してライブ映像の拡大指示を出すことで、ユーザーの手間を煩わすことなく、簡便にピントを確認し調整することができる。
【００４３】
（第１の動作例）
図３は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第１の動作例の手順を示すフローチャートである。
【００４４】
本処理は、情報処理装置１００のＣＰＵ２０の制御の下に実行される。
【００４５】
まず、ステップＳ３０１において、情報処理装置１００（のＣＰＵ２０）は、撮像装置１５０にライブ映像の送信を要求し、撮像装置１５０から送られてくるライブ映像の、情報処理装置１００の表示部４におけるライブビュー表示を開始する。
【００４６】
ステップＳ３０２において、情報処理装置１００は、撮像装置１５０のフォーカス調整情報として、レンズ駆動量を通知するように、その通知命令を発行する。これにより、逐次、撮影レンズ１０１がピントを合わせようとして移動するたびに、どの程度の移動を行ったかが情報処理装置１００に通知される。
【００４７】
ステップＳ３０３において、情報処理装置１００は、撮像装置１５０からライブ映像を受信する。
【００４８】
ここで、撮像装置１５０からレンズ駆動量の受信があれば（ステップＳ３０４）、更に、その通知された駆動量に応じて、処理が分岐される。
【００４９】
本動作例においては、駆動量の大きさを３つに区分して、駆動量少（移動区分Ａ）、駆動量中（移動区分Ｂ）、そして移動量大（移動区分Ｃ）としている。
【００５０】
ステップＳ３０５において、移動区分Ａにあるときは、ほとんど、撮影レンズ１０１の駆動量がない、つまり、ピントが合いつつあるということで、情報処理装置１００は、ライブ映像の１０倍拡大命令を撮像装置１００に発行する（ステップＳ３０６）。
【００５１】
また、ステップＳ３０７において、移動区分Ｂにあるときは、情報処理装置１００は、５倍拡大命令を撮像装置１５０に発行する（ステップＳ３０８）。
【００５２】
移動区分ＡでもＢでもない、つまりＣ区分（移動量大）の場合は、フォーカスを合わせるために、大きく撮影レンズ１０１が移動中ということで、情報処理装置１００は、撮像装置１５０に全体表示命令を発行する（ステップＳ３０９）。
【００５３】
そして、処理はステップＳ３０３に戻り、情報処理装置１００は、撮像装置１５０から送信される指定された倍率に変倍されたライブ映像を表示することになる。
【００５４】
これらの一連の動作の例を前述した図２に示す。
【００５５】
図２においては、焦点調節用の可動レンズ２３０の位置の変化に応じて、情報処理装置１００上のライブビュー表示画面が変化している様子を図示している。
【００５６】
つまり、（ａ）に示すように、可動レンズ２３０がピントを合わせるために、レンズ初期位置Ｌ０からＬ１に大きく移動している場合（つまり駆動量はＬ１−Ｌ０で、区分Ｃ）は、以下の表示となる。即ち、表示部４のライブビュー表示画面に表示されるライブ映像は全体表示になる。
【００５７】
そして、（ｂ）に示すように、ピントがあってきて、可動レンズ２３０の移動量が徐々に少なくなり、Ｌ１からＬ２に入る（駆動量はＬ２−Ｌ１で区分Ｂ）と、ライブビュー表示画面に表示されるライブ映像は５倍拡大モードに移行する。更に、駆動量が小さくなり、区分Ａに入れば、１０倍拡大モードに遷移する。
【００５８】
このように、撮影レンズ１０１の駆動量に応じて、ライブ映像の拡大率が変化することで、フォーカスの調整状態に応じて、画面表示が切り替わり、ピントの状態を確認しやすくなる。
【００５９】
本動作例においては、適宜、駆動量が変化するたびに、通知するように設定したが、区分Ａ、Ｂ、Ｃのいずれかの領域に相当する駆動量範囲に移動した場合にのみ、通知するように指示してもよい。
【００６０】
また、拡大表示する領域は、撮像装置１５０が焦点を合わせているオートフォーカスフレームを中心に拡大するが、ライブ映像に主被写体として人物が撮影されている場合は、人物の顔認識を同時に行い、主被写体の人物の顔を中心に拡大してもよい。
【００６１】
また、拡大表示後の領域が全体画面のどの部分かを別画面に表示して、ユーザーが自在に領域を指定できるような形態も考えられる。
【００６２】
（第２の動作例）
次に、ライブ映像表示処理の第２の動作例について説明する。
【００６３】
第１の動作例においては、フォーカス調整情報として、撮影レンズ１０１の駆動量情報を取り上げた。第２の動作例においては、ＡＦセンサの評価値出力情報を通知させて、実際にオートフォーカスがどの程度作動しているかを確認してライブ映像の倍率を変化させようというものである。
【００６４】
図４は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第２の動作例の手順を示すフローチャートである。また、図５は、図１の撮像システムの合焦評価値と撮影レンズ１０１の位置の関係を示す図である。即ち、ＡＦセンサの評価値出力が、ピントの調節度合いにどのような変化をするか一般的な出力例を示す図である。
【００６５】
図５において、撮影レンズ１０１が駆動命令を受けて移動を始めると、合焦の度合い、つまりピントの合い具合を示すＡＦセンサの出力が変化する。横軸は撮影レンズ１０１の移動量を示している。ピントが合い始めると、その評価出力値は、急激に上昇して、焦点が合った位置を境に、評価値は減少し始める。
【００６６】
そこで、第２の動作例では、ＡＦセンサの予めわかっている特性出力を、ＡＦ１未満、ＡＦ１以上、最大値（ＡＦピーク）に分けて、それぞれを検出した場合に、情報処理装置１００に送信するように設定し、以下のように制御する。
【００６７】
以下、図４のフローチャートを説明する。
【００６８】
まず、ステップＳ４０１において、情報処理装置１００は、ライブ映像の送信を要求し、撮像装置１５０から送られてくるライブ映像の表示部４におけるライブビュー表示を開始する。
【００６９】
ステップＳ４０２において、情報処理装置１００は、撮像装置１５０のフォーカス調整情報（状態情報）として、ＡＦ評価値出力の指示命令を発行する。これにより撮影レンズ１０１が駆動され、ＡＦセンサの評価値出力が変化していくたびに、その評価値が、撮像装置１５０から情報処理装置１００に送信される。
【００７０】
ステップＳ４０３において、情報処理装置１００は、撮像装置１５０からライブ映像を受信する。
【００７１】
ステップＳ４０４において、情報処理装置１００は、ＡＦセンサの評価値の出力を受信すると、出力区分により処理が以下のように分岐する。
【００７２】
ステップＳ４０５において、評価値がＡＦ１未満であれば、情報処理装置１００は、ＡＦを合わせるために急激に評価値が変わっているものと判断して、全体表示を行う（ステップＳ４０６）。
【００７３】
ステップＳ４０７において、情報処理装置１００は、撮像装置１５０がＡＦピークを検出しているかどうかを判断する。そうであれば、ステップＳ４０８において、情報処理装置１００は、使用しているＡＦフレームを中心として表示領域を１０倍に拡大する。そうでないならば、ステップＳ４０９において、情報処理装置１００は、表示領域を５倍に拡大する。
【００７４】
更に、ＡＦ１未満の出力に戻ったら、再度全体表示に戻るような構成にすれば、より拡大、全体表示の自動切り替えの利便性が高くなる。
【００７５】
また、使用している撮影レンズ１０１の種類によって、そのＡＦ評価値出力カーブは変化するので、レンズ毎にＡＦ１の設定が変更できるようにしてもよい。
【００７６】
第２の動作例の場合も、ピントの合い具合を示すＡＦセンサ評価値の出力に応じて、ライブ映像の拡大率が自動的に変化することで、画面表示が切り替わり、ピントの微調整をしやすくできる。
【００７７】
（第３の動作例）
次に、ライブ映像表示処理の第３の動作例について説明する。
【００７８】
前述の２つの動作例は、撮影レンズ１０１の駆動量の値と、ＡＦセンサの評価値に応じて、ライブ映像表示の内容を変更させたものであった。
【００７９】
第３の動作例においては、手ぶれ補正機構の動作を検出するものである。
【００８０】
即ち、手ぶれ補正機構が動作している場合は、画像の上下、あるいは左右の手ぶれによる振動が減少している状態にあるので、ライブ映像の表示は、注視しても、画像のゆれがなく、じっくりとピントを調整するような状態になっている。そこで、このときに、自動的に拡大してライブ映像をより見やすくするものである。
【００８１】
図６は、図１における情報処理装置１００の表示部４に表示されるライブ映像のイメージを示す図である。
【００８２】
図６（ａ）に示すように、手ぶれ補正装置がオフの状態では、ライブ映像は上下左右に細かい手ぶれによる振動が見受けられる。このとき、手ぶれ補正装置の動作がオン状態になると、この上下左右の微細振動が補正されて、ライブ映像は安定した状態で表示されるようになる。
【００８３】
ここで、情報処理装置１００は、予め設定されている拡大率でライブ映像の送信を、撮像装置１５０に命令し、（ｂ）に示すように、この拡大されたライブ映像を、表示部４に表示する。これにより、ピントの調整が容易に行えるようになる。
【００８４】
手ぶれ補正装置には、レンズユニット内に備えるものや、撮像装置本体内に備えられて、撮像センサであるＣＣＤ自体の位置を補正するもの等、いくつかのタイプがあるが、いずれのものも適用することができる。
【００８５】
図７は、図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第３の動作例の手順を示すフローチャートである。
【００８６】
まず、ステップＳ７０１において、情報処理装置１００は、ライブビューの表示を開始する。
【００８７】
ステップＳ７０２において、情報処理装置１００は、撮像装置１５０に対して、手ぶれ補正装置の状態（オンかオフか）を通知するよう命令を発行する。
【００８８】
ステップＳ７０３において、情報処理装置１００は、撮像装置１５０からのライブ映像の受信を行い、これを表示部４に表示する。
【００８９】
ステップＳ７０４において、情報処理装置１００は、手ぶれ補正装置の状態通知を撮像装置１５０から受信した場合は、次のステップＳ７０５において、手ぶれ補正装置がオンの状態なのかどうかを判断する。
【００９０】
手ぶれ補正装置がオン状態であれば、ステップＳ７０６において、情報処理装置１００は、予め設定してあるＮ倍の拡大表示命令を撮像装置１５０に対して発行する。これは、ユーザーの選択可能な初期設定値として、ＡＦフレームを中心とした領域に対して倍率選択できるようになっていてもよい。例えば、手ぶれ補正装置が作動開始したら、Ｎ=５として、通常の５倍拡大モードに移行する。
【００９１】
手ぶれ補正装置がオフ状態であれば、ステップＳ７０７において、情報処理装置１００は、Ｎ=１である全体表示命令を撮像装置１５０に対して発行して、再度、フレーミングを確認しやすいように全体表示を行う。
【００９２】
このように、手ぶれ補正装置の動作状況を鑑みて、ライブ映像の詳細な確認がしやすい状況になったところで、拡大率を変化させるので、ピントの状態を容易に確認することができる。
【００９３】
（第２の実施の形態）
図８は、本発明の第２の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【００９４】
第２の実施の形態のシステム構成は、図１に準じているが、情報処理装置１００において、更に、情報処理装置１００から撮像装置１５０の撮影レンズ１０１を駆動するためのユーザーインターフェースを持つフォーカス調整部１１を備えている。
【００９５】
本実施の形態は、撮像装置１５０の状態情報として、オートフォーカスモードなのか、マニュアルフォーカスモードなのかを示す情報を利用する。
【００９６】
特に、マニュアルフォーカスモードに設定された場合には、撮像装置１５０において、撮影レンズ１０１のフォーカス調整のためのレンズ駆動制御はしないので、情報処理装置１００から撮影レンズ１０１の移動命令を発行する必要がある。
【００９７】
第２の実施の形態によれば、マニュアルモードを検出すると、自動的に、フォーカス調整部１１に用意されるフォーカス調整画面をライブビュー画面が表示されている画面に加えて、同時に使用できるように表示する。こうして、情報処理装置１００から撮影レンズ１０１を駆動する。
【００９８】
図９は、図８の撮像システムの動作概略と表示画面の例を示す図である。
【００９９】
図９に示すように、撮影レンズ１０１の駆動量が大（＜＜＜または＞＞＞）、中（＜＜または＞＞）、少（＜または＞）の３段階で用意され、そのボタンの種類によって撮影レンズ１０１の移動量を変化させることができる。
【０１００】
これによって、即座に、撮影レンズ１０１の位置制御に入ることができ、かつ、調整状態が進めば、自動的に適切な拡大表示へとライブ映像の表示も変化する。ユーザーが自らの操作で、調整画面を表示したり、拡大ボタンを押下する必要がないというメリットがある。
【０１０１】
尚、ボタンの種類に応じて、表示領域の倍率指定を変化させてもよい。例えば、レンズ移動量大のボタンの押下の場合は、全体表示、中の場合は、５倍拡大、少の場合は、１０倍拡大のように、設定しておいてもよい。
【０１０２】
また、本発明の目的は、以下の処理を実行することによっても達成される。即ち、上述した実施の形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムまたは装置に供給し、そのシステムまたは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出す処理である。
【０１０３】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０１０４】
また、プログラムコードを供給するための記憶媒体としては、次のものを用いることができる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等である。または、プログラムコードをネットワークを介してダウンロードしてもよい。
【０１０５】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現される場合も本発明に含まれる。加えて、そのプログラムコードの指示に基き、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれる。
【０１０６】
更に、上述した実施の形態の機能が以下の処理によって実現される場合も本発明に含まれる。即ち、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基き、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う場合である。
【図面の簡単な説明】
【０１０７】
【図１】本発明の第１の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【図２】図１における撮影レンズ１０１の構成と表示部４のライブビュー表示を示す図である。
【図３】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第１の動作例の手順を示すフローチャートである。
【図４】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第２の動作例の手順を示すフローチャートである。
【図５】図１の撮像システムの合焦評価値と撮影レンズ１０１の位置の関係を示す図である。
【図６】図１における情報処理装置１００の表示部４に表示されるライブ映像のイメージを示す図である。
【図７】図１の撮像システムにおける情報処理装置１００によって実行されるライブ映像表示処理の第３の動作例の手順を示すフローチャートである。
【図８】本発明の第２の実施の形態に係る撮像システムの概略構成を示すブロック図である。
【図９】図８の撮像システムの動作概略と表示画面の例を示す図である。
【符号の説明】
【０１０８】
１ ＲＯＭ
２ 通信部
３ ＲＡＭ
４ 表示部
５ 入力部
６ 外部記憶部
７ 通信処理部
８ 遠隔撮影制御部
９ 状態取得部
１０ 画像取得部
１１ フォーカス調整部
２０ ＣＰＵ
１００ 情報処理装置
１１０ 信号処理部
１１２ カメラＣＰＵ
１２２ 制御部
１５０ 撮像装置
【特許請求の範囲】
【請求項１】
撮像装置と通信手段で接続される情報処理装置において、
前記撮像装置から画像データを取得する画像取得手段と、
前記撮像装置を制御する遠隔制御手段と、
前記画像データに基くライブ映像を表示する表示手段と、
前記撮像装置の状態情報を取得する状態取得手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記画像取得手段は、前記画像データを前記撮像装置から読み出す機能を有することを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記遠隔制御手段は、前記撮像装置に対して、前記ライブ映像の所定の領域の映像を転送するように指示するライブ映像の拡大命令を発行することを特徴とする請求項１記載の情報処理装置。
【請求項４】
前記状態取得手段は、前記撮像装置のフォーカス調整情報を取得することを特徴とする請求項１記載の情報処理装置。
【請求項５】
前記フォーカス調整情報は、オートフォーカスセンサの評価値であることを特徴とする請求項４記載の情報処理装置。
【請求項６】
前記フォーカス調整情報は、前記撮像装置の撮影レンズの駆動量であることを特徴とする請求項４記載の情報処理装置。
【請求項７】
前記フォーカス調整情報は、前記撮像装置の手ぶれ補正装置の動作状況であることを特徴とする請求項４記載の情報処理装置。
【請求項８】
前記状態取得手段は、前記撮像装置がマニュアルフォーカスモードかオートフォーカスモードかの情報を取得し、
前記撮像装置の撮影レンズを駆動するフォーカス調整手段を備えることを特徴とする請求項１記載の情報処理装置。
【請求項９】
通信手段で撮像装置と接続される情報処理装置の制御方法において、
前記撮像装置から画像データを取得する画像取得ステップと、
前記撮像装置を制御する遠隔制御ステップと、
前記画像データに基くライブ映像を表示する表示ステップと、
前記撮像装置の状態情報を取得する状態取得ステップと、
を備えることを特徴とする情報処理装置の制御方法。
【請求項１０】
通信手段で撮像装置と接続される情報処理装置の制御方法をコンピュータに実行させるプログラムにおいて、
前記情報処理装置の制御方法は、
前記撮像装置から画像データを取得する画像取得ステップと、
前記撮像装置を制御する遠隔制御ステップと、
前記画像データに基くライブ映像を表示する表示ステップと、
前記撮像装置の状態情報を取得する状態取得ステップと、
を備えることを特徴とするプログラム。
【請求項１１】
情報処理装置と通信手段で接続される撮像装置において、
前記情報処理装置の遠隔操作により要求される前記撮像装置の状態情報を通知する通知手段と、
前記情報処理装置の遠隔操作により要求される画像データの領域のライブ映像の拡大処理を行う拡大処理手段と、
を備えることを特徴とする撮像装置。
【請求項１２】
請求項１記載の情報処理装置と請求項１１記載の撮像装置とから構成される撮像システム。
【請求項１】
撮像装置と通信手段で接続される情報処理装置において、
前記撮像装置から画像データを取得する画像取得手段と、
前記撮像装置を制御する遠隔制御手段と、
前記画像データに基くライブ映像を表示する表示手段と、
前記撮像装置の状態情報を取得する状態取得手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記画像取得手段は、前記画像データを前記撮像装置から読み出す機能を有することを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記遠隔制御手段は、前記撮像装置に対して、前記ライブ映像の所定の領域の映像を転送するように指示するライブ映像の拡大命令を発行することを特徴とする請求項１記載の情報処理装置。
【請求項４】
前記状態取得手段は、前記撮像装置のフォーカス調整情報を取得することを特徴とする請求項１記載の情報処理装置。
【請求項５】
前記フォーカス調整情報は、オートフォーカスセンサの評価値であることを特徴とする請求項４記載の情報処理装置。
【請求項６】
前記フォーカス調整情報は、前記撮像装置の撮影レンズの駆動量であることを特徴とする請求項４記載の情報処理装置。
【請求項７】
前記フォーカス調整情報は、前記撮像装置の手ぶれ補正装置の動作状況であることを特徴とする請求項４記載の情報処理装置。
【請求項８】
前記状態取得手段は、前記撮像装置がマニュアルフォーカスモードかオートフォーカスモードかの情報を取得し、
前記撮像装置の撮影レンズを駆動するフォーカス調整手段を備えることを特徴とする請求項１記載の情報処理装置。
【請求項９】
通信手段で撮像装置と接続される情報処理装置の制御方法において、
前記撮像装置から画像データを取得する画像取得ステップと、
前記撮像装置を制御する遠隔制御ステップと、
前記画像データに基くライブ映像を表示する表示ステップと、
前記撮像装置の状態情報を取得する状態取得ステップと、
を備えることを特徴とする情報処理装置の制御方法。
【請求項１０】
通信手段で撮像装置と接続される情報処理装置の制御方法をコンピュータに実行させるプログラムにおいて、
前記情報処理装置の制御方法は、
前記撮像装置から画像データを取得する画像取得ステップと、
前記撮像装置を制御する遠隔制御ステップと、
前記画像データに基くライブ映像を表示する表示ステップと、
前記撮像装置の状態情報を取得する状態取得ステップと、
を備えることを特徴とするプログラム。
【請求項１１】
情報処理装置と通信手段で接続される撮像装置において、
前記情報処理装置の遠隔操作により要求される前記撮像装置の状態情報を通知する通知手段と、
前記情報処理装置の遠隔操作により要求される画像データの領域のライブ映像の拡大処理を行う拡大処理手段と、
を備えることを特徴とする撮像装置。
【請求項１２】
請求項１記載の情報処理装置と請求項１１記載の撮像装置とから構成される撮像システム。
【図１】
【図３】
【図４】
【図５】
【図７】
【図８】
【図２】
【図６】
【図９】
【図３】
【図４】
【図５】
【図７】
【図８】
【図２】
【図６】
【図９】
【公開番号】特開２０１０−１０３９０３（Ｐ２０１０−１０３９０３Ａ）
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願番号】特願２００８−２７５４６６（Ｐ２００８−２７５４６６）
【出願日】平成２０年１０月２７日（２００８．１０．２７）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願日】平成２０年１０月２７日（２００８．１０．２７）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]