制御装置、カメラシステム及びプログラム
【課題】表示されている画像に対応するカメラが制御可能であるかを確実に認識できるとともに、表示されている画像が全体画像のどの範囲に位置するかを確実に認識すること。
【解決手段】カメラ端末装置２００で撮像されたパノラマ画像を表示するパノラマ画像表示領域と、パノラマ画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示処理部３０５と、パノラマ画像上で指定された位置に対応する領域をカメラ端末装置２００で撮像するように制御する制御部３１０と、を有し、表示処理部３０５は、制御部３１０による制御が可能か否かに応じて前記全体画像の表示状態を変更する、センターサーバー３００が提供される。
【解決手段】カメラ端末装置２００で撮像されたパノラマ画像を表示するパノラマ画像表示領域と、パノラマ画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示処理部３０５と、パノラマ画像上で指定された位置に対応する領域をカメラ端末装置２００で撮像するように制御する制御部３１０と、を有し、表示処理部３０５は、制御部３１０による制御が可能か否かに応じて前記全体画像の表示状態を変更する、センターサーバー３００が提供される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、制御装置、カメラシステム及びプログラムに関する。
【背景技術】
【０００２】
従来、例えば下記の特許文献１に記載されているように、カメラを複数のユーザが操作できる場合に、複数のユーザからの操作が衝突することを防ぐため、操作したいユーザに一定期間、カメラの制御権を与えるカメラ制御システムが知られている。特許文献１には、カメラ制御権を有する場合に、操作部を表示し、カメラ制御権を有さない場合に、操作部を表示しないように制御していることが記載されている。また、下記の特許文献１に記載されているように、複数のカメラからの映像を一覧表示し、操作可能な場合と操作不可の場合に表示状態を変えるカメラ制御システムが知られている。特許文献２には、操作不可の場合、操作部をグレー表示するように制御していることが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１９４２１７号公報
【特許文献２】特開平９−２１４８１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記文献に記載された技術では、表示画面を操作可能であるかをユーザが認識することができるが、表示画面と連携して操作可能であるか否かが表示されるものではないため、ユーザが操作可能であるか否かを直に認識することができなかった。また、表示画面には、現在撮影されているライブ映像のみが表示されるため、撮影されているライブ映像を超えた範囲を撮影するように直感的に操作することができなかった。更には、複数の画像を一覧表示している場合には、どのカメラを操作すれば、所望箇所を撮影できるかを認識することが困難であった。
【０００５】
そこで、本発明は、上記課題に鑑みてなされたものであり、本発明の目的とするところは、表示されている画像に対応するカメラが制御可能であるかを確実に認識できるとともに、表示されている画像が全体画像のどの範囲に位置するかを確実に認識することが可能な、新規かつ改良された制御装置、カメラシステム及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある観点によれば、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、前記表示制御部は、前記制御部による制御が可能か否かに応じて前記全体画像の表示状態を変更する、制御装置が提供される。
【０００７】
また、前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御するものであってもよい。
【０００８】
また、前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示するものであってもよい。
【０００９】
また、前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とするものであってもよい。
【００１０】
また、前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更するものであってもよい。
【００１１】
また、上記課題を解決するために、本発明の別の観点によれば、画像を撮像するカメラと、前記カメラを制御する制御装置とを有するカメラシステムであって、前記制御装置は、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、前記表示制御部は、前記制御部による制御が可能か否かに応じて前記パノラマ画像の表示状態を変更する、カメラシステムが提供される。
【００１２】
また、前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御するものであってもよい。
【００１３】
また、前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示するものであってもよい。
【００１４】
また、前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とするものであってもよい。
【００１５】
また、前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更するものであってもよい。
【００１６】
また、上記課題を解決するために、本発明の別の観点によれば、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する手段、前記全体画像上で指定された位置に対応する領域を変化させるように制御する手段、前記カメラの制御が可能か否かに応じて前記全体画像の表示状態を変更する手段、としてコンピュータを機能させるためのプログラムが提供される。
【発明の効果】
【００１７】
本発明によれば、表示されている画像に対応するカメラが制御可能であるかを確実に認識できるとともに、表示されている画像が全体画像のどの範囲に位置するかを確実に認識することが可能となる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態に係る撮像システムの全体構成を示す模式図である。
【図２】図１のシステムにおいて、カメラ端末装置とセンターサーバーの構成を詳細に示す模式図である。
【図３】カメラ端末装置２００のパン動作、チルト動作を説明するための模式図である。
【図４】パノラマ画と俯瞰画の表示状態を示す模式図である。
【図５】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図６】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図７】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図８】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図９】モニターの表示画面を示す模式図である。
【図１０】操作パネルによる操作を説明するための模式図である。
【図１１】パネル“View”をクリックした場合に“Screen Mode”、“View Size” “Image Codec”、“Frame Rate”などのメニューが表示された状態を示す模式図である。
【図１２】パネル“Camera”をクリックした場合に表示されるメニューを示す模式図である。
【図１３】“Presetposition”、“Trigger”、“Other”、“information”をクリックした場合に表示される各メニューを示す模式図である。
【図１４】俯瞰画像の表示について説明するための模式図である。
【図１５】俯瞰画像の表示について説明するための模式図である。
【図１６】俯瞰画像の表示について説明するための模式図である。
【図１７】俯瞰画像の表示について説明するための模式図である。
【図１８】俯瞰画像の表示について説明するための模式図である。
【図１９】複数のカメラ端末装置のそれぞれで撮像されたライブ映像をモニタに表示している様子を示す模式図である。
【図２０】パノラマ画のポップアップ表示を画面の下部にまとめて表示する例を示す模式図である。
【発明を実施するための形態】
【００１９】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２０】
なお、説明は以下の順序で行うものとする。
１．第１の実施の形態（カメラ端末装置とサーバーからなる撮像システムの例）
（１）撮像システムの構成例
（２）カメラ端末装置とセンターサーバーの構成例
（３）第１のパノラマ画像及び第２のパノラマ画像の表示動作について
（４）第１のパノラマ画像を生成する処理について
（５）ＧＵＩについて
（６）第１のパノラマ画像上での撮影方向の指定
（７）ポップアップ表示による制御
【００２１】
＜１．第１の実施形態＞
（１）撮像システムの構成例
図１は、本発明の一実施形態に係る撮像システムの全体構成を示す模式図である。撮像システム１００は、カメラ端末装置（ＩＰカメラ）２００、センターサーバー３００、クライアント４００を有しており、複数のカメラ端末装置２００、センターサーバー３００及びクライアント４００は、ネットワーク５００を介して接続されている。また、ネットワーク５００には、プロキシサーバー６００が接続されており、プロキシサーバー６００には複数のカメラ端末装置２００が接続されている。また、センターサーバー３００にはモニター３２０が接続されている。本実施形態において、カメラ端末装置２００は、例えば屋内又は屋外に設置される監視カメラであって、カメラ端末装置２００で取得した画像をセンターサーバー３００のモニタ３２０に表示することで、カメラ端末装置２００が設置された領域を監視できる。クライアント４００は、ネットワーク５００を介してカメラ端末装置２００、センターサーバー３００、またはプロキシサーバー６００と接続される。また、クライアント４００は、後述するセンターサーバ３００の機能とモニタ３２０の機能を備えるものであっても良い。カメラ端末装置２００で撮影された映像は、ネットワーク５００を介してクライアント４００に送られ、クライアント４００の表示画面には後述するライブ映像とともに第１のパノラマ画像、第２のパノラマ画像が表示される。なお、カメラ端末装置２００の例として、IPカメラをあげているが、これに限定されず、アナログカメラであってもよい。
パノラマ画像（全景画像、全体画像）は、カメラ端末装置２００で撮像可能な範囲を示している。パノラマ画像には、様々な形状があり、例えば、図４のように、円形のパノラマ画像や長方形のパノラマ画像、円筒面上に投射したような輪っか状のパノラマ画像などがある。以下、実施形態において、第１のパノラマ画像及び第２のパノラマ画像の例として、それぞれ円形のパノラマ画像及び長方形のパノラマ画像をあげて説明する。
【００２２】
（２）カメラ端末装置とセンターサーバーの構成例
図２は、図１のシステムにおいて、カメラ端末装置２００とセンターサーバー３００の構成を詳細に示す模式図である。図２に示すカメラ端末装置２００またはセンターサーバー３００の各構成要素は、ハードウェア（回路など）または、ＣＰＵなどの演算処理装置とこれを機能させるためのソフトウェア（プログラム）によって構成することができる。カメラ端末装置２００のカメラ部２０１は、撮像光学系を含み、後述する端末制御部２１０から供給された撮像制御信号ＣＴaに基づいて撮像動作を行い、映像信号Ｄcamを生成する。また、カメラ部２０１は、生成した映像信号Ｄcamを、バス２２０を介して信号処理部２０２に供給する。なお、バス２２０には、メモリ部２０３、撮像方向制御部２０４、ネットワークインタフェース部２０６、記憶部２０７、端末制御部２１０も接続されている。
【００２３】
信号処理部２０２は、映像信号Ｄcamの圧縮処理を行い、得られた映像符号化信号ＤＶをメモリ部２０３に記憶させる。また、カメラ部２０１の撮像方向を順次移動して得られた映像信号Ｄcamを用いて第１のパノラマ画の映像信号（以下「第１のパノラマ画信号という」ＤＦ及び第２のパノラマ画の映像信号（以下「第２のパノラマ画信号」という）ＤＰを生成して、記憶部２０７に記憶させる。なお、映像信号Ｄcamの圧縮処理や、第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰの生成は、後述する端末制御部２１０から供給された信号処理制御信号ＣＴbに基づいて行う。
【００２４】
撮像方向制御部２０４は、カメラ部２０１の撮像方向を、後述する端末制御部２１０から供給された方向制御信号ＣＴcによって指示された方向に移動させるため、撮像方向を移動する際の速度や加速度の計算を行う。また、計算結果に基づきパン動作を行うための駆動信号ＭＤpやチルト動作を行うための駆動信号ＭＤtを生成して、撮像方向調整部２０５に供給する。また、撮像方向制御部２０４は、カメラ部２０１の撮像方向がいずれの方向であるかを示すカメラ位置情報信号ＰＭを生成して、端末制御部２１０に供給する。
【００２５】
撮像方向調整部２０５は、カメラ部２０１を左右方向に移動させるパン動作モータと、カメラ部２０１を上下方向に移動させるチルト動作モータを有している。撮像方向調整部２０５は、駆動信号ＭＤpによってパン動作モータ、駆動信号ＭＤtによってチルト動作モータをそれぞれ駆動して、カメラ部２０１の撮像方向を方向制御信号ＣＴcによって指示された方向に調整する。また、撮像方向調整部２０５は、動作範囲が制限されることなくエンドレスにパン動作を行うものとする。
【００２６】
図３は、カメラ端末装置２００のパン動作、チルト動作を説明するための模式図であって、カメラ端末装置２００を天井などに装着した場合を示している。ここで、図３（Ｂ）は、本実施形態に係るカメラ端末装置２００のパン・チルト動作を示している。一方、図３（Ａ）は、比較のため、一般的なカメラ端末装置のパン・チルト動作を示している。図３（Ａ）に示すように、一般的なカメラ端末装置では、パン動作を３６０°のエンドレスで行い、チルト動作については、鉛直方向から水平方向までの９０°の範囲で行う。これに対し、本実施形態に係るカメラ端末装置２００は、パン動作を３６０°のエンドレスで行うとともに、チルト動作については、鉛直方向を中心として２２０°の範囲で行うことができる。従って、後述する手法により第１のパノラマ画の映像信号ＤＦを生成して記憶部２０７に記憶することができる。後述の第１のパノラマ画像は、円形のパノラマ画像であり、円の中央付近を中心をまたいで、撮像方向を操作する場合に、本実施形態に係るカメラ端末装置２００は、目的撮像方向まで最短でメカ的にも移動することができる。一方、一般的なカメラ端末装置では、円の中心をまたぐようにはカメラ撮像方位をメカ的に移動させることができない。
【００２７】
ネットワークインタフェース部２０６は、カメラ端末装置２００とセンターサーバー３００との間で、ネットワーク５００を介して通信を行うためのインタフェースである。
【００２８】
端末制御部２１０は、撮像制御信号ＣＴaによってカメラ部２０１を制御し、信号処理制御信号ＣＴbによって信号処理部２０２を制御し、方向制御信号ＣＴcによって撮像方向制御部２０４を制御して、撮像方向を順次移動しながら撮像を行う。そして、端末制御部２１０は、得られた映像信号Ｄcamに基づいて第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを生成させて記憶部２０７に記憶させる。
【００２９】
本実施形態に係る撮像システム１００は、映像信号Ｄcamによるライブ映像と、第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰによる第１のパノラマ画または第２のパノラマ画を共にカメラ端末装置２００からセンターサーバー３００に送信し、モニター３２０に表示することができる。尚、本明細書において、第１のパノラマ画像及び第２のパノラマ画像を全体画像と称する場合がある。図４は、第２のパノラマ画と第１のパノラマ画の表示状態を示す模式図である。センターサーバー３００は、ユーザの選択に応じて、第１のパノラマ画または第２のパノラマ画の一方をモニター３２０にライブ映像とともに表示することができる。また、センターサーバー３００は、第１のパノラマ画及び第２のパノラマ画の双方をライブ映像とともに表示するように構成されていても良い。なお、図４の右図では、中央付近の画像が欠けた円形のパノラマ画像を第１のパノラマ画像としているが、これに限定されず、中央付近の画像が欠けていない円形のパノラマ画像を第１のパノラマ画像としてもよい。
【００３０】
カメラ端末装置２００は、天井などに設置され、カメラ端末装置２００の下方向の画像を表示する。このため、図４に示すように、第１のパノラマ画は、カメラ端末装置２００から下向きに延在する鉛直線を中心として、パン３６０°、チルト２２０°の範囲で取得され、その輪郭は円形となる。
【００３１】
また、撮像方向調整部２０５は、上述のようにエンドレスにパン動作を行うことができるように構成されている。したがって、記憶部２０７に記憶する第２のパノラマ画像は、例えば図４に示すように、画像が重複しないように、一方の端部が基準方向から「＋１８０°」の角度差、他方の端部が基準方向から「−１８０°」の角度差を有するものとする。また、パン動作の動作範囲が制限されないので、例えば動作範囲が制限されている場合のように、動作範囲の中央位置を基準方向とすることができない。したがって、基準方向を予め設定しておき、この基準方向が第２のパノラマ画像の中央位置となるように第２のパノラマ画信号ＤＰを生成する。また、撮像方向制御部２０４は、カメラ位置情報信号ＰＭとして、予め設定された基準方向に対する撮像方向の例えば角度差を示す信号を生成する。
【００３２】
このように基準方向を予め設定しておくものとすれば、第２のパノラマ画像がいずれの方向を基準とした撮像動作によって生成された画像であるかを判別する必要がない。また、カメラ位置情報信号ＰＭによって、基準方向に対する撮像方向の角度差を示すものとすれば、第２のパノラマ画像上におけるカメラ位置情報信号ＰＭに基づく撮像方向の位置を容易に判別できる。
【００３３】
チルト動作においても、予め基準方向を設定しておき、カメラ位置情報信号ＰＭによって、基準方向に対する撮像方向の角度差を示すものとする。これにより、第１のパノラマ画像、第２のパノラマ画像の双方において、カメラ位置情報信号ＰＭに基づく撮像方向の位置を容易に判別できる。なお、チルト動作については、カメラ端末装置２００が天井に設置されている場合、鉛直方向を基準方向とすることができる。
【００３４】
端末制御部２１０は、ネットワークインタフェース部２０６を介してセンターサーバー３００から供給されたコマンド信号ＣＭを解析して、撮像制御信号ＣＴaや信号処理制御信号ＣＴb，方向制御信号ＣＴcの生成を行う。また、メモリ部２０３に記憶されている映像符号化信号ＤＶや、記憶部２０７に記憶されている第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰ、および撮像方向制御部２０４から供給されたカメラ位置情報信号ＰＭをセンターサーバー３００に送出する処理等を行う。
【００３５】
センターサーバー３００のネットワークインタフェース部３０１は、カメラ端末装置２００とセンターサーバー３００とで、ネットワーク５００を介して通信を行うためのインタフェースである。ネットワークインタフェース部３０１は、カメラ端末装置２００から供給された映像符号化信号ＤＶを伸長処理部３０２に供給する。また、ネットワークインタフェース部３０１は、カメラ位置情報信号ＰＭを位置判別処理部３０３に供給し、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを画像処理部３０４に供給する。
【００３６】
伸長処理部３０２は、映像符号化信号ＤＶの伸長処理を行い、得られた映像信号Ｄcamを表示処理部３０５に供給する。
【００３７】
位置判別処理部３０３は、カメラ位置情報信号ＰＭで示された撮像方向が第１のパノラマ画像または第２のパノラマ画像のいずれの位置に対応するか判別して、位置判別結果ＫＰを画像処理部３０４に供給する。ここで、カメラ位置情報信号ＰＭは、上述のように予め設定した基準方向がパン動作、チルト動作の中央位置となるように第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰを生成し、カメラ位置情報信号ＰＭは基準方向と現在の撮像方向の角度差を示すものとすれば、カメラ位置情報信号ＰＭに基づき、現在の撮像方向が俯瞰画像または第２のパノラマ画像のいずれの位置に対応するか容易に判別できる。
【００３８】
画像処理部３０４は、位置判別結果ＫＰに基づいて画像処理を行い、第１のパノラマ画像の第１のパノラマ画信号ＤＦＣ、及び第２のパノラマ画像の第２のパノラマ画信号ＤＰＣを生成する。第２のパノラマ画信号ＤＰＣについては、位置判別結果ＫＰにより判別された位置が中央位置とされた第２のパノラマ画信号ＤＰＣを生成することができる。この場合、画像処理部３０４では、判別された位置と第２のパノラマ画像の中心位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の中央位置となるように第２のパノラマ画像を処理する。すなわち、判別された位置を中央位置として「±１８０°」の第２のパノラマ画像表示画枠を設定して、第２のパノラマ画像表示画枠から外れる差分量分の領域の第２のパノラマ画像を、画像の無い領域に貼り付けることで、判別された位置を中央位置とした第２のパノラマ画像の第２のパノラマ画信号ＤＰＣを生成する。第１のパノラマ画信号ＤＦＣの場合においても、後述する「第１のパノラマ画像を回転させるモード」の場合は、第２のパノラマ画信号ＤＰＣと同様に、判別された位置と第１のパノラマ画のパン方向の基準位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の上に位置するように第１のパノラマ画像を処理する。また、画像処理部３０４は、第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣのそれぞれにおいて、位置判別結果ＫＰに基づく位置（カメラ部２０１の撮像光学系の光軸が向いている位置）を表示する。さらに、画像処理部３０４は、画像処理を行うことにより生成した第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣを表示処理部３０５に供給する。
【００３９】
表示処理部３０５は、伸長処理部３０２から供給された映像信号Ｄcamや、画像処理部３０４から供給された第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣを用いて表示駆動信号ＨＤを生成してモニター３２０に供給する。また、表示処理部３０５は、後述する制御部３１０から供給されたＧＵＩ表示制御信号ＣＴgに基づいて生成したＧＵＩ用映像信号を用いて、表示駆動信号ＨＤを生成してモニター３２０に供給する。表示処理部３０５は、複数のカメラ端末装置２００から送られたライブ映像とパノラマ画をモニター３２０上に一覧表示するように制御することができる。
【００４０】
モニター３２０は、表示駆動信号ＨＤに基づいて、表示素子例えば液晶表示素子やプラズマ表示素子あるいは陰極線管等を駆動して、第１のパノラマ画像、撮像方向を中央位置とした第２のパノラマ画像やカメラ部２０１の撮像画像（ライブ映像）、ＧＵＩ画像等を画面上に表示する。
【００４１】
ユーザインタフェース部３１５は、ＧＵＩが用いられており、モニター３２０を用いてユーザに対する情報の提示を行い、提示された情報に基づき操作入力手段であるポインティングデバイスやキーボード等でユーザ操作が行われたとき、ユーザ操作に応じた操作信号ＵＳを制御部３１０に供給して所望の動作等を行わせる。
【００４２】
制御部３１０は、操作信号ＵＳとモニター３２０の表示状態に基づき、ユーザがどのような処理の選択やどのような処理の実行を要求したか判別して、判別結果に基づき制御信号ＣＴmを生成して各部に供給し、センターサーバー３００の動作を制御する。また、判別結果に基づきコマンド信号ＣＭを生成して、ネットワークインタフェース部３０１を介してカメラ端末装置２００に供給し、カメラ端末装置２０の動作を制御する。さらに、制御部３１０は、ＧＵＩ表示制御信号ＣＴgを生成して表示処理部３０５に供給する。
【００４３】
なお、上述した例では、カメラ端末装置２００が映像信号Ｄcamから第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成したが、センターサーバー３００またはクライアント４００が第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成しても良い。この場合、カメラ端末装置２００のネットワークインタフェース部２０６は、カメラブロック２０１から出力された映像信号Ｄcamをセンターサーバー３００またはクライアント４００へ送る。センターサーバー３００またはクライアント４００は、カメラ端末装置２００と同様の信号処理部を備えることで、第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成することができる。第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰは、センターサーバー３００またはクライアント４００が備えるハードディスク等のメモリに記憶される。
【００４４】
（３）第１のパノラマ画像及び第２のパノラマ画像の表示動作について
次に、第１のパノラマ画像及び第２のパノラマ画像表示動作について説明する。制御部３１０は、動作開始時に、カメラ端末装置２００に対して、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰとカメラ位置情報信号ＰＭおよび映像符号化信号ＤＶを要求するコマンド信号ＣＭを送信する。カメラ端末装置２００は、記憶部２０７に第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰを記憶しているとき、この第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰを読み出してセンターサーバー３００に送信する。また、カメラ端末装置２００は、画記憶部２０７に第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰが記憶されていないとき、カメラ部２０１や信号処理部２０２および撮像方向制御部２０４を制御して、撮像方向を移動しながら撮像動作を行い、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを生成してセンターサーバー３００に送信する。なお、カメラ端末装置２００は、生成した第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰは、記憶部２０７に記憶させる。
【００４５】
カメラ端末装置２００は、撮像方向制御部２０４で生成したカメラ位置情報信号ＰＭをセンターサーバー３００に供給する。また、カメラ端末装置２００は、カメラ部２０１の撮像動作を開始して、得られた映像信号Ｄcamを信号処理部２０２で圧縮し映像符号化信号ＤＶをメモリ部２０３に記憶させる。さらに、メモリ部２０３に記憶されている映像符号化信号ＤＶをセンターサーバー３００に供給する。なお、図１に示すように、カメラ端末装置２００とネットワーク５００とがプロキシサーバ６００を介して接続されている場合、カメラ端末装置２００とセンターサーバー３００との間の情報のやり取りは、プロキシサーバ６００を経由して行われる。
【００４６】
センターサーバー３００の位置判別処理部３０３は、カメラ位置情報信号ＰＭで示された撮像方向が第１のパノラマ画像または第２のパノラマ画像のいずれの位置に対応するか判別して、位置判別結果ＫＰを画像処理部３０４に供給する。第２のパノラマ画を例に挙げると、例えばカメラ位置情報信号ＰＭで示す角度差が「０°」であるとき、撮像方向は基準方向に設定されていることから、撮像方向の位置は第２のパノラマ画像の中央位置となっている。
【００４７】
画像処理部３０４は、位置判別結果ＫＰに基づいて画像処理を行う。ここで、位置判別結果ＫＰによって、撮像方向の位置が第２のパノラマ画像の中央位置であることが示されたときは、撮像方向の画像が第２のパノラマ画像の中央となっていることから、第２のパノラマ画像処理を行うことなく、第２のパノラマ画信号ＤＰを第２のパノラマ画信号ＤＰＣとして表示処理部３０５に供給する。一方、撮像方向の位置が第２のパノラマ画像の中央位置でない場合は、判別された撮像方向の位置と第２のパノラマ画像の中心位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の中央位置となるように第２のパノラマ画像を処理し、第２のパノラマ画信号ＤＰＣを生成する。
【００４８】
このため、第２のパノラマ画像においては、例えばカメラ位置情報信号ＰＭで示す角度差が「０°」であるとき、表示処理部３０５からの表示駆動信号ＨＤによって駆動されるモニター３２０の画面上には、カメラ部２０１で撮影された撮像画像と、基準方向が中央位置とされている第２のパノラマ画像、およびＧＵＩに関する画像が表示される。
【００４９】
第１のパノラマ画像の場合、後述する「第１のパノラマ画像を回転させるモード」の場合は、第２のパノラマ画信号ＤＰＣと同様に、判別された位置と第１のパノラマ画像のパン方向の基準位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の下（後述する直線Ｌ上）に位置するように第１のパノラマ画像を回転させ、第１のパノラマ画信号ＤＦＣを生成する。また、画像処理部３０４は、第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣのそれぞれにおいて、位置判別結果ＫＰに基づく撮像方向の位置（カメラ部２０１の撮像光学系の光軸が向いている位置）を表示する。
【００５０】
第１のパノラマ画像及び第２のパノラマ画像のいずれにおいても、予め設定された基準位置を中心位置として固定して表示することもできる。この場合、位置判別結果ＫＰによって判別された位置と予め設定された基準位置との差分量を判別して、この判別された差分量に基づいて、中心位置から差分量だけ離れた位置にカメラの撮像方向（カメラブロックが有する光学系の光軸の方向）が向いていることを示すカーソル、または枠などを第１または第２のパノラマ画像中に表示する。
【００５１】
伸長処理部３０２は、映像符号化信号ＤＶを伸長して、得られた映像信号Ｄcamを表示処理部３０５に供給する。また、制御部３１０は、ＧＵＩ表示を行うためのＧＵＩ表示制御信号ＣＴgを表示処理部３０５に供給する。
【００５２】
（４）第１のパノラマ画像を生成する処理について
次に、第１のパノラマ画信号ＤＦを生成する処理について、図５〜図８に基づいて説明する。第１のパノラマ画像信号ＤＦを生成する際には、第１のパノラマ画像の領域毎に画像を取得する。先ず、図５に示すように、カメラ端末装置２００のズームを固定して、ある任意の間隔でパン、チルトを行い、静止画を取得する。図５中に示す数字は、画像取得の順番を示している。
【００５３】
次に、以下の［１］〜［３］の手順により、静止画像座標系の座標変換を行う。ここでは、図６に示すように、静止画像の各点を、カメラ端末装置２００の回転中心から見た相対位置(x,y,z)に変換する。
［１］ 水平画角thh[degree]、アスペクト比aのカメラの視点を原点に置き、-z方向に向ける。距離Lの位置に被写体平面(x, y, -L)を考えると、見える範囲は 2Lx × 2Ly の長方形になる。ここで、Lx=L・tan(thh/2)、Ly=Lx/aの関係が成立する。
［２］ カメラの姿勢は本来(x, y,
z, p, q, r)であるが、視点の位置が原点に固定されていると考えると、x=y=z=0であり、ここでは(p, q, r) （p: Pan(y軸回転), q: Tilt(x軸回転), r: roll(z軸回転)）のみを考える。
［３］ (2Lx)×(2Ly)の長方形内の点(j, i)を用いると下記の式が成り立つ。
x=Lx × (j-Lx)/Lx
y = Ly × (i - Ly) / Ly
z = -L
［４］ (x, y, z)を用いて以下のRoll変換、Tilt変換、Pan変換式を適用する。
【００５４】
【数１】
【００５５】
ここで得られた(x3,y3,z3)が、静止画像のある点（x,y,z)をカメラの回転中心から見た座標系で表した値となる。
【００５６】
次に、相対位置を緯度、経度に変換する。ここでは、図７に示すように、上記で得られた(x3,y3,z3)を緯度、経度に変換する。(x3, y3, z3)の方向が-zの方向に対して水平方向となす角度が経度であり、またx-z平面となす角度が緯度になり、以下の式で求めることができる。
・緯度(Latitude)
La = tan-1
( y3 / ::sqrt( x3 * x3 + z3 * z3))
・経度(Lo)
0.0 < z3のとき
0.0 < x3の場合 Lo = 90.0 + La
0.0≧x3の場合 Lo = -90.0 - La
0.0 ≧ z3のとき
Lo =
tan-1( x3 / z3) / RAD
ただし、
RAD = π/ 180 (π:円周率)
【００５７】
次に、第１のパノラマ画像への変換を行う。ここでは、図８に示すように、得られた緯度、経度（La,Lo）を、緯度を半径の軸、経度を円周方向の座標系で表す。
【００５８】
以上のようにして、第１のパノラマ画信号ＤＦを生成することができる。
【００５９】
（５）ＧＵＩについて
次に、ＧＵＩについて説明する。図９は、モニター３２０の表示画面を示す模式図である。図９では、通常の画面と全画面表示の双方を示しており、いずれの場合においても、画面左側に操作パネル（コントロールパネル）が表示され、画面右側にライブ映像が表示されている。操作パネルの“Screen Mode”を“Full”にすると全画面表示となる。
【００６０】
図１０は、操作パネルによる操作を説明するための模式図である。操作パネル内は機能毎のパネルとなっており、各パネルを折り畳んで格納することができる。パネルの分類は以下の通りである。
・View
表示に関する設定
・Camera control
カメラ操作に関する設定
・Panorama
パノラマ表示
・Preset position
プリセットに関する設定
・Trigger
トリガーに関する設定
・Other
その他の設定
【００６１】
各パネルをクリックすると、そのパネルが開くように構成されている。図１０（Ａ）は、“View”をクリックした状態を示しており、“View”欄の下にメニューが表示される。一方、図１０（Ｂ）は、“Camera control”をクリックした状態を示しており、“Camera control”欄の下にメニューが表示される。また、図１０（Ｃ）はパネル“Camera control”をドラッグした状態を示しており、ドラッグすることによりパネル“Camera control”をフローティングウィンドウにすることができる。
【００６２】
図１１は、パネル“View”をクリックした場合に“Screen Mode”、“View Size” “Image Codec”、“Frame Rate”などのメニューが表示された状態を示している。“Screen Mode”メニューでは、表示モードをノーマルとフルスクリーンに変更できる。“View Size”では、画像の1/4,1/2,等倍,Fitモードを指定できる。Fitモードは現在の表示エリアの大きさに合わせて画像を表示する。“Image Codec” メニューでは、Codecの変更を行うことができる。“Frame Rate”メニューでは、JPEGのフレームレートを変更することができる。動画保存ボタンは動画の保存に、静止画保存ボタンは静止画の保存のために用いる。その他、マイクボリュームスライダー、マイクミュートオン/オフボタン、音声ボリュームスライダー、音声ミュートオン/オフボタン等が設けられている。
【００６３】
図１２は、パネル“Camera”をクリックした場合に表示されるメニューを示している。“Operation Mode”メニューでは、画像上での操作モード切替を行うことができる。パン、チルト制御ボタンでは、矢印方向のボタンを操作することにより、パン、チルト方向を指定することができる。パン、チルト制御ボタンの真中に位置するボタンは、ホームポジションボタンである。ズームボタンは、カメラ端末装置２００のズームを指定するボタンであって、光学ズームとデジタルズームの境界が分かるように構成されている。ズームボタンの「W」、「T」を押し続けるとズーム操作が継続して行われる。また、フォーカスボタンは、フォーカスを「遠距離」、「近距離」に設定するために用いられる。その他、ＯＮＥ ＰＵＳＨ ＡＵＴＯ ＦＯＣＵＳボタン、排他制御の制御権獲得ボタン等の各種ボタンが設けられている。
【００６４】
図１３は、“Preset
position”、“Trigger”、“Other”、“information”をクリックした場合に表示される各メニューを示している。“Preset
position”は、予め定められた複数の撮影方向の画像をサムネイル表示したもので、サムネイル画像の１つをクリックして選択することにより、カメラ端末装置２００を選択したサムネイル画像の方向に向けることができる。
【００６５】
（６）第１のパノラマ画像上での撮影方向の指定
次に、図１４〜図１８に基づいて、第１のパノラマ画像の表示について説明する。図１４は、モニター３２０の表示画面において、操作パネルの“Preset position”をクリックして第１のパノラマ画像を表示した状態を示す模式図である。なお、操作パネルの右側にはライブ映像が表示されている。上述したように、“Preset position”欄をドラッグして移動することにより、図１５に示すように、第１のパノラマ画像が表示されたサブパネルを操作パネルの外に配置することができる。また、第１のパノラマ画像が表示されたサブパネルは表示画面内で移動することができる。
【００６６】
図１６は、第１のパノラマ画像が表示されたサブパネルを詳細に示す模式図である。第１のパノラマ画像には、右側のライブ映像で表示されている画像の方向（カメラ端末装置２００の撮像光学系の光軸の向き）が、＋印によって示されている。また、図１６に示すように、第１のパノラマ画像の右上のパノラマ切替釦をクリックすることにより、第１のパノラマ画像を第２のパノラマ画像に切換えることができる。
【００６７】
図１７は、第１のパノラマ画像を用いてライブ映像の方向を変更する操作を示している。カメラ端末装置２００のパン・チルト方向を変更する場合、上述したパン、チルト制御ボタンによって行うことができるが、第１のパノラマ画像中の任意の点を指定することによっても行うことができる。図１７の状態では、＋印の方向にカメラ端末装置２００の撮像光学系の光軸が向けられ、その方向のライブ映像が表示されている。この状態で図１７の第１のパノラマ画像に示す●印の部分をクリックすると、ユーザ操作に応じた操作信号ＵＳが制御部３１０に送られて、これに基づいてカメラ端末装置２００の撮像方向制御部２０４が制御されることにより、●印の方向にカメラ端末装置２００の撮像光学系の光軸が向けられる。従って、操作パネルの右側に表示されるライブ映像は、●印の方向の映像に切り換わる。
【００６８】
これにより、ユーザは、第１のパノラマ画像中の任意の点を指定することにより、カメラ端末装置２００のパン・チルト方向を指定することができる。第１のパノラマ画像には、カメラ端末装置２００が撮影可能なパン・チルト方向の映像が全て含まれていることから、ユーザは、第１のパノラマ画像上でカメラ端末装置２００の方向を指定することで、所望の方向のライブ映像を表示することができる。なお、クリックする位置を示す＋印の代わりに、所定範囲を囲む枠で領域指定して光軸の向きを制御するようにしても良い。
【００６９】
第１のパノラマ画像上でカメラ端末装置２００の方向を指定した場合に、第１のパノラマ画像の表示状態は変わらずにライブ映像のみが切り換わるモードと、第１のパノラマ画像が回転するモードがある。第１のパノラマ画像が回転するモードでは、図１８に示すように、現在ライブ映像が表示されている位置（＋印）は第１のパノラマ画像の中心から上方に向かう直線Ｌ上に位置するように第１のパノラマ画像の角度位置が設定される。次に第１のパノラマ画像上で●印をクリックすると、操作パネルの右側に表示されるライブ映像は、●印の方向の映像に切り換わり、同時に第１のパノラマ画像において●印の位置が直線Ｌ上に位置するように第１のパノラマ画像が回転する。従って、ユーザは、第１のパノラマ画像を見ることで、ライブ映像の方向が第１のパノラマ画像の直線Ｌ上であることを即座に認識することができる。
【００７０】
第２のパノラマ画像においても同様に、ユーザは、第２のパノラマ画像中の任意の点を指定することにより、カメラ端末装置２００のパン方向を指定することができ、これに基づいてライブ映像の方向を切換えることができる。
【００７１】
（７）ポップアップ表示による制御
次に、本実施形態のシステムにおいて、ポップアップ表示による制御について説明する。上述したように、本実施形態のシステムでは、ネットワーク５００を介して、複数のカメラ端末装置２００にセンターサーバー３００、及びクライアント４００が接続されている。このため、センターサーバー３００またはクライアント４００では、複数のカメラ端末装置２００のそれぞれで撮像されたライブ映像を表示することができる。
【００７２】
図１９は、複数のカメラ端末装置２００のそれぞれで撮像されたライブ映像をモニタ３２０に表示している様子を示す模式図である。ここでは、４つのカメラ端末装置２００で撮像された４つのライブ映像（ライブ映像１〜４）を表示している様子を示している。
【００７３】
図１９に示すように、４つのライブ映像１〜４の下方には、第２のパノラマ画が表示されている。図１７で説明した手法と同様にして、第２のパノラマ画上で任意の位置をクリックすることにより、４つのカメラ端末装置２００の撮像方向を制御することができる。この際、任意の１つのライブ映像を撮像する１つのカメラ端末装置２００を選択して撮像方向を制御することができる。
【００７４】
一方、システムサーバー３００が複数備えられており、複数のユーザが各カメラ端末装置２００を制御する場合、または１つのシステムサーバー３００と複数のクライアント４００により複数のユーザが各カメラ端末装置２００を制御する場合が考えられる。この場合、複数のユーザが各ライブ映像１〜４に対応するカメラ端末装置２００の撮像方向を制御しようとするため、各ユーザによる特定のカメラ端末装置２００への制御の指示が競合してしまう場合が想定される。このような場合、複数のユーザが同時に１つのカメラ端末装置２００の撮像方向を制御することはできない。このため、本実施形態では、表示されている各ライブ映像について、各ユーザによる制御の指示が競合していない場合は、各ライブ映像１〜４に対応するパノラマ画をポップアップ表示して、そのライブ映像に対応するカメラ端末装置２００の制御が可能であることをユーザに示すようにする。これにより、ユーザは、パノラマ画像がポップアップ表示されたライブ映像については、撮像方向などの各種制御が可能であると認識することができ、パノラマ画を用いて図１７と同様に撮像方向を制御することができる。
【００７５】
図１９の例では、ライブ映像４の下部にライブ映像４に対応するパノラマ画がポップアップ表示されているため、ユーザは、パノラマ画上で任意の点をクリックすることで、ライブ映像４に対応するカメラ端末装置２００の撮像方向を制御することができる。
【００７６】
一方、ライブ映像１〜３については、対応するパノラマ画がポップアップ表示されていないため、ユーザは、図１９の状態では、ライブ映像１〜３に対応するカメラ端末装置２００を制御することはできない。この場合、システムが備える他のシステムサーバ３００、クライアント２００のいずれかのモニタ上ではライブ映像１〜３に対応するパノラマ画がポップアップ表示されている。従って、他のシステムサーバ３００またはクライアントを利用しているユーザは、ライブ映像１〜３に対応するカメラ端末装置２００をの撮像方向を制御することができる。ここで、複数存在するシステムサーバ３００、クライアント２００では、所定時間毎にライブ映像１〜４に対応するパノラマ画を交代でポップアップ表示するものとすることができる。これにより、ユーザは自身が操作する装置（クライアント２００またはセンターサーバ３００）において、所定時間毎にパノラマ画がポップアップされた際に対応するカメラ端末装置２００の撮像方向を制御することができる。
【００７７】
図２０は、パノラマ画のポップアップ表示を画面の下部にまとめて表示する例を示している。図２０の例では、ライブ映像３に対応するパノラマ画とライブ映像４に対応するパノラマ画がポップアップ表示されている。このため、ユーザは、ライブ映像３に対応するパノラマ画とライブ映像４に対応するパノラマ画の一方において、任意の点をクリックすることで、図１７と同様にカメラ端末装置２００の撮像方向を制御することができる。図２０に示すように、ユーザがライブ映像４に対応するパノラマ画上で撮像方向を操作した場合は、ライブ映像４の輪郭が太線で表示されて、現在撮像方向が操作されているライブ映像が「ライブ映像４」であることが示される。これにより、ユーザは複数のライブ映像のうち、撮像方向を操作しているライブ映像を視覚的に認識することができる。なお、ポップアップ表示されるパノラマ画が３つ以上になった場合は、ライブ映像の下方に重ねて表示することで、全てのパノラマ画像を表示することが可能である。
【００７８】
この場合、複数のユーザによる操作指示の競合を避けるために、センターサーバー３００が、ネットワーク５００を介して特定のカメラ端末装置２００の制御が可能である旨を示す信号を生成する。センターサーバー３１０の制御部３１０は、複数のライブ映像１〜４のうち、カメラ端末装置２００を制御可能なライブ映像についてはパノラマ画をポップアップ表示する旨の指令を表示処理部３０５に送る。表示処理部３０５では、パノラマ画をライブ映像とともにポップアップ表示するようにモニタ３２０を動作させる。これにより、センターサーバー３００を操作しているユーザには、ポップアップ表示されたパノラマ画に対応するカメラ端末装置２００が制御可能であることが認識される。また、制御部３１０は、上述のようにコマンド信号ＣＭを生成して、ネットワークインタフェース部３０１を介してカメラ端末装置２００に供給し、カメラ端末装置２０の動作を制御する。この際、制御部３１０は、ポップアップ表示をしていないライブ映像に対応するカメラ端末装置２００に対しては、その動作を制御するためのコマンド信号を生成しないことで、そのカメラ端末装置２００が制御できないようにする。更に、制御部３１０は、いずれかのライブ映像に対応するカメラ端末装置２００が制御された場合は、対応するライブ映像を認識させるため、図２０に示すような太線の輪郭を表示する旨の指令を表示制御部３０５へ送る。クライアント４００の処理についても同様であり、クライアントは、センターサーバー３００から特定のカメラ端末装置２００の制御が可能である旨を示す信号を受信した場合は、制御部３１０から表示処理部３０５へ、複数のライブ映像１〜４のうちカメラ端末装置２００を制御可能なライブ映像についてはパノラマ画をポップアップ表示する旨の指令を送る。これにより、クライアント４００においても、ポップアップ表示されたパノラマ画に対応するカメラ端末装置２００が制御可能であることを表示することができる。
【００７９】
なお、上述の例では、制御可能なカメラ端末装置２００に対応するパノラマ画をポップアップ表示とすることで、ユーザに対してそのカメラ端末装置２００の制御が可能であることを認識させるようにしたが、他の手法を用いてもよい。例えば、一覧表示されたライブ映像に対応するパノラマ画像を全て表示し、制御できないカメラ端末装置２００に対応するパノラマ画をハーフトーン表示したり、制御可能なカメラ端末装置２００に対応するパノラマ画の輪郭を太線で強調して表示するようにしても良い。
【００８０】
以上説明したように本実施形態によれば、全体画像（パノラマ画像）の表示状態をみれば、対応するカメラ端末装置２００を操作可能であるかどうかを即座に認識することができる。また、パノラマ画像上の任意の点をクリックすることで撮像方向を制御できるため、現在表示されているライブ画像の範囲外にも直感的にカメラ操作を迅速に行うことが可能である。また、複数のカメラで撮影された画像を一覧表示している場合、対応する全体画像（パノラマ画像）の表示状態を見れば、どのカメラが操作可能であるかすぐに分かり、かつ、直感的に操作可能である。更に、一覧表示されている画像には表示されていない箇所を撮影したい場合に、どのカメラかを意識することなく、全体画像上で指示することにより、容易に撮影位置を指定可能である。
【００８１】
従って、複数のカメラ端末装置２００がシステムサーバ３００、クライアント２００に接続されており、かつ、現に撮影されている画像では所望箇所が撮影されていないときに、全体画像をみれば、どのカメラを制御すれば所望箇所を撮影可能かどうか把握でき、かつ、迅速に操作可能である。
【００８２】
なお、上述した説明では、複数のユーザが各カメラ端末装置２００の撮像方向を制御する場合について説明したが、各カメラ端末装置２００の撮像方向が固定されており、全体画像の中からユーザの指示に応じた領域の画像のみを切り出して表示するシステム（デジタル的にパン、チルトの制御を行うシステム）への適用も可能である。このシステムは、例えば、システムサーバ３００の制御部３１０がユーザによる撮像方向の操作入力に応じて、全体画像の中から切り出す範囲を指定して表示処理部３０５による表示制御を行うことで実現される。この場合においても、各ユーザによる特定のカメラ端末装置２００への制御の指示が競合することが想定されるが、上述したポップアップ表示を行うことにより、ユーザはデジタル的なパン、チルトの制御が可能か否かを認識することができ、ライブ映像の撮像範囲をデジタル的に制御することができる。以上のように、本システムは、メカ的に撮像方向を制御するシステムのみならず、デジタル的に撮像方向を制御するシステムへの適用が可能である。
【００８３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００８４】
１００ 撮像システム
２００ カメラ端末装置
３００ センターサーバー
３０１ ネットワークインターフェース部
３０５ 表示処理部
３１０ 制御部
５００ ネットワーク
【技術分野】
【０００１】
本発明は、制御装置、カメラシステム及びプログラムに関する。
【背景技術】
【０００２】
従来、例えば下記の特許文献１に記載されているように、カメラを複数のユーザが操作できる場合に、複数のユーザからの操作が衝突することを防ぐため、操作したいユーザに一定期間、カメラの制御権を与えるカメラ制御システムが知られている。特許文献１には、カメラ制御権を有する場合に、操作部を表示し、カメラ制御権を有さない場合に、操作部を表示しないように制御していることが記載されている。また、下記の特許文献１に記載されているように、複数のカメラからの映像を一覧表示し、操作可能な場合と操作不可の場合に表示状態を変えるカメラ制御システムが知られている。特許文献２には、操作不可の場合、操作部をグレー表示するように制御していることが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１９４２１７号公報
【特許文献２】特開平９−２１４８１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記文献に記載された技術では、表示画面を操作可能であるかをユーザが認識することができるが、表示画面と連携して操作可能であるか否かが表示されるものではないため、ユーザが操作可能であるか否かを直に認識することができなかった。また、表示画面には、現在撮影されているライブ映像のみが表示されるため、撮影されているライブ映像を超えた範囲を撮影するように直感的に操作することができなかった。更には、複数の画像を一覧表示している場合には、どのカメラを操作すれば、所望箇所を撮影できるかを認識することが困難であった。
【０００５】
そこで、本発明は、上記課題に鑑みてなされたものであり、本発明の目的とするところは、表示されている画像に対応するカメラが制御可能であるかを確実に認識できるとともに、表示されている画像が全体画像のどの範囲に位置するかを確実に認識することが可能な、新規かつ改良された制御装置、カメラシステム及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある観点によれば、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、前記表示制御部は、前記制御部による制御が可能か否かに応じて前記全体画像の表示状態を変更する、制御装置が提供される。
【０００７】
また、前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御するものであってもよい。
【０００８】
また、前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示するものであってもよい。
【０００９】
また、前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とするものであってもよい。
【００１０】
また、前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更するものであってもよい。
【００１１】
また、上記課題を解決するために、本発明の別の観点によれば、画像を撮像するカメラと、前記カメラを制御する制御装置とを有するカメラシステムであって、前記制御装置は、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、前記表示制御部は、前記制御部による制御が可能か否かに応じて前記パノラマ画像の表示状態を変更する、カメラシステムが提供される。
【００１２】
また、前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御するものであってもよい。
【００１３】
また、前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示するものであってもよい。
【００１４】
また、前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とするものであってもよい。
【００１５】
また、前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更するものであってもよい。
【００１６】
また、上記課題を解決するために、本発明の別の観点によれば、カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する手段、前記全体画像上で指定された位置に対応する領域を変化させるように制御する手段、前記カメラの制御が可能か否かに応じて前記全体画像の表示状態を変更する手段、としてコンピュータを機能させるためのプログラムが提供される。
【発明の効果】
【００１７】
本発明によれば、表示されている画像に対応するカメラが制御可能であるかを確実に認識できるとともに、表示されている画像が全体画像のどの範囲に位置するかを確実に認識することが可能となる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態に係る撮像システムの全体構成を示す模式図である。
【図２】図１のシステムにおいて、カメラ端末装置とセンターサーバーの構成を詳細に示す模式図である。
【図３】カメラ端末装置２００のパン動作、チルト動作を説明するための模式図である。
【図４】パノラマ画と俯瞰画の表示状態を示す模式図である。
【図５】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図６】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図７】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図８】俯瞰画信号ＤＦを生成する処理を説明するための模式図である。
【図９】モニターの表示画面を示す模式図である。
【図１０】操作パネルによる操作を説明するための模式図である。
【図１１】パネル“View”をクリックした場合に“Screen Mode”、“View Size” “Image Codec”、“Frame Rate”などのメニューが表示された状態を示す模式図である。
【図１２】パネル“Camera”をクリックした場合に表示されるメニューを示す模式図である。
【図１３】“Presetposition”、“Trigger”、“Other”、“information”をクリックした場合に表示される各メニューを示す模式図である。
【図１４】俯瞰画像の表示について説明するための模式図である。
【図１５】俯瞰画像の表示について説明するための模式図である。
【図１６】俯瞰画像の表示について説明するための模式図である。
【図１７】俯瞰画像の表示について説明するための模式図である。
【図１８】俯瞰画像の表示について説明するための模式図である。
【図１９】複数のカメラ端末装置のそれぞれで撮像されたライブ映像をモニタに表示している様子を示す模式図である。
【図２０】パノラマ画のポップアップ表示を画面の下部にまとめて表示する例を示す模式図である。
【発明を実施するための形態】
【００１９】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２０】
なお、説明は以下の順序で行うものとする。
１．第１の実施の形態（カメラ端末装置とサーバーからなる撮像システムの例）
（１）撮像システムの構成例
（２）カメラ端末装置とセンターサーバーの構成例
（３）第１のパノラマ画像及び第２のパノラマ画像の表示動作について
（４）第１のパノラマ画像を生成する処理について
（５）ＧＵＩについて
（６）第１のパノラマ画像上での撮影方向の指定
（７）ポップアップ表示による制御
【００２１】
＜１．第１の実施形態＞
（１）撮像システムの構成例
図１は、本発明の一実施形態に係る撮像システムの全体構成を示す模式図である。撮像システム１００は、カメラ端末装置（ＩＰカメラ）２００、センターサーバー３００、クライアント４００を有しており、複数のカメラ端末装置２００、センターサーバー３００及びクライアント４００は、ネットワーク５００を介して接続されている。また、ネットワーク５００には、プロキシサーバー６００が接続されており、プロキシサーバー６００には複数のカメラ端末装置２００が接続されている。また、センターサーバー３００にはモニター３２０が接続されている。本実施形態において、カメラ端末装置２００は、例えば屋内又は屋外に設置される監視カメラであって、カメラ端末装置２００で取得した画像をセンターサーバー３００のモニタ３２０に表示することで、カメラ端末装置２００が設置された領域を監視できる。クライアント４００は、ネットワーク５００を介してカメラ端末装置２００、センターサーバー３００、またはプロキシサーバー６００と接続される。また、クライアント４００は、後述するセンターサーバ３００の機能とモニタ３２０の機能を備えるものであっても良い。カメラ端末装置２００で撮影された映像は、ネットワーク５００を介してクライアント４００に送られ、クライアント４００の表示画面には後述するライブ映像とともに第１のパノラマ画像、第２のパノラマ画像が表示される。なお、カメラ端末装置２００の例として、IPカメラをあげているが、これに限定されず、アナログカメラであってもよい。
パノラマ画像（全景画像、全体画像）は、カメラ端末装置２００で撮像可能な範囲を示している。パノラマ画像には、様々な形状があり、例えば、図４のように、円形のパノラマ画像や長方形のパノラマ画像、円筒面上に投射したような輪っか状のパノラマ画像などがある。以下、実施形態において、第１のパノラマ画像及び第２のパノラマ画像の例として、それぞれ円形のパノラマ画像及び長方形のパノラマ画像をあげて説明する。
【００２２】
（２）カメラ端末装置とセンターサーバーの構成例
図２は、図１のシステムにおいて、カメラ端末装置２００とセンターサーバー３００の構成を詳細に示す模式図である。図２に示すカメラ端末装置２００またはセンターサーバー３００の各構成要素は、ハードウェア（回路など）または、ＣＰＵなどの演算処理装置とこれを機能させるためのソフトウェア（プログラム）によって構成することができる。カメラ端末装置２００のカメラ部２０１は、撮像光学系を含み、後述する端末制御部２１０から供給された撮像制御信号ＣＴaに基づいて撮像動作を行い、映像信号Ｄcamを生成する。また、カメラ部２０１は、生成した映像信号Ｄcamを、バス２２０を介して信号処理部２０２に供給する。なお、バス２２０には、メモリ部２０３、撮像方向制御部２０４、ネットワークインタフェース部２０６、記憶部２０７、端末制御部２１０も接続されている。
【００２３】
信号処理部２０２は、映像信号Ｄcamの圧縮処理を行い、得られた映像符号化信号ＤＶをメモリ部２０３に記憶させる。また、カメラ部２０１の撮像方向を順次移動して得られた映像信号Ｄcamを用いて第１のパノラマ画の映像信号（以下「第１のパノラマ画信号という」ＤＦ及び第２のパノラマ画の映像信号（以下「第２のパノラマ画信号」という）ＤＰを生成して、記憶部２０７に記憶させる。なお、映像信号Ｄcamの圧縮処理や、第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰの生成は、後述する端末制御部２１０から供給された信号処理制御信号ＣＴbに基づいて行う。
【００２４】
撮像方向制御部２０４は、カメラ部２０１の撮像方向を、後述する端末制御部２１０から供給された方向制御信号ＣＴcによって指示された方向に移動させるため、撮像方向を移動する際の速度や加速度の計算を行う。また、計算結果に基づきパン動作を行うための駆動信号ＭＤpやチルト動作を行うための駆動信号ＭＤtを生成して、撮像方向調整部２０５に供給する。また、撮像方向制御部２０４は、カメラ部２０１の撮像方向がいずれの方向であるかを示すカメラ位置情報信号ＰＭを生成して、端末制御部２１０に供給する。
【００２５】
撮像方向調整部２０５は、カメラ部２０１を左右方向に移動させるパン動作モータと、カメラ部２０１を上下方向に移動させるチルト動作モータを有している。撮像方向調整部２０５は、駆動信号ＭＤpによってパン動作モータ、駆動信号ＭＤtによってチルト動作モータをそれぞれ駆動して、カメラ部２０１の撮像方向を方向制御信号ＣＴcによって指示された方向に調整する。また、撮像方向調整部２０５は、動作範囲が制限されることなくエンドレスにパン動作を行うものとする。
【００２６】
図３は、カメラ端末装置２００のパン動作、チルト動作を説明するための模式図であって、カメラ端末装置２００を天井などに装着した場合を示している。ここで、図３（Ｂ）は、本実施形態に係るカメラ端末装置２００のパン・チルト動作を示している。一方、図３（Ａ）は、比較のため、一般的なカメラ端末装置のパン・チルト動作を示している。図３（Ａ）に示すように、一般的なカメラ端末装置では、パン動作を３６０°のエンドレスで行い、チルト動作については、鉛直方向から水平方向までの９０°の範囲で行う。これに対し、本実施形態に係るカメラ端末装置２００は、パン動作を３６０°のエンドレスで行うとともに、チルト動作については、鉛直方向を中心として２２０°の範囲で行うことができる。従って、後述する手法により第１のパノラマ画の映像信号ＤＦを生成して記憶部２０７に記憶することができる。後述の第１のパノラマ画像は、円形のパノラマ画像であり、円の中央付近を中心をまたいで、撮像方向を操作する場合に、本実施形態に係るカメラ端末装置２００は、目的撮像方向まで最短でメカ的にも移動することができる。一方、一般的なカメラ端末装置では、円の中心をまたぐようにはカメラ撮像方位をメカ的に移動させることができない。
【００２７】
ネットワークインタフェース部２０６は、カメラ端末装置２００とセンターサーバー３００との間で、ネットワーク５００を介して通信を行うためのインタフェースである。
【００２８】
端末制御部２１０は、撮像制御信号ＣＴaによってカメラ部２０１を制御し、信号処理制御信号ＣＴbによって信号処理部２０２を制御し、方向制御信号ＣＴcによって撮像方向制御部２０４を制御して、撮像方向を順次移動しながら撮像を行う。そして、端末制御部２１０は、得られた映像信号Ｄcamに基づいて第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを生成させて記憶部２０７に記憶させる。
【００２９】
本実施形態に係る撮像システム１００は、映像信号Ｄcamによるライブ映像と、第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰによる第１のパノラマ画または第２のパノラマ画を共にカメラ端末装置２００からセンターサーバー３００に送信し、モニター３２０に表示することができる。尚、本明細書において、第１のパノラマ画像及び第２のパノラマ画像を全体画像と称する場合がある。図４は、第２のパノラマ画と第１のパノラマ画の表示状態を示す模式図である。センターサーバー３００は、ユーザの選択に応じて、第１のパノラマ画または第２のパノラマ画の一方をモニター３２０にライブ映像とともに表示することができる。また、センターサーバー３００は、第１のパノラマ画及び第２のパノラマ画の双方をライブ映像とともに表示するように構成されていても良い。なお、図４の右図では、中央付近の画像が欠けた円形のパノラマ画像を第１のパノラマ画像としているが、これに限定されず、中央付近の画像が欠けていない円形のパノラマ画像を第１のパノラマ画像としてもよい。
【００３０】
カメラ端末装置２００は、天井などに設置され、カメラ端末装置２００の下方向の画像を表示する。このため、図４に示すように、第１のパノラマ画は、カメラ端末装置２００から下向きに延在する鉛直線を中心として、パン３６０°、チルト２２０°の範囲で取得され、その輪郭は円形となる。
【００３１】
また、撮像方向調整部２０５は、上述のようにエンドレスにパン動作を行うことができるように構成されている。したがって、記憶部２０７に記憶する第２のパノラマ画像は、例えば図４に示すように、画像が重複しないように、一方の端部が基準方向から「＋１８０°」の角度差、他方の端部が基準方向から「−１８０°」の角度差を有するものとする。また、パン動作の動作範囲が制限されないので、例えば動作範囲が制限されている場合のように、動作範囲の中央位置を基準方向とすることができない。したがって、基準方向を予め設定しておき、この基準方向が第２のパノラマ画像の中央位置となるように第２のパノラマ画信号ＤＰを生成する。また、撮像方向制御部２０４は、カメラ位置情報信号ＰＭとして、予め設定された基準方向に対する撮像方向の例えば角度差を示す信号を生成する。
【００３２】
このように基準方向を予め設定しておくものとすれば、第２のパノラマ画像がいずれの方向を基準とした撮像動作によって生成された画像であるかを判別する必要がない。また、カメラ位置情報信号ＰＭによって、基準方向に対する撮像方向の角度差を示すものとすれば、第２のパノラマ画像上におけるカメラ位置情報信号ＰＭに基づく撮像方向の位置を容易に判別できる。
【００３３】
チルト動作においても、予め基準方向を設定しておき、カメラ位置情報信号ＰＭによって、基準方向に対する撮像方向の角度差を示すものとする。これにより、第１のパノラマ画像、第２のパノラマ画像の双方において、カメラ位置情報信号ＰＭに基づく撮像方向の位置を容易に判別できる。なお、チルト動作については、カメラ端末装置２００が天井に設置されている場合、鉛直方向を基準方向とすることができる。
【００３４】
端末制御部２１０は、ネットワークインタフェース部２０６を介してセンターサーバー３００から供給されたコマンド信号ＣＭを解析して、撮像制御信号ＣＴaや信号処理制御信号ＣＴb，方向制御信号ＣＴcの生成を行う。また、メモリ部２０３に記憶されている映像符号化信号ＤＶや、記憶部２０７に記憶されている第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰ、および撮像方向制御部２０４から供給されたカメラ位置情報信号ＰＭをセンターサーバー３００に送出する処理等を行う。
【００３５】
センターサーバー３００のネットワークインタフェース部３０１は、カメラ端末装置２００とセンターサーバー３００とで、ネットワーク５００を介して通信を行うためのインタフェースである。ネットワークインタフェース部３０１は、カメラ端末装置２００から供給された映像符号化信号ＤＶを伸長処理部３０２に供給する。また、ネットワークインタフェース部３０１は、カメラ位置情報信号ＰＭを位置判別処理部３０３に供給し、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを画像処理部３０４に供給する。
【００３６】
伸長処理部３０２は、映像符号化信号ＤＶの伸長処理を行い、得られた映像信号Ｄcamを表示処理部３０５に供給する。
【００３７】
位置判別処理部３０３は、カメラ位置情報信号ＰＭで示された撮像方向が第１のパノラマ画像または第２のパノラマ画像のいずれの位置に対応するか判別して、位置判別結果ＫＰを画像処理部３０４に供給する。ここで、カメラ位置情報信号ＰＭは、上述のように予め設定した基準方向がパン動作、チルト動作の中央位置となるように第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰを生成し、カメラ位置情報信号ＰＭは基準方向と現在の撮像方向の角度差を示すものとすれば、カメラ位置情報信号ＰＭに基づき、現在の撮像方向が俯瞰画像または第２のパノラマ画像のいずれの位置に対応するか容易に判別できる。
【００３８】
画像処理部３０４は、位置判別結果ＫＰに基づいて画像処理を行い、第１のパノラマ画像の第１のパノラマ画信号ＤＦＣ、及び第２のパノラマ画像の第２のパノラマ画信号ＤＰＣを生成する。第２のパノラマ画信号ＤＰＣについては、位置判別結果ＫＰにより判別された位置が中央位置とされた第２のパノラマ画信号ＤＰＣを生成することができる。この場合、画像処理部３０４では、判別された位置と第２のパノラマ画像の中心位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の中央位置となるように第２のパノラマ画像を処理する。すなわち、判別された位置を中央位置として「±１８０°」の第２のパノラマ画像表示画枠を設定して、第２のパノラマ画像表示画枠から外れる差分量分の領域の第２のパノラマ画像を、画像の無い領域に貼り付けることで、判別された位置を中央位置とした第２のパノラマ画像の第２のパノラマ画信号ＤＰＣを生成する。第１のパノラマ画信号ＤＦＣの場合においても、後述する「第１のパノラマ画像を回転させるモード」の場合は、第２のパノラマ画信号ＤＰＣと同様に、判別された位置と第１のパノラマ画のパン方向の基準位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の上に位置するように第１のパノラマ画像を処理する。また、画像処理部３０４は、第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣのそれぞれにおいて、位置判別結果ＫＰに基づく位置（カメラ部２０１の撮像光学系の光軸が向いている位置）を表示する。さらに、画像処理部３０４は、画像処理を行うことにより生成した第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣを表示処理部３０５に供給する。
【００３９】
表示処理部３０５は、伸長処理部３０２から供給された映像信号Ｄcamや、画像処理部３０４から供給された第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣを用いて表示駆動信号ＨＤを生成してモニター３２０に供給する。また、表示処理部３０５は、後述する制御部３１０から供給されたＧＵＩ表示制御信号ＣＴgに基づいて生成したＧＵＩ用映像信号を用いて、表示駆動信号ＨＤを生成してモニター３２０に供給する。表示処理部３０５は、複数のカメラ端末装置２００から送られたライブ映像とパノラマ画をモニター３２０上に一覧表示するように制御することができる。
【００４０】
モニター３２０は、表示駆動信号ＨＤに基づいて、表示素子例えば液晶表示素子やプラズマ表示素子あるいは陰極線管等を駆動して、第１のパノラマ画像、撮像方向を中央位置とした第２のパノラマ画像やカメラ部２０１の撮像画像（ライブ映像）、ＧＵＩ画像等を画面上に表示する。
【００４１】
ユーザインタフェース部３１５は、ＧＵＩが用いられており、モニター３２０を用いてユーザに対する情報の提示を行い、提示された情報に基づき操作入力手段であるポインティングデバイスやキーボード等でユーザ操作が行われたとき、ユーザ操作に応じた操作信号ＵＳを制御部３１０に供給して所望の動作等を行わせる。
【００４２】
制御部３１０は、操作信号ＵＳとモニター３２０の表示状態に基づき、ユーザがどのような処理の選択やどのような処理の実行を要求したか判別して、判別結果に基づき制御信号ＣＴmを生成して各部に供給し、センターサーバー３００の動作を制御する。また、判別結果に基づきコマンド信号ＣＭを生成して、ネットワークインタフェース部３０１を介してカメラ端末装置２００に供給し、カメラ端末装置２０の動作を制御する。さらに、制御部３１０は、ＧＵＩ表示制御信号ＣＴgを生成して表示処理部３０５に供給する。
【００４３】
なお、上述した例では、カメラ端末装置２００が映像信号Ｄcamから第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成したが、センターサーバー３００またはクライアント４００が第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成しても良い。この場合、カメラ端末装置２００のネットワークインタフェース部２０６は、カメラブロック２０１から出力された映像信号Ｄcamをセンターサーバー３００またはクライアント４００へ送る。センターサーバー３００またはクライアント４００は、カメラ端末装置２００と同様の信号処理部を備えることで、第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰを生成することができる。第１のパノラマ画の映像信号ＤＦ及び第２のパノラマ画の映像信号ＤＰは、センターサーバー３００またはクライアント４００が備えるハードディスク等のメモリに記憶される。
【００４４】
（３）第１のパノラマ画像及び第２のパノラマ画像の表示動作について
次に、第１のパノラマ画像及び第２のパノラマ画像表示動作について説明する。制御部３１０は、動作開始時に、カメラ端末装置２００に対して、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰとカメラ位置情報信号ＰＭおよび映像符号化信号ＤＶを要求するコマンド信号ＣＭを送信する。カメラ端末装置２００は、記憶部２０７に第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰを記憶しているとき、この第１のパノラマ画信号ＤＦ、第２のパノラマ画信号ＤＰを読み出してセンターサーバー３００に送信する。また、カメラ端末装置２００は、画記憶部２０７に第１のパノラマ画信号ＤＦまたは第２のパノラマ画信号ＤＰが記憶されていないとき、カメラ部２０１や信号処理部２０２および撮像方向制御部２０４を制御して、撮像方向を移動しながら撮像動作を行い、第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰを生成してセンターサーバー３００に送信する。なお、カメラ端末装置２００は、生成した第１のパノラマ画信号ＤＦ及び第２のパノラマ画信号ＤＰは、記憶部２０７に記憶させる。
【００４５】
カメラ端末装置２００は、撮像方向制御部２０４で生成したカメラ位置情報信号ＰＭをセンターサーバー３００に供給する。また、カメラ端末装置２００は、カメラ部２０１の撮像動作を開始して、得られた映像信号Ｄcamを信号処理部２０２で圧縮し映像符号化信号ＤＶをメモリ部２０３に記憶させる。さらに、メモリ部２０３に記憶されている映像符号化信号ＤＶをセンターサーバー３００に供給する。なお、図１に示すように、カメラ端末装置２００とネットワーク５００とがプロキシサーバ６００を介して接続されている場合、カメラ端末装置２００とセンターサーバー３００との間の情報のやり取りは、プロキシサーバ６００を経由して行われる。
【００４６】
センターサーバー３００の位置判別処理部３０３は、カメラ位置情報信号ＰＭで示された撮像方向が第１のパノラマ画像または第２のパノラマ画像のいずれの位置に対応するか判別して、位置判別結果ＫＰを画像処理部３０４に供給する。第２のパノラマ画を例に挙げると、例えばカメラ位置情報信号ＰＭで示す角度差が「０°」であるとき、撮像方向は基準方向に設定されていることから、撮像方向の位置は第２のパノラマ画像の中央位置となっている。
【００４７】
画像処理部３０４は、位置判別結果ＫＰに基づいて画像処理を行う。ここで、位置判別結果ＫＰによって、撮像方向の位置が第２のパノラマ画像の中央位置であることが示されたときは、撮像方向の画像が第２のパノラマ画像の中央となっていることから、第２のパノラマ画像処理を行うことなく、第２のパノラマ画信号ＤＰを第２のパノラマ画信号ＤＰＣとして表示処理部３０５に供給する。一方、撮像方向の位置が第２のパノラマ画像の中央位置でない場合は、判別された撮像方向の位置と第２のパノラマ画像の中心位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の中央位置となるように第２のパノラマ画像を処理し、第２のパノラマ画信号ＤＰＣを生成する。
【００４８】
このため、第２のパノラマ画像においては、例えばカメラ位置情報信号ＰＭで示す角度差が「０°」であるとき、表示処理部３０５からの表示駆動信号ＨＤによって駆動されるモニター３２０の画面上には、カメラ部２０１で撮影された撮像画像と、基準方向が中央位置とされている第２のパノラマ画像、およびＧＵＩに関する画像が表示される。
【００４９】
第１のパノラマ画像の場合、後述する「第１のパノラマ画像を回転させるモード」の場合は、第２のパノラマ画信号ＤＰＣと同様に、判別された位置と第１のパノラマ画像のパン方向の基準位置との差分量を判別して、この判別した差分量に基づいて、判別された位置が画像の下（後述する直線Ｌ上）に位置するように第１のパノラマ画像を回転させ、第１のパノラマ画信号ＤＦＣを生成する。また、画像処理部３０４は、第１のパノラマ画信号ＤＦＣ及び第２のパノラマ画信号ＤＰＣのそれぞれにおいて、位置判別結果ＫＰに基づく撮像方向の位置（カメラ部２０１の撮像光学系の光軸が向いている位置）を表示する。
【００５０】
第１のパノラマ画像及び第２のパノラマ画像のいずれにおいても、予め設定された基準位置を中心位置として固定して表示することもできる。この場合、位置判別結果ＫＰによって判別された位置と予め設定された基準位置との差分量を判別して、この判別された差分量に基づいて、中心位置から差分量だけ離れた位置にカメラの撮像方向（カメラブロックが有する光学系の光軸の方向）が向いていることを示すカーソル、または枠などを第１または第２のパノラマ画像中に表示する。
【００５１】
伸長処理部３０２は、映像符号化信号ＤＶを伸長して、得られた映像信号Ｄcamを表示処理部３０５に供給する。また、制御部３１０は、ＧＵＩ表示を行うためのＧＵＩ表示制御信号ＣＴgを表示処理部３０５に供給する。
【００５２】
（４）第１のパノラマ画像を生成する処理について
次に、第１のパノラマ画信号ＤＦを生成する処理について、図５〜図８に基づいて説明する。第１のパノラマ画像信号ＤＦを生成する際には、第１のパノラマ画像の領域毎に画像を取得する。先ず、図５に示すように、カメラ端末装置２００のズームを固定して、ある任意の間隔でパン、チルトを行い、静止画を取得する。図５中に示す数字は、画像取得の順番を示している。
【００５３】
次に、以下の［１］〜［３］の手順により、静止画像座標系の座標変換を行う。ここでは、図６に示すように、静止画像の各点を、カメラ端末装置２００の回転中心から見た相対位置(x,y,z)に変換する。
［１］ 水平画角thh[degree]、アスペクト比aのカメラの視点を原点に置き、-z方向に向ける。距離Lの位置に被写体平面(x, y, -L)を考えると、見える範囲は 2Lx × 2Ly の長方形になる。ここで、Lx=L・tan(thh/2)、Ly=Lx/aの関係が成立する。
［２］ カメラの姿勢は本来(x, y,
z, p, q, r)であるが、視点の位置が原点に固定されていると考えると、x=y=z=0であり、ここでは(p, q, r) （p: Pan(y軸回転), q: Tilt(x軸回転), r: roll(z軸回転)）のみを考える。
［３］ (2Lx)×(2Ly)の長方形内の点(j, i)を用いると下記の式が成り立つ。
x=Lx × (j-Lx)/Lx
y = Ly × (i - Ly) / Ly
z = -L
［４］ (x, y, z)を用いて以下のRoll変換、Tilt変換、Pan変換式を適用する。
【００５４】
【数１】
【００５５】
ここで得られた(x3,y3,z3)が、静止画像のある点（x,y,z)をカメラの回転中心から見た座標系で表した値となる。
【００５６】
次に、相対位置を緯度、経度に変換する。ここでは、図７に示すように、上記で得られた(x3,y3,z3)を緯度、経度に変換する。(x3, y3, z3)の方向が-zの方向に対して水平方向となす角度が経度であり、またx-z平面となす角度が緯度になり、以下の式で求めることができる。
・緯度(Latitude)
La = tan-1
( y3 / ::sqrt( x3 * x3 + z3 * z3))
・経度(Lo)
0.0 < z3のとき
0.0 < x3の場合 Lo = 90.0 + La
0.0≧x3の場合 Lo = -90.0 - La
0.0 ≧ z3のとき
Lo =
tan-1( x3 / z3) / RAD
ただし、
RAD = π/ 180 (π:円周率)
【００５７】
次に、第１のパノラマ画像への変換を行う。ここでは、図８に示すように、得られた緯度、経度（La,Lo）を、緯度を半径の軸、経度を円周方向の座標系で表す。
【００５８】
以上のようにして、第１のパノラマ画信号ＤＦを生成することができる。
【００５９】
（５）ＧＵＩについて
次に、ＧＵＩについて説明する。図９は、モニター３２０の表示画面を示す模式図である。図９では、通常の画面と全画面表示の双方を示しており、いずれの場合においても、画面左側に操作パネル（コントロールパネル）が表示され、画面右側にライブ映像が表示されている。操作パネルの“Screen Mode”を“Full”にすると全画面表示となる。
【００６０】
図１０は、操作パネルによる操作を説明するための模式図である。操作パネル内は機能毎のパネルとなっており、各パネルを折り畳んで格納することができる。パネルの分類は以下の通りである。
・View
表示に関する設定
・Camera control
カメラ操作に関する設定
・Panorama
パノラマ表示
・Preset position
プリセットに関する設定
・Trigger
トリガーに関する設定
・Other
その他の設定
【００６１】
各パネルをクリックすると、そのパネルが開くように構成されている。図１０（Ａ）は、“View”をクリックした状態を示しており、“View”欄の下にメニューが表示される。一方、図１０（Ｂ）は、“Camera control”をクリックした状態を示しており、“Camera control”欄の下にメニューが表示される。また、図１０（Ｃ）はパネル“Camera control”をドラッグした状態を示しており、ドラッグすることによりパネル“Camera control”をフローティングウィンドウにすることができる。
【００６２】
図１１は、パネル“View”をクリックした場合に“Screen Mode”、“View Size” “Image Codec”、“Frame Rate”などのメニューが表示された状態を示している。“Screen Mode”メニューでは、表示モードをノーマルとフルスクリーンに変更できる。“View Size”では、画像の1/4,1/2,等倍,Fitモードを指定できる。Fitモードは現在の表示エリアの大きさに合わせて画像を表示する。“Image Codec” メニューでは、Codecの変更を行うことができる。“Frame Rate”メニューでは、JPEGのフレームレートを変更することができる。動画保存ボタンは動画の保存に、静止画保存ボタンは静止画の保存のために用いる。その他、マイクボリュームスライダー、マイクミュートオン/オフボタン、音声ボリュームスライダー、音声ミュートオン/オフボタン等が設けられている。
【００６３】
図１２は、パネル“Camera”をクリックした場合に表示されるメニューを示している。“Operation Mode”メニューでは、画像上での操作モード切替を行うことができる。パン、チルト制御ボタンでは、矢印方向のボタンを操作することにより、パン、チルト方向を指定することができる。パン、チルト制御ボタンの真中に位置するボタンは、ホームポジションボタンである。ズームボタンは、カメラ端末装置２００のズームを指定するボタンであって、光学ズームとデジタルズームの境界が分かるように構成されている。ズームボタンの「W」、「T」を押し続けるとズーム操作が継続して行われる。また、フォーカスボタンは、フォーカスを「遠距離」、「近距離」に設定するために用いられる。その他、ＯＮＥ ＰＵＳＨ ＡＵＴＯ ＦＯＣＵＳボタン、排他制御の制御権獲得ボタン等の各種ボタンが設けられている。
【００６４】
図１３は、“Preset
position”、“Trigger”、“Other”、“information”をクリックした場合に表示される各メニューを示している。“Preset
position”は、予め定められた複数の撮影方向の画像をサムネイル表示したもので、サムネイル画像の１つをクリックして選択することにより、カメラ端末装置２００を選択したサムネイル画像の方向に向けることができる。
【００６５】
（６）第１のパノラマ画像上での撮影方向の指定
次に、図１４〜図１８に基づいて、第１のパノラマ画像の表示について説明する。図１４は、モニター３２０の表示画面において、操作パネルの“Preset position”をクリックして第１のパノラマ画像を表示した状態を示す模式図である。なお、操作パネルの右側にはライブ映像が表示されている。上述したように、“Preset position”欄をドラッグして移動することにより、図１５に示すように、第１のパノラマ画像が表示されたサブパネルを操作パネルの外に配置することができる。また、第１のパノラマ画像が表示されたサブパネルは表示画面内で移動することができる。
【００６６】
図１６は、第１のパノラマ画像が表示されたサブパネルを詳細に示す模式図である。第１のパノラマ画像には、右側のライブ映像で表示されている画像の方向（カメラ端末装置２００の撮像光学系の光軸の向き）が、＋印によって示されている。また、図１６に示すように、第１のパノラマ画像の右上のパノラマ切替釦をクリックすることにより、第１のパノラマ画像を第２のパノラマ画像に切換えることができる。
【００６７】
図１７は、第１のパノラマ画像を用いてライブ映像の方向を変更する操作を示している。カメラ端末装置２００のパン・チルト方向を変更する場合、上述したパン、チルト制御ボタンによって行うことができるが、第１のパノラマ画像中の任意の点を指定することによっても行うことができる。図１７の状態では、＋印の方向にカメラ端末装置２００の撮像光学系の光軸が向けられ、その方向のライブ映像が表示されている。この状態で図１７の第１のパノラマ画像に示す●印の部分をクリックすると、ユーザ操作に応じた操作信号ＵＳが制御部３１０に送られて、これに基づいてカメラ端末装置２００の撮像方向制御部２０４が制御されることにより、●印の方向にカメラ端末装置２００の撮像光学系の光軸が向けられる。従って、操作パネルの右側に表示されるライブ映像は、●印の方向の映像に切り換わる。
【００６８】
これにより、ユーザは、第１のパノラマ画像中の任意の点を指定することにより、カメラ端末装置２００のパン・チルト方向を指定することができる。第１のパノラマ画像には、カメラ端末装置２００が撮影可能なパン・チルト方向の映像が全て含まれていることから、ユーザは、第１のパノラマ画像上でカメラ端末装置２００の方向を指定することで、所望の方向のライブ映像を表示することができる。なお、クリックする位置を示す＋印の代わりに、所定範囲を囲む枠で領域指定して光軸の向きを制御するようにしても良い。
【００６９】
第１のパノラマ画像上でカメラ端末装置２００の方向を指定した場合に、第１のパノラマ画像の表示状態は変わらずにライブ映像のみが切り換わるモードと、第１のパノラマ画像が回転するモードがある。第１のパノラマ画像が回転するモードでは、図１８に示すように、現在ライブ映像が表示されている位置（＋印）は第１のパノラマ画像の中心から上方に向かう直線Ｌ上に位置するように第１のパノラマ画像の角度位置が設定される。次に第１のパノラマ画像上で●印をクリックすると、操作パネルの右側に表示されるライブ映像は、●印の方向の映像に切り換わり、同時に第１のパノラマ画像において●印の位置が直線Ｌ上に位置するように第１のパノラマ画像が回転する。従って、ユーザは、第１のパノラマ画像を見ることで、ライブ映像の方向が第１のパノラマ画像の直線Ｌ上であることを即座に認識することができる。
【００７０】
第２のパノラマ画像においても同様に、ユーザは、第２のパノラマ画像中の任意の点を指定することにより、カメラ端末装置２００のパン方向を指定することができ、これに基づいてライブ映像の方向を切換えることができる。
【００７１】
（７）ポップアップ表示による制御
次に、本実施形態のシステムにおいて、ポップアップ表示による制御について説明する。上述したように、本実施形態のシステムでは、ネットワーク５００を介して、複数のカメラ端末装置２００にセンターサーバー３００、及びクライアント４００が接続されている。このため、センターサーバー３００またはクライアント４００では、複数のカメラ端末装置２００のそれぞれで撮像されたライブ映像を表示することができる。
【００７２】
図１９は、複数のカメラ端末装置２００のそれぞれで撮像されたライブ映像をモニタ３２０に表示している様子を示す模式図である。ここでは、４つのカメラ端末装置２００で撮像された４つのライブ映像（ライブ映像１〜４）を表示している様子を示している。
【００７３】
図１９に示すように、４つのライブ映像１〜４の下方には、第２のパノラマ画が表示されている。図１７で説明した手法と同様にして、第２のパノラマ画上で任意の位置をクリックすることにより、４つのカメラ端末装置２００の撮像方向を制御することができる。この際、任意の１つのライブ映像を撮像する１つのカメラ端末装置２００を選択して撮像方向を制御することができる。
【００７４】
一方、システムサーバー３００が複数備えられており、複数のユーザが各カメラ端末装置２００を制御する場合、または１つのシステムサーバー３００と複数のクライアント４００により複数のユーザが各カメラ端末装置２００を制御する場合が考えられる。この場合、複数のユーザが各ライブ映像１〜４に対応するカメラ端末装置２００の撮像方向を制御しようとするため、各ユーザによる特定のカメラ端末装置２００への制御の指示が競合してしまう場合が想定される。このような場合、複数のユーザが同時に１つのカメラ端末装置２００の撮像方向を制御することはできない。このため、本実施形態では、表示されている各ライブ映像について、各ユーザによる制御の指示が競合していない場合は、各ライブ映像１〜４に対応するパノラマ画をポップアップ表示して、そのライブ映像に対応するカメラ端末装置２００の制御が可能であることをユーザに示すようにする。これにより、ユーザは、パノラマ画像がポップアップ表示されたライブ映像については、撮像方向などの各種制御が可能であると認識することができ、パノラマ画を用いて図１７と同様に撮像方向を制御することができる。
【００７５】
図１９の例では、ライブ映像４の下部にライブ映像４に対応するパノラマ画がポップアップ表示されているため、ユーザは、パノラマ画上で任意の点をクリックすることで、ライブ映像４に対応するカメラ端末装置２００の撮像方向を制御することができる。
【００７６】
一方、ライブ映像１〜３については、対応するパノラマ画がポップアップ表示されていないため、ユーザは、図１９の状態では、ライブ映像１〜３に対応するカメラ端末装置２００を制御することはできない。この場合、システムが備える他のシステムサーバ３００、クライアント２００のいずれかのモニタ上ではライブ映像１〜３に対応するパノラマ画がポップアップ表示されている。従って、他のシステムサーバ３００またはクライアントを利用しているユーザは、ライブ映像１〜３に対応するカメラ端末装置２００をの撮像方向を制御することができる。ここで、複数存在するシステムサーバ３００、クライアント２００では、所定時間毎にライブ映像１〜４に対応するパノラマ画を交代でポップアップ表示するものとすることができる。これにより、ユーザは自身が操作する装置（クライアント２００またはセンターサーバ３００）において、所定時間毎にパノラマ画がポップアップされた際に対応するカメラ端末装置２００の撮像方向を制御することができる。
【００７７】
図２０は、パノラマ画のポップアップ表示を画面の下部にまとめて表示する例を示している。図２０の例では、ライブ映像３に対応するパノラマ画とライブ映像４に対応するパノラマ画がポップアップ表示されている。このため、ユーザは、ライブ映像３に対応するパノラマ画とライブ映像４に対応するパノラマ画の一方において、任意の点をクリックすることで、図１７と同様にカメラ端末装置２００の撮像方向を制御することができる。図２０に示すように、ユーザがライブ映像４に対応するパノラマ画上で撮像方向を操作した場合は、ライブ映像４の輪郭が太線で表示されて、現在撮像方向が操作されているライブ映像が「ライブ映像４」であることが示される。これにより、ユーザは複数のライブ映像のうち、撮像方向を操作しているライブ映像を視覚的に認識することができる。なお、ポップアップ表示されるパノラマ画が３つ以上になった場合は、ライブ映像の下方に重ねて表示することで、全てのパノラマ画像を表示することが可能である。
【００７８】
この場合、複数のユーザによる操作指示の競合を避けるために、センターサーバー３００が、ネットワーク５００を介して特定のカメラ端末装置２００の制御が可能である旨を示す信号を生成する。センターサーバー３１０の制御部３１０は、複数のライブ映像１〜４のうち、カメラ端末装置２００を制御可能なライブ映像についてはパノラマ画をポップアップ表示する旨の指令を表示処理部３０５に送る。表示処理部３０５では、パノラマ画をライブ映像とともにポップアップ表示するようにモニタ３２０を動作させる。これにより、センターサーバー３００を操作しているユーザには、ポップアップ表示されたパノラマ画に対応するカメラ端末装置２００が制御可能であることが認識される。また、制御部３１０は、上述のようにコマンド信号ＣＭを生成して、ネットワークインタフェース部３０１を介してカメラ端末装置２００に供給し、カメラ端末装置２０の動作を制御する。この際、制御部３１０は、ポップアップ表示をしていないライブ映像に対応するカメラ端末装置２００に対しては、その動作を制御するためのコマンド信号を生成しないことで、そのカメラ端末装置２００が制御できないようにする。更に、制御部３１０は、いずれかのライブ映像に対応するカメラ端末装置２００が制御された場合は、対応するライブ映像を認識させるため、図２０に示すような太線の輪郭を表示する旨の指令を表示制御部３０５へ送る。クライアント４００の処理についても同様であり、クライアントは、センターサーバー３００から特定のカメラ端末装置２００の制御が可能である旨を示す信号を受信した場合は、制御部３１０から表示処理部３０５へ、複数のライブ映像１〜４のうちカメラ端末装置２００を制御可能なライブ映像についてはパノラマ画をポップアップ表示する旨の指令を送る。これにより、クライアント４００においても、ポップアップ表示されたパノラマ画に対応するカメラ端末装置２００が制御可能であることを表示することができる。
【００７９】
なお、上述の例では、制御可能なカメラ端末装置２００に対応するパノラマ画をポップアップ表示とすることで、ユーザに対してそのカメラ端末装置２００の制御が可能であることを認識させるようにしたが、他の手法を用いてもよい。例えば、一覧表示されたライブ映像に対応するパノラマ画像を全て表示し、制御できないカメラ端末装置２００に対応するパノラマ画をハーフトーン表示したり、制御可能なカメラ端末装置２００に対応するパノラマ画の輪郭を太線で強調して表示するようにしても良い。
【００８０】
以上説明したように本実施形態によれば、全体画像（パノラマ画像）の表示状態をみれば、対応するカメラ端末装置２００を操作可能であるかどうかを即座に認識することができる。また、パノラマ画像上の任意の点をクリックすることで撮像方向を制御できるため、現在表示されているライブ画像の範囲外にも直感的にカメラ操作を迅速に行うことが可能である。また、複数のカメラで撮影された画像を一覧表示している場合、対応する全体画像（パノラマ画像）の表示状態を見れば、どのカメラが操作可能であるかすぐに分かり、かつ、直感的に操作可能である。更に、一覧表示されている画像には表示されていない箇所を撮影したい場合に、どのカメラかを意識することなく、全体画像上で指示することにより、容易に撮影位置を指定可能である。
【００８１】
従って、複数のカメラ端末装置２００がシステムサーバ３００、クライアント２００に接続されており、かつ、現に撮影されている画像では所望箇所が撮影されていないときに、全体画像をみれば、どのカメラを制御すれば所望箇所を撮影可能かどうか把握でき、かつ、迅速に操作可能である。
【００８２】
なお、上述した説明では、複数のユーザが各カメラ端末装置２００の撮像方向を制御する場合について説明したが、各カメラ端末装置２００の撮像方向が固定されており、全体画像の中からユーザの指示に応じた領域の画像のみを切り出して表示するシステム（デジタル的にパン、チルトの制御を行うシステム）への適用も可能である。このシステムは、例えば、システムサーバ３００の制御部３１０がユーザによる撮像方向の操作入力に応じて、全体画像の中から切り出す範囲を指定して表示処理部３０５による表示制御を行うことで実現される。この場合においても、各ユーザによる特定のカメラ端末装置２００への制御の指示が競合することが想定されるが、上述したポップアップ表示を行うことにより、ユーザはデジタル的なパン、チルトの制御が可能か否かを認識することができ、ライブ映像の撮像範囲をデジタル的に制御することができる。以上のように、本システムは、メカ的に撮像方向を制御するシステムのみならず、デジタル的に撮像方向を制御するシステムへの適用が可能である。
【００８３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００８４】
１００ 撮像システム
２００ カメラ端末装置
３００ センターサーバー
３０１ ネットワークインターフェース部
３０５ 表示処理部
３１０ 制御部
５００ ネットワーク
【特許請求の範囲】
【請求項１】
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、
前記表示制御部は、前記制御部による制御が可能か否かに応じて前記全体画像の表示状態を変更する、制御装置。
【請求項２】
前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御する、請求項１に記載の制御装置。
【請求項３】
前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示する、請求項２に記載の制御装置。
【請求項４】
前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とする、請求項２に記載の制御装置。
【請求項５】
前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更する、請求項２に記載の制御装置。
【請求項６】
画像を撮像するカメラと、前記カメラを制御する制御装置とを有するカメラシステムであって、
前記制御装置は、
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、
前記表示制御部は、前記制御部による制御が可能か否かに応じて前記パノラマ画像の表示状態を変更する、カメラシステム。
【請求項７】
前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御する、請求項６に記載のカメラシステム。
【請求項８】
前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示する、請求項７に記載のカメラシステム。
【請求項９】
前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とする、請求項７に記載のカメラシステム。
【請求項１０】
前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更する、請求項７に記載のカメラシステム。
【請求項１１】
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する手段、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する手段、
前記カメラの制御が可能か否かに応じて前記全体画像の表示状態を変更する手段、
としてコンピュータを機能させるためのプログラム。
【請求項１】
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、
前記表示制御部は、前記制御部による制御が可能か否かに応じて前記全体画像の表示状態を変更する、制御装置。
【請求項２】
前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御する、請求項１に記載の制御装置。
【請求項３】
前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示する、請求項２に記載の制御装置。
【請求項４】
前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とする、請求項２に記載の制御装置。
【請求項５】
前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更する、請求項２に記載の制御装置。
【請求項６】
画像を撮像するカメラと、前記カメラを制御する制御装置とを有するカメラシステムであって、
前記制御装置は、
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する表示制御部と、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する制御部と、を有し、
前記表示制御部は、前記制御部による制御が可能か否かに応じて前記パノラマ画像の表示状態を変更する、カメラシステム。
【請求項７】
前記制御部は、前記全体画像上で指定された位置に対応する領域を前記カメラで撮像するように制御する、請求項６に記載のカメラシステム。
【請求項８】
前記表示制御部は、複数の前記カメラで撮影された前記拡大画像を一覧表示する、請求項７に記載のカメラシステム。
【請求項９】
前記表示制御部は、前記制御部による制御が可能な場合は前記全体画像をポップアップ表示し、前記制御部による制御が可能でない場合は前記全体画像をハーフトーン表示又は非表示とする、請求項７に記載のカメラシステム。
【請求項１０】
前記表示制御部は、前記制御部により制御が行われた場合に前記全体画像に対応する前記拡大画像の表示状態を変更する、請求項７に記載のカメラシステム。
【請求項１１】
カメラで撮像された全体画像を表示する全体画像表示領域と、前記全体画像で指定された位置に対応する領域を拡大して拡大画像を表示する拡大画像表示領域と、を表示するように制御する手段、
前記全体画像上で指定された位置に対応する領域を変化させるように制御する手段、
前記カメラの制御が可能か否かに応じて前記全体画像の表示状態を変更する手段、
としてコンピュータを機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１１−２０５５７４（Ｐ２０１１−２０５５７４Ａ）
【公開日】平成２３年１０月１３日（２０１１．１０．１３）
【国際特許分類】
【出願番号】特願２０１０−７３２３３（Ｐ２０１０−７３２３３）
【出願日】平成２２年３月２６日（２０１０．３．２６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２３年１０月１３日（２０１１．１０．１３）
【国際特許分類】
【出願日】平成２２年３月２６日（２０１０．３．２６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]