遠隔画像表示システム、装置および方法
【課題】画像取得手段の操作に関して遠隔指示を行う場合、操作指示者の意図する操作指示を操作者に直感的に正確に伝達する。
【解決手段】光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、ファインダ画像を通信回線を介して出力するファインダ画像出力部を含む画像取得手段と、通信回線を介して入力したファインダ画像をモニタ表示するモニタ表示部と、モニタ表示部のファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、操作指示情報として出力する操作指示送信部を含む画像表示操作指示手段を備え、画像取得手段は、画像表示操作指示手段が出力する操作指示情報を入力し、操作指示の内容をファインダ画像表示部に表示する操作指示受信部を含む。
【解決手段】光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、ファインダ画像を通信回線を介して出力するファインダ画像出力部を含む画像取得手段と、通信回線を介して入力したファインダ画像をモニタ表示するモニタ表示部と、モニタ表示部のファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、操作指示情報として出力する操作指示送信部を含む画像表示操作指示手段を備え、画像取得手段は、画像表示操作指示手段が出力する操作指示情報を入力し、操作指示の内容をファインダ画像表示部に表示する操作指示受信部を含む。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遠隔画像表示システム、装置および方法に関し、特に、画像表示操作指示手段から送られてくる画像取得手段の操作に関する遠隔指示を、画像取得手段の表示部に表示する遠隔画像表示システム、装置および方法に関する。
【背景技術】
【０００２】
通信網の高速化、大容量化に伴い、テレビ電話、テレビ会議、ウェブカメラによるリモート監視等のビデオ通信の多様化が進んでいる。また、今日では、携帯電話機は、誰もが保有する生活必需品となっており、その携帯電話機のほとんどにおいてデジタルカメラ機能が付加されている。携帯電話機に搭載されているデジタルカメラも、１０００万画素を超える高精細なものが出回っており、デジタルカメラに携帯電話機能が付加された端末と言ってもおかしくないような製品が流通している。このように、今日では、誰もが無線通信機能が付いたカメラを常時携帯していると言ってもよい環境となっている。
【０００３】
そのため、カメラと通信を融合させたさまざまなアプリケーション技術が開示されている。そのようなアプリケーション技術として、例えば、特許文献１や特許文献２に開示された技術がある。
【０００４】
特許文献１に開示された技術は、カメラのユーザが撮影に不慣れな場合や、初めて撮影する場所であっても、好適な構図で写真撮影を行うことが可能な撮影装置等に関する技術である。当該技術によれば、カメラの現在位置をネットワークのサーバに送ることにより、その現在位置から所定の距離範囲内で撮影された参照画像と、その参照画像に関連する撮影情報をサーバから取得することができる。カメラは、そのサーバから取得した参照画像と撮影情報と、カメラの現在位置とに基づいて、ユーザを参照画像の撮影位置に誘導する情報を表示部に表示する。そして、ユーザの撮影状態に基づいて、ユーザの撮影状態に対応する構図が参照画像の構図となるように表示部に表示して教示する機能を備えている。
【０００５】
また、特許文献２に開示された技術は、コントローラからの遠隔操作により、頻繁に画像の撮影と閲覧を繰り返し行うことができるリモートカメラシステムに関する技術である。このリモートカメラシステムは、デジタルカメラとコントローラとを通信回線で接続し、コントローラを用いて遠隔でデジタルカメラを操作する。通信回線としては無線ＬＡＮ（Local Area Network）のアドホックモードの利用を想定し、デジタルカメラとコントローラとを無線回線で接続している。コントローラは、デジタルカメラに対して電源のＯｎ／Ｏｆｆ、ズームの調整、モード設定の切替、合焦点や撮影等の細かい制御を行うことができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開2009-239397号公報
【特許文献２】特開2006-174164号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
カメラと通信を融合させたアプリケーションの一つとして、携帯電話機のカメラ機能でリアルタイムに入力されるファインダ画像を、オンラインモニタとして遠隔の通信相手の装置に表示するという利用形態が可能である。なお、ファインダ画像とは、カメラのレンズを通して光学的に写しだされた被写体画像をそのままファインダ部に表示する画像のことである。つまり、携帯電話機のカメラに限らず、一般のデジタルカメラであっても、カメラは、電源が入っている状態であればレンズを通して入ってくる画像をファインダ画像として表示部に表示している。このファインダ画像を遠隔の通信相手の装置に表示することで各種のアプリケーションを実現することができる。
【０００８】
この場合、カメラを保持し、操作して被写体をファインダ画像として取り込む操作者と、通信回線を介して送られてくるファインダ画像を遠隔で見て、操作者に対してカメラの向きや構図の変更を指示する操作指示者が存在する。そして、カメラの操作者は、操作指示者からの言葉による操作指示に基づいて、操作指示者が意図するカメラの向きや構図になるようにカメラ操作を行う。
【０００９】
しかし、操作指示者と操作者との通話による音声指示では、操作指示者の意図する指示内容をカメラの操作者に直感的かつ正確に伝えることが難しい。
【００１０】
特許文献１に開示された技術は、特定の場所の参照画像の構図となるように、サーバから受信した撮影情報に基づいて、ユーザを撮影位置に誘導する誘導情報を表示部に表示するものである。そのため、任意の場所において、操作指示者の意図する指示内容に応じて、カメラ操作に関する遠隔指示を表示部に表示するものではない。
【００１１】
特許文献２に開示された技術は、コントローラの操作者が遠隔のカメラを一人で自由に操作することを目的とするものである。そのため、特許文献２に開示された技術は、ファインダ画像を見てカメラ操作に関する指示を出す操作指示者が意図する指示内容を、カメラを操作する操作者に対して遠隔表示する機能は考慮されていない。
【００１２】
本発明の目的は、上記の課題を解決して、ファインダ画像が写し出す向きや構図に関する操作指示者の意図する遠隔指示を、カメラ等の画像取得手段の表示部に表示する遠隔画像表示システム、装置および方法を提供することにある。
【課題を解決するための手段】
【００１３】
上記の目的を実現するために、本発明の一形態である遠隔画像表示システムは、光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、を含む画像取得手段と、前記通信回線を介して入力した前記ファインダ画像をモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力する操作指示送信部と、を含む画像表示操作指示手段とを備え、前記画像取得手段は、前記画像表示操作指示手段が出力する前記操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部を含むことを特徴とする。
【００１４】
また、本発明の他の形態である画像取得装置は、光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部とを含むことを特徴とする。
【００１５】
また、本発明の他の形態である画像表示操作指示装置は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する操作指示送信部と、を含むことを特徴とする。
【００１６】
また、本発明の他の形態である遠隔画像表示方法は、画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、画像表示操作指示手段が、前記通信回線を介して入力した前記ファインダ画像をモニタ表示部にモニタ表示し、モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力し、前記画像取得手段が、前記操作指示情報を前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする。
【００１７】
また、本発明の他の形態である画像取得方法は、光学入力部から入力する画像をファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする。
【００１８】
また、本発明の他の形態である画像表示操作指示方法は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示し、前記モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する、ことを特徴とする。
【発明の効果】
【００１９】
本発明は、画像表示操作指示手段から送られてくる画像取得手段の操作に関する遠隔指示情報を、画像取得手段の表示部に表示して、操作指示者の意図する操作指示の内容を操作者に直感的かつ正確に伝えることができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１の実施形態の遠隔画像表示システムの構成を示すブロック図である。
【図２】第１の実施形態の遠隔画像表示システムの動作を示すシーケンス図である。
【図３】第１の実施形態の画像取得装置の構成を示すブロック図である。
【図４】第１の実施形態の画像取得装置の動作を示すシーケンス図である。
【図５】第１の実施形態の画像表示操作指示装置の構成を示すブロック図である。
【図６】第１の実施形態の画像表示操作指示装置の動作を示すシーケンス図である。
【図７】本発明の第２の実施形態の構成を示すブロック図である。
【図８】第２の実施形態の動作を示すシーケンス図である。
【図９】レンズの焦点距離、撮像素子サイズおよび画角の関係を説明する図である。
【図１０】第２の実施形態における撮影端末のファインダ画像表示部と撮影操作指示端末のモニタ表示部の画像表示例を示す図である。
【図１１】撮影端末が撮影する画像フレームの領域を説明する図である。
【図１２】第２の実施形態の撮影端末の動作を示すフロー図である。
【図１３】モニタ表示部における操作例とその操作に対応するファインダ画像表示部における表示例を示す図である。
【図１４】第２の実施形態の変形例におけるモニタ表示部およびファインダ画像表示部における表示画面例を示す模式図である。
【図１５】第２の実施形態の変形例におけるモニタ表示部およびファインダ画像表示部における別の表示画面例を示す模式図である。
【図１６】第２の実施形態の変形例において、モニタ表示部の広角表示領域でのポイント指示と、それに基づくファインダ画像表示部の広角表示領域でのポイント表示の動作を説明するフロー図である。
【図１７】本発明の第３の実施形態の構成を示すブロック図である。
【図１８】第３の実施形態の動作を示すシーケンス図である。
【図１９】画像合成部で行われるパノラマ写真の合成方法を説明する図である。
【図２０】モニタ表示部のファインダ画像とパノラマ写真の表示例を示す図である。
【図２１】モニタ表示部のファインダ画像とパノラマ写真の別の表示例を示す図である。
【図２２】第３の実施形態における撮影端末のファインダ画像表示部の表示例を示す図である。
【図２３】図２０に示した表示例の広角表示領域において、撮影端末の移動にともない、ポイント指示がパノラマ写真とともに移動する様子を示す図である。
【図２４】本発明の第４の実施形態の構成を示すブロック図である。
【図２５】第４の実施形態の動作を示すシーケンス図である。
【発明を実施するための形態】
【００２１】
本発明を実施するための形態について説明する。
【００２２】
ファインダ画像を遠隔の通信相手の装置に表示することで各種のアプリケーションを実現することができる。
【００２３】
例えば、商品の購入希望者が、他の人に代理してショッピングを依頼するような場合に利用できる。
【００２４】
服装、かばん、台所用品、家具など、デザインや色彩などにおいて購入希望者の好みが強いような商品を代理購入する場合、代理購入者は、サイズや機能さえ合えばよいということで勝手に購入することができない。そのような場合、代理購入者は、陳列されている商品を携帯電話機付属のカメラのファインダ画像として表示し、それをリアルタイムで購入希望者に送信して、購入希望者が遠隔でショッピングする環境を作ることにより対応することができる。
【００２５】
このような環境において、商品の購入希望者は、代理購入者がファインダ画像として写しこむ画像を見て、自分の好みに合致する商品を選択する。その選択の過程において、購入希望者は、代理購入者が写しこむ画像に対してどの方向を見せて欲しいとか、どの商品を拡大表示して欲しいとかの操作指示を出す。その操作指示の内容が携帯電話機の表示部に表示され、代理購入者は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行う。
【００２６】
また、別の例として、道案内にも利用できる。
【００２７】
街なかで道に迷った人が、例えば道案内センターに携帯電話機で通信接続する。道に迷った人は、道案内センターの担当者からの指示で自分の周辺の街風景を携帯電話機付属のカメラで写し出し、そのファインダ画像を道案内センターに送る。道案内センターの担当者は、送られてきたファインダ画像に基づいて、道に迷った人の行くべき方向を説明するために、写し出すファインダ画像の方向や、目印となる建物等の拡大表示を指示する。その指示の内容が携帯電話機の表示部に表示され、道に迷った人は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行うことにより、道案内センターの担当者の説明を受ける。
【００２８】
もちろん、写真撮影を遠隔で行うという利用も可能である。
【００２９】
カメラの操作者は撮影場所にいて、撮影対象となる被写体画像はファインダ画像として遠隔の撮影指示者に送られる。撮影指示者はそのファインダ画像を見ながら構図を考えて、目的の構図になるようにカメラの操作者にカメラの操作を指示する。その操作指示の内容がカメラのファインダ画像表示部に表示され、カメラの操作者は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行う。目的の構図になったところで、撮影指示者はその構図の写真撮影を指示する。カメラの操作者は、その指示に基づいてカメラのシャッターを切る。
【００３０】
上述したような利用形態が可能な本発明の実施形態について図面を参照して説明する。
【００３１】
図１は、本発明の第１の実施形態の遠隔画像表示システムの構成を示すブロック図である。
【００３２】
尚、実施形態は例示であり、開示の装置及びシステムは、以下の実施形態の構成には限定されない。また、実施形態において、「画像」は「静止画像」および「動画像」を含んで説明されている。また、画像表示操作指示端末で行う入力操作を「操作指示」と称し、操作指示により出力される情報を「操作指示情報」と称し、操作指示が意味する内容を「操作指示の内容」と称して説明する。
【００３３】
本発明の一形態である遠隔画像表示システムは、画像取得手段１０と画像表示操作指示手段１１とを含んで構成される。画像取得手段１０は、光学入力部１０１を備え、そこから入力する画像をファインダ画像として取得し、表示する。画像取得手段１０と画像表示操作指示手段１１とは、通信回線を介して接続される。そして、画像表示操作指示手段１１は、画像取得手段１０に対して、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、操作指示情報として出力する。
【００３４】
画像取得手段１０は、光学入力部１０１から入力する画像をファインダ画像として表示するファインダ画像表示部１０２と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部１０３と、を含む。
【００３５】
画像表示操作指示手段２０は、モニタ表示部２０１と操作指示送信部２０２と、を含む。モニタ表示部２０１は、画像取得手段１０と、通信回線を介して入力したファインダ画像をモニタ表示する。操作指示送信部２０２は、モニタ表示部２０１に表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、通信回線を介して操作指示情報として出力する。
【００３６】
そして、画像取得手段１０は、画像表示操作指示手段２０が出力する操作指示情報を受信して、操作指示の内容をファインダ画像表示部１０２に表示する操作指示受信部１０４を含む。
【００３７】
図２は、第１の実施形態の遠隔画像表示システムの動作を示すシーケンス図である。
【００３８】
画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示する（Ｓ１０１）。そして、ファインダ画像を、通信回線を介して出力する（Ｓ１０２）。画像表示操作指示手段が、通信回線を介して入力したファインダ画像をモニタ表示部にモニタ表示する（Ｓ１０３）。モニタ表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、通信回線を介して操作指示情報として出力する（Ｓ１０４）。すると、画像取得手段が、その操作指示情報を通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示する（Ｓ１０５）。
【００３９】
以上のように遠隔画像表示システムを構成することにより、画像取得手段１０でリアルタイムにとらえているファインダ画像を、画像表示操作指示手段２０でモニタすることができる。そして、操作指示者は、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、画像表示操作指示手段２０にモニタ表示されたファインダ画像に対して入力することができる。その操作指示は、通信回線を介して操作指示情報として画像取得手段１０に送ることができ、画像取得手段１０のファインダ画像表示部１０２に操作指示の内容が表示される。そのため、操作指示者の意図する操作指示の内容を画像取得手段１０の操作者に直感的かつ正確に伝えることができる。
【００４０】
図３は、第１の実施形態の画像取得装置の構成を示すブロック図である。
【００４１】
この画像取得装置３０は、光学入力部３１から入力する画像をファインダ画像として表示するファインダ画像表示部３２と、そのファインダ画像を通信回線を介して出力するファインダ画像出力部３３と、操作指示受信部３４とを含んで構成される。操作指示受信部３４は、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示する。
【００４２】
図４は、第１の実施形態の画像取得装置の動作を示すシーケンス図である。
【００４３】
画像取得装置は、光学入力部から入力する画像をファインダ画像として表示し（Ｓ２０１）、そのファインダ画像を、通信回線を介して出力する（Ｓ２０２）。そして、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、（Ｓ２０３、ＹＥＳ）、操作指示の内容をファインダ画像表示部に表示する（Ｓ２０４）。
【００４４】
以上のように画像取得装置を構成することにより、リアルタイムにとらえているファインダ画像を、通信回線を介して外部に出力することができる。そして、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示することができる。そのため、画像取得装置３０の操作者は、ファインダ画像の入力方向または構図を含む画像取得に関する操作指示の内容を直感的かつ正確に把握することができる。
【００４５】
図５は、本発明の第１の実施形態の画像表示操作指示装置の構成を示すブロック図である。
【００４６】
この画像表示操作指示装置４０はモニタ表示部４１と操作指示送信部４２を含んで構成される。モニタ表示部４１は、通信回線を介して画像取得装置３０から入力する画像をファインダ画像としてモニタ表示する。操作指示送信部４２は、そのモニタ表示部４１に表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、画像取得装置３０に表示するための操作指示情報として通信回線を介して出力する。
【００４７】
図６は、本発明の第１の実施形態の画像表示操作指示装置の動作を示すシーケンス図である。
【００４８】
画像表示操作指示装置は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示する（Ｓ３０１、Ｓ３０２）。そして、そのモニタ表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を（Ｓ３０３、ＹＥＳ）、画像取得装置に表示するための操作指示情報として通信回線を介して出力する（Ｓ３０４）。
【００４９】
以上のように画像表示操作指示装置を構成することにより、画像取得装置から入力する画像をファインダ画像としてモニタすることができ、しかも、そのファインダ画像に対して、入力方向または構図を含む画像取得に関する操作を指示する操作指示を入力できる。そして、入力された操作指示は、画像取得装置に表示するための操作指示情報として通信回線を介して出力されるので、操作指示者は意図する操作指示の内容を画像取得装置の操作者に直感的かつ正確に伝えることができる。
【００５０】
次に、第２の実施形態を説明する。
【００５１】
図７は、本発明の第２の実施形態の構成を示すブロック図である。
【００５２】
第２の実施形態において、第１の実施形態での画像取得手段１０または画像取得装置１は、写真撮影が可能な撮影端末１１である。そして、第１の実施形態での画像表示操作指示手段２０または画像表示操作指示装置２は、撮影端末１１の操作を遠隔で指示することができる撮影操作指示端末２１である。
【００５３】
撮影端末１１を保持して撮影端末１１を操作する者を「操作者」と称し、撮影操作指示端末２１を保持して撮影端末１１の操作を遠隔で指示する者を「操作指示者」と称する。また、操作指示者が行う入力操作を「操作指示」と称し、操作指示により出力される情報を「操作指示情報」と称し、操作指示が意味する内容を「操作指示の内容」と称して説明する。
【００５４】
第２の実施形態は、操作指示者の操作指示に基づいて出力された操作指示情報に従って操作指示の内容が表示され、操作者が操作指示の内容に従って撮影端末１１を操作して、遠隔で操作指示者が意図する構図の写真撮影を行う例を説明する。
【００５５】
撮影端末１１は、光学入力部１１１、ファインダ画像表示部１１２、ファインダ画像出力部１１３、撮影部１１５、撮影画像出力部１１６、操作指示受信部１１４、センサ１１８および通信制御部１１７を含んで構成される。撮影端末１１は、例えばカメラ付き携帯電話機や移動通信機能付きデジタルカメラを想定することができる。そして、光学入力部１１１、ファインダ画像表示部１１２、ファインダ画像出力部１１３、撮影部１１５、撮影画像出力部１１６がカメラに相当する。
【００５６】
光学入力部１１１のレンズから入射される被写体像は、光学入力部１１１の図示しない撮像素子の受光面に結像する。撮像素子は、受光面上にマトリクス状に配列された多数の光電変換セルにより、受光面上に結像した被写体像の光量に応じた電気信号を出力する。この電気信号は、図示しないアナログ／デジタル変換回路を用いてデジタル信号に変換され、さらに、図示しない信号処理部において画像処理が行われて画像信号として光学入力部１１１から出力される。ファインダ画像表示部１１２は、この光学入力部１１１から出力された画像信号をファインダ画像として表示する。
【００５７】
なお、撮像素子は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）で構成される。また、ファインダ画像表示部１１２は、例えば液晶や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）で構成された表示部である。
【００５８】
ファインダ画像出力部１１３は、通信制御部１１７を介してデータ転送するために、ファインダ画像表示部１１２に表示されるファインダ画像を映像信号に変換し、その映像信号を圧縮して出力する。
【００５９】
撮影部１１５は、シャッターにより決められた時間のみ露光した撮像素子上の被写体像を撮影画像（静止画像）として記録メディア（不図示）に保存する。そして撮影画像出力部１１６は、通信制御部１１７を介してデータ転送するために、その撮影画像を画像圧縮して出力する。ファインダ画像出力部１１３から出力されたファインダ画像や撮影画像出力部１１６から出力された撮影画像は、通信制御部１１７を介して撮影操作指示端末２１に送信される。
【００６０】
操作指示受信部１１４は、後述する操作指示情報を撮影操作指示端末２１から通信制御部１１７を介して受信し、操作指示情報に対応した操作指示の内容をファインダ画像表示部１１２に表示する。ファインダ画像表示部１１２に表示される操作指示の内容には、操作の種別を特定するメッセージ、撮影端末１１の移動方向や移動量を視覚的に指示する印が含まれる。
【００６１】
センサ１１８は、地磁気センサおよび重力センサであり、詳細は後述するが、撮影端末１１の光学入力部１１１が向いている方向の情報を操作指示受信部１１４に入力する。つまり、撮影端末１１を上下左右に移動させたときに、操作指示受信部１１４はその移動の変化に関する情報を識別することができる。また、このセンサが検出した撮影方向の情報は、後述するように、ファインダ画像や撮影画像とともに撮影操作指示端末２１にも送られる。
【００６２】
通信制御部１１７は、通信回線を介して撮影操作指示端末２１と接続し、撮影操作指示端末２１との間で通信のための信号の送受信を行う。
【００６３】
一方、撮影操作指示端末２１は、モニタ表示部２１１、操作指示送信部２１２、撮影画像受信部２１３、モニタ表示制御部２１４、操作指示入力部２１５および通信制御部２１６を含んで構成される。撮影操作指示端末２１は、例えば携帯電話機、通信機能付きパーソナルコンピュータまたは通信機能付き携帯情報端末を想定することができる。なお、撮影操作指示端末２１に要求される通信機能は、移動通信機能に限ることなく有線通信機能であってもかまわない。
【００６４】
モニタ表示制御部２１４は、通信制御部２１６を介して撮影端末１１から受信するファインダ画像の映像信号を入力し、圧縮を解除してモニタ表示部２１１に表示する。また、撮影画像受信部２１３は、通信制御部２１６を介して撮影端末１１から受信する撮影画像を入力し、圧縮を解除してモニタ表示制御部２１４に出力する。モニタ表示制御部２１４は、撮影画像受信部２１３から撮影画像を受信した場合は、ファインダ画像を撮影画像に切り替えてモニタ表示部２１１に表示する。
【００６５】
操作指示者は、操作指示入力部２１５から操作指示を入力する。例えば、操作指示者は、モニタ表示部２１１に表示されたファインダ画像が、意図する方向の画像表示や意図する構図になるように、撮影端末１１を移動させる指示を含む操作指示を入力する。
【００６６】
操作指示者が直感的に操作指示を入力できるようにするために、操作指示入力部２１５は、例えばタッチパネルで構成される。そして、モニタ表示部２１１に表示されるファインダ画像上の位置とタッチパネル上の位置とが容易に対応付けられるよう、モニタ表示部２１１にタッチパネルを張り合わせた構成が望ましい。また、モニタ表示部２１１は、例えば液晶や有機ＥＬで構成された表示部である。もちろん、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）で構成されていてもかまわない。
【００６７】
操作指示送信部２１２は、モニタ表示部２１１に重ね合わせた操作指示入力部２１５を介して操作指示者が入力した操作指示を検出し、その操作指示を解析して操作指示情報を出力する。つまり、後述するように、操作指示者がスタイラスペン（手書き文字入力用ペン）をポインティングデバイスとして用いてタッチパネル上で行った操作を識別し、その操作に対応する操作指示情報を出力する。この操作指示情報は、通信制御部２１６を介して撮影端末１１の操作指示受信部１１４に送られる。
【００６８】
通信制御部２１６は、通信回線を介して撮影端末１１と接続し、撮影端末１１との間で通信のための信号の送受信を行う。
【００６９】
なお、上記の構成には示していないが、撮影端末１１と撮影操作指示端末２１とは相互に音声通信を行う機能を備えている。
【００７０】
上記のように構成された第２の実施形態の動作を説明する。
【００７１】
図８は、第２の実施形態の動作を示すシーケンス図である。
【００７２】
前述したように、第２の実施形態において撮影端末１１は移動通信機能を有し、撮影操作指示端末２１が有する通信機能は、移動通信機能に限ることなく有線通信機能であってもかまわない。撮影端末１１と撮影操作指示端末２１とは、ＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）によるセッション制御により両端末間を接続する形態が想定される。また、ネットワークカメラやウェブカメラのように、インターネット上に設置されたアプリケーションサーバを介して相互に希望する接続先と接続する形態であってもよい。
【００７３】
まず、必要とするプロトコルにより、撮影端末１１の通信制御部１１７と撮影操作指示端末２１の通信制御部２１６との間でセッション確立が行われる（Ｓ４０１）。この場合、撮影端末１１と撮影操作指示端末２１のいずれからセッション確立の要求を行ってもかまわない。セッションが確立されると、それぞれの端末間で機能情報が交換され、撮影端末１１と撮影操作指示端末２１との間でマルチメディア通信が開始される。このとき、撮影端末１１の保有するカメラ機能情報が撮影操作指示端末２１に通知され、撮影操作指示端末２１において、撮影端末１１の機能条件が設定される。カメラ機能情報としては、例えばレンズの焦点距離、撮像素子サイズ、解像度（表示サイズ）種別、ズーム機能有無、カメラの遠隔操作機能有無等が含まれる。カメラの遠隔操作機能とは、絞りやシャッター速度等のカメラの撮影条件設定、ズームイン／ズームアウト、シャッター操作等を遠隔で操作できる機能である。本実施形態では、カメラの遠隔操作機能は無いものとして説明する。
【００７４】
このとき音声通信も確立されているので、撮影操作指示端末２１側の操作指示者と、撮影端末１１側の操作者との間で、音声通信により、何を目的とした操作指示が行われるのかを相互に認識する。例えば、第２の実施形態においては、操作指示者が、操作者の近傍の風景を撮影端末１１で遠隔撮影することを目的とする。
【００７５】
操作者が撮影端末１１のカメラ機能の電源を入れると、図７を参照して説明したようにファインダ画像が取り込まれ、通信回線を介して撮影操作指示端末２１に送られ、そのモニタ表示部２１１に表示される。
【００７６】
なお、図８は、操作指示者と操作者との間で音声通信を行うことなく、マルチメディア通信が開始されると同時にファインダ画像の送信要求を自動で行う例を示している。
【００７７】
セッションが確立されてマルチメディア通信が開始されると、撮影操作指示端末２１からファインダ画像の送信を要求するメッセージが撮影端末１１に送信される（Ｓ４０２）。このファインダ画像送信要求は、撮影端末１１のファインダ画像表示部１１２にメッセージとして表示される。操作者は、ファインダ画像表示部１１２のファインダ画像送信要求メッセージを見て、撮影端末１１のカメラ機能の電源を入れる。これにより、ファインダ画像が取り込まれ、通信回線を介して撮影操作指示端末２１に送られる（Ｓ４０３）。
【００７８】
撮影端末１１は、このファインダ画像とともに、撮影方向とカメラの画角の情報を添付して撮影操作指示端末２１に送信する。撮影方向は撮影端末１１が備える地磁気センサおよび重力センサで識別した画像フレーム中央の方位角度および上下角であり、画角は撮影端末１１のカメラで撮影される画像の範囲を角度で表したものである。
【００７９】
画角は、撮像素子サイズおよびレンズの焦点距離から図９に示した関係式で、画像フレームの左端から右端までの水平画角、画像フレームの上辺から下辺までの垂直画角として求めることができる。つまり、画角は、ファインダ画像を取り込んでいるレンズの焦点距離と撮像素子サイズから決まる値である。この画角の情報は、撮影操作指示端末２１のモニタ表示部２１１に表示されるファインダ画像サイズと撮影端末１１のファインダ画像表示部１１２に表示されるファインダ画像サイズとを正確に対応付けるために使用する情報である。つまり、撮影操作指示端末２１に表示されるファインダ画像に対して行った操作指示を、撮影端末１１に表示されているファインダ画像上に正確に対応付けて操作指示の内容として表示するために使用する情報である。この場合の操作指示の内容は、ファインダ画像が表示する方向の移動指示やその移動量を含む。
【００８０】
なお、前述したように、マルチメディア通信の開始に先立って、撮影端末１１の保有するカメラ機能情報が撮影操作指示端末２１に通知され、撮影操作指示端末２１において、撮影端末１１の機能条件が設定される。このとき通知されるカメラ機能情報にレンズの焦点距離および撮像素子サイズが含まれるので、図９に示した関係式で画角を求めることができる。しかし、画角の情報は、撮影端末１１と撮影操作指示端末２１との間で操作指示情報の整合をとるために必要な情報である。そのため、本実施形態ではファインダ画像とともに撮影端末１１から撮影操作指示端末２１に送信するものとしている。また、撮影端末１１から撮影操作指示端末２１に送信する撮影方向と画角の情報は、その情報に変化が生じた場合に更新される。つまり、カメラの向きを変えたときは撮影方向が、そして、ズームイン／ズームアウトにより画角を変化させたときには画角の情報が更新される。
【００８１】
図８のＳ４０４以降を説明するに当たり、図１０も参照する。
【００８２】
図１０は、第２の実施形態における撮影端末１１のファインダ画像表示部１１２と撮影操作指示端末２１のモニタ表示部２１１の画像表示例を示す図である。
【００８３】
図１０を参照して、撮影操作指示端末２１の操作指示入力部２１５から入力した操作指示が、撮影端末１１のファインダ画像表示部１１２に表示される動作を説明する。なお、操作指示入力部２１５から行う操作指示の入力は、モニタ表示部２１１に表示されているファインダ画像に対して行われる操作指示と等価である。そのため、以降の説明では、モニタ表示部２１１で操作指示者が行う入力操作として説明する。
【００８４】
図１０は、撮影操作指示端末２１のモニタ表示部２１１で操作指示者が行う操作例を右側に、そして、操作者が撮影端末１１を移動する操作を行う際に参照するファインダ画像表示部１１２の表示例を左側に示している。また、図１０の（Ａ）、（Ｂ）、（Ｃ）は、時系列でのそれぞれの表示推移を示す。
【００８５】
まず、図１０の（Ａ）の状態のファインダ画像が表示されている。操作指示者は、ファインダ画像の左端の建物が中央にくる構図の写真を撮影したいと思い、モニタ表示部２１１に表示されているファインダ画像のその建物をポイントする操作指示を行う。つまり、スタイラスペンで左端の建物の位置をポイント指示する操作を行う。
【００８６】
ポイント指示された位置は、図７の操作指示送信部２１２により、タッチパネル上の座標として識別される。なお、タッチパネルはモニタ表示部２１１に重ねて貼り合わせた構成であり、モニタ表示部２１１に表示されているファインダ画像のサイズ、位置は、撮影操作指示端末２１でそれを識別している。従って、以降の説明において、「タッチパネル上の座標」を「モニタ表示部２１１上のファインダ画像の座標」として説明する。
【００８７】
撮影操作指示端末２１は撮影端末１１に対して、新たな構図の画像フレームをファインダ画像表示部１１２に表示するように動作する。つまり、操作指示送信部２１２は、ポイント指示された位置をモニタ表示部２１１上のファインダ画像の座標として識別し、後述するように、その座標を撮影方向と画角の情報に基づいて、画像フレームの基点からの移動方向および移動量の情報に変換する。
【００８８】
なお、図１０において、モニタ表示部２１１上のファインダ画像上にポイント指示された位置を示しているが、このような表示は無くてもかまわない。また、このようなポイント指示位置をファインダ画像上に表示する場合、操作指示送信部２１２は、ポイント指示された位置に対応するファインダ画像の座標をモニタ表示制御部２１４に通知する。モニタ表示制御部２１４は、通知された座標に対応する位置にポイント指示を付す。
【００８９】
そして、操作指示送信部２１２は、ポイント指示された位置を示す情報として、画像フレームの基点からの移動方向および移動量を操作指示情報として撮影端末１１に送信する。撮影端末１１において、操作指示送信部２１２が送信した操作指示情報は、操作指示受信部１１４で受信される（図８のＳ４０４）。
【００９０】
操作指示受信部１１４は、操作指示情報が示す画像フレームの基点からの移動方向および移動量に基づいて新たな構図の画像フレームを生成する。つまり、ポイント指示された位置が中央になる構図の画像フレームを生成する。
【００９１】
操作指示受信部１１４は、この新たな構図フレームを操作指示の内容としてファインダ画像表示部１１２に表示する（図８のＳ４０５）。このとき、操作者が撮影端末１１を移動すべき方向を示す印を付してもよい。図１０の左側の（Ａ）は、構図フレームと移動方向がファインダ画像表示部１１２に表示される例を示している。つまり、構図フレームの右端が点線で示され、カメラを左方向に移動させることを意味する矢印が示されている。
【００９２】
ここで図１１を参照して座標、画像フレームの基点および移動方向、移動量について説明しておく。
【００９３】
図１１は、カメラが撮影する画像フレームの領域を示す図である。カメラが撮影する画像フレーム形状は前述したように撮像素子の形状で決まる。ここで、撮影された画像は、ファインダ画像表示部１１２およびモニタ表示部２１１に表示される。従って、撮像素子に結像する画像、それをファインダ画像表示部１１２に表示した画像およびモニタ表示部２１１に表示した画像の３つの画像が扱われる。これらの３つの画像はそれぞれ大きさが異なるかもしれない。しかし、形状はいずれも相似形となっている。相似形になって表示されない場合があったとしても、その表示装置では横方向、縦方向の元画像からの拡大／縮小率を把握しているので、本質的には相似形として処理できる。
【００９４】
撮影端末１１と撮影操作指示端末２１は、撮像素子サイズがわかっている。しかし、撮影端末１１は撮影操作指示端末２１のモニタ表示部２１１でファインダ画像がどのように表示されるかについては知らない。また、逆に、撮影操作指示端末２１は撮影端末１１のファインダ画像表示部１１２でファインダ画像がどのように表示されるかについては知らない。そのため、モニタ表示部２１１に表示されたファインダ画像おいてポイント指示された点を、ファインダ画像表示部１１２に表示されたファインダ画像上で特定できるように制御する必要がある。
【００９５】
一つの制御方法として、モニタ表示部２１１において検出されたファインダ画像の座標を撮像素子上の座標に変換して通知することにより実現できる。
【００９６】
操作指示送信部２１２は、モニタ表示部２１１にファインダ画像がどのように表示されているのかという情報をモニタ表示制御部２１４から受信している。そのため、操作指示送信部２１２は、モニタ表示部２１１で識別したポイント指示位置の座標をモニタ表示部２１１に表示されているファインダ画像の座標として特定することができる。そして、モニタ表示部２１１で特定したファインダ画像の座標を、相似関係を用いて撮像素子の座標に変換して操作指示受信部１１４に通知する。
【００９７】
操作指示受信部１１４は、ファインダ画像表示部１１２にファインダ画像がどのように表示されているのかという情報を把握している。そして、操作指示受信部１１４は、相似関係を用いて、通知された撮像素子上の座標をファインダ画像表示部１１２に表示されたファインダ画像の座標に変換してポイント表示する。
【００９８】
以上のように制御した場合、撮影端末１１と撮影操作指示端末２１とでそれぞれ座標の変換を行う必要がある。
【００９９】
しかし、本実施形態では、画像フレームの基点からの移動方向と移動量を用いて、撮影端末１１と撮影操作指示端末２１とで直接扱うことができる値を用いた制御を行うようにしている。
【０１００】
前述したように、撮影端末１１は地磁気センサと重力センサを備えて、撮影画像に対する撮影方向の情報を取得することができる。地磁気センサにより方位角が、そして重力センサにより上下角が検出される。
【０１０１】
図１１において、画像フレームの横方向の中央に方位角が、縦方向の中央に上下角が表示される。方位角は北を零（０）度として東が９０度、南が１８０度、西が２７０度の順にその方位の角度が検出される。上下角は水平を零（０）度として、向いている上下方向の角度が検出される。また、図９を参照して説明したように画角の情報も得られている。そして、撮影方向（方位角、上下角）の情報および画角の情報は撮影端末１１と撮影操作指示端末２１とで共有している。
【０１０２】
従って、撮像素子、ファインダ画像表示部１１２そしてモニタ表示部２１１に表示されるいずれのファインダ画像も、図１１に示す画像フレームの領域として表示される。そして、方位角、上下角および画角は、いずれのファインダ画像においても同じ数値となる。
【０１０３】
つまり、操作指示受信部１１４は、ファインダ画像表示部１１２にファインダ画像がどのように表示されているかを知っている。そのため、ファインダ画像表示部１１２の座標をファインダ画像の撮影方向（方位角、上下角）の情報と対応付けて記憶することができる。同様に、操作指示送信部２１２は、モニタ表示制御部２１４と協働することにより、モニタ表示部２１１の座標をファインダ画像の撮影方向（方位角、上下角）の情報と対応付けて記憶することができる。
【０１０４】
図１１に示すように、画像フレームの方位角を示す垂直線と上下角を示す水平線の交点を画像フレームの基点と称する。例えば、モニタ表示部２１１でポイント指示した点の座標は、画像フレームの基点からの方位角、上下角として「どの方向に何度」離れているかという情報として識別される。そして、この方向と角度の情報をそのままファインダ画像表示部１１２に適用して、モニタ表示部２１１でポイント指示した点と対応するファインダ画像表示部１１２のファインダ画像の位置にポイント表示をすることができる。
【０１０５】
方位角において右方向を「プラス」、左方向を「マイナス」とし、上下角において上方向を「プラス」、下方向を「マイナス」として移動方向を識別する。また、移動量は、画角との対応で値が求まる。
【０１０６】
例えば、図１１において、横方向の画角が３０度で縦方向の画角が２０度であったとする。また、移動量「ａ」が画像フレームの横方向の辺の長さに対する割合が「０．３０」で、移動量「ｂ」が画像フレームの縦方向の辺の長さに対する割合が「０．２５」であったとする。この場合の「ａ」に対応する移動量は「９．００度」で、「ｂ」に対応する移動量は「５．００度」となる。
【０１０７】
従って、撮影操作指示端末２１の操作指示送信部２１２は、「マイナス９．００度、マイナス５．００度」を操作指示情報として、撮影端末１１の操作指示受信部１１４に通知する。
【０１０８】
この操作指示情報を受信した撮影端末１１の操作指示受信部１１４は、ファインダ画像表示部１１２上のファインダ画像において同じ条件の位置にポイント表示する。これにより、モニタ表示部２１１でポイント指示した点と同じ位置にポイント表示することができる。つまり、ファインダ画像表示部１１２に表示されているファインダ画像の画像フレームの基点から横方向に「マイナス９．００度」、縦方向に「マイナス５．００度」移動した点の座標となる。
【０１０９】
なお、方位角、上下角は相対値ではなく絶対値を用いてもかまわない。例えば、表示しているファインダ画像の撮影方向として、地磁気センサが検出した方位角が「１７３．００度」、そして重力センサが検出した上下角が「プラス３．００度」であったとする。上記の例の場合、ポイント指示した位置は、「１７３．００−９．００＝１６４．００」、そして「３．００−５．００＝−２．００」となり、「１６４．００度、マイナス２．００度」が操作指示情報となる。そして、撮影端末１１の操作指示受信部１１４は、ファインダ画像表示部１１２上のファインダ画像に対して「１６４．００度、マイナス２．００度」に相当する座標位置にポイント表示する。
【０１１０】
そして、撮影端末１１の操作指示受信部１１４は、上記のポイントが中心となる構図フレームを生成して、操作指示の内容としてファインダ画像表示部１１２に表示する。
【０１１１】
図１０に戻って説明を続ける。
【０１１２】
ファインダ画像表示部１１２に表示された操作指示の内容を見た操作者は、ファインダ画像表示部１１２に表示されるファインダ画像が構図フレーム内に入るようにカメラを左方向に移動させる。この移動操作の過程が図１０の（Ｂ）として示されている。
【０１１３】
操作者が撮影端末１１を移動させると、その移動はセンサ１１８により検出される。つまり、左右方向の移動は地磁気センサにより、上下方向の移動は重力センサにより検出される。この検出した情報は、操作指示受信部１１４に通知される。また、この検出した情報は、対応するファインダ画像の送信とともに通信制御装置１１７を介して撮影操作指示端末２１にも通知される。
【０１１４】
操作指示受信部１１４は、移動前の撮影方向を示すセンサの検出値と移動後の撮影方向を示すセンサの検出値の差分を、移動方向および移動量として識別する。そして、ファインダ画像表示部１１２に表示されている構図フレームを、移動方向とは逆の方向に、移動量に対応する値の座標位置に移動させる。
【０１１５】
図１０の（Ｂ）の左側の図は、このようにして表示されたファインダ画像表示部１１２の表示例で、ファインダ画像のフレームが構図フレームに近づいている様子として示されている。
【０１１６】
一方、新たな撮影方向の情報は撮影操作指示端末２１にも送られている。そのため、モニタ表示部２１１にポイント指示が表示されている場合、上述したものと同じ原理で、移動方向とは逆の方向であって、移動量に対応する値のモニタ表示部２１１上の座標位置にポイント指示の表示が移動する。この制御はモニタ表示制御部２１４により行われる。図１０の（Ｂ）の右側の図は、モニタ表示部２１１に表示されるファインダ画像において、操作指示者がポイント指示した位置が中央に近づいている様子として示されている。
【０１１７】
そして、図１０の（Ｃ）は、指示操作者がカメラを移動させて、ファインダ画像が構図フレーム内に入った様子を示す（図８のＳ４０６）。図１０の（Ｃ）の左側の図は、ファインダ画像表示部１１２に表示されるファインダ画像が構図フレームに入った様子を示す。また、図１０の（Ｃ）の右側の図は、モニタ表示部２１１に表示されるファインダ画像において、操作指示者がポイント指示した表示が中央に達した様子を示す。
【０１１８】
目的とした構図になったとき、操作指示者は写真撮影の操作指示を出す。撮影操作を要求する操作指示情報が撮影端末１１に送られ、操作指示受信部１１４で受信される（図８のＳ４０７）。
【０１１９】
操作指示受信部１１４は、撮影操作を要求する操作指示情報に基づいて、撮影操作を指示するメッセージを操作指示の内容としてファインダ画像表示部１１２に表示する（図８のＳ４０８）。
【０１２０】
操作者は、ファインダ画像表示部１１２に表示された撮影操作を指示するメッセージを見て、シャッターボタンを押して撮影操作を行う。撮影部１１５で撮影された撮影画像は、撮影画像出力部１１６で画像圧縮が行われて撮影操作指示端末２１に送信される。撮影画像は撮影画像受信部２１３で受信され、圧縮が解除されてモニタ表示制御部２１４を介してモニタ表示部２１１に表示される（図８のＳ４０９）。
【０１２１】
上記の図８のＳ４０４からＳ４０９の動作を繰り返すことにより、操作指示者は、撮影端末１１の操作者に対して、所望する構図となるように操作指示を出して写真撮影を遠隔で行うことができる。
【０１２２】
撮影が終了したら、撮影端末１１または撮影操作指示端末２１からセッションの切断要求を出すことにより、撮影端末１１と撮影操作指示端末２１との通信が切断される（図８のＳ４１０）。
【０１２３】
図１２は、上記に説明した撮影端末１１の動作を示すフロー図である。
【０１２４】
撮影端末１１は、光学入力部１１１から入力した画像をファインダ画像として取り込む（Ｓ５０１）。このときの撮影方向が地磁気センサと重力センサで検出され、また、そのときのレンズの焦点距離から画角も識別できる（Ｓ５０２）。
【０１２５】
このようにして取り込んだファインダ画像に、撮影方向と画角の情報を付加して撮影操作指示端末２１に送信する（Ｓ５０３）。
【０１２６】
撮影端末１１は、撮影操作指示端末２１から操作指示情報が送られてくるのを待つ（Ｓ５０４）。撮影操作指示端末２１において操作指示者が操作指示を入力すると、撮影端末１１はその操作指示に基づく操作指示情報を受信する（Ｓ５０４、ＹＥＳ）。この操作指示情報には、前述したように、操作指示者のポイント指示に対応する、ファインダ画像を表示すべき方向（撮影端末１１の移動方向）と移動量が含まれている。
【０１２７】
操作指示情報に含まれる移動方向と移動量に基づいて、操作指示者が意図している構図フレームが操作指示の内容としてファインダ画像表示部１１２に表示される（Ｓ５０５）。
【０１２８】
ファインダ画像表示部１１２に表示された操作指示の内容を見た操作者は、指示された構図フレームにファインダ画像が入るように撮影端末１１を移動操作する。つまり、カメラの方向を指示された方向に左右上下の移動を行う。
【０１２９】
この操作者による操作が地磁気センサおよび重力センサにより移動として検出され（Ｓ５０６、ＹＥＳ）、その移動方向および移動量が識別される（Ｓ５０７）。
【０１３０】
地磁気センサおよび重力センサが検出した左右、上下の移動方向および移動量に対応して、ファインダ画像表示部１１２に表示している構図フレームを移動させる（Ｓ５０８）。つまり、地磁気センサおよび重力センサが検出した移動方向と逆方向に、検出した移動量だけ構図フレームを移動させる。
【０１３１】
このようにして、操作者が行った移動操作により、ファインダ画像表示部１１２に表示された構図フレームが、ファインダ画像表示部１１２に表示されているファインダ画像フレームの中に入ってくる（Ｓ５０９）。そして、構図フレームがファインダ画像フレームとほぼ重なる所定の位置に近づいてきたとき（Ｓ５０９、ＹＥＳ）、撮影端末１１は、その旨を操作者に通知する接近表示を出力する（Ｓ５１０）。
【０１３２】
そして、構図フレームがファインダ画像表示部１１２に表示されるファインダ画像フレームにほぼ合致したしたときに（Ｓ５１１、ＹＥＳ）、撮影端末１１は、その旨を操作者に通知する到達表示を出力する（Ｓ５１２）。
【０１３３】
上記の接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０１３４】
次に、図１３を参照してモニタ表示部２１１における操作例とその操作に対応するファインダ画像表示部１１２における表示例を説明する。
【０１３５】
図１３は、モニタ表示部２１１における操作例とその操作に対応するファインダ画像表示部１１２における表示例を示す図である。
【０１３６】
図１３の（Ａ）は、上記で説明したように、操作指示者が構図の中央としたいポイントを指示する操作を示す。このとき操作メニューとして、ポイント指示する前に「移動」を選択しておく。この場合は、既に説明したように、構図の中央とする座標に対応する移動方向・移動量を操作指示情報として撮影端末１１に通知する。これによりファインダ画像表示部１１２には、新しい構図のフレーム、移動方向が表示される。なお、図１３の（Ａ）に示すように移動量を画面表示してもよい。この場合は、「０．５画面」移動することを意味している。また、表示する移動量は距離でも角度でもよい。角度の場合は、相対的な角度でも絶対的な角度でもよい。
【０１３７】
図１３の（Ｂ）は、操作指示者が構図を移動したい場合の操作を示す。操作メニューとして「移動」を選択し、その後、ポイント指示し、そのまま移動方向にスタイラスペンをずらし、移動終了点でスタイラスペンを画面から離す操作を行う。これは、始点位置が終点位置になるように構図を移動することを意味する。この場合は、始点座標と終点座標に対応する位置（移動方向・移動量）が操作指示情報として撮影端末１１に通知される。これによりファインダ画像表示部１１２には、新しい構図のフレーム、移動方向、移動量が表示される。
図１３の（Ｃ）は、操作指示者がズームインの指示をする場合の操作を示す。この場合は、操作メニューとして「ズーム」を選択し、拡大したい範囲を連続線で囲う。これにより、表示範囲を示す座標に対応する位置と操作内容が操作指示情報として撮影端末１１に通知される。ファインダ画像表示部１１２には、ズームインする箇所の構図フレームと操作内容として「ズームイン」が画面表示される。
【０１３８】
また、図示していないが、特定の領域を上記と同様に指定して、その領域の解像度を変更する指示を行えるようにしてもよい。
【０１３９】
以上に説明したように、第２の実施形態においては、撮影端末１１でリアルタイムにとらえているファインダ画像を、撮影操作指示端末２１でモニタすることができる。そして、操作指示者は、モニタ表示されたファインダ画像が、意図する方向の画像表示や意図する構図になるように、撮影端末１１を移動させる指示を含む操作指示を入力して、通信回線を介して操作指示情報を撮影端末１１に送ることができる。その操作指示情報に基づく操作指示の内容は、撮影端末１１のファインダ画像表示部１１２に構図フレームとして表示される。そのため、操作者は、ファインダ画像がその構図フレームに入るように撮影端末１１を移動すればよい。ファインダ画像がその構図フレームに入ったことを確認した操作指示者は、操作者に撮影端末１１の撮影操作を指示する。これにより操作指示者は所望の構図の写真を遠隔で撮影することができる。そして、第２の実施形態は、このような利用形態において操作指示者の意図する操作指示の内容を操作者に直感的かつ正確に伝えることができる。
【０１４０】
次に第２の実施形態の変形例を説明する。
【０１４１】
構成および動作は図７および図８で示したものと同じである。しかし、モニタ表示部２１１およびファインダ画像表示部１１２における表示が第２の実施形態と異なる。
【０１４２】
図１４は、第２の実施形態の変形例におけるモニタ表示部２１１およびファインダ画像表示部１１２における表示画面例を示す模式図である。第２の実施形態の変形例におけるモニタ表示部２１１およびファインダ画像表示部１１２は２画面構成となっている。ファインダ画像が表示される通常表示領域と、広角表示領域とに分かれている。
【０１４３】
広角表示領域は、ファインダ画像が写し出している画角の複数倍の視野角を表示することができる。広角表示領域は、現在ファインダ画像が写し出している画角の中央を零（０）とし、左右それぞれ９０度の範囲を表示している。中央に示されている画像フレームは、現在の画角で写し出している画像表示範囲を示している。つまり、この画像フレームの左辺と右辺の中央が、左右方向における撮影端末１１が現在向いている方向である。
【０１４４】
また、このフレームの上辺と下辺の中央が、上下方向における撮影端末１１が現在向いている方向である。
【０１４５】
第２の実施形態においては、操作指示者はファインダ画像の表示内での移動を操作者に指示した。しかし、第２の実施形態の変形例は、ファインダ画像で表示されていない領域にカメラの方向を移動させるように直感的かつ正確に操作指示することができる。
【０１４６】
図１６は、第２の実施形態の変形例において、モニタ表示部２１１の広角表示領域でのポイント指示と、それに基づくファインダ画像表示部１１２の広角表示領域でのポイント表示の動作を説明するフロー図である。
【０１４７】
図１６の（Ａ）は、モニタ表示部２１１の広角表示領域でのポイント指示に係る動作を説明するフロー図である。撮影操作指示端末２１は、ファインダ画像を撮影端末１１から受信する際に、撮影方向と画角に関する情報も受信する（Ｓ６０１）。従って、その情報に基づく撮影方向を基点とし、画角に対応する相似形のフレームをモニタ表示部２１１の広角表示領域に表示する（Ｓ６０２）。また、左右９０度方向の範囲、上下１０度方向の範囲の相似形の広角表示領域は画角から容易に生成できる。
【０１４８】
撮影操作指示端末２１は、操作指示者のポイント指示の入力を待つ（Ｓ６０３）。そして、操作指示者のポイント指示の入力があると（Ｓ６０３、ＹＥＳ）、撮影操作指示端末２１は、操作指示送信部２１２において、その指示されたポイントの基点からの左右、上下の移動方向および移動量を識別する。移動量は角度で識別される（Ｓ６０４）。
【０１４９】
撮影操作指示端末２１は、操作指示情報として左右、上下の移動方向および移動量を撮影端末１１に送信する（Ｓ６０５）。
【０１５０】
図１６の（Ｂ）は、ファインダ画像表示部１１２の広角表示領域にポイント表示する動作を説明するフロー図である。撮影端末１１は、地磁気センサおよび重力センサにより、現在のファインダ画像を写し出しているカメラの撮影方向の情報を検出して操作指示受信部１１４に通知している（Ｓ６１１）。操作指示受信部１１４は、その情報に基づく撮影方向を基点とし、画角に対応する相似形の画像フレームをファインダ画像表示部１１２の広角表示領域に表示する（Ｓ６１２）。左右９０度方向の範囲、上下１０度方向の範囲の相似形の広角表示領域は画角から容易に生成できる。
【０１５１】
撮影端末１１は、撮影操作指示端末２１から送信される操作指示情報を待つ（Ｓ６１３）。撮影端末１１は、撮影操作指示端末２１から操作指示情報を受信すると（Ｓ６１３、ＹＥＳ）、操作指示受信部１１４において、操作指示情報に含まれる左右、上下の移動方向および移動量を識別する（Ｓ６１４）。移動量は角度で識別される。操作指示受信部１１４は、現在の撮影方向を基点として、識別した移動方向および移動量に対応する位置に移動ポイント表示を付す。
【０１５２】
図１４に示すように、モニタ表示部２１１の広角表示領域において操作指示者がポイント指示を入力した位置が、ファインダ画像表示部１１２の広角表示領域にポイント表示される。
【０１５３】
操作者はこの表示を見て、左方向に約４５度、撮影端末１１を移動させる。
【０１５４】
撮影端末１１の移動にともない、図１０（Ｂ）で説明したように、この移動がセンサで検出されるので、検出した移動方向と逆方向に、検出した移動量だけファインダ画像表示部１１２の広角表示領域においてポイント表示を移動させる。もちろん、通常表示領域のファインダ画像は移動した方向の画像を表示している。
【０１５５】
また、この移動方向、移動量は移動した方向のファインダ画像とともに撮影操作指示端末２１にも通知される。従って、モニタ表示部２１１の広角表示領域においても、この通知された移動方向、移動量の情報に基づいて同様の処理が行われ、ポイント指示した位置の表示が移動する。
【０１５６】
図１５は、撮影端末１１の移動にともない、ファインダ画像表示部１１２の広角表示領域においてポイント表示が、そしてモニタ表示部２１１の広角表示領域においてポイント指示が移動する様子を示す。そして、撮影端末１１が目的とする方向に近づいてくると、構図フレームが通常表示領域にも表示されるようになる。
【０１５７】
このように、第２の実施形態の変形例は、ファインダ画像表示部とモニタ表示部のそれぞれにおいて広角表示領域を備え、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を容易に行うことができる。操作者は、操作指示者が意図する操作指示の内容を直感的かつ正確に理解することができる。
【０１５８】
次に、第３の実施形態を説明する。
【０１５９】
図１７は、本発明の第３の実施形態の構成を示すブロック図である。
【０１６０】
第３の実施形態は、撮影操作指示端末２２に画像合成部２２６を更に備えた点において第２の実施形態の撮影操作指示端末２１と異なる。
【０１６１】
第３の実施形態の撮影端末１２は、第２の実施形態の撮影端末１１と実質的に同一の構成を備える。つまり、撮影端末１２は、光学入力部１２１、ファインダ画像表示部１２２、ファインダ画像出力部１２３、撮影部１２５、撮影画像出力部１２６、操作指示受信部１２４、センサ１２８および通信制御部１２７を含んで構成される。また、ファインダ画像表示部１２２は、第２の実施形態の変形例として説明した図１４、図１５に示すような２画面構成となっている。
【０１６２】
一方、撮影操作指示端末２２は、モニタ表示部２２１、操作指示送信部２２２、撮影画像受信部２２３、モニタ表示制御部２２４、操作指示入力部２２５、画像合成部２２６および通信制御部２２７を含んで構成される。
【０１６３】
画像合成部２２６は、撮影端末１２から取得した複数の連続写真を合成してパノラマ写真を生成する。そして、画像合成部２２６が生成したパノラマ写真はモニタ表示制御部２２４に入力され、モニタ表示制御部２２４の制御によりモニタ表示部２２１の広角表示領域に表示される。広角表示領域は、ファインダ画像が写し出している画角の複数倍の視野角を表示することができる。
【０１６４】
第２の実施形態の変形例において、操作指示者はファインダ画像が現在表示している領域以外の領域にカメラの方向を移動させる操作指示を行うことができた。第３の実施形態は、広角表示領域にパノラマ写真を表示することにより、所望する構図位置を操作指示者が直感的に把握することができる。
【０１６５】
図１８を参照して第３の実施形態の動作を説明する。
【０１６６】
図１８は、第３の実施形態の動作を示すシーケンス図である。
【０１６７】
図８を参照して説明した第２の実施形態と相違する動作に絞って説明する。
【０１６８】
Ｓ７０１のセッション確立からＳ７０３のファインダ画像を撮影操作指示端末２２のモニタ表示部２２１に表示するまでの動作は、第２の実施形態における動作と同じである。
【０１６９】
パノラマ写真をモニタ表示部２２１に表示して遠隔指示を行うことを所望する操作指示者は、例えば撮影操作指示端末２２の操作メニューの「パノラマ」を指定する操作指示を入力する。この操作入力により、パノラマ撮影操作を指示する操作指示情報が撮影端末１２に送信される。パノラマ撮影操作の操作指示情報を受信した撮影端末１２は（Ｓ７０４）、ファインダ画像表示部１２２にパノラマ撮影操作を指示するメッセージを表示する（Ｓ７０５）。
【０１７０】
パノラマ撮影操作を指示するメッセージを見た操作者は、左右をずらしながら周辺の写真を複数枚撮影する。
【０１７１】
撮影された複数枚の写真は撮影操作指示端末２２に送信され、画像合成部２２６でパノラマ写真に合成されてモニタ表示制御部２２４に入力され、モニタ表示制御部２２４の制御によりモニタ表示部２２１に表示される（Ｓ７０６）。
【０１７２】
ここでパノラマ写真の合成と、モニタ表示部２２１における表示について図１９、２０、２１を参照して説明する。
【０１７３】
図１９は、画像合成部２２６で行われるパノラマ写真の合成方法を説明する図である。図１９では３枚の画像が送られてきて、それらをパノラマ写真に合成する様子を模式的に示している。
【０１７４】
前述したように、撮影端末１２は、センサ（地磁気センサおよび重力センサ）を備え、撮影時の撮影方向の情報を撮影画像に添付して送ってくる。また画角の情報も添付されている。例えば、図１９に示す３枚の写真（Ａ）、（Ｂ）、（Ｃ）について説明する。
【０１７５】
写真（Ａ）は、３２７度方向を向いて、カメラが水平な状態で撮影された写真である。写真（Ｂ）は、３５０度方向を向いて、カメラが水平な状態で撮影された写真である。また、写真（Ｃ）は、１４度方向を向いて、カメラが水平な状態で撮影された写真である。ここで、「北」を「零（０）度」とし、右回りで角度が大きくなる。つまり、「東」が「９０度」、「南」が「１８０度」そして「西」が「２７０度」として表示される。従って、これらの写真は「北西」から「北北東」方向の写真である。また、カメラの上下方向も示されているが、ここでは簡単のために、いずれの写真もカメラが水平な状態で撮影された写真としている。
【０１７６】
また、画角は左右方向で３０度、上下方向で２０度としている。これは前述のようにレンズの焦点距離と撮像素子サイズで決まってくる値である。
【０１７７】
従って、このような各写真の撮影方向と画角の情報から、図１９の中段に示すように、各写真の方位角の重複箇所を重ね合わせることにより、図１９の下段に示すようなパノラマ写真を合成することができる。もちろん、各写真に上下方向のずれがある場合には、上下方向の重複箇所を重ね合わせればよい。
【０１７８】
また、本実施形態では写真の撮影方向と画角の情報からパノラマ写真を合成しているが、必ずしもこの方法に限ることはなく、任意の方法でパノラマ写真を合成してかまわない。例えば、各写真の画像の特徴点を抽出して、その特徴点を重ね合わせることによりパノラマ写真を合成する方法もある。
【０１７９】
以上のようにして合成されたパノラマ写真は、画像合成部２２６からモニタ表示制御部２２４に送られる。モニタ表示制御部２２４は、撮影端末１２からパノラマ写真合成用に送られた写真に引き続き送られてきているファインダ画像と、このパノラマ写真をモニタ表示部２２１に表示する。
【０１８０】
図２０は、モニタ表示部２２１のファインダ画像とパノラマ写真の表示例を示す図である。
【０１８１】
この表示例では、モニタ表示部２２１は通常表示領域と広角表示領域の２画面構成となっている。通常表示領域には撮影端末１２から送られてきているファインダ画像が表示され、広角表示領域にはパノラマ写真が表示される。このパノラマ写真は、現在送られてきているファインダ画像と対応する位置関係で表示される。そして、現在のファインダ画像が表示している領域の画像フレームが、パノラマ写真に重ねて表示される。
【０１８２】
なお、広角表示領域における表示は、第２の実施形態の変形例で説明したものと同様に、現在の撮影方向を「零（０）度」とし、その左右９０度の領域を表示するように構成されている。従って、広角表示領域に表示されている方位角度は、相対的な方位角度として示されている。なお、図１９で説明したように、撮影端末１２で検出して撮影操作指示端末２２に通知してくる方位角度は地磁気センサで検出した絶対的な方位角度である。もちろん、広角表示領域における表示を絶対的な方位角度で表示してもかまわない。その場合は、現在のファインダ画像が撮影されている方位角度が中央に表示される。
【０１８３】
操作指示者はモニタ表示部２２１の広角表示領域のパノラマ写真を見ることにより、所望の構図を直感的に把握することができる。そして、その構図となるように広角表示領域のパノラマ写真上にポイント指示の入力を行う。つまり、所望する構図の中央をポイント指示する（図１８のＳ７０７）。
【０１８４】
図１６を参照して第２の実施形態の変形例の動作を説明したものと同様に、その指示されたポイントが、基点から左右、上下どの程度の移動方向および移動量であるかが角度で識別される。基点は現在のファインダ画像の中央点である。例えば、図２０の表示例の場合、上下方向の移動は無く、「左方向に３２度」の移動であることが識別される。そして、撮影操作指示端末２２は、操作指示情報として左右、上下の移動方向および移動量を撮影端末１２に送信する。
【０１８５】
また、モニタ表示制御部２２４の制御によりモニタ表示部２２１の表示を図２１に示すようにしてもよい。この表示例の場合は、２画面構成ではなくモニタ表示部２２１の全体を広角表示領域として使うように構成している。この場合は、パノラマ写真を２画面構成の場合よりも大きく表示することができるので、操作指示者はより直感的に所望の構図を決めることができる。
【０１８６】
また、この場合、撮影端末１２から送られてきているファインダ画像が表示している領域の画像フレームが、パノラマ写真に重ねて表示される。または、ファインダ画像を透過画像に加工してパノラマ写真に重ねて表示してもよい。また逆に、パノラマ写真を透過画像にしてファインダ画像と重ねるようにしてもよい。
【０１８７】
一方、第３の実施形態における撮影端末１２は、第２の実施形態の変形例と同様の動作を行う。図２２は第３の実施形態における撮影端末１２のファインダ画像表示部１２２の表示例を示す図である。
【０１８８】
撮影端末１２は、地磁気センサおよび重力センサにより、現在のファインダ画像を写し出しているカメラの撮影方向の情報を検出して操作指示受信部１２４に通知している。操作指示受信部１２４は、その情報に基づく撮影方向を基点とし、ファインダ画像の画角に対応する相似形の画像フレームをファインダ画像表示部１２２の広角表示領域の中央部に表示する。なお、広角表示領域はこの画像フレームの中心から、例えば左右方向９０度、上下方向２０度の範囲を表示するものとする。
【０１８９】
撮影端末１２の操作指示受信部１２４は、撮影操作指示端末２２から操作指示情報を受信すると、操作指示情報に含まれる左右、上下の移動方向および移動量を識別する。そして、操作指示受信部１２４は、現在の撮影方向を基点として、識別した移動方向および移動量に対応する位置に移動ポイント表示を付す（図１８のＳ７０８）。図２２の（Ａ）がこの状態の表示例を示している。
【０１９０】
操作者はこの表示を見て、左方向に３２度、撮影端末１２を移動させる。
【０１９１】
撮影端末１２の移動にともない、この移動がセンサで検出されるので、操作指示受信部１２４は、検出した移動方向と逆方向に、検出した移動量だけファインダ画像表示部１２２の広角表示領域においてポイント表示を移動させる。もちろん、通常表示領域のファインダ画像は移動した方向の画像を表示している。
【０１９２】
また、この移動方向、移動量は、移動した方向を写し出しているファインダ画像とともに撮影操作指示端末２２にも通知される。従って、モニタ表示部２２１の広角表示領域においても、この通知された移動方向、移動量の情報に基づいて同様の処理が行われ、ポイント指示した位置の表示が移動する（図１８のＳ７０９）。
【０１９３】
図２２の（Ｂ）は、撮影端末１２の移動にともない、ファインダ画像表示部１２２の広角表示領域においてポイント表示が移動する様子を示す。そして、撮影端末１２の向きが目的とする方向に近づいてくると、構図フレームが通常表示領域にも表示されるようになる。また、図２３は、図２０に示した表示例の広角表示領域において、撮影端末１２の移動にともない、ポイント指示がパノラマ写真とともに移動する様子を示す。
【０１９４】
なお、第３の実施形態においても、操作者の移動操作により、ファインダ画像表示部に表示された構図フレームがファインダ画像表示部の表示フレームとほぼ重なる所定の位置に近づいてきたときには接近表示を出力する。また、構図フレームがファインダ画像表示部の表示フレームとほぼ合致したしたときには到達表示を出力する。そして、これらの接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０１９５】
以上のように構成することにより、第３の実施形態は撮影操作指示端末にパノラマ写真を表示することができる。そして、操作指示者は、ファインダ画像が現在表示している領域以外の領域においても所望の構図位置を直感的に把握することができ、カメラの方向を移動させる操作指示を行うことができる。
【０１９６】
第３の実施形態の変形例を説明する。
【０１９７】
第３の実施形態の変形例は、撮影操作指示端末で合成したパノラマ写真を撮影端末のファインダ画像表示部の広角表示領域にも表示する。
【０１９８】
第３の実施形態の変形例は、図１７に示した第３の実施形態の構成と同じである。画像合成部２２６で合成されたパノラマ写真は、モニタ表示制御部２２４に送られて、モニタ表示制御部２２４の制御でモニタ表示部２２１に表示される。このとき、モニタ表示制御部２２４は、そのパノラマ写真を操作指示送信部２２２にも送り、撮影端末１２に送信するように指示する。
【０１９９】
操作指示送信部２２２は、通信回線を介してパノラマ写真を撮影端末１２に送信する。このとき操作指示送信部２２２は、必要に応じて画像圧縮等の処理を行う。また、送信されるパノラマ写真には、パノラマ写真の画像フレームに対応する方位角および上下角の情報が付されている。
【０２００】
撮影操作指示端末２２からパノラマ写真を受信した撮影端末１２は、操作指示受信部１２４において、パノラマ写真をファインダ画像表示部１２２の広角表示領域に表示する処理を行う。このとき操作指示受信部１２４は、必要に応じて画像圧縮解除等の処理を行い、パノラマ写真に付された方位角および上下角の情報に基づいて、パノラマ写真をファインダ画像表示部１２２の広角表示領域の対応する位置に表示する。
【０２０１】
上述した動作は、図１８に示したシーケンス図のＳ７０６とＳ７０７の動作の間に行われる。
【０２０２】
以上のように構成し、動作することにより、第３の実施形態の変形例は撮影操作指示端末のみならず撮影端末にもパノラマ写真を表示することができる。そして、撮影端末の操作者は、操作指示者が、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を行ったとしても、操作指示者の意図するその指示を直感的かつ正確に理解することができる。
【０２０３】
第４の実施形態を説明する。
【０２０４】
第４の実施形態は、パノラマ写真を撮影端末で合成し、それを撮影操作指示端末に送り、撮影端末のファインダ画像表示部の広角表示領域および撮影操作指示端末のモニタ表示部に表示する。
【０２０５】
図２４は、第４の実施形態の構成を示すブロック図である。
【０２０６】
第４の実施形態は、撮影端末１３に画像合成部１３６を備える。また、撮影操作指示端末２３は、第３の実施形態の撮影操作指示端末２２から画像合成部２２６を除いた構成に相当する。
【０２０７】
撮影端末１３は、光学入力部１３１、ファインダ画像表示部１３２、ファインダ画像出力部１３３、撮影部１３５、画像合成部１３６、撮影画像出力部１３３、操作指示受信部１３４、センサ１３８および通信制御部１３９を含んで構成される。また、ファインダ画像表示部１３２は、第２の実施形態の変形例として説明した図１４、図１５および第３の実施形態として説明した図２２に示すような２画面構成となっている。
【０２０８】
一方、撮影操作指示端末２３は、モニタ表示部２３１、操作指示送信部２３２、撮影画像受信部２３３、モニタ表示制御部２３４、操作指示入力部２３５および通信制御部２３６を含んで構成される。
【０２０９】
図２５は、第４の実施形態の動作を示すシーケンス図である。図１８を参照して説明した第３の実施形態の動作と相違する点を中心にして説明する。
【０２１０】
パノラマ写真をモニタ表示部２３１に表示して遠隔指示を行うことを所望する操作指示者は、第３の実施形態と同じように、例えば撮影操作指示端末２３の操作メニューに表示される「パノラマ」を指定する操作指示を入力する。この操作入力により、パノラマ撮影操作を指示する操作指示情報が撮影端末１３に送信される。パノラマ撮影操作の操作指示情報を受信した撮影端末１３は（Ｓ８０４）、ファインダ画像表示部１３２にパノラマ撮影操作を指示するメッセージを表示する（Ｓ８０５）。
【０２１１】
パノラマ撮影操作を指示するメッセージを見た操作者は、左右をずらしながら周辺の写真を複数枚撮影し、パノラマ写真合成を行う操作メニューを選択操作する。
【０２１２】
この操作により、画像合成部１３６は、撮影した複数の連続写真を合成してパノラマ写真を生成する。そして、画像合成部１３６が生成したパノラマ写真は操作指示受信部１３４に入力され、操作指示受信部１３４の制御によりファインダ画像表示部１３２の広角表示領域に表示される。
【０２１３】
なお、パノラマ写真の合成および広角表示領域への表示は、第３の実施形態で説明したように撮影画像に付加された方位角および上下角の情報に基づいて制御される。
【０２１４】
また、このとき、合成されたパノラマ写真は、撮影画像出力部１３７にも入力され、撮影画像出力部１３７で画像圧縮等の処理が行われて、通信回線を介して撮影操作指示端末２３に送信される。
【０２１５】
撮影操作指示端末２３は、パノラマ写真を撮影画像受信部２３３で受信して画像圧縮の解除を行い、モニタ表示制御部２３１の制御によりパノラマ写真をモニタ表示部２３１に表示する（Ｓ８０６）。
【０２１６】
モニタ表示部２３１の表示形態は、第３の実施形態で説明した図２０のように広角表示領域を設けた表示でも良いし、図２１のように通常表示領域を広角用に表示変更して使用するようにしても良い。また、パノラマ写真のモニタ表示部２３１への表示は、第３の実施形態で説明したように撮影画像に付加された方位角および上下角の情報に基づいて制御される。
【０２１７】
操作指示者はモニタ表示部２３１の広角表示領域のパノラマ写真を見ることにより、所望の構図を直感的に把握することができる。そして、その構図となるように広角表示領域のパノラマ写真上にポイント指示の入力を行う。つまり、所望する構図の中央をポイント指示する。
【０２１８】
操作指示者が入力した操作指示は、操作指示情報として撮影端末１３に送られ（Ｓ８０７）、第２の実施形態の変形例および第３の実施形態で説明したように、その操作指示の内容がファインダ画像表示部１３２の広角表示領域に表示される。
【０２１９】
このとき第４の実施形態においては、ファインダ画像表示部１３２の広角表示領域にはパノラマ写真が表示されている。そして、操作指示の内容はパノラマ写真の対応する位置に表示される（Ｓ８０８）。
【０２２０】
以降の動作は第３の実施形態と同じなので説明を省略する。
【０２２１】
なお、第４の実施形態においても、操作者の移動操作により、ファインダ画像表示部に表示された構図フレームがファインダ画像表示部の表示フレームとほぼ重なる所定の位置に近づいてきたときには接近表示を出力する。また、構図フレームがファインダ画像表示部の表示フレームとほぼ合致したしたときには到達表示を出力する。そして、これらの接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０２２２】
以上のように構成することにより、第４の実施形態は、第３の実施形態の変形例と同様の効果を奏する。つまり、撮影端末の操作者は、操作指示者が、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を行ったとしても、操作指示者の意図するその指示を直感的かつ正確に理解することができる。
【０２２３】
また、上記の各実施形態の説明において、撮影操作指示端末から撮影端末に送られる要求や操作指示情報に基づくメッセージはファインダ画像表示部に表示されるとして説明した。この場合、撮影端末は、メッセージ内容を合成音声により発するように構成しておいてもよい。例えば、ファインダ画像送信要求の場合には、「カメラの電源を入れてファインダ画像を送信してください」と発する。パノラマ撮影操作を指示する操作指示情報の場合には、「周辺のパノラマ写真を撮影して画像を送信してください」と発する。そして、撮影操作を指示する操作指示情報の場合には、「現在の構図で撮影してください」と発する。また、ズームイン操作を指示する場合は「ズームインしてください」と発する。このように構成することで、操作者は、操作指示者の指示する内容をより的確に把握することができる。
【０２２４】
さらに、上記の各実施形態の説明は撮影端末にカメラの遠隔操作機能が無いものとして説明した。しかし、カメラの遠隔操作機能がある場合には、絞りやシャッター速度等のカメラの撮影条件設定、解像度の変更、ズームイン／ズームアウト、シャッター操作等を撮影操作指示端末から操作指示者が遠隔で操作できることは言うまでもない。
【符号の説明】
【０２２５】
１０ 画像取得手段
１１、１２、１３ 撮影端末
３１、１０１、１１１、１２１、１３１ 光学入力部
３２、１０２、１１２、１２２、１３２ ファインダ画像表示部
３３、１０３、１１３、１２３、１３３ ファインダ画像出力部
３４、１０４、１１４、１２４、１３４ 操作指示受信部
１１５、１２５、１３５ 撮影部
１１６、１２６、１３７ 撮影画像出力部
１１７、２１６、１２７、２２７、１３９、２３６ 通信制御部
１１８、１２８、１３８ センサ
２０ 画像表示操作指示手段
２１、２２、２３ 撮影操作指示端末
４１、２０１、２１１、２２１、２３１ モニタ表示部
４２、２０２、２１２、２２２、２３２ 操作指示送信部
２１３、２２３、２３３ 撮影画像受信部
２１４、２２４、２３４ モニタ表示制御部
２１５、２２５、２３５ 操作指示入力部
１３６、２２６ 画像合成部
３０ 画像取得装置
４０ 画像表示操作指示装置
【技術分野】
【０００１】
本発明は、遠隔画像表示システム、装置および方法に関し、特に、画像表示操作指示手段から送られてくる画像取得手段の操作に関する遠隔指示を、画像取得手段の表示部に表示する遠隔画像表示システム、装置および方法に関する。
【背景技術】
【０００２】
通信網の高速化、大容量化に伴い、テレビ電話、テレビ会議、ウェブカメラによるリモート監視等のビデオ通信の多様化が進んでいる。また、今日では、携帯電話機は、誰もが保有する生活必需品となっており、その携帯電話機のほとんどにおいてデジタルカメラ機能が付加されている。携帯電話機に搭載されているデジタルカメラも、１０００万画素を超える高精細なものが出回っており、デジタルカメラに携帯電話機能が付加された端末と言ってもおかしくないような製品が流通している。このように、今日では、誰もが無線通信機能が付いたカメラを常時携帯していると言ってもよい環境となっている。
【０００３】
そのため、カメラと通信を融合させたさまざまなアプリケーション技術が開示されている。そのようなアプリケーション技術として、例えば、特許文献１や特許文献２に開示された技術がある。
【０００４】
特許文献１に開示された技術は、カメラのユーザが撮影に不慣れな場合や、初めて撮影する場所であっても、好適な構図で写真撮影を行うことが可能な撮影装置等に関する技術である。当該技術によれば、カメラの現在位置をネットワークのサーバに送ることにより、その現在位置から所定の距離範囲内で撮影された参照画像と、その参照画像に関連する撮影情報をサーバから取得することができる。カメラは、そのサーバから取得した参照画像と撮影情報と、カメラの現在位置とに基づいて、ユーザを参照画像の撮影位置に誘導する情報を表示部に表示する。そして、ユーザの撮影状態に基づいて、ユーザの撮影状態に対応する構図が参照画像の構図となるように表示部に表示して教示する機能を備えている。
【０００５】
また、特許文献２に開示された技術は、コントローラからの遠隔操作により、頻繁に画像の撮影と閲覧を繰り返し行うことができるリモートカメラシステムに関する技術である。このリモートカメラシステムは、デジタルカメラとコントローラとを通信回線で接続し、コントローラを用いて遠隔でデジタルカメラを操作する。通信回線としては無線ＬＡＮ（Local Area Network）のアドホックモードの利用を想定し、デジタルカメラとコントローラとを無線回線で接続している。コントローラは、デジタルカメラに対して電源のＯｎ／Ｏｆｆ、ズームの調整、モード設定の切替、合焦点や撮影等の細かい制御を行うことができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開2009-239397号公報
【特許文献２】特開2006-174164号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
カメラと通信を融合させたアプリケーションの一つとして、携帯電話機のカメラ機能でリアルタイムに入力されるファインダ画像を、オンラインモニタとして遠隔の通信相手の装置に表示するという利用形態が可能である。なお、ファインダ画像とは、カメラのレンズを通して光学的に写しだされた被写体画像をそのままファインダ部に表示する画像のことである。つまり、携帯電話機のカメラに限らず、一般のデジタルカメラであっても、カメラは、電源が入っている状態であればレンズを通して入ってくる画像をファインダ画像として表示部に表示している。このファインダ画像を遠隔の通信相手の装置に表示することで各種のアプリケーションを実現することができる。
【０００８】
この場合、カメラを保持し、操作して被写体をファインダ画像として取り込む操作者と、通信回線を介して送られてくるファインダ画像を遠隔で見て、操作者に対してカメラの向きや構図の変更を指示する操作指示者が存在する。そして、カメラの操作者は、操作指示者からの言葉による操作指示に基づいて、操作指示者が意図するカメラの向きや構図になるようにカメラ操作を行う。
【０００９】
しかし、操作指示者と操作者との通話による音声指示では、操作指示者の意図する指示内容をカメラの操作者に直感的かつ正確に伝えることが難しい。
【００１０】
特許文献１に開示された技術は、特定の場所の参照画像の構図となるように、サーバから受信した撮影情報に基づいて、ユーザを撮影位置に誘導する誘導情報を表示部に表示するものである。そのため、任意の場所において、操作指示者の意図する指示内容に応じて、カメラ操作に関する遠隔指示を表示部に表示するものではない。
【００１１】
特許文献２に開示された技術は、コントローラの操作者が遠隔のカメラを一人で自由に操作することを目的とするものである。そのため、特許文献２に開示された技術は、ファインダ画像を見てカメラ操作に関する指示を出す操作指示者が意図する指示内容を、カメラを操作する操作者に対して遠隔表示する機能は考慮されていない。
【００１２】
本発明の目的は、上記の課題を解決して、ファインダ画像が写し出す向きや構図に関する操作指示者の意図する遠隔指示を、カメラ等の画像取得手段の表示部に表示する遠隔画像表示システム、装置および方法を提供することにある。
【課題を解決するための手段】
【００１３】
上記の目的を実現するために、本発明の一形態である遠隔画像表示システムは、光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、を含む画像取得手段と、前記通信回線を介して入力した前記ファインダ画像をモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力する操作指示送信部と、を含む画像表示操作指示手段とを備え、前記画像取得手段は、前記画像表示操作指示手段が出力する前記操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部を含むことを特徴とする。
【００１４】
また、本発明の他の形態である画像取得装置は、光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部とを含むことを特徴とする。
【００１５】
また、本発明の他の形態である画像表示操作指示装置は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する操作指示送信部と、を含むことを特徴とする。
【００１６】
また、本発明の他の形態である遠隔画像表示方法は、画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、画像表示操作指示手段が、前記通信回線を介して入力した前記ファインダ画像をモニタ表示部にモニタ表示し、モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力し、前記画像取得手段が、前記操作指示情報を前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする。
【００１７】
また、本発明の他の形態である画像取得方法は、光学入力部から入力する画像をファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする。
【００１８】
また、本発明の他の形態である画像表示操作指示方法は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示し、前記モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する、ことを特徴とする。
【発明の効果】
【００１９】
本発明は、画像表示操作指示手段から送られてくる画像取得手段の操作に関する遠隔指示情報を、画像取得手段の表示部に表示して、操作指示者の意図する操作指示の内容を操作者に直感的かつ正確に伝えることができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１の実施形態の遠隔画像表示システムの構成を示すブロック図である。
【図２】第１の実施形態の遠隔画像表示システムの動作を示すシーケンス図である。
【図３】第１の実施形態の画像取得装置の構成を示すブロック図である。
【図４】第１の実施形態の画像取得装置の動作を示すシーケンス図である。
【図５】第１の実施形態の画像表示操作指示装置の構成を示すブロック図である。
【図６】第１の実施形態の画像表示操作指示装置の動作を示すシーケンス図である。
【図７】本発明の第２の実施形態の構成を示すブロック図である。
【図８】第２の実施形態の動作を示すシーケンス図である。
【図９】レンズの焦点距離、撮像素子サイズおよび画角の関係を説明する図である。
【図１０】第２の実施形態における撮影端末のファインダ画像表示部と撮影操作指示端末のモニタ表示部の画像表示例を示す図である。
【図１１】撮影端末が撮影する画像フレームの領域を説明する図である。
【図１２】第２の実施形態の撮影端末の動作を示すフロー図である。
【図１３】モニタ表示部における操作例とその操作に対応するファインダ画像表示部における表示例を示す図である。
【図１４】第２の実施形態の変形例におけるモニタ表示部およびファインダ画像表示部における表示画面例を示す模式図である。
【図１５】第２の実施形態の変形例におけるモニタ表示部およびファインダ画像表示部における別の表示画面例を示す模式図である。
【図１６】第２の実施形態の変形例において、モニタ表示部の広角表示領域でのポイント指示と、それに基づくファインダ画像表示部の広角表示領域でのポイント表示の動作を説明するフロー図である。
【図１７】本発明の第３の実施形態の構成を示すブロック図である。
【図１８】第３の実施形態の動作を示すシーケンス図である。
【図１９】画像合成部で行われるパノラマ写真の合成方法を説明する図である。
【図２０】モニタ表示部のファインダ画像とパノラマ写真の表示例を示す図である。
【図２１】モニタ表示部のファインダ画像とパノラマ写真の別の表示例を示す図である。
【図２２】第３の実施形態における撮影端末のファインダ画像表示部の表示例を示す図である。
【図２３】図２０に示した表示例の広角表示領域において、撮影端末の移動にともない、ポイント指示がパノラマ写真とともに移動する様子を示す図である。
【図２４】本発明の第４の実施形態の構成を示すブロック図である。
【図２５】第４の実施形態の動作を示すシーケンス図である。
【発明を実施するための形態】
【００２１】
本発明を実施するための形態について説明する。
【００２２】
ファインダ画像を遠隔の通信相手の装置に表示することで各種のアプリケーションを実現することができる。
【００２３】
例えば、商品の購入希望者が、他の人に代理してショッピングを依頼するような場合に利用できる。
【００２４】
服装、かばん、台所用品、家具など、デザインや色彩などにおいて購入希望者の好みが強いような商品を代理購入する場合、代理購入者は、サイズや機能さえ合えばよいということで勝手に購入することができない。そのような場合、代理購入者は、陳列されている商品を携帯電話機付属のカメラのファインダ画像として表示し、それをリアルタイムで購入希望者に送信して、購入希望者が遠隔でショッピングする環境を作ることにより対応することができる。
【００２５】
このような環境において、商品の購入希望者は、代理購入者がファインダ画像として写しこむ画像を見て、自分の好みに合致する商品を選択する。その選択の過程において、購入希望者は、代理購入者が写しこむ画像に対してどの方向を見せて欲しいとか、どの商品を拡大表示して欲しいとかの操作指示を出す。その操作指示の内容が携帯電話機の表示部に表示され、代理購入者は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行う。
【００２６】
また、別の例として、道案内にも利用できる。
【００２７】
街なかで道に迷った人が、例えば道案内センターに携帯電話機で通信接続する。道に迷った人は、道案内センターの担当者からの指示で自分の周辺の街風景を携帯電話機付属のカメラで写し出し、そのファインダ画像を道案内センターに送る。道案内センターの担当者は、送られてきたファインダ画像に基づいて、道に迷った人の行くべき方向を説明するために、写し出すファインダ画像の方向や、目印となる建物等の拡大表示を指示する。その指示の内容が携帯電話機の表示部に表示され、道に迷った人は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行うことにより、道案内センターの担当者の説明を受ける。
【００２８】
もちろん、写真撮影を遠隔で行うという利用も可能である。
【００２９】
カメラの操作者は撮影場所にいて、撮影対象となる被写体画像はファインダ画像として遠隔の撮影指示者に送られる。撮影指示者はそのファインダ画像を見ながら構図を考えて、目的の構図になるようにカメラの操作者にカメラの操作を指示する。その操作指示の内容がカメラのファインダ画像表示部に表示され、カメラの操作者は、その指示に基づいてカメラを動かして、写し出す方向を変えたり、ズーム操作を行う。目的の構図になったところで、撮影指示者はその構図の写真撮影を指示する。カメラの操作者は、その指示に基づいてカメラのシャッターを切る。
【００３０】
上述したような利用形態が可能な本発明の実施形態について図面を参照して説明する。
【００３１】
図１は、本発明の第１の実施形態の遠隔画像表示システムの構成を示すブロック図である。
【００３２】
尚、実施形態は例示であり、開示の装置及びシステムは、以下の実施形態の構成には限定されない。また、実施形態において、「画像」は「静止画像」および「動画像」を含んで説明されている。また、画像表示操作指示端末で行う入力操作を「操作指示」と称し、操作指示により出力される情報を「操作指示情報」と称し、操作指示が意味する内容を「操作指示の内容」と称して説明する。
【００３３】
本発明の一形態である遠隔画像表示システムは、画像取得手段１０と画像表示操作指示手段１１とを含んで構成される。画像取得手段１０は、光学入力部１０１を備え、そこから入力する画像をファインダ画像として取得し、表示する。画像取得手段１０と画像表示操作指示手段１１とは、通信回線を介して接続される。そして、画像表示操作指示手段１１は、画像取得手段１０に対して、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、操作指示情報として出力する。
【００３４】
画像取得手段１０は、光学入力部１０１から入力する画像をファインダ画像として表示するファインダ画像表示部１０２と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部１０３と、を含む。
【００３５】
画像表示操作指示手段２０は、モニタ表示部２０１と操作指示送信部２０２と、を含む。モニタ表示部２０１は、画像取得手段１０と、通信回線を介して入力したファインダ画像をモニタ表示する。操作指示送信部２０２は、モニタ表示部２０１に表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、通信回線を介して操作指示情報として出力する。
【００３６】
そして、画像取得手段１０は、画像表示操作指示手段２０が出力する操作指示情報を受信して、操作指示の内容をファインダ画像表示部１０２に表示する操作指示受信部１０４を含む。
【００３７】
図２は、第１の実施形態の遠隔画像表示システムの動作を示すシーケンス図である。
【００３８】
画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示する（Ｓ１０１）。そして、ファインダ画像を、通信回線を介して出力する（Ｓ１０２）。画像表示操作指示手段が、通信回線を介して入力したファインダ画像をモニタ表示部にモニタ表示する（Ｓ１０３）。モニタ表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、通信回線を介して操作指示情報として出力する（Ｓ１０４）。すると、画像取得手段が、その操作指示情報を通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示する（Ｓ１０５）。
【００３９】
以上のように遠隔画像表示システムを構成することにより、画像取得手段１０でリアルタイムにとらえているファインダ画像を、画像表示操作指示手段２０でモニタすることができる。そして、操作指示者は、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、画像表示操作指示手段２０にモニタ表示されたファインダ画像に対して入力することができる。その操作指示は、通信回線を介して操作指示情報として画像取得手段１０に送ることができ、画像取得手段１０のファインダ画像表示部１０２に操作指示の内容が表示される。そのため、操作指示者の意図する操作指示の内容を画像取得手段１０の操作者に直感的かつ正確に伝えることができる。
【００４０】
図３は、第１の実施形態の画像取得装置の構成を示すブロック図である。
【００４１】
この画像取得装置３０は、光学入力部３１から入力する画像をファインダ画像として表示するファインダ画像表示部３２と、そのファインダ画像を通信回線を介して出力するファインダ画像出力部３３と、操作指示受信部３４とを含んで構成される。操作指示受信部３４は、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示する。
【００４２】
図４は、第１の実施形態の画像取得装置の動作を示すシーケンス図である。
【００４３】
画像取得装置は、光学入力部から入力する画像をファインダ画像として表示し（Ｓ２０１）、そのファインダ画像を、通信回線を介して出力する（Ｓ２０２）。そして、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、（Ｓ２０３、ＹＥＳ）、操作指示の内容をファインダ画像表示部に表示する（Ｓ２０４）。
【００４４】
以上のように画像取得装置を構成することにより、リアルタイムにとらえているファインダ画像を、通信回線を介して外部に出力することができる。そして、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、通信回線を介して入力し、操作指示の内容をファインダ画像表示部に表示することができる。そのため、画像取得装置３０の操作者は、ファインダ画像の入力方向または構図を含む画像取得に関する操作指示の内容を直感的かつ正確に把握することができる。
【００４５】
図５は、本発明の第１の実施形態の画像表示操作指示装置の構成を示すブロック図である。
【００４６】
この画像表示操作指示装置４０はモニタ表示部４１と操作指示送信部４２を含んで構成される。モニタ表示部４１は、通信回線を介して画像取得装置３０から入力する画像をファインダ画像としてモニタ表示する。操作指示送信部４２は、そのモニタ表示部４１に表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、画像取得装置３０に表示するための操作指示情報として通信回線を介して出力する。
【００４７】
図６は、本発明の第１の実施形態の画像表示操作指示装置の動作を示すシーケンス図である。
【００４８】
画像表示操作指示装置は、通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示する（Ｓ３０１、Ｓ３０２）。そして、そのモニタ表示されたファインダ画像に対して入力された、ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を（Ｓ３０３、ＹＥＳ）、画像取得装置に表示するための操作指示情報として通信回線を介して出力する（Ｓ３０４）。
【００４９】
以上のように画像表示操作指示装置を構成することにより、画像取得装置から入力する画像をファインダ画像としてモニタすることができ、しかも、そのファインダ画像に対して、入力方向または構図を含む画像取得に関する操作を指示する操作指示を入力できる。そして、入力された操作指示は、画像取得装置に表示するための操作指示情報として通信回線を介して出力されるので、操作指示者は意図する操作指示の内容を画像取得装置の操作者に直感的かつ正確に伝えることができる。
【００５０】
次に、第２の実施形態を説明する。
【００５１】
図７は、本発明の第２の実施形態の構成を示すブロック図である。
【００５２】
第２の実施形態において、第１の実施形態での画像取得手段１０または画像取得装置１は、写真撮影が可能な撮影端末１１である。そして、第１の実施形態での画像表示操作指示手段２０または画像表示操作指示装置２は、撮影端末１１の操作を遠隔で指示することができる撮影操作指示端末２１である。
【００５３】
撮影端末１１を保持して撮影端末１１を操作する者を「操作者」と称し、撮影操作指示端末２１を保持して撮影端末１１の操作を遠隔で指示する者を「操作指示者」と称する。また、操作指示者が行う入力操作を「操作指示」と称し、操作指示により出力される情報を「操作指示情報」と称し、操作指示が意味する内容を「操作指示の内容」と称して説明する。
【００５４】
第２の実施形態は、操作指示者の操作指示に基づいて出力された操作指示情報に従って操作指示の内容が表示され、操作者が操作指示の内容に従って撮影端末１１を操作して、遠隔で操作指示者が意図する構図の写真撮影を行う例を説明する。
【００５５】
撮影端末１１は、光学入力部１１１、ファインダ画像表示部１１２、ファインダ画像出力部１１３、撮影部１１５、撮影画像出力部１１６、操作指示受信部１１４、センサ１１８および通信制御部１１７を含んで構成される。撮影端末１１は、例えばカメラ付き携帯電話機や移動通信機能付きデジタルカメラを想定することができる。そして、光学入力部１１１、ファインダ画像表示部１１２、ファインダ画像出力部１１３、撮影部１１５、撮影画像出力部１１６がカメラに相当する。
【００５６】
光学入力部１１１のレンズから入射される被写体像は、光学入力部１１１の図示しない撮像素子の受光面に結像する。撮像素子は、受光面上にマトリクス状に配列された多数の光電変換セルにより、受光面上に結像した被写体像の光量に応じた電気信号を出力する。この電気信号は、図示しないアナログ／デジタル変換回路を用いてデジタル信号に変換され、さらに、図示しない信号処理部において画像処理が行われて画像信号として光学入力部１１１から出力される。ファインダ画像表示部１１２は、この光学入力部１１１から出力された画像信号をファインダ画像として表示する。
【００５７】
なお、撮像素子は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）で構成される。また、ファインダ画像表示部１１２は、例えば液晶や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）で構成された表示部である。
【００５８】
ファインダ画像出力部１１３は、通信制御部１１７を介してデータ転送するために、ファインダ画像表示部１１２に表示されるファインダ画像を映像信号に変換し、その映像信号を圧縮して出力する。
【００５９】
撮影部１１５は、シャッターにより決められた時間のみ露光した撮像素子上の被写体像を撮影画像（静止画像）として記録メディア（不図示）に保存する。そして撮影画像出力部１１６は、通信制御部１１７を介してデータ転送するために、その撮影画像を画像圧縮して出力する。ファインダ画像出力部１１３から出力されたファインダ画像や撮影画像出力部１１６から出力された撮影画像は、通信制御部１１７を介して撮影操作指示端末２１に送信される。
【００６０】
操作指示受信部１１４は、後述する操作指示情報を撮影操作指示端末２１から通信制御部１１７を介して受信し、操作指示情報に対応した操作指示の内容をファインダ画像表示部１１２に表示する。ファインダ画像表示部１１２に表示される操作指示の内容には、操作の種別を特定するメッセージ、撮影端末１１の移動方向や移動量を視覚的に指示する印が含まれる。
【００６１】
センサ１１８は、地磁気センサおよび重力センサであり、詳細は後述するが、撮影端末１１の光学入力部１１１が向いている方向の情報を操作指示受信部１１４に入力する。つまり、撮影端末１１を上下左右に移動させたときに、操作指示受信部１１４はその移動の変化に関する情報を識別することができる。また、このセンサが検出した撮影方向の情報は、後述するように、ファインダ画像や撮影画像とともに撮影操作指示端末２１にも送られる。
【００６２】
通信制御部１１７は、通信回線を介して撮影操作指示端末２１と接続し、撮影操作指示端末２１との間で通信のための信号の送受信を行う。
【００６３】
一方、撮影操作指示端末２１は、モニタ表示部２１１、操作指示送信部２１２、撮影画像受信部２１３、モニタ表示制御部２１４、操作指示入力部２１５および通信制御部２１６を含んで構成される。撮影操作指示端末２１は、例えば携帯電話機、通信機能付きパーソナルコンピュータまたは通信機能付き携帯情報端末を想定することができる。なお、撮影操作指示端末２１に要求される通信機能は、移動通信機能に限ることなく有線通信機能であってもかまわない。
【００６４】
モニタ表示制御部２１４は、通信制御部２１６を介して撮影端末１１から受信するファインダ画像の映像信号を入力し、圧縮を解除してモニタ表示部２１１に表示する。また、撮影画像受信部２１３は、通信制御部２１６を介して撮影端末１１から受信する撮影画像を入力し、圧縮を解除してモニタ表示制御部２１４に出力する。モニタ表示制御部２１４は、撮影画像受信部２１３から撮影画像を受信した場合は、ファインダ画像を撮影画像に切り替えてモニタ表示部２１１に表示する。
【００６５】
操作指示者は、操作指示入力部２１５から操作指示を入力する。例えば、操作指示者は、モニタ表示部２１１に表示されたファインダ画像が、意図する方向の画像表示や意図する構図になるように、撮影端末１１を移動させる指示を含む操作指示を入力する。
【００６６】
操作指示者が直感的に操作指示を入力できるようにするために、操作指示入力部２１５は、例えばタッチパネルで構成される。そして、モニタ表示部２１１に表示されるファインダ画像上の位置とタッチパネル上の位置とが容易に対応付けられるよう、モニタ表示部２１１にタッチパネルを張り合わせた構成が望ましい。また、モニタ表示部２１１は、例えば液晶や有機ＥＬで構成された表示部である。もちろん、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）で構成されていてもかまわない。
【００６７】
操作指示送信部２１２は、モニタ表示部２１１に重ね合わせた操作指示入力部２１５を介して操作指示者が入力した操作指示を検出し、その操作指示を解析して操作指示情報を出力する。つまり、後述するように、操作指示者がスタイラスペン（手書き文字入力用ペン）をポインティングデバイスとして用いてタッチパネル上で行った操作を識別し、その操作に対応する操作指示情報を出力する。この操作指示情報は、通信制御部２１６を介して撮影端末１１の操作指示受信部１１４に送られる。
【００６８】
通信制御部２１６は、通信回線を介して撮影端末１１と接続し、撮影端末１１との間で通信のための信号の送受信を行う。
【００６９】
なお、上記の構成には示していないが、撮影端末１１と撮影操作指示端末２１とは相互に音声通信を行う機能を備えている。
【００７０】
上記のように構成された第２の実施形態の動作を説明する。
【００７１】
図８は、第２の実施形態の動作を示すシーケンス図である。
【００７２】
前述したように、第２の実施形態において撮影端末１１は移動通信機能を有し、撮影操作指示端末２１が有する通信機能は、移動通信機能に限ることなく有線通信機能であってもかまわない。撮影端末１１と撮影操作指示端末２１とは、ＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）によるセッション制御により両端末間を接続する形態が想定される。また、ネットワークカメラやウェブカメラのように、インターネット上に設置されたアプリケーションサーバを介して相互に希望する接続先と接続する形態であってもよい。
【００７３】
まず、必要とするプロトコルにより、撮影端末１１の通信制御部１１７と撮影操作指示端末２１の通信制御部２１６との間でセッション確立が行われる（Ｓ４０１）。この場合、撮影端末１１と撮影操作指示端末２１のいずれからセッション確立の要求を行ってもかまわない。セッションが確立されると、それぞれの端末間で機能情報が交換され、撮影端末１１と撮影操作指示端末２１との間でマルチメディア通信が開始される。このとき、撮影端末１１の保有するカメラ機能情報が撮影操作指示端末２１に通知され、撮影操作指示端末２１において、撮影端末１１の機能条件が設定される。カメラ機能情報としては、例えばレンズの焦点距離、撮像素子サイズ、解像度（表示サイズ）種別、ズーム機能有無、カメラの遠隔操作機能有無等が含まれる。カメラの遠隔操作機能とは、絞りやシャッター速度等のカメラの撮影条件設定、ズームイン／ズームアウト、シャッター操作等を遠隔で操作できる機能である。本実施形態では、カメラの遠隔操作機能は無いものとして説明する。
【００７４】
このとき音声通信も確立されているので、撮影操作指示端末２１側の操作指示者と、撮影端末１１側の操作者との間で、音声通信により、何を目的とした操作指示が行われるのかを相互に認識する。例えば、第２の実施形態においては、操作指示者が、操作者の近傍の風景を撮影端末１１で遠隔撮影することを目的とする。
【００７５】
操作者が撮影端末１１のカメラ機能の電源を入れると、図７を参照して説明したようにファインダ画像が取り込まれ、通信回線を介して撮影操作指示端末２１に送られ、そのモニタ表示部２１１に表示される。
【００７６】
なお、図８は、操作指示者と操作者との間で音声通信を行うことなく、マルチメディア通信が開始されると同時にファインダ画像の送信要求を自動で行う例を示している。
【００７７】
セッションが確立されてマルチメディア通信が開始されると、撮影操作指示端末２１からファインダ画像の送信を要求するメッセージが撮影端末１１に送信される（Ｓ４０２）。このファインダ画像送信要求は、撮影端末１１のファインダ画像表示部１１２にメッセージとして表示される。操作者は、ファインダ画像表示部１１２のファインダ画像送信要求メッセージを見て、撮影端末１１のカメラ機能の電源を入れる。これにより、ファインダ画像が取り込まれ、通信回線を介して撮影操作指示端末２１に送られる（Ｓ４０３）。
【００７８】
撮影端末１１は、このファインダ画像とともに、撮影方向とカメラの画角の情報を添付して撮影操作指示端末２１に送信する。撮影方向は撮影端末１１が備える地磁気センサおよび重力センサで識別した画像フレーム中央の方位角度および上下角であり、画角は撮影端末１１のカメラで撮影される画像の範囲を角度で表したものである。
【００７９】
画角は、撮像素子サイズおよびレンズの焦点距離から図９に示した関係式で、画像フレームの左端から右端までの水平画角、画像フレームの上辺から下辺までの垂直画角として求めることができる。つまり、画角は、ファインダ画像を取り込んでいるレンズの焦点距離と撮像素子サイズから決まる値である。この画角の情報は、撮影操作指示端末２１のモニタ表示部２１１に表示されるファインダ画像サイズと撮影端末１１のファインダ画像表示部１１２に表示されるファインダ画像サイズとを正確に対応付けるために使用する情報である。つまり、撮影操作指示端末２１に表示されるファインダ画像に対して行った操作指示を、撮影端末１１に表示されているファインダ画像上に正確に対応付けて操作指示の内容として表示するために使用する情報である。この場合の操作指示の内容は、ファインダ画像が表示する方向の移動指示やその移動量を含む。
【００８０】
なお、前述したように、マルチメディア通信の開始に先立って、撮影端末１１の保有するカメラ機能情報が撮影操作指示端末２１に通知され、撮影操作指示端末２１において、撮影端末１１の機能条件が設定される。このとき通知されるカメラ機能情報にレンズの焦点距離および撮像素子サイズが含まれるので、図９に示した関係式で画角を求めることができる。しかし、画角の情報は、撮影端末１１と撮影操作指示端末２１との間で操作指示情報の整合をとるために必要な情報である。そのため、本実施形態ではファインダ画像とともに撮影端末１１から撮影操作指示端末２１に送信するものとしている。また、撮影端末１１から撮影操作指示端末２１に送信する撮影方向と画角の情報は、その情報に変化が生じた場合に更新される。つまり、カメラの向きを変えたときは撮影方向が、そして、ズームイン／ズームアウトにより画角を変化させたときには画角の情報が更新される。
【００８１】
図８のＳ４０４以降を説明するに当たり、図１０も参照する。
【００８２】
図１０は、第２の実施形態における撮影端末１１のファインダ画像表示部１１２と撮影操作指示端末２１のモニタ表示部２１１の画像表示例を示す図である。
【００８３】
図１０を参照して、撮影操作指示端末２１の操作指示入力部２１５から入力した操作指示が、撮影端末１１のファインダ画像表示部１１２に表示される動作を説明する。なお、操作指示入力部２１５から行う操作指示の入力は、モニタ表示部２１１に表示されているファインダ画像に対して行われる操作指示と等価である。そのため、以降の説明では、モニタ表示部２１１で操作指示者が行う入力操作として説明する。
【００８４】
図１０は、撮影操作指示端末２１のモニタ表示部２１１で操作指示者が行う操作例を右側に、そして、操作者が撮影端末１１を移動する操作を行う際に参照するファインダ画像表示部１１２の表示例を左側に示している。また、図１０の（Ａ）、（Ｂ）、（Ｃ）は、時系列でのそれぞれの表示推移を示す。
【００８５】
まず、図１０の（Ａ）の状態のファインダ画像が表示されている。操作指示者は、ファインダ画像の左端の建物が中央にくる構図の写真を撮影したいと思い、モニタ表示部２１１に表示されているファインダ画像のその建物をポイントする操作指示を行う。つまり、スタイラスペンで左端の建物の位置をポイント指示する操作を行う。
【００８６】
ポイント指示された位置は、図７の操作指示送信部２１２により、タッチパネル上の座標として識別される。なお、タッチパネルはモニタ表示部２１１に重ねて貼り合わせた構成であり、モニタ表示部２１１に表示されているファインダ画像のサイズ、位置は、撮影操作指示端末２１でそれを識別している。従って、以降の説明において、「タッチパネル上の座標」を「モニタ表示部２１１上のファインダ画像の座標」として説明する。
【００８７】
撮影操作指示端末２１は撮影端末１１に対して、新たな構図の画像フレームをファインダ画像表示部１１２に表示するように動作する。つまり、操作指示送信部２１２は、ポイント指示された位置をモニタ表示部２１１上のファインダ画像の座標として識別し、後述するように、その座標を撮影方向と画角の情報に基づいて、画像フレームの基点からの移動方向および移動量の情報に変換する。
【００８８】
なお、図１０において、モニタ表示部２１１上のファインダ画像上にポイント指示された位置を示しているが、このような表示は無くてもかまわない。また、このようなポイント指示位置をファインダ画像上に表示する場合、操作指示送信部２１２は、ポイント指示された位置に対応するファインダ画像の座標をモニタ表示制御部２１４に通知する。モニタ表示制御部２１４は、通知された座標に対応する位置にポイント指示を付す。
【００８９】
そして、操作指示送信部２１２は、ポイント指示された位置を示す情報として、画像フレームの基点からの移動方向および移動量を操作指示情報として撮影端末１１に送信する。撮影端末１１において、操作指示送信部２１２が送信した操作指示情報は、操作指示受信部１１４で受信される（図８のＳ４０４）。
【００９０】
操作指示受信部１１４は、操作指示情報が示す画像フレームの基点からの移動方向および移動量に基づいて新たな構図の画像フレームを生成する。つまり、ポイント指示された位置が中央になる構図の画像フレームを生成する。
【００９１】
操作指示受信部１１４は、この新たな構図フレームを操作指示の内容としてファインダ画像表示部１１２に表示する（図８のＳ４０５）。このとき、操作者が撮影端末１１を移動すべき方向を示す印を付してもよい。図１０の左側の（Ａ）は、構図フレームと移動方向がファインダ画像表示部１１２に表示される例を示している。つまり、構図フレームの右端が点線で示され、カメラを左方向に移動させることを意味する矢印が示されている。
【００９２】
ここで図１１を参照して座標、画像フレームの基点および移動方向、移動量について説明しておく。
【００９３】
図１１は、カメラが撮影する画像フレームの領域を示す図である。カメラが撮影する画像フレーム形状は前述したように撮像素子の形状で決まる。ここで、撮影された画像は、ファインダ画像表示部１１２およびモニタ表示部２１１に表示される。従って、撮像素子に結像する画像、それをファインダ画像表示部１１２に表示した画像およびモニタ表示部２１１に表示した画像の３つの画像が扱われる。これらの３つの画像はそれぞれ大きさが異なるかもしれない。しかし、形状はいずれも相似形となっている。相似形になって表示されない場合があったとしても、その表示装置では横方向、縦方向の元画像からの拡大／縮小率を把握しているので、本質的には相似形として処理できる。
【００９４】
撮影端末１１と撮影操作指示端末２１は、撮像素子サイズがわかっている。しかし、撮影端末１１は撮影操作指示端末２１のモニタ表示部２１１でファインダ画像がどのように表示されるかについては知らない。また、逆に、撮影操作指示端末２１は撮影端末１１のファインダ画像表示部１１２でファインダ画像がどのように表示されるかについては知らない。そのため、モニタ表示部２１１に表示されたファインダ画像おいてポイント指示された点を、ファインダ画像表示部１１２に表示されたファインダ画像上で特定できるように制御する必要がある。
【００９５】
一つの制御方法として、モニタ表示部２１１において検出されたファインダ画像の座標を撮像素子上の座標に変換して通知することにより実現できる。
【００９６】
操作指示送信部２１２は、モニタ表示部２１１にファインダ画像がどのように表示されているのかという情報をモニタ表示制御部２１４から受信している。そのため、操作指示送信部２１２は、モニタ表示部２１１で識別したポイント指示位置の座標をモニタ表示部２１１に表示されているファインダ画像の座標として特定することができる。そして、モニタ表示部２１１で特定したファインダ画像の座標を、相似関係を用いて撮像素子の座標に変換して操作指示受信部１１４に通知する。
【００９７】
操作指示受信部１１４は、ファインダ画像表示部１１２にファインダ画像がどのように表示されているのかという情報を把握している。そして、操作指示受信部１１４は、相似関係を用いて、通知された撮像素子上の座標をファインダ画像表示部１１２に表示されたファインダ画像の座標に変換してポイント表示する。
【００９８】
以上のように制御した場合、撮影端末１１と撮影操作指示端末２１とでそれぞれ座標の変換を行う必要がある。
【００９９】
しかし、本実施形態では、画像フレームの基点からの移動方向と移動量を用いて、撮影端末１１と撮影操作指示端末２１とで直接扱うことができる値を用いた制御を行うようにしている。
【０１００】
前述したように、撮影端末１１は地磁気センサと重力センサを備えて、撮影画像に対する撮影方向の情報を取得することができる。地磁気センサにより方位角が、そして重力センサにより上下角が検出される。
【０１０１】
図１１において、画像フレームの横方向の中央に方位角が、縦方向の中央に上下角が表示される。方位角は北を零（０）度として東が９０度、南が１８０度、西が２７０度の順にその方位の角度が検出される。上下角は水平を零（０）度として、向いている上下方向の角度が検出される。また、図９を参照して説明したように画角の情報も得られている。そして、撮影方向（方位角、上下角）の情報および画角の情報は撮影端末１１と撮影操作指示端末２１とで共有している。
【０１０２】
従って、撮像素子、ファインダ画像表示部１１２そしてモニタ表示部２１１に表示されるいずれのファインダ画像も、図１１に示す画像フレームの領域として表示される。そして、方位角、上下角および画角は、いずれのファインダ画像においても同じ数値となる。
【０１０３】
つまり、操作指示受信部１１４は、ファインダ画像表示部１１２にファインダ画像がどのように表示されているかを知っている。そのため、ファインダ画像表示部１１２の座標をファインダ画像の撮影方向（方位角、上下角）の情報と対応付けて記憶することができる。同様に、操作指示送信部２１２は、モニタ表示制御部２１４と協働することにより、モニタ表示部２１１の座標をファインダ画像の撮影方向（方位角、上下角）の情報と対応付けて記憶することができる。
【０１０４】
図１１に示すように、画像フレームの方位角を示す垂直線と上下角を示す水平線の交点を画像フレームの基点と称する。例えば、モニタ表示部２１１でポイント指示した点の座標は、画像フレームの基点からの方位角、上下角として「どの方向に何度」離れているかという情報として識別される。そして、この方向と角度の情報をそのままファインダ画像表示部１１２に適用して、モニタ表示部２１１でポイント指示した点と対応するファインダ画像表示部１１２のファインダ画像の位置にポイント表示をすることができる。
【０１０５】
方位角において右方向を「プラス」、左方向を「マイナス」とし、上下角において上方向を「プラス」、下方向を「マイナス」として移動方向を識別する。また、移動量は、画角との対応で値が求まる。
【０１０６】
例えば、図１１において、横方向の画角が３０度で縦方向の画角が２０度であったとする。また、移動量「ａ」が画像フレームの横方向の辺の長さに対する割合が「０．３０」で、移動量「ｂ」が画像フレームの縦方向の辺の長さに対する割合が「０．２５」であったとする。この場合の「ａ」に対応する移動量は「９．００度」で、「ｂ」に対応する移動量は「５．００度」となる。
【０１０７】
従って、撮影操作指示端末２１の操作指示送信部２１２は、「マイナス９．００度、マイナス５．００度」を操作指示情報として、撮影端末１１の操作指示受信部１１４に通知する。
【０１０８】
この操作指示情報を受信した撮影端末１１の操作指示受信部１１４は、ファインダ画像表示部１１２上のファインダ画像において同じ条件の位置にポイント表示する。これにより、モニタ表示部２１１でポイント指示した点と同じ位置にポイント表示することができる。つまり、ファインダ画像表示部１１２に表示されているファインダ画像の画像フレームの基点から横方向に「マイナス９．００度」、縦方向に「マイナス５．００度」移動した点の座標となる。
【０１０９】
なお、方位角、上下角は相対値ではなく絶対値を用いてもかまわない。例えば、表示しているファインダ画像の撮影方向として、地磁気センサが検出した方位角が「１７３．００度」、そして重力センサが検出した上下角が「プラス３．００度」であったとする。上記の例の場合、ポイント指示した位置は、「１７３．００−９．００＝１６４．００」、そして「３．００−５．００＝−２．００」となり、「１６４．００度、マイナス２．００度」が操作指示情報となる。そして、撮影端末１１の操作指示受信部１１４は、ファインダ画像表示部１１２上のファインダ画像に対して「１６４．００度、マイナス２．００度」に相当する座標位置にポイント表示する。
【０１１０】
そして、撮影端末１１の操作指示受信部１１４は、上記のポイントが中心となる構図フレームを生成して、操作指示の内容としてファインダ画像表示部１１２に表示する。
【０１１１】
図１０に戻って説明を続ける。
【０１１２】
ファインダ画像表示部１１２に表示された操作指示の内容を見た操作者は、ファインダ画像表示部１１２に表示されるファインダ画像が構図フレーム内に入るようにカメラを左方向に移動させる。この移動操作の過程が図１０の（Ｂ）として示されている。
【０１１３】
操作者が撮影端末１１を移動させると、その移動はセンサ１１８により検出される。つまり、左右方向の移動は地磁気センサにより、上下方向の移動は重力センサにより検出される。この検出した情報は、操作指示受信部１１４に通知される。また、この検出した情報は、対応するファインダ画像の送信とともに通信制御装置１１７を介して撮影操作指示端末２１にも通知される。
【０１１４】
操作指示受信部１１４は、移動前の撮影方向を示すセンサの検出値と移動後の撮影方向を示すセンサの検出値の差分を、移動方向および移動量として識別する。そして、ファインダ画像表示部１１２に表示されている構図フレームを、移動方向とは逆の方向に、移動量に対応する値の座標位置に移動させる。
【０１１５】
図１０の（Ｂ）の左側の図は、このようにして表示されたファインダ画像表示部１１２の表示例で、ファインダ画像のフレームが構図フレームに近づいている様子として示されている。
【０１１６】
一方、新たな撮影方向の情報は撮影操作指示端末２１にも送られている。そのため、モニタ表示部２１１にポイント指示が表示されている場合、上述したものと同じ原理で、移動方向とは逆の方向であって、移動量に対応する値のモニタ表示部２１１上の座標位置にポイント指示の表示が移動する。この制御はモニタ表示制御部２１４により行われる。図１０の（Ｂ）の右側の図は、モニタ表示部２１１に表示されるファインダ画像において、操作指示者がポイント指示した位置が中央に近づいている様子として示されている。
【０１１７】
そして、図１０の（Ｃ）は、指示操作者がカメラを移動させて、ファインダ画像が構図フレーム内に入った様子を示す（図８のＳ４０６）。図１０の（Ｃ）の左側の図は、ファインダ画像表示部１１２に表示されるファインダ画像が構図フレームに入った様子を示す。また、図１０の（Ｃ）の右側の図は、モニタ表示部２１１に表示されるファインダ画像において、操作指示者がポイント指示した表示が中央に達した様子を示す。
【０１１８】
目的とした構図になったとき、操作指示者は写真撮影の操作指示を出す。撮影操作を要求する操作指示情報が撮影端末１１に送られ、操作指示受信部１１４で受信される（図８のＳ４０７）。
【０１１９】
操作指示受信部１１４は、撮影操作を要求する操作指示情報に基づいて、撮影操作を指示するメッセージを操作指示の内容としてファインダ画像表示部１１２に表示する（図８のＳ４０８）。
【０１２０】
操作者は、ファインダ画像表示部１１２に表示された撮影操作を指示するメッセージを見て、シャッターボタンを押して撮影操作を行う。撮影部１１５で撮影された撮影画像は、撮影画像出力部１１６で画像圧縮が行われて撮影操作指示端末２１に送信される。撮影画像は撮影画像受信部２１３で受信され、圧縮が解除されてモニタ表示制御部２１４を介してモニタ表示部２１１に表示される（図８のＳ４０９）。
【０１２１】
上記の図８のＳ４０４からＳ４０９の動作を繰り返すことにより、操作指示者は、撮影端末１１の操作者に対して、所望する構図となるように操作指示を出して写真撮影を遠隔で行うことができる。
【０１２２】
撮影が終了したら、撮影端末１１または撮影操作指示端末２１からセッションの切断要求を出すことにより、撮影端末１１と撮影操作指示端末２１との通信が切断される（図８のＳ４１０）。
【０１２３】
図１２は、上記に説明した撮影端末１１の動作を示すフロー図である。
【０１２４】
撮影端末１１は、光学入力部１１１から入力した画像をファインダ画像として取り込む（Ｓ５０１）。このときの撮影方向が地磁気センサと重力センサで検出され、また、そのときのレンズの焦点距離から画角も識別できる（Ｓ５０２）。
【０１２５】
このようにして取り込んだファインダ画像に、撮影方向と画角の情報を付加して撮影操作指示端末２１に送信する（Ｓ５０３）。
【０１２６】
撮影端末１１は、撮影操作指示端末２１から操作指示情報が送られてくるのを待つ（Ｓ５０４）。撮影操作指示端末２１において操作指示者が操作指示を入力すると、撮影端末１１はその操作指示に基づく操作指示情報を受信する（Ｓ５０４、ＹＥＳ）。この操作指示情報には、前述したように、操作指示者のポイント指示に対応する、ファインダ画像を表示すべき方向（撮影端末１１の移動方向）と移動量が含まれている。
【０１２７】
操作指示情報に含まれる移動方向と移動量に基づいて、操作指示者が意図している構図フレームが操作指示の内容としてファインダ画像表示部１１２に表示される（Ｓ５０５）。
【０１２８】
ファインダ画像表示部１１２に表示された操作指示の内容を見た操作者は、指示された構図フレームにファインダ画像が入るように撮影端末１１を移動操作する。つまり、カメラの方向を指示された方向に左右上下の移動を行う。
【０１２９】
この操作者による操作が地磁気センサおよび重力センサにより移動として検出され（Ｓ５０６、ＹＥＳ）、その移動方向および移動量が識別される（Ｓ５０７）。
【０１３０】
地磁気センサおよび重力センサが検出した左右、上下の移動方向および移動量に対応して、ファインダ画像表示部１１２に表示している構図フレームを移動させる（Ｓ５０８）。つまり、地磁気センサおよび重力センサが検出した移動方向と逆方向に、検出した移動量だけ構図フレームを移動させる。
【０１３１】
このようにして、操作者が行った移動操作により、ファインダ画像表示部１１２に表示された構図フレームが、ファインダ画像表示部１１２に表示されているファインダ画像フレームの中に入ってくる（Ｓ５０９）。そして、構図フレームがファインダ画像フレームとほぼ重なる所定の位置に近づいてきたとき（Ｓ５０９、ＹＥＳ）、撮影端末１１は、その旨を操作者に通知する接近表示を出力する（Ｓ５１０）。
【０１３２】
そして、構図フレームがファインダ画像表示部１１２に表示されるファインダ画像フレームにほぼ合致したしたときに（Ｓ５１１、ＹＥＳ）、撮影端末１１は、その旨を操作者に通知する到達表示を出力する（Ｓ５１２）。
【０１３３】
上記の接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０１３４】
次に、図１３を参照してモニタ表示部２１１における操作例とその操作に対応するファインダ画像表示部１１２における表示例を説明する。
【０１３５】
図１３は、モニタ表示部２１１における操作例とその操作に対応するファインダ画像表示部１１２における表示例を示す図である。
【０１３６】
図１３の（Ａ）は、上記で説明したように、操作指示者が構図の中央としたいポイントを指示する操作を示す。このとき操作メニューとして、ポイント指示する前に「移動」を選択しておく。この場合は、既に説明したように、構図の中央とする座標に対応する移動方向・移動量を操作指示情報として撮影端末１１に通知する。これによりファインダ画像表示部１１２には、新しい構図のフレーム、移動方向が表示される。なお、図１３の（Ａ）に示すように移動量を画面表示してもよい。この場合は、「０．５画面」移動することを意味している。また、表示する移動量は距離でも角度でもよい。角度の場合は、相対的な角度でも絶対的な角度でもよい。
【０１３７】
図１３の（Ｂ）は、操作指示者が構図を移動したい場合の操作を示す。操作メニューとして「移動」を選択し、その後、ポイント指示し、そのまま移動方向にスタイラスペンをずらし、移動終了点でスタイラスペンを画面から離す操作を行う。これは、始点位置が終点位置になるように構図を移動することを意味する。この場合は、始点座標と終点座標に対応する位置（移動方向・移動量）が操作指示情報として撮影端末１１に通知される。これによりファインダ画像表示部１１２には、新しい構図のフレーム、移動方向、移動量が表示される。
図１３の（Ｃ）は、操作指示者がズームインの指示をする場合の操作を示す。この場合は、操作メニューとして「ズーム」を選択し、拡大したい範囲を連続線で囲う。これにより、表示範囲を示す座標に対応する位置と操作内容が操作指示情報として撮影端末１１に通知される。ファインダ画像表示部１１２には、ズームインする箇所の構図フレームと操作内容として「ズームイン」が画面表示される。
【０１３８】
また、図示していないが、特定の領域を上記と同様に指定して、その領域の解像度を変更する指示を行えるようにしてもよい。
【０１３９】
以上に説明したように、第２の実施形態においては、撮影端末１１でリアルタイムにとらえているファインダ画像を、撮影操作指示端末２１でモニタすることができる。そして、操作指示者は、モニタ表示されたファインダ画像が、意図する方向の画像表示や意図する構図になるように、撮影端末１１を移動させる指示を含む操作指示を入力して、通信回線を介して操作指示情報を撮影端末１１に送ることができる。その操作指示情報に基づく操作指示の内容は、撮影端末１１のファインダ画像表示部１１２に構図フレームとして表示される。そのため、操作者は、ファインダ画像がその構図フレームに入るように撮影端末１１を移動すればよい。ファインダ画像がその構図フレームに入ったことを確認した操作指示者は、操作者に撮影端末１１の撮影操作を指示する。これにより操作指示者は所望の構図の写真を遠隔で撮影することができる。そして、第２の実施形態は、このような利用形態において操作指示者の意図する操作指示の内容を操作者に直感的かつ正確に伝えることができる。
【０１４０】
次に第２の実施形態の変形例を説明する。
【０１４１】
構成および動作は図７および図８で示したものと同じである。しかし、モニタ表示部２１１およびファインダ画像表示部１１２における表示が第２の実施形態と異なる。
【０１４２】
図１４は、第２の実施形態の変形例におけるモニタ表示部２１１およびファインダ画像表示部１１２における表示画面例を示す模式図である。第２の実施形態の変形例におけるモニタ表示部２１１およびファインダ画像表示部１１２は２画面構成となっている。ファインダ画像が表示される通常表示領域と、広角表示領域とに分かれている。
【０１４３】
広角表示領域は、ファインダ画像が写し出している画角の複数倍の視野角を表示することができる。広角表示領域は、現在ファインダ画像が写し出している画角の中央を零（０）とし、左右それぞれ９０度の範囲を表示している。中央に示されている画像フレームは、現在の画角で写し出している画像表示範囲を示している。つまり、この画像フレームの左辺と右辺の中央が、左右方向における撮影端末１１が現在向いている方向である。
【０１４４】
また、このフレームの上辺と下辺の中央が、上下方向における撮影端末１１が現在向いている方向である。
【０１４５】
第２の実施形態においては、操作指示者はファインダ画像の表示内での移動を操作者に指示した。しかし、第２の実施形態の変形例は、ファインダ画像で表示されていない領域にカメラの方向を移動させるように直感的かつ正確に操作指示することができる。
【０１４６】
図１６は、第２の実施形態の変形例において、モニタ表示部２１１の広角表示領域でのポイント指示と、それに基づくファインダ画像表示部１１２の広角表示領域でのポイント表示の動作を説明するフロー図である。
【０１４７】
図１６の（Ａ）は、モニタ表示部２１１の広角表示領域でのポイント指示に係る動作を説明するフロー図である。撮影操作指示端末２１は、ファインダ画像を撮影端末１１から受信する際に、撮影方向と画角に関する情報も受信する（Ｓ６０１）。従って、その情報に基づく撮影方向を基点とし、画角に対応する相似形のフレームをモニタ表示部２１１の広角表示領域に表示する（Ｓ６０２）。また、左右９０度方向の範囲、上下１０度方向の範囲の相似形の広角表示領域は画角から容易に生成できる。
【０１４８】
撮影操作指示端末２１は、操作指示者のポイント指示の入力を待つ（Ｓ６０３）。そして、操作指示者のポイント指示の入力があると（Ｓ６０３、ＹＥＳ）、撮影操作指示端末２１は、操作指示送信部２１２において、その指示されたポイントの基点からの左右、上下の移動方向および移動量を識別する。移動量は角度で識別される（Ｓ６０４）。
【０１４９】
撮影操作指示端末２１は、操作指示情報として左右、上下の移動方向および移動量を撮影端末１１に送信する（Ｓ６０５）。
【０１５０】
図１６の（Ｂ）は、ファインダ画像表示部１１２の広角表示領域にポイント表示する動作を説明するフロー図である。撮影端末１１は、地磁気センサおよび重力センサにより、現在のファインダ画像を写し出しているカメラの撮影方向の情報を検出して操作指示受信部１１４に通知している（Ｓ６１１）。操作指示受信部１１４は、その情報に基づく撮影方向を基点とし、画角に対応する相似形の画像フレームをファインダ画像表示部１１２の広角表示領域に表示する（Ｓ６１２）。左右９０度方向の範囲、上下１０度方向の範囲の相似形の広角表示領域は画角から容易に生成できる。
【０１５１】
撮影端末１１は、撮影操作指示端末２１から送信される操作指示情報を待つ（Ｓ６１３）。撮影端末１１は、撮影操作指示端末２１から操作指示情報を受信すると（Ｓ６１３、ＹＥＳ）、操作指示受信部１１４において、操作指示情報に含まれる左右、上下の移動方向および移動量を識別する（Ｓ６１４）。移動量は角度で識別される。操作指示受信部１１４は、現在の撮影方向を基点として、識別した移動方向および移動量に対応する位置に移動ポイント表示を付す。
【０１５２】
図１４に示すように、モニタ表示部２１１の広角表示領域において操作指示者がポイント指示を入力した位置が、ファインダ画像表示部１１２の広角表示領域にポイント表示される。
【０１５３】
操作者はこの表示を見て、左方向に約４５度、撮影端末１１を移動させる。
【０１５４】
撮影端末１１の移動にともない、図１０（Ｂ）で説明したように、この移動がセンサで検出されるので、検出した移動方向と逆方向に、検出した移動量だけファインダ画像表示部１１２の広角表示領域においてポイント表示を移動させる。もちろん、通常表示領域のファインダ画像は移動した方向の画像を表示している。
【０１５５】
また、この移動方向、移動量は移動した方向のファインダ画像とともに撮影操作指示端末２１にも通知される。従って、モニタ表示部２１１の広角表示領域においても、この通知された移動方向、移動量の情報に基づいて同様の処理が行われ、ポイント指示した位置の表示が移動する。
【０１５６】
図１５は、撮影端末１１の移動にともない、ファインダ画像表示部１１２の広角表示領域においてポイント表示が、そしてモニタ表示部２１１の広角表示領域においてポイント指示が移動する様子を示す。そして、撮影端末１１が目的とする方向に近づいてくると、構図フレームが通常表示領域にも表示されるようになる。
【０１５７】
このように、第２の実施形態の変形例は、ファインダ画像表示部とモニタ表示部のそれぞれにおいて広角表示領域を備え、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を容易に行うことができる。操作者は、操作指示者が意図する操作指示の内容を直感的かつ正確に理解することができる。
【０１５８】
次に、第３の実施形態を説明する。
【０１５９】
図１７は、本発明の第３の実施形態の構成を示すブロック図である。
【０１６０】
第３の実施形態は、撮影操作指示端末２２に画像合成部２２６を更に備えた点において第２の実施形態の撮影操作指示端末２１と異なる。
【０１６１】
第３の実施形態の撮影端末１２は、第２の実施形態の撮影端末１１と実質的に同一の構成を備える。つまり、撮影端末１２は、光学入力部１２１、ファインダ画像表示部１２２、ファインダ画像出力部１２３、撮影部１２５、撮影画像出力部１２６、操作指示受信部１２４、センサ１２８および通信制御部１２７を含んで構成される。また、ファインダ画像表示部１２２は、第２の実施形態の変形例として説明した図１４、図１５に示すような２画面構成となっている。
【０１６２】
一方、撮影操作指示端末２２は、モニタ表示部２２１、操作指示送信部２２２、撮影画像受信部２２３、モニタ表示制御部２２４、操作指示入力部２２５、画像合成部２２６および通信制御部２２７を含んで構成される。
【０１６３】
画像合成部２２６は、撮影端末１２から取得した複数の連続写真を合成してパノラマ写真を生成する。そして、画像合成部２２６が生成したパノラマ写真はモニタ表示制御部２２４に入力され、モニタ表示制御部２２４の制御によりモニタ表示部２２１の広角表示領域に表示される。広角表示領域は、ファインダ画像が写し出している画角の複数倍の視野角を表示することができる。
【０１６４】
第２の実施形態の変形例において、操作指示者はファインダ画像が現在表示している領域以外の領域にカメラの方向を移動させる操作指示を行うことができた。第３の実施形態は、広角表示領域にパノラマ写真を表示することにより、所望する構図位置を操作指示者が直感的に把握することができる。
【０１６５】
図１８を参照して第３の実施形態の動作を説明する。
【０１６６】
図１８は、第３の実施形態の動作を示すシーケンス図である。
【０１６７】
図８を参照して説明した第２の実施形態と相違する動作に絞って説明する。
【０１６８】
Ｓ７０１のセッション確立からＳ７０３のファインダ画像を撮影操作指示端末２２のモニタ表示部２２１に表示するまでの動作は、第２の実施形態における動作と同じである。
【０１６９】
パノラマ写真をモニタ表示部２２１に表示して遠隔指示を行うことを所望する操作指示者は、例えば撮影操作指示端末２２の操作メニューの「パノラマ」を指定する操作指示を入力する。この操作入力により、パノラマ撮影操作を指示する操作指示情報が撮影端末１２に送信される。パノラマ撮影操作の操作指示情報を受信した撮影端末１２は（Ｓ７０４）、ファインダ画像表示部１２２にパノラマ撮影操作を指示するメッセージを表示する（Ｓ７０５）。
【０１７０】
パノラマ撮影操作を指示するメッセージを見た操作者は、左右をずらしながら周辺の写真を複数枚撮影する。
【０１７１】
撮影された複数枚の写真は撮影操作指示端末２２に送信され、画像合成部２２６でパノラマ写真に合成されてモニタ表示制御部２２４に入力され、モニタ表示制御部２２４の制御によりモニタ表示部２２１に表示される（Ｓ７０６）。
【０１７２】
ここでパノラマ写真の合成と、モニタ表示部２２１における表示について図１９、２０、２１を参照して説明する。
【０１７３】
図１９は、画像合成部２２６で行われるパノラマ写真の合成方法を説明する図である。図１９では３枚の画像が送られてきて、それらをパノラマ写真に合成する様子を模式的に示している。
【０１７４】
前述したように、撮影端末１２は、センサ（地磁気センサおよび重力センサ）を備え、撮影時の撮影方向の情報を撮影画像に添付して送ってくる。また画角の情報も添付されている。例えば、図１９に示す３枚の写真（Ａ）、（Ｂ）、（Ｃ）について説明する。
【０１７５】
写真（Ａ）は、３２７度方向を向いて、カメラが水平な状態で撮影された写真である。写真（Ｂ）は、３５０度方向を向いて、カメラが水平な状態で撮影された写真である。また、写真（Ｃ）は、１４度方向を向いて、カメラが水平な状態で撮影された写真である。ここで、「北」を「零（０）度」とし、右回りで角度が大きくなる。つまり、「東」が「９０度」、「南」が「１８０度」そして「西」が「２７０度」として表示される。従って、これらの写真は「北西」から「北北東」方向の写真である。また、カメラの上下方向も示されているが、ここでは簡単のために、いずれの写真もカメラが水平な状態で撮影された写真としている。
【０１７６】
また、画角は左右方向で３０度、上下方向で２０度としている。これは前述のようにレンズの焦点距離と撮像素子サイズで決まってくる値である。
【０１７７】
従って、このような各写真の撮影方向と画角の情報から、図１９の中段に示すように、各写真の方位角の重複箇所を重ね合わせることにより、図１９の下段に示すようなパノラマ写真を合成することができる。もちろん、各写真に上下方向のずれがある場合には、上下方向の重複箇所を重ね合わせればよい。
【０１７８】
また、本実施形態では写真の撮影方向と画角の情報からパノラマ写真を合成しているが、必ずしもこの方法に限ることはなく、任意の方法でパノラマ写真を合成してかまわない。例えば、各写真の画像の特徴点を抽出して、その特徴点を重ね合わせることによりパノラマ写真を合成する方法もある。
【０１７９】
以上のようにして合成されたパノラマ写真は、画像合成部２２６からモニタ表示制御部２２４に送られる。モニタ表示制御部２２４は、撮影端末１２からパノラマ写真合成用に送られた写真に引き続き送られてきているファインダ画像と、このパノラマ写真をモニタ表示部２２１に表示する。
【０１８０】
図２０は、モニタ表示部２２１のファインダ画像とパノラマ写真の表示例を示す図である。
【０１８１】
この表示例では、モニタ表示部２２１は通常表示領域と広角表示領域の２画面構成となっている。通常表示領域には撮影端末１２から送られてきているファインダ画像が表示され、広角表示領域にはパノラマ写真が表示される。このパノラマ写真は、現在送られてきているファインダ画像と対応する位置関係で表示される。そして、現在のファインダ画像が表示している領域の画像フレームが、パノラマ写真に重ねて表示される。
【０１８２】
なお、広角表示領域における表示は、第２の実施形態の変形例で説明したものと同様に、現在の撮影方向を「零（０）度」とし、その左右９０度の領域を表示するように構成されている。従って、広角表示領域に表示されている方位角度は、相対的な方位角度として示されている。なお、図１９で説明したように、撮影端末１２で検出して撮影操作指示端末２２に通知してくる方位角度は地磁気センサで検出した絶対的な方位角度である。もちろん、広角表示領域における表示を絶対的な方位角度で表示してもかまわない。その場合は、現在のファインダ画像が撮影されている方位角度が中央に表示される。
【０１８３】
操作指示者はモニタ表示部２２１の広角表示領域のパノラマ写真を見ることにより、所望の構図を直感的に把握することができる。そして、その構図となるように広角表示領域のパノラマ写真上にポイント指示の入力を行う。つまり、所望する構図の中央をポイント指示する（図１８のＳ７０７）。
【０１８４】
図１６を参照して第２の実施形態の変形例の動作を説明したものと同様に、その指示されたポイントが、基点から左右、上下どの程度の移動方向および移動量であるかが角度で識別される。基点は現在のファインダ画像の中央点である。例えば、図２０の表示例の場合、上下方向の移動は無く、「左方向に３２度」の移動であることが識別される。そして、撮影操作指示端末２２は、操作指示情報として左右、上下の移動方向および移動量を撮影端末１２に送信する。
【０１８５】
また、モニタ表示制御部２２４の制御によりモニタ表示部２２１の表示を図２１に示すようにしてもよい。この表示例の場合は、２画面構成ではなくモニタ表示部２２１の全体を広角表示領域として使うように構成している。この場合は、パノラマ写真を２画面構成の場合よりも大きく表示することができるので、操作指示者はより直感的に所望の構図を決めることができる。
【０１８６】
また、この場合、撮影端末１２から送られてきているファインダ画像が表示している領域の画像フレームが、パノラマ写真に重ねて表示される。または、ファインダ画像を透過画像に加工してパノラマ写真に重ねて表示してもよい。また逆に、パノラマ写真を透過画像にしてファインダ画像と重ねるようにしてもよい。
【０１８７】
一方、第３の実施形態における撮影端末１２は、第２の実施形態の変形例と同様の動作を行う。図２２は第３の実施形態における撮影端末１２のファインダ画像表示部１２２の表示例を示す図である。
【０１８８】
撮影端末１２は、地磁気センサおよび重力センサにより、現在のファインダ画像を写し出しているカメラの撮影方向の情報を検出して操作指示受信部１２４に通知している。操作指示受信部１２４は、その情報に基づく撮影方向を基点とし、ファインダ画像の画角に対応する相似形の画像フレームをファインダ画像表示部１２２の広角表示領域の中央部に表示する。なお、広角表示領域はこの画像フレームの中心から、例えば左右方向９０度、上下方向２０度の範囲を表示するものとする。
【０１８９】
撮影端末１２の操作指示受信部１２４は、撮影操作指示端末２２から操作指示情報を受信すると、操作指示情報に含まれる左右、上下の移動方向および移動量を識別する。そして、操作指示受信部１２４は、現在の撮影方向を基点として、識別した移動方向および移動量に対応する位置に移動ポイント表示を付す（図１８のＳ７０８）。図２２の（Ａ）がこの状態の表示例を示している。
【０１９０】
操作者はこの表示を見て、左方向に３２度、撮影端末１２を移動させる。
【０１９１】
撮影端末１２の移動にともない、この移動がセンサで検出されるので、操作指示受信部１２４は、検出した移動方向と逆方向に、検出した移動量だけファインダ画像表示部１２２の広角表示領域においてポイント表示を移動させる。もちろん、通常表示領域のファインダ画像は移動した方向の画像を表示している。
【０１９２】
また、この移動方向、移動量は、移動した方向を写し出しているファインダ画像とともに撮影操作指示端末２２にも通知される。従って、モニタ表示部２２１の広角表示領域においても、この通知された移動方向、移動量の情報に基づいて同様の処理が行われ、ポイント指示した位置の表示が移動する（図１８のＳ７０９）。
【０１９３】
図２２の（Ｂ）は、撮影端末１２の移動にともない、ファインダ画像表示部１２２の広角表示領域においてポイント表示が移動する様子を示す。そして、撮影端末１２の向きが目的とする方向に近づいてくると、構図フレームが通常表示領域にも表示されるようになる。また、図２３は、図２０に示した表示例の広角表示領域において、撮影端末１２の移動にともない、ポイント指示がパノラマ写真とともに移動する様子を示す。
【０１９４】
なお、第３の実施形態においても、操作者の移動操作により、ファインダ画像表示部に表示された構図フレームがファインダ画像表示部の表示フレームとほぼ重なる所定の位置に近づいてきたときには接近表示を出力する。また、構図フレームがファインダ画像表示部の表示フレームとほぼ合致したしたときには到達表示を出力する。そして、これらの接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０１９５】
以上のように構成することにより、第３の実施形態は撮影操作指示端末にパノラマ写真を表示することができる。そして、操作指示者は、ファインダ画像が現在表示している領域以外の領域においても所望の構図位置を直感的に把握することができ、カメラの方向を移動させる操作指示を行うことができる。
【０１９６】
第３の実施形態の変形例を説明する。
【０１９７】
第３の実施形態の変形例は、撮影操作指示端末で合成したパノラマ写真を撮影端末のファインダ画像表示部の広角表示領域にも表示する。
【０１９８】
第３の実施形態の変形例は、図１７に示した第３の実施形態の構成と同じである。画像合成部２２６で合成されたパノラマ写真は、モニタ表示制御部２２４に送られて、モニタ表示制御部２２４の制御でモニタ表示部２２１に表示される。このとき、モニタ表示制御部２２４は、そのパノラマ写真を操作指示送信部２２２にも送り、撮影端末１２に送信するように指示する。
【０１９９】
操作指示送信部２２２は、通信回線を介してパノラマ写真を撮影端末１２に送信する。このとき操作指示送信部２２２は、必要に応じて画像圧縮等の処理を行う。また、送信されるパノラマ写真には、パノラマ写真の画像フレームに対応する方位角および上下角の情報が付されている。
【０２００】
撮影操作指示端末２２からパノラマ写真を受信した撮影端末１２は、操作指示受信部１２４において、パノラマ写真をファインダ画像表示部１２２の広角表示領域に表示する処理を行う。このとき操作指示受信部１２４は、必要に応じて画像圧縮解除等の処理を行い、パノラマ写真に付された方位角および上下角の情報に基づいて、パノラマ写真をファインダ画像表示部１２２の広角表示領域の対応する位置に表示する。
【０２０１】
上述した動作は、図１８に示したシーケンス図のＳ７０６とＳ７０７の動作の間に行われる。
【０２０２】
以上のように構成し、動作することにより、第３の実施形態の変形例は撮影操作指示端末のみならず撮影端末にもパノラマ写真を表示することができる。そして、撮影端末の操作者は、操作指示者が、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を行ったとしても、操作指示者の意図するその指示を直感的かつ正確に理解することができる。
【０２０３】
第４の実施形態を説明する。
【０２０４】
第４の実施形態は、パノラマ写真を撮影端末で合成し、それを撮影操作指示端末に送り、撮影端末のファインダ画像表示部の広角表示領域および撮影操作指示端末のモニタ表示部に表示する。
【０２０５】
図２４は、第４の実施形態の構成を示すブロック図である。
【０２０６】
第４の実施形態は、撮影端末１３に画像合成部１３６を備える。また、撮影操作指示端末２３は、第３の実施形態の撮影操作指示端末２２から画像合成部２２６を除いた構成に相当する。
【０２０７】
撮影端末１３は、光学入力部１３１、ファインダ画像表示部１３２、ファインダ画像出力部１３３、撮影部１３５、画像合成部１３６、撮影画像出力部１３３、操作指示受信部１３４、センサ１３８および通信制御部１３９を含んで構成される。また、ファインダ画像表示部１３２は、第２の実施形態の変形例として説明した図１４、図１５および第３の実施形態として説明した図２２に示すような２画面構成となっている。
【０２０８】
一方、撮影操作指示端末２３は、モニタ表示部２３１、操作指示送信部２３２、撮影画像受信部２３３、モニタ表示制御部２３４、操作指示入力部２３５および通信制御部２３６を含んで構成される。
【０２０９】
図２５は、第４の実施形態の動作を示すシーケンス図である。図１８を参照して説明した第３の実施形態の動作と相違する点を中心にして説明する。
【０２１０】
パノラマ写真をモニタ表示部２３１に表示して遠隔指示を行うことを所望する操作指示者は、第３の実施形態と同じように、例えば撮影操作指示端末２３の操作メニューに表示される「パノラマ」を指定する操作指示を入力する。この操作入力により、パノラマ撮影操作を指示する操作指示情報が撮影端末１３に送信される。パノラマ撮影操作の操作指示情報を受信した撮影端末１３は（Ｓ８０４）、ファインダ画像表示部１３２にパノラマ撮影操作を指示するメッセージを表示する（Ｓ８０５）。
【０２１１】
パノラマ撮影操作を指示するメッセージを見た操作者は、左右をずらしながら周辺の写真を複数枚撮影し、パノラマ写真合成を行う操作メニューを選択操作する。
【０２１２】
この操作により、画像合成部１３６は、撮影した複数の連続写真を合成してパノラマ写真を生成する。そして、画像合成部１３６が生成したパノラマ写真は操作指示受信部１３４に入力され、操作指示受信部１３４の制御によりファインダ画像表示部１３２の広角表示領域に表示される。
【０２１３】
なお、パノラマ写真の合成および広角表示領域への表示は、第３の実施形態で説明したように撮影画像に付加された方位角および上下角の情報に基づいて制御される。
【０２１４】
また、このとき、合成されたパノラマ写真は、撮影画像出力部１３７にも入力され、撮影画像出力部１３７で画像圧縮等の処理が行われて、通信回線を介して撮影操作指示端末２３に送信される。
【０２１５】
撮影操作指示端末２３は、パノラマ写真を撮影画像受信部２３３で受信して画像圧縮の解除を行い、モニタ表示制御部２３１の制御によりパノラマ写真をモニタ表示部２３１に表示する（Ｓ８０６）。
【０２１６】
モニタ表示部２３１の表示形態は、第３の実施形態で説明した図２０のように広角表示領域を設けた表示でも良いし、図２１のように通常表示領域を広角用に表示変更して使用するようにしても良い。また、パノラマ写真のモニタ表示部２３１への表示は、第３の実施形態で説明したように撮影画像に付加された方位角および上下角の情報に基づいて制御される。
【０２１７】
操作指示者はモニタ表示部２３１の広角表示領域のパノラマ写真を見ることにより、所望の構図を直感的に把握することができる。そして、その構図となるように広角表示領域のパノラマ写真上にポイント指示の入力を行う。つまり、所望する構図の中央をポイント指示する。
【０２１８】
操作指示者が入力した操作指示は、操作指示情報として撮影端末１３に送られ（Ｓ８０７）、第２の実施形態の変形例および第３の実施形態で説明したように、その操作指示の内容がファインダ画像表示部１３２の広角表示領域に表示される。
【０２１９】
このとき第４の実施形態においては、ファインダ画像表示部１３２の広角表示領域にはパノラマ写真が表示されている。そして、操作指示の内容はパノラマ写真の対応する位置に表示される（Ｓ８０８）。
【０２２０】
以降の動作は第３の実施形態と同じなので説明を省略する。
【０２２１】
なお、第４の実施形態においても、操作者の移動操作により、ファインダ画像表示部に表示された構図フレームがファインダ画像表示部の表示フレームとほぼ重なる所定の位置に近づいてきたときには接近表示を出力する。また、構図フレームがファインダ画像表示部の表示フレームとほぼ合致したしたときには到達表示を出力する。そして、これらの接近表示および到達表示は、例えば振動、音、音声ガイド、点滅により行われる。
【０２２２】
以上のように構成することにより、第４の実施形態は、第３の実施形態の変形例と同様の効果を奏する。つまり、撮影端末の操作者は、操作指示者が、ファインダ画像で表示されていない領域にカメラの方向を移動させる操作指示を行ったとしても、操作指示者の意図するその指示を直感的かつ正確に理解することができる。
【０２２３】
また、上記の各実施形態の説明において、撮影操作指示端末から撮影端末に送られる要求や操作指示情報に基づくメッセージはファインダ画像表示部に表示されるとして説明した。この場合、撮影端末は、メッセージ内容を合成音声により発するように構成しておいてもよい。例えば、ファインダ画像送信要求の場合には、「カメラの電源を入れてファインダ画像を送信してください」と発する。パノラマ撮影操作を指示する操作指示情報の場合には、「周辺のパノラマ写真を撮影して画像を送信してください」と発する。そして、撮影操作を指示する操作指示情報の場合には、「現在の構図で撮影してください」と発する。また、ズームイン操作を指示する場合は「ズームインしてください」と発する。このように構成することで、操作者は、操作指示者の指示する内容をより的確に把握することができる。
【０２２４】
さらに、上記の各実施形態の説明は撮影端末にカメラの遠隔操作機能が無いものとして説明した。しかし、カメラの遠隔操作機能がある場合には、絞りやシャッター速度等のカメラの撮影条件設定、解像度の変更、ズームイン／ズームアウト、シャッター操作等を撮影操作指示端末から操作指示者が遠隔で操作できることは言うまでもない。
【符号の説明】
【０２２５】
１０ 画像取得手段
１１、１２、１３ 撮影端末
３１、１０１、１１１、１２１、１３１ 光学入力部
３２、１０２、１１２、１２２、１３２ ファインダ画像表示部
３３、１０３、１１３、１２３、１３３ ファインダ画像出力部
３４、１０４、１１４、１２４、１３４ 操作指示受信部
１１５、１２５、１３５ 撮影部
１１６、１２６、１３７ 撮影画像出力部
１１７、２１６、１２７、２２７、１３９、２３６ 通信制御部
１１８、１２８、１３８ センサ
２０ 画像表示操作指示手段
２１、２２、２３ 撮影操作指示端末
４１、２０１、２１１、２２１、２３１ モニタ表示部
４２、２０２、２１２、２２２、２３２ 操作指示送信部
２１３、２２３、２３３ 撮影画像受信部
２１４、２２４、２３４ モニタ表示制御部
２１５、２２５、２３５ 操作指示入力部
１３６、２２６ 画像合成部
３０ 画像取得装置
４０ 画像表示操作指示装置
【特許請求の範囲】
【請求項１】
光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、を含む画像取得手段と、前記通信回線を介して入力した前記ファインダ画像をモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力する操作指示送信部と、を含む画像表示操作指示手段とを備え、前記画像取得手段は、前記画像表示操作指示手段が出力する前記操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部を含むことを特徴とする遠隔画像表示システム。
【請求項２】
前記画像取得手段は、前記ファインダ画像の方位角と上下角を含む撮影方向を検出するセンサを更に含み、前記ファインダ画像に前記撮影方向情報と前記ファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記操作指示送信部は、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項１に記載の遠隔画像表示システム。
【請求項３】
前記モニタ表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記ファインダ画像表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示送信部は、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項２に記載の遠隔画像表示システム。
【請求項４】
前記画像取得手段は、前記光学入力部から入力する画像を撮影する撮影部と、前記撮影部で撮影した撮影画像を、撮影方向情報と前記撮影画像の画角情報を付加して前記通信回線を介して出力する撮影画像出力部を更に含み、前記画像表示操作指示手段は、前記通信回線を介して前記画像取得手段が出力する前記撮影画像を受信する撮影画像受信部と、前記通信回線を介して入力する前記ファインダ画像と前記撮影画像受信部から入力する前記撮影画像を切り替えて前記モニタ表示部に表示するモニタ表示制御部と、前記モニタ表示部に表示される前記ファインダ画像に対して前記操作指示を入力する操作指示入力部を更に含むことを特徴とする請求項３に記載の遠隔画像表示システム。
【請求項５】
前記画像表示操作指示手段は、前記撮影画像受信部が取得した前記画像取得手段が出力する複数の前記撮影画像を合成してパノラマ写真として出力する画像合成部をさらに含み、前記モニタ表示制御部は、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項４に記載の遠隔画像表示システム。
【請求項６】
前記画像表示操作指示手段は、前記撮影画像受信部が取得した前記画像取得手段が出力する複数の前記撮影画像を合成してパノラマ写真として出力する画像合成部をさらに含み、前記モニタ表示部は、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記モニタ表示制御部は、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項４に記載の遠隔画像表示システム。
【請求項７】
前記モニタ表示制御部は、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項６に記載の遠隔画像表示システム。
【請求項８】
前記操作指示受信部は、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項２乃至７のいずれかの請求項に記載の遠隔画像表示システム。
【請求項９】
前記操作指示受信部は、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項８に記載の遠隔画像表示システム。
【請求項１０】
光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部とを備えたことを特徴とする画像取得装置。
【請求項１１】
前記ファインダ画像の方位角と上下角を含む撮影方向を検出するセンサを更に含み、前記ファインダ画像に前記撮影方向情報とファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項１０記載の画像取得装置。
【請求項１２】
前記ファインダ画像表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項１１記載の画像取得装置。
【請求項１３】
前記操作指示受信部は、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項１１または１２に記載の画像取得装置。
【請求項１４】
前記操作指示受信部は、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項１３に記載の画像取得装置。
【請求項１５】
通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する操作指示送信部と、を備えたことを特徴とする画像表示操作指示装置。
【請求項１６】
前記ファインダ画像は、前記ファインダ画像の方位角と上下角を含む撮影方向情報と画角情報が付加され、前記操作指示送信部は、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項１５に記載の画像表示操作指示装置。
【請求項１７】
前記モニタ表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示送信部は、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項１６に記載の画像表示操作指示装置。
【請求項１８】
前記通信回線を介して前記画像取得装置から入力する複数の撮影画像を合成してパノラマ写真として出力する画像合成部と、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示するモニタ表示制御部とを更に含むことを特徴とする請求項１７に記載の画像表示操作指示装置。
【請求項１９】
前記モニタ表示部は、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記通信回線を介して前記画像取得装置から入力する複数の撮影画像を合成してパノラマ写真として出力する画像合成部と、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示するモニタ表示制御部とを更に含むことを特徴とする請求項１７に記載の画像表示操作指示装置。
【請求項２０】
前記モニタ表示制御部は、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項１９に記載の画像表示操作指示装置。
【請求項２１】
画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、画像表示操作指示手段が、前記通信回線を介して入力した前記ファインダ画像をモニタ表示部にモニタ表示し、モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力し、前記画像取得手段が、前記操作指示情報を前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする遠隔画像表示方法。
【請求項２２】
前記画像取得手段のセンサが、前記ファインダ画像の方位角と上下角を含む撮影方向を検出し、前記画像取得手段が、前記ファインダ画像に前記撮影方向情報と前記ファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記画像表示操作指示手段が、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記画像取得手段が、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項２１に記載の遠隔画像表示方法。
【請求項２３】
前記モニタ表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記ファインダ画像表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記画像表示操作指示手段が、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記画像取得手段が、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項２２に記載の遠隔画像表示方法。
【請求項２４】
前記画像取得手段がさらに、前記光学入力部から入力する画像を撮影し、撮影した撮影画像を、撮影方向情報と前記撮影画像の画角情報を付加して前記通信回線を介して出力し、前記画像表示操作指示手段がさらに、前記通信回線を介して前記画像取得手段が出力する前記撮影画像を受信し、前記通信回線を介して入力する前記ファインダ画像と前記撮影画像を切り替えて前記モニタ表示部に表示し、前記モニタ表示部に表示される前記ファインダ画像に対して前記操作指示を入力することを特徴とする請求項２３に記載の遠隔画像表示方法。
【請求項２５】
前記画像表示操作指示手段が、前記画像取得手段が出力する複数の前記撮影画像をパノラマ写真として合成し、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項２４に記載の遠隔画像表示方法。
【請求項２６】
前記モニタ表示部が、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記画像表示操作指示手段が、前記画像取得手段が出力する複数の前記撮影画像をパノラマ写真として合成し、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項２４に記載の遠隔画像表示方法。
【請求項２７】
前記画像表示操作指示手段が、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項２６に記載の遠隔画像表示方法。
【請求項２８】
前記画像表示操作指示手段が、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項２２乃至２７のいずれかの請求項に記載の遠隔画像表示方法。
【請求項２９】
前記画像表示操作指示手段が、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項２８に記載の遠隔画像表示方法。
【請求項３０】
光学入力部から入力する画像をファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする画像取得方法。
【請求項３１】
前記ファインダ画像の方位角と上下角を含む撮影方向をセンサで検出し、前記ファインダ画像に前記撮影方向情報とファインダ画像の画角情報を付加して前記通信回線を介して出力し、入力した前記操作指示情報に含まれる前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項３０記載の画像取得方法。
【請求項３２】
前記ファインダ画像表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、入力した前記操作指示情報に含まれる前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項３１記載の画像取得方法。
【請求項３３】
前記センサで検出した前記撮影方向に基づいて移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項３１または３２に記載の画像取得方法。
【請求項３４】
前記センサで検出した前記撮影方向に基づいて移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項３３に記載の画像取得方法。
【請求項３５】
通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示し、前記モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力することを特徴とする画像表示操作指示方法。
【請求項３６】
前記ファインダ画像は、前記ファインダ画像の方位角と上下角を含む撮影方向情報と画角情報が付加され、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項３５に記載の画像表示操作指示方法。
【請求項３７】
前記モニタ表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項３６に記載の画像表示操作指示方法。
【請求項３８】
前記通信回線を介して前記画像取得装置から入力する複数の撮影画像をパノラマ写真として合成し、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項３７に記載の画像表示操作指示方法。
【請求項３９】
前記モニタ表示部が、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記通信回線を介して前記画像取得装置から入力する複数の撮影画像をパノラマ写真として合成し、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項３７に記載の画像表示操作指示方法。
【請求項４０】
前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項３９に記載の画像表示操作指示方法。
【請求項１】
光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、を含む画像取得手段と、前記通信回線を介して入力した前記ファインダ画像をモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力する操作指示送信部と、を含む画像表示操作指示手段とを備え、前記画像取得手段は、前記画像表示操作指示手段が出力する前記操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部を含むことを特徴とする遠隔画像表示システム。
【請求項２】
前記画像取得手段は、前記ファインダ画像の方位角と上下角を含む撮影方向を検出するセンサを更に含み、前記ファインダ画像に前記撮影方向情報と前記ファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記操作指示送信部は、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項１に記載の遠隔画像表示システム。
【請求項３】
前記モニタ表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記ファインダ画像表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示送信部は、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項２に記載の遠隔画像表示システム。
【請求項４】
前記画像取得手段は、前記光学入力部から入力する画像を撮影する撮影部と、前記撮影部で撮影した撮影画像を、撮影方向情報と前記撮影画像の画角情報を付加して前記通信回線を介して出力する撮影画像出力部を更に含み、前記画像表示操作指示手段は、前記通信回線を介して前記画像取得手段が出力する前記撮影画像を受信する撮影画像受信部と、前記通信回線を介して入力する前記ファインダ画像と前記撮影画像受信部から入力する前記撮影画像を切り替えて前記モニタ表示部に表示するモニタ表示制御部と、前記モニタ表示部に表示される前記ファインダ画像に対して前記操作指示を入力する操作指示入力部を更に含むことを特徴とする請求項３に記載の遠隔画像表示システム。
【請求項５】
前記画像表示操作指示手段は、前記撮影画像受信部が取得した前記画像取得手段が出力する複数の前記撮影画像を合成してパノラマ写真として出力する画像合成部をさらに含み、前記モニタ表示制御部は、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項４に記載の遠隔画像表示システム。
【請求項６】
前記画像表示操作指示手段は、前記撮影画像受信部が取得した前記画像取得手段が出力する複数の前記撮影画像を合成してパノラマ写真として出力する画像合成部をさらに含み、前記モニタ表示部は、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記モニタ表示制御部は、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項４に記載の遠隔画像表示システム。
【請求項７】
前記モニタ表示制御部は、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項６に記載の遠隔画像表示システム。
【請求項８】
前記操作指示受信部は、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項２乃至７のいずれかの請求項に記載の遠隔画像表示システム。
【請求項９】
前記操作指示受信部は、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項８に記載の遠隔画像表示システム。
【請求項１０】
光学入力部から入力する画像をファインダ画像として表示するファインダ画像表示部と、前記ファインダ画像を、通信回線を介して出力するファインダ画像出力部と、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示する操作指示受信部とを備えたことを特徴とする画像取得装置。
【請求項１１】
前記ファインダ画像の方位角と上下角を含む撮影方向を検出するセンサを更に含み、前記ファインダ画像に前記撮影方向情報とファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項１０記載の画像取得装置。
【請求項１２】
前記ファインダ画像表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示受信部は、入力した前記操作指示情報に含まれる前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項１１記載の画像取得装置。
【請求項１３】
前記操作指示受信部は、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項１１または１２に記載の画像取得装置。
【請求項１４】
前記操作指示受信部は、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項１３に記載の画像取得装置。
【請求項１５】
通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示するモニタ表示部と、前記モニタ表示部に表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力する操作指示送信部と、を備えたことを特徴とする画像表示操作指示装置。
【請求項１６】
前記ファインダ画像は、前記ファインダ画像の方位角と上下角を含む撮影方向情報と画角情報が付加され、前記操作指示送信部は、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項１５に記載の画像表示操作指示装置。
【請求項１７】
前記モニタ表示部は、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記操作指示送信部は、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項１６に記載の画像表示操作指示装置。
【請求項１８】
前記通信回線を介して前記画像取得装置から入力する複数の撮影画像を合成してパノラマ写真として出力する画像合成部と、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示するモニタ表示制御部とを更に含むことを特徴とする請求項１７に記載の画像表示操作指示装置。
【請求項１９】
前記モニタ表示部は、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記通信回線を介して前記画像取得装置から入力する複数の撮影画像を合成してパノラマ写真として出力する画像合成部と、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示するモニタ表示制御部とを更に含むことを特徴とする請求項１７に記載の画像表示操作指示装置。
【請求項２０】
前記モニタ表示制御部は、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項１９に記載の画像表示操作指示装置。
【請求項２１】
画像取得手段が、光学入力部から入力する画像をファインダ画像表示部にファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、画像表示操作指示手段が、前記通信回線を介して入力した前記ファインダ画像をモニタ表示部にモニタ表示し、モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記通信回線を介して操作指示情報として出力し、前記画像取得手段が、前記操作指示情報を前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする遠隔画像表示方法。
【請求項２２】
前記画像取得手段のセンサが、前記ファインダ画像の方位角と上下角を含む撮影方向を検出し、前記画像取得手段が、前記ファインダ画像に前記撮影方向情報と前記ファインダ画像の画角情報を付加して前記通信回線を介して出力し、前記画像表示操作指示手段が、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記画像取得手段が、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項２１に記載の遠隔画像表示方法。
【請求項２３】
前記モニタ表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記ファインダ画像表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記画像表示操作指示手段が、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力し、前記画像取得手段が、入力した前記操作指示情報に含まれる前記位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項２２に記載の遠隔画像表示方法。
【請求項２４】
前記画像取得手段がさらに、前記光学入力部から入力する画像を撮影し、撮影した撮影画像を、撮影方向情報と前記撮影画像の画角情報を付加して前記通信回線を介して出力し、前記画像表示操作指示手段がさらに、前記通信回線を介して前記画像取得手段が出力する前記撮影画像を受信し、前記通信回線を介して入力する前記ファインダ画像と前記撮影画像を切り替えて前記モニタ表示部に表示し、前記モニタ表示部に表示される前記ファインダ画像に対して前記操作指示を入力することを特徴とする請求項２３に記載の遠隔画像表示方法。
【請求項２５】
前記画像表示操作指示手段が、前記画像取得手段が出力する複数の前記撮影画像をパノラマ写真として合成し、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項２４に記載の遠隔画像表示方法。
【請求項２６】
前記モニタ表示部が、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記画像表示操作指示手段が、前記画像取得手段が出力する複数の前記撮影画像をパノラマ写真として合成し、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項２４に記載の遠隔画像表示方法。
【請求項２７】
前記画像表示操作指示手段が、前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項２６に記載の遠隔画像表示方法。
【請求項２８】
前記画像表示操作指示手段が、前記センサが検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項２２乃至２７のいずれかの請求項に記載の遠隔画像表示方法。
【請求項２９】
前記画像表示操作指示手段が、前記センサで検出した前記撮影方向に基づいて、前記画像取得手段の移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項２８に記載の遠隔画像表示方法。
【請求項３０】
光学入力部から入力する画像をファインダ画像として表示し、前記ファインダ画像を、通信回線を介して出力し、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示に関わる操作指示情報を、前記通信回線を介して入力し、前記操作指示の内容を前記ファインダ画像表示部に表示することを特徴とする画像取得方法。
【請求項３１】
前記ファインダ画像の方位角と上下角を含む撮影方向をセンサで検出し、前記ファインダ画像に前記撮影方向情報とファインダ画像の画角情報を付加して前記通信回線を介して出力し、入力した前記操作指示情報に含まれる前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部に前記操作指示に対応する表示を付すことを特徴とする請求項３０記載の画像取得方法。
【請求項３２】
前記ファインダ画像表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、入力した前記操作指示情報に含まれる前記撮影方向情報と前記画角情報に基づく位置情報に基づいて、前記ファインダ画像表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置を識別し、前記ファインダ画像表示部の前記第２の表示領域に前記操作指示に対応する表示を付すことを特徴とする請求項３１記載の画像取得方法。
【請求項３３】
前記センサで検出した前記撮影方向に基づいて移動方向および移動量を識別し、当該移動方向および移動量に対応して、前記ファインダ画像表示部に表示された前記操作指示に対応する表示を移動させることを特徴とする請求項３１または３２に記載の画像取得方法。
【請求項３４】
前記センサで検出した前記撮影方向に基づいて移動方向および移動量を識別し、当該移動方向および移動量が、前記操作指示に対応する表示に対応する予め定めた範囲に達したときに、その旨を通知する表示を出力することを特徴とする請求項３３に記載の画像取得方法。
【請求項３５】
通信回線を介して画像取得装置から入力する画像をファインダ画像としてモニタ表示し、前記モニタ表示された前記ファインダ画像に対して入力された、前記ファインダ画像の入力方向または構図を含む画像取得に関する操作を指示する操作指示を、前記画像取得装置に表示するための操作指示情報として前記通信回線を介して出力することを特徴とする画像表示操作指示方法。
【請求項３６】
前記ファインダ画像は、前記ファインダ画像の方位角と上下角を含む撮影方向情報と画角情報が付加され、前記モニタ表示部に表示された前記ファインダ画像に対して入力された前記操作指示を、前記モニタ表示部の前記ファインダ画像上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項３５に記載の画像表示操作指示方法。
【請求項３７】
前記モニタ表示部が、前記ファインダ画像を表示する第１の表示領域と、前記ファインダ画像の画角に対応する画像フレームを表示し、前記画角の所定倍の視野角を表示する第２の表示領域とを備え、前記モニタ表示部の前記第２の表示領域の前記画像フレーム以外の領域に対して入力された前記操作指示を、前記モニタ表示部の前記第２の表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置情報を含む前記操作指示情報として出力することを特徴とする請求項３６に記載の画像表示操作指示方法。
【請求項３８】
前記通信回線を介して前記画像取得装置から入力する複数の撮影画像をパノラマ写真として合成し、前記パノラマ写真を前記モニタ表示部の前記第２の表示領域に表示することを特徴とする請求項３７に記載の画像表示操作指示方法。
【請求項３９】
前記モニタ表示部が、前記ファインダ画像の画角の所定倍の視野角を表示する表示領域を備え、前記通信回線を介して前記画像取得装置から入力する複数の撮影画像をパノラマ写真として合成し、前記パノラマ写真が有する前記撮影方向情報と前記画角情報に対応する、前記モニタ表示部の前記表示領域上で特定される前記撮影方向情報と前記画角情報に基づく位置に、前記パノラマ写真を表示することを特徴とする請求項３７に記載の画像表示操作指示方法。
【請求項４０】
前記ファインダ画像を前記パノラマ写真の対応する位置に重ねて表示することを特徴とする請求項３９に記載の画像表示操作指示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【公開番号】特開２０１２−１０９８５２（Ｐ２０１２−１０９８５２Ａ）
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願番号】特願２０１０−２５７７７８（Ｐ２０１０−２５７７７８）
【出願日】平成２２年１１月１８日（２０１０．１１．１８）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願日】平成２２年１１月１８日（２０１０．１１．１８）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
[ Back to top ]