映像再生表示システム
【課題】 映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを提供する。
【解決手段】 撮影部１０は、映像情報を時間発生部２６が発生した撮影時刻とともに取得し、位置取得部２８は、撮影部１０の撮影位置を撮影時刻とともに取得し、視野角取得部３０は、撮影部１０の視野角を撮影時刻とともに取得し、撮影方向取得部３２は、撮影部１０の撮影方向を撮影時刻とともに取得する。映像編集部１６は、撮影部１０が取得した映像情報の再生順序を決定し、地図情報処理部１８は、上記映像情報の地図情報における範囲である映像範囲を、撮影時刻をキーとして映像情報に関連付けられた撮影位置、視野角、撮影方向を使用して求め、撮影位置とともに地図情報に重畳し、表示制御部２０及び表示部２２は、上述した映像情報及び地図情報処理部１８が地図情報に重畳した映像範囲と撮影位置を表示する。
【解決手段】 撮影部１０は、映像情報を時間発生部２６が発生した撮影時刻とともに取得し、位置取得部２８は、撮影部１０の撮影位置を撮影時刻とともに取得し、視野角取得部３０は、撮影部１０の視野角を撮影時刻とともに取得し、撮影方向取得部３２は、撮影部１０の撮影方向を撮影時刻とともに取得する。映像編集部１６は、撮影部１０が取得した映像情報の再生順序を決定し、地図情報処理部１８は、上記映像情報の地図情報における範囲である映像範囲を、撮影時刻をキーとして映像情報に関連付けられた撮影位置、視野角、撮影方向を使用して求め、撮影位置とともに地図情報に重畳し、表示制御部２０及び表示部２２は、上述した映像情報及び地図情報処理部１８が地図情報に重畳した映像範囲と撮影位置を表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、移動体上の撮影手段により取得した映像の再生表示システムの改良に関する。
【背景技術】
【０００２】
従来より、自動車、航空機等の移動体上に載置したビデオカメラ等の撮影手段により取得した映像データを再生するシステムが、建設、災害対応その他の分野で広く利用されている。例えば、下記特許文献１には、静止画像もしくは動画像と共に撮影位置を記録し、再生することのできる画像再生システムが開示されている。
【特許文献１】特開２００２−３７４４４３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかし、上記従来の技術においては、再生されている映像が地図上でどの範囲に対応しているかが不明であり、利用しにくいという問題があった。
【０００４】
本発明は、上記従来の課題に鑑みなされたものであり、その目的は、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを提供することにある。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明は、映像再生表示システムであって、映像情報を取得する撮影手段と、前記撮影手段が取得した前記映像情報の再生順序を決定する編集手段と、前記撮影手段の３次元の撮影位置を取得する撮影位置取得手段と、前記撮影手段の撮影位置を含む地図情報を取得する地図情報取得手段と、前記撮影手段が取得した映像の前記地図情報における範囲である映像範囲を求め、前記撮影位置とともに前記地図情報に重畳する地図情報処理手段と、前記編集手段が決定した再生順序に従って前記映像情報を再生表示するとともに、前記地図情報及び前記地図情報に重畳された前記撮影位置と前記映像範囲を、前記映像情報の再生順序に従って再生表示する再生表示手段と、を備えることを特徴とする。
【０００６】
ここで、上記映像再生表示システムは、前記撮影手段の視野角を取得する視野角取得手段と、前記撮影手段の撮影方向を取得する撮影方向取得手段とを備え、前記地図情報処理手段は、前記視野角、撮影方向及び前記撮影位置に基づき、前記映像範囲を求めることを特徴とする。上記地図情報処理手段は、前記映像範囲を求める際に前記地図情報に含まれる標高情報も使用するように構成するのが好適である。
【０００７】
また、上記映像情報、前記撮影位置、前記視野角及び前記撮影方向は撮影時刻とともに取得され、前記地図情報処理手段は、前記取得された撮影時刻に基づき前記撮影位置と前記映像範囲とを前記映像情報に関連付けるのが好適である。
【発明の効果】
【０００８】
本発明によれば、映像情報と地図情報に重畳された映像範囲とが再生表示されるので、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを実現できる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明を実施するための最良の形態（以下、実施形態という）を、図面に従って説明する。
【００１０】
図１には、本発明にかかる映像再生表示システムの構成のブロック図が示される。図１において、映像再生表示システムは、撮影部１０、カメラ状態取得部１２、記憶部１４、映像編集部１６、地図情報処理部１８、表示制御部２０及び表示部２２を含む。また、地図情報を格納する地図情報データベース２４は記憶部１４に構築してもよいし、外部のデータベースを使用してもよい。
【００１１】
撮影部１０は、アナログ方式またはデジタル方式のビデオカメラにより構成でき、自動車または航空機等の移動体上に載置されて撮影を行い、映像情報を取得する。なお、撮影部１０をアナログ方式のビデオカメラとするときは、映像情報を図示しないＡ／Ｄコンバータによりデジタルデータに変換するのが好適である。
【００１２】
カメラ状態取得部１２は、時間発生部２６、位置取得部２８、視野角取得部３０及び撮影方向取得部３２を含む。
【００１３】
時間発生部２６は、時刻情報を発生するように構成されており、上記撮影部１０は、映像情報を時間発生部２６が発生した時刻とともに取得するように構成されている。この撮影時刻の記録は、映像情報に映し込む（スーパーインポーズ）方法または時刻データを映像情報と組み合わせて記憶する方法等により行われる。
【００１４】
また、位置取得部２８は、ＧＰＳ等の位置情報を発生するシステムを利用し、撮影部１０が映像を撮影するときの撮影位置を３次元（緯度、経度、高度）で取得する。この場合、撮影位置は時間発生部２６が発生した撮影時刻とともに取得される。
【００１５】
また、視野角取得部３０は、撮影部１０の撮影中の視野角を撮影部１０から取得する。この場合にも、視野角は時間発生部２６が発生した撮影時刻とともに取得される。なお、撮影部１０のビデオカメラの構造的な制約のため視野角のデータを取得できない場合には、視野角取得部３０が視野角を定数として与えるように構成するのが好適である。
【００１６】
さらに、撮影方向取得部３２は、コンパス等の装置を使用して撮影部１０の撮影中の撮影方向を取得する。この場合にも、撮影方向は時間発生部２６が発生した撮影時刻とともに取得される。なお、上記コンパスは、撮影部１０のビデオカメラに取り付けられる。
【００１７】
上記位置取得部２８が取得した撮影位置のデータの例が表１に示され、上記視野角取得部３０が取得した視野角のデータの例が表２に示され、上記撮影方向取得部３２が取得した撮影方向のデータの例が表３に示される。これらの例では、いずれも時間発生部２６が発生した撮影時刻とともに各データが表されており、各データは１秒間隔で取得されている。
【００１８】
【表１】
【００１９】
【表２】
【００２０】
【表３】
【００２１】
表１において、撮影位置は、撮影部１０のビデオカメラの位置の緯度、経度、高度として表される。また、表２において、視野角は、撮影部１０のビデオカメラの視野角である。また、表３において、撮影方向は、撮影部１０のビデオカメラが撮影する方向が、ロール、ピッチ、ヨーの各角度として表される。なお、ロールはビデオカメラが光軸周りに回転するときの角度であり、ピッチは光軸が水平面に対してなす角度であり、ヨーは光軸が水平方向に回転するときの角度である（図２参照）。
【００２２】
以上に述べた映像情報、撮影位置、視野角及び撮影方向の各データは、時刻情報（日時）とともに記憶部１４に記憶されているので、時刻情報をキーとして相互に関連付けることができる。記憶部１４は、例えばハードディスク、ＣＤ−ＲＷ、ＤＶＤ−ＲＷ等の追記可能な記憶媒体で構成される。
【００２３】
図３には、記憶部１４に記憶された上記各データの例が示される。図３において、空間属性として、１秒毎に取得されている撮影位置に含まれる緯度、経度、高度が記憶されている。また、主題属性として、１秒毎に取得されている撮影位置に含まれる撮影日時、後述する映像編集部１６が決定する映像情報の再生順序を表す経過時間、１秒毎に取得されている撮影方向に含まれるロール、ピッチ、ヨーの各角度、視野角が記憶されている。なお、上記空間属性及び主題属性は、後述する地理情報システム（ＧＩＳ）で扱うことができるデータ形式である。
【００２４】
映像編集部１６では、撮影部１０が取得した映像情報から不要部分をカットし、所望の文字データ等を付加した後、映像情報の再生順序を決定する。この再生順序は、ユーザが適宜指定することができる。映像編集部１６が決定した映像情報の再生順序は、再生開始からの経過時間として表され、時間発生部２６が発生した時刻（実際の撮影時刻）と対応付けられて記憶部１４に記憶される。表４には、経過時間と撮影時刻との対応付けの例が示される。
【００２５】
【表４】
【００２６】
表４では、１秒ごとに経過時間と撮影時刻（日時）とが対応付けられているが、この時間間隔は適宜指定できる。なお、映像情報の撮影時刻が映像情報に映し込まれている場合は、文字認識技術により撮影時刻を認識する。
【００２７】
地図情報処理部１８は、図３に示される記憶部１４に記憶された経過時間毎に、対応する撮影時刻に撮影された映像情報の撮影位置を取得し、この撮影位置の緯度と経度を含む地図情報を地図情報データベース２４から取得する。また、地図情報処理部１８は、撮影部１０が取得した映像情報の上記地図情報における範囲である映像範囲を求め、撮影位置（緯度、経度）とともに地図情報に重畳する。ここで、地図情報処理部１８は、本発明にかかる地図情報取得手段及び地図情報処理手段として機能する。
【００２８】
図４には、上記映像範囲の説明図が示される。図４において、映像範囲３４は、撮影部１０のビデオカメラの撮影方向について撮影時の視野角で見ることのできる範囲である。地図情報処理部１８は、記憶部１４からビデオカメラの視野角３６、撮影方向３８及び撮影位置（緯度、経度、高度）のデータを読み出し、これらのデータに基づいて映像範囲３４を算出する。この地図情報処理部１８が映像範囲３４を算出する場合には、例えば地理情報システム（ＧＩＳ）等を使用することができる。なお、ビデオカメラの撮影方向が水平に近くなると、映像範囲３４が無限遠まで含む可能性がある。このため、地図情報処理部１８が映像範囲３４を一定の範囲内に限定するように構成するのが好適である。
【００２９】
また、上記映像範囲３４を算出する際には、地図情報データベース２４から取得した、対象となる地図情報に含まれる地表面４０の標高データを使用することにより、より正確な映像範囲３４の算出が可能となる。なお、標高データが未整備な地図情報を使用する等、標高データを使用することができない場合には、地図情報処理部１８が適宜な一定標高面を設定し、映像範囲３４の算出を行うように構成するのが好適である。さらに、実際の地表面の形状を考慮して、上記一定標高面を楕円体等の曲面としてもよい。
【００３０】
以上により求めた映像範囲３４のデータは、図５に示す情報項目を保持している。図５に示されるように、映像範囲３４のデータには、映像範囲３４の算出の対象となった映像情報の再生順序として映像編集部１６が割り付けた経過時間と映像情報の撮影日時も含まれる。これにより、映像情報と連動した映像範囲３４の表示が可能となる。
【００３１】
表示制御部２０及び表示部２２は、上述した映像情報及び地図情報処理部１８が地図情報に重畳した映像範囲と撮影位置を表示する処理を実行する。
【００３２】
図６には、表示部２２に表示される映像表示ウィンドウの例が示される。図６において、映像表示ウィンドウには、映像編集部１６が決定した再生順序で映像情報が表示される。また、映像表示ウィンドウには、映像情報の撮影日時４２と、再生順序に対応する再生開始からの経過時間４４も示される。
【００３３】
図７には、表示部２２に表示される地図表示ウィンドウの例が示される。図７において、撮影位置の緯度、経度すなわち撮影部１０のビデオカメラの存在位置の地表面への投影位置４６が星印で示され、映像範囲４８が四角形状の領域として表示されている。また、背景には撮影位置を含む地図情報が表示されている。これらの撮影位置及び映像範囲には、上述したように経過時間と撮影日時が関連付けられているので、映像情報に連動して経過時間の時系列順に表示することができる。なお、表示されている背景の地図情報に、存在する撮影位置及び映像範囲データ全てを表示し、図６に示された映像情報に対応するもののみ強調表示してもよい。また、映像範囲の表示は、背景である地図を隠してしまわないように半透明表示とするのが好適である。
【００３４】
なお、上記地図情報のデータ形式は特に限定されず、ベクトル形式、ラスタ形式のデータを目的に応じて任意の縮尺で使用できる。また、地図表示ウィンドウには、地図の表示縮尺を設定する手段、地図の表示範囲を変更する手段、色及び線種等の地図の表示条件を設定する手段、所望の撮影位置及び映像範囲を指定する手段等を設けるのも好適である。
【００３５】
上述したように、映像情報、撮影位置、視野角及び撮影方向の各データは、時刻情報をキーとして相互に関連付けられているので、撮影日時を指定することにより、映像表示ウィンドウに当該撮影日時に対応する映像情報を、地図表示ウィンドウに当該経過時間に対応する撮影位置及び映像範囲を表示することができる。このとき、撮影日時の代わりに経過時間を使用してもよい。また、地図表示ウィンドウで所望の撮影位置または映像範囲を指定することにより、映像表示ウィンドウに、対応する映像情報を表示することもできる。
【００３６】
以上の場合、撮影日時、撮影位置または映像範囲の指定は、専用の映像選択ウィンドウから行うように構成してもよい。図８には、映像選択ウィンドウの例が示され、地図情報を指定するための撮影地区及び撮影日時等のデータが入力できるインターフェースとして構成されている。
【００３７】
また、地図表示ウィンドウ上に撮影位置の軌跡を表示し、この軌跡を例えばマウスによるクリックまたはドラッグの操作により指定して、対応する映像情報を映像表示ウィンドウに連続的に表示するように構成してもよい。図９には、このような撮影位置の軌跡を表示した地図表示ウィンドウの例が示される。図９において、撮影位置の軌跡は、実線表示されている。
【００３８】
さらに、地図表示ウィンドウ上に映像範囲を表示し、この映像範囲をマウス等で指定して、対応する映像情報を映像表示ウィンドウに表示するように構成してもよい。図１０には、このような映像範囲を表示した地図表示ウィンドウの例が示される。図１０において、映像範囲は四角形状の領域として示されているが、必ずしも四角形とは限らず、撮影地区の地表面の形状により変化する。
【００３９】
以上に述べた本発明によれば、映像表示ウィンドウで映像情報を再生しつつ、地図表示ウィンドウに撮影当時の撮影位置（撮影部１０のビデオカメラの存在位置）と映像範囲を映像情報に連動して表示できるので、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを実現できる。
【図面の簡単な説明】
【００４０】
【図１】本発明にかかる映像再生表示システムの構成のブロック図である。
【図２】ロール、ピッチ、ヨーの説明図である。
【図３】記憶部に記憶されたデータの例を示す図である。
【図４】映像範囲の説明図である。
【図５】映像範囲のデータの情報項目の例を示す図である。
【図６】映像表示ウィンドウの例を示す図である。
【図７】地図表示ウィンドウの例を示す図である。
【図８】映像選択ウィンドウの例を示す図である。
【図９】撮影位置の軌跡を表示した地図表示ウィンドウの例を示す図である。
【図１０】映像範囲を表示した地図表示ウィンドウの例を示す図である。
【符号の説明】
【００４１】
１０ 撮影部、１２ カメラ状態取得部、１４ 記憶部、１６ 映像編集部、１８ 地図情報処理部、２０ 表示制御部、２２ 表示部、２４ 地図情報データベース、２６ 時間発生部、２８ 位置取得部、３０ 視野角取得部、３２ 撮影方向取得部、３４ 映像範囲、３６ 視野角、３８ 撮影方向、４０ 地表面、４２ 撮影日時、４４ 経過時間、４６ 投影位置、４８ 映像範囲。
【技術分野】
【０００１】
本発明は、移動体上の撮影手段により取得した映像の再生表示システムの改良に関する。
【背景技術】
【０００２】
従来より、自動車、航空機等の移動体上に載置したビデオカメラ等の撮影手段により取得した映像データを再生するシステムが、建設、災害対応その他の分野で広く利用されている。例えば、下記特許文献１には、静止画像もしくは動画像と共に撮影位置を記録し、再生することのできる画像再生システムが開示されている。
【特許文献１】特開２００２−３７４４４３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかし、上記従来の技術においては、再生されている映像が地図上でどの範囲に対応しているかが不明であり、利用しにくいという問題があった。
【０００４】
本発明は、上記従来の課題に鑑みなされたものであり、その目的は、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを提供することにある。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明は、映像再生表示システムであって、映像情報を取得する撮影手段と、前記撮影手段が取得した前記映像情報の再生順序を決定する編集手段と、前記撮影手段の３次元の撮影位置を取得する撮影位置取得手段と、前記撮影手段の撮影位置を含む地図情報を取得する地図情報取得手段と、前記撮影手段が取得した映像の前記地図情報における範囲である映像範囲を求め、前記撮影位置とともに前記地図情報に重畳する地図情報処理手段と、前記編集手段が決定した再生順序に従って前記映像情報を再生表示するとともに、前記地図情報及び前記地図情報に重畳された前記撮影位置と前記映像範囲を、前記映像情報の再生順序に従って再生表示する再生表示手段と、を備えることを特徴とする。
【０００６】
ここで、上記映像再生表示システムは、前記撮影手段の視野角を取得する視野角取得手段と、前記撮影手段の撮影方向を取得する撮影方向取得手段とを備え、前記地図情報処理手段は、前記視野角、撮影方向及び前記撮影位置に基づき、前記映像範囲を求めることを特徴とする。上記地図情報処理手段は、前記映像範囲を求める際に前記地図情報に含まれる標高情報も使用するように構成するのが好適である。
【０００７】
また、上記映像情報、前記撮影位置、前記視野角及び前記撮影方向は撮影時刻とともに取得され、前記地図情報処理手段は、前記取得された撮影時刻に基づき前記撮影位置と前記映像範囲とを前記映像情報に関連付けるのが好適である。
【発明の効果】
【０００８】
本発明によれば、映像情報と地図情報に重畳された映像範囲とが再生表示されるので、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを実現できる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明を実施するための最良の形態（以下、実施形態という）を、図面に従って説明する。
【００１０】
図１には、本発明にかかる映像再生表示システムの構成のブロック図が示される。図１において、映像再生表示システムは、撮影部１０、カメラ状態取得部１２、記憶部１４、映像編集部１６、地図情報処理部１８、表示制御部２０及び表示部２２を含む。また、地図情報を格納する地図情報データベース２４は記憶部１４に構築してもよいし、外部のデータベースを使用してもよい。
【００１１】
撮影部１０は、アナログ方式またはデジタル方式のビデオカメラにより構成でき、自動車または航空機等の移動体上に載置されて撮影を行い、映像情報を取得する。なお、撮影部１０をアナログ方式のビデオカメラとするときは、映像情報を図示しないＡ／Ｄコンバータによりデジタルデータに変換するのが好適である。
【００１２】
カメラ状態取得部１２は、時間発生部２６、位置取得部２８、視野角取得部３０及び撮影方向取得部３２を含む。
【００１３】
時間発生部２６は、時刻情報を発生するように構成されており、上記撮影部１０は、映像情報を時間発生部２６が発生した時刻とともに取得するように構成されている。この撮影時刻の記録は、映像情報に映し込む（スーパーインポーズ）方法または時刻データを映像情報と組み合わせて記憶する方法等により行われる。
【００１４】
また、位置取得部２８は、ＧＰＳ等の位置情報を発生するシステムを利用し、撮影部１０が映像を撮影するときの撮影位置を３次元（緯度、経度、高度）で取得する。この場合、撮影位置は時間発生部２６が発生した撮影時刻とともに取得される。
【００１５】
また、視野角取得部３０は、撮影部１０の撮影中の視野角を撮影部１０から取得する。この場合にも、視野角は時間発生部２６が発生した撮影時刻とともに取得される。なお、撮影部１０のビデオカメラの構造的な制約のため視野角のデータを取得できない場合には、視野角取得部３０が視野角を定数として与えるように構成するのが好適である。
【００１６】
さらに、撮影方向取得部３２は、コンパス等の装置を使用して撮影部１０の撮影中の撮影方向を取得する。この場合にも、撮影方向は時間発生部２６が発生した撮影時刻とともに取得される。なお、上記コンパスは、撮影部１０のビデオカメラに取り付けられる。
【００１７】
上記位置取得部２８が取得した撮影位置のデータの例が表１に示され、上記視野角取得部３０が取得した視野角のデータの例が表２に示され、上記撮影方向取得部３２が取得した撮影方向のデータの例が表３に示される。これらの例では、いずれも時間発生部２６が発生した撮影時刻とともに各データが表されており、各データは１秒間隔で取得されている。
【００１８】
【表１】
【００１９】
【表２】
【００２０】
【表３】
【００２１】
表１において、撮影位置は、撮影部１０のビデオカメラの位置の緯度、経度、高度として表される。また、表２において、視野角は、撮影部１０のビデオカメラの視野角である。また、表３において、撮影方向は、撮影部１０のビデオカメラが撮影する方向が、ロール、ピッチ、ヨーの各角度として表される。なお、ロールはビデオカメラが光軸周りに回転するときの角度であり、ピッチは光軸が水平面に対してなす角度であり、ヨーは光軸が水平方向に回転するときの角度である（図２参照）。
【００２２】
以上に述べた映像情報、撮影位置、視野角及び撮影方向の各データは、時刻情報（日時）とともに記憶部１４に記憶されているので、時刻情報をキーとして相互に関連付けることができる。記憶部１４は、例えばハードディスク、ＣＤ−ＲＷ、ＤＶＤ−ＲＷ等の追記可能な記憶媒体で構成される。
【００２３】
図３には、記憶部１４に記憶された上記各データの例が示される。図３において、空間属性として、１秒毎に取得されている撮影位置に含まれる緯度、経度、高度が記憶されている。また、主題属性として、１秒毎に取得されている撮影位置に含まれる撮影日時、後述する映像編集部１６が決定する映像情報の再生順序を表す経過時間、１秒毎に取得されている撮影方向に含まれるロール、ピッチ、ヨーの各角度、視野角が記憶されている。なお、上記空間属性及び主題属性は、後述する地理情報システム（ＧＩＳ）で扱うことができるデータ形式である。
【００２４】
映像編集部１６では、撮影部１０が取得した映像情報から不要部分をカットし、所望の文字データ等を付加した後、映像情報の再生順序を決定する。この再生順序は、ユーザが適宜指定することができる。映像編集部１６が決定した映像情報の再生順序は、再生開始からの経過時間として表され、時間発生部２６が発生した時刻（実際の撮影時刻）と対応付けられて記憶部１４に記憶される。表４には、経過時間と撮影時刻との対応付けの例が示される。
【００２５】
【表４】
【００２６】
表４では、１秒ごとに経過時間と撮影時刻（日時）とが対応付けられているが、この時間間隔は適宜指定できる。なお、映像情報の撮影時刻が映像情報に映し込まれている場合は、文字認識技術により撮影時刻を認識する。
【００２７】
地図情報処理部１８は、図３に示される記憶部１４に記憶された経過時間毎に、対応する撮影時刻に撮影された映像情報の撮影位置を取得し、この撮影位置の緯度と経度を含む地図情報を地図情報データベース２４から取得する。また、地図情報処理部１８は、撮影部１０が取得した映像情報の上記地図情報における範囲である映像範囲を求め、撮影位置（緯度、経度）とともに地図情報に重畳する。ここで、地図情報処理部１８は、本発明にかかる地図情報取得手段及び地図情報処理手段として機能する。
【００２８】
図４には、上記映像範囲の説明図が示される。図４において、映像範囲３４は、撮影部１０のビデオカメラの撮影方向について撮影時の視野角で見ることのできる範囲である。地図情報処理部１８は、記憶部１４からビデオカメラの視野角３６、撮影方向３８及び撮影位置（緯度、経度、高度）のデータを読み出し、これらのデータに基づいて映像範囲３４を算出する。この地図情報処理部１８が映像範囲３４を算出する場合には、例えば地理情報システム（ＧＩＳ）等を使用することができる。なお、ビデオカメラの撮影方向が水平に近くなると、映像範囲３４が無限遠まで含む可能性がある。このため、地図情報処理部１８が映像範囲３４を一定の範囲内に限定するように構成するのが好適である。
【００２９】
また、上記映像範囲３４を算出する際には、地図情報データベース２４から取得した、対象となる地図情報に含まれる地表面４０の標高データを使用することにより、より正確な映像範囲３４の算出が可能となる。なお、標高データが未整備な地図情報を使用する等、標高データを使用することができない場合には、地図情報処理部１８が適宜な一定標高面を設定し、映像範囲３４の算出を行うように構成するのが好適である。さらに、実際の地表面の形状を考慮して、上記一定標高面を楕円体等の曲面としてもよい。
【００３０】
以上により求めた映像範囲３４のデータは、図５に示す情報項目を保持している。図５に示されるように、映像範囲３４のデータには、映像範囲３４の算出の対象となった映像情報の再生順序として映像編集部１６が割り付けた経過時間と映像情報の撮影日時も含まれる。これにより、映像情報と連動した映像範囲３４の表示が可能となる。
【００３１】
表示制御部２０及び表示部２２は、上述した映像情報及び地図情報処理部１８が地図情報に重畳した映像範囲と撮影位置を表示する処理を実行する。
【００３２】
図６には、表示部２２に表示される映像表示ウィンドウの例が示される。図６において、映像表示ウィンドウには、映像編集部１６が決定した再生順序で映像情報が表示される。また、映像表示ウィンドウには、映像情報の撮影日時４２と、再生順序に対応する再生開始からの経過時間４４も示される。
【００３３】
図７には、表示部２２に表示される地図表示ウィンドウの例が示される。図７において、撮影位置の緯度、経度すなわち撮影部１０のビデオカメラの存在位置の地表面への投影位置４６が星印で示され、映像範囲４８が四角形状の領域として表示されている。また、背景には撮影位置を含む地図情報が表示されている。これらの撮影位置及び映像範囲には、上述したように経過時間と撮影日時が関連付けられているので、映像情報に連動して経過時間の時系列順に表示することができる。なお、表示されている背景の地図情報に、存在する撮影位置及び映像範囲データ全てを表示し、図６に示された映像情報に対応するもののみ強調表示してもよい。また、映像範囲の表示は、背景である地図を隠してしまわないように半透明表示とするのが好適である。
【００３４】
なお、上記地図情報のデータ形式は特に限定されず、ベクトル形式、ラスタ形式のデータを目的に応じて任意の縮尺で使用できる。また、地図表示ウィンドウには、地図の表示縮尺を設定する手段、地図の表示範囲を変更する手段、色及び線種等の地図の表示条件を設定する手段、所望の撮影位置及び映像範囲を指定する手段等を設けるのも好適である。
【００３５】
上述したように、映像情報、撮影位置、視野角及び撮影方向の各データは、時刻情報をキーとして相互に関連付けられているので、撮影日時を指定することにより、映像表示ウィンドウに当該撮影日時に対応する映像情報を、地図表示ウィンドウに当該経過時間に対応する撮影位置及び映像範囲を表示することができる。このとき、撮影日時の代わりに経過時間を使用してもよい。また、地図表示ウィンドウで所望の撮影位置または映像範囲を指定することにより、映像表示ウィンドウに、対応する映像情報を表示することもできる。
【００３６】
以上の場合、撮影日時、撮影位置または映像範囲の指定は、専用の映像選択ウィンドウから行うように構成してもよい。図８には、映像選択ウィンドウの例が示され、地図情報を指定するための撮影地区及び撮影日時等のデータが入力できるインターフェースとして構成されている。
【００３７】
また、地図表示ウィンドウ上に撮影位置の軌跡を表示し、この軌跡を例えばマウスによるクリックまたはドラッグの操作により指定して、対応する映像情報を映像表示ウィンドウに連続的に表示するように構成してもよい。図９には、このような撮影位置の軌跡を表示した地図表示ウィンドウの例が示される。図９において、撮影位置の軌跡は、実線表示されている。
【００３８】
さらに、地図表示ウィンドウ上に映像範囲を表示し、この映像範囲をマウス等で指定して、対応する映像情報を映像表示ウィンドウに表示するように構成してもよい。図１０には、このような映像範囲を表示した地図表示ウィンドウの例が示される。図１０において、映像範囲は四角形状の領域として示されているが、必ずしも四角形とは限らず、撮影地区の地表面の形状により変化する。
【００３９】
以上に述べた本発明によれば、映像表示ウィンドウで映像情報を再生しつつ、地図表示ウィンドウに撮影当時の撮影位置（撮影部１０のビデオカメラの存在位置）と映像範囲を映像情報に連動して表示できるので、映像範囲を地図上で把握でき、利用しやすい映像再生表示システムを実現できる。
【図面の簡単な説明】
【００４０】
【図１】本発明にかかる映像再生表示システムの構成のブロック図である。
【図２】ロール、ピッチ、ヨーの説明図である。
【図３】記憶部に記憶されたデータの例を示す図である。
【図４】映像範囲の説明図である。
【図５】映像範囲のデータの情報項目の例を示す図である。
【図６】映像表示ウィンドウの例を示す図である。
【図７】地図表示ウィンドウの例を示す図である。
【図８】映像選択ウィンドウの例を示す図である。
【図９】撮影位置の軌跡を表示した地図表示ウィンドウの例を示す図である。
【図１０】映像範囲を表示した地図表示ウィンドウの例を示す図である。
【符号の説明】
【００４１】
１０ 撮影部、１２ カメラ状態取得部、１４ 記憶部、１６ 映像編集部、１８ 地図情報処理部、２０ 表示制御部、２２ 表示部、２４ 地図情報データベース、２６ 時間発生部、２８ 位置取得部、３０ 視野角取得部、３２ 撮影方向取得部、３４ 映像範囲、３６ 視野角、３８ 撮影方向、４０ 地表面、４２ 撮影日時、４４ 経過時間、４６ 投影位置、４８ 映像範囲。
【特許請求の範囲】
【請求項１】
映像情報を取得する撮影手段と、
前記撮影手段が取得した前記映像情報の再生順序を決定する編集手段と、
前記撮影手段の３次元の撮影位置を取得する撮影位置取得手段と、
前記撮影手段の撮影位置を含む地図情報を取得する地図情報取得手段と、
前記撮影手段が取得した映像の前記地図情報における範囲である映像範囲を求め、前記撮影位置とともに前記地図情報に重畳する地図情報処理手段と、
前記編集手段が決定した再生順序に従って前記映像情報を再生表示するとともに、前記地図情報及び前記地図情報に重畳された前記撮影位置と前記映像範囲を、前記映像情報の再生順序に従って再生表示する再生表示手段と、
を備えることを特徴とする映像再生表示システム。
【請求項２】
請求項１記載の映像再生表示システムは、前記撮影手段の視野角を取得する視野角取得手段と、前記撮影手段の撮影方向を取得する撮影方向取得手段とを備え、前記地図情報処理手段は、前記視野角、撮影方向及び前記撮影位置に基づき、前記映像範囲を求めることを特徴とする映像再生表示システム。
【請求項３】
請求項２記載の映像再生表示システムにおいて、前記地図情報処理手段は、前記映像範囲を求める際に前記地図情報に含まれる標高情報も使用することを特徴とする映像再生表示システム。
【請求項４】
請求項２または請求項３記載の映像再生表示システムにおいて、前記映像情報、前記撮影位置、前記視野角及び前記撮影方向は撮影時刻とともに取得され、前記地図情報処理手段は、前記取得された撮影時刻に基づき前記撮影位置と前記映像範囲とを前記映像情報に関連付けることを特徴とする映像再生表示システム。
【請求項１】
映像情報を取得する撮影手段と、
前記撮影手段が取得した前記映像情報の再生順序を決定する編集手段と、
前記撮影手段の３次元の撮影位置を取得する撮影位置取得手段と、
前記撮影手段の撮影位置を含む地図情報を取得する地図情報取得手段と、
前記撮影手段が取得した映像の前記地図情報における範囲である映像範囲を求め、前記撮影位置とともに前記地図情報に重畳する地図情報処理手段と、
前記編集手段が決定した再生順序に従って前記映像情報を再生表示するとともに、前記地図情報及び前記地図情報に重畳された前記撮影位置と前記映像範囲を、前記映像情報の再生順序に従って再生表示する再生表示手段と、
を備えることを特徴とする映像再生表示システム。
【請求項２】
請求項１記載の映像再生表示システムは、前記撮影手段の視野角を取得する視野角取得手段と、前記撮影手段の撮影方向を取得する撮影方向取得手段とを備え、前記地図情報処理手段は、前記視野角、撮影方向及び前記撮影位置に基づき、前記映像範囲を求めることを特徴とする映像再生表示システム。
【請求項３】
請求項２記載の映像再生表示システムにおいて、前記地図情報処理手段は、前記映像範囲を求める際に前記地図情報に含まれる標高情報も使用することを特徴とする映像再生表示システム。
【請求項４】
請求項２または請求項３記載の映像再生表示システムにおいて、前記映像情報、前記撮影位置、前記視野角及び前記撮影方向は撮影時刻とともに取得され、前記地図情報処理手段は、前記取得された撮影時刻に基づき前記撮影位置と前記映像範囲とを前記映像情報に関連付けることを特徴とする映像再生表示システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２００６−１０６５７７（Ｐ２００６−１０６５７７Ａ）
【公開日】平成１８年４月２０日（２００６．４．２０）
【国際特許分類】
【出願番号】特願２００４−２９６１７１（Ｐ２００４−２９６１７１）
【出願日】平成１６年１０月８日（２００４．１０．８）
【出願人】（０００１３５７７１）株式会社パスコ (102)
【Ｆターム（参考）】
【公開日】平成１８年４月２０日（２００６．４．２０）
【国際特許分類】
【出願日】平成１６年１０月８日（２００４．１０．８）
【出願人】（０００１３５７７１）株式会社パスコ (102)
【Ｆターム（参考）】
[ Back to top ]