画像処理による地図作成方法、その装置及びそのコンピュータプログラム
【課題】撮像装置によって得られた写真画像データから、簡便で即時性のある地図を作成する方法を提供すること。
【解決手段】携帯性に優れ、高性能かつ安価で容易に入手可能なデジタルカメラ、ＧＰＳ、電子コンパス、数値地図データベース及びパソコンを用い、カメラの位置・姿勢を取得し、写真画像と同じ方向を見た数値地図データから作成されたコンピュータ画像を作成し、このコンピュータ画像に写真画像を重ね合わせ、この重ね合わせ画像に位置情報を逆投影することにより、写真画像に対応する地図を得ることができる。ビデオ又はコマ送り画像を利用して動画を得ることも可能になる。
【解決手段】携帯性に優れ、高性能かつ安価で容易に入手可能なデジタルカメラ、ＧＰＳ、電子コンパス、数値地図データベース及びパソコンを用い、カメラの位置・姿勢を取得し、写真画像と同じ方向を見た数値地図データから作成されたコンピュータ画像を作成し、このコンピュータ画像に写真画像を重ね合わせ、この重ね合わせ画像に位置情報を逆投影することにより、写真画像に対応する地図を得ることができる。ビデオ又はコマ送り画像を利用して動画を得ることも可能になる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、民生用品を使用して災害監視などに利用される地図（位置情報を有する画像）を低価格、かつ、高性能で作成することのできる画像処理による地図作成方法、その装置及びそのコンピュータプログラムに関するものである。
【背景技術】
【０００２】
従来、火山噴火、雪崩、斜面崩壊、山火事、河川氾濫、津波などの災害が発生した場合の他、植生分布の変化を調査したい場合などには、飛行機、ヘリコプター、人工衛星などによって高度のある上空から特殊な専用の計測装置により撮影された写真画像を用いて災害状況などを示す画像の地図化がなされてきた。
しかし、緊急を要する場合には、人工衛星では地球を一周する周期が長くて間に合わず、たとえ、利用できたとしても高額な費用がかかる。飛行機やヘリコプターでは、天候によっては飛ばせなかったり、飛ばすのに許可を必要としたりするだけでなく、計測には多大な費用がかかり、緊急の場合には不向きである。
また、写真画像を用いて位置情報を有する地図画像に変換するには、地上に地図座標の既知点であるいわゆる基準点を設置しなければならず、緊急時に山岳地域に基準点を設置することは容易でなかった。スカイラインなどの輪郭を示す特徴線を利用した方法もあるが、雨、雲、霧、噴煙などが発生したときにはスカイラインを捉えられないなどの地図画像の取得方法に制限があり、また、写真画像の処理にも時間がかかるために、緊急な事態に対応する迅速な計測に難点があった。
【０００３】
一方、地上から一般的な写真を撮影する方法は、撮影が容易で観察に便利なこともあり、広く利用されているが、これらはあくまで風景写真であるため、現象の概略は分かっても、その位置を即座に求めることができない。リアルタイムでの観測には、ビデオ映像や定点カメラが多くの現場で利用されているが、計測という観点からは不十分である。
例えば、噴煙の場所、火砕流や溶岩流の流下位置（一体標高何ｍまで降りてきたのか）、面積、方向、速度などは写真画像では分からない。さらに、これらの地上から撮影された写真を地図上の正確な位置に変換するには、撮影された写真画像内に最低３点の基準点を必要とするとともに、特殊な専用の装置を必要とするステレオ写真の撮影が不可欠である、という問題点があった。
【０００４】
このような状況にあって、特殊な専用の装置を必要とせず、低価格かつ簡便で即時性のある計測装置と地図作成方法が望まれていた。特に、災害などの緊急を要する事態においては、航空機の利用が困難であり、また、長時間連続した計測を必要とする場合の有効、低価格、簡便性、即時性のある計測装置と地図作成方法が強く望まれていた。
【０００５】
そこで、本発明者等は、図１３及び図１４に示すような市販のデジタルカメラと、カメラの撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力するＧＰＳと、地形標高データベースと、パソコンとを具備し、前記ＧＰＳの緯度、経度、高度に基づき、パソコンにてカメラの方位角と上下角を演算し、これらにより山岳の透視画像（コンピュータ画像）を作成し、この透視画像とカメラの写真画像とを重ね合わせて幾何補正した地図を作成する地図の作成方法をすでに提案している（特許文献１）。
【特許文献１】特開２００３−１３９５３２号公報。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載された発明は、特殊な専用の装置を必要とせず、低価格かつ簡便で即時性のある地図作成ができ、災害などの緊急を要する事態において、航空機の利用が困難であり、また、長時間連続した計測が必要な場合の有効、低価格、簡便性、即時性のある地図作成が可能である。
さらに詳しくは、図１３及び図１４において、デジタルカメラなどの撮像装置１０の設置点をＰ、被写体である火山２９をＱ、これらの水平距離をＤ、水平ラインをＬ、撮像装置１０の光軸をＯ、撮像装置１０の焦点をＦ、焦点距離をｆ、方位角をα、火山２９の俯角をθ、撮像装置１０の上下角をβ、焦点Ｆから光軸Ｏまでの距離をｍ、γ＝θ−βとすれば、α、β、γが演算処理で求められる。
また、回転、縮小、縮尺変換も座標変換により求められる。
【０００７】
しかし、この方法では、被写体である火山２９の点Ｑの位置を、予め調査し、かつ、ＧＰＳの緯度、経度、高度に基づき、パソコンにてカメラの方位角と上下角を演算して求めておかなければならないので、パソコンによる演算に時間がかかり、即時性にやや問題があるだけでなく、演算され方位角と上下角の精度にも問題があるという問題があった。
本発明の第１の目的は、本発明装置によって得られた写真画像データ、特に従来困難であった地上からの写真画像データに基づき、簡便で即時性のある地図を作成する方法を提供することである。
本発明の第２の目的は、画像撮影と同時に、カメラの位置と姿勢を計測する簡便な装置を提供することである。
本発明の第３の目的は、本発明装置によって得られたデータから、リアルタイムで地図投影済みのビデオ又はコマ送り画像を、撮影対象の動きや変化が地球上で動画として見える地図を作成する方法を提供することである。
本発明の第４の目的は、本発明装置によって得られたデータから、デジタルの写真画像におけるすべての点の地図座標と、標高、対応する数値地形図上の位置が分かっているので、デジタルの写真の任意の位置、直線、曲線をリアルタイムで地図に投影する地図を作成する方法を提供することである。
【課題を解決するための手段】
【０００８】
本発明は、一般的に市販されている民生用カメラ、衛星を利用して位置を計測する装置（ＧＰＳなど）、カメラの姿勢と方位を含む３軸を計測できる装置（電子コンパス）及びノート型パーソナルコンピュータが、近年の技術進歩により携帯性に優れ、高性能かつ安価で容易に入手可能であることに着目し、さらに地形標高データが格子状に数値化されている数値地図データが一般的に市販され容易に入手可能であることに着目し、写真画像とカメラの位置と姿勢が同時に取得できる装置により撮影された撮影対象の写真画像と同じ方向を見た数値地図データから作成されたコンピュータ画像を重ね合わせ、かつ、コンピュータ画像から位置情報を写真画像に与えるという逆投影をし、写真画像に対応する地図を得ることができる。近年の機器の精度の向上で重ね合わせによるずれはほとんど発生しない。しかし、目的によっては、拡大写真など更に高い精度を要する場合には、必要に応じて特徴点や特徴線を用いてより精密に重ね合わせ、地図に逆投影することにより、写真画像に対応するより精確な地図を得ることができる。このずれは少ないので、幾何補正したとしても短時間で処理できる。また、ビデオ又はコマ送り画像を利用することも可能になり、従来の課題が解決でき、本発明を達成されることを見出した。
【０００９】
このことにより、すべての点の位置情報が即座に読み取れる風景画像の作成ができ、風景画像の任意の点を指すと、そこの経度、緯度が表示され、地図との位置関係が分かる。
本発明装置は、一般的に市販されている民生品を使用するために、従来の高価な専用機器を使うことなく対象物の計測が可能である。
本発明の地図作成方法は、基準点を設置しなくとも、また、どのような形状の地形に対しても可能であり、しかも、ノート型パーソナルコンピュータ等を用いてリアルタイムで処理することができる。パーソナルコンピュータに携帯電話などの通信機器を接続すれば、危険箇所にカメラを設置し、安全な任意の場所でデータを処理することが可能である。
【００１０】
本発明の画像をインターネット上で配信すれば、災害画像を世界中でリアルタイムに監視することが可能である。
本発明に使用される写真画像は、デジタルカメラの他に、フィルムを使った写真をスキャンしたものやサーモグラフィーなどから得られる画像も用いることができる。
ビデオ等を利用することにより、リアルタイムに動く地図を作成することが可能であり、サーモグラフィーを利用することにより夜間の監視にも利用できる。
本発明により、基準点を取得することのできない特徴の少ない地形、例えば、雲のかかった画像、ズームした画像、サーモグラフィー画像、スカイラインなどの特徴線を抽出することのできない画像などにおいても、画像を重ねあわせ、かつ、逆投影することにより、地図作成が可能である。
【発明の効果】
【００１１】
請求項１記載の画像処理による地図作成方法は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、このコンピュータ画像の上に前記写真画像を重ね合わせる工程と、この重ね合わせた写真画像に逆投影し地図を作成する工程とを含むことを特徴とする。
【００１２】
請求項２記載の画像処理による地図作成装置は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、このコンピュータ画像形成部２３により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる重ね合わせ部２４と、この重ね合わせ部２４により重ね合わせた写真画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする。
【００１３】
請求項３記載の画像処理による地図作成用コンピュータプログラムは、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、この手段により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる手段、この手段により重ね合わせた写真画像に逆投影し地図を作成する手段として機能させることを特徴とする。
【００１４】
請求項４記載の画像処理による地図作成方法は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する工程と、この特徴に基づき重ね合わせて幾何補正を行う工程と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する工程とを含むことを特徴とする。
【００１５】
請求項５記載の画像処理による地図作成装置は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する特徴抽出部２６，２７と、この特徴に基づき重ね合わせて幾何補正を行う幾何補正・重ね合わせ部２８と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする。
【００１６】
請求項６記載の画像処理による地図作成用コンピュータプログラムは、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する手段、この特徴に基づき重ね合わせて幾何補正を行う手段、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する手段として機能させることを特徴とする。
【００１７】
請求項７記載の画像処理による地図作成方法は、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する工程を具備したことを特徴とする。
【００１８】
請求項８記載の画像処理による地図作成装置は、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する付加手段を具備したことを特徴とする。
【００１９】
請求項９記載の画像処理による地図作成用コンピュータプログラムは、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する手段として機能させるようにしたことを特徴とする。
【００２０】
請求項１０記載の請求項１，４又は７記載の画像処理による地図作成方法において、撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする。
【００２１】
請求項１１記載の請求項２，５又は８記載の画像処理による地図作成装置において、撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする。
【００２２】
請求項１２記載の請求項３，６又は９記載の画像処理による地図作成用コンピュータプログラムにおいて、撮像装置１０は、動画の可能な装置からなり、パソコン１５に、この動画により刻々と変化する画像を作成する手段として機能させるようにしたことを特徴とする。
【００２３】
本発明は、以上のように構成したので、以下の特有な作用効果を有する。
（１）民生用品を組み合わせることにより、低価格かつ高性能の画像処理による地図作成方法、その装置及びそのコンピュータプログラムを作ることができる。
【００２４】
（２）撮像装置１０から撮影された撮影対象の画像を現地で即座に地図化することができる。このことにより、災害の監視などに計測や測量の機能を付加することができ、実際の距離を知ることができる。
【００２５】
（３）従来、写真測量で必要とされた基準点や基準線を設置しなくても、撮像装置１０と撮影対象の位置関係が分かっているので数値地図から作られたコンピュータ画像と重ね合わせることにより、幾何補正なしでも精確に重ね合わせができ、写真画像の幾何補正を自動的に行うことができる。
【００２６】
（４）従来の方法では、スカイライン、建造物、地形の特徴点などの基準点が見えなければ幾何補正(写真測量では標定と呼ばれる)が不可能であったが、本発明では、特徴点や特徴線を抽出できなくても、重ね合わせが可能となる。
【００２７】
（５）撮像装置１０としてビデオカメラを利用することにより、リアルタイムで動く地図を作ることが可能である。災害などにおいて、刻々と変化する溶岩流、津波などの現況をリアルタイムで計測、監視できる。また、可視光線だけでなく、熱赤外線を用いたサーモグラフなどの電子イメージセンサによる写真画像が使用できる。サーモグラフを用いれば、昼夜間の熱映像を計測することが可能になる。さらに、赤外線カメラを用いれば、植生分布の変化を知ることもできる。
【００２８】
（６）本発明により得られる幾何補正済みの地図を経時的にインターネット上に表示することにより、リアルタイムで多くの人々に災害状況を伝達することが可能である。また、携帯電話を利用した画像の伝達も可能である。
【００２９】
（７）本発明は、固定カメラにも適用可能であり、数多く設置されていながら対象物や現象の位置が計測されていないモニタリングシステム(火山監視など)に情報の位置特定という価値を付加できる。
【００３０】
（８）デジタル写真画像の情報は、すでに地図化され、表示されているのであるが、デジタルの写真上で対象物の同定を行う方が容易であることも多い。例えば、森林火災、雪の前線、溶岩流の到達範囲、噴火の場所など、デジタルの写真画像の中での方が認識が容易であるような場合には、デジタルの写真画像をコンピュータの表示部に表示し、そのデジタルの写真画像上で指定した点に対応する地図上の座標と標高を即座に表示することができ、デジタルの写真画像上での同定結果がそのまま地図上に記録できることになり、位置や範囲の把握が飛躍的に容易になる。逆に、地図上で指定した点を対応するデジタルの写真画像上で表示するようにしてもよい。
【発明を実施するための最良の形態】
【００３１】
本発明を実施するための装置は、一般的に使用されている民生用カメラ、衛星を利用して位置を計測する装置（ＧＰＳなど）、カメラの姿勢と方位を含む３軸を計測できる装置（電子コンパス）及びノート型パーソナルコンピュータからなる。
【００３２】
本発明を実施するための地図作成方法は、カメラの位置と姿勢と数値地形図を用いてコンピュータ風景画像を得る工程と、カメラにより撮影された写真画像とコンピュータ風景画像を重ね合わせる工程と、重ね合わせた写真画像に逆投影することにより地図を作成する工程からなる。
【００３３】
本発明は、撮像装置による写真画像としてビデオ画像を利用することによりリアルタイムに動く地図に関するものである。
【００３４】
本発明は、コンピュータに、地図作成手段として機能させるコンピュータプログラムに関するものである。
【００３５】
本発明は、いずれかの工程を、撮影位置から離れた位置に通信する工程を含み、その他の工程を、離れた位置で行うことを特徴とする生データ又は完成されたデータを転送する工程を含む地図作成方法に関するものである。
【実施例１】
【００３６】
以下、本発明の具体的実施例を図面に基づき説明する。
図１において、本発明による画像処理による地図作成装置は、写真画像３０を撮影する撮像装置１０、衛星を使用して撮像装置１０の設置位置（緯度、経度、高度）を計測するＧＰＳなどの位置計測装置１１、撮像装置１０の姿勢と方位を含む３軸（方位（ヨー）角、ロール角、ピッチ角）を計測する電子コンパス１２、地形標高データが格子状毎（例えば、５０ｍ×５０ｍ、１０ｍ×１０ｍなど）に数値化されている数値地図データベース１３、携帯に便利なノート型パソコンなどのパソコン１５、ＬＵＴからなるメモリ４０、これら撮像装置１０，位置計測装置１１、電子コンパス１２、数値地図データベース１３、メモリ４０をパソコン１５に接続するＵＳＢハブ１４からなる。
また、前記撮像装置１０は、固定した写真画像や動画を撮像するデジタルカメラ１６からなるが、フィルムカメラ１７からなる場合にはスキャナ１８にてデジタル信号に変換したものであっても良い。前記パソコン１５は、インタフェース２０、入力部２１、表示部２２を含むものとする。
【００３７】
前記パソコン１５は、さらに詳しくは、図２に示すように、コンピュータ画像形成部２３、重ね合わせ部２４、逆投影・地図作成部２５、コンピュータ画像の特徴抽出部２６、写真画像の特徴抽出部２７、幾何補正・重ね合わせ部２８、写真画像へ入力端子２１ａから入力するための付加手段４１、地図画像へ入力端子２１ｂから入力するための付加手段４２を含んで構成されている。
また、前記メモリ４０には、数値地図データベース１３に基づき、位置計測装置１１と電子コンパス１２で計測された撮像装置１０の設置位置、姿勢、方位に対応したコンピュータ画像に変換されたデータがＬＵＴとして形成されて記憶されている。
【００３８】
本発明による画像処理による地図作成方法の工程を以下に説明する。
工程１
本発明の画像処理による地図作成方法は、図１に示すように、一般的な民生用カメラからなる撮像装置１０、衛星を利用して位置を計測するＧＰＳなどの位置計測装置１１、カメラの姿勢と方位を含む３軸を計測できる電子コンパス１２、地形標高データが格子状に数値化されている数値地図データベース１３、ノート型パーソナルコンピュータなどのパソコン１５が用いられる。
前記撮像装置１０、位置計測装置１１、電子コンパス１２、数値地図データベース１３は、パソコン１５により制御され、撮像装置１０による撮影と同時に、そのときの撮像装置１０の焦点距離、画素数などの撮影パラメータ及び撮影位置と方位を含む姿勢を制御できるような仕組みとなっている。前記撮像装置１０の焦点距離、画素数などの撮影パラメータは、表示部２２で表示するコンピュータ画像３３の見た目の大きさである画角が決定される。
それぞれの機器は、詳細に時刻同期がなされている。固定カメラとして機能する場合は、カメラ１０の位置は不変となるので、位置計測装置１１は、計測の後、取り外すか、又は他の方法によって位置を計測しておいてもよい。
【００３９】
工程２
工程１によって作成された画像処理による地図作成装置の撮像装置１０により撮影を行い、図３に示す写真画像３０を撮像する。この写真画像３０には、火山２９、溶岩流３１、溶岩流先端部３２などが撮影されているものとする。
この撮像装置１０は、撮影した写真画像のデジタル信号を出力すると同時に、撮像装置１０の画素数、焦点距離などの撮影パラメータをデジタル信号で出力する。また、位置計測装置１１からは、撮像装置１０の緯度、経度、高度のデジタルデータ信号を出力し、電子コンパス１２からは、方位角（ヨー角）、ロール角、ピッチ角のデジタルデータ信号を出力し、撮像装置１０の位置、方位を含む撮影の情報を得る。この位置計測装置１１と電子コンパス１２の情報が得られるので、対象物の撮影は、地上、低空、斜め上空などのいかなる場所からの撮影においても対応できる。特に、地上から撮影された画像が最大限に利用可能である。
なお、前記撮像装置１０による写真画像３０の情報だけでは、溶岩流３１がどこを流れ、溶岩流先端部３２がどこまで達しているかなどを詳細に確認することができないが、本発明では、この写真画像３０に基づく以下の工程によって詳細な確認を可能としている。
【００４０】
工程３
撮像装置１０による写真画像と同時に位置計測装置１１，電子コンパス１２により求められた撮像装置１０の撮影パラメータ、位置、方位を含む姿勢の情報をアドレスとして用い、コンピュータ画像形成部２３にて既知の数値地図データベース１３より図６に示すような該当するコンピュータ画像３３を得る。
さらに詳しくは、図５（ａ）に示すような格子状毎に数値化されている数値地図データにおいて、Ｐ点に設置された撮像装置１０の水平視野角δ、光軸Ｏの方位角αとすると、この範囲内の数値地図データに基づきコンピュータ画像形成部２３にて図６に示すようなコンピュータ画像３３が形成される。このとき、、図５（ｂ）において、Ｐ点の高度（Ｈｘ）により、上下視野角η内でＱ１−Ｑ２間、Ｑ３−Ｑ４間のデータ（図５（ａ）の斜線箇所）だけがコンピュータ画像３３に表示される。すなわち、Ｑ３より後方でＰ−Ｑ３を結ぶ線の下側に隠れる箇所Ｑ２−Ｑ３、Ｑ１より後方でＰ−Ｑ１を結ぶ線の下側に隠れる箇所は、コンピュータ画像３３には現れない。このような処理が撮像装置１０の水平視野角δ及び上下視野角η内のすべての数値地図データに基づきコンピュータ画像形成部２３にて図６に示すようなコンピュータ画像３３が形成される。
従って、コンピュータ風景画像３３は、Ｐ点に設置された撮像装置１０の緯度、経度、高度、方位角、姿勢によって変化する。
Ｐ点のコンピュータ画像３３は、撮像装置１０がＰ点に固定的に設置されている場合、その位置Ｐ点において電子コンパス１２の方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴを作成しておき、その中から該当するコンピュータ画像３３を選択すれば、より迅速にコンピュータ画像３３が形成される。
【００４１】
工程４
図２の重ね合わせ部２４により、撮像装置１０の写真画像３０を数値地図データベース１３に基づくコンピュータ画像３３に重ね合わせる。この重ね合わせは、コンピュータ画像３３が写真画像３０の位置データ等で得られたものであるから、両者は、本来一致しているので、単純に重ね合わせれば良い。
【００４２】
工程５
重ね合わせ後、逆投影・地図作成部２５にて重ね合わせた画像４３に逆投影して図７に示すような目的の地図画像４３を得る。ここで、逆投影とは、コンピュータ画像３３から位置情報を写真画像３０又は重ね合わせた画像に与えて地図を作成することをいう。そのため、この工程で、位置情報を持った地図画像４３が得られる。
【００４３】
工程６
図８は、地上から撮影された図３に示す写真画像３０を、座標変換式を用いて真上から見た正射投影画像３６に変換して、数値地図データベース１３により作成した平面地図３８に付加したものである。ここで、代表的な座標変換式としては、ヘルマート変換、アフィン変換が知られており、写真画像と数値地形図の間に成り立つ座標変換式(幾何学的関係を示す式である)を得、この座標変換を地上、低空、斜め上空などから撮影された撮影対象の写真画像全体に移動、回転、縮小、縮尺変換などの幾何補正を施すものである。
この図８によれば、図３の写真画像３０では分からない火山２９の火口から溶岩流先端部３２までの溶岩流３１の水平距離Ｔ（図４における水平距離Ｔ）を知ることができるだけでなく、実際の距離も知ることができる。
【００４４】
工程７
図９は、地上から撮影された図３に示す写真画像３０を、前記座標変換式を用いて地上からの撮影とは異なる方向、例えば、俯角δ方向から撮影された鳥かん画像３７に変換して、数値地図データベース１３により作成した俯角δ方向の鳥かん地図３９に付加したものである。この図９によれば、図３の写真画像３０では分からない火山２９の火口から溶岩流先端部３２までの溶岩流３１の傾斜距離Ｕ（図４における傾斜距離Ｕ）を知ることができるだけでなく、実際の距離も知ることができる。
【００４５】
工程８
最近の前記撮像装置１０、位置計測装置１１、電子コンパス１２は、その精度に優れ、補正を必要とすることはほとんど必要としない。しかし、使用目的によっては、拡大写真としたため、写真画像３０とコンピュータ画像３３に不一致が生じ、より高精度の地図を必要とする場合がある。このような場合には、特徴点や特徴線を用いてより精密に重ね合わせて地図作成することができる。特徴点として撮影対象物の特徴的な形状(角、頂点、工作物等)や、特徴線として撮影対象物の輪郭を示すスカイライン、稜線、河川、線状の工作物などを抽出する。さらに詳しくは、コンピュータ画像形成部２３にて作成されたコンピュータ画像３３については特徴抽出部２６にて、また、撮像装置１０にて作成された写真画像３０については特徴抽出部２７にて、それぞれ図１１に示すように、例えばスカイライン３５を抽出する。そして、写真画像３０とコンピュータ画像３３の精密マッチングを行う。
この工程８で、もし、図１０に示すように、写真画像３０のスカイライン画像３４ａとコンピュータ画像３３のスカイライン画像３４ｂがマッチングしていなければ、幾何補正・重ね合わせ部２８にて、写真画像と数値地形図の間に成り立つ座標変換式(幾何学的関係を示す式である)を得、この座標変換を地上、低空、斜め上空などから撮影された撮影対象の写真画像全体に移動、回転、縮小、縮尺変換などの幾何補正を施す。
この工程８で得られる移動量及び回転・縮小・縮尺変換を行う座標変換は、写真画像と数値地形図の地図座標系との間の座標変換式（ヘルマート変換、アフィン変換など）を与える。
この工程８において、カメラの画素数、焦点距離などの撮影パラメータ、位置、方位を含む姿勢は、位置計測装置１１、電子コンパス１２より得られているので、これらの値を精密マッチングの初期値として利用しマッチングの検索範囲を絞る。
最近の前記撮像装置１０、位置計測装置１１、電子コンパス１２は、その精度に優れていることにより、補正は、限られたわずかな量だけであり補正のための演算は、短時間で済む。
このことにより、マッチングの自動化、処理時間の短縮、高精度化ができる。
【００４６】
工程９
工程８で精密マッチングした後、工程６に示す正射投影画像３６に変換して図８に示す平面地図３８に作成し、または、工程７に示す鳥かん画像３７に変換して図９に示す鳥かん地図３９に作成すれば、より精密な地図を作成することができる。
【００４７】
工程１０
工程１から工程９において、デジタルカメラの代わりにビデオカメラ又はコマ送り画像を撮影し、リアルタイムで地図投影し、撮影対象の動きや変化が地図上で動画として見えるようにする。
例えば、カメラは定点に設置し、溶岩流３１の先端部３２が刻々と変化する動画として表示する。
具体的には、メモリとしてのＬＵＴ４０が用いられる。このＬＵＴ４０には、次のようなデータが記憶されている。
（１）撮像装置１０がＰ点に固定的に設置されている場合、このＰ点の位置はそのままで、その位置Ｐ点において電子コンパス１２の方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴを作成しておく。
（２）撮像装置１０をこれから設置しようとする位置及び高度が複数点ある場合には、複数点毎に方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴ４０を作成しておく。
このようなＬＵＴ４０のコンピュータ画像３３を利用し、このコンピュータ画像３３にビデオカメラ又はコマ送り画像を重ね合わせることにより、固定した風景画における溶岩流３１等のミリ秒単位で変化する動画として表示することができる。また、変化する動画から溶岩流３１等の進行速度や進行方向なども知ることができる。
また、ＬＵＴ４０のコンピュータ画像３３も刻々と取り込んで動画とし、このコンピュータ画像３３にビデオカメラ又はコマ送り画像を重ね合わせることにより、風景画像の首振り状態での溶岩流３１等の変化する動画として表示することができる。
また、溶岩流３１等の変化のみならず、サーモグラフィーや赤外線カメラなども利用して、夜間の温度変化等の変化する動画として表示することができる。また、変化する動画から溶岩流３１等の進行速度や進行方向なども知ることができる。
【００４８】
工程１１
パーソナルコンピュータに携帯電話などの通信機器を接続し、任意の場所でデータを処理する。本発明の画像をインターネット上でリアルタイムに配信することが可能である。
このようにすれば、危険箇所などに設置したカメラのデータを安全な場所で演算処理し、全世界に発信することができる。
【００４９】
工程１２
図３に示したデジタル写真画像の情報は、すでに地図化され、図８又は図９に示すように表示されているのであるが、図８又は図９に示す地図よりも図３に示すデジタルの写真上で対象物の同定を行う方が容易であることも多い。
例えば、森林火災、雪の前線、溶岩流の到達範囲、噴火の場所など、デジタルの写真画像の中での認識が図８又は図９に示す地図よりも容易であるような場合には、図２に示すように、デジタルの写真画像３０と図８（又は図９）に示す地図３６（又は３７）をコンピュータの表示部２２に表示し、そのデジタルの写真画像３０の上で指定した点に対応する図８（又は図９）の地図３６（又は３７）上の座標と標高を即座に表示することができ、また、デジタルの写真画像３０上で雪の前線４４を入力端子２１ａから付加手段４１に付加すると、図８（又は図９）の地図３６（又は３７）上の対応する位置に雪の前線４４が表示される。逆に、図８（又は図９）の地図３６（又は３７）上で雪の前線４４を入力端子２１ｂから付加手段４２に付加すると、デジタルの写真画像３０上の対応する位置に雪の前線４４が表示される。このように、デジタル写真画像３０（又は図８（又は図９）の地図３６（又は３７））上の同定結果がそのまま図８（又は図９）の地図３６（又は３７）（又はデジタル写真画像３０）の上に記録できることになり、位置や範囲の把握が飛躍的に容易になる。
【図面の簡単な説明】
【００５０】
【図１】本発明による画像処理による地図作成装置の一実施例を示すブロック図である。
【図２】図１におけるパソコン１５の詳細なブロック図である。
【図３】本発明による画像処理による地図作成装置の撮像装置１０で撮影した写真画像３０の説明図である。
【図４】図３の鉛直面図である。
【図５】（ａ）は、数値地図データベースに基づく平面図に撮像装置１０を設置して方位角αの方向を観察している状態の説明図、（ｂ）は、（ａ）の鉛直面図である。
【図６】数値地図データベース１３と位置計測装置１１，電子コンパス１２に基づくコンピュータ画像３３の説明図である。
【図７】重ね合わせ地図画像４３の説明図である。
【図８】写真画像３０を、座標変換式を用いて真上から見た正射投影画像３６に変換して、数値地図データベース１３により作成した平面地図３８に付加した説明図である。
【図９】写真画像３０を、座標変換式を用いて俯角δ方向から撮影された鳥かん画像３７に変換して、数値地図データベース１３により作成した俯角δ方向の鳥かん地図３９に付加した説明図である。
【図１０】写真画像３０とコンピュータ画像３３を重ね合わせたときの特徴線であるスカイライン３５ａとスカイライン３５ｂの説明図である。
【図１１】写真画像３０又はコンピュータ画像３３の特徴線であるスカイライン３５の説明図である。
【図１２】画像マッチングの説明図である。
【図１３】従来の地図作成方法における方位角の説明図である。
【図１４】図１３における鉛直面図である。
【符号の説明】
【００５１】
１０…撮像装置、１１…位置計測装置、１２…電子コンパス、１３…数値地図データベース、１４…ＵＳＢハブ、１５…パソコン、１６…デジタルカメラ、１７…フィルムカメラ、１８…スキャナ、１９…ＣＰＵ、２０…インタフェース、２１…入力部、２２…表示部、２３…コンピュータ画像形成部、２４…重ね合わせ部、２５…逆投影・地図作成部、２６…特徴抽出部、２７…特徴抽出部、２８…幾何補正・重ね合わせ部、２９…火山、３０…写真画像、３１…溶岩流、３２…溶岩流先端部、３３…コンピュータ画像、３４…スカイライン画像、３５…スカイライン、３６…正射投影画像、３７…鳥かん画像、３８…平面地図、３９…鳥かん地図、４０…メモリ（ＬＵＴ）、４１…付加手段、４２…付加手段、４３…重ね合わせ画像、４４…雪の前線。
【技術分野】
【０００１】
本発明は、民生用品を使用して災害監視などに利用される地図（位置情報を有する画像）を低価格、かつ、高性能で作成することのできる画像処理による地図作成方法、その装置及びそのコンピュータプログラムに関するものである。
【背景技術】
【０００２】
従来、火山噴火、雪崩、斜面崩壊、山火事、河川氾濫、津波などの災害が発生した場合の他、植生分布の変化を調査したい場合などには、飛行機、ヘリコプター、人工衛星などによって高度のある上空から特殊な専用の計測装置により撮影された写真画像を用いて災害状況などを示す画像の地図化がなされてきた。
しかし、緊急を要する場合には、人工衛星では地球を一周する周期が長くて間に合わず、たとえ、利用できたとしても高額な費用がかかる。飛行機やヘリコプターでは、天候によっては飛ばせなかったり、飛ばすのに許可を必要としたりするだけでなく、計測には多大な費用がかかり、緊急の場合には不向きである。
また、写真画像を用いて位置情報を有する地図画像に変換するには、地上に地図座標の既知点であるいわゆる基準点を設置しなければならず、緊急時に山岳地域に基準点を設置することは容易でなかった。スカイラインなどの輪郭を示す特徴線を利用した方法もあるが、雨、雲、霧、噴煙などが発生したときにはスカイラインを捉えられないなどの地図画像の取得方法に制限があり、また、写真画像の処理にも時間がかかるために、緊急な事態に対応する迅速な計測に難点があった。
【０００３】
一方、地上から一般的な写真を撮影する方法は、撮影が容易で観察に便利なこともあり、広く利用されているが、これらはあくまで風景写真であるため、現象の概略は分かっても、その位置を即座に求めることができない。リアルタイムでの観測には、ビデオ映像や定点カメラが多くの現場で利用されているが、計測という観点からは不十分である。
例えば、噴煙の場所、火砕流や溶岩流の流下位置（一体標高何ｍまで降りてきたのか）、面積、方向、速度などは写真画像では分からない。さらに、これらの地上から撮影された写真を地図上の正確な位置に変換するには、撮影された写真画像内に最低３点の基準点を必要とするとともに、特殊な専用の装置を必要とするステレオ写真の撮影が不可欠である、という問題点があった。
【０００４】
このような状況にあって、特殊な専用の装置を必要とせず、低価格かつ簡便で即時性のある計測装置と地図作成方法が望まれていた。特に、災害などの緊急を要する事態においては、航空機の利用が困難であり、また、長時間連続した計測を必要とする場合の有効、低価格、簡便性、即時性のある計測装置と地図作成方法が強く望まれていた。
【０００５】
そこで、本発明者等は、図１３及び図１４に示すような市販のデジタルカメラと、カメラの撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力するＧＰＳと、地形標高データベースと、パソコンとを具備し、前記ＧＰＳの緯度、経度、高度に基づき、パソコンにてカメラの方位角と上下角を演算し、これらにより山岳の透視画像（コンピュータ画像）を作成し、この透視画像とカメラの写真画像とを重ね合わせて幾何補正した地図を作成する地図の作成方法をすでに提案している（特許文献１）。
【特許文献１】特開２００３−１３９５３２号公報。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載された発明は、特殊な専用の装置を必要とせず、低価格かつ簡便で即時性のある地図作成ができ、災害などの緊急を要する事態において、航空機の利用が困難であり、また、長時間連続した計測が必要な場合の有効、低価格、簡便性、即時性のある地図作成が可能である。
さらに詳しくは、図１３及び図１４において、デジタルカメラなどの撮像装置１０の設置点をＰ、被写体である火山２９をＱ、これらの水平距離をＤ、水平ラインをＬ、撮像装置１０の光軸をＯ、撮像装置１０の焦点をＦ、焦点距離をｆ、方位角をα、火山２９の俯角をθ、撮像装置１０の上下角をβ、焦点Ｆから光軸Ｏまでの距離をｍ、γ＝θ−βとすれば、α、β、γが演算処理で求められる。
また、回転、縮小、縮尺変換も座標変換により求められる。
【０００７】
しかし、この方法では、被写体である火山２９の点Ｑの位置を、予め調査し、かつ、ＧＰＳの緯度、経度、高度に基づき、パソコンにてカメラの方位角と上下角を演算して求めておかなければならないので、パソコンによる演算に時間がかかり、即時性にやや問題があるだけでなく、演算され方位角と上下角の精度にも問題があるという問題があった。
本発明の第１の目的は、本発明装置によって得られた写真画像データ、特に従来困難であった地上からの写真画像データに基づき、簡便で即時性のある地図を作成する方法を提供することである。
本発明の第２の目的は、画像撮影と同時に、カメラの位置と姿勢を計測する簡便な装置を提供することである。
本発明の第３の目的は、本発明装置によって得られたデータから、リアルタイムで地図投影済みのビデオ又はコマ送り画像を、撮影対象の動きや変化が地球上で動画として見える地図を作成する方法を提供することである。
本発明の第４の目的は、本発明装置によって得られたデータから、デジタルの写真画像におけるすべての点の地図座標と、標高、対応する数値地形図上の位置が分かっているので、デジタルの写真の任意の位置、直線、曲線をリアルタイムで地図に投影する地図を作成する方法を提供することである。
【課題を解決するための手段】
【０００８】
本発明は、一般的に市販されている民生用カメラ、衛星を利用して位置を計測する装置（ＧＰＳなど）、カメラの姿勢と方位を含む３軸を計測できる装置（電子コンパス）及びノート型パーソナルコンピュータが、近年の技術進歩により携帯性に優れ、高性能かつ安価で容易に入手可能であることに着目し、さらに地形標高データが格子状に数値化されている数値地図データが一般的に市販され容易に入手可能であることに着目し、写真画像とカメラの位置と姿勢が同時に取得できる装置により撮影された撮影対象の写真画像と同じ方向を見た数値地図データから作成されたコンピュータ画像を重ね合わせ、かつ、コンピュータ画像から位置情報を写真画像に与えるという逆投影をし、写真画像に対応する地図を得ることができる。近年の機器の精度の向上で重ね合わせによるずれはほとんど発生しない。しかし、目的によっては、拡大写真など更に高い精度を要する場合には、必要に応じて特徴点や特徴線を用いてより精密に重ね合わせ、地図に逆投影することにより、写真画像に対応するより精確な地図を得ることができる。このずれは少ないので、幾何補正したとしても短時間で処理できる。また、ビデオ又はコマ送り画像を利用することも可能になり、従来の課題が解決でき、本発明を達成されることを見出した。
【０００９】
このことにより、すべての点の位置情報が即座に読み取れる風景画像の作成ができ、風景画像の任意の点を指すと、そこの経度、緯度が表示され、地図との位置関係が分かる。
本発明装置は、一般的に市販されている民生品を使用するために、従来の高価な専用機器を使うことなく対象物の計測が可能である。
本発明の地図作成方法は、基準点を設置しなくとも、また、どのような形状の地形に対しても可能であり、しかも、ノート型パーソナルコンピュータ等を用いてリアルタイムで処理することができる。パーソナルコンピュータに携帯電話などの通信機器を接続すれば、危険箇所にカメラを設置し、安全な任意の場所でデータを処理することが可能である。
【００１０】
本発明の画像をインターネット上で配信すれば、災害画像を世界中でリアルタイムに監視することが可能である。
本発明に使用される写真画像は、デジタルカメラの他に、フィルムを使った写真をスキャンしたものやサーモグラフィーなどから得られる画像も用いることができる。
ビデオ等を利用することにより、リアルタイムに動く地図を作成することが可能であり、サーモグラフィーを利用することにより夜間の監視にも利用できる。
本発明により、基準点を取得することのできない特徴の少ない地形、例えば、雲のかかった画像、ズームした画像、サーモグラフィー画像、スカイラインなどの特徴線を抽出することのできない画像などにおいても、画像を重ねあわせ、かつ、逆投影することにより、地図作成が可能である。
【発明の効果】
【００１１】
請求項１記載の画像処理による地図作成方法は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、このコンピュータ画像の上に前記写真画像を重ね合わせる工程と、この重ね合わせた写真画像に逆投影し地図を作成する工程とを含むことを特徴とする。
【００１２】
請求項２記載の画像処理による地図作成装置は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、このコンピュータ画像形成部２３により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる重ね合わせ部２４と、この重ね合わせ部２４により重ね合わせた写真画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする。
【００１３】
請求項３記載の画像処理による地図作成用コンピュータプログラムは、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、この手段により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる手段、この手段により重ね合わせた写真画像に逆投影し地図を作成する手段として機能させることを特徴とする。
【００１４】
請求項４記載の画像処理による地図作成方法は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する工程と、この特徴に基づき重ね合わせて幾何補正を行う工程と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する工程とを含むことを特徴とする。
【００１５】
請求項５記載の画像処理による地図作成装置は、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する特徴抽出部２６，２７と、この特徴に基づき重ね合わせて幾何補正を行う幾何補正・重ね合わせ部２８と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする。
【００１６】
請求項６記載の画像処理による地図作成用コンピュータプログラムは、撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する手段、この特徴に基づき重ね合わせて幾何補正を行う手段、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する手段として機能させることを特徴とする。
【００１７】
請求項７記載の画像処理による地図作成方法は、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する工程を具備したことを特徴とする。
【００１８】
請求項８記載の画像処理による地図作成装置は、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する付加手段を具備したことを特徴とする。
【００１９】
請求項９記載の画像処理による地図作成用コンピュータプログラムは、撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する手段として機能させるようにしたことを特徴とする。
【００２０】
請求項１０記載の請求項１，４又は７記載の画像処理による地図作成方法において、撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする。
【００２１】
請求項１１記載の請求項２，５又は８記載の画像処理による地図作成装置において、撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする。
【００２２】
請求項１２記載の請求項３，６又は９記載の画像処理による地図作成用コンピュータプログラムにおいて、撮像装置１０は、動画の可能な装置からなり、パソコン１５に、この動画により刻々と変化する画像を作成する手段として機能させるようにしたことを特徴とする。
【００２３】
本発明は、以上のように構成したので、以下の特有な作用効果を有する。
（１）民生用品を組み合わせることにより、低価格かつ高性能の画像処理による地図作成方法、その装置及びそのコンピュータプログラムを作ることができる。
【００２４】
（２）撮像装置１０から撮影された撮影対象の画像を現地で即座に地図化することができる。このことにより、災害の監視などに計測や測量の機能を付加することができ、実際の距離を知ることができる。
【００２５】
（３）従来、写真測量で必要とされた基準点や基準線を設置しなくても、撮像装置１０と撮影対象の位置関係が分かっているので数値地図から作られたコンピュータ画像と重ね合わせることにより、幾何補正なしでも精確に重ね合わせができ、写真画像の幾何補正を自動的に行うことができる。
【００２６】
（４）従来の方法では、スカイライン、建造物、地形の特徴点などの基準点が見えなければ幾何補正(写真測量では標定と呼ばれる)が不可能であったが、本発明では、特徴点や特徴線を抽出できなくても、重ね合わせが可能となる。
【００２７】
（５）撮像装置１０としてビデオカメラを利用することにより、リアルタイムで動く地図を作ることが可能である。災害などにおいて、刻々と変化する溶岩流、津波などの現況をリアルタイムで計測、監視できる。また、可視光線だけでなく、熱赤外線を用いたサーモグラフなどの電子イメージセンサによる写真画像が使用できる。サーモグラフを用いれば、昼夜間の熱映像を計測することが可能になる。さらに、赤外線カメラを用いれば、植生分布の変化を知ることもできる。
【００２８】
（６）本発明により得られる幾何補正済みの地図を経時的にインターネット上に表示することにより、リアルタイムで多くの人々に災害状況を伝達することが可能である。また、携帯電話を利用した画像の伝達も可能である。
【００２９】
（７）本発明は、固定カメラにも適用可能であり、数多く設置されていながら対象物や現象の位置が計測されていないモニタリングシステム(火山監視など)に情報の位置特定という価値を付加できる。
【００３０】
（８）デジタル写真画像の情報は、すでに地図化され、表示されているのであるが、デジタルの写真上で対象物の同定を行う方が容易であることも多い。例えば、森林火災、雪の前線、溶岩流の到達範囲、噴火の場所など、デジタルの写真画像の中での方が認識が容易であるような場合には、デジタルの写真画像をコンピュータの表示部に表示し、そのデジタルの写真画像上で指定した点に対応する地図上の座標と標高を即座に表示することができ、デジタルの写真画像上での同定結果がそのまま地図上に記録できることになり、位置や範囲の把握が飛躍的に容易になる。逆に、地図上で指定した点を対応するデジタルの写真画像上で表示するようにしてもよい。
【発明を実施するための最良の形態】
【００３１】
本発明を実施するための装置は、一般的に使用されている民生用カメラ、衛星を利用して位置を計測する装置（ＧＰＳなど）、カメラの姿勢と方位を含む３軸を計測できる装置（電子コンパス）及びノート型パーソナルコンピュータからなる。
【００３２】
本発明を実施するための地図作成方法は、カメラの位置と姿勢と数値地形図を用いてコンピュータ風景画像を得る工程と、カメラにより撮影された写真画像とコンピュータ風景画像を重ね合わせる工程と、重ね合わせた写真画像に逆投影することにより地図を作成する工程からなる。
【００３３】
本発明は、撮像装置による写真画像としてビデオ画像を利用することによりリアルタイムに動く地図に関するものである。
【００３４】
本発明は、コンピュータに、地図作成手段として機能させるコンピュータプログラムに関するものである。
【００３５】
本発明は、いずれかの工程を、撮影位置から離れた位置に通信する工程を含み、その他の工程を、離れた位置で行うことを特徴とする生データ又は完成されたデータを転送する工程を含む地図作成方法に関するものである。
【実施例１】
【００３６】
以下、本発明の具体的実施例を図面に基づき説明する。
図１において、本発明による画像処理による地図作成装置は、写真画像３０を撮影する撮像装置１０、衛星を使用して撮像装置１０の設置位置（緯度、経度、高度）を計測するＧＰＳなどの位置計測装置１１、撮像装置１０の姿勢と方位を含む３軸（方位（ヨー）角、ロール角、ピッチ角）を計測する電子コンパス１２、地形標高データが格子状毎（例えば、５０ｍ×５０ｍ、１０ｍ×１０ｍなど）に数値化されている数値地図データベース１３、携帯に便利なノート型パソコンなどのパソコン１５、ＬＵＴからなるメモリ４０、これら撮像装置１０，位置計測装置１１、電子コンパス１２、数値地図データベース１３、メモリ４０をパソコン１５に接続するＵＳＢハブ１４からなる。
また、前記撮像装置１０は、固定した写真画像や動画を撮像するデジタルカメラ１６からなるが、フィルムカメラ１７からなる場合にはスキャナ１８にてデジタル信号に変換したものであっても良い。前記パソコン１５は、インタフェース２０、入力部２１、表示部２２を含むものとする。
【００３７】
前記パソコン１５は、さらに詳しくは、図２に示すように、コンピュータ画像形成部２３、重ね合わせ部２４、逆投影・地図作成部２５、コンピュータ画像の特徴抽出部２６、写真画像の特徴抽出部２７、幾何補正・重ね合わせ部２８、写真画像へ入力端子２１ａから入力するための付加手段４１、地図画像へ入力端子２１ｂから入力するための付加手段４２を含んで構成されている。
また、前記メモリ４０には、数値地図データベース１３に基づき、位置計測装置１１と電子コンパス１２で計測された撮像装置１０の設置位置、姿勢、方位に対応したコンピュータ画像に変換されたデータがＬＵＴとして形成されて記憶されている。
【００３８】
本発明による画像処理による地図作成方法の工程を以下に説明する。
工程１
本発明の画像処理による地図作成方法は、図１に示すように、一般的な民生用カメラからなる撮像装置１０、衛星を利用して位置を計測するＧＰＳなどの位置計測装置１１、カメラの姿勢と方位を含む３軸を計測できる電子コンパス１２、地形標高データが格子状に数値化されている数値地図データベース１３、ノート型パーソナルコンピュータなどのパソコン１５が用いられる。
前記撮像装置１０、位置計測装置１１、電子コンパス１２、数値地図データベース１３は、パソコン１５により制御され、撮像装置１０による撮影と同時に、そのときの撮像装置１０の焦点距離、画素数などの撮影パラメータ及び撮影位置と方位を含む姿勢を制御できるような仕組みとなっている。前記撮像装置１０の焦点距離、画素数などの撮影パラメータは、表示部２２で表示するコンピュータ画像３３の見た目の大きさである画角が決定される。
それぞれの機器は、詳細に時刻同期がなされている。固定カメラとして機能する場合は、カメラ１０の位置は不変となるので、位置計測装置１１は、計測の後、取り外すか、又は他の方法によって位置を計測しておいてもよい。
【００３９】
工程２
工程１によって作成された画像処理による地図作成装置の撮像装置１０により撮影を行い、図３に示す写真画像３０を撮像する。この写真画像３０には、火山２９、溶岩流３１、溶岩流先端部３２などが撮影されているものとする。
この撮像装置１０は、撮影した写真画像のデジタル信号を出力すると同時に、撮像装置１０の画素数、焦点距離などの撮影パラメータをデジタル信号で出力する。また、位置計測装置１１からは、撮像装置１０の緯度、経度、高度のデジタルデータ信号を出力し、電子コンパス１２からは、方位角（ヨー角）、ロール角、ピッチ角のデジタルデータ信号を出力し、撮像装置１０の位置、方位を含む撮影の情報を得る。この位置計測装置１１と電子コンパス１２の情報が得られるので、対象物の撮影は、地上、低空、斜め上空などのいかなる場所からの撮影においても対応できる。特に、地上から撮影された画像が最大限に利用可能である。
なお、前記撮像装置１０による写真画像３０の情報だけでは、溶岩流３１がどこを流れ、溶岩流先端部３２がどこまで達しているかなどを詳細に確認することができないが、本発明では、この写真画像３０に基づく以下の工程によって詳細な確認を可能としている。
【００４０】
工程３
撮像装置１０による写真画像と同時に位置計測装置１１，電子コンパス１２により求められた撮像装置１０の撮影パラメータ、位置、方位を含む姿勢の情報をアドレスとして用い、コンピュータ画像形成部２３にて既知の数値地図データベース１３より図６に示すような該当するコンピュータ画像３３を得る。
さらに詳しくは、図５（ａ）に示すような格子状毎に数値化されている数値地図データにおいて、Ｐ点に設置された撮像装置１０の水平視野角δ、光軸Ｏの方位角αとすると、この範囲内の数値地図データに基づきコンピュータ画像形成部２３にて図６に示すようなコンピュータ画像３３が形成される。このとき、、図５（ｂ）において、Ｐ点の高度（Ｈｘ）により、上下視野角η内でＱ１−Ｑ２間、Ｑ３−Ｑ４間のデータ（図５（ａ）の斜線箇所）だけがコンピュータ画像３３に表示される。すなわち、Ｑ３より後方でＰ−Ｑ３を結ぶ線の下側に隠れる箇所Ｑ２−Ｑ３、Ｑ１より後方でＰ−Ｑ１を結ぶ線の下側に隠れる箇所は、コンピュータ画像３３には現れない。このような処理が撮像装置１０の水平視野角δ及び上下視野角η内のすべての数値地図データに基づきコンピュータ画像形成部２３にて図６に示すようなコンピュータ画像３３が形成される。
従って、コンピュータ風景画像３３は、Ｐ点に設置された撮像装置１０の緯度、経度、高度、方位角、姿勢によって変化する。
Ｐ点のコンピュータ画像３３は、撮像装置１０がＰ点に固定的に設置されている場合、その位置Ｐ点において電子コンパス１２の方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴを作成しておき、その中から該当するコンピュータ画像３３を選択すれば、より迅速にコンピュータ画像３３が形成される。
【００４１】
工程４
図２の重ね合わせ部２４により、撮像装置１０の写真画像３０を数値地図データベース１３に基づくコンピュータ画像３３に重ね合わせる。この重ね合わせは、コンピュータ画像３３が写真画像３０の位置データ等で得られたものであるから、両者は、本来一致しているので、単純に重ね合わせれば良い。
【００４２】
工程５
重ね合わせ後、逆投影・地図作成部２５にて重ね合わせた画像４３に逆投影して図７に示すような目的の地図画像４３を得る。ここで、逆投影とは、コンピュータ画像３３から位置情報を写真画像３０又は重ね合わせた画像に与えて地図を作成することをいう。そのため、この工程で、位置情報を持った地図画像４３が得られる。
【００４３】
工程６
図８は、地上から撮影された図３に示す写真画像３０を、座標変換式を用いて真上から見た正射投影画像３６に変換して、数値地図データベース１３により作成した平面地図３８に付加したものである。ここで、代表的な座標変換式としては、ヘルマート変換、アフィン変換が知られており、写真画像と数値地形図の間に成り立つ座標変換式(幾何学的関係を示す式である)を得、この座標変換を地上、低空、斜め上空などから撮影された撮影対象の写真画像全体に移動、回転、縮小、縮尺変換などの幾何補正を施すものである。
この図８によれば、図３の写真画像３０では分からない火山２９の火口から溶岩流先端部３２までの溶岩流３１の水平距離Ｔ（図４における水平距離Ｔ）を知ることができるだけでなく、実際の距離も知ることができる。
【００４４】
工程７
図９は、地上から撮影された図３に示す写真画像３０を、前記座標変換式を用いて地上からの撮影とは異なる方向、例えば、俯角δ方向から撮影された鳥かん画像３７に変換して、数値地図データベース１３により作成した俯角δ方向の鳥かん地図３９に付加したものである。この図９によれば、図３の写真画像３０では分からない火山２９の火口から溶岩流先端部３２までの溶岩流３１の傾斜距離Ｕ（図４における傾斜距離Ｕ）を知ることができるだけでなく、実際の距離も知ることができる。
【００４５】
工程８
最近の前記撮像装置１０、位置計測装置１１、電子コンパス１２は、その精度に優れ、補正を必要とすることはほとんど必要としない。しかし、使用目的によっては、拡大写真としたため、写真画像３０とコンピュータ画像３３に不一致が生じ、より高精度の地図を必要とする場合がある。このような場合には、特徴点や特徴線を用いてより精密に重ね合わせて地図作成することができる。特徴点として撮影対象物の特徴的な形状(角、頂点、工作物等)や、特徴線として撮影対象物の輪郭を示すスカイライン、稜線、河川、線状の工作物などを抽出する。さらに詳しくは、コンピュータ画像形成部２３にて作成されたコンピュータ画像３３については特徴抽出部２６にて、また、撮像装置１０にて作成された写真画像３０については特徴抽出部２７にて、それぞれ図１１に示すように、例えばスカイライン３５を抽出する。そして、写真画像３０とコンピュータ画像３３の精密マッチングを行う。
この工程８で、もし、図１０に示すように、写真画像３０のスカイライン画像３４ａとコンピュータ画像３３のスカイライン画像３４ｂがマッチングしていなければ、幾何補正・重ね合わせ部２８にて、写真画像と数値地形図の間に成り立つ座標変換式(幾何学的関係を示す式である)を得、この座標変換を地上、低空、斜め上空などから撮影された撮影対象の写真画像全体に移動、回転、縮小、縮尺変換などの幾何補正を施す。
この工程８で得られる移動量及び回転・縮小・縮尺変換を行う座標変換は、写真画像と数値地形図の地図座標系との間の座標変換式（ヘルマート変換、アフィン変換など）を与える。
この工程８において、カメラの画素数、焦点距離などの撮影パラメータ、位置、方位を含む姿勢は、位置計測装置１１、電子コンパス１２より得られているので、これらの値を精密マッチングの初期値として利用しマッチングの検索範囲を絞る。
最近の前記撮像装置１０、位置計測装置１１、電子コンパス１２は、その精度に優れていることにより、補正は、限られたわずかな量だけであり補正のための演算は、短時間で済む。
このことにより、マッチングの自動化、処理時間の短縮、高精度化ができる。
【００４６】
工程９
工程８で精密マッチングした後、工程６に示す正射投影画像３６に変換して図８に示す平面地図３８に作成し、または、工程７に示す鳥かん画像３７に変換して図９に示す鳥かん地図３９に作成すれば、より精密な地図を作成することができる。
【００４７】
工程１０
工程１から工程９において、デジタルカメラの代わりにビデオカメラ又はコマ送り画像を撮影し、リアルタイムで地図投影し、撮影対象の動きや変化が地図上で動画として見えるようにする。
例えば、カメラは定点に設置し、溶岩流３１の先端部３２が刻々と変化する動画として表示する。
具体的には、メモリとしてのＬＵＴ４０が用いられる。このＬＵＴ４０には、次のようなデータが記憶されている。
（１）撮像装置１０がＰ点に固定的に設置されている場合、このＰ点の位置はそのままで、その位置Ｐ点において電子コンパス１２の方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴを作成しておく。
（２）撮像装置１０をこれから設置しようとする位置及び高度が複数点ある場合には、複数点毎に方位角（ヨー角）、ロール角、ピッチ角をあらゆる角度に変化した状態のコンピュータ画像３３を記憶したＬＵＴ４０を作成しておく。
このようなＬＵＴ４０のコンピュータ画像３３を利用し、このコンピュータ画像３３にビデオカメラ又はコマ送り画像を重ね合わせることにより、固定した風景画における溶岩流３１等のミリ秒単位で変化する動画として表示することができる。また、変化する動画から溶岩流３１等の進行速度や進行方向なども知ることができる。
また、ＬＵＴ４０のコンピュータ画像３３も刻々と取り込んで動画とし、このコンピュータ画像３３にビデオカメラ又はコマ送り画像を重ね合わせることにより、風景画像の首振り状態での溶岩流３１等の変化する動画として表示することができる。
また、溶岩流３１等の変化のみならず、サーモグラフィーや赤外線カメラなども利用して、夜間の温度変化等の変化する動画として表示することができる。また、変化する動画から溶岩流３１等の進行速度や進行方向なども知ることができる。
【００４８】
工程１１
パーソナルコンピュータに携帯電話などの通信機器を接続し、任意の場所でデータを処理する。本発明の画像をインターネット上でリアルタイムに配信することが可能である。
このようにすれば、危険箇所などに設置したカメラのデータを安全な場所で演算処理し、全世界に発信することができる。
【００４９】
工程１２
図３に示したデジタル写真画像の情報は、すでに地図化され、図８又は図９に示すように表示されているのであるが、図８又は図９に示す地図よりも図３に示すデジタルの写真上で対象物の同定を行う方が容易であることも多い。
例えば、森林火災、雪の前線、溶岩流の到達範囲、噴火の場所など、デジタルの写真画像の中での認識が図８又は図９に示す地図よりも容易であるような場合には、図２に示すように、デジタルの写真画像３０と図８（又は図９）に示す地図３６（又は３７）をコンピュータの表示部２２に表示し、そのデジタルの写真画像３０の上で指定した点に対応する図８（又は図９）の地図３６（又は３７）上の座標と標高を即座に表示することができ、また、デジタルの写真画像３０上で雪の前線４４を入力端子２１ａから付加手段４１に付加すると、図８（又は図９）の地図３６（又は３７）上の対応する位置に雪の前線４４が表示される。逆に、図８（又は図９）の地図３６（又は３７）上で雪の前線４４を入力端子２１ｂから付加手段４２に付加すると、デジタルの写真画像３０上の対応する位置に雪の前線４４が表示される。このように、デジタル写真画像３０（又は図８（又は図９）の地図３６（又は３７））上の同定結果がそのまま図８（又は図９）の地図３６（又は３７）（又はデジタル写真画像３０）の上に記録できることになり、位置や範囲の把握が飛躍的に容易になる。
【図面の簡単な説明】
【００５０】
【図１】本発明による画像処理による地図作成装置の一実施例を示すブロック図である。
【図２】図１におけるパソコン１５の詳細なブロック図である。
【図３】本発明による画像処理による地図作成装置の撮像装置１０で撮影した写真画像３０の説明図である。
【図４】図３の鉛直面図である。
【図５】（ａ）は、数値地図データベースに基づく平面図に撮像装置１０を設置して方位角αの方向を観察している状態の説明図、（ｂ）は、（ａ）の鉛直面図である。
【図６】数値地図データベース１３と位置計測装置１１，電子コンパス１２に基づくコンピュータ画像３３の説明図である。
【図７】重ね合わせ地図画像４３の説明図である。
【図８】写真画像３０を、座標変換式を用いて真上から見た正射投影画像３６に変換して、数値地図データベース１３により作成した平面地図３８に付加した説明図である。
【図９】写真画像３０を、座標変換式を用いて俯角δ方向から撮影された鳥かん画像３７に変換して、数値地図データベース１３により作成した俯角δ方向の鳥かん地図３９に付加した説明図である。
【図１０】写真画像３０とコンピュータ画像３３を重ね合わせたときの特徴線であるスカイライン３５ａとスカイライン３５ｂの説明図である。
【図１１】写真画像３０又はコンピュータ画像３３の特徴線であるスカイライン３５の説明図である。
【図１２】画像マッチングの説明図である。
【図１３】従来の地図作成方法における方位角の説明図である。
【図１４】図１３における鉛直面図である。
【符号の説明】
【００５１】
１０…撮像装置、１１…位置計測装置、１２…電子コンパス、１３…数値地図データベース、１４…ＵＳＢハブ、１５…パソコン、１６…デジタルカメラ、１７…フィルムカメラ、１８…スキャナ、１９…ＣＰＵ、２０…インタフェース、２１…入力部、２２…表示部、２３…コンピュータ画像形成部、２４…重ね合わせ部、２５…逆投影・地図作成部、２６…特徴抽出部、２７…特徴抽出部、２８…幾何補正・重ね合わせ部、２９…火山、３０…写真画像、３１…溶岩流、３２…溶岩流先端部、３３…コンピュータ画像、３４…スカイライン画像、３５…スカイライン、３６…正射投影画像、３７…鳥かん画像、３８…平面地図、３９…鳥かん地図、４０…メモリ（ＬＵＴ）、４１…付加手段、４２…付加手段、４３…重ね合わせ画像、４４…雪の前線。
【特許請求の範囲】
【請求項１】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、このコンピュータ画像の上に前記写真画像を重ね合わせる工程と、この重ね合わせた写真画像に逆投影し地図を作成する工程とを含むことを特徴とする画像処理による地図作成方法。
【請求項２】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、このコンピュータ画像形成部２３により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる重ね合わせ部２４と、この重ね合わせ部２４により重ね合わせた写真画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする画像処理による地図作成装置。
【請求項３】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、この手段により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる手段、この手段により重ね合わせた写真画像に逆投影し地図を作成する手段として機能させるための画像処理による地図作成用コンピュータプログラム。
【請求項４】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する工程と、この特徴に基づき重ね合わせて幾何補正を行う工程と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する工程とを含むことを特徴とする画像処理による地図作成方法。
【請求項５】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する特徴抽出部２６，２７と、この特徴に基づき重ね合わせて幾何補正を行う幾何補正・重ね合わせ部２８と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする画像処理による地図作成装置。
【請求項６】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する手段、この特徴に基づき重ね合わせて幾何補正を行う手段、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する手段として機能させるための画像処理による地図作成用コンピュータプログラム。
【請求項７】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する工程を具備したことを特徴とする請求項１又は４記載の画像処理による地図作成方法。
【請求項８】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する付加手段を具備したことを特徴とする請求項２又は５記載の画像処理による地図作成装置。
【請求項９】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する手段として機能させるようにしたことを特徴とする請求項３又は６記載の画像処理による地図作成用コンピュータプログラム。
【請求項１０】
撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする請求項１、４又は７記載の画像処理による地図作成方法。
【請求項１１】
撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする請求項２，５又は８記載の画像処理による地図作成装置。
【請求項１２】
撮像装置１０は、動画の可能な装置からなり、パソコン１５に、この動画により刻々と変化する画像を作成する手段として機能させるようにしたことを特徴とする請求項３，６又は９記載の画像処理による地図作成用コンピュータプログラム。
【請求項１】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、このコンピュータ画像の上に前記写真画像を重ね合わせる工程と、この重ね合わせた写真画像に逆投影し地図を作成する工程とを含むことを特徴とする画像処理による地図作成方法。
【請求項２】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、このコンピュータ画像形成部２３により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる重ね合わせ部２４と、この重ね合わせ部２４により重ね合わせた写真画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする画像処理による地図作成装置。
【請求項３】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、この手段により作成されたコンピュータ画像の上に前記写真画像を重ね合わせる手段、この手段により重ね合わせた写真画像に逆投影し地図を作成する手段として機能させるための画像処理による地図作成用コンピュータプログラム。
【請求項４】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する工程と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する工程と、この特徴に基づき重ね合わせて幾何補正を行う工程と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する工程とを含むことを特徴とする画像処理による地図作成方法。
【請求項５】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを具備し、前記パソコン１５は、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成するコンピュータ画像形成部２３と、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する特徴抽出部２６，２７と、この特徴に基づき重ね合わせて幾何補正を行う幾何補正・重ね合わせ部２８と、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する逆投影・地図作成部２５とを含むことを特徴とする画像処理による地図作成装置。
【請求項６】
撮影したデジタルの写真画像を出力する撮像装置１０と、この撮像装置１０の撮影位置における緯度、経度、高度に対応したデジタル位置信号を出力する位置計測装置１１と、前記撮像装置１０の撮影時の方位と姿勢に対応したデジタル方位・姿勢信号を出力する電子コンパス１２と、数値地図データを記憶した数値地図データベース１３と、これらのデジタル信号に基づく演算、加工処理を行うパソコン１５とを使用し、前記パソコン１５に、前記デジタル位置信号及びデジタル方位・姿勢信号に対応した前記数値地図からコンピュータ画像を作成する手段、前記写真画像とコンピュータ画像におけるそれぞれの特徴を抽出する手段、この特徴に基づき重ね合わせて幾何補正を行う手段、前記重ね合わせて幾何補正した画像に逆投影し地図を作成する手段として機能させるための画像処理による地図作成用コンピュータプログラム。
【請求項７】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する工程を具備したことを特徴とする請求項１又は４記載の画像処理による地図作成方法。
【請求項８】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する付加手段を具備したことを特徴とする請求項２又は５記載の画像処理による地図作成装置。
【請求項９】
撮像装置１０により撮影したデジタルの写真画像を表示部２２に表示し、デジタルの写真画像の指定した個所に対応する地図上の座標と標高を前記表示部２２に表示し、かつ、デジタルの写真画像に書き込み付加した情報を地図上に表示する手段として機能させるようにしたことを特徴とする請求項３又は６記載の画像処理による地図作成用コンピュータプログラム。
【請求項１０】
撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする請求項１、４又は７記載の画像処理による地図作成方法。
【請求項１１】
撮像装置１０は、動画の可能な装置からなり、この動画により刻々と変化する画像を作成するようにしたことを特徴とする請求項２，５又は８記載の画像処理による地図作成装置。
【請求項１２】
撮像装置１０は、動画の可能な装置からなり、パソコン１５に、この動画により刻々と変化する画像を作成する手段として機能させるようにしたことを特徴とする請求項３，６又は９記載の画像処理による地図作成用コンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２００７−２７１８６９（Ｐ２００７−２７１８６９Ａ）
【公開日】平成１９年１０月１８日（２００７．１０．１８）
【国際特許分類】
【出願番号】特願２００６−９６８３２（Ｐ２００６−９６８３２）
【出願日】平成１８年３月３１日（２００６．３．３１）
【出願人】（３０６０１３１４２）株式会社デジタルサービスインターナショナル (1)
【出願人】（３０６０１３１７５）
【Ｆターム（参考）】
【公開日】平成１９年１０月１８日（２００７．１０．１８）
【国際特許分類】
【出願日】平成１８年３月３１日（２００６．３．３１）
【出願人】（３０６０１３１４２）株式会社デジタルサービスインターナショナル (1)
【出願人】（３０６０１３１７５）
【Ｆターム（参考）】
[ Back to top ]