電子機器
【課題】時系列情報を送受信する電子機器において時系列情報に対する位置情報を適切に表示する。
【解決手段】携帯機器１１１と１２１との間で通信を行っている際、携帯機器１１１の画面には、携帯機器１２１により撮像された動画像１１２が表示されるとともに互いの現在位置を含む地図１１３が表示される。この地図１１３には、説明表示１１４にも示されているように、携帯機器１１１および１２１の現在位置を示すマークが表示される。また、通信の途中で携帯機器１１１または１２１が移動した場合にはその軌跡が太線により表示される。すなわち、移動軌跡を表す太線の先端に現在位置を示すマークが表示されることになる。携帯機器１２１の画面にも同様に、携帯機器１１１により撮像された動画像１２２が表示されるとともに互いの現在位置を含む地図１２３が表示される。
【解決手段】携帯機器１１１と１２１との間で通信を行っている際、携帯機器１１１の画面には、携帯機器１２１により撮像された動画像１１２が表示されるとともに互いの現在位置を含む地図１１３が表示される。この地図１１３には、説明表示１１４にも示されているように、携帯機器１１１および１２１の現在位置を示すマークが表示される。また、通信の途中で携帯機器１１１または１２１が移動した場合にはその軌跡が太線により表示される。すなわち、移動軌跡を表す太線の先端に現在位置を示すマークが表示されることになる。携帯機器１２１の画面にも同様に、携帯機器１１１により撮像された動画像１２２が表示されるとともに互いの現在位置を含む地図１２３が表示される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器に関し、特に時系列情報（例えば、動画像データ）の受信もしくは送信を行う電子機器、および、その処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
【背景技術】
【０００２】
従来より、ＧＰＳ（Global Positioning System）を利用して現在の位置情報を取得し、その位置情報と地図情報とを対応させることにより地図上に現在の位置を表示する機能を有する装置が知られている。近年、このようなＧＰＳ機能を内蔵したディジタルカメラ等の撮像装置が提案されており、そのような撮像装置では画像を撮像すると同時に撮像位置における位置情報を取得し、その画像と位置情報とを関連付けて記録するようになっている。
【０００３】
また、撮像装置の単体で、位置情報に基づいて地図上にアイコンを表示し、アイコンが選択されるとそのアイコンにリンクした画像を表示する撮像装置が提案されている（例えば、特許文献１参照。）。これによりユーザは撮像された画像がどの地点で撮像されたかを容易に知ることが可能となる。
【特許文献１】特開２００１−１８９９０５号公報（図８）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上述の従来技術では、静止画と位置情報とを関連付けることにより、位置情報に基づいて地図上にアイコンを表示して、そのアイコンにリンクした画像を表示している。これに対し、動画像のような時系列情報の場合にはその時系列情報に含まれる内容によって位置情報が変動する可能性があるため、その時系列情報に含まれる内容のそれぞれについて位置情報を把握する必要がある。
【０００５】
特に、カメラ付携帯電話や携帯端末などのように他の機器との間で通信を行いながら移動する電子機器においては、時系列情報に対する位置情報を適切に表示することが有用である。
【０００６】
そこで、本発明は、時系列情報を送受信する電子機器において時系列情報に対する位置情報を適切に表示することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、上記課題を解決するためになされたものであり、その第１の側面は、他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する情報取得手段と、上記動画像データを表示した動画プレーンと上記動画像データの表示に合致した上記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、他の機器によって撮像された動画像データをその位置情報を含む地図とともに一見して把握させるという作用をもたらす。
【０００８】
また、この第１の側面において、上記動画像データは符号化された動画像データであり、取得された上記位置情報は上記符号化された動画像データの単位画像に関連付けられていてもよい。これにより、符号化された動画像データの復号の際に地図上に動画像データの軌跡を表示させることを可能にするという作用をもたらす。
【０００９】
また、この第１の側面において、上記符号化された動画像データの単位画像および対応する上記位置情報に対して共通するシステム時刻が付加されていてもよい。これにより、システム時刻に基づく関連付けが行われ、復号の際に地図上に動画像データの位置情報を表示させることを可能にするという作用をもたらす。
【００１０】
また、この第１の側面において、上記情報取得手段が上記位置情報に対応する地図を取得していない場合には当該地図を取得するようにしてもよい。これにより、常に全ての地図を保有することなく、必要な地図を取得して表示させるという作用をもたらす。
【００１１】
また、この第１の側面において、上記情報取得手段が外部の基地局から電波により上記地図を受信するものであり、基地局の電波の強度に応じて上記地図を受信する基地局を切り換えるものであってもよい。これにより、通信状態に応じて地図の受信をさせるという作用をもたらす。
【００１２】
また、この第１の側面において、被写体を撮像して動画像を出力する撮像手段をさらに具備し、上記表示制御手段が上記撮像手段により撮像された第２の動画像データの表示制御をさらに行うようにしてもよい。これにより、当該電子機器において撮像された動画像をあわせて表示させるという作用をもたらす。
【００１３】
また、この第１の側面において、上記撮像手段により上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す第２の位置情報を取得する位置情報取得手段をさらに具備し、上記表示制御手段が上記撮像手段により撮像された上記第２の動画像データの表示に合致した上記第２の位置情報をさらに表示するようにしてもよい。これにより、当該電子機器の位置情報を含む地図をさらにあわせて表示させるという作用をもたらす。
【００１４】
また、この第１の側面において、上記地図プレーンには、上記位置情報に基づいて上記位置情報の移動の軌跡が描画されてもよい。
【００１５】
また、本発明の第２の側面は、被写体を撮像して動画像を出力する撮像手段と、上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す位置情報を取得する位置情報取得手段と、上記動画像が撮像されている間、撮像された動画像データと上記位置情報とを送信する送信手段と、上記動画像データを表示した動画プレーンと上記動画像データの表示に合致した上記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、当該電子機器において撮像された動画像をその位置情報を含む地図とともに他の機器において一見して把握させるという作用をもたらす。
【００１６】
また、この第２の側面において、上記動画像データを符号化する符号化手段をさらに具備し、符号化された動画像データの単位画像と取得された上記位置情報とを関連付けて上記送信手段が送信するようにしてもよい。これにより、符号化された動画像データの復号の際に地図上に動画像データの軌跡を表示させることを可能にするという作用をもたらす。
【００１７】
また、この第２の側面において、上記符号化された動画像データの単位画像および対応する上記位置情報に対して共通するシステム時刻を付加するシステム時刻付加手段をさらに具備してもよい。これにより、システム時刻に基づく関連付けが行われ、復号の際に地図上に動画像データの位置情報を表示させることを可能にするという作用をもたらす。
【００１８】
また、本発明の第３の側面は、被写体を撮像して動画像を出力する撮像手段と、上記撮像手段にて上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す第１の位置情報を取得する位置情報取得手段と、上記動画像が撮像されている間、撮像された第１の動画像データと上記第１の位置情報とを送信するとともに、他の機器によって撮像された第２の動画像データおよびその第２の動画像データが撮像された位置を示す第２の位置情報を受信する送受信手段と、受信した上記第２の動画像データを表示した動画プレーンと上記第２の動画像データの表示に合致した上記第２の位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、各電子機器において撮像された動画像をその位置情報を含む地図とともに一見して把握させるという作用をもたらす。
【００１９】
また、この第３の側面において、上記表示制御手段が上記第１の動画像データの表示制御をさらに行うようにしてもよく、また、上記第１の位置情報の表示制御をさらに行うようにしてもよい。これにより、当該電子機器において撮像された動画像およびその位置情報をあわせて表示させるという作用をもたらす。
【発明の効果】
【００２０】
本発明によれば、時系列情報を送受信する電子機器において時系列情報に対する位置情報を適切に表示するという優れた効果を奏し得る。
【発明を実施するための最良の形態】
【００２１】
次に本発明の実施の形態について図面を参照して詳細に説明する。
【００２２】
図１は、本発明の実施の形態における携帯機器１００の構成例を示す図である。この携帯機器１００は、カメラ部１０と、記録再生処理部２０と、制御部３０とを備えている。また、この携帯機器１００にはＧＰＳモジュール５０および通信装置６０が接続されている。ここで、ＧＰＳモジュール５０は、複数のＧＰＳ衛星からの電波を受信することによって現在位置の緯度および経度を算出する。また、通信装置６０は、他の携帯機器と通信を行い、動画像データを含むデータの送受信を行う。これらＧＰＳモジュール５０および通信装置６０は、それぞれ高周波（ＲＦ：Radio Frequency）部、中間周波数（ＩＦ：Intermediate Frequency）部、および、ＡＤ（Analog-Digital）変換部などを含むが、これら各部の一部または全部を互いに共用するように構成してもよい。
【００２３】
カメラ部１０は、光学ブロック１１と、カメラ制御部１２と、信号変換器１３と、撮像信号処理部１４と、音声入力部１５と、音声信号処理部１６とを備える。光学ブロック１１は、内部に、被写体を撮像するためのレンズ群、絞り調整機構、フォーカス調整機構、ズーム機構、シャッター機構、フラッシュ機構、および、手ぶれ補正機構などを備える。カメラ制御部１２は、制御部３０から制御信号を受けて、光学ブロック１１に供給する制御信号を生成する。そして、生成した制御信号を光学ブロック１１に供給して、ズーム制御、シャッター制御、および、露出制御などの制御を行なう。
【００２４】
信号変換器１３は、例えばＣＣＤ（Charge Coupled Device）などの撮像素子により構成され、その結像面に、光学ブロック１１を通じた像が結像される。この信号変換器１３は、シャッター操作に応じて制御部３０から供給される画像取り込みタイミング信号を受けて、結像面に結像されている被写体像を撮像信号に変換し、撮像信号処理部１４に供給する。
【００２５】
撮像信号処理部１４は、制御部３０からの制御信号に基づいて、撮像信号についてのガンマ補正やＡＧＣ（Auto Gain Control）などの処理を行なうとともに、撮像信号をデジタル信号としての画像信号に変換する処理も行なう。音声入力部１５は、撮影時の被写体周辺の音声を収集する。この音声入力部１５からの音声信号は音声信号処理部１６に供給される。音声信号処理部１６は、制御部３０からの制御信号に基づいて、音声信号についての補正やＡＧＣなどの処理を行なうとともに、音声信号をデジタル信号に変換する処理も行なう。
【００２６】
記録再生処理部２０は、符号化／復号回路２１と、ディスクインターフェース２３と、出力処理部２４と、バッファメモリ２５とを備える。なお、この実施の形態では、記録再生の対象となる記録媒体としてディスク４９を想定しているが、これは一例であり、例えば後述するようにメモリカード４３などを利用してもよい。
【００２７】
符号化／復号回路２１は、カメラ部１０からの画像信号および音声信号やＧＰＳモジュール５０からの位置情報を符号化し多重化して圧縮データに変換する符号化機能を有する。一方、符号化／復号回路２１は、圧縮データから画像信号および音声信号や位置情報を分離して復号する復号機能を有する。これら圧縮データの形式として、例えば、ＭＰＥＧ−２ ＰＳ（プログラムストリーム）フォーマットを利用することができる。
【００２８】
なお、符号化／復号回路２１は、制御部３０からの制御信号に基づき、撮像信号処理部１４からの画像信号に対して、自動ホワイトバランス制御、露出補正制御、デジタルズーム倍率に応じた拡大制御などをさらに行なう。
【００２９】
ディスクインターフェース２３は、符号化／復号回路２１から圧縮データを受けてディスク４９に書き込む。また、ディスクインターフェース２３は、ディスク４９から圧縮データを読み出して符号化／復号回路２１に供給する。出力処理部２４は、制御部３０からの制御により、符号化／復号回路２１からの圧縮データを制御部３０や出力端子２７乃至２９に供給する。バッファメモリ２５は、例えばＳＤＲＡＭなどにより構成され、符号化／復号回路２１における符号化または復号のための作業領域として利用される。
【００３０】
制御部３０は、処理装置３１と、ＲＯＭ（Read Only Memory）３３と、ＲＡＭ（Random Access Memory）３４と、操作入力部４１を接続するための操作入力インターフェース３５と、表示部４２を接続するための表示制御部３６と、メモリカード４３を装填するためのメモリカードインターフェース３７と、通信装置６０を接続するための通信インターフェース３８と、時計回路３９とがシステムバス３２を介して接続されることにより構成される。
【００３１】
処理装置３１は制御部３０全体の処理を司るものであり、作業領域としてＲＡＭ３４を使用する。ＲＯＭ３３には、カメラ部１０を制御するためのプログラムや、画像信号や音声信号の記録制御および再生制御などを実行するためのプログラムが書き込まれている。
【００３２】
操作入力インターフェース３５に接続される操作入力部４１には、撮影モードと再生モードなどの他のモードとを切り換えるモード切り換えキー、ズーム調整キー、露出調整のためのキー、シャッターキー、動画撮影用キー、表示部４２における表示調整キーなどの複数のキーが設けられている。操作入力インターフェース３５は、操作入力部４１からの操作信号を処理装置３１に伝える。処理装置３１は、操作入力部４１においていずれのキーが操作されたかを判別し、その判別結果に応じた制御処理を行なう。
【００３３】
表示制御部３６に接続される表示部４２は、例えばＬＣＤ（Liquid Crystal Display）などにより構成され、処理装置３１の制御の下に、カメラ部１０からの画像信号や、ディスク４９から読み出された画像信号、または、通信装置６０により受信された画像信号を表示する。また、この表示部４２には、後述のように、画像信号に関連付けられた位置情報に基づいた地図が表示される。この位置情報としては、関連付けられた画像信号を取得した緯度および経度を示す。従って、この位置情報における緯度および経度により地図上に表示を行うことができる。
【００３４】
メモリカードインターフェース３７は、符号化／復号回路２１からの圧縮データをメモリカード４３に書き込む。また、メモリカードインターフェース３７は、メモリカード４３から圧縮データを読み出して符号化／復号回路２１に供給する。
【００３５】
時計回路３９は、年、月、日、時間、分、秒などを表わす時間情報を生成する。秒としては、画像のフレーム単位を計数することができるような小数点以下の精度の情報を発生するように、この時計回路３９は構成されている。
【００３６】
図２は、本発明の実施の形態における符号化／復号回路２１の符号化機能の一構成例を示す図である。この符号化機能は、バッファ２１０１乃至２１０３と、画像符号化部２１１０と、音声符号化部２１２０と、位置情報処理部２１３０と、バッファ２１１９、２１２９および２１３９と、多重化部２１４０と、システム時刻発生部２１５０とを備える。
【００３７】
この符号化／復号回路２１では、例えば、ＭＰＥＧ（Moving Picture Experts Group）方式による動画像の符号化が行われる。ＭＰＥＧ方式では、動画像データの単位画像である画像フレームの情報の相関を利用した予測符号化およびＤＣＴ（離散コサイン変換）を用いたデータ圧縮が行われる。その際、各フレームの画像はＩピクチャ（Intra-Picture）、Ｐピクチャ（Predictive-Picture）、および、Ｂピクチャ（Bidirectionally Predictive-Picture）の３種類の何れかに分類される。Ｉピクチャは画面内符号化によって得られる画面であり、原画面と同じ順序に符号化されるものである。また、Ｐピクチャは画面間順方向予測符号化によって得られる画面であり、これも原画面と同じ順序に符号化される。しかし、Ｂピクチャは双方向予測符号化によって得られる画面であり、ＩピクチャとＰピクチャとが符号化された後でＩピクチャとＰピクチャとの間に挿入されるＢピクチャが符号化されるため、原画面とは異なる順序で符号化される。そのため、Ｂピクチャは、双方向予測符号化の際に参照するＩピクチャやＰピクチャよりも後ろに位置するよう並び換えられる。
【００３８】
バッファ２１０１乃至２１０３は、符号化／復号回路２１の入力バッファとして機能するものであり、バッファ２１０１は撮像信号処理部１４からの画像信号を、バッファ２１０２は音声信号処理部１６からの音声信号を、バッファ２１０３はＧＰＳモジュール５０からの位置情報をそれぞれ保持する。そして、バッファ２１０１は画像信号を画像符号化部２１１０に、バッファ２１０２は音声信号を音声符号化部２１２０に、バッファ２１０３は位置情報を位置情報処理部２１３０にそれぞれ供給する。
【００３９】
画像符号化部２１１０は、並換え部２１１１と、圧縮符号化部２１１２と、可変長符号化部２１１３とを備える。この画像符号化部２１１０は、動画像データの単位画像として少なくとも１枚のＩピクチャと、複数枚のＰピクチャおよびＢピクチャからなるＧＯＰ（Group of Pictures）を構成し、このＧＯＰを一区切りとして圧縮処理する。
【００４０】
並換え部２１１１は、上述のように、Ｂピクチャの双方向予測符号化の際に参照されるＩピクチャやＰピクチャよりもそのＢピクチャの方が後ろに位置するように順序を並び換える。
【００４１】
圧縮符号化部２１１２は、Ｉピクチャについてはフレーム内符号化処理を行なってデータ圧縮を行ない、Ｐピクチャについては前方のＩピクチャまたはＰピクチャとの相関を利用したフレーム間予測符号化処理を行なってデータ圧縮を行ない、Ｂピクチャについては原画像における前方および後方のＩピクチャまたはＰピクチャとの相関を利用したフレーム間予測符号化処理を行なってデータ圧縮を行なう。なお、Ｐピクチャについては、フレーム内符号化処理を行なう画像部分も存在する。
【００４２】
可変長符号化部２１１３は、ハフマン符号などを用いた可変長符号化処理を行なう。この可変長符号化処理の結果は、バッファ２１１９に供給される。
【００４３】
音声符号化部２１２０は、オーディオフレームと呼ばれる所定量の音声信号を単位として圧縮符号化する。この圧縮符号化された音声信号は、バッファ２１２９に供給される。
【００４４】
位置情報処理部２１３０は、画像信号の各フレームに対応するタイミングで位置情報を出力する。この位置情報は、バッファ２１３９に供給される。
【００４５】
多重化部２１４０は、画像信号、音声信号、および、位置情報のそれぞれをパケット化して、それらを多重化する。その際、一または複数個のパケットに対してパックヘッダを付加することによりパックを構成する。この多重化部２１４０により生成された多重化データ（すなわち、ＭＰＥＧ−２ ＰＳ形式のデータ）は、ディスクインターフェース２３により、ディスク４９に書き込まれる。
【００４６】
システム時刻発生部２１５０は、システム時刻基準参照値（ＳＣＲ：System Clock Reference）を発生して、多重化部２１４０に供給する。このシステム時刻基準参照値は、多重化部２１４０により付加されるパックヘッダの一項目として記録される。すなわち、多重化データの各パックにこのシステム時刻基準参照値が含まれることになる。そして、このシステム時刻基準参照値は、復号の際にシステム時刻を同期させるために利用される。
【００４７】
また、このシステム時刻基準参照値は、次に説明するＰＴＳ（Presentation Time Stamp）およびＤＴＳ（Decoding Time Stamp）というタイムスタンプを付与する際の時間基準を与える。タイムスタンプＰＴＳは再生出力の時刻管理情報であり、そのタイムスタンプが付与された単位画像をいつ再生出力するかを示す。一方、タイムスタンプＤＴＳは復号の時刻管理情報であり、そのタイムスタンプが付与された単位画像をいつ復号するかを示す。
【００４８】
これらタイムスタンプＰＴＳおよびＤＴＳは、各パックにおけるパケットのパケットヘッダの一項目として記録される。上述のようにＩピクチャおよびＰピクチャをＢピクチャよりも先行して符号化ストリームに送出する必要があることから、復号する順序と再生出力する順序とが異なるため、それぞれタイムスタンプＰＴＳおよびＤＴＳを別個に設けて区別している。従って、タイムスタンプＰＴＳおよびＤＴＳが一致する場合にはタイムスタンプＤＴＳは省略され、タイムスタンプＰＴＳのみがパケットヘッダに記録される。
【００４９】
また、パケット容量制限により一つの単位画像が複数のパケットに分割される場合には、その先頭のパケットのパケットヘッダにのみタイムスタンプが記録され、それ以降の分割されたパケットのパケットヘッダにはタイムスタンプは記録されない。
【００５０】
なお、タイムスタンプＤＴＳは、順序の並び換えが発生する画像信号のパケットに付与されるものである。従って、順序の並び換えが行われない音声信号や位置情報の場合は、タイムスタンプＤＴＳは用いられず、タイムスタンプＰＴＳのみが付与される。
【００５１】
図３は、本発明の実施の形態におけるデータ構造の一例を示す図である。ここで、図３（ａ）は原画像の単位画像と位置情報との関係を示す図である。この例では、動画像７１２は１５フレームの単位画像（Ｂ１乃至Ｐ１５）によりＧＯＰ７１０を構成し、各単位画像に対応して位置情報７１１（ＰＯＳ１乃至１５）が取得されている。
【００５２】
単位画像７１２において、Ｉ３はＩピクチャを示し、Ｂ１、Ｂ２、Ｂ４、Ｂ５、Ｂ７、Ｂ８、Ｂ１０、Ｂ１１，Ｂ１３、Ｂ１４は、Ｂピクチャを示し、Ｐ６、Ｐ９、Ｐ１２、Ｐ１５はＰピクチャを示す。各サフィックス番号は、ピクチャタイプに関係なく、フレーム単位の連続番号を付与したものである。一方、位置情報７１１において、ＰＯＳ１乃至１５は各サフィックス番号の画像フレーム（単位画像）についての位置情報を示している。すなわち、位置情報ＰＯＳ１乃至１５のそれぞれは、サフィックス番号が同一である画像フレームについての位置情報となっている。
【００５３】
図３（ａ）の原画像の単位画像７１２は、画像符号化部２１１０の並換え部２１１１により図３（ｂ）の単位画像７２２に示すようなピクチャ順の並び換えがなされる。これに対して、位置情報の並び順は変更されないため、図３（ｂ）に示す位置情報７２１は、図３（ａ）の位置情報７１１と同じ並び順となっている。したがって、並び順だけでは各ピクチャと位置情報との対応関係がつかめない。
【００５４】
そこで、多重化部２１４０において、各単位画像および位置情報に対して再生出力の時間管理情報であるタイムスタンプＰＴＳが付加される。図３（ｂ）において、ＰＴＳ７２３は位置情報７２１のタイムスタンプＰＴＳを示し、ＰＴＳ７２４は単位画像７２２のタイムスタンプＰＴＳを示す。再生出力は元のフレーム順であり、各ピクチャのサフィックス番号とタイムスタンプＰＴＳ７２４とは等しくなっている。これらＰＴＳ７２３およびＰＴＳ７２４を対応させることにより、位置情報と各単位画像とが関連付けられ、位置情報がいずれの単位画像についてのものであるかの対応付けをすることができる。
【００５５】
また、単位画像７２２にはタイムスタンプＤＴＳ７２５が付加される。上述のとおり、このタイムスタンプＤＴＳは復号の時刻管理情報であり、圧縮データ（すなわち、ＭＰＥＧ−２ ＰＳ形式）では各単位画像はこのタイムスタンプＤＴＳの順に並んでいる。なお、タイムスタンプＤＴＳ７２５はタイムスタンプＰＴＳ７２４と一致する場合には付与されない。従って、この図３（ｂ）の例では、タイムスタンプＤＴＳ７２５はＩピクチャおよびＰピクチャに付与されるが、Ｂピクチャには付与されない。
【００５６】
図３（ｃ）は、図３（ｂ）の各データを多重化した後のデータ構造を示す図である。ナビゲーションパック７３１（NV_PCK）は、各ＧＯＰに対応するパック群の先頭に位置付けられ、データサーチインフォメーション（例えば、ジャンプ時にどのセクタまで飛ぶかを指示する制御情報）などの再生管理情報を保持する。なお、後述のＤＶＤフォーマットにおいては、一つのＧＯＰに対応するパック群を動画オブジェクト単位（ＶＯＢＵ：Video OBject Unit）という。
【００５７】
パック群７３２（V_PCK_I3）は、単位画像Ｉ３に相当する画像データを保持する。ＤＶＤフォーマットでは、１パック当り２０４８バイトの容量となっているため、画像データの容量がこれを超える場合には複数のパックに分割して保持される。パック７３３（P_PCK1）は、位置情報ＰＯＳ１に相当する位置情報を保持する。パック群７３４（V_PCK_B1）は、単位画像Ｂ１に相当する画像データを保持する。また、パック７３５（P_PCK2）は、位置情報ＰＯＳ２に相当する位置情報を保持する。
【００５８】
このように、符号化の際に並び換えられた順に従って単位画像が位置情報と多重化される。図３（ｃ）の例では、パック７３３をパック群７３２とパック群７３４との間に多重化しているが、これは単位画像同士または位置情報同士が入れ換わらなければよく、例えば、パック７３３をパック群７３２の前に配置したり、パック群７３４の後に配置するようにしてもよい。また、位置情報７２１をまとめて配置してもよい。
【００５９】
また、この図３の例では、単位画像の全てについてそれぞれの位置情報を保持するようにしているが、この単位画像と位置情報の対応は必ずしも１対１でなくてもよい。例えば、単位画像Ｎ（Ｎ：自然数）個おきに対応する位置情報を保持するようにしてもよく、また、１ＧＯＰ毎に位置情報を保持するようにしてもよい。
【００６０】
なお、この図３では音声信号については省略しているが、音声信号も併せて多重化できることは従来と同様である。
【００６１】
図４は、本発明の実施の形態における符号化／復号回路２１の復号機能の一構成例を示す図である。この復号機能は、分離部２１６０と、システム時刻保持部２１７０と、バッファ２１６１乃至２１６３と、画像復号部２１７１と、音声復号部２１７２と、位置情報処理部２１７３と、バッファ２１８１乃至２１８３と、制御部２１９０とを備える。
【００６２】
分離部２１６０は、多重化されたデータ（すなわち、ＭＰＥＧ−２ ＰＳ形式）から画像信号、音声信号、および、位置情報を分離する。これら画像信号、音声信号、および、位置情報は、バッファ２１６１乃至２１６３にそれぞれ保持される。また、分離部２１６０は、それぞれのパックからパックヘッダおよびパケットヘッダを分離し、それらのヘッダ情報をシステム時刻保持部２１７０および制御部２１９０に供給する。
【００６３】
システム時刻保持部２１７０は、復号機能に用いられるシステム時刻（ＳＴＣ：System Time Clock）を保持するものである。このシステム時刻保持部２１７０は、分離部２１６０から供給されたパックヘッダに含まれるシステム時刻基準参照値（ＳＣＲ）によって自己の保持するシステム時刻（ＳＴＣ）を設定する。このシステム時刻（ＳＴＣ）は、制御部２１９０に供給される。
【００６４】
画像復号部２１７１は、制御部２１９０の制御に従って、バッファ２１６１に保持された画像信号をタイムスタンプＤＴＳに従った順序で復号し、フレーム単位の画像データに復元してバッファ２１８１に出力する。音声復号部２１７２は、制御部２１９０の制御に従って、バッファ２１６２に保持された音声信号を復号し、音声データに復元してバッファ２１８２に出力する。位置情報処理部２１７３は、制御部２１９０の制御に従って、フレーム単位の画像データ（単位画像）についての位置情報を再生し、バッファ２１８３に出力する。
【００６５】
制御部２１９０は、分離部２１６０から供給されたヘッダ情報を解析し、タイムスタンプＰＴＳおよびＤＴＳを抽出して、画像信号、音声信号および位置情報の復号処理および再生出力を制御する。画像復号部２１７１では、単位画像はタイムスタンプＤＴＳに従って順序で復号されてバッファ２１８１に保持されるが、制御部２１９０による制御により、バッファ２１８１からタイムスタンプＰＴＳに従った順序で単位画像のデータが出力される。制御部２１９０は、バッファ２１８２および２１８３からの出力も同様にタイムスタンプＰＴＳに従った順序で供給されるように制御する。
【００６６】
また、制御部２１９０は、バッファ２１８１乃至２１８３から出力処理部２４に対して出力される画像信号、音声信号および位置情報のタイムスタンプＰＴＳが一致するようにタイミングを同期させるよう制御する。すなわち、システム時刻保持部２１７０から供給されるシステム時刻（ＳＴＣ）と各パケットヘッダにおけるタイムスタンプＰＴＳが一致するタイミングでバッファ２１８１乃至２１８３から出力処理部２４に対して画像信号、音声信号および位置情報が出力される。これにより、圧縮データにおいて並び順が異なっていた画像信号の単位画像と位置情報とが関連付けられて出力される。
【００６７】
図５は、本発明の実施の形態におけるディスク４９に用いられるフォーマットの一例としてのＤＶＤ−Ｖｉｄｅｏフォーマットのデータ構造を示す図である。ディスク４９の記録エリアは、ディスクの半径方向に見て、最内周側から順に、リードインエリア８０１、ファイル管理エリア８０２、データ記録エリア８０３、リードアウトエリア８０４の順に区分けされる。
【００６８】
ファイル管理エリア８０２は、リードインエリア側から、ＵＤＦ（Universal Disc Format）エリアおよびＶＭＧ（Video ManaGer）エリアを含む。これらＵＤＦエリアおよびＶＭＧエリアは、ＤＶＤに記録された画像データ等のファイルを管理する管理用情報の記録エリアである。ＵＤＦエリアは、ＵＤＦ規格とＩＳＯ９６６０規格をサポートすることにより、コンピュータでＤＶＤを読むことができるようにするためのものである。ＶＭＧエリアは、ＤＶＤ管理用情報の記録エリアである。
【００６９】
データ記録エリア８０３は、画像信号や音声信号等を記録するエリアであり、ビデオタイトルセット（ＶＴＳ：Video Title Set）８１１と呼ばれるデータ群を単位として、データの記録がなされる。ビデオタイトルセット８２０の各々は、ビデオタイトルセット情報（ＶＴＳＩ：Video Title Set Information）８２１と、ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ：Video Object Set for the VTSM）８２２と、ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ：Video Object Set for Titles in a VTS）８２３と、バックアップ（ＶＴＳＩ（ＢＵＰ）：Back-UP of VTSI）８２４とからなる。
【００７０】
ビデオタイトルセット情報（ＶＴＳＩ）８２１は、ビデオタイトルセットに対する制御情報である。ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ）８２２は、ビデオタイトルセット内の各種メニューのためのコンテンツである。ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３は、タイトルを再生するためのコンテンツである。バックアップ（ＶＴＳＩ（ＢＵＰ））８２４は、ビデオタイトルセット情報８２１のバックアップコピーである。
【００７１】
ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３には、ＭＰＥＧ−２ ＰＳフォーマットの圧縮データが、上述の動画オブジェクト単位（ＶＯＢＵ）を読み書き単位として記録される。このＶＯＢＵには、１ＧＯＰに相当する画像信号やそれに対応する音声信号等が含まれる。すなわち、ＤＶＤへのアクセスは、１ＧＯＰを単位として行われることになる。
【００７２】
動画オブジェクト単位（ＶＯＢＵ）は、複数個のパック８４１から構成される。パック８４１は、一般に一または複数個のパケットからなるが、この例では、一つのパックは一つのパケットを含むものとしている。すなわち、１パックは、パケットの前にパックヘッダ８５１を付加したものであり、さらにパケットはパケットヘッダ８５２とデータ本体であるパケットデータ８５３とを備える。なお、ＤＶＤ−Ｖｉｄｅｏフォーマットでは、１パックは２０４８バイト（１セクタに対応）と定められている。
【００７３】
パックヘッダ８５１は、パックの開始を示すパック開始コード８６１のほか、システム時刻基準参照値（ＳＣＲ）８６２を含む。このシステム時刻基準参照値（ＳＣＲ）８６２は、上述のようにシステム時刻発生部２１５０に基づくものである。なお、ＭＰＥＧ−２ ＰＳでは２７ＭＨｚで時刻を示すため、このシステム時刻基準参照値（ＳＣＲ）８６２は、パックヘッダ８５１においては４２ビットで表現される。
【００７４】
パケットヘッダ８５２は、プライベート１・パケットに沿ったものであり、パケット開始コード８７１と、フラグ８７３と、ＰＴＳ８７５と、ＤＴＳ８７６と、その他のフィールド８７７を備える。パケット開始コード８７１はパケットの開始を示すものであり、ストリームを識別するストリーム識別子を含む。フラグ８７３は、後続のＰＴＳ８７５およびＤＴＳ８７６の存在を示すフラグを含む。すなわち、「１０」でＰＴＳ８７５のみ、「１１」でＰＴＳ８７５およびＤＴＳ８７６が存在することを示す。
【００７５】
ＰＴＳ８７５およびＤＴＳ８７６は上述のように、それぞれ再生出力のタイミングおよび復号のタイミングを示すタイムスタンプである。制御部２１９０は、これらＰＴＳ８７５およびＤＴＳ８７６を参照することにより復号および再生出力を制御する。なお、これらＰＴＳ８７５およびＤＴＳ８７６は、パケットヘッダ８５２においてはそれぞれ３３ビットで表現される。
【００７６】
なお、ここでは、プライベート１・パケットを適用した例について説明したが、プライベート２・パケットを適用しても構わない。例えば、複数の位置情報をそれぞれのＰＴＳと対にして一つのパックに格納するようにしても構わない。また、ここでは、ＤＶＤ−Ｖｉｄｅｏフォーマットの適用例について説明したが、他のフォーマットを適用しても構わない。例えば、ＤＶＤ−ＶＲフォーマットにおけるＶＯＢＵの先頭に配置されるパックＲＤＩ＿ＰＣＫ内のＲＤＩパケットのＲＤＩ・データ領域内に位置情報を保持するようにしてもよい。
【００７７】
図６は、本発明の実施の形態におけるファイル管理テーブルの一例を示す図である。このファイル管理テーブルは、例えばＤＶＤ−Ｖｉｄｅｏフォーマットにおけるファイル管理エリア８０２に保持するようにしてもよく、また、データ記録エリア８０３の所定位置もしくは所定ファイル名として保持するようにしてもよい。このファイル管理テーブルは、ディスク４９に記録されている各ファイルに関する属性データとして、作成日８９１と、更新日８９２と、題名８９３と、キーワード８９４と、開始アドレス８９５とを含む。
【００７８】
作成日８９１は、対応するファイルが作成された日を表す。また、更新日８９２は、対応するファイルが更新された日を表す。題名８９３は、対応するファイルの内容を識別するためにユーザによって付与されるものである。キーワード８９４は、対応するファイルの検索に役立てるためにユーザによって任意に付与されるものである。これらの内容は検索の際の絞込み条件として利用することができる。
【００７９】
開始アドレス８９５は、対応するファイルの開始アドレスを示すものであり、ディスク４９内のセクタまたはアドレス等を示す。これにより、ファイル管理テーブルと各ファイルとの対応付けがなされる。
【００８０】
このファイル管理テーブルを設けることにより、ディスク４９上に記録されているファイルの内容を効率良く検索することができ、ディスク４９のシークに要する時間を短縮することができる。このファイル管理テーブルを使用しない場合にはディスク４９上のファイルを逐一検索する必要があるが、これらをまとめてファイル管理テーブルにより管理することによって検索に要する時間を短縮することができる。
【００８１】
図７は、本発明の実施の形態における画面表示例を示す図である。この画面表示例は、あるディスク４９の内容を地図上に表示したものである。このディスク４９には２つのファイルが含まれていることを想定して、それらの撮影の際の位置の履歴が地図上の位置情報３１１および３１２として表示部４２に表示された例を示している。題名３１３および３１４は、位置情報３１１および３１２により表されるファイルのそれぞれの題名を示している。
【００８２】
この表示例において、位置情報３１１の何れかの部分について、例えばマウスのクリック等のような指示が操作入力部４１によりなされると、この位置情報３１１に対応するファイルの再生が行われる。例えば、位置情報３１１の開始位置（矢印の根元）がクリックされると、この位置情報３１１に対応するファイルの最初から再生が行われる。また、位置情報３１１の途中部分がクリックされると、クリックされた位置に対応する場面（単位画像）から動画像信号の再生が行われる。
【００８３】
また、位置情報３１２には開始位置から終了位置までの間にアイコン３１５乃至３１７が表示されている。これらアイコン３１５乃至３１７は、対応する位置における代表画像を示すものであり、例えば対応する位置のＧＯＰにおけるＩピクチャを代表画像として用いることができる。これらアイコン３１５乃至３１７が指示されると、そのアイコンに対応する場面（単位画像）から動画像信号の再生が行われる。
【００８４】
なお、アイコンの表示に関しては、所定の間隔で表示する方法、アイコン数を指定して等間隔となる位置で表示する方法、指定された任意の位置で表示する方法等、種々の方法が考えられる。
【００８５】
このように位置情報を地図上に表示することにより、記録媒体としてのディスクに記録された動画像を、地図という親しみのある画像により管理することができ、ユーザの使い勝手を向上することができる。これにより、動画像の頭出しが容易に行われるようになる。
【００８６】
図８は、本発明の実施の形態における表示制御部３６の一構成例を示す図である。表示部４２には、図７のような地図が表示されるだけでなく、動画像信号の再生画面も表示される。その際、地図の表示と動画像の表示とを片方ずつ別々に表示するだけでなく、同時に表示することが望ましい。そこで、表示制御部３６に、重ね合せ回路３６１を設けて、地図に関して描画された地図プレーン３４１と動画像を表示した動画プレーン３４２とを重ね合せた上で表示部４２に表示する。その表示例が図９および図１０である。
【００８７】
図９は、本発明の実施の形態における重ね合せによる画面表示の一例を示す図である。この表示例では、動画プレーン３４２の上に地図プレーン３４１が重ねられて表示されている。
【００８８】
地図プレーン３４１は、動画プレーン３４２において再生中の動画がどのような道筋で撮影されたかを地図上の矢印により表示している。この表示例では、ファイル中に記録されている動画像データ全体の道筋が地図プレーン３４１における矢印の始点（根元）から終点（先端）にかけて表示されており、矢印内の模様の変化により現在の再生位置が示されている。すなわち、地図プレーン３４１における矢印の模様の区切りの位置が現在の再生位置ということになる。これにより、ユーザは、動画像がどのような道筋で撮像されたかを容易に知ることができ、また現在再生中の画面が全体のどの位置にあるのかを視覚的に把握することが可能となる。
【００８９】
なお、この表示例では動画像データ全体の道筋を地図プレーン３４１上の矢印により表しているが、このように動画像データ全体を表示せずに実際に再生された部分を矢印により表示するようにしてもよい。この場合、動画プレーン３４２に動画が再生されるのと同期して、地図プレーン３４１上の矢印が伸びていくことになる。
【００９０】
図１０は、本発明の実施の形態における重ね合せによる画面表示の他の例を示す図である。この表示例では、地図プレーン３４１の上に動画プレーン３４２が重ねられて表示されている。操作入力部４１による指示により、図９の表示例と図１０の表示例との間で相互に表示の切換えが可能である。例えば、図９の表示において地図の詳細表示が必要となった場合には図１０の表示例への切換えを指示することが考えられる。
【００９１】
なお、この図１０の表示例においては、再生位置を示す地図プレーン３４１上の矢印が画面の左上に配置されているが、例えば、この矢印の先端が画面の中心に配置されるように表示してもよい。上述のように動画が再生されるのと同期して矢印が伸びていくようにした場合、そのままでは地図プレーン３４１の下に矢印が隠れてしまうおそれがあるが、矢印の先端が常に画面の中心に配置されるように表示すれば地図プレーン３４１の下に矢印が隠れるおそれもなくなり、ユーザが現在再生されている位置を容易に把握することができる。
【００９２】
図１１は、本発明の実施の形態における位置情報の履歴の表示形態について示す図である。動画像を撮影する場合、それぞれの内容の性質によって示す履歴が大きく異なってくる可能性がある。例えば、図１１の「北海道旅行」や「九州旅行」のように移動範囲が広い場合には、広域地図においても撮影された道筋を十分に表現することができる。一方、比較的局所的な範囲に留まっている場合には広域地図では撮影された道筋を十分に表現することができなくなる。
【００９３】
そこで、図１１の「散歩１」等のように、表示されている地図の領域に比較して道筋が狭い領域に閉じている場合には、矢印により道筋を表さずに、円形の表示を行う。この円形表示の大きさは、移動距離の最大値に比例するように設定することができる。また、その領域に含まれるファイルの数に応じた大きさに設定するようにしてもよい。なお、この円形表示に対する題名の表示は、その領域が操作入力部４１により選択された際（例えばマウスポインタがその領域の上に存在する際）にのみ表示するようにしてもよい。
【００９４】
円形表示を行うか否かの基準として、例えば、縦Ｍ×横Ｎの地図において、縦方向の移動範囲の最大幅がＭ／ｋより小さく、且つ、横方向の移動距離の最大幅がＮ／ｋより小さい場合には履歴を円形で表示するようにする。ここで、基準となるｋには例えば１０乃至２０程度の値を選択することができる。また、縦方向の移動距離の最大幅の二乗と横方向の移動距離の最大幅の二乗とを加えた値が（Ｍ２＋Ｎ２）／ｋ２より小さい場合に履歴を円形で表示するようにしてもよい。
【００９５】
図１２は、本発明の実施の形態における位置情報の履歴の他の表示形態について示す図である。図１１の地図において、「野球観戦、ハイキング、結婚式」と表示された円形部分が操作入力部４１により指示（例えばマウスによるクリック）されると、その拡大地図として図１２のような地図が表示される。
【００９６】
この表示例では、例えば「ハイキング」のように地図の領域を基準として道筋が比較的広い範囲にあるものは、矢印により位置情報が表示されている。一方、例えば「野球観戦」や「結婚式」のようにほぼ定位置または局所領域に閉じている場合には図１１の場合と同様に円形に表示される。この円形表示を行うか否かの基準も図１１の場合と同様である。
【００９７】
この図１２の場合、矢印表示または円形表示のそれぞれは一つのファイルに対応しているため、それら表示の何れかが操作入力部４１により指示されると、対応するファイルの再生が開始する。矢印表示が指示（クリック）された場合は図７の場合と同様であり、クリックされた位置に対応する場面（単位画像）からファイル内の動画像信号の再生が行われる。一方、円形表示が指示された場合はそのファイルの所定位置（例えば先頭）から動画像信号の再生が行われる。
【００９８】
このように、本発明の実施の形態では、動画像データを含むファイルを地図上の位置情報により視覚的に管理することができる。
【００９９】
図１３は、本発明の実施の形態において携帯機器同士でリアルタイムに表示を行う例を示す図である。本発明によれば、ディスク４９に記録された符号化データを再生するだけでなく、符号化されたデータ（すなわち、ＭＰＥＧ−２ ＰＳ）を通信装置６０を通じてリアルタイムでやりとりすることができる。
【０１００】
携帯機器１１１と１２１との間で通信を行っている際、携帯機器１１１の画面には、携帯機器１２１により撮像された動画像１１２が表示されるとともに互いの現在位置を含む地図１１３が表示される。この地図１１３には、説明表示１１４にも示されているように、携帯機器１１１および１２１の現在位置を示すマークが表示される。また、通信の途中で携帯機器１１１または１２１が移動した場合にはその軌跡が太線により表示される。すなわち、移動軌跡を表す太線の先端に現在位置を示すマークが表示されることになる。
【０１０１】
携帯機器１２１の画面にも同様に、携帯機器１１１により撮像された動画像１２２が表示されるとともに互いの現在位置を含む地図１２３が表示される。これにより、携帯機器１１１および１２１のユーザは互いに通信相手の表情を認識するとともに、互いの位置関係を容易に把握することができる。
【０１０２】
なお、携帯機器の画面には相手に携帯機器からの動画像だけでなく、自身の携帯機器による撮像画像（例えば、携帯機器１２１における撮像画像１２５）を表示して、その写り具合を確認できるようにしてもよい。また、図１３では動画像を大きく表示するようにしているが、図１０の例のように地図を大きく表示するよう適宜切換えるようにしてもよく、また、地図のみを表示するようにしてもよい。
【０１０３】
このように、本発明の実施の形態では、動画像データを含むファイルを記録媒体に記録して利用するだけでなく、通信装置６０を通じて位置情報を動画像信号と関連付けて送信することにより、通信相手の地図上の位置関係をリアルタイムに把握することができる。
【０１０４】
次に、本発明の実施の形態における地図の取得方法について説明する。
【０１０５】
本発明のように表示すべき地図の範囲が不確定な場合、どの範囲までの地図を用意するべきかは事前にはわからない。ユーザの移動範囲を予測することは不可能だからである。従って、日本国内で使用される携帯機器であれば、日本全域の細部にわたる地図を用意する必要がある。これは予め各携帯機器に具備するようにしてもよいが、以下のような方法により外部から通信を介して取得することも可能である。
【０１０６】
ここでは説明を簡単にするために、基地局Ａが発する電波領域Ａから基地局Ｂが発する電波領域Ｂまで移動する場合を考える。本発明の実施の形態における携帯機器を持ったユーザが基地局Ａの発する電波領域Ａに入った場合、基地局Ａとの通信を確立し接続する。その際、基地局Ａからは、基地局Ａから発せられる電波の到達範囲よりもやや広範囲の地図データが携帯機器に送信され、機器は地図データを受信する。次に、基地局ＡおよびＢからの電波が混在する電波領域Ｃに移動した場合、携帯機器は、基地局Ａとの通信を行いながら、基地局Ｂの電波を受信する。基地局Ｂの電波の強さがＡより強くなると、電波チャネルを切り替えるハンドオーバーが発生し、通信を基地局Ｂに切り替える。そして、基地局Ｂから基地局Ａから発せられる電波の到達範囲よりもやや広範囲の地図データが携帯機器に送信され、携帯機器は地図データを受信する。
【０１０７】
また、地図の種類としては日本全図のような広域地図から道路地図のような細部を網羅する地図まで段階に応じた地図を想定することができる。そして、同じ階層の地図は互いに境界領域が重なるようにやや広めの範囲を有するものとしておき、重複する部分については、携帯機器は後から取得した地図における重複部分を削除してマッチングを行い、マッチング終了後に新たな地図としてメモリに記録する。
【０１０８】
通信により地図を取得する場合、撮像の直前の状態であるスタンバイ状態になったときに受信するようにしてもよく、また、携帯機器の電源が通電している状態には常に受信するようにして不要な地図は適宜廃棄するようにしてもよい。後者の場合には、受信された地図を一時記録するメモリ（例えば、ＲＡＭ３４）の領域に応じて随時上書きするようにすればよい。
【０１０９】
なお、地図にはその地図の範囲における名所案内に関する情報を含ませるようにしてもよい。その場合、その名所に最も近い位置情報を有するファイルについてファイル管理テーブルのキーワード８９４にその名称を登録しておけば、後日の検索の際に利用することができる。また、名所案内の動画像データを含むファイルを地図と併せて受信して、別個のファイルとしてファイル管理テーブルに登録するようにしてもよい。この場合、地図上の名所案内のアイコン等をクリックすることにより、名所案内の動画像データが再生されるようにすることができる。
【０１１０】
なお、本発明の実施の形態では、位置情報を符号化データの内部に保持しているが、位置情報の範囲を予めファイル管理テーブルに登録しておくようにしても構わない。
【０１１１】
次に、本発明の実施の形態における動作について説明する。
【０１１２】
図１４は、本発明の実施の形態における携帯機器とユーザとのやりとりを説明するための図である。まず、本発明の実施の形態における位置情報を含むディスク４９をユーザが携帯機器１００に挿入するか、もしくは、ディスク４９のマウントまたはリロードを操作入力部４１により要求すると（２０１）、携帯機器１００は図６で説明したファイル管理テーブルをディスク４９から読み出して、このファイル管理テーブルにおける各ファイルに対応する位置情報を地図上に描画して表示部４２に表示する（１０１）。
【０１１３】
表示部４２に表示された地図において位置情報の表示（上述の矢印表示や円形表示）をユーザが操作入力部４１により指示すると（２０２）、携帯機器１００はディスク４９における対応するファイルにアクセスして、所定位置から動画像信号の再生を行う（１０３）。これにより、ユーザは地図上の位置情報から動画像へのアクセスを容易に行うことができる。
【０１１４】
図１５は、本発明の実施の形態におけるディスク全体の内容を表示する処理の手順を示す図である。すなわち、この図１５は図１４における処理１０１の手順を示すものである。携帯機器１００は、ファイル管理テーブルに基づいてディスク４９に記録されているファイルの内容を動画オブジェクト単位（ＶＯＢＵ）毎に読み出して、符号化／復号回路２１において復号処理を行う（ステップＳ９１１）。これにより、動画像信号と関連付けられた位置情報が得られる。
【０１１５】
そして、このようにして得られた位置情報の範囲が既に所有している地図の範囲内に収まるものであるか否かを判断し（ステップＳ９１２）、もし所有している地図の範囲内に収まらないと判断した場合には必要な地図を通信装置６０を通じて取得する（ステップＳ９１３）。
【０１１６】
携帯機器１００は、地図上にその動画オブジェクト単位の位置情報を描画する（ステップＳ９１４）。そして、その動画オブジェクト単位がファイルの最後になるまで（ステップＳ９１５）、ステップＳ９１１乃至Ｓ９１４の処理を繰り返す。
【０１１７】
ファイルの最後まで処理を終えると（ステップＳ９１５）、携帯機器１００はファイル管理テーブルに保持されている題名８９３を抽出して地図上の位置情報に付する（ステップＳ９１６）。そして、次のファイルが存在する場合には（ステップＳ９１７）、次のファイルの処理に移る（ステップＳ９１８）。
【０１１８】
次のファイルが存在しない場合には（ステップＳ９１７）、携帯機器１００はこれまでに描画された位置情報を含む地図を表示部４２に表示する（ステップＳ９１９）。
【０１１９】
図１６は、本発明の実施の形態におけるファイルの内容を表示する処理の手順を示す図である。すなわち、この図１６は図１４における処理１０３の手順を示すものである。携帯機器１００は、指定されたファイルの所定画面から復号処理を行う（ステップＳ９３１）。これにより、動画像信号と関連付けられた位置情報が得られる。なお、ここで所定画面とは、矢印表示が指示された場合にはその位置に対応する画面であり、また円形表示によるファイルの場合は例えばファイルの先頭の画面とすることができる。
【０１２０】
そして、このようにして得られた位置情報の範囲が既に所有している地図の範囲内に収まるものであるか否かを判断し（ステップＳ９３２）、もし所有している地図の範囲内に収まらないと判断した場合には必要な地図を、通信装置６０を通じて取得する（ステップＳ９３３）。
【０１２１】
携帯機器１００は、地図上にその動画オブジェクト単位の位置情報を描画して（ステップＳ９３４）、その地図を動画像とともに表示部４２に表示する（ステップＳ９３５）。携帯機器１００は、これらの処理を動画像データの最後まで、もしくは、ユーザにより再生中止が指示されるまで繰り返す（ステップＳ９３６）。
【０１２２】
このように、本発明の実施の形態によれば、符号化／復号回路２１において動画像信号の単位画像および位置情報にタイムスタンプＰＴＳを付して両者を関連付けることにより、その位置情報に基づいて地図上に動画像の撮像された軌跡を表示させることができる。
【０１２３】
なお、本発明の実施の形態では、位置情報の取得の際にＧＰＳを用いる例について説明したが、ＧＰＳの代わりに、３つの基地局から電波を受信して３点測位を行うことにより位置情報を特定するようにしてもよい。この場合、距離の測定は、電波に乗った信号（例えば、画像のフィールド同期信号）が到達するまでに要した時間を測定することにより実現することができる。
【０１２４】
また、本発明の実施の形態は本発明を具現化するための一例を示したものであり、以下に示すように特許請求の範囲における発明特定事項とそれぞれ対応関係を有するが、これに限定されるものではなく本発明の要旨を逸脱しない範囲において種々の変形を施すことができる。
【０１２５】
すなわち、請求項１において、情報取得手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１２６】
また、請求項６において、撮像手段は例えばカメラ部１０に対応する。
【０１２７】
また、請求項７において、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。
【０１２８】
また、請求項９において、撮像手段は例えばカメラ部１０に対応する。また、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。また、送信手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１２９】
また、請求項１０において、符号化手段は例えば符号化／復号回路２１に対応する。
【０１３０】
また、請求項１１において、システム時刻付加手段は例えば多重化部２１４０に対応する。
【０１３１】
また、請求項１２において、撮像手段は例えばカメラ部１０に対応する。また、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。また、送受信手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１３２】
また、請求項１５において、他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する手順は例えば通信装置６０による処理に対応する。また、位置情報を含む地図を描画する手順は例えばステップＳ９３３に対応する。また、地図を動画像データと重ね合せて表示させる手順は例えばステップＳ９３５に対応する。
【０１３３】
また、請求項１６において、被写体を撮像して動画像を出力する手順は例えばカメラ部１０における処理に対応する。また、動画像が撮像されている間、所定の時間間隔で動画像が撮影された位置を示す位置情報を取得する手順は例えば通信装置６０による処理に対応する。また、動画像が撮像されている間、撮像された動画像データと位置情報とを送信する手順は例えば通信装置６０による処理に対応する。また、位置情報を含む地図を描画する手順は例えばステップＳ９３３に対応する。また、地図を動画像データと重ね合せて表示させる手順は例えばステップＳ９３５に対応する。
【０１３４】
なお、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。
【図面の簡単な説明】
【０１３５】
【図１】本発明の実施の形態における携帯機器１００の構成例を示す図である。
【図２】本発明の実施の形態における符号化／復号回路２１の符号化機能の一構成例を示す図である。
【図３】本発明の実施の形態におけるデータ構造の一例を示す図である。
【図４】本発明の実施の形態における符号化／復号回路２１の復号機能の一構成例を示す図である。
【図５】本発明の実施の形態におけるディスク４９に用いられるフォーマットの一例としてのＤＶＤ−Ｖｉｄｅｏフォーマットのデータ構造を示す図である。
【図６】本発明の実施の形態におけるファイル管理テーブルの一例を示す図である。
【図７】本発明の実施の形態における画面表示例を示す図である。
【図８】本発明の実施の形態における表示制御部３６の一構成例を示す図である。
【図９】本発明の実施の形態における重ね合せによる画面表示の一例を示す図である。
【図１０】本発明の実施の形態における重ね合せによる画面表示の他の例を示す図である。
【図１１】本発明の実施の形態における位置情報の履歴の表示形態について示す図である。
【図１２】本発明の実施の形態における位置情報の履歴の他の表示形態について示す図である。
【図１３】本発明の実施の形態において携帯機器同士でリアルタイムに表示を行う例を示す図である。
【図１４】本発明の実施の形態における携帯機器とユーザとのやりとりを説明するための図である。
【図１５】本発明の実施の形態におけるディスク全体の内容を表示する処理の手順を示す図である。
【図１６】本発明の実施の形態におけるファイルの内容を表示する処理の手順を示す図である。
【符号の説明】
【０１３６】
１０ カメラ部
１１ 光学ブロック
１２ カメラ制御部
１３ 信号変換器
１４ 撮像信号処理部
１５ 音声入力部
１６ 音声信号処理部
２０ 記録再生処理部
２１ 符号化／復号回路
２３ ディスクインターフェース
２４ 出力処理部
２５ バッファメモリ
２７〜２９ 出力端子
３０ 制御部
３１ 処理装置
３２ システムバス
３３ ＲＯＭ
３４ ＲＡＭ
３５ 操作入力インターフェース
３６ 表示制御部
３７ メモリカードインターフェース
３８ 通信インターフェース
３９ 時計回路
４１ 操作入力部
４２ 表示部
４３ メモリカード
４９ ディスク
５０ ＧＰＳモジュール
６０ 通信装置
１００ 携帯機器
２１０１〜２１０３、２１１９、２１２９、２１３９、２１６１〜２１６３、２１８１〜２１８３ バッファ
２１１０ 画像符号化部
２１１１ 並換え部
２１１２ 圧縮符号化部
２１１３ 可変長符号化部
２１２０ 音声符号化部
２１３０ 位置情報処理部
２１４０ 多重化部
２１５０ システム時刻発生部
２１６０ 分離部
２１７０ システム時刻保持部
２１７１ 画像復号部
２１７２ 音声復号部
２１７３ 位置情報処理部
２１９０ 制御部
【技術分野】
【０００１】
本発明は、電子機器に関し、特に時系列情報（例えば、動画像データ）の受信もしくは送信を行う電子機器、および、その処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
【背景技術】
【０００２】
従来より、ＧＰＳ（Global Positioning System）を利用して現在の位置情報を取得し、その位置情報と地図情報とを対応させることにより地図上に現在の位置を表示する機能を有する装置が知られている。近年、このようなＧＰＳ機能を内蔵したディジタルカメラ等の撮像装置が提案されており、そのような撮像装置では画像を撮像すると同時に撮像位置における位置情報を取得し、その画像と位置情報とを関連付けて記録するようになっている。
【０００３】
また、撮像装置の単体で、位置情報に基づいて地図上にアイコンを表示し、アイコンが選択されるとそのアイコンにリンクした画像を表示する撮像装置が提案されている（例えば、特許文献１参照。）。これによりユーザは撮像された画像がどの地点で撮像されたかを容易に知ることが可能となる。
【特許文献１】特開２００１−１８９９０５号公報（図８）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上述の従来技術では、静止画と位置情報とを関連付けることにより、位置情報に基づいて地図上にアイコンを表示して、そのアイコンにリンクした画像を表示している。これに対し、動画像のような時系列情報の場合にはその時系列情報に含まれる内容によって位置情報が変動する可能性があるため、その時系列情報に含まれる内容のそれぞれについて位置情報を把握する必要がある。
【０００５】
特に、カメラ付携帯電話や携帯端末などのように他の機器との間で通信を行いながら移動する電子機器においては、時系列情報に対する位置情報を適切に表示することが有用である。
【０００６】
そこで、本発明は、時系列情報を送受信する電子機器において時系列情報に対する位置情報を適切に表示することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、上記課題を解決するためになされたものであり、その第１の側面は、他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する情報取得手段と、上記動画像データを表示した動画プレーンと上記動画像データの表示に合致した上記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、他の機器によって撮像された動画像データをその位置情報を含む地図とともに一見して把握させるという作用をもたらす。
【０００８】
また、この第１の側面において、上記動画像データは符号化された動画像データであり、取得された上記位置情報は上記符号化された動画像データの単位画像に関連付けられていてもよい。これにより、符号化された動画像データの復号の際に地図上に動画像データの軌跡を表示させることを可能にするという作用をもたらす。
【０００９】
また、この第１の側面において、上記符号化された動画像データの単位画像および対応する上記位置情報に対して共通するシステム時刻が付加されていてもよい。これにより、システム時刻に基づく関連付けが行われ、復号の際に地図上に動画像データの位置情報を表示させることを可能にするという作用をもたらす。
【００１０】
また、この第１の側面において、上記情報取得手段が上記位置情報に対応する地図を取得していない場合には当該地図を取得するようにしてもよい。これにより、常に全ての地図を保有することなく、必要な地図を取得して表示させるという作用をもたらす。
【００１１】
また、この第１の側面において、上記情報取得手段が外部の基地局から電波により上記地図を受信するものであり、基地局の電波の強度に応じて上記地図を受信する基地局を切り換えるものであってもよい。これにより、通信状態に応じて地図の受信をさせるという作用をもたらす。
【００１２】
また、この第１の側面において、被写体を撮像して動画像を出力する撮像手段をさらに具備し、上記表示制御手段が上記撮像手段により撮像された第２の動画像データの表示制御をさらに行うようにしてもよい。これにより、当該電子機器において撮像された動画像をあわせて表示させるという作用をもたらす。
【００１３】
また、この第１の側面において、上記撮像手段により上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す第２の位置情報を取得する位置情報取得手段をさらに具備し、上記表示制御手段が上記撮像手段により撮像された上記第２の動画像データの表示に合致した上記第２の位置情報をさらに表示するようにしてもよい。これにより、当該電子機器の位置情報を含む地図をさらにあわせて表示させるという作用をもたらす。
【００１４】
また、この第１の側面において、上記地図プレーンには、上記位置情報に基づいて上記位置情報の移動の軌跡が描画されてもよい。
【００１５】
また、本発明の第２の側面は、被写体を撮像して動画像を出力する撮像手段と、上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す位置情報を取得する位置情報取得手段と、上記動画像が撮像されている間、撮像された動画像データと上記位置情報とを送信する送信手段と、上記動画像データを表示した動画プレーンと上記動画像データの表示に合致した上記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、当該電子機器において撮像された動画像をその位置情報を含む地図とともに他の機器において一見して把握させるという作用をもたらす。
【００１６】
また、この第２の側面において、上記動画像データを符号化する符号化手段をさらに具備し、符号化された動画像データの単位画像と取得された上記位置情報とを関連付けて上記送信手段が送信するようにしてもよい。これにより、符号化された動画像データの復号の際に地図上に動画像データの軌跡を表示させることを可能にするという作用をもたらす。
【００１７】
また、この第２の側面において、上記符号化された動画像データの単位画像および対応する上記位置情報に対して共通するシステム時刻を付加するシステム時刻付加手段をさらに具備してもよい。これにより、システム時刻に基づく関連付けが行われ、復号の際に地図上に動画像データの位置情報を表示させることを可能にするという作用をもたらす。
【００１８】
また、本発明の第３の側面は、被写体を撮像して動画像を出力する撮像手段と、上記撮像手段にて上記動画像が撮像されている間、所定の時間間隔で上記動画像が撮影された位置を示す第１の位置情報を取得する位置情報取得手段と、上記動画像が撮像されている間、撮像された第１の動画像データと上記第１の位置情報とを送信するとともに、他の機器によって撮像された第２の動画像データおよびその第２の動画像データが撮像された位置を示す第２の位置情報を受信する送受信手段と、受信した上記第２の動画像データを表示した動画プレーンと上記第２の動画像データの表示に合致した上記第２の位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段とを具備することを特徴とする電子機器である。これにより、各電子機器において撮像された動画像をその位置情報を含む地図とともに一見して把握させるという作用をもたらす。
【００１９】
また、この第３の側面において、上記表示制御手段が上記第１の動画像データの表示制御をさらに行うようにしてもよく、また、上記第１の位置情報の表示制御をさらに行うようにしてもよい。これにより、当該電子機器において撮像された動画像およびその位置情報をあわせて表示させるという作用をもたらす。
【発明の効果】
【００２０】
本発明によれば、時系列情報を送受信する電子機器において時系列情報に対する位置情報を適切に表示するという優れた効果を奏し得る。
【発明を実施するための最良の形態】
【００２１】
次に本発明の実施の形態について図面を参照して詳細に説明する。
【００２２】
図１は、本発明の実施の形態における携帯機器１００の構成例を示す図である。この携帯機器１００は、カメラ部１０と、記録再生処理部２０と、制御部３０とを備えている。また、この携帯機器１００にはＧＰＳモジュール５０および通信装置６０が接続されている。ここで、ＧＰＳモジュール５０は、複数のＧＰＳ衛星からの電波を受信することによって現在位置の緯度および経度を算出する。また、通信装置６０は、他の携帯機器と通信を行い、動画像データを含むデータの送受信を行う。これらＧＰＳモジュール５０および通信装置６０は、それぞれ高周波（ＲＦ：Radio Frequency）部、中間周波数（ＩＦ：Intermediate Frequency）部、および、ＡＤ（Analog-Digital）変換部などを含むが、これら各部の一部または全部を互いに共用するように構成してもよい。
【００２３】
カメラ部１０は、光学ブロック１１と、カメラ制御部１２と、信号変換器１３と、撮像信号処理部１４と、音声入力部１５と、音声信号処理部１６とを備える。光学ブロック１１は、内部に、被写体を撮像するためのレンズ群、絞り調整機構、フォーカス調整機構、ズーム機構、シャッター機構、フラッシュ機構、および、手ぶれ補正機構などを備える。カメラ制御部１２は、制御部３０から制御信号を受けて、光学ブロック１１に供給する制御信号を生成する。そして、生成した制御信号を光学ブロック１１に供給して、ズーム制御、シャッター制御、および、露出制御などの制御を行なう。
【００２４】
信号変換器１３は、例えばＣＣＤ（Charge Coupled Device）などの撮像素子により構成され、その結像面に、光学ブロック１１を通じた像が結像される。この信号変換器１３は、シャッター操作に応じて制御部３０から供給される画像取り込みタイミング信号を受けて、結像面に結像されている被写体像を撮像信号に変換し、撮像信号処理部１４に供給する。
【００２５】
撮像信号処理部１４は、制御部３０からの制御信号に基づいて、撮像信号についてのガンマ補正やＡＧＣ（Auto Gain Control）などの処理を行なうとともに、撮像信号をデジタル信号としての画像信号に変換する処理も行なう。音声入力部１５は、撮影時の被写体周辺の音声を収集する。この音声入力部１５からの音声信号は音声信号処理部１６に供給される。音声信号処理部１６は、制御部３０からの制御信号に基づいて、音声信号についての補正やＡＧＣなどの処理を行なうとともに、音声信号をデジタル信号に変換する処理も行なう。
【００２６】
記録再生処理部２０は、符号化／復号回路２１と、ディスクインターフェース２３と、出力処理部２４と、バッファメモリ２５とを備える。なお、この実施の形態では、記録再生の対象となる記録媒体としてディスク４９を想定しているが、これは一例であり、例えば後述するようにメモリカード４３などを利用してもよい。
【００２７】
符号化／復号回路２１は、カメラ部１０からの画像信号および音声信号やＧＰＳモジュール５０からの位置情報を符号化し多重化して圧縮データに変換する符号化機能を有する。一方、符号化／復号回路２１は、圧縮データから画像信号および音声信号や位置情報を分離して復号する復号機能を有する。これら圧縮データの形式として、例えば、ＭＰＥＧ−２ ＰＳ（プログラムストリーム）フォーマットを利用することができる。
【００２８】
なお、符号化／復号回路２１は、制御部３０からの制御信号に基づき、撮像信号処理部１４からの画像信号に対して、自動ホワイトバランス制御、露出補正制御、デジタルズーム倍率に応じた拡大制御などをさらに行なう。
【００２９】
ディスクインターフェース２３は、符号化／復号回路２１から圧縮データを受けてディスク４９に書き込む。また、ディスクインターフェース２３は、ディスク４９から圧縮データを読み出して符号化／復号回路２１に供給する。出力処理部２４は、制御部３０からの制御により、符号化／復号回路２１からの圧縮データを制御部３０や出力端子２７乃至２９に供給する。バッファメモリ２５は、例えばＳＤＲＡＭなどにより構成され、符号化／復号回路２１における符号化または復号のための作業領域として利用される。
【００３０】
制御部３０は、処理装置３１と、ＲＯＭ（Read Only Memory）３３と、ＲＡＭ（Random Access Memory）３４と、操作入力部４１を接続するための操作入力インターフェース３５と、表示部４２を接続するための表示制御部３６と、メモリカード４３を装填するためのメモリカードインターフェース３７と、通信装置６０を接続するための通信インターフェース３８と、時計回路３９とがシステムバス３２を介して接続されることにより構成される。
【００３１】
処理装置３１は制御部３０全体の処理を司るものであり、作業領域としてＲＡＭ３４を使用する。ＲＯＭ３３には、カメラ部１０を制御するためのプログラムや、画像信号や音声信号の記録制御および再生制御などを実行するためのプログラムが書き込まれている。
【００３２】
操作入力インターフェース３５に接続される操作入力部４１には、撮影モードと再生モードなどの他のモードとを切り換えるモード切り換えキー、ズーム調整キー、露出調整のためのキー、シャッターキー、動画撮影用キー、表示部４２における表示調整キーなどの複数のキーが設けられている。操作入力インターフェース３５は、操作入力部４１からの操作信号を処理装置３１に伝える。処理装置３１は、操作入力部４１においていずれのキーが操作されたかを判別し、その判別結果に応じた制御処理を行なう。
【００３３】
表示制御部３６に接続される表示部４２は、例えばＬＣＤ（Liquid Crystal Display）などにより構成され、処理装置３１の制御の下に、カメラ部１０からの画像信号や、ディスク４９から読み出された画像信号、または、通信装置６０により受信された画像信号を表示する。また、この表示部４２には、後述のように、画像信号に関連付けられた位置情報に基づいた地図が表示される。この位置情報としては、関連付けられた画像信号を取得した緯度および経度を示す。従って、この位置情報における緯度および経度により地図上に表示を行うことができる。
【００３４】
メモリカードインターフェース３７は、符号化／復号回路２１からの圧縮データをメモリカード４３に書き込む。また、メモリカードインターフェース３７は、メモリカード４３から圧縮データを読み出して符号化／復号回路２１に供給する。
【００３５】
時計回路３９は、年、月、日、時間、分、秒などを表わす時間情報を生成する。秒としては、画像のフレーム単位を計数することができるような小数点以下の精度の情報を発生するように、この時計回路３９は構成されている。
【００３６】
図２は、本発明の実施の形態における符号化／復号回路２１の符号化機能の一構成例を示す図である。この符号化機能は、バッファ２１０１乃至２１０３と、画像符号化部２１１０と、音声符号化部２１２０と、位置情報処理部２１３０と、バッファ２１１９、２１２９および２１３９と、多重化部２１４０と、システム時刻発生部２１５０とを備える。
【００３７】
この符号化／復号回路２１では、例えば、ＭＰＥＧ（Moving Picture Experts Group）方式による動画像の符号化が行われる。ＭＰＥＧ方式では、動画像データの単位画像である画像フレームの情報の相関を利用した予測符号化およびＤＣＴ（離散コサイン変換）を用いたデータ圧縮が行われる。その際、各フレームの画像はＩピクチャ（Intra-Picture）、Ｐピクチャ（Predictive-Picture）、および、Ｂピクチャ（Bidirectionally Predictive-Picture）の３種類の何れかに分類される。Ｉピクチャは画面内符号化によって得られる画面であり、原画面と同じ順序に符号化されるものである。また、Ｐピクチャは画面間順方向予測符号化によって得られる画面であり、これも原画面と同じ順序に符号化される。しかし、Ｂピクチャは双方向予測符号化によって得られる画面であり、ＩピクチャとＰピクチャとが符号化された後でＩピクチャとＰピクチャとの間に挿入されるＢピクチャが符号化されるため、原画面とは異なる順序で符号化される。そのため、Ｂピクチャは、双方向予測符号化の際に参照するＩピクチャやＰピクチャよりも後ろに位置するよう並び換えられる。
【００３８】
バッファ２１０１乃至２１０３は、符号化／復号回路２１の入力バッファとして機能するものであり、バッファ２１０１は撮像信号処理部１４からの画像信号を、バッファ２１０２は音声信号処理部１６からの音声信号を、バッファ２１０３はＧＰＳモジュール５０からの位置情報をそれぞれ保持する。そして、バッファ２１０１は画像信号を画像符号化部２１１０に、バッファ２１０２は音声信号を音声符号化部２１２０に、バッファ２１０３は位置情報を位置情報処理部２１３０にそれぞれ供給する。
【００３９】
画像符号化部２１１０は、並換え部２１１１と、圧縮符号化部２１１２と、可変長符号化部２１１３とを備える。この画像符号化部２１１０は、動画像データの単位画像として少なくとも１枚のＩピクチャと、複数枚のＰピクチャおよびＢピクチャからなるＧＯＰ（Group of Pictures）を構成し、このＧＯＰを一区切りとして圧縮処理する。
【００４０】
並換え部２１１１は、上述のように、Ｂピクチャの双方向予測符号化の際に参照されるＩピクチャやＰピクチャよりもそのＢピクチャの方が後ろに位置するように順序を並び換える。
【００４１】
圧縮符号化部２１１２は、Ｉピクチャについてはフレーム内符号化処理を行なってデータ圧縮を行ない、Ｐピクチャについては前方のＩピクチャまたはＰピクチャとの相関を利用したフレーム間予測符号化処理を行なってデータ圧縮を行ない、Ｂピクチャについては原画像における前方および後方のＩピクチャまたはＰピクチャとの相関を利用したフレーム間予測符号化処理を行なってデータ圧縮を行なう。なお、Ｐピクチャについては、フレーム内符号化処理を行なう画像部分も存在する。
【００４２】
可変長符号化部２１１３は、ハフマン符号などを用いた可変長符号化処理を行なう。この可変長符号化処理の結果は、バッファ２１１９に供給される。
【００４３】
音声符号化部２１２０は、オーディオフレームと呼ばれる所定量の音声信号を単位として圧縮符号化する。この圧縮符号化された音声信号は、バッファ２１２９に供給される。
【００４４】
位置情報処理部２１３０は、画像信号の各フレームに対応するタイミングで位置情報を出力する。この位置情報は、バッファ２１３９に供給される。
【００４５】
多重化部２１４０は、画像信号、音声信号、および、位置情報のそれぞれをパケット化して、それらを多重化する。その際、一または複数個のパケットに対してパックヘッダを付加することによりパックを構成する。この多重化部２１４０により生成された多重化データ（すなわち、ＭＰＥＧ−２ ＰＳ形式のデータ）は、ディスクインターフェース２３により、ディスク４９に書き込まれる。
【００４６】
システム時刻発生部２１５０は、システム時刻基準参照値（ＳＣＲ：System Clock Reference）を発生して、多重化部２１４０に供給する。このシステム時刻基準参照値は、多重化部２１４０により付加されるパックヘッダの一項目として記録される。すなわち、多重化データの各パックにこのシステム時刻基準参照値が含まれることになる。そして、このシステム時刻基準参照値は、復号の際にシステム時刻を同期させるために利用される。
【００４７】
また、このシステム時刻基準参照値は、次に説明するＰＴＳ（Presentation Time Stamp）およびＤＴＳ（Decoding Time Stamp）というタイムスタンプを付与する際の時間基準を与える。タイムスタンプＰＴＳは再生出力の時刻管理情報であり、そのタイムスタンプが付与された単位画像をいつ再生出力するかを示す。一方、タイムスタンプＤＴＳは復号の時刻管理情報であり、そのタイムスタンプが付与された単位画像をいつ復号するかを示す。
【００４８】
これらタイムスタンプＰＴＳおよびＤＴＳは、各パックにおけるパケットのパケットヘッダの一項目として記録される。上述のようにＩピクチャおよびＰピクチャをＢピクチャよりも先行して符号化ストリームに送出する必要があることから、復号する順序と再生出力する順序とが異なるため、それぞれタイムスタンプＰＴＳおよびＤＴＳを別個に設けて区別している。従って、タイムスタンプＰＴＳおよびＤＴＳが一致する場合にはタイムスタンプＤＴＳは省略され、タイムスタンプＰＴＳのみがパケットヘッダに記録される。
【００４９】
また、パケット容量制限により一つの単位画像が複数のパケットに分割される場合には、その先頭のパケットのパケットヘッダにのみタイムスタンプが記録され、それ以降の分割されたパケットのパケットヘッダにはタイムスタンプは記録されない。
【００５０】
なお、タイムスタンプＤＴＳは、順序の並び換えが発生する画像信号のパケットに付与されるものである。従って、順序の並び換えが行われない音声信号や位置情報の場合は、タイムスタンプＤＴＳは用いられず、タイムスタンプＰＴＳのみが付与される。
【００５１】
図３は、本発明の実施の形態におけるデータ構造の一例を示す図である。ここで、図３（ａ）は原画像の単位画像と位置情報との関係を示す図である。この例では、動画像７１２は１５フレームの単位画像（Ｂ１乃至Ｐ１５）によりＧＯＰ７１０を構成し、各単位画像に対応して位置情報７１１（ＰＯＳ１乃至１５）が取得されている。
【００５２】
単位画像７１２において、Ｉ３はＩピクチャを示し、Ｂ１、Ｂ２、Ｂ４、Ｂ５、Ｂ７、Ｂ８、Ｂ１０、Ｂ１１，Ｂ１３、Ｂ１４は、Ｂピクチャを示し、Ｐ６、Ｐ９、Ｐ１２、Ｐ１５はＰピクチャを示す。各サフィックス番号は、ピクチャタイプに関係なく、フレーム単位の連続番号を付与したものである。一方、位置情報７１１において、ＰＯＳ１乃至１５は各サフィックス番号の画像フレーム（単位画像）についての位置情報を示している。すなわち、位置情報ＰＯＳ１乃至１５のそれぞれは、サフィックス番号が同一である画像フレームについての位置情報となっている。
【００５３】
図３（ａ）の原画像の単位画像７１２は、画像符号化部２１１０の並換え部２１１１により図３（ｂ）の単位画像７２２に示すようなピクチャ順の並び換えがなされる。これに対して、位置情報の並び順は変更されないため、図３（ｂ）に示す位置情報７２１は、図３（ａ）の位置情報７１１と同じ並び順となっている。したがって、並び順だけでは各ピクチャと位置情報との対応関係がつかめない。
【００５４】
そこで、多重化部２１４０において、各単位画像および位置情報に対して再生出力の時間管理情報であるタイムスタンプＰＴＳが付加される。図３（ｂ）において、ＰＴＳ７２３は位置情報７２１のタイムスタンプＰＴＳを示し、ＰＴＳ７２４は単位画像７２２のタイムスタンプＰＴＳを示す。再生出力は元のフレーム順であり、各ピクチャのサフィックス番号とタイムスタンプＰＴＳ７２４とは等しくなっている。これらＰＴＳ７２３およびＰＴＳ７２４を対応させることにより、位置情報と各単位画像とが関連付けられ、位置情報がいずれの単位画像についてのものであるかの対応付けをすることができる。
【００５５】
また、単位画像７２２にはタイムスタンプＤＴＳ７２５が付加される。上述のとおり、このタイムスタンプＤＴＳは復号の時刻管理情報であり、圧縮データ（すなわち、ＭＰＥＧ−２ ＰＳ形式）では各単位画像はこのタイムスタンプＤＴＳの順に並んでいる。なお、タイムスタンプＤＴＳ７２５はタイムスタンプＰＴＳ７２４と一致する場合には付与されない。従って、この図３（ｂ）の例では、タイムスタンプＤＴＳ７２５はＩピクチャおよびＰピクチャに付与されるが、Ｂピクチャには付与されない。
【００５６】
図３（ｃ）は、図３（ｂ）の各データを多重化した後のデータ構造を示す図である。ナビゲーションパック７３１（NV_PCK）は、各ＧＯＰに対応するパック群の先頭に位置付けられ、データサーチインフォメーション（例えば、ジャンプ時にどのセクタまで飛ぶかを指示する制御情報）などの再生管理情報を保持する。なお、後述のＤＶＤフォーマットにおいては、一つのＧＯＰに対応するパック群を動画オブジェクト単位（ＶＯＢＵ：Video OBject Unit）という。
【００５７】
パック群７３２（V_PCK_I3）は、単位画像Ｉ３に相当する画像データを保持する。ＤＶＤフォーマットでは、１パック当り２０４８バイトの容量となっているため、画像データの容量がこれを超える場合には複数のパックに分割して保持される。パック７３３（P_PCK1）は、位置情報ＰＯＳ１に相当する位置情報を保持する。パック群７３４（V_PCK_B1）は、単位画像Ｂ１に相当する画像データを保持する。また、パック７３５（P_PCK2）は、位置情報ＰＯＳ２に相当する位置情報を保持する。
【００５８】
このように、符号化の際に並び換えられた順に従って単位画像が位置情報と多重化される。図３（ｃ）の例では、パック７３３をパック群７３２とパック群７３４との間に多重化しているが、これは単位画像同士または位置情報同士が入れ換わらなければよく、例えば、パック７３３をパック群７３２の前に配置したり、パック群７３４の後に配置するようにしてもよい。また、位置情報７２１をまとめて配置してもよい。
【００５９】
また、この図３の例では、単位画像の全てについてそれぞれの位置情報を保持するようにしているが、この単位画像と位置情報の対応は必ずしも１対１でなくてもよい。例えば、単位画像Ｎ（Ｎ：自然数）個おきに対応する位置情報を保持するようにしてもよく、また、１ＧＯＰ毎に位置情報を保持するようにしてもよい。
【００６０】
なお、この図３では音声信号については省略しているが、音声信号も併せて多重化できることは従来と同様である。
【００６１】
図４は、本発明の実施の形態における符号化／復号回路２１の復号機能の一構成例を示す図である。この復号機能は、分離部２１６０と、システム時刻保持部２１７０と、バッファ２１６１乃至２１６３と、画像復号部２１７１と、音声復号部２１７２と、位置情報処理部２１７３と、バッファ２１８１乃至２１８３と、制御部２１９０とを備える。
【００６２】
分離部２１６０は、多重化されたデータ（すなわち、ＭＰＥＧ−２ ＰＳ形式）から画像信号、音声信号、および、位置情報を分離する。これら画像信号、音声信号、および、位置情報は、バッファ２１６１乃至２１６３にそれぞれ保持される。また、分離部２１６０は、それぞれのパックからパックヘッダおよびパケットヘッダを分離し、それらのヘッダ情報をシステム時刻保持部２１７０および制御部２１９０に供給する。
【００６３】
システム時刻保持部２１７０は、復号機能に用いられるシステム時刻（ＳＴＣ：System Time Clock）を保持するものである。このシステム時刻保持部２１７０は、分離部２１６０から供給されたパックヘッダに含まれるシステム時刻基準参照値（ＳＣＲ）によって自己の保持するシステム時刻（ＳＴＣ）を設定する。このシステム時刻（ＳＴＣ）は、制御部２１９０に供給される。
【００６４】
画像復号部２１７１は、制御部２１９０の制御に従って、バッファ２１６１に保持された画像信号をタイムスタンプＤＴＳに従った順序で復号し、フレーム単位の画像データに復元してバッファ２１８１に出力する。音声復号部２１７２は、制御部２１９０の制御に従って、バッファ２１６２に保持された音声信号を復号し、音声データに復元してバッファ２１８２に出力する。位置情報処理部２１７３は、制御部２１９０の制御に従って、フレーム単位の画像データ（単位画像）についての位置情報を再生し、バッファ２１８３に出力する。
【００６５】
制御部２１９０は、分離部２１６０から供給されたヘッダ情報を解析し、タイムスタンプＰＴＳおよびＤＴＳを抽出して、画像信号、音声信号および位置情報の復号処理および再生出力を制御する。画像復号部２１７１では、単位画像はタイムスタンプＤＴＳに従って順序で復号されてバッファ２１８１に保持されるが、制御部２１９０による制御により、バッファ２１８１からタイムスタンプＰＴＳに従った順序で単位画像のデータが出力される。制御部２１９０は、バッファ２１８２および２１８３からの出力も同様にタイムスタンプＰＴＳに従った順序で供給されるように制御する。
【００６６】
また、制御部２１９０は、バッファ２１８１乃至２１８３から出力処理部２４に対して出力される画像信号、音声信号および位置情報のタイムスタンプＰＴＳが一致するようにタイミングを同期させるよう制御する。すなわち、システム時刻保持部２１７０から供給されるシステム時刻（ＳＴＣ）と各パケットヘッダにおけるタイムスタンプＰＴＳが一致するタイミングでバッファ２１８１乃至２１８３から出力処理部２４に対して画像信号、音声信号および位置情報が出力される。これにより、圧縮データにおいて並び順が異なっていた画像信号の単位画像と位置情報とが関連付けられて出力される。
【００６７】
図５は、本発明の実施の形態におけるディスク４９に用いられるフォーマットの一例としてのＤＶＤ−Ｖｉｄｅｏフォーマットのデータ構造を示す図である。ディスク４９の記録エリアは、ディスクの半径方向に見て、最内周側から順に、リードインエリア８０１、ファイル管理エリア８０２、データ記録エリア８０３、リードアウトエリア８０４の順に区分けされる。
【００６８】
ファイル管理エリア８０２は、リードインエリア側から、ＵＤＦ（Universal Disc Format）エリアおよびＶＭＧ（Video ManaGer）エリアを含む。これらＵＤＦエリアおよびＶＭＧエリアは、ＤＶＤに記録された画像データ等のファイルを管理する管理用情報の記録エリアである。ＵＤＦエリアは、ＵＤＦ規格とＩＳＯ９６６０規格をサポートすることにより、コンピュータでＤＶＤを読むことができるようにするためのものである。ＶＭＧエリアは、ＤＶＤ管理用情報の記録エリアである。
【００６９】
データ記録エリア８０３は、画像信号や音声信号等を記録するエリアであり、ビデオタイトルセット（ＶＴＳ：Video Title Set）８１１と呼ばれるデータ群を単位として、データの記録がなされる。ビデオタイトルセット８２０の各々は、ビデオタイトルセット情報（ＶＴＳＩ：Video Title Set Information）８２１と、ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ：Video Object Set for the VTSM）８２２と、ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ：Video Object Set for Titles in a VTS）８２３と、バックアップ（ＶＴＳＩ（ＢＵＰ）：Back-UP of VTSI）８２４とからなる。
【００７０】
ビデオタイトルセット情報（ＶＴＳＩ）８２１は、ビデオタイトルセットに対する制御情報である。ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ）８２２は、ビデオタイトルセット内の各種メニューのためのコンテンツである。ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３は、タイトルを再生するためのコンテンツである。バックアップ（ＶＴＳＩ（ＢＵＰ））８２４は、ビデオタイトルセット情報８２１のバックアップコピーである。
【００７１】
ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３には、ＭＰＥＧ−２ ＰＳフォーマットの圧縮データが、上述の動画オブジェクト単位（ＶＯＢＵ）を読み書き単位として記録される。このＶＯＢＵには、１ＧＯＰに相当する画像信号やそれに対応する音声信号等が含まれる。すなわち、ＤＶＤへのアクセスは、１ＧＯＰを単位として行われることになる。
【００７２】
動画オブジェクト単位（ＶＯＢＵ）は、複数個のパック８４１から構成される。パック８４１は、一般に一または複数個のパケットからなるが、この例では、一つのパックは一つのパケットを含むものとしている。すなわち、１パックは、パケットの前にパックヘッダ８５１を付加したものであり、さらにパケットはパケットヘッダ８５２とデータ本体であるパケットデータ８５３とを備える。なお、ＤＶＤ−Ｖｉｄｅｏフォーマットでは、１パックは２０４８バイト（１セクタに対応）と定められている。
【００７３】
パックヘッダ８５１は、パックの開始を示すパック開始コード８６１のほか、システム時刻基準参照値（ＳＣＲ）８６２を含む。このシステム時刻基準参照値（ＳＣＲ）８６２は、上述のようにシステム時刻発生部２１５０に基づくものである。なお、ＭＰＥＧ−２ ＰＳでは２７ＭＨｚで時刻を示すため、このシステム時刻基準参照値（ＳＣＲ）８６２は、パックヘッダ８５１においては４２ビットで表現される。
【００７４】
パケットヘッダ８５２は、プライベート１・パケットに沿ったものであり、パケット開始コード８７１と、フラグ８７３と、ＰＴＳ８７５と、ＤＴＳ８７６と、その他のフィールド８７７を備える。パケット開始コード８７１はパケットの開始を示すものであり、ストリームを識別するストリーム識別子を含む。フラグ８７３は、後続のＰＴＳ８７５およびＤＴＳ８７６の存在を示すフラグを含む。すなわち、「１０」でＰＴＳ８７５のみ、「１１」でＰＴＳ８７５およびＤＴＳ８７６が存在することを示す。
【００７５】
ＰＴＳ８７５およびＤＴＳ８７６は上述のように、それぞれ再生出力のタイミングおよび復号のタイミングを示すタイムスタンプである。制御部２１９０は、これらＰＴＳ８７５およびＤＴＳ８７６を参照することにより復号および再生出力を制御する。なお、これらＰＴＳ８７５およびＤＴＳ８７６は、パケットヘッダ８５２においてはそれぞれ３３ビットで表現される。
【００７６】
なお、ここでは、プライベート１・パケットを適用した例について説明したが、プライベート２・パケットを適用しても構わない。例えば、複数の位置情報をそれぞれのＰＴＳと対にして一つのパックに格納するようにしても構わない。また、ここでは、ＤＶＤ−Ｖｉｄｅｏフォーマットの適用例について説明したが、他のフォーマットを適用しても構わない。例えば、ＤＶＤ−ＶＲフォーマットにおけるＶＯＢＵの先頭に配置されるパックＲＤＩ＿ＰＣＫ内のＲＤＩパケットのＲＤＩ・データ領域内に位置情報を保持するようにしてもよい。
【００７７】
図６は、本発明の実施の形態におけるファイル管理テーブルの一例を示す図である。このファイル管理テーブルは、例えばＤＶＤ−Ｖｉｄｅｏフォーマットにおけるファイル管理エリア８０２に保持するようにしてもよく、また、データ記録エリア８０３の所定位置もしくは所定ファイル名として保持するようにしてもよい。このファイル管理テーブルは、ディスク４９に記録されている各ファイルに関する属性データとして、作成日８９１と、更新日８９２と、題名８９３と、キーワード８９４と、開始アドレス８９５とを含む。
【００７８】
作成日８９１は、対応するファイルが作成された日を表す。また、更新日８９２は、対応するファイルが更新された日を表す。題名８９３は、対応するファイルの内容を識別するためにユーザによって付与されるものである。キーワード８９４は、対応するファイルの検索に役立てるためにユーザによって任意に付与されるものである。これらの内容は検索の際の絞込み条件として利用することができる。
【００７９】
開始アドレス８９５は、対応するファイルの開始アドレスを示すものであり、ディスク４９内のセクタまたはアドレス等を示す。これにより、ファイル管理テーブルと各ファイルとの対応付けがなされる。
【００８０】
このファイル管理テーブルを設けることにより、ディスク４９上に記録されているファイルの内容を効率良く検索することができ、ディスク４９のシークに要する時間を短縮することができる。このファイル管理テーブルを使用しない場合にはディスク４９上のファイルを逐一検索する必要があるが、これらをまとめてファイル管理テーブルにより管理することによって検索に要する時間を短縮することができる。
【００８１】
図７は、本発明の実施の形態における画面表示例を示す図である。この画面表示例は、あるディスク４９の内容を地図上に表示したものである。このディスク４９には２つのファイルが含まれていることを想定して、それらの撮影の際の位置の履歴が地図上の位置情報３１１および３１２として表示部４２に表示された例を示している。題名３１３および３１４は、位置情報３１１および３１２により表されるファイルのそれぞれの題名を示している。
【００８２】
この表示例において、位置情報３１１の何れかの部分について、例えばマウスのクリック等のような指示が操作入力部４１によりなされると、この位置情報３１１に対応するファイルの再生が行われる。例えば、位置情報３１１の開始位置（矢印の根元）がクリックされると、この位置情報３１１に対応するファイルの最初から再生が行われる。また、位置情報３１１の途中部分がクリックされると、クリックされた位置に対応する場面（単位画像）から動画像信号の再生が行われる。
【００８３】
また、位置情報３１２には開始位置から終了位置までの間にアイコン３１５乃至３１７が表示されている。これらアイコン３１５乃至３１７は、対応する位置における代表画像を示すものであり、例えば対応する位置のＧＯＰにおけるＩピクチャを代表画像として用いることができる。これらアイコン３１５乃至３１７が指示されると、そのアイコンに対応する場面（単位画像）から動画像信号の再生が行われる。
【００８４】
なお、アイコンの表示に関しては、所定の間隔で表示する方法、アイコン数を指定して等間隔となる位置で表示する方法、指定された任意の位置で表示する方法等、種々の方法が考えられる。
【００８５】
このように位置情報を地図上に表示することにより、記録媒体としてのディスクに記録された動画像を、地図という親しみのある画像により管理することができ、ユーザの使い勝手を向上することができる。これにより、動画像の頭出しが容易に行われるようになる。
【００８６】
図８は、本発明の実施の形態における表示制御部３６の一構成例を示す図である。表示部４２には、図７のような地図が表示されるだけでなく、動画像信号の再生画面も表示される。その際、地図の表示と動画像の表示とを片方ずつ別々に表示するだけでなく、同時に表示することが望ましい。そこで、表示制御部３６に、重ね合せ回路３６１を設けて、地図に関して描画された地図プレーン３４１と動画像を表示した動画プレーン３４２とを重ね合せた上で表示部４２に表示する。その表示例が図９および図１０である。
【００８７】
図９は、本発明の実施の形態における重ね合せによる画面表示の一例を示す図である。この表示例では、動画プレーン３４２の上に地図プレーン３４１が重ねられて表示されている。
【００８８】
地図プレーン３４１は、動画プレーン３４２において再生中の動画がどのような道筋で撮影されたかを地図上の矢印により表示している。この表示例では、ファイル中に記録されている動画像データ全体の道筋が地図プレーン３４１における矢印の始点（根元）から終点（先端）にかけて表示されており、矢印内の模様の変化により現在の再生位置が示されている。すなわち、地図プレーン３４１における矢印の模様の区切りの位置が現在の再生位置ということになる。これにより、ユーザは、動画像がどのような道筋で撮像されたかを容易に知ることができ、また現在再生中の画面が全体のどの位置にあるのかを視覚的に把握することが可能となる。
【００８９】
なお、この表示例では動画像データ全体の道筋を地図プレーン３４１上の矢印により表しているが、このように動画像データ全体を表示せずに実際に再生された部分を矢印により表示するようにしてもよい。この場合、動画プレーン３４２に動画が再生されるのと同期して、地図プレーン３４１上の矢印が伸びていくことになる。
【００９０】
図１０は、本発明の実施の形態における重ね合せによる画面表示の他の例を示す図である。この表示例では、地図プレーン３４１の上に動画プレーン３４２が重ねられて表示されている。操作入力部４１による指示により、図９の表示例と図１０の表示例との間で相互に表示の切換えが可能である。例えば、図９の表示において地図の詳細表示が必要となった場合には図１０の表示例への切換えを指示することが考えられる。
【００９１】
なお、この図１０の表示例においては、再生位置を示す地図プレーン３４１上の矢印が画面の左上に配置されているが、例えば、この矢印の先端が画面の中心に配置されるように表示してもよい。上述のように動画が再生されるのと同期して矢印が伸びていくようにした場合、そのままでは地図プレーン３４１の下に矢印が隠れてしまうおそれがあるが、矢印の先端が常に画面の中心に配置されるように表示すれば地図プレーン３４１の下に矢印が隠れるおそれもなくなり、ユーザが現在再生されている位置を容易に把握することができる。
【００９２】
図１１は、本発明の実施の形態における位置情報の履歴の表示形態について示す図である。動画像を撮影する場合、それぞれの内容の性質によって示す履歴が大きく異なってくる可能性がある。例えば、図１１の「北海道旅行」や「九州旅行」のように移動範囲が広い場合には、広域地図においても撮影された道筋を十分に表現することができる。一方、比較的局所的な範囲に留まっている場合には広域地図では撮影された道筋を十分に表現することができなくなる。
【００９３】
そこで、図１１の「散歩１」等のように、表示されている地図の領域に比較して道筋が狭い領域に閉じている場合には、矢印により道筋を表さずに、円形の表示を行う。この円形表示の大きさは、移動距離の最大値に比例するように設定することができる。また、その領域に含まれるファイルの数に応じた大きさに設定するようにしてもよい。なお、この円形表示に対する題名の表示は、その領域が操作入力部４１により選択された際（例えばマウスポインタがその領域の上に存在する際）にのみ表示するようにしてもよい。
【００９４】
円形表示を行うか否かの基準として、例えば、縦Ｍ×横Ｎの地図において、縦方向の移動範囲の最大幅がＭ／ｋより小さく、且つ、横方向の移動距離の最大幅がＮ／ｋより小さい場合には履歴を円形で表示するようにする。ここで、基準となるｋには例えば１０乃至２０程度の値を選択することができる。また、縦方向の移動距離の最大幅の二乗と横方向の移動距離の最大幅の二乗とを加えた値が（Ｍ２＋Ｎ２）／ｋ２より小さい場合に履歴を円形で表示するようにしてもよい。
【００９５】
図１２は、本発明の実施の形態における位置情報の履歴の他の表示形態について示す図である。図１１の地図において、「野球観戦、ハイキング、結婚式」と表示された円形部分が操作入力部４１により指示（例えばマウスによるクリック）されると、その拡大地図として図１２のような地図が表示される。
【００９６】
この表示例では、例えば「ハイキング」のように地図の領域を基準として道筋が比較的広い範囲にあるものは、矢印により位置情報が表示されている。一方、例えば「野球観戦」や「結婚式」のようにほぼ定位置または局所領域に閉じている場合には図１１の場合と同様に円形に表示される。この円形表示を行うか否かの基準も図１１の場合と同様である。
【００９７】
この図１２の場合、矢印表示または円形表示のそれぞれは一つのファイルに対応しているため、それら表示の何れかが操作入力部４１により指示されると、対応するファイルの再生が開始する。矢印表示が指示（クリック）された場合は図７の場合と同様であり、クリックされた位置に対応する場面（単位画像）からファイル内の動画像信号の再生が行われる。一方、円形表示が指示された場合はそのファイルの所定位置（例えば先頭）から動画像信号の再生が行われる。
【００９８】
このように、本発明の実施の形態では、動画像データを含むファイルを地図上の位置情報により視覚的に管理することができる。
【００９９】
図１３は、本発明の実施の形態において携帯機器同士でリアルタイムに表示を行う例を示す図である。本発明によれば、ディスク４９に記録された符号化データを再生するだけでなく、符号化されたデータ（すなわち、ＭＰＥＧ−２ ＰＳ）を通信装置６０を通じてリアルタイムでやりとりすることができる。
【０１００】
携帯機器１１１と１２１との間で通信を行っている際、携帯機器１１１の画面には、携帯機器１２１により撮像された動画像１１２が表示されるとともに互いの現在位置を含む地図１１３が表示される。この地図１１３には、説明表示１１４にも示されているように、携帯機器１１１および１２１の現在位置を示すマークが表示される。また、通信の途中で携帯機器１１１または１２１が移動した場合にはその軌跡が太線により表示される。すなわち、移動軌跡を表す太線の先端に現在位置を示すマークが表示されることになる。
【０１０１】
携帯機器１２１の画面にも同様に、携帯機器１１１により撮像された動画像１２２が表示されるとともに互いの現在位置を含む地図１２３が表示される。これにより、携帯機器１１１および１２１のユーザは互いに通信相手の表情を認識するとともに、互いの位置関係を容易に把握することができる。
【０１０２】
なお、携帯機器の画面には相手に携帯機器からの動画像だけでなく、自身の携帯機器による撮像画像（例えば、携帯機器１２１における撮像画像１２５）を表示して、その写り具合を確認できるようにしてもよい。また、図１３では動画像を大きく表示するようにしているが、図１０の例のように地図を大きく表示するよう適宜切換えるようにしてもよく、また、地図のみを表示するようにしてもよい。
【０１０３】
このように、本発明の実施の形態では、動画像データを含むファイルを記録媒体に記録して利用するだけでなく、通信装置６０を通じて位置情報を動画像信号と関連付けて送信することにより、通信相手の地図上の位置関係をリアルタイムに把握することができる。
【０１０４】
次に、本発明の実施の形態における地図の取得方法について説明する。
【０１０５】
本発明のように表示すべき地図の範囲が不確定な場合、どの範囲までの地図を用意するべきかは事前にはわからない。ユーザの移動範囲を予測することは不可能だからである。従って、日本国内で使用される携帯機器であれば、日本全域の細部にわたる地図を用意する必要がある。これは予め各携帯機器に具備するようにしてもよいが、以下のような方法により外部から通信を介して取得することも可能である。
【０１０６】
ここでは説明を簡単にするために、基地局Ａが発する電波領域Ａから基地局Ｂが発する電波領域Ｂまで移動する場合を考える。本発明の実施の形態における携帯機器を持ったユーザが基地局Ａの発する電波領域Ａに入った場合、基地局Ａとの通信を確立し接続する。その際、基地局Ａからは、基地局Ａから発せられる電波の到達範囲よりもやや広範囲の地図データが携帯機器に送信され、機器は地図データを受信する。次に、基地局ＡおよびＢからの電波が混在する電波領域Ｃに移動した場合、携帯機器は、基地局Ａとの通信を行いながら、基地局Ｂの電波を受信する。基地局Ｂの電波の強さがＡより強くなると、電波チャネルを切り替えるハンドオーバーが発生し、通信を基地局Ｂに切り替える。そして、基地局Ｂから基地局Ａから発せられる電波の到達範囲よりもやや広範囲の地図データが携帯機器に送信され、携帯機器は地図データを受信する。
【０１０７】
また、地図の種類としては日本全図のような広域地図から道路地図のような細部を網羅する地図まで段階に応じた地図を想定することができる。そして、同じ階層の地図は互いに境界領域が重なるようにやや広めの範囲を有するものとしておき、重複する部分については、携帯機器は後から取得した地図における重複部分を削除してマッチングを行い、マッチング終了後に新たな地図としてメモリに記録する。
【０１０８】
通信により地図を取得する場合、撮像の直前の状態であるスタンバイ状態になったときに受信するようにしてもよく、また、携帯機器の電源が通電している状態には常に受信するようにして不要な地図は適宜廃棄するようにしてもよい。後者の場合には、受信された地図を一時記録するメモリ（例えば、ＲＡＭ３４）の領域に応じて随時上書きするようにすればよい。
【０１０９】
なお、地図にはその地図の範囲における名所案内に関する情報を含ませるようにしてもよい。その場合、その名所に最も近い位置情報を有するファイルについてファイル管理テーブルのキーワード８９４にその名称を登録しておけば、後日の検索の際に利用することができる。また、名所案内の動画像データを含むファイルを地図と併せて受信して、別個のファイルとしてファイル管理テーブルに登録するようにしてもよい。この場合、地図上の名所案内のアイコン等をクリックすることにより、名所案内の動画像データが再生されるようにすることができる。
【０１１０】
なお、本発明の実施の形態では、位置情報を符号化データの内部に保持しているが、位置情報の範囲を予めファイル管理テーブルに登録しておくようにしても構わない。
【０１１１】
次に、本発明の実施の形態における動作について説明する。
【０１１２】
図１４は、本発明の実施の形態における携帯機器とユーザとのやりとりを説明するための図である。まず、本発明の実施の形態における位置情報を含むディスク４９をユーザが携帯機器１００に挿入するか、もしくは、ディスク４９のマウントまたはリロードを操作入力部４１により要求すると（２０１）、携帯機器１００は図６で説明したファイル管理テーブルをディスク４９から読み出して、このファイル管理テーブルにおける各ファイルに対応する位置情報を地図上に描画して表示部４２に表示する（１０１）。
【０１１３】
表示部４２に表示された地図において位置情報の表示（上述の矢印表示や円形表示）をユーザが操作入力部４１により指示すると（２０２）、携帯機器１００はディスク４９における対応するファイルにアクセスして、所定位置から動画像信号の再生を行う（１０３）。これにより、ユーザは地図上の位置情報から動画像へのアクセスを容易に行うことができる。
【０１１４】
図１５は、本発明の実施の形態におけるディスク全体の内容を表示する処理の手順を示す図である。すなわち、この図１５は図１４における処理１０１の手順を示すものである。携帯機器１００は、ファイル管理テーブルに基づいてディスク４９に記録されているファイルの内容を動画オブジェクト単位（ＶＯＢＵ）毎に読み出して、符号化／復号回路２１において復号処理を行う（ステップＳ９１１）。これにより、動画像信号と関連付けられた位置情報が得られる。
【０１１５】
そして、このようにして得られた位置情報の範囲が既に所有している地図の範囲内に収まるものであるか否かを判断し（ステップＳ９１２）、もし所有している地図の範囲内に収まらないと判断した場合には必要な地図を通信装置６０を通じて取得する（ステップＳ９１３）。
【０１１６】
携帯機器１００は、地図上にその動画オブジェクト単位の位置情報を描画する（ステップＳ９１４）。そして、その動画オブジェクト単位がファイルの最後になるまで（ステップＳ９１５）、ステップＳ９１１乃至Ｓ９１４の処理を繰り返す。
【０１１７】
ファイルの最後まで処理を終えると（ステップＳ９１５）、携帯機器１００はファイル管理テーブルに保持されている題名８９３を抽出して地図上の位置情報に付する（ステップＳ９１６）。そして、次のファイルが存在する場合には（ステップＳ９１７）、次のファイルの処理に移る（ステップＳ９１８）。
【０１１８】
次のファイルが存在しない場合には（ステップＳ９１７）、携帯機器１００はこれまでに描画された位置情報を含む地図を表示部４２に表示する（ステップＳ９１９）。
【０１１９】
図１６は、本発明の実施の形態におけるファイルの内容を表示する処理の手順を示す図である。すなわち、この図１６は図１４における処理１０３の手順を示すものである。携帯機器１００は、指定されたファイルの所定画面から復号処理を行う（ステップＳ９３１）。これにより、動画像信号と関連付けられた位置情報が得られる。なお、ここで所定画面とは、矢印表示が指示された場合にはその位置に対応する画面であり、また円形表示によるファイルの場合は例えばファイルの先頭の画面とすることができる。
【０１２０】
そして、このようにして得られた位置情報の範囲が既に所有している地図の範囲内に収まるものであるか否かを判断し（ステップＳ９３２）、もし所有している地図の範囲内に収まらないと判断した場合には必要な地図を、通信装置６０を通じて取得する（ステップＳ９３３）。
【０１２１】
携帯機器１００は、地図上にその動画オブジェクト単位の位置情報を描画して（ステップＳ９３４）、その地図を動画像とともに表示部４２に表示する（ステップＳ９３５）。携帯機器１００は、これらの処理を動画像データの最後まで、もしくは、ユーザにより再生中止が指示されるまで繰り返す（ステップＳ９３６）。
【０１２２】
このように、本発明の実施の形態によれば、符号化／復号回路２１において動画像信号の単位画像および位置情報にタイムスタンプＰＴＳを付して両者を関連付けることにより、その位置情報に基づいて地図上に動画像の撮像された軌跡を表示させることができる。
【０１２３】
なお、本発明の実施の形態では、位置情報の取得の際にＧＰＳを用いる例について説明したが、ＧＰＳの代わりに、３つの基地局から電波を受信して３点測位を行うことにより位置情報を特定するようにしてもよい。この場合、距離の測定は、電波に乗った信号（例えば、画像のフィールド同期信号）が到達するまでに要した時間を測定することにより実現することができる。
【０１２４】
また、本発明の実施の形態は本発明を具現化するための一例を示したものであり、以下に示すように特許請求の範囲における発明特定事項とそれぞれ対応関係を有するが、これに限定されるものではなく本発明の要旨を逸脱しない範囲において種々の変形を施すことができる。
【０１２５】
すなわち、請求項１において、情報取得手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１２６】
また、請求項６において、撮像手段は例えばカメラ部１０に対応する。
【０１２７】
また、請求項７において、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。
【０１２８】
また、請求項９において、撮像手段は例えばカメラ部１０に対応する。また、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。また、送信手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１２９】
また、請求項１０において、符号化手段は例えば符号化／復号回路２１に対応する。
【０１３０】
また、請求項１１において、システム時刻付加手段は例えば多重化部２１４０に対応する。
【０１３１】
また、請求項１２において、撮像手段は例えばカメラ部１０に対応する。また、位置情報取得手段は例えばＧＰＳモジュール５０に対応する。また、送受信手段は例えば通信装置６０に対応する。また、表示制御手段は例えば表示制御部３６に対応する。
【０１３２】
また、請求項１５において、他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する手順は例えば通信装置６０による処理に対応する。また、位置情報を含む地図を描画する手順は例えばステップＳ９３３に対応する。また、地図を動画像データと重ね合せて表示させる手順は例えばステップＳ９３５に対応する。
【０１３３】
また、請求項１６において、被写体を撮像して動画像を出力する手順は例えばカメラ部１０における処理に対応する。また、動画像が撮像されている間、所定の時間間隔で動画像が撮影された位置を示す位置情報を取得する手順は例えば通信装置６０による処理に対応する。また、動画像が撮像されている間、撮像された動画像データと位置情報とを送信する手順は例えば通信装置６０による処理に対応する。また、位置情報を含む地図を描画する手順は例えばステップＳ９３３に対応する。また、地図を動画像データと重ね合せて表示させる手順は例えばステップＳ９３５に対応する。
【０１３４】
なお、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。
【図面の簡単な説明】
【０１３５】
【図１】本発明の実施の形態における携帯機器１００の構成例を示す図である。
【図２】本発明の実施の形態における符号化／復号回路２１の符号化機能の一構成例を示す図である。
【図３】本発明の実施の形態におけるデータ構造の一例を示す図である。
【図４】本発明の実施の形態における符号化／復号回路２１の復号機能の一構成例を示す図である。
【図５】本発明の実施の形態におけるディスク４９に用いられるフォーマットの一例としてのＤＶＤ−Ｖｉｄｅｏフォーマットのデータ構造を示す図である。
【図６】本発明の実施の形態におけるファイル管理テーブルの一例を示す図である。
【図７】本発明の実施の形態における画面表示例を示す図である。
【図８】本発明の実施の形態における表示制御部３６の一構成例を示す図である。
【図９】本発明の実施の形態における重ね合せによる画面表示の一例を示す図である。
【図１０】本発明の実施の形態における重ね合せによる画面表示の他の例を示す図である。
【図１１】本発明の実施の形態における位置情報の履歴の表示形態について示す図である。
【図１２】本発明の実施の形態における位置情報の履歴の他の表示形態について示す図である。
【図１３】本発明の実施の形態において携帯機器同士でリアルタイムに表示を行う例を示す図である。
【図１４】本発明の実施の形態における携帯機器とユーザとのやりとりを説明するための図である。
【図１５】本発明の実施の形態におけるディスク全体の内容を表示する処理の手順を示す図である。
【図１６】本発明の実施の形態におけるファイルの内容を表示する処理の手順を示す図である。
【符号の説明】
【０１３６】
１０ カメラ部
１１ 光学ブロック
１２ カメラ制御部
１３ 信号変換器
１４ 撮像信号処理部
１５ 音声入力部
１６ 音声信号処理部
２０ 記録再生処理部
２１ 符号化／復号回路
２３ ディスクインターフェース
２４ 出力処理部
２５ バッファメモリ
２７〜２９ 出力端子
３０ 制御部
３１ 処理装置
３２ システムバス
３３ ＲＯＭ
３４ ＲＡＭ
３５ 操作入力インターフェース
３６ 表示制御部
３７ メモリカードインターフェース
３８ 通信インターフェース
３９ 時計回路
４１ 操作入力部
４２ 表示部
４３ メモリカード
４９ ディスク
５０ ＧＰＳモジュール
６０ 通信装置
１００ 携帯機器
２１０１〜２１０３、２１１９、２１２９、２１３９、２１６１〜２１６３、２１８１〜２１８３ バッファ
２１１０ 画像符号化部
２１１１ 並換え部
２１１２ 圧縮符号化部
２１１３ 可変長符号化部
２１２０ 音声符号化部
２１３０ 位置情報処理部
２１４０ 多重化部
２１５０ システム時刻発生部
２１６０ 分離部
２１７０ システム時刻保持部
２１７１ 画像復号部
２１７２ 音声復号部
２１７３ 位置情報処理部
２１９０ 制御部
【特許請求の範囲】
【請求項１】
他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する情報取得手段と、
前記動画像データを表示した動画プレーンと前記動画像データの表示に合致した前記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項２】
前記動画像データは符号化された動画像データであり、取得された前記位置情報は前記符号化された動画像データの単位画像に関連付けられていることを特徴とする請求項１記載の電子機器。
【請求項３】
前記符号化された動画像データの単位画像および対応する前記位置情報に対して共通するシステム時刻が付加されていることを特徴とする請求項２記載の電子機器。
【請求項４】
前記情報取得手段は、前記位置情報に対応する地図を取得していない場合には当該地図を取得することを特徴とする請求項１記載の電子機器。
【請求項５】
前記情報取得手段は外部の基地局から電波により前記地図を受信するものであり、基地局の電波の強度に応じて前記地図を受信する基地局を切り換えることを特徴とする請求項４記載の電子機器。
【請求項６】
被写体を撮像して動画像を出力する撮像手段をさらに具備し、
前記表示制御手段は、前記撮像手段により撮像された第２の動画像データの表示制御をさらに行うことを特徴とする請求項１記載の電子機器。
【請求項７】
前記撮像手段により前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す第２の位置情報を取得する位置情報取得手段をさらに具備し、
前記表示制御手段は、前記撮像手段により撮像された前記第２の動画像データの表示に合致した前記第２の位置情報をさらに表示することを特徴とする請求項６記載の電子機器。
【請求項８】
前記地図プレーンには、前記位置情報に基づいて前記位置情報の移動の軌跡が描画されることを特徴とする請求項１記載の電子機器。
【請求項９】
被写体を撮像して動画像を出力する撮像手段と、
前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す位置情報を取得する位置情報取得手段と、
前記動画像が撮像されている間、撮像された動画像データと前記位置情報とを送信する送信手段と、
前記動画像データを表示した動画プレーンと前記動画像データの表示に合致した前記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項１０】
前記動画像データを符号化する符号化手段をさらに具備し、
前記送信手段は、符号化された動画像データの単位画像と取得された前記位置情報とを関連付けて送信することを特徴とする請求項９記載の電子機器。
【請求項１１】
前記符号化された動画像データの単位画像および対応する前記位置情報に対して共通するシステム時刻を付加するシステム時刻付加手段をさらに具備することを特徴とする請求項１０記載の電子機器。
【請求項１２】
被写体を撮像して動画像を出力する撮像手段と、
前記撮像手段にて前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す第１の位置情報を取得する位置情報取得手段と、
前記動画像が撮像されている間、撮像された第１の動画像データと前記第１の位置情報とを送信するとともに、他の機器によって撮像された第２の動画像データおよびその第２の動画像データが撮像された位置を示す第２の位置情報を受信する送受信手段と、
受信した前記第２の動画像データを表示した動画プレーンと前記第２の動画像データの表示に合致した前記第２の位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項１３】
前記表示制御手段は、前記第１の動画像データの表示制御をさらに行うことを特徴とする請求項１２記載の電子機器。
【請求項１４】
前記表示制御手段は、前記第１の位置情報の表示制御をさらに行うことを特徴とする請求項１２記載の電子機器。
【請求項１５】
他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する手順と、
前記位置情報を含む地図を描画する手順と、
前記地図を前記動画像データと重ね合せて表示させる手順と
を具備することを特徴とする動画表示方法。
【請求項１６】
被写体を撮像して動画像を出力する手順と、
前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す位置情報を取得する手順と、
前記動画像が撮像されている間、撮像された動画像データと前記位置情報とを送信する手順と、
前記位置情報を含む地図を描画する手順と、
前記地図を前記動画像データと重ね合せて表示させる手順と
を具備することを特徴とする動画表示方法。
【請求項１】
他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する情報取得手段と、
前記動画像データを表示した動画プレーンと前記動画像データの表示に合致した前記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項２】
前記動画像データは符号化された動画像データであり、取得された前記位置情報は前記符号化された動画像データの単位画像に関連付けられていることを特徴とする請求項１記載の電子機器。
【請求項３】
前記符号化された動画像データの単位画像および対応する前記位置情報に対して共通するシステム時刻が付加されていることを特徴とする請求項２記載の電子機器。
【請求項４】
前記情報取得手段は、前記位置情報に対応する地図を取得していない場合には当該地図を取得することを特徴とする請求項１記載の電子機器。
【請求項５】
前記情報取得手段は外部の基地局から電波により前記地図を受信するものであり、基地局の電波の強度に応じて前記地図を受信する基地局を切り換えることを特徴とする請求項４記載の電子機器。
【請求項６】
被写体を撮像して動画像を出力する撮像手段をさらに具備し、
前記表示制御手段は、前記撮像手段により撮像された第２の動画像データの表示制御をさらに行うことを特徴とする請求項１記載の電子機器。
【請求項７】
前記撮像手段により前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す第２の位置情報を取得する位置情報取得手段をさらに具備し、
前記表示制御手段は、前記撮像手段により撮像された前記第２の動画像データの表示に合致した前記第２の位置情報をさらに表示することを特徴とする請求項６記載の電子機器。
【請求項８】
前記地図プレーンには、前記位置情報に基づいて前記位置情報の移動の軌跡が描画されることを特徴とする請求項１記載の電子機器。
【請求項９】
被写体を撮像して動画像を出力する撮像手段と、
前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す位置情報を取得する位置情報取得手段と、
前記動画像が撮像されている間、撮像された動画像データと前記位置情報とを送信する送信手段と、
前記動画像データを表示した動画プレーンと前記動画像データの表示に合致した前記位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項１０】
前記動画像データを符号化する符号化手段をさらに具備し、
前記送信手段は、符号化された動画像データの単位画像と取得された前記位置情報とを関連付けて送信することを特徴とする請求項９記載の電子機器。
【請求項１１】
前記符号化された動画像データの単位画像および対応する前記位置情報に対して共通するシステム時刻を付加するシステム時刻付加手段をさらに具備することを特徴とする請求項１０記載の電子機器。
【請求項１２】
被写体を撮像して動画像を出力する撮像手段と、
前記撮像手段にて前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す第１の位置情報を取得する位置情報取得手段と、
前記動画像が撮像されている間、撮像された第１の動画像データと前記第１の位置情報とを送信するとともに、他の機器によって撮像された第２の動画像データおよびその第２の動画像データが撮像された位置を示す第２の位置情報を受信する送受信手段と、
受信した前記第２の動画像データを表示した動画プレーンと前記第２の動画像データの表示に合致した前記第２の位置情報を含む地図を描画した地図プレーンとを重ね合せて表示制御を行う表示制御手段と
を具備することを特徴とする電子機器。
【請求項１３】
前記表示制御手段は、前記第１の動画像データの表示制御をさらに行うことを特徴とする請求項１２記載の電子機器。
【請求項１４】
前記表示制御手段は、前記第１の位置情報の表示制御をさらに行うことを特徴とする請求項１２記載の電子機器。
【請求項１５】
他の機器によって撮像された動画像データおよびその動画像データが撮像された位置を示す位置情報を取得する手順と、
前記位置情報を含む地図を描画する手順と、
前記地図を前記動画像データと重ね合せて表示させる手順と
を具備することを特徴とする動画表示方法。
【請求項１６】
被写体を撮像して動画像を出力する手順と、
前記動画像が撮像されている間、所定の時間間隔で前記動画像が撮影された位置を示す位置情報を取得する手順と、
前記動画像が撮像されている間、撮像された動画像データと前記位置情報とを送信する手順と、
前記位置情報を含む地図を描画する手順と、
前記地図を前記動画像データと重ね合せて表示させる手順と
を具備することを特徴とする動画表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２００６−２５４４１４（Ｐ２００６−２５４４１４Ａ）
【公開日】平成１８年９月２１日（２００６．９．２１）
【国際特許分類】
【出願番号】特願２００６−１９９５７（Ｐ２００６−１９９５７）
【出願日】平成１８年１月３０日（２００６．１．３０）
【分割の表示】特願２００３−１５８４７２（Ｐ２００３−１５８４７２）の分割
【原出願日】平成１５年６月３日（２００３．６．３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成１８年９月２１日（２００６．９．２１）
【国際特許分類】
【出願日】平成１８年１月３０日（２００６．１．３０）
【分割の表示】特願２００３−１５８４７２（Ｐ２００３−１５８４７２）の分割
【原出願日】平成１５年６月３日（２００３．６．３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]