静止画検証装置、静止画検証方法、および静止画検証プログラム
【課題】動画像データの中の画像データを編集しても編集画像が改ざんされていないことと、動画像データからの抽出位置を第三者に証明可能とすること。
【解決手段】静止画検証装置は、静止画復元部７１５によって切り出し静止画情報１４０１と編集情報１４０４とに基づいて、復元静止画情報１５０１を生成する。また、静止画検証装置は、ダイジェスト情報生成部７０６によって生成されたダイジェスト情報と、原動画情報１２０１に対する署名情報の抽出位置情報１４０３を基に格納部７０９から抽出したダイジェスト情報をダイジェスト情報検証部７１４によって検証する。また、静止画検証装置は、静止画判断部７１６によって復元静止画情報１５０１と編集済み静止画情報１４０２とを比較し一致するかを判断する。静止画検証装置は、ダイジェスト情報検証部７１４の検証結果と静止画判断部７１６の判断結果を基に、編集済み静止画情報１４０２の正当性を検証する。
【解決手段】静止画検証装置は、静止画復元部７１５によって切り出し静止画情報１４０１と編集情報１４０４とに基づいて、復元静止画情報１５０１を生成する。また、静止画検証装置は、ダイジェスト情報生成部７０６によって生成されたダイジェスト情報と、原動画情報１２０１に対する署名情報の抽出位置情報１４０３を基に格納部７０９から抽出したダイジェスト情報をダイジェスト情報検証部７１４によって検証する。また、静止画検証装置は、静止画判断部７１６によって復元静止画情報１５０１と編集済み静止画情報１４０２とを比較し一致するかを判断する。静止画検証装置は、ダイジェスト情報検証部７１４の検証結果と静止画判断部７１６の判断結果を基に、編集済み静止画情報１４０２の正当性を検証する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、静止画を検証する静止画検証装置、静止画検証方法、および静止画検証プログラムに関する。
【背景技術】
【０００２】
近年、店舗や繁華街、集合住宅等での監視カメラ設置や、業務車両へのドライブレコーダ設置等が一般化し、動画像を証拠物件として取り扱う事例が増加している。また、電話による取引やサポート業務のトラブル対策として、店舗が顧客とオペレータとの会話を録音し証拠として保持することも常識となりつつある。
【０００３】
現在、動画像や音声を証拠とする場合、ビデオテープや画像・音声ファイルをそのまま提供している。しかし、画像・音声保存のデジタル化が進めば、それらの改ざんや編集は容易になり、証拠として取り扱う場合は署名やタイムスタンプといった第三者証明が必要となる。現に電話オペレータの音声をタイムスタンプ付きで録音・記録するサービスや製品が販売されており、今後このような技術のニーズが高まることが予想される。
【０００４】
第三者の改ざんを検知する技術として、電子文書の内容を項目分割し、各項目の要約情報を算出、各項目の要約情報の集まりに対して電子署名を付加する方式を利用する技術がある。ここで、要約情報とは、メッセージダイジェストという、暗号学的一方向性ハッシュ関数を用いて算出されたハッシュ情報に相当する。この技術を動画像データに適用することで、動画像データの原本性の保証、署名対象からのプライバシー保護可能なデータ抽出を目的とした技術が開示されている（たとえば、下記特許文献１を参照）。
【０００５】
また、映像データは非常にデータ量が多くなるため、さまざまなデータ圧縮技術が存在する。圧縮技術の中で、フレーム間予測技術があり、たとえば、圧縮映像データの一つであるＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）−１フォーマットでは、前述したフレーム間予測技術を採用しており、Ｉピクチャ、Ｐピクチャ、Ｂピクチャと呼ばれる３タイプの画像を保持している。Ｉピクチャは、映像として表示に必要な全画像を保持し、Ｐピクチャは、過去のＩ、Ｐピクチャの画像からの差分を、Ｂピクチャは、過去／未来のＩ、Ｐピクチャの画像からの差分をそれぞれ保持している。Ｐ、Ｂピクチャは、前後画像との差分を取ることにより、高いデータ圧縮を実現している。
【０００６】
このようなフレーム間予測技術を持った映像データは、復号に大量の処理がかかる。そこで、前述したＩピクチャであるフレームを抽出し、フレームごとに静止画に符号化しておくことで、迅速に映像データを再生する技術が開示されている（たとえば、下記特許文献２を参照。）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００８−１７８０４８号公報
【特許文献２】特開２００６−７４６９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した従来技術において、圧縮映像データの中から特定のフレームを抽出し、たとえば、報告書の電子ファイルに静止画として張り付けたい場合に、切り出された静止画は、正常描画と原本性保証の両立が実現されないという問題があった。具体的に特許文献１では、Ｉ、Ｐ、Ｂの複数の画像を集めて構成されるＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅｓ）という動画像の最小単位での切り出しを想定して実現されている。圧縮映像データに対する静止画切り出しをした場合、切り出し対象のフレームがＰ、Ｂピクチャである場合、差分しか保持していないため、正常描画できない。また、Ｉピクチャも１つのフレーム内で圧縮されているため、そのままでは正常描画できない。
【０００９】
そこで、正常描画を行うために、特許文献２の技術を適用し、ＩピクチャをたとえばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）フォーマットに従って静止画を生成する。この場合、静止画と元のフレームでは、データの内容が変化しているため、切り出した静止画が原本の一部という原本性の保証が行えない。結果として、前述の通り、正常描画と原本性保証の両立は実現されないという問題があった。さらに、Ｐ、Ｂピクチャにおいては、そもそも描画に必要な全画像の情報を保持していないため、静止画として正常に描画できないという問題があった。
【００１０】
また、静止画に変換してメッセージダイジェストを生成した後に、その静止画に対してさらにズーム化や明るさを調整する等の編集が行われると、編集前のメッセージダイジェストと編集後のメッセージダイジェストが一致しなくなるため、元の映像からの抽出位置を確認できず、原本保証の処理ができないという問題があった。
【００１１】
本発明は、上述した従来技術による問題点を解消するため、映像から切り出した静止画を編集しても編集画像が改ざんされていないことと、映像からの抽出位置を第三者に証明可能とする静止画検証装置、静止画検証方法、および静止画検証プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
上述した課題を解決し、目的を達成するため、開示の静止画検証装置は、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を格納部に記憶し、複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、選択された静止画像の動画像データ上の位置情報と、選択された静止画像データと、編集処理の内容を表す編集情報とを記録し、編集済み画像データの正当性の検証を行うときに、編集済み画像データに対応する静止画像データと編集情報を記録部から取り出し、編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成し、生成された復元静止画像データと検証対象の編集済み画像データとを比較して一致しているかを判断し、検証対象の編集済み画像データに対応する静止画像データを取得して要約情報を生成し、生成された要約情報と、記録された位置情報を基に格納部に記憶されている原本保証を行う編集済み画像データに対応する要約情報を格納部から抽出して比較し、一致しているかを検証し、検証結果と判断結果を基に編集済み画像データの正当性を検証することを要件とする。
【発明の効果】
【００１３】
本静止画検証装置、静止画検証方法、および静止画検証プログラムによれば、映像から切り出した静止画を編集しても編集画像が改ざんされていないことと、映像からの抽出位置を第三者に証明できるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】実施の形態にかかる署名システム１００の構成図である。
【図２】認証機関装置１０２の機能的構成を示すブロック図である。
【図３】署名生成装置１０３の機能的構成を示すブロック図である。
【図４】映像抽出装置１０５の機能的構成を示すブロック図である。
【図５】静止画検証装置１０７の機能的構成を示すブロック図である。
【図６】静止画検証装置１０７のハードウェア構成を示すブロック図である。
【図７】署名生成部３０３／静止画検証部５０４の機能的構成を示すブロック図である。
【図８】署名アルゴリズムの概要を示す説明図である。
【図９】圧縮映像データの画像タイプとその並びの一例を示す説明図である。
【図１０】圧縮映像データのＰ、Ｂピクチャを独立画像へ変換する一例を示す説明図である。
【図１１】切り出し静止画情報の編集情報の記録の一例を示す説明図である。
【図１２】原動画情報の署名生成処理の概要を示す説明図である。
【図１３】原動画情報の署名検証処理の概要を示す説明図である。
【図１４】切り出し静止画情報、編集済み切り出し静止画情報の生成方法の概要を示す説明図である。
【図１５】切り出し静止画情報の検証方法の概要を示す説明図である。
【図１６】原動画情報の抽出操作を示す説明図である。
【図１７】切り出し静止画情報の編集情報の編集操作を示す説明図である。
【図１８】検証対象の切り出し静止画情報の選択画面を示す説明図である。
【図１９】切り出し静止画情報の検証結果を示す説明図である。
【図２０】電子署名の公開鍵登録処理を示すフローチャートである。
【図２１】電子署名付き情報の送受信処理、および受信装置の検証処理を示すフローチャートである。
【図２２】原動画情報の生成処理を示すフローチャートである。
【図２３】原動画情報の署名生成処理を示すフローチャートである。
【図２４】独立フレーム生成処理を示すフローチャートである。
【図２５−１】切り出し静止画情報の生成処理および編集処理を示すフローチャート（その１）である。
【図２５−２】切り出し静止画情報の生成処理および編集処理を示すフローチャート（その２）である。
【図２６】原動画情報の署名検証処理を示すフローチャートである。
【図２７】切り出し静止画情報の検証処理を示すフローチャートである。
【図２８】復元静止画情報の生成処理を示すフローチャートである。
【図２９】編集済み静止画情報の原本一部検証処理を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下に添付図面を参照して、本発明にかかる静止画検証装置、静止画検証方法、および静止画検証プログラムの好適な実施の形態を詳細に説明する。
【００１６】
図１は、実施の形態にかかる署名システム１００の構成図である。署名システム１００は認証機関装置１０２と、署名生成装置１０３と、映像抽出装置１０５と、静止画検証装置１０７とで構成される。本システムはネットワーク１０１に接続可能である。署名生成装置１０３は、複数の映像記録端末１０４と接続されている。映像抽出装置１０５は、抽出者端末１０６と接続されている。静止画検証装置１０７は、検証者端末１０８と接続されている。
【００１７】
ネットワーク１０１は、インターネット、イントラネット、ワイドエリアネットワーク等の通信回線網に相当する。認証機関装置１０２は、電子署名情報を管理する認証機関のサーバである。電子署名とは、署名対象を要約した要約情報を送信装置が保持する秘密鍵で暗号化した情報のことである。そして、送信装置は電子署名、署名対象、および公開鍵証明書を受信装置へ送信する。受信装置は、公開鍵証明書の有効性確認を行った上で、暗号化された電子署名を公開鍵証明書に含まれる公開鍵で復号し、署名対象から得た要約情報と比較を行う。この比較結果が同一か否かによって、正当な相手からの送信か否かを判断する。詳細は図２１にて後述する。
【００１８】
また、前述した要約情報とは、署名対象に対して暗号学的一方向性ハッシュ関数を用いて算出されたハッシュ情報であり、署名対象のサイズを圧縮できるという意味で、メッセージダイジェストともいわれる。また、暗号学的一方向性ハッシュ関数で生成されたハッシュ情報は、暗号学的には、その署名対象からしか生成することができない唯一の情報となり、生成されたハッシュ情報から元の情報を復元することができないという特徴を持っている。
【００１９】
このため、情報の暗号化や電子署名生成にはよく使われている。この暗号学的一方向性ハッシュ関数には、ＭＤ５（Ｍｅｓｓａｇｅ Ｄｉｇｅｓｔ ５）、ＳＨＡ（Ｓｅｃｕｒｅ Ｈａｓｈ Ａｌｇｏｒｉｔｈｍ）−１、ＳＨＡ−２５６のようなアルゴリズムがある。情報に対してどのアルゴリズムを用いて要約情報を生成しているかについての情報（ハッシュ情報生成アルゴリズム）は公開鍵証明書に記載されている。
【００２０】
署名生成装置１０３は、後述する映像記録端末１０４から送信された情報を保存・蓄積し、署名生成処理を行うサーバである。映像記録端末１０４は、電子署名の対象となる情報、ここでは原本データ（以降、原動画情報と説明）の撮影・記録を行うための端末である。たとえば、ハンディタイプのビデオカメラや業務用監視カメラ等に相当する。映像記録端末１０４は署名生成装置１０３と通信可能である。または、署名生成装置１０３と映像記録端末１０４とに装備された可搬型の記録メディアやＵＳＢ、ＩＥＥＥ１３９４等の専用ケーブルを介して行われてもよい。
【００２１】
映像抽出装置１０５は、署名生成装置１０３から送られてきた情報を蓄積するサーバである。映像抽出装置１０５は後述する抽出者端末１０６にて操作するが、映像抽出装置１０５にマウスやキーボード、ディスプレイ等を接続することで直接操作できるようにしてもよい。抽出者端末１０６は、映像抽出装置１０５の操作を行うための端末である。抽出者端末１０６は映像抽出装置１０５と通信可能である。
【００２２】
静止画検証装置１０７は、映像抽出装置１０５から送られてきた情報を蓄積し、送られてきた情報に付される電子署名の検証を行うサーバである。静止画検証装置１０７は後述する検証者端末１０８にて操作するが、静止画検証装置１０７にマウスやキーボード、ディスプレイ等を接続することで直接操作できるようにしてもよい。検証者端末１０８は、静止画検証装置１０７の操作を行うための端末である。検証者端末１０８は静止画検証装置１０７と通信可能である。
【００２３】
図２は、認証機関装置１０２の機能的構成を示すブロック図である。認証機関装置１０２は、公開鍵ＤＢ（ＤａｔａＢａｓｅ）２０１と、証明書発行部２０２と、証明書検証部２０３と、通信手段２０４で構成する。公開鍵ＤＢ２０１は、映像記録端末１０４、抽出者端末１０６の公開鍵を蓄積する。証明書発行部２０２は、要求に応じて公開鍵証明書を発行する。証明書検証部２０３は、公開鍵証明書の検証を行う。通信手段２０４は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２４】
図３は、署名生成装置１０３の機能的構成を示すブロック図である。署名生成装置１０３は、映像管理ＤＢ３０１と、映像管理ＴＢ（Ｔａｂｌｅ）３０２と、署名生成部３０３と、通信手段３０４で構成する。映像管理ＤＢ３０１は、映像記録端末１０４から送信された情報と、映像抽出装置１０５へ送信された情報を蓄積する。映像管理ＴＢ３０２は、映像管理ＤＢ３０１へのアクセス制御を管理するテーブルである。署名生成部３０３は、映像データに対して電子署名とその署名対象を付加する。署名生成部３０３の機能は、図７にて後述する。通信手段３０４は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２５】
図４は、映像抽出装置１０５の機能的構成を示すブロック図である。映像抽出装置１０５は、映像管理ＤＢ４０１と、映像管理ＴＢ４０２と、抽出・編集部４０３と、署名検証部４０４と、通信手段４０５で構成する。映像管理ＤＢ４０１は、署名生成装置１０３から送られてきた情報を蓄積する。映像管理ＴＢ４０２は、映像管理ＤＢ４０１へのアクセス制御を管理するテーブルである。抽出・編集部４０３は、映像から一部の静止画を抽出し、必要に応じて編集を行う。署名検証部４０４は、署名生成装置１０３から送られてきた情報に付される署名情報の検証を行う。通信手段４０５は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２６】
図５は、静止画検証装置１０７の機能的構成を示すブロック図である。静止画検証装置１０７は、映像管理ＤＢ５０１と、映像管理ＴＢ５０２と、復元部５０３と、静止画検証部５０４と、通信手段５０５で構成する。映像管理ＤＢ５０１は、映像抽出装置１０５から送られてきた情報を蓄積する。映像管理ＴＢ５０２は、映像管理ＤＢ５０１へのアクセス制御の管理で用いられるテーブルである。復元部５０３は、編集情報を用いて静止画の復元を行う。具体的には、復元部５０３は、編集情報によって生成されたコマンド、またはイベントを、編集を行ったソフトウェアに通知し、編集を行ったソフトウェアにより静止画を復元することができる。静止画検証部５０４は、映像抽出装置１０５から送られてきた情報に付される編集済み静止画の検証を行う。通信手段５０５は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２７】
前述したように、署名生成装置１０３はネットワーク１０１に接続しているが、オフラインでの運用も可能である。具体的には、たとえば、認証機関装置１０２が生成した公開鍵証明書を、フレキシブルディスクやＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）等のリムーバブルメディアに書き込む。後に、署名生成装置１０３は、後述する図６の磁気ディスクドライブ６０４や光ディスクドライブ６０６を通じて、公開鍵証明書を読み込む。
【００２８】
また、映像データに関しても同様に、電子署名を行った段階で署名生成装置１０３内の記憶領域に格納し、定期的に、映像データや電子署名をリムーバブルメディアに書き込む。その後、映像抽出装置１０５は映像データや電子署名をリムーバブルメディアに読み込むといった運用を行ってもよい。
【００２９】
（静止画検証装置１０７のハードウェア構成）
図６は、静止画検証装置１０７のハードウェア構成を示すブロック図である。図６において、静止画検証装置１０７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）６０１と、ＲＯＭ（Ｒｅａｄ‐Ｏｎｌｙ Ｍｅｍｏｒｙ）６０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）６０３を備えている。さらに、磁気ディスクドライブ６０４と、磁気ディスク６０５と、光ディスクドライブ６０６と、光ディスク６０７を備えている。さらに、ディスプレイ６０８と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）６０９と、キーボード６１０と、マウス６１１と、スキャナ６１２と、プリンタ６１３を備えている。また、各構成部はバス６００によってそれぞれ接続されている。
【００３０】
ここで、ＣＰＵ６０１は、静止画検証装置１０７の全体の制御を司る。ＲＯＭ６０２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ６０３は、ＣＰＵ６０１のワークエリアとして使用される。磁気ディスクドライブ６０４は、ＣＰＵ６０１の制御に従って磁気ディスク６０５に対するデータのリード／ライトを制御する。磁気ディスク６０５は、磁気ディスクドライブ６０４の制御で書き込まれたデータを記憶する。
【００３１】
光ディスクドライブ６０６は、ＣＰＵ６０１の制御に従って光ディスク６０７に対するデータのリード／ライトを制御する。光ディスク６０７は、光ディスクドライブ６０６の制御で書き込まれたデータを記憶したり、光ディスク６０７に記憶されたデータをコンピュータに読み取らせたりする。
【００３２】
ディスプレイ６０８は、カーソル、アイコンあるいはツールボックスをはじめ、文書、画像、機能情報などのデータを表示する。このディスプレイ６０８は、たとえば、ＣＲＴ、ＴＦＴ液晶ディスプレイ、プラズマディスプレイなどを採用することができる。
【００３３】
Ｉ／Ｆ６０９は、ネットワーク１０１に接続され、このネットワーク１０１を介して他の装置に接続される。そして、Ｉ／Ｆ６０９は、ネットワーク１０１と内部のインターフェイスを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ６０９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。
【００３４】
キーボード６１０は、文字、数字、各種指示などの入力のためのキーを備え、データの入力を行う。また、タッチパネル式の入力パッドやテンキーなどであってもよい。マウス６１１は、カーソルの移動や範囲選択、あるいはウィンドウの移動やサイズの変更などを行う。ポインティングデバイスとして同様に機能を備えるものであれば、トラックボールやジョイスティックなどであってもよい。
【００３５】
スキャナ６１２は、画像を光学的に読み取り、静止画検証装置１０７内に画像データを取り込む。なお、スキャナ６１２は、ＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅａｄｅｒ）機能を持たせてもよい。また、プリンタ６１３は、画像データや文書データを印刷する。プリンタ６１３には、たとえば、レーザプリンタやインクジェットプリンタを採用することができる。
【００３６】
署名生成装置１０３においても、静止画検証装置１０７と同様のハードウェア構成であってもよい。すなわち、署名生成装置１０３は、ＣＰＵと、ＲＯＭと、ＲＡＭと、磁気ディスクドライブと、磁気ディスクと、光ディスクドライブと、光ディスクと、ディスプレイと、Ｉ／Ｆと、キーボードと、マウスと、スキャナと、プリンタと、を備えている。
【００３７】
図７は、署名生成部３０３／静止画検証部５０４の機能的構成を示すブロック図である。署名生成部３０３と静止画検証部５０４はほぼ共通の機能的構成を持つため、あわせて説明を行う。署名生成部３０３は、格納部７０９と、指定部７１１と、編集記録部７１２と、関連付け部７１３と、を含む構成である。また、静止画検証部５０４は、署名生成部３０３の構成から、電子署名生成部７０８の代わりに、電子署名検証部７１０と、ダイジェスト情報検証部７１４と、静止画復元部７１５と、静止画判断部７１６と、編集済み静止画検証部７１７と、を含めた構成である。また、署名生成部３０３と静止画検証部５０４は、入力部７０１と、映像復号部７０２と、転送部７０３と、変換部７０４と、静止画符号化部７０５と、ダイジェスト情報生成部７０６と、符号化パラメータ保持部７０７と、電子署名生成部７０８と、を含めてもよい。
【００３８】
この制御部となる機能は、具体的には、たとえば、図６に示したＲＯＭ６０２、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶装置に記憶されたプログラムをＣＰＵ６０１が実行することにより、その機能を実現する。または、Ｉ／Ｆ６０９を経由して他のＣＰＵが実行することにより、その機能を実現してもよい。制御部となる機能は、入力部７０１〜編集済み静止画検証部７１７となる。
【００３９】
入力部７０１は、情報を入力する機能を有する。具体的には、たとえば、署名生成部３０３にて原動画情報を入力する。また、入力部７０１は、静止画検証部５０４にて検証者端末１０８からの切り出し静止画情報を入力する。なお、入力された情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４０】
映像復号部７０２は、映像データを解析し、フレームごとに取得する機能を有する。フレームの種類には、独立で再生不可能な予測フレームと独立で再生可能な動画フレームがある。具体的には、たとえば、ＭＰＥＧフォーマットでは、ＭＰＥＧデコーダにより映像データを解析し、フレームごとに取得する。ＭＰＥＧでは、予測フレームは、Ｐピクチャ、または、Ｂピクチャとなり、独立で再生可能な動画フレームはＩピクチャと呼ばれる。映像データはＭＰＥＧ−１、ＭＰＥＧ−２、Ｈ．２６４／ＡＶＣ等の各種動画フォーマットに従ったデータである。なお、復号された各フレームは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４１】
転送部７０３は、予測フレームが入力された場合、予測フレームを変換部７０４に転送し、動画フレームが入力された場合は第１または第２の動画フレームを静止画符号化部７０５に転送する機能を有する。動画フレームには、映像データ内に初めから存在していた第１の動画フレームと、予測フレームが変換部７０４によって再生可能となった第２の動画フレームの２つがある。具体的には、たとえば、ＭＰＥＧフォーマットでは、予測フレームであるＰピクチャとＢピクチャを変換部７０４によって変換された独立再生可能な動画フレームとＩピクチャとを静止画符号化部７０５に転送する。なお、転送されたデータは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４２】
変換部７０４は、独立で再生不可能な予測フレームを独立で再生可能な第１の動画フレームに基づいて独立で再生可能な第２の動画フレームへ変換する機能を有する。具体的には、たとえば、変換部７０４は、ＭＰＥＧフォーマットにて、予測フレームであるＰピクチャ、Ｂピクチャを独立で再生可能なＩピクチャに基づいて、再生可能な動画フレームへ変換する。また、変換部７０４は、Ｐピクチャであれば、前方のＩピクチャ、またはＰピクチャに基づいて変換する。変換部７０４は、Ｂピクチャであれば、前後のＩピクチャ、またはＰピクチャに基づいて変換する。なお、変換されたフレームは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４３】
静止画符号化部７０５は、第１または第２の動画フレームを画像フォーマットに従って画像データに符号化する機能を有する。具体的には、たとえば、ＭＰＥＧフォーマットにて、Ｐピクチャ、Ｂピクチャが変換された動画フレームとＩピクチャであるフレームを、画像フォーマットに従って静止画に符号化する。画像フォーマットは、ＪＰＥＧフォーマット以外にＪＰＥＧ ２０００フォーマット、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃ）フォーマット、ＧＩＦ（Ｇｒａｐｈｉｃｓ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）等である。なお、符号化された静止画は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４４】
ダイジェスト情報生成部７０６は、静止画符号化部７０５によって符号化された画像データごとに要約情報を生成する機能を有する。また、ダイジェスト情報生成部７０６は、関連付け部７１３によって検証対象の編集済み画像データに関連付けられた検証用となる編集元画像データの要約情報を生成してもよい。
【００４５】
具体的には、たとえば、ＪＰＥＧフォーマットによって符号化された静止画に基づいてダイジェスト情報を生成する。前述の操作を、映像データが保持していたフレームの個数分行う。なお、生成されたダイジェスト情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４６】
符号化パラメータ保持部７０７は、静止画符号化部７０５によって静止画に符号化される際に、関連する少なくとも一つ以上のパラメータを保持する機能を有する。パラメータとは、具体的には、たとえば、ＪＰＥＧフォーマットへ符号化する際に必要な情報として、画質に影響する圧縮率や品質レベル、画像の色や明るさに影響する色深度や輝度等がある。符号化パラメータ保持部７０７は、このような値をパラメータとして保持し、静止画符号化時に使用する。なお、保持されているパラメータは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４７】
電子署名生成部７０８は、ダイジェスト情報生成部７０６によって生成されたダイジェスト情報を署名対象として、電子署名を生成する機能を有する。署名対象には、ダイジェスト情報以外に、符号化パラメータ保持部７０７に保持されたパラメータを含んでもよい。具体的には、たとえば、フレームがｎ個あるダイジェスト情報の集合に対して、秘密鍵で暗号化することで電子署名を生成する。なお、生成された電子署名は、署名生成装置１０３のＲＡＭ、磁気ディスク、光ディスクなどの記憶領域に記憶される。
【００４８】
格納部７０９は、電子署名生成部７０８によって生成された電子署名と署名対象を格納する機能を有する。また、格納部７０９は、入力部７０１にて入力された原動画情報なども格納部７０９によって格納してもよい。また、格納する領域は、映像管理ＤＢ３０１、映像管理ＤＢ５０１等であり、映像管理ＤＢ３０１、映像管理ＤＢ５０１は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に存在する。また、署名生成装置１０３や静止画検証装置１０７以外の記憶領域に格納してもよい。
【００４９】
電子署名検証部７１０は、電子署名の正当性を検証する機能を有する。具体的には、たとえば、電子署名検証部７１０は、電子署名を公開鍵にて復号した際に、復号結果が電子署名の署名対象の要約情報と一致する場合に、電子署名の正当性を保証できたとして出力する。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５０】
指定部７１１は、要約情報を保持する画像データ群で構成された動画像データの中から、編集元画像データを指定する機能を有する。動画像データは、フレーム間圧縮されていない画像データ群でもよいし、フレーム間圧縮された動画像データに基づいて静止画符号化部７０５によって符号化された画像データ群であってもよい。また、要約情報となるダイジェスト情報については、ダイジェスト情報生成部７０６によって画像データごとにダイジェスト情報が生成されてもよいし、入力部７０１から動画像データとあわせてダイジェスト情報が入力されてもよい。
【００５１】
具体的には、たとえば、指定部７１１は、格納部７０９によって格納されている動画像データとなる原動画情報から、５５５０番目の画像を指定する。指定された画像の情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５２】
編集記録部７１２は、指定部７１１によって指定された画像に対応する編集元画像データの編集情報を記録する機能を有する。編集情報は、どのような編集を行ったかを示す。具体的には、たとえば、指定部７１１によって５５５０番目の画像が選択され編集された場合に、編集記録部７１２は、編集情報を記録する。
【００５３】
また、編集情報は、編集を行うソフトウェアとソフトウェアに基づいて実行される編集処理と編集処理に付随する設定値を記録してもよい。また、編集情報は、編集を行うソフトウェアとソフトウェアに対して通知されたイベントを記録してもよい。通知されたイベントとは、抽出者がマウスやキーボードなどを操作した際の編集操作を記述したデータとなる。なお、記録された内容は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５４】
関連付け部７１３は、編集された編集済み画像データと編集元画像データと編集元画像データの動画像データにおける対応する位置情報と編集記録部７１２によって記録された編集情報とを関連付ける機能を有する。
【００５５】
具体的には、たとえば、指定部７１１によって５５５０番目の画像が選択され編集された場合に、関連付け部７１３は、編集済み画像データと、編集元画像となる５５５０番目の画像データと、原動画情報の５５５０番目を指定したこと、および編集元画像から編集済み画像を生成するために用いた編集情報とを関連付ける。なお、関連付けられた情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５６】
ダイジェスト情報検証部７１４は、ダイジェスト情報生成部７０６によって既に生成されている要約情報を用いて、検証対象の画像データの正当性を検証する機能を有する。また、ダイジェスト情報検証部７１４は、検証用となる編集元画像データの要約情報と、動画像データの中から関連付け部７１３によって関連付けられた位置情報を基に生成した対応する画像データの要約情報との一致によって正当性を検証してもよい。
【００５７】
具体的には、たとえば、ダイジェスト情報検証部７１４は、ダイジェスト情報生成部７０６によって生成された検証用となる編集元画像データのダイジェスト情報と、あらかじめダイジェスト情報生成部７０６によって生成され、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶されたダイジェスト情報が一致した場合に検証用となる編集元画像データの正当性が保証できたとすることができる。また、ダイジェスト情報検証部７１４は、５５５０番目という位置情報から、原動画情報のダイジェスト情報のうち、５５５０番目のダイジェスト情報を取得する。取得後、ダイジェスト情報検証部７１４は、５５５０番目のダイジェスト情報と検証対象の画像データのダイジェスト情報とが一致した場合に検証対象の画像データの正当性が保証できたとする。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５８】
静止画復元部７１５は、編集元画像データと編集記録部７１２によって記録された編集元画像データの編集情報とに基づいて、編集済み画像データを復元する機能を有する。また、静止画復元部７１５は、検証用となる編集元画像データと検証対象の編集済み画像データに関連付けられた編集情報とに基づいて、編集済み画像データを復元してもよい。
【００５９】
具体的には、たとえば、静止画復元部７１５は、検証用となる編集元画像データとなる切り出し静止画情報と編集情報を基に、ソフトウェアに通知するコマンドを生成する。生成されたコマンドを復元部５０３が実行することにより、前述のソフトウェアが編集済み画像データを生成する。または、静止画復元部７１５は、ソフトウェアに通知するイベントを生成する。生成されたイベントを復元部５０３がソフトウェアに対して送信することにより、前述のソフトウェアが編集済み画像データを生成する。なお、復元された編集済み画像データは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６０】
静止画判断部７１６は、静止画復元部７１５によって復元された検証用の編集済み画像データと検証対象の編集済み画像データとが一致するか否かを判断する。具体的には、たとえば、静止画判断部７１６は、復元された検証用の編集済み画像データのダイジェスト情報と検証対象の編集済み画像データのダイジェスト情報が一致するか否かを判断してもよい。
【００６１】
また、復元された検証用の編集済み画像データと検証対象の編集済み画像データは、両画像の見た目は等しくとも、データとしては微小に異なる結果になる可能性が生じる。たとえば、編集情報に記載されたソフトウェアが静止画検証装置１０７に存在せず、代わりに画像を復元可能なソフトウェアが存在する場合、復元部５０３は、代わりとなるソフトウェアで復元された検証用の編集済み画像データを生成してもよい。このような場合、生成に使用したソフトウェアが異なるため、データとしては微小に異なる結果になる可能性が生じる。
【００６２】
前述のようなデータが微小に異なる結果であっても両画像が一致すると判断するため、静止画判断部７１６は、たとえば、両画像をピクセルごとに比較し、すべてのピクセルの色情報の差分が一定値以下であれば、一致と判断してもよい。別の判断方法として、静止画判断部７１６は、すべてのピクセルの色情報の差分の合計値が一定値以下であった場合に、一致と判断してもよい。また、静止画判断部７１６は、色情報についてもＲＧＢ色空間や、ＨＳＬ色空間などの任意の色空間へ両画像の色情報を変換した上で、一致するか否かを判断してもよい。なお、判断結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６３】
編集済み静止画検証部７１７は、ダイジェスト情報検証部７１４によって検証された検証結果と静止画判断部７１６によって一致すると判断された判断結果とに基づいて、検証対象の編集済み画像データの正当性を検証する機能を有する。具体的には、たとえば、ダイジェスト情報検証部７１４が検証に成功しており、静止画判断部７１６が復元された検証用の編集済み画像データと検証対象の編集済み画像データが一致すると判断した際に、編集済み静止画検証部７１７は検証に成功したとする。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６４】
また、映像抽出装置１０５内の署名検証部４０４に関して、前述した静止画検証部５０４の機能の一部を有してもよい。
【００６５】
図８は、署名アルゴリズムの概要を示す説明図である。署名装置は、オリジナルデータ８０１を部分データに分割し、各部分データのハッシュ集合を計算し、ハッシュ情報集合８０２を生成する。その後、生成したハッシュ情報集合８０２が電子署名の署名対象となり、署名対象に対して署名装置の電子署名を行い、ハッシュ情報集合８０２と電子署名をあわせて署名装置の署名情報８０３とする。
【００６６】
抽出装置は、署名装置が署名情報を施したデータから、部分データを抽出し、抽出データ８０４を生成する。その後、抽出装置は、署名装置と同様の操作を行って、ハッシュ情報集合８０５、ハッシュ情報集合８０５を署名対象にし、抽出装置の電子署名を行い、ハッシュ情報集合８０５と電子署名をあわせて抽出装置の署名情報８０６とする。
【００６７】
検証装置は、署名装置の署名情報８０３内の署名装置の電子署名にて、ハッシュ情報集合８０２の完全性を検証する。同様に、抽出装置の署名情報８０６内の抽出装置の電子署名にて、ハッシュ情報集合８０５の完全性を検証する。次に、開示された部分データからハッシュ情報集合を生成し、ハッシュ情報集合８０５と同一であることを検証する。最後に、署名装置と抽出装置のハッシュ情報集合を比較することで、抽出装置のハッシュ情報の範囲８０８は、元データの範囲８０７からの抽出であることがわかる。もし、抽出データ８０４のハッシュ情報にオリジナルデータ８０１のハッシュ情報が含まれていない場合は、その部分データは改ざんされていることになる。
【００６８】
図９は、圧縮映像データの画像タイプとその並びの一例を示す説明図である。圧縮映像データを構成するフレームは、大きくわけて独立で再生可能な動画フレームと、動画フレームからの差分データを持つ予測フレームである。予測フレームは、独立で再生不可能である。
【００６９】
ＭＰＥＧの規格では、独立で再生可能な動画フレームはＩピクチャと呼ばれ、予測フレームはＰピクチャ、Ｂピクチャと呼ばれる。Ｉピクチャは表示に必要なすべての画像データを圧縮して保持している。また、Ｉピクチャには、Ｈ．２６４／ＡＶＣの規格で新しく追加されたＩＤＲ（Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｅｒ Ｒｅｆｒｅｓｈ）ピクチャも含む。なお、後述では、ＩピクチャとＩＤＲピクチャを、単にＩピクチャとして説明する。それぞれのピクチャの特徴は後述する。同図では、Ｉピクチャはフレーム９０１である。同様に、Ｐピクチャはフレーム９０４、フレーム９０５、Ｂピクチャはフレーム９０２、フレーム９０３となる。
【００７０】
ＰピクチャとＢピクチャは、フレーム間予測画像とも呼ばれる。Ｐピクチャは、直近に復号されたＩピクチャ、もしくはＰピクチャの画像を参照画像とし、そこからの差分となる予測誤差情報を保持する。たとえば、フレーム９０４は、Ｉピクチャであるフレーム９０１から画像を参照して独立再生可能なフレームへ変換される。フレーム９０５は、映像復号部７０２によってＰピクチャであるフレーム９０４から画像を参照して独立再生可能なフレームへ変換される。
【００７１】
このように、変換部７０４は、Ｐピクチャを変換するには過去のフレームを参照する前方向予測を行う。参照元となるフレームは１つ前のＩピクチャ、Ｐピクチャとなるが、Ｈ．２６４／ＡＶＣではより前のフレームを参照フレームとすることも可能である。
【００７２】
Ｂピクチャは直近に復号された未来と過去のＩピクチャ、Ｐピクチャの画像を参照画像として、その差分となる予測誤差情報を保持する。たとえば、フレーム９０２は、変換部７０４によって、Ｉピクチャであるフレーム９０１と、Ｐピクチャであるフレーム９０４から画像を参照して独立再生可能なフレームへ変換される。フレーム９０３も同様である。
【００７３】
このように、変換部７０４は、Ｂピクチャを変換するには、過去と未来のフレームを参照する双方向予測を行う。ＢピクチャもＰピクチャと同様に、参照元となるフレームは１つ前のＩピクチャ、Ｐピクチャとなるが、Ｈ．２６４／ＡＶＣでは１つ以上の前後のフレームを参照フレームとすることも可能である。
【００７４】
このように、ＰピクチャやＢピクチャでは、前後の画像との差分を取ることで、時間方向の冗長度を削除し、高いデータ圧縮を実現している。また、図９のように何枚かの画像をまとめて、ＧＯＰと呼ばれる動画像の最小単位で構成される。図９の例ではＧＯＰ＝９となる。ＧＯＰはその単位での独立した再生が可能で、動画像を途中から再生したり編集したりするための構造である。
【００７５】
また、ＩＤＲピクチャの機能を説明する。Ｈ．２６４／ＡＶＣでは、前述したように、Ｐピクチャ、Ｂピクチャは一つ前のＩピクチャ、Ｐピクチャを飛び越えて参照するため、必ずしもＩピクチャから再生が行えるかどうかはわからない。この問題を防ぐのがＩＤＲピクチャである。ＩＤＲピクチャを受信した場合、映像復号部７０２は参照フレームが格納されているバッファをクリアする。したがって、ＩＤＲピクチャから再生ができることを保証する。参照フレームをクリアするため、Ｐピクチャ、ＢピクチャはＩＤＲピクチャをまたいでフレームを参照することはできない。
【００７６】
図１０は、圧縮映像データのＰ、Ｂピクチャを独立画像へ変換する一例を示す説明図である。はじめに、圧縮映像データには、符号１００１で示すように、参照元となるフレーム順にデータが格納されている。圧縮映像データは、映像復号部７０２によって、映像データをフレーム１００５、フレーム１００６、フレーム１００７のようにフレームごとに解析される。具体的な解析例として、ＭＰＥＧフォーマットでは、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）によってエントロピー符号化されているため、逆ＤＣＴによって復号し、フレームごとに解析する。
【００７７】
同図の例では、フレーム１００５がＩピクチャ、フレーム１００６がＰピクチャ、フレーム１００７がＢピクチャとなる。続けて、映像復号部７０２によって、符号１００２で示す時系列順になるように、フレーム１００５、フレーム１００７、フレーム１００６の順に入れ替えられる。
【００７８】
次に、Ｐ、Ｂピクチャを独立画像へ変換する処理を示す。符号１００３で示すのは、動画フレーム復元前の状態で、フレーム１００５が保持している具体的な画像、フレーム１００７、フレーム１００６が保持する予測誤差情報である。Ｉピクチャであるフレーム１００５は画像データすべてを保持しており、Ｐピクチャ、Ｂピクチャであるフレーム１００６、フレーム１００７は画像データの差分となる予測誤差情報を保持している。符号１００４で示す動画フレーム復元後の状態で、変換部７０４は、フレーム１００６、フレーム１００７から再生可能となる動画フレーム１００６’と動画フレーム１００７’に変換する。
【００７９】
具体的には、変換部７０４は、フレーム１００５を土台として、差分となるフレーム１００６を上書きする形で動画フレーム１００６’を生成する。同様に、変換部７０４は、フレーム１００５、１００６を土台として、差分となるフレーム１００７を上書きする形で動画フレーム１００７’を生成する。
【００８０】
また、Ｐピクチャ、Ｂピクチャは予測誤差情報以外に動き補償情報を持っており、基準となるＩピクチャ、Ｐピクチャから、特定の範囲においてどのぐらい移動したのかを保持している。なお、同図では、説明の都合上、時系列順に取得できるようにした後に、動画フレームの復元を行ったが、動画フレームの復元を行った後に、時系列順に取得できるようにしてもよい。
【００８１】
図１１は、切り出し静止画情報の編集情報の記録の一例を示す説明図である。図１１では、編集情報１１０１〜編集情報１１０５が示されている。編集情報１１０１は、部分拡大を行った場合のパラメータ情報である。編集情報１１０１では、編集内容が“部分拡大”となり、続いて、部分拡大を行う場合のパラメータが記述されている。具体的には、部分拡大の開始位置がＬ（Ｌｅｆｔ）：４００［ｐｉｘｅｌ］、Ｔ（Ｔｏｐ）：３０であり、部分拡大の選択範囲がＷ（Ｗｉｄｔｈ）：３００［ｐｉｘｅｌ］×Ｈ（Ｈｅｉｇｈｔ）：３００となる。さらに、部分拡大の解像度が７２［ｐｉｘｅｌ／ｉｎｃｈ］となり、部分拡大の拡大率が２０［％］となる。
【００８２】
編集情報１１０２は、明るさ・コントラスト調整を行った場合のパラメータ情報である。編集情報１１０２は２つの編集内容があり、１つ目の編集内容“明るさ調整”、２つ目の編集内容が“コントラスト調整”となる。続いて、明るさ調整のパラメータとして、強度が、＋２０［％］となる。また、コントラスト調整の強度が＋１０［％］となる。
【００８３】
編集情報１１０３は、画像全体のサイズ変更を行った場合のパラメータ情報である。編集情報１１０３では、編集内容が“サイズ変更”であり、続いて、サイズ変更を行う場合のパラメータが記述されている。サイズ変更の領域は全体であり、サイズ変更後のピクセル数がＷ：８００［ｐｉｘｅｌ］×Ｈ：６００［ｐｉｘｅｌ］となる。
【００８４】
編集情報１１０４は、編集操作を変更回数分行った場合のパラメータ情報である。編集情報１１０４の情報の内容は、ＧＵＩアプリケーションである編集ツールに対する抽出者端末１０６のマウスやキーボードによる編集操作の記録である。具体的には、抽出者端末１０６は、抽出者がマウスなどで操作することにより、１つ目の編集操作にて、メニューバーから「ファイル」を選択し、サブメニューの一覧から「対象ファイルを開く」が選択される。続けて、抽出者端末１０６は、２つ目の編集操作にて、メニューバーから「画質調整」が選択され、サブメニューの一覧から「明るさ・コントラスト」が選択される。選択後、表示されるダイアログに対して、抽出者端末１０６は、明るさ入力欄に＋２０［％］、コントラスト入力欄に＋１０［％］が設定され、「ＯＫ」ボタンが押下される。
【００８５】
編集情報１１０５は、何も編集を行っていない場合のパラメータ情報である。抽出者端末１０６は、何も編集しないことを明確にするために編集情報１１０５のようなパラメータ情報を出力してもよい。
【００８６】
図１２は、原動画情報の署名生成処理の概要を示す説明図である。署名生成部３０３に入力された原動画情報１２０１は、映像復号部７０２によってフレームごとに解析され、時系列順に並べられる。また、原動画情報１２０１は、格納部７０９に格納される。次に、各フレームは、転送部７０３によって、Ｐ、Ｂピクチャであれば変換部７０４に、Ｉ、ＩＤＲピクチャであれば静止画符号化部７０５に転送される。
【００８７】
変換部７０４に転送されたフレームは、変換部７０４によって独立に再生可能な動画フレームに変換される。具体的には、動画フレームＦ２、動画フレームＦ３、・・・、動画フレームＦｎである。変換方法については、図１０で前述した通りとなる。また、再生可能な動画フレームの形式は、Ｉ、ＩＤＲピクチャと同一なデータ形式でもよいし、非圧縮の画像フォーマットに従ってもよい。
【００８８】
次に署名生成装置１０３は、転送部７０３から転送されたＩ、ＩＤＲピクチャである動画フレームと、変換部７０４によって変換された動画フレームを、静止画符号化部７０５によって符号化し、静止画を生成する。具体的な静止画とは、静止画Ｊ１、静止画Ｊ２、静止画Ｊ３、・・・、静止画Ｊｎである。また、符号化時に、符号化パラメータ保持部７０７から符号化パラメータ情報１２０２を取得し、パラメータの値を参照して符号化を行ってもよい。
【００８９】
パラメータを取得する理由として、原動画情報から任意の１枚の画像を静止画として切り出しを行い、その切り出した静止画が、原動画情報の一部であり、改ざんされていないことを保証する必要がある。このため、画像フォーマットに従って符号化する際に、同一の符号化方法で処理されることが望ましいからである。
【００９０】
具体的には、たとえば、画像フォーマットの一つであるＪＰＥＧフォーマットに符号化する際に、動画フレームから符号化するソフトウェアやツールにより、作成方法が異なる場合がある。作成方法が異なると、肉眼では同じ画像に見えても、デジタルデータとしては異なる情報となる事象が発生する可能性がある。前述の事象を起こさないためには、署名生成時と署名検証時で同一の符号化方法で処理することで回避できる。
【００９１】
たとえば、ＪＰＥＧフォーマットへ符号化する際に必要な情報として、図７の符号化パラメータ保持部７０７の説明にて前述したように、画質に影響する圧縮率や品質レベル、画像の色や明るさに影響する色深度や輝度等がある。これらの情報は予め決定しておき、署名生成装置１０３内に事前に格納され、必要に応じて取得を行う。また、前述以外のパラメータとして、プログレッシブ形式と非プログレッシブ形式の設定を保持してもよい。また、ＪＰＥＧフォーマットの内部で使用されるＤＣＴ演算では、浮動小数点演算、精度の高い整数演算、高速な整数演算、のうち使用する設定等をパラメータとして保持してもよい。
【００９２】
また、各パラメータは、原動画情報ごとに保持していてもよい。たとえば、橋の点検を記録した原動画情報で、もし撮影位置が光のあまりあたらない位置であり、輝度が０％に近い状態の原動画情報であれば、静止画符号化部７０５にて、輝度を１００％に近い状態になるように符号化を行うと、符号化後の静止画が見やすくなる。このように、他の原動画情報は通常のパラメータ設定を使用し、特定の条件を持つ原動画情報は、特定のパラメータ設定を使用するように、ファイルごとにパラメータを保持してもよい。
【００９３】
また、前述ではＪＰＥＧフォーマットの例を挙げたが、図７の静止画符号化部７０５にて前述したように他の静止画フォーマットでもよい。それぞれのフォーマットに対してパラメータを保持し、静止画符号化部７０５にて符号化してもよい。
【００９４】
署名生成装置１０３は、静止画符号化部７０５によって符号化された静止画ごとに、ダイジェスト情報生成部７０６にてダイジェスト情報を生成する。具体的に署名生成装置１０３は、ダイジェスト情報Ｈ１、ダイジェスト情報Ｈ２、・・・、ダイジェスト情報Ｈｎを生成する。生成されたダイジェスト情報の集合に対して、電子署名生成部７０８が電子署名を生成する。署名情報は、ダイジェスト情報と電子署名になる。生成された署名情報は、格納部７０９に格納される。
【００９５】
また、原本性保証をより確実に行うために、署名生成装置１０３は、電子署名生成時に、ダイジェスト情報と静止画符号化部７０５にて使用した変換パラメータ情報をあわせて署名対象とし、署名対象に対して電子署名を生成してもよい。
【００９６】
ダイジェスト情報の生成には、一方向性ハッシュ関数を、電子署名の生成には、公開鍵暗号方式の一つであるＲＳＡ（Ｒｉｖｅｓｔ Ｓｈａｍｉｒ Ａｄｌｅｍａｎ）を使用することが可能である。一方向性ハッシュ関数には、ＭＤ５、ＳＨＡ−１、ＳＨＡ−２５６のようなアルゴリズムがあり、たとえば、ＳＨＡ−２５６では、１メッセージあたり、２５６ｂｉｔ（３２ｂｙｔｅ）のダイジェスト情報が生成される。
【００９７】
具体的には、たとえば、映像データが３０ｆｐｓ（ｆｐｓ：ｆｒａｍｅ Ｐｅｒ Ｓｅｃｏｎｄ）で約１時間の映像が記録される場合、３０ｆｐｓ×６０秒×６０分＝１０８，０００個のフレームが保存されることとなる。この場合、ＳＨＡ−２５６アルゴリズムの場合、１０８，０００フレーム×３２ｂｙｔｅ＝約３．５ＭｅｇａＢｙｔｅの情報となる。ＲＳＡで署名生成された情報とあわせて、約４ＭｅｇａＢｙｔｅの署名情報となり、動画情報に比べれば、少ない情報量の保存で原本性保証を実現することが可能である。
【００９８】
以上の操作によって、原動画情報の署名生成処理を行う。なお、図１２の具体的な処理内容としては、図２２、図２３にて後述する。
【００９９】
図１３は、原動画情報の署名検証処理の概要を示す説明図である。静止画検証装置１０７は、格納部７０９に格納された原動画情報１２０１と原動画情報１２０１の署名情報を取得する。取得した原動画情報１２０１が改ざんされていないかを、電子署名検証部７１０が、原動画情報１２０１の署名情報を用いて検証する。
【０１００】
原動画情報からダイジェスト情報を生成する処理は、署名生成処理と等しくなる。具体的には、原動画情報１２０１は、映像復号部７０２によってフレームごとに解析され、時系列順に並べられる。続けて、各フレームは、転送部７０３によって、Ｐ、Ｂピクチャであれば変換部７０４に、Ｉ、ＩＤＲピクチャであれば静止画符号化部７０５に転送される。
【０１０１】
変換部７０４に転送されたフレームは、変換部７０４によって独立に再生可能な動画フレームに変換される。次に静止画検証装置１０７は、転送部７０３から転送されたＩ、ＩＤＲピクチャである動画フレームと、変換部７０４によって変換された動画フレームを生成する。具体的には、動画フレームＦ２、動画フレームＦ３、・・・、動画フレームＦｎである。続けて静止画検証装置１０７は、静止画符号化部７０５によって符号化し、静止画を生成する。具体的には、静止画Ｊ１、静止画Ｊ２、静止画Ｊ３、・・・、静止画Ｊｎである。静止画符号化部７０５にて、符号化パラメータ情報１２０２を取得して符号化を行ってもよい。
【０１０２】
静止画検証装置１０７は、符号化された静止画ごとに、ダイジェスト情報生成部７０６によってダイジェスト情報を生成する。最後に、静止画検証装置１０７は、生成されたダイジェスト情報と、格納部７０９から取得されたダイジェスト情報を、電子署名検証部７１０によって一つずつ比較処理１３０１を行う。すべてのダイジェスト情報が一致した場合に、原動画情報は改ざんされていないことを確認できる。以上の操作によって、原動画情報の署名検証処理を行う。なお、図１３の具体的な処理内容としては、図２６にて後述する。
【０１０３】
図１４は、切り出し静止画情報、編集済み切り出し静止画情報の生成方法の概要を示す説明図である。図１４の説明では、抽出者端末１０６が先頭から５５５０枚目となるピクチャＪ５５５０を抽出し、部分拡大を行うことを想定する。ピクチャＪ５５５０が切り出し静止画情報１４０１となる。抽出者端末１０６は、ピクチャＪ５５５０の編集が完了すると、編集結果となる編集済み静止画情報１４０２を生成する。原動画情報からのどの位置を抽出したかを示す抽出位置情報１４０３を生成する。さらに、抽出者端末１０６は、編集記録部７１２に記録されたデータを用いてどの編集ツールを用いて、どのような編集作業を行ったかを示す編集情報１４０４を生成する。
【０１０４】
抽出位置情報とは、原動画情報１２０１を静止画情報に分解した際の、先頭から数えた位置の情報である。具体的に、抽出位置情報１４０３では、先頭から５５５０枚目に相当するという意味で、抽出位置情報１４０３＝５５５０が記録されている。編集情報１４０４は、図１１にて示した編集情報が記述される。図１４では、部分拡大を行うため、編集情報１４０４は編集情報１１０１に近い情報となる。
【０１０５】
生成された編集済み静止画情報１４０２は、格納部７０９によって格納される。また、切り出し静止画情報１４０１と、抽出位置情報１４０３と、編集情報１４０４と、原動画情報１２０１の署名情報は、編集済み切り出し情報の検証情報として、格納部７０９によって格納される。また、署名システム１００は、切り出し静止画情報１４０１と、抽出位置情報１４０３と、編集情報１４０４を署名対象１４０５として、抽出者端末１０６の電子署名の電子署名を生成し、編集を行った作業責任者を明確にしてもよい。
【０１０６】
図１５は、切り出し静止画情報の検証方法の概要を示す説明図である。検証対象となる画像は、編集済み静止画情報１４０２である。静止画検証装置１０７は、編集済み静止画情報１４０２を検証するために、格納部７０９によって格納されていた編集済み切り出し情報の検証情報を取得する。
【０１０７】
取得後、静止画検証装置１０７は、切り出し静止画情報１４０１からダイジェスト情報生成部７０６によってハッシュＨ５５５０を生成する。静止画検証装置１０７は、生成されたハッシュＨ５５５０と、原動画情報１２０１に対する署名情報内の抽出位置情報１４０３の位置に存在するハッシュＨ５５５０を比較し、一致するかをダイジェスト情報検証部７１４によって判断する。
【０１０８】
一致した場合、静止画検証装置１０７は、静止画復元部７１５によって正当性が保証できた切り出し静止画情報１４０１と、編集情報１４０４とから、復元静止画情報１５０１を生成する。生成後、静止画検証装置１０７は、編集済み静止画情報１４０２と復元静止画情報１５０１を比較し、一致するかを静止画判断部７１６によって判断する。静止画検証装置１０７は、ダイジェスト情報検証部７１４によって検証が成功し、かつ、静止画判断部７１６によって一致すると判断された場合、編集済み静止画検証部７１７によって編集済み静止画情報１４０２の正当性が保証できたとする。
【０１０９】
図１６は、原動画情報の抽出操作を示す説明図である。図１６において抽出者端末１０６に表示されている画面は、切り出し静止画情報の作成画面の例を示している。抽出者端末１０６は、再生ボタン（ＰＲＥＶＩＥＷ）の押下により、原動画情報の再生を行う。抽出者端末１０６は、原動画情報の再生を行いながら、抽出者は目視による切り出し指示によって切り出し位置を指定する。切り出し手順は、抽出者端末１０６は、シークバー（ＳＥＥＫＢＡＲ）を利用して、切り出しを行う位置まで操作され、その位置の時点で切り出しボタン（ＥＸＴＲＡＣＴＳＥＴ）が押下されることにより、切り出し位置を指定する。
【０１１０】
前述の操作によって切り出し位置（ＣＵＴＰＯＩＮＴ）が指定されるので、抽出者端末１０６は、実行ボタン（ＥＸＴＲＡＣＴＲＵＮ）が押下されることで、切り出し静止画情報の生成を行う。切り出し静止画情報に対して編集を行う場合、抽出者端末１０６は、編集ボタン（ＥＤＩＴＲＵＮ）を押下することで、切り出し静止画情報の編集画面に遷移する。本実施の形態では、切り出し静止画情報に対してさらに編集を行うことを想定して説明を行う。
【０１１１】
図１７は、切り出し静止画情報の編集情報の編集操作を示す説明図である。図１７において抽出者端末１０６に表示されている画面は、切り出し静止画情報の編集画面の例を示している。図１７の例では、抽出者端末１０６は、静止画情報に対する拡大・縮小、明るさ・コントラスト変更、解像度変更等の編集機能を有し（ＥＤＩＴＭＥＮＵ）ている。各機能操作は、シークバー（ＥＤＩＴＳＥＥＫＢＡＲ）や、数値による変更度数の指定、さらに画面中の静止画情報に対して操作を行う選択範囲の指定を行うことが可能である。また、部分拡大を行う場合、抽出者端末１０６は、拡大を行う領域（ＳＥＬＥＣＴＡＲＥＡ）をマウスなどの選択によって決定する。
【０１１２】
各編集操作が行われた後、抽出者端末１０６は、実行ボタンが押下されると（ＥＸＥＲＵＮ）、更なる編集を行った旨の情報と、編集済み切り出し静止画情報を生成する。生成後、抽出者端末１０６は、更なる編集を行った旨の情報と編集前の切り出し静止画情報と、編集済み切り出し静止画情報、原動画情報からの抽出位置情報、編集情報を映像抽出装置１０５に送信する。
【０１１３】
図１８は、検証対象の切り出し静止画情報の選択画面を示す説明図である。図１８において検証者端末１０８に表示されている画面は、切り出し静止画情報の署名検証画面の例を示している。検証者端末１０８は、参照ボタン（ＲＥＦＥＲＥＮＣＥ）が押下されることで、エクスプローラー上で切り出し静止画情報となるファイルを表示し、検証者は、検証対象となる切り出し静止画情報を選択することができる。ここで選択する切り出し静止画情報とは、公開された編集済み切り出し静止画情報を指し、この編集済み切り出し静止画情報を選択することで、検証者端末１０８は、本情報に付随する編集済み切り出し情報の検証情報を取得できる。
【０１１４】
選択後、検証者端末１０８は、署名検証ボタン（ＶＥＲＩＦＹＲＵＮ）が押下されることで、選択した切り出し静止画情報の署名検証処理を実行する。切り出し静止画情報の署名検証処理のフローチャートは、図２７にて後述する。図１９にて、署名検証処理の検証結果を表示した結果画面の説明を行う。
【０１１５】
図１９は、切り出し静止画情報の検証結果を示す説明図である。図１９において検証者端末１０８に表示されている画面は、切り出し静止画情報の署名検証結果画面の例を示している。検証者端末１０８は、検証結果を表示することにより、切り出し静止画情報が、原動画情報の一部が抽出・編集された静止画情報であり、抽出・編集後、改ざんされていないことを検証者に確認させることができる。また、検証者端末１０８は、原動画情報のどの部分が抽出されたかを示す切り出し位置を表示し、検証者に確認させることが可能である（ＶＥＲＩＦＹ１）。
【０１１６】
また、検証者端末１０８は、証明書確認ボタンが押下されることにより、原動画情報の電子署名情報を表示し、検証者は、原動画情報は誰が作成したのかを確認可能である（ＶＥＲＩＦＹ２）。本実施の形態では、検証者は、作成責任者が作成したことを確認できる。さらに、検証者端末１０８は、編集情報ボタンが押下されることにより、原動画情報から切り出し後、どのように編集操作を行ったかを示す編集情報を表示し、検証者は、編集情報を確認できる（ＶＥＲＩＦＹ３）。
【０１１７】
前述までの装置・構成を使用して、署名システム１００は、原動画情報の生成処理と署名検証処理、切り出し静止画情報の生成処理および編集処理、検証処理、という４つの処理を行う。各処理について、図２０〜図２９で示すフローチャートで説明する。また、フローチャート内での破線の矢印は、複数の装置間でのデータの送受信を示している。
【０１１８】
原動画情報の生成処理では、原動画情報の署名生成処理を行い、その内部では原動画情報の映像復号処理、独立フレーム生成処理、電子署名生成処理が行われる。原動画情報の署名検証処理では、原動画情報の映像復号処理、独立フレーム生成処理が行われる。切り出し静止画情報の生成処理および編集処理内では、原動画情報の署名検証処理が行われる。切り出し静止画情報の検証処理では、原動画情報の電子署名検証処理、復元静止画情報の生成処理、編集済み静止画情報の原本一部検証処理が行われる。また、電子署名生成処理、電子署名検証処理は、後述する図２０での電子署名の公開鍵登録処理を事前に行った後、図２１での電子署名付き情報の送受信処理、および受信装置の検証処理が行われる。
【０１１９】
図２０は、電子署名の公開鍵登録処理を示すフローチャートである。図２０では送信装置と認証機関装置１０２との間での公開鍵の登録を行うフローを示す。本実施の形態では、署名生成装置１０３、映像抽出装置１０５が電子署名の送信装置となる。
【０１２０】
初めに、送信装置は、鍵ペア（秘密鍵、および公開鍵）の生成を行う（ステップＳ２００１）。続けて、送信装置は、証明書発行依頼情報の入力をする（ステップＳ２００２）。入力される情報は、映像記録端末１０４、抽出者端末１０６に関する情報である。したがって、映像記録端末１０４が複数存在する場合は、それぞれの証明書発行依頼情報を入力してもよい。また、抽出者端末１０６においても、端末を使用するユーザが複数存在する場合には、そのユーザ分の証明書発行依頼情報を入力し、ユーザごとに公開鍵を使い分けてもよい。証明書発行依頼情報の入力が終了した後、送信装置は、その入力された証明書発行依頼情報と公開鍵を認証機関装置１０２へ送信する（ステップＳ２００３）。
【０１２１】
認証機関装置１０２は、証明書発行依頼情報と公開鍵を通信手段２０４にて受信する（ステップＳ２００４）。認証機関装置１０２の証明書発行部２０２は、公開鍵を含む公開鍵証明書を生成し（ステップＳ２００５）、公開鍵ＤＢ２０１に生成した公開鍵証明書を蓄積する（ステップＳ２００６）。その後、証明書発行部２０２は、通信手段２０４を制御し、ネットワーク１０１を介し、証明書発行依頼情報を送信してきた送信装置へ、発行した公開鍵証明書を送信する（ステップＳ２００７）。
【０１２２】
公開鍵証明書を受信した送信装置は（ステップＳ２００８）、ステップＳ２００１で生成した秘密鍵、および認証機関装置１０２から発行された公開鍵証明書を自身が有する記憶装置に蓄積し（ステップＳ２００９）、処理を完了する。記憶領域として、署名生成装置１０３は、署名生成部３０３内の記憶領域、映像抽出装置１０５は署名生成部３０３内の記憶領域に保持する。
【０１２３】
図２１は、電子署名付き情報の送受信処理、および受信装置の検証処理を示すフローチャートである。図２１では送信装置と受信装置の間での電子署名付き情報の送受信処理、受信装置と認証機関装置１０２の間での電子署名の検証処理を示す。本実施の形態では、署名生成装置１０３と映像抽出装置１０５が送信装置となり、対応する受信装置は、映像抽出装置１０５と静止画検証装置１０７となる。
【０１２４】
初めに、送信装置は、署名対象の要約情報（ハッシュ情報）を記憶領域に記憶している秘密鍵によって暗号化する（ステップＳ２１０１）。暗号化してできた情報が電子署名となる。続けて、送信装置は、署名対象と電子署名と同じく記憶領域に記憶している公開鍵証明書とを受信装置に送信する（ステップＳ２１０２）。
【０１２５】
受信装置は、署名対象と電子署名と公開鍵証明書とを受信し（ステップＳ２１０３）、受信した公開鍵証明書の有効期限や失効情報等を確認するため、認証機関装置１０２に対して公開鍵証明書を送信する（ステップＳ２１０４）。本実施の形態では、認証機関装置１０２が証明書発行・証明書検証の一連の機能をサポートしているものとする。次に認証機関装置１０２は公開鍵証明書を受信し（ステップＳ２１０５）、有効性の検証を行い（ステップＳ２１０６）、検証結果を受信装置に対して送信する（ステップＳ２１０７）。
【０１２６】
受信装置は、検証結果を受信し（ステップＳ２１０８）、検証結果が有効であるかを確認する（ステップＳ２１０９）。検証結果が有効でない場合には（ステップＳ２１０９：Ｎｏ）、受信装置は改変のないことを証明できないと判断し（ステップＳ２１１３）、処理を終了する。検証結果が有効である場合には（ステップＳ２１０９：Ｙｅｓ）、受信装置は受信した署名対象の要約情報（ハッシュ情報）を生成し（ステップＳ２１１０）、さらに受信した電子署名を公開鍵で復号する（ステップＳ２１１１）。そして受信装置は、生成した署名対象の要約情報と、電子署名を公開鍵で復号した値が一致するかを確認する（ステップＳ２１１２）。
【０１２７】
一致しない場合（ステップＳ２１１２：Ｎｏ）、受信装置は、ステップＳ２１１３の処理に移行し、受信装置は、処理を終了する。一致する場合（ステップＳ２１１２：Ｙｅｓ）、受信装置は、改変のないことが証明できたと判断し（ステップＳ２１１４）、署名対象を保持し（ステップＳ２１１５）、処理を終了する。ステップＳ２１１３を通った場合に、受信装置の操作端末、たとえば、映像抽出装置１０５であれば抽出者端末１０６、静止画検証装置１０７であれば検証者端末１０８に対して、電子署名が証明できなかった旨の表示を行う通知処理を行ってもよい。
【０１２８】
図２２は、原動画情報の生成処理を示すフローチャートである。映像記録端末１０４は、原動画情報を生成する（ステップＳ２２０１）。生成後、映像記録端末１０４は、録画終了要求を受け付けたかを確認する（ステップＳ２２０２）。録画終了要求を受け付けていない場合（ステップＳ２２０２：Ｎｏ）、映像記録端末１０４は、ステップＳ２２０１の処理に移行し、引き続き原動画情報を生成し続ける。録画終了要求を受け付けている場合（ステップＳ２２０２：Ｙｅｓ）、映像記録端末１０４は、生成完了した原動画情報を署名生成装置１０３に送信し（ステップＳ２２０３）、処理を終了する。
【０１２９】
署名生成装置１０３は、原動画情報を受信する（ステップＳ２２０４）。署名生成装置１０３は、受信した原動画情報の署名生成処理を行う（ステップＳ２２０５）。原動画情報の署名生成処理の詳細は、図２３にて後述する。署名生成後、署名生成装置１０３は、原動画情報と署名情報を、映像管理ＴＢ３０２を介し映像管理ＤＢ３０１に格納する（ステップＳ２２０６）。格納後、署名生成装置１０３は、原動画情報と署名情報を映像抽出装置１０５に送信し（ステップＳ２２０７）、処理を終了する。
【０１３０】
映像抽出装置１０５は、原動画情報と署名情報を受信し（ステップＳ２２０８）、受信した原動画情報と署名情報を、映像管理ＴＢ４０２を介し映像管理ＤＢ４０１に格納し（ステップＳ２２０９）、処理を終了する。なお、本実施の形態では、映像記録端末１０４は、録画終了要求を受け付けた後に、一括して原動画情報を送信したが、たとえばＭＰＥＧに符号化したフレームをＧＯＰ単位で署名生成装置１０３に順次送信してもよい。
【０１３１】
図２３は、原動画情報の署名生成処理を示すフローチャートである。原動画情報の署名生成処理は、処理呼び元の原動画情報の生成処理から、原動画情報を取得している。署名生成装置１０３は、符号化パラメータを取得する（ステップＳ２３０１）。取得後、署名生成装置１０３は、原動画情報の映像復号処理を行う（ステップＳ２３０２）。映像復号処理の詳細は、前述した図１０での符号１００１、符号１００２である。具体的には、署名生成装置１０３は、原動画情報のフォーマット形式に即して、復号処理を行い、各フレームがＩ、Ｐ、Ｂのいずれかのピクチャであるかを判断し、また、各フレームが時系列順でなければ時系列順に取得できるよう配置を変更する。
【０１３２】
ステップＳ２３０２にて、原動画情報からフレーム単位で取得する準備が整ったら、署名生成装置１０３は、先頭のフレームを取得し（ステップＳ２３０３）、取得したフレームの独立フレーム生成処理を行う（ステップＳ２３０４）。独立フレーム生成処理については、図２４にて後述する。
【０１３３】
次に、署名生成装置１０３は、出力された独立フレームを、符号化パラメータを基に静止画に符号化する（ステップＳ２３０５）。具体的には、署名生成装置１０３は、Ｉ、Ｐ、Ｂの各ピクチャに対して、画像フォーマットがＪＰＥＧの場合、ＪＰＥＧエンコードを行い、静止画情報を生成する。続けて、署名生成装置１０３は、符号化された静止画のダイジェスト情報を生成する（ステップＳ２３０６）。生成後、署名生成装置１０３は、取得したフレームが最後のフレームかを確認する（ステップＳ２３０７）。続きのフレームが存在する場合（ステップＳ２３０７：Ｎｏ）、署名生成装置１０３は、次のフレームを取得し（ステップＳ２３０８）、ステップＳ２３０４の処理に移行する。
【０１３４】
取得したフレームが最後のフレームである場合（ステップＳ２３０７：Ｙｅｓ）、署名生成装置１０３は、全静止画のダイジェスト情報の集合に対して、映像記録端末１０４の電子署名を生成し（ステップＳ２３０９）、処理を終了する。
【０１３５】
図２４は、独立フレーム生成処理を示すフローチャートである。独立フレーム生成処理は、署名生成装置１０３が実行する他、映像抽出装置１０５も実行する。署名生成装置１０３は、取得したフレームがＩピクチャかを確認する（ステップＳ２４０１）。ここでのＩピクチャとはＩＤＲピクチャも含む。
【０１３６】
Ｉピクチャであった場合（ステップＳ２４０１：Ｙｅｓ）、署名生成装置１０３は、取得したフレームを独立フレームに変換する（ステップＳ２４０７）。取得したフレームがＰ、Ｂピクチャであった場合（ステップＳ２４０１：Ｎｏ）、署名生成装置１０３は、前方のＩピクチャ、または、Ｐピクチャであるフレームを取得する（ステップＳ２４０２）。ここでの前方とは時間軸上で過去に位置する方向である。
【０１３７】
次に、署名生成装置１０３は、取得したフレームがＰピクチャかを確認する（ステップＳ２４０３）。Ｐピクチャである場合（ステップＳ２４０３：Ｙｅｓ）、署名生成装置１０３は、前方のフレームと取得したフレームから独立フレームに変換する（ステップＳ２４０６）。Ｂピクチャである場合（ステップＳ２４０３：Ｎｏ）、署名生成装置１０３は、後方のＩピクチャ、または、Ｐピクチャであるフレームを取得する（ステップＳ２４０４）。取得後、署名生成装置１０３は、前方のフレームと後方のフレームと取得したフレームから独立フレームに変換する（ステップＳ２４０５）。
【０１３８】
ステップＳ２４０７、ステップＳ２４０６、ステップＳ２４０５の処理後、署名生成装置１０３は、独立フレームを出力し（ステップＳ２４０８）、処理を終了する。なお、ステップＳ２４０７、ステップＳ２４０６、ステップＳ２４０５での変換の具体例は、前述した図１０の符号１００３から符号１００４への処理となる。
【０１３９】
図２５−１、図２５−２は、切り出し静止画情報の生成処理および編集処理を示すフローチャートである。切り出し静止画情報の生成処理および編集処理を行うには、まず原動画情報が必要となる。したがって、図２５−１では原動画情報の取得を、図２５−２では、切り出し静止画情報の生成と編集処理を行っている。
【０１４０】
まず、図２５−１において、抽出者端末１０６は、映像抽出装置１０５に、切り出し対象の原動画情報の取り出し指示を送信する（ステップＳ２５０１）。送信後、抽出者端末１０６は、映像抽出装置１０５から応答があるまで待機する。
【０１４１】
映像抽出装置１０５は、切り出し対象の原動画情報の取り出し指示を受信する（ステップＳ２５０２）。受信後、映像抽出装置１０５は、映像抽出装置１０５内の映像管理ＴＢ４０２を介して、映像管理ＤＢ４０１に蓄積された切り出し対象の原動画情報と署名情報を取り出し、署名検証部４０４を介して、原動画情報の署名検証処理を行う（ステップＳ２５０３）。原動画情報の署名検証処理の詳細は、図２６にて後述する。署名検証処理を行う理由は、切り出し処理を行う前に、原動画情報が改ざんされていないかどうかを確認するためである。
【０１４２】
原動画情報の署名検証処理の終了後、映像抽出装置１０５は、原動画情報の検証に成功したかを確認する（ステップＳ２５０４）。映像抽出装置１０５は、成功した場合（ステップＳ２５０４：Ｙｅｓ）原動画情報を、失敗した場合（ステップＳ２５０４：Ｎｏ）エラー通知をそれぞれ抽出者端末１０６に送信する（ステップＳ２５０５、ステップＳ２５０６）。
【０１４３】
抽出者端末１０６は、映像抽出装置１０５からの受信内容を確認する（ステップＳ２５０７）。受信内容が原動画情報だった場合（ステップＳ２５０７：Ｙｅｓ）、抽出者端末１０６は、原動画情報を表示する（ステップＳ２５０８）。受信内容が原動画情報でなかった場合（ステップＳ２５０７：Ｎｏ）、抽出者端末１０６は、エラーを受信したこととなり、エラー通知を表示し（ステップＳ２５０９）、処理を終了する。
【０１４４】
原動画情報を表示後、抽出者端末１０６は、原動画情報の静止画符号化指示を映像抽出装置１０５に送信する（ステップＳ２５１０）。原動画情報の静止画符号化指示を受信した映像抽出装置１０５は、原動画情報の静止画符号化処理を実行する（ステップＳ２５１１）。原動画情報の静止画符号化処理は、図２３にて示した原動画情報の署名生成処理のうち、ステップＳ２３０６の処理とステップＳ２３０９の処理とを除いた処理となる。静止画に符号化後、原動画情報の全静止画情報を抽出者端末１０６に送信する（ステップＳ２５１２）。抽出者端末１０６は、原動画情報の全静止画情報を受信する（ステップＳ２５１３）。抽出者端末１０６は、原動画情報の全静止画情報を用いて切り出し静止画情報の生成を行う。
【０１４５】
抽出者端末１０６は、原動画情報の全静止画情報から静止画を抽出し、切り出し情報の生成を行う。なお、抽出者端末１０６は、ステップＳ２５１０の処理において、抽出を行う原動画情報のフレームの位置情報を、静止画符号化指示とあわせて送信してもよい。そして位置情報を受信した映像抽出装置１０５は、位置情報に対応したフレームだけを静止画に符号化してもよい。具体的には、原動画情報の静止画符号化処理にて、映像抽出装置１０５は、ステップＳ２３０３の処理を「位置情報に対応したフレームを取得」として実行し、ステップＳ２３０７：Ｙｅｓのルートを処理する。これにより、映像抽出装置１０５は、位置情報に対応したフレームだけを静止画に符号化することができる。
【０１４６】
次に、図２５−２において、抽出者端末１０６は、切り出し静止画情報を生成する（ステップＳ２５１４）。切り出し静止画情報の生成の様子は、前述した図１４である。また、抽出者端末１０６の操作の様子は、前述した図１６である。本実施の形態では、フレーム５５５０が切り出されたことを想定する。
【０１４７】
切り出し静止画情報の生成が完了すると、抽出者端末１０６は、切り出し静止画情報を編集し、編集済み切り出し静止画情報を生成する（ステップＳ２５１５）。抽出者端末１０６が編集済み切り出し静止画情報を生成する様子は、前述した図１７である。編集済み切り出し静止画情報を生成後、抽出者端末１０６は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を、映像抽出装置１０５に送信する（ステップＳ２５１６）。
【０１４８】
待機中であった映像抽出装置１０５は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を受信する（ステップＳ２５１７）。受信後、映像抽出装置１０５は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を映像管理ＤＢ４０１に格納する（ステップＳ２５１８）。格納後、映像抽出装置１０５は、抽出位置情報、切り出し静止画情報、編集情報、原動画情報の署名情報を編集済み切り出し情報の検証情報に設定する（ステップＳ２５１９）。設定後、映像抽出装置１０５は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を静止画検証装置１０７に送信する（ステップＳ２５２０）。
【０１４９】
待機中であった静止画検証装置１０７は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を受信する（ステップＳ２５２１）。受信後、静止画検証装置１０７は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を映像管理ＤＢ５０１に蓄積し（ステップＳ２５２２）、切り出し静止画情報の生成処理および編集処理を終了する。
【０１５０】
図２６は、原動画情報の署名検証処理を示すフローチャートである。前述した図１３にて、原動画情報の署名検証処理の様子を示す。初めに、映像抽出装置１０５は、原動画情報の電子署名検証処理を行う（ステップＳ２６０１）。検証後、映像抽出装置１０５は検証結果を確認する（ステップＳ２６０２）。検証結果が失敗だった場合（ステップＳ２６０２：Ｎｏ）、映像抽出装置１０５は、検証に失敗したことを出力し（ステップＳ２６１４）原動画情報の署名検証処理を終了する。検証に失敗した場合、映像抽出装置１０５は、抽出者端末１０６になんらかの改変があったことを通知する。
【０１５１】
検証結果が成功だった場合（ステップＳ２６０２：Ｙｅｓ）、映像抽出装置１０５は、符号化パラメータを取得する（ステップＳ２６０３）。なお、符号化パラメータは、署名生成装置１０３内に事前に格納された符号化パラメータと同一の情報が映像抽出装置１０５内に格納されていることが必要である。
【０１５２】
続けて、映像抽出装置１０５は、受信した原動画情報の映像復号処理を行う（ステップＳ２６０４）。原動画情報の映像復号処理については、図２３でのステップＳ２３０２の原動画情報の映像復号処理と等しい。ステップＳ２６０４にて、原動画情報からフレーム単位で取得する準備が整ったら、映像抽出装置１０５は、先頭のフレームを取得し（ステップＳ２６０５）、取得したフレームの独立フレーム生成処理を行う（ステップＳ２６０６）。独立フレーム生成処理については、図２４にて前述した。
【０１５３】
次に、映像抽出装置１０５は、出力された独立フレームを、符号化パラメータを基に静止画に符号化する（ステップＳ２６０７）。具体的には、映像抽出装置１０５は、Ｉ、Ｐ、Ｂの各ピクチャに対して、画像フォーマットがＪＰＥＧの場合、ＪＰＥＧエンコードを行い、静止画情報を生成する。続けて、映像抽出装置１０５は、符号化された静止画のダイジェスト情報を生成する（ステップＳ２６０８）。
【０１５４】
生成後、映像抽出装置１０５は、生成されたダイジェスト情報と原動画情報の署名情報に格納されているダイジェスト情報を比較し（ステップＳ２６０９）、一致するかを確認する（ステップＳ２６１０）。ダイジェスト情報の比較で一つでも一致しないものがあれば（ステップＳ２６１０：Ｎｏ）、映像抽出装置１０５は、なんらかの改変が発生したこととなり、ステップＳ２６１４の処理に移行する。
【０１５５】
ダイジェスト情報の比較が一致した場合（ステップＳ２６１０：Ｙｅｓ）、映像抽出装置１０５は、取得したフレームが最後のフレームかどうかを確認する（ステップＳ２６１１）。最後のフレームではない場合（ステップＳ２６１１：Ｎｏ）、映像抽出装置１０５は、次のフレームを取得し（ステップＳ２６１２）、ステップＳ２６０６の処理に移行する。取得したフレームが最後のフレームであった場合（ステップＳ２６１１：Ｙｅｓ）、映像抽出装置１０５は、検証に成功したことを出力し（ステップＳ２６１３）、原動画情報の署名検証処理を終了する。
【０１５６】
図２７は、切り出し静止画情報の検証処理を示すフローチャートである。検証者端末１０８は、検証対象の編集済み切り出し静止画情報の取り出し指示を静止画検証装置１０７に送信する（ステップＳ２７０１）。送信後、検証者端末１０８は、静止画検証装置１０７の応答があるまで待機する。
【０１５７】
静止画検証装置１０７は、検証対象の編集済み切り出し静止画情報の取り出し指示を受信する（ステップＳ２７０２）。受信後、静止画検証装置１０７は、編集済み切り出し静止画情報と、編集済み切り出し情報の検証情報を取り出す（ステップＳ２７０３）。取り出し後、静止画検証装置１０７は、原動画情報の電子署名検証処理を行う（ステップＳ２７０４）。処理終了後、原動画情報の電子署名検証処理が成功したかを判断する（ステップＳ２７０５）。原動画情報の電子署名検証処理が失敗した場合（ステップＳ２７０５：Ｎｏ）、静止画検証装置１０７は、エラー通知を検証者端末１０８に送信する（ステップＳ２７１１）。
【０１５８】
原動画情報の電子署名検証処理が成功した場合（ステップＳ２７０５：Ｙｅｓ）、静止画検証装置１０７は、切り出し静止画情報、編集情報から、復元静止画情報の生成処理を実行する（ステップＳ２７０６）。復元静止画情報の生成処理の詳細は、図２８にて後述する。復元静止画情報を生成後、静止画検証装置１０７は、復元静止画情報と編集済み静止画情報が一致したかを判断する（ステップＳ２７０７）。一致したと判断された場合（ステップＳ２７０７：Ｙｅｓ）、静止画検証装置１０７は、編集済み静止画情報の原本一部検証処理を実行する（ステップＳ２７０８）。編集済み静止画情報の原本一部検証処理の詳細は、図２９にて後述する。
【０１５９】
原本一部検証処理終了後、静止画検証装置１０７は、編集済み静止画情報の原本一部検証処理が成功したかを判断する（ステップＳ２７０９）。原本一部検証処理が成功した場合（ステップＳ２７０９：Ｙｅｓ）、静止画検証装置１０７は、編集済み静止画情報の検証結果を検証者端末１０８に送信する（ステップＳ２７１０）。復元静止画情報と編集済み静止画情報が一致しない場合（ステップＳ２７０７：Ｎｏ）、または、原本一部検証処理が失敗した場合（ステップＳ２７０９：Ｎｏ）、静止画検証装置１０７は、ステップＳ２７１１の処理に移行する。
【０１６０】
待機中であった検証者端末１０８は、受信内容を確認し、受信内容が編集済み静止画情報の検証結果かを判断する（ステップＳ２７１２）。受信内容が編集済み静止画情報の検証結果であった場合（ステップＳ２７１２：Ｙｅｓ）、検証者端末１０８は、編集済み静止画情報の検証結果を表示し（ステップＳ２７１４）、切り出し静止画情報の検証処理を終了する。編集済み静止画情報の検証結果の表示の様子は、前述した図１９である。受信内容が編集済み静止画情報の検証結果でない場合（ステップＳ２７１２：Ｎｏ）、検証者端末１０８は、エラー通知を表示し（ステップＳ２７１３）、切り出し静止画情報の検証処理を終了する。
【０１６１】
図２８は、復元静止画情報の生成処理を示すフローチャートである。図２８の例では、編集情報１１０１〜編集情報１１０３のように、編集内容で構成されている編集情報を用いて復元する場合の処理の例を示す。静止画検証装置１０７は、編集情報を取得する（ステップＳ２８０１）。取得後、静止画検証装置１０７は、編集情報の１行目の文字列を取得する（ステップＳ２８０２）。編集情報の１行目にはソフトウェアの情報が記載されている。取得後、静止画検証装置１０７は、取得した文字列に対応するソフトウェアを起動対象ソフトウェアに設定し、切り出し静止画情報を編集対象に設定する（ステップＳ２８０３）。
【０１６２】
設定後、静止画検証装置１０７は、変数ｉを２に設定する（ステップＳ２８０４）。変数ｉは、次に読み込む文字列の行数を示している。設定後、静止画検証装置１０７は、編集情報のｉ行目の文字列を取得する（ステップＳ２８０５）。取得後、静止画検証装置１０７は、取得した文字列が編集内容かを判断する（ステップＳ２８０６）。取得した文字列が編集内容でない場合（ステップＳ２８０６：Ｎｏ）、取得した文字列の記載内容を実行対象となる処理のパラメータとして追加する（ステップＳ２８１１）。
【０１６３】
編集内容である場合（ステップＳ２８０６：Ｙｅｓ）、静止画検証装置１０７は、実行対象となる処理が設定されているかを判断する（ステップＳ２８０７）。実行対象となる処理が設定されていない場合（ステップＳ２８０７：Ｎｏ）、静止画検証装置１０７は、取得した文字列の記載内容を実行対象となる処理に設定する（ステップＳ２８１０）。実行対象となる処理が設定されている場合（ステップＳ２８０７：Ｙｅｓ）、静止画検証装置１０７は、編集対象に実行対象となる処理を起動対象ソフトウェアで実行する（ステップＳ２８０８）。実行後、静止画検証装置１０７は、生成された画像を新たな編集対象に設定する（ステップＳ２８０９）。
【０１６４】
具体的な実行方法としては、静止画検証装置１０７上に搭載しているＯＳの１機能であるシェルから、起動対象ソフトウェアを実行してもよい。たとえば、編集情報が編集情報１１０１ならば、静止画検証装置１０７は、以下のようなコマンドをシェルから実行する。
【０１６５】
＄＞Ｐｉｃｔｕｒｅ ｔｏｏｌｓ ｖｅｒｓｉｏｎ ２．０ −ｃｒｏｐ ４００ｘ３０＋３００＋３００ −ｄｅｎｓｉｔｙ ７２ −ｓｃａｌｅ ＋２０％ Ｃ：￥Ｅｃｔｒａｃｔ．ｊｐｇ Ｃ：￥Ｅｃｔｒａｃｔ＿ｏｕｔ．ｊｐｇ
【０１６６】
上記例にて、“−ｃｒｏｐ”が“部分拡大”に対応するコマンド名を示している。また、“４００ｘ３０＋３００＋３００ −ｄｅｎｓｉｔｙ ７２ −ｓｃａｌｅ ＋２０％”は各パラメータに基づいた文字列を示している。また、“Ｃ：￥Ｅｃｔｒａｃｔ．ｊｐｇ”は復元前の画像であり、“Ｃ：￥Ｅｃｔｒａｃｔ＿ｏｕｔ．ｊｐｇ”は生成された復元後の画像を示している。
【０１６７】
ステップＳ２８１０、またはステップＳ２８１１の終了後、静止画検証装置１０７は、編集情報の最後の行を取得したかを判断する（ステップＳ２８１２）。最後の行を取得していない場合（ステップＳ２８１２：Ｎｏ）、静止画検証装置１０７は、変数ｉをインクリメントし（ステップＳ２８１３）、ステップＳ２８０５の処理に移行する。最後の行を取得した場合（ステップＳ２８１２：Ｙｅｓ）、静止画検証装置１０７は、実行対象となる処理が実行済みかを判断する（ステップＳ２８１４）。実行済みでない場合（ステップＳ２８１４：Ｎｏ）、静止画検証装置１０７は、編集対象に実行対象となる処理を起動対象ソフトウェアで実行する（ステップＳ２８１５）。実行済みの場合（ステップＳ２８１４：Ｙｅｓ）、または、ステップＳ２８１５の処理が終了後、静止画検証装置１０７は、編集対象を復元静止画情報として出力し（ステップＳ２８１６）、復元静止画情報の生成処理を終了する。
【０１６８】
図２８の例では、編集情報が編集内容で構成されている場合のフローチャートの例を示した。編集情報が編集操作で構成されている場合であれば、たとえば、静止画検証装置１０７は、編集情報に記載された起動対象ソフトウェアを起動する。続けて、静止画検証装置１０７は、編集情報の記載どおりにソフトウェアに対してイベントを送信することで、ソフトウェアの処理を実行してもよい。イベントの内容は、抽出者が起動対象ソフトウェアを操作したときに記録したマウスやキーボードのイベントであってもよい。このように、署名システム１００は、抽出者の代わりに静止画検証装置１０７のＯＳなどが起動対象ソフトウェアに対してイベントを送信することで、復元静止画情報を生成してもよい。
【０１６９】
図２９は、編集済み静止画情報の原本一部検証処理を示すフローチャートである。静止画検証装置１０７は、原動画情報からの抽出位置情報を取得する（ステップＳ２９０１）。取得後、静止画検証装置１０７は、原動画情報の署名情報に格納されているダイジェスト情報から、抽出位置情報に対応するフレームのダイジェスト情報を取得する（ステップＳ２９０２）。ダイジェスト情報を取得後、静止画検証装置１０７は、切り出し静止画情からダイジェスト情報を生成する（ステップＳ２９０３）。
【０１７０】
生成後、静止画検証装置１０７は、取得したダイジェスト情報と生成したダイジェスト情報が一致するかを判断する（ステップＳ２９０４）。一致した場合（ステップＳ２９０４：Ｙｅｓ）、静止画検証装置１０７は、検証に成功したことを出力し（ステップＳ２９０５）、編集済み静止画情報の原本一部検証処理を終了する。一致しない場合（ステップＳ２９０４：Ｎｏ）、静止画検証装置１０７は、検証に失敗したことを出力し（ステップＳ２９０６）、編集済み静止画情報の原本一部検証処理を終了する。
【０１７１】
以上説明したように、静止画検証装置、静止画検証方法、および静止画検証プログラムによれば、署名された動画像データの中から編集元画像を指定し、編集後、編集済み画像と編集元画像と編集元画像の動画像データにおける位置情報と編集情報を関連付ける。これにより、検証時には、関連付けられた編集元画像と位置情報と動画像データの署名から、編集元画像の正当性が保証できる。さらに、編集元画像と編集情報から編集済み画像を生成可能になるため、公開された編集済み画像の正当性が保証できる。
【０１７２】
編集済み画像の正当性がとれることにより、切り出し静止画情報に対して、ズーム化や明るさ調整等の編集を行っても、編集済み画像が改ざんされていないことに加え、動画像データからの抽出位置を第三者に証明することが可能である。
【０１７３】
また、静止画検証装置は、フレーム間圧縮された動画像データの予測フレームとその予測元とからなるフレームから、画像フォーマットで符号化することにより画像を生成し、画像ごとに要約情報を生成してもよい。これにより、フレーム間圧縮された動画像データであっても、動画像から切り出した画像に対して、編集を行っても改ざんされていないことを第三者に証明することが可能である。
【０１７４】
また、静止画検証装置は、動画像のフレームを画像フォーマットで符号化する際に、一つ以上のパラメータを適用して符号化し、画像ごとに要約情報を生成してもよい。これにより、生成された画像は、パラメータを設定することで、より見やすい、またはデータサイズが小さいといった、パラメータを変更する前よりよい画像を得ることができる。また、静止画検証装置は、動画像データによって毎回同じ編集を行う処理が存在すれば、前述の処理はパラメータに設定しておき、編集情報が変化する処理については、抽出者によって編集される際に、編集情報に記録してもよい。
【０１７５】
具体的には、たとえば、動画像データが常に暗部を撮影した動画像である場合、輝度の変更は毎回行われるため、静止画検証装置は、パラメータで輝度の変更を設定してもよい。また、生成された画像からの部分拡大の範囲が毎回異なるのであれば、静止画検証装置は、抽出者によって編集される際に、編集情報の一つとして部分拡大の範囲を記録してもよい。
【０１７６】
また、静止画検証装置は、検証対象となる編集済み画像を検証する際に、関連付けられた編集元画像と位置情報と動画像データの署名から、編集元画像の正当性を検証する。続けて、静止画検証装置は、編集元画像と編集情報から編集済み画像を復元し、復元結果と検証対象となる編集済み画像とを比較することにより、検証対象となる編集済み画像の正当性を検証してもよい。これにより、編集済み画像が元の動画像データの一部を編集した画像であり、改ざんされていないことを第三者に証明できる。また、編集済み画像に電子署名が付与されていれば、編集を行った抽出者が誰であるかが明らかであるため、他の第三者が編集済み画像に対して何らかの改変・追加等を施した場合でも、その追跡は可能である。
【０１７７】
また、静止画検証装置は、編集を行うソフトウェアとソフトウェアにて実行される編集処理と編集処理に付随する設定値とを編集情報として記録してもよい。これにより、編集情報から編集を行うソフトウェアに対するコマンド文が生成でき、静止画検証装置は、コマンド文の発行により編集済み画像を生成することができる。
【０１７８】
また、静止画検証装置は、編集を行うソフトウェアとソフトウェアに対して送信されたイベントを編集情報として記録してもよい。マウスやキーボードなどによってソフトウェアに送信されたイベントは、抽出者がソフトウェアに対して行った編集操作と一致する。これにより、送信されたイベントの記録をとり、ソフトウェアに対してイベントを送信することにより、抽出者が編集操作を行った際の操作を復元でき、静止画検証装置は編集済み画像を生成することができる。
【０１７９】
また、静止画検証装置は、編集元画像を指定する際に、動画像データ上の指定された動画フレームを基に静止画像データを生成してもよい。これにより、静止画検証に必要な静止画のみを符号化するだけでよく、静止画検証処理を高速化することができる。
【０１８０】
なお、本実施の形態で説明した静止画検証方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本静止画検証プログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また本静止画検証プログラムは、インターネット等のネットワークを介して配布してもよい。
【符号の説明】
【０１８１】
７０１ 入力部
７０２ 映像復号部
７０３ 転送部
７０４ 変換部
７０５ 静止画符号化部
７０６ ダイジェスト情報生成部
７０７ 符号化パラメータ保持部
７０８ 電子署名生成部
７０９ 格納部
７１０ 電子署名検証部
７１１ 指定部
７１２ 編集記録部
７１３ 関連付け部
７１４ ダイジェスト情報検証部
７１５ 静止画復元部
７１６ 静止画判断部
７１７ 編集済み静止画検証部
【技術分野】
【０００１】
本発明は、静止画を検証する静止画検証装置、静止画検証方法、および静止画検証プログラムに関する。
【背景技術】
【０００２】
近年、店舗や繁華街、集合住宅等での監視カメラ設置や、業務車両へのドライブレコーダ設置等が一般化し、動画像を証拠物件として取り扱う事例が増加している。また、電話による取引やサポート業務のトラブル対策として、店舗が顧客とオペレータとの会話を録音し証拠として保持することも常識となりつつある。
【０００３】
現在、動画像や音声を証拠とする場合、ビデオテープや画像・音声ファイルをそのまま提供している。しかし、画像・音声保存のデジタル化が進めば、それらの改ざんや編集は容易になり、証拠として取り扱う場合は署名やタイムスタンプといった第三者証明が必要となる。現に電話オペレータの音声をタイムスタンプ付きで録音・記録するサービスや製品が販売されており、今後このような技術のニーズが高まることが予想される。
【０００４】
第三者の改ざんを検知する技術として、電子文書の内容を項目分割し、各項目の要約情報を算出、各項目の要約情報の集まりに対して電子署名を付加する方式を利用する技術がある。ここで、要約情報とは、メッセージダイジェストという、暗号学的一方向性ハッシュ関数を用いて算出されたハッシュ情報に相当する。この技術を動画像データに適用することで、動画像データの原本性の保証、署名対象からのプライバシー保護可能なデータ抽出を目的とした技術が開示されている（たとえば、下記特許文献１を参照）。
【０００５】
また、映像データは非常にデータ量が多くなるため、さまざまなデータ圧縮技術が存在する。圧縮技術の中で、フレーム間予測技術があり、たとえば、圧縮映像データの一つであるＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）−１フォーマットでは、前述したフレーム間予測技術を採用しており、Ｉピクチャ、Ｐピクチャ、Ｂピクチャと呼ばれる３タイプの画像を保持している。Ｉピクチャは、映像として表示に必要な全画像を保持し、Ｐピクチャは、過去のＩ、Ｐピクチャの画像からの差分を、Ｂピクチャは、過去／未来のＩ、Ｐピクチャの画像からの差分をそれぞれ保持している。Ｐ、Ｂピクチャは、前後画像との差分を取ることにより、高いデータ圧縮を実現している。
【０００６】
このようなフレーム間予測技術を持った映像データは、復号に大量の処理がかかる。そこで、前述したＩピクチャであるフレームを抽出し、フレームごとに静止画に符号化しておくことで、迅速に映像データを再生する技術が開示されている（たとえば、下記特許文献２を参照。）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００８−１７８０４８号公報
【特許文献２】特開２００６−７４６９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した従来技術において、圧縮映像データの中から特定のフレームを抽出し、たとえば、報告書の電子ファイルに静止画として張り付けたい場合に、切り出された静止画は、正常描画と原本性保証の両立が実現されないという問題があった。具体的に特許文献１では、Ｉ、Ｐ、Ｂの複数の画像を集めて構成されるＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅｓ）という動画像の最小単位での切り出しを想定して実現されている。圧縮映像データに対する静止画切り出しをした場合、切り出し対象のフレームがＰ、Ｂピクチャである場合、差分しか保持していないため、正常描画できない。また、Ｉピクチャも１つのフレーム内で圧縮されているため、そのままでは正常描画できない。
【０００９】
そこで、正常描画を行うために、特許文献２の技術を適用し、ＩピクチャをたとえばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）フォーマットに従って静止画を生成する。この場合、静止画と元のフレームでは、データの内容が変化しているため、切り出した静止画が原本の一部という原本性の保証が行えない。結果として、前述の通り、正常描画と原本性保証の両立は実現されないという問題があった。さらに、Ｐ、Ｂピクチャにおいては、そもそも描画に必要な全画像の情報を保持していないため、静止画として正常に描画できないという問題があった。
【００１０】
また、静止画に変換してメッセージダイジェストを生成した後に、その静止画に対してさらにズーム化や明るさを調整する等の編集が行われると、編集前のメッセージダイジェストと編集後のメッセージダイジェストが一致しなくなるため、元の映像からの抽出位置を確認できず、原本保証の処理ができないという問題があった。
【００１１】
本発明は、上述した従来技術による問題点を解消するため、映像から切り出した静止画を編集しても編集画像が改ざんされていないことと、映像からの抽出位置を第三者に証明可能とする静止画検証装置、静止画検証方法、および静止画検証プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
上述した課題を解決し、目的を達成するため、開示の静止画検証装置は、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を格納部に記憶し、複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、選択された静止画像の動画像データ上の位置情報と、選択された静止画像データと、編集処理の内容を表す編集情報とを記録し、編集済み画像データの正当性の検証を行うときに、編集済み画像データに対応する静止画像データと編集情報を記録部から取り出し、編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成し、生成された復元静止画像データと検証対象の編集済み画像データとを比較して一致しているかを判断し、検証対象の編集済み画像データに対応する静止画像データを取得して要約情報を生成し、生成された要約情報と、記録された位置情報を基に格納部に記憶されている原本保証を行う編集済み画像データに対応する要約情報を格納部から抽出して比較し、一致しているかを検証し、検証結果と判断結果を基に編集済み画像データの正当性を検証することを要件とする。
【発明の効果】
【００１３】
本静止画検証装置、静止画検証方法、および静止画検証プログラムによれば、映像から切り出した静止画を編集しても編集画像が改ざんされていないことと、映像からの抽出位置を第三者に証明できるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】実施の形態にかかる署名システム１００の構成図である。
【図２】認証機関装置１０２の機能的構成を示すブロック図である。
【図３】署名生成装置１０３の機能的構成を示すブロック図である。
【図４】映像抽出装置１０５の機能的構成を示すブロック図である。
【図５】静止画検証装置１０７の機能的構成を示すブロック図である。
【図６】静止画検証装置１０７のハードウェア構成を示すブロック図である。
【図７】署名生成部３０３／静止画検証部５０４の機能的構成を示すブロック図である。
【図８】署名アルゴリズムの概要を示す説明図である。
【図９】圧縮映像データの画像タイプとその並びの一例を示す説明図である。
【図１０】圧縮映像データのＰ、Ｂピクチャを独立画像へ変換する一例を示す説明図である。
【図１１】切り出し静止画情報の編集情報の記録の一例を示す説明図である。
【図１２】原動画情報の署名生成処理の概要を示す説明図である。
【図１３】原動画情報の署名検証処理の概要を示す説明図である。
【図１４】切り出し静止画情報、編集済み切り出し静止画情報の生成方法の概要を示す説明図である。
【図１５】切り出し静止画情報の検証方法の概要を示す説明図である。
【図１６】原動画情報の抽出操作を示す説明図である。
【図１７】切り出し静止画情報の編集情報の編集操作を示す説明図である。
【図１８】検証対象の切り出し静止画情報の選択画面を示す説明図である。
【図１９】切り出し静止画情報の検証結果を示す説明図である。
【図２０】電子署名の公開鍵登録処理を示すフローチャートである。
【図２１】電子署名付き情報の送受信処理、および受信装置の検証処理を示すフローチャートである。
【図２２】原動画情報の生成処理を示すフローチャートである。
【図２３】原動画情報の署名生成処理を示すフローチャートである。
【図２４】独立フレーム生成処理を示すフローチャートである。
【図２５−１】切り出し静止画情報の生成処理および編集処理を示すフローチャート（その１）である。
【図２５−２】切り出し静止画情報の生成処理および編集処理を示すフローチャート（その２）である。
【図２６】原動画情報の署名検証処理を示すフローチャートである。
【図２７】切り出し静止画情報の検証処理を示すフローチャートである。
【図２８】復元静止画情報の生成処理を示すフローチャートである。
【図２９】編集済み静止画情報の原本一部検証処理を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下に添付図面を参照して、本発明にかかる静止画検証装置、静止画検証方法、および静止画検証プログラムの好適な実施の形態を詳細に説明する。
【００１６】
図１は、実施の形態にかかる署名システム１００の構成図である。署名システム１００は認証機関装置１０２と、署名生成装置１０３と、映像抽出装置１０５と、静止画検証装置１０７とで構成される。本システムはネットワーク１０１に接続可能である。署名生成装置１０３は、複数の映像記録端末１０４と接続されている。映像抽出装置１０５は、抽出者端末１０６と接続されている。静止画検証装置１０７は、検証者端末１０８と接続されている。
【００１７】
ネットワーク１０１は、インターネット、イントラネット、ワイドエリアネットワーク等の通信回線網に相当する。認証機関装置１０２は、電子署名情報を管理する認証機関のサーバである。電子署名とは、署名対象を要約した要約情報を送信装置が保持する秘密鍵で暗号化した情報のことである。そして、送信装置は電子署名、署名対象、および公開鍵証明書を受信装置へ送信する。受信装置は、公開鍵証明書の有効性確認を行った上で、暗号化された電子署名を公開鍵証明書に含まれる公開鍵で復号し、署名対象から得た要約情報と比較を行う。この比較結果が同一か否かによって、正当な相手からの送信か否かを判断する。詳細は図２１にて後述する。
【００１８】
また、前述した要約情報とは、署名対象に対して暗号学的一方向性ハッシュ関数を用いて算出されたハッシュ情報であり、署名対象のサイズを圧縮できるという意味で、メッセージダイジェストともいわれる。また、暗号学的一方向性ハッシュ関数で生成されたハッシュ情報は、暗号学的には、その署名対象からしか生成することができない唯一の情報となり、生成されたハッシュ情報から元の情報を復元することができないという特徴を持っている。
【００１９】
このため、情報の暗号化や電子署名生成にはよく使われている。この暗号学的一方向性ハッシュ関数には、ＭＤ５（Ｍｅｓｓａｇｅ Ｄｉｇｅｓｔ ５）、ＳＨＡ（Ｓｅｃｕｒｅ Ｈａｓｈ Ａｌｇｏｒｉｔｈｍ）−１、ＳＨＡ−２５６のようなアルゴリズムがある。情報に対してどのアルゴリズムを用いて要約情報を生成しているかについての情報（ハッシュ情報生成アルゴリズム）は公開鍵証明書に記載されている。
【００２０】
署名生成装置１０３は、後述する映像記録端末１０４から送信された情報を保存・蓄積し、署名生成処理を行うサーバである。映像記録端末１０４は、電子署名の対象となる情報、ここでは原本データ（以降、原動画情報と説明）の撮影・記録を行うための端末である。たとえば、ハンディタイプのビデオカメラや業務用監視カメラ等に相当する。映像記録端末１０４は署名生成装置１０３と通信可能である。または、署名生成装置１０３と映像記録端末１０４とに装備された可搬型の記録メディアやＵＳＢ、ＩＥＥＥ１３９４等の専用ケーブルを介して行われてもよい。
【００２１】
映像抽出装置１０５は、署名生成装置１０３から送られてきた情報を蓄積するサーバである。映像抽出装置１０５は後述する抽出者端末１０６にて操作するが、映像抽出装置１０５にマウスやキーボード、ディスプレイ等を接続することで直接操作できるようにしてもよい。抽出者端末１０６は、映像抽出装置１０５の操作を行うための端末である。抽出者端末１０６は映像抽出装置１０５と通信可能である。
【００２２】
静止画検証装置１０７は、映像抽出装置１０５から送られてきた情報を蓄積し、送られてきた情報に付される電子署名の検証を行うサーバである。静止画検証装置１０７は後述する検証者端末１０８にて操作するが、静止画検証装置１０７にマウスやキーボード、ディスプレイ等を接続することで直接操作できるようにしてもよい。検証者端末１０８は、静止画検証装置１０７の操作を行うための端末である。検証者端末１０８は静止画検証装置１０７と通信可能である。
【００２３】
図２は、認証機関装置１０２の機能的構成を示すブロック図である。認証機関装置１０２は、公開鍵ＤＢ（ＤａｔａＢａｓｅ）２０１と、証明書発行部２０２と、証明書検証部２０３と、通信手段２０４で構成する。公開鍵ＤＢ２０１は、映像記録端末１０４、抽出者端末１０６の公開鍵を蓄積する。証明書発行部２０２は、要求に応じて公開鍵証明書を発行する。証明書検証部２０３は、公開鍵証明書の検証を行う。通信手段２０４は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２４】
図３は、署名生成装置１０３の機能的構成を示すブロック図である。署名生成装置１０３は、映像管理ＤＢ３０１と、映像管理ＴＢ（Ｔａｂｌｅ）３０２と、署名生成部３０３と、通信手段３０４で構成する。映像管理ＤＢ３０１は、映像記録端末１０４から送信された情報と、映像抽出装置１０５へ送信された情報を蓄積する。映像管理ＴＢ３０２は、映像管理ＤＢ３０１へのアクセス制御を管理するテーブルである。署名生成部３０３は、映像データに対して電子署名とその署名対象を付加する。署名生成部３０３の機能は、図７にて後述する。通信手段３０４は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２５】
図４は、映像抽出装置１０５の機能的構成を示すブロック図である。映像抽出装置１０５は、映像管理ＤＢ４０１と、映像管理ＴＢ４０２と、抽出・編集部４０３と、署名検証部４０４と、通信手段４０５で構成する。映像管理ＤＢ４０１は、署名生成装置１０３から送られてきた情報を蓄積する。映像管理ＴＢ４０２は、映像管理ＤＢ４０１へのアクセス制御を管理するテーブルである。抽出・編集部４０３は、映像から一部の静止画を抽出し、必要に応じて編集を行う。署名検証部４０４は、署名生成装置１０３から送られてきた情報に付される署名情報の検証を行う。通信手段４０５は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２６】
図５は、静止画検証装置１０７の機能的構成を示すブロック図である。静止画検証装置１０７は、映像管理ＤＢ５０１と、映像管理ＴＢ５０２と、復元部５０３と、静止画検証部５０４と、通信手段５０５で構成する。映像管理ＤＢ５０１は、映像抽出装置１０５から送られてきた情報を蓄積する。映像管理ＴＢ５０２は、映像管理ＤＢ５０１へのアクセス制御の管理で用いられるテーブルである。復元部５０３は、編集情報を用いて静止画の復元を行う。具体的には、復元部５０３は、編集情報によって生成されたコマンド、またはイベントを、編集を行ったソフトウェアに通知し、編集を行ったソフトウェアにより静止画を復元することができる。静止画検証部５０４は、映像抽出装置１０５から送られてきた情報に付される編集済み静止画の検証を行う。通信手段５０５は、ネットワーク１０１に接続しており、ネットワーク１０１経由で通信を行う。
【００２７】
前述したように、署名生成装置１０３はネットワーク１０１に接続しているが、オフラインでの運用も可能である。具体的には、たとえば、認証機関装置１０２が生成した公開鍵証明書を、フレキシブルディスクやＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）等のリムーバブルメディアに書き込む。後に、署名生成装置１０３は、後述する図６の磁気ディスクドライブ６０４や光ディスクドライブ６０６を通じて、公開鍵証明書を読み込む。
【００２８】
また、映像データに関しても同様に、電子署名を行った段階で署名生成装置１０３内の記憶領域に格納し、定期的に、映像データや電子署名をリムーバブルメディアに書き込む。その後、映像抽出装置１０５は映像データや電子署名をリムーバブルメディアに読み込むといった運用を行ってもよい。
【００２９】
（静止画検証装置１０７のハードウェア構成）
図６は、静止画検証装置１０７のハードウェア構成を示すブロック図である。図６において、静止画検証装置１０７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）６０１と、ＲＯＭ（Ｒｅａｄ‐Ｏｎｌｙ Ｍｅｍｏｒｙ）６０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）６０３を備えている。さらに、磁気ディスクドライブ６０４と、磁気ディスク６０５と、光ディスクドライブ６０６と、光ディスク６０７を備えている。さらに、ディスプレイ６０８と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）６０９と、キーボード６１０と、マウス６１１と、スキャナ６１２と、プリンタ６１３を備えている。また、各構成部はバス６００によってそれぞれ接続されている。
【００３０】
ここで、ＣＰＵ６０１は、静止画検証装置１０７の全体の制御を司る。ＲＯＭ６０２は、ブートプログラムなどのプログラムを記憶している。ＲＡＭ６０３は、ＣＰＵ６０１のワークエリアとして使用される。磁気ディスクドライブ６０４は、ＣＰＵ６０１の制御に従って磁気ディスク６０５に対するデータのリード／ライトを制御する。磁気ディスク６０５は、磁気ディスクドライブ６０４の制御で書き込まれたデータを記憶する。
【００３１】
光ディスクドライブ６０６は、ＣＰＵ６０１の制御に従って光ディスク６０７に対するデータのリード／ライトを制御する。光ディスク６０７は、光ディスクドライブ６０６の制御で書き込まれたデータを記憶したり、光ディスク６０７に記憶されたデータをコンピュータに読み取らせたりする。
【００３２】
ディスプレイ６０８は、カーソル、アイコンあるいはツールボックスをはじめ、文書、画像、機能情報などのデータを表示する。このディスプレイ６０８は、たとえば、ＣＲＴ、ＴＦＴ液晶ディスプレイ、プラズマディスプレイなどを採用することができる。
【００３３】
Ｉ／Ｆ６０９は、ネットワーク１０１に接続され、このネットワーク１０１を介して他の装置に接続される。そして、Ｉ／Ｆ６０９は、ネットワーク１０１と内部のインターフェイスを司り、外部装置からのデータの入出力を制御する。Ｉ／Ｆ６０９には、たとえばモデムやＬＡＮアダプタなどを採用することができる。
【００３４】
キーボード６１０は、文字、数字、各種指示などの入力のためのキーを備え、データの入力を行う。また、タッチパネル式の入力パッドやテンキーなどであってもよい。マウス６１１は、カーソルの移動や範囲選択、あるいはウィンドウの移動やサイズの変更などを行う。ポインティングデバイスとして同様に機能を備えるものであれば、トラックボールやジョイスティックなどであってもよい。
【００３５】
スキャナ６１２は、画像を光学的に読み取り、静止画検証装置１０７内に画像データを取り込む。なお、スキャナ６１２は、ＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅａｄｅｒ）機能を持たせてもよい。また、プリンタ６１３は、画像データや文書データを印刷する。プリンタ６１３には、たとえば、レーザプリンタやインクジェットプリンタを採用することができる。
【００３６】
署名生成装置１０３においても、静止画検証装置１０７と同様のハードウェア構成であってもよい。すなわち、署名生成装置１０３は、ＣＰＵと、ＲＯＭと、ＲＡＭと、磁気ディスクドライブと、磁気ディスクと、光ディスクドライブと、光ディスクと、ディスプレイと、Ｉ／Ｆと、キーボードと、マウスと、スキャナと、プリンタと、を備えている。
【００３７】
図７は、署名生成部３０３／静止画検証部５０４の機能的構成を示すブロック図である。署名生成部３０３と静止画検証部５０４はほぼ共通の機能的構成を持つため、あわせて説明を行う。署名生成部３０３は、格納部７０９と、指定部７１１と、編集記録部７１２と、関連付け部７１３と、を含む構成である。また、静止画検証部５０４は、署名生成部３０３の構成から、電子署名生成部７０８の代わりに、電子署名検証部７１０と、ダイジェスト情報検証部７１４と、静止画復元部７１５と、静止画判断部７１６と、編集済み静止画検証部７１７と、を含めた構成である。また、署名生成部３０３と静止画検証部５０４は、入力部７０１と、映像復号部７０２と、転送部７０３と、変換部７０４と、静止画符号化部７０５と、ダイジェスト情報生成部７０６と、符号化パラメータ保持部７０７と、電子署名生成部７０８と、を含めてもよい。
【００３８】
この制御部となる機能は、具体的には、たとえば、図６に示したＲＯＭ６０２、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶装置に記憶されたプログラムをＣＰＵ６０１が実行することにより、その機能を実現する。または、Ｉ／Ｆ６０９を経由して他のＣＰＵが実行することにより、その機能を実現してもよい。制御部となる機能は、入力部７０１〜編集済み静止画検証部７１７となる。
【００３９】
入力部７０１は、情報を入力する機能を有する。具体的には、たとえば、署名生成部３０３にて原動画情報を入力する。また、入力部７０１は、静止画検証部５０４にて検証者端末１０８からの切り出し静止画情報を入力する。なお、入力された情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４０】
映像復号部７０２は、映像データを解析し、フレームごとに取得する機能を有する。フレームの種類には、独立で再生不可能な予測フレームと独立で再生可能な動画フレームがある。具体的には、たとえば、ＭＰＥＧフォーマットでは、ＭＰＥＧデコーダにより映像データを解析し、フレームごとに取得する。ＭＰＥＧでは、予測フレームは、Ｐピクチャ、または、Ｂピクチャとなり、独立で再生可能な動画フレームはＩピクチャと呼ばれる。映像データはＭＰＥＧ−１、ＭＰＥＧ−２、Ｈ．２６４／ＡＶＣ等の各種動画フォーマットに従ったデータである。なお、復号された各フレームは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４１】
転送部７０３は、予測フレームが入力された場合、予測フレームを変換部７０４に転送し、動画フレームが入力された場合は第１または第２の動画フレームを静止画符号化部７０５に転送する機能を有する。動画フレームには、映像データ内に初めから存在していた第１の動画フレームと、予測フレームが変換部７０４によって再生可能となった第２の動画フレームの２つがある。具体的には、たとえば、ＭＰＥＧフォーマットでは、予測フレームであるＰピクチャとＢピクチャを変換部７０４によって変換された独立再生可能な動画フレームとＩピクチャとを静止画符号化部７０５に転送する。なお、転送されたデータは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４２】
変換部７０４は、独立で再生不可能な予測フレームを独立で再生可能な第１の動画フレームに基づいて独立で再生可能な第２の動画フレームへ変換する機能を有する。具体的には、たとえば、変換部７０４は、ＭＰＥＧフォーマットにて、予測フレームであるＰピクチャ、Ｂピクチャを独立で再生可能なＩピクチャに基づいて、再生可能な動画フレームへ変換する。また、変換部７０４は、Ｐピクチャであれば、前方のＩピクチャ、またはＰピクチャに基づいて変換する。変換部７０４は、Ｂピクチャであれば、前後のＩピクチャ、またはＰピクチャに基づいて変換する。なお、変換されたフレームは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４３】
静止画符号化部７０５は、第１または第２の動画フレームを画像フォーマットに従って画像データに符号化する機能を有する。具体的には、たとえば、ＭＰＥＧフォーマットにて、Ｐピクチャ、Ｂピクチャが変換された動画フレームとＩピクチャであるフレームを、画像フォーマットに従って静止画に符号化する。画像フォーマットは、ＪＰＥＧフォーマット以外にＪＰＥＧ ２０００フォーマット、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃ）フォーマット、ＧＩＦ（Ｇｒａｐｈｉｃｓ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）等である。なお、符号化された静止画は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４４】
ダイジェスト情報生成部７０６は、静止画符号化部７０５によって符号化された画像データごとに要約情報を生成する機能を有する。また、ダイジェスト情報生成部７０６は、関連付け部７１３によって検証対象の編集済み画像データに関連付けられた検証用となる編集元画像データの要約情報を生成してもよい。
【００４５】
具体的には、たとえば、ＪＰＥＧフォーマットによって符号化された静止画に基づいてダイジェスト情報を生成する。前述の操作を、映像データが保持していたフレームの個数分行う。なお、生成されたダイジェスト情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４６】
符号化パラメータ保持部７０７は、静止画符号化部７０５によって静止画に符号化される際に、関連する少なくとも一つ以上のパラメータを保持する機能を有する。パラメータとは、具体的には、たとえば、ＪＰＥＧフォーマットへ符号化する際に必要な情報として、画質に影響する圧縮率や品質レベル、画像の色や明るさに影響する色深度や輝度等がある。符号化パラメータ保持部７０７は、このような値をパラメータとして保持し、静止画符号化時に使用する。なお、保持されているパラメータは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００４７】
電子署名生成部７０８は、ダイジェスト情報生成部７０６によって生成されたダイジェスト情報を署名対象として、電子署名を生成する機能を有する。署名対象には、ダイジェスト情報以外に、符号化パラメータ保持部７０７に保持されたパラメータを含んでもよい。具体的には、たとえば、フレームがｎ個あるダイジェスト情報の集合に対して、秘密鍵で暗号化することで電子署名を生成する。なお、生成された電子署名は、署名生成装置１０３のＲＡＭ、磁気ディスク、光ディスクなどの記憶領域に記憶される。
【００４８】
格納部７０９は、電子署名生成部７０８によって生成された電子署名と署名対象を格納する機能を有する。また、格納部７０９は、入力部７０１にて入力された原動画情報なども格納部７０９によって格納してもよい。また、格納する領域は、映像管理ＤＢ３０１、映像管理ＤＢ５０１等であり、映像管理ＤＢ３０１、映像管理ＤＢ５０１は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に存在する。また、署名生成装置１０３や静止画検証装置１０７以外の記憶領域に格納してもよい。
【００４９】
電子署名検証部７１０は、電子署名の正当性を検証する機能を有する。具体的には、たとえば、電子署名検証部７１０は、電子署名を公開鍵にて復号した際に、復号結果が電子署名の署名対象の要約情報と一致する場合に、電子署名の正当性を保証できたとして出力する。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５０】
指定部７１１は、要約情報を保持する画像データ群で構成された動画像データの中から、編集元画像データを指定する機能を有する。動画像データは、フレーム間圧縮されていない画像データ群でもよいし、フレーム間圧縮された動画像データに基づいて静止画符号化部７０５によって符号化された画像データ群であってもよい。また、要約情報となるダイジェスト情報については、ダイジェスト情報生成部７０６によって画像データごとにダイジェスト情報が生成されてもよいし、入力部７０１から動画像データとあわせてダイジェスト情報が入力されてもよい。
【００５１】
具体的には、たとえば、指定部７１１は、格納部７０９によって格納されている動画像データとなる原動画情報から、５５５０番目の画像を指定する。指定された画像の情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５２】
編集記録部７１２は、指定部７１１によって指定された画像に対応する編集元画像データの編集情報を記録する機能を有する。編集情報は、どのような編集を行ったかを示す。具体的には、たとえば、指定部７１１によって５５５０番目の画像が選択され編集された場合に、編集記録部７１２は、編集情報を記録する。
【００５３】
また、編集情報は、編集を行うソフトウェアとソフトウェアに基づいて実行される編集処理と編集処理に付随する設定値を記録してもよい。また、編集情報は、編集を行うソフトウェアとソフトウェアに対して通知されたイベントを記録してもよい。通知されたイベントとは、抽出者がマウスやキーボードなどを操作した際の編集操作を記述したデータとなる。なお、記録された内容は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５４】
関連付け部７１３は、編集された編集済み画像データと編集元画像データと編集元画像データの動画像データにおける対応する位置情報と編集記録部７１２によって記録された編集情報とを関連付ける機能を有する。
【００５５】
具体的には、たとえば、指定部７１１によって５５５０番目の画像が選択され編集された場合に、関連付け部７１３は、編集済み画像データと、編集元画像となる５５５０番目の画像データと、原動画情報の５５５０番目を指定したこと、および編集元画像から編集済み画像を生成するために用いた編集情報とを関連付ける。なお、関連付けられた情報は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５６】
ダイジェスト情報検証部７１４は、ダイジェスト情報生成部７０６によって既に生成されている要約情報を用いて、検証対象の画像データの正当性を検証する機能を有する。また、ダイジェスト情報検証部７１４は、検証用となる編集元画像データの要約情報と、動画像データの中から関連付け部７１３によって関連付けられた位置情報を基に生成した対応する画像データの要約情報との一致によって正当性を検証してもよい。
【００５７】
具体的には、たとえば、ダイジェスト情報検証部７１４は、ダイジェスト情報生成部７０６によって生成された検証用となる編集元画像データのダイジェスト情報と、あらかじめダイジェスト情報生成部７０６によって生成され、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶されたダイジェスト情報が一致した場合に検証用となる編集元画像データの正当性が保証できたとすることができる。また、ダイジェスト情報検証部７１４は、５５５０番目という位置情報から、原動画情報のダイジェスト情報のうち、５５５０番目のダイジェスト情報を取得する。取得後、ダイジェスト情報検証部７１４は、５５５０番目のダイジェスト情報と検証対象の画像データのダイジェスト情報とが一致した場合に検証対象の画像データの正当性が保証できたとする。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００５８】
静止画復元部７１５は、編集元画像データと編集記録部７１２によって記録された編集元画像データの編集情報とに基づいて、編集済み画像データを復元する機能を有する。また、静止画復元部７１５は、検証用となる編集元画像データと検証対象の編集済み画像データに関連付けられた編集情報とに基づいて、編集済み画像データを復元してもよい。
【００５９】
具体的には、たとえば、静止画復元部７１５は、検証用となる編集元画像データとなる切り出し静止画情報と編集情報を基に、ソフトウェアに通知するコマンドを生成する。生成されたコマンドを復元部５０３が実行することにより、前述のソフトウェアが編集済み画像データを生成する。または、静止画復元部７１５は、ソフトウェアに通知するイベントを生成する。生成されたイベントを復元部５０３がソフトウェアに対して送信することにより、前述のソフトウェアが編集済み画像データを生成する。なお、復元された編集済み画像データは、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６０】
静止画判断部７１６は、静止画復元部７１５によって復元された検証用の編集済み画像データと検証対象の編集済み画像データとが一致するか否かを判断する。具体的には、たとえば、静止画判断部７１６は、復元された検証用の編集済み画像データのダイジェスト情報と検証対象の編集済み画像データのダイジェスト情報が一致するか否かを判断してもよい。
【００６１】
また、復元された検証用の編集済み画像データと検証対象の編集済み画像データは、両画像の見た目は等しくとも、データとしては微小に異なる結果になる可能性が生じる。たとえば、編集情報に記載されたソフトウェアが静止画検証装置１０７に存在せず、代わりに画像を復元可能なソフトウェアが存在する場合、復元部５０３は、代わりとなるソフトウェアで復元された検証用の編集済み画像データを生成してもよい。このような場合、生成に使用したソフトウェアが異なるため、データとしては微小に異なる結果になる可能性が生じる。
【００６２】
前述のようなデータが微小に異なる結果であっても両画像が一致すると判断するため、静止画判断部７１６は、たとえば、両画像をピクセルごとに比較し、すべてのピクセルの色情報の差分が一定値以下であれば、一致と判断してもよい。別の判断方法として、静止画判断部７１６は、すべてのピクセルの色情報の差分の合計値が一定値以下であった場合に、一致と判断してもよい。また、静止画判断部７１６は、色情報についてもＲＧＢ色空間や、ＨＳＬ色空間などの任意の色空間へ両画像の色情報を変換した上で、一致するか否かを判断してもよい。なお、判断結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６３】
編集済み静止画検証部７１７は、ダイジェスト情報検証部７１４によって検証された検証結果と静止画判断部７１６によって一致すると判断された判断結果とに基づいて、検証対象の編集済み画像データの正当性を検証する機能を有する。具体的には、たとえば、ダイジェスト情報検証部７１４が検証に成功しており、静止画判断部７１６が復元された検証用の編集済み画像データと検証対象の編集済み画像データが一致すると判断した際に、編集済み静止画検証部７１７は検証に成功したとする。なお、検証結果は、ＲＡＭ６０３、磁気ディスク６０５、光ディスク６０７などの記憶領域に記憶される。
【００６４】
また、映像抽出装置１０５内の署名検証部４０４に関して、前述した静止画検証部５０４の機能の一部を有してもよい。
【００６５】
図８は、署名アルゴリズムの概要を示す説明図である。署名装置は、オリジナルデータ８０１を部分データに分割し、各部分データのハッシュ集合を計算し、ハッシュ情報集合８０２を生成する。その後、生成したハッシュ情報集合８０２が電子署名の署名対象となり、署名対象に対して署名装置の電子署名を行い、ハッシュ情報集合８０２と電子署名をあわせて署名装置の署名情報８０３とする。
【００６６】
抽出装置は、署名装置が署名情報を施したデータから、部分データを抽出し、抽出データ８０４を生成する。その後、抽出装置は、署名装置と同様の操作を行って、ハッシュ情報集合８０５、ハッシュ情報集合８０５を署名対象にし、抽出装置の電子署名を行い、ハッシュ情報集合８０５と電子署名をあわせて抽出装置の署名情報８０６とする。
【００６７】
検証装置は、署名装置の署名情報８０３内の署名装置の電子署名にて、ハッシュ情報集合８０２の完全性を検証する。同様に、抽出装置の署名情報８０６内の抽出装置の電子署名にて、ハッシュ情報集合８０５の完全性を検証する。次に、開示された部分データからハッシュ情報集合を生成し、ハッシュ情報集合８０５と同一であることを検証する。最後に、署名装置と抽出装置のハッシュ情報集合を比較することで、抽出装置のハッシュ情報の範囲８０８は、元データの範囲８０７からの抽出であることがわかる。もし、抽出データ８０４のハッシュ情報にオリジナルデータ８０１のハッシュ情報が含まれていない場合は、その部分データは改ざんされていることになる。
【００６８】
図９は、圧縮映像データの画像タイプとその並びの一例を示す説明図である。圧縮映像データを構成するフレームは、大きくわけて独立で再生可能な動画フレームと、動画フレームからの差分データを持つ予測フレームである。予測フレームは、独立で再生不可能である。
【００６９】
ＭＰＥＧの規格では、独立で再生可能な動画フレームはＩピクチャと呼ばれ、予測フレームはＰピクチャ、Ｂピクチャと呼ばれる。Ｉピクチャは表示に必要なすべての画像データを圧縮して保持している。また、Ｉピクチャには、Ｈ．２６４／ＡＶＣの規格で新しく追加されたＩＤＲ（Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｅｒ Ｒｅｆｒｅｓｈ）ピクチャも含む。なお、後述では、ＩピクチャとＩＤＲピクチャを、単にＩピクチャとして説明する。それぞれのピクチャの特徴は後述する。同図では、Ｉピクチャはフレーム９０１である。同様に、Ｐピクチャはフレーム９０４、フレーム９０５、Ｂピクチャはフレーム９０２、フレーム９０３となる。
【００７０】
ＰピクチャとＢピクチャは、フレーム間予測画像とも呼ばれる。Ｐピクチャは、直近に復号されたＩピクチャ、もしくはＰピクチャの画像を参照画像とし、そこからの差分となる予測誤差情報を保持する。たとえば、フレーム９０４は、Ｉピクチャであるフレーム９０１から画像を参照して独立再生可能なフレームへ変換される。フレーム９０５は、映像復号部７０２によってＰピクチャであるフレーム９０４から画像を参照して独立再生可能なフレームへ変換される。
【００７１】
このように、変換部７０４は、Ｐピクチャを変換するには過去のフレームを参照する前方向予測を行う。参照元となるフレームは１つ前のＩピクチャ、Ｐピクチャとなるが、Ｈ．２６４／ＡＶＣではより前のフレームを参照フレームとすることも可能である。
【００７２】
Ｂピクチャは直近に復号された未来と過去のＩピクチャ、Ｐピクチャの画像を参照画像として、その差分となる予測誤差情報を保持する。たとえば、フレーム９０２は、変換部７０４によって、Ｉピクチャであるフレーム９０１と、Ｐピクチャであるフレーム９０４から画像を参照して独立再生可能なフレームへ変換される。フレーム９０３も同様である。
【００７３】
このように、変換部７０４は、Ｂピクチャを変換するには、過去と未来のフレームを参照する双方向予測を行う。ＢピクチャもＰピクチャと同様に、参照元となるフレームは１つ前のＩピクチャ、Ｐピクチャとなるが、Ｈ．２６４／ＡＶＣでは１つ以上の前後のフレームを参照フレームとすることも可能である。
【００７４】
このように、ＰピクチャやＢピクチャでは、前後の画像との差分を取ることで、時間方向の冗長度を削除し、高いデータ圧縮を実現している。また、図９のように何枚かの画像をまとめて、ＧＯＰと呼ばれる動画像の最小単位で構成される。図９の例ではＧＯＰ＝９となる。ＧＯＰはその単位での独立した再生が可能で、動画像を途中から再生したり編集したりするための構造である。
【００７５】
また、ＩＤＲピクチャの機能を説明する。Ｈ．２６４／ＡＶＣでは、前述したように、Ｐピクチャ、Ｂピクチャは一つ前のＩピクチャ、Ｐピクチャを飛び越えて参照するため、必ずしもＩピクチャから再生が行えるかどうかはわからない。この問題を防ぐのがＩＤＲピクチャである。ＩＤＲピクチャを受信した場合、映像復号部７０２は参照フレームが格納されているバッファをクリアする。したがって、ＩＤＲピクチャから再生ができることを保証する。参照フレームをクリアするため、Ｐピクチャ、ＢピクチャはＩＤＲピクチャをまたいでフレームを参照することはできない。
【００７６】
図１０は、圧縮映像データのＰ、Ｂピクチャを独立画像へ変換する一例を示す説明図である。はじめに、圧縮映像データには、符号１００１で示すように、参照元となるフレーム順にデータが格納されている。圧縮映像データは、映像復号部７０２によって、映像データをフレーム１００５、フレーム１００６、フレーム１００７のようにフレームごとに解析される。具体的な解析例として、ＭＰＥＧフォーマットでは、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）によってエントロピー符号化されているため、逆ＤＣＴによって復号し、フレームごとに解析する。
【００７７】
同図の例では、フレーム１００５がＩピクチャ、フレーム１００６がＰピクチャ、フレーム１００７がＢピクチャとなる。続けて、映像復号部７０２によって、符号１００２で示す時系列順になるように、フレーム１００５、フレーム１００７、フレーム１００６の順に入れ替えられる。
【００７８】
次に、Ｐ、Ｂピクチャを独立画像へ変換する処理を示す。符号１００３で示すのは、動画フレーム復元前の状態で、フレーム１００５が保持している具体的な画像、フレーム１００７、フレーム１００６が保持する予測誤差情報である。Ｉピクチャであるフレーム１００５は画像データすべてを保持しており、Ｐピクチャ、Ｂピクチャであるフレーム１００６、フレーム１００７は画像データの差分となる予測誤差情報を保持している。符号１００４で示す動画フレーム復元後の状態で、変換部７０４は、フレーム１００６、フレーム１００７から再生可能となる動画フレーム１００６’と動画フレーム１００７’に変換する。
【００７９】
具体的には、変換部７０４は、フレーム１００５を土台として、差分となるフレーム１００６を上書きする形で動画フレーム１００６’を生成する。同様に、変換部７０４は、フレーム１００５、１００６を土台として、差分となるフレーム１００７を上書きする形で動画フレーム１００７’を生成する。
【００８０】
また、Ｐピクチャ、Ｂピクチャは予測誤差情報以外に動き補償情報を持っており、基準となるＩピクチャ、Ｐピクチャから、特定の範囲においてどのぐらい移動したのかを保持している。なお、同図では、説明の都合上、時系列順に取得できるようにした後に、動画フレームの復元を行ったが、動画フレームの復元を行った後に、時系列順に取得できるようにしてもよい。
【００８１】
図１１は、切り出し静止画情報の編集情報の記録の一例を示す説明図である。図１１では、編集情報１１０１〜編集情報１１０５が示されている。編集情報１１０１は、部分拡大を行った場合のパラメータ情報である。編集情報１１０１では、編集内容が“部分拡大”となり、続いて、部分拡大を行う場合のパラメータが記述されている。具体的には、部分拡大の開始位置がＬ（Ｌｅｆｔ）：４００［ｐｉｘｅｌ］、Ｔ（Ｔｏｐ）：３０であり、部分拡大の選択範囲がＷ（Ｗｉｄｔｈ）：３００［ｐｉｘｅｌ］×Ｈ（Ｈｅｉｇｈｔ）：３００となる。さらに、部分拡大の解像度が７２［ｐｉｘｅｌ／ｉｎｃｈ］となり、部分拡大の拡大率が２０［％］となる。
【００８２】
編集情報１１０２は、明るさ・コントラスト調整を行った場合のパラメータ情報である。編集情報１１０２は２つの編集内容があり、１つ目の編集内容“明るさ調整”、２つ目の編集内容が“コントラスト調整”となる。続いて、明るさ調整のパラメータとして、強度が、＋２０［％］となる。また、コントラスト調整の強度が＋１０［％］となる。
【００８３】
編集情報１１０３は、画像全体のサイズ変更を行った場合のパラメータ情報である。編集情報１１０３では、編集内容が“サイズ変更”であり、続いて、サイズ変更を行う場合のパラメータが記述されている。サイズ変更の領域は全体であり、サイズ変更後のピクセル数がＷ：８００［ｐｉｘｅｌ］×Ｈ：６００［ｐｉｘｅｌ］となる。
【００８４】
編集情報１１０４は、編集操作を変更回数分行った場合のパラメータ情報である。編集情報１１０４の情報の内容は、ＧＵＩアプリケーションである編集ツールに対する抽出者端末１０６のマウスやキーボードによる編集操作の記録である。具体的には、抽出者端末１０６は、抽出者がマウスなどで操作することにより、１つ目の編集操作にて、メニューバーから「ファイル」を選択し、サブメニューの一覧から「対象ファイルを開く」が選択される。続けて、抽出者端末１０６は、２つ目の編集操作にて、メニューバーから「画質調整」が選択され、サブメニューの一覧から「明るさ・コントラスト」が選択される。選択後、表示されるダイアログに対して、抽出者端末１０６は、明るさ入力欄に＋２０［％］、コントラスト入力欄に＋１０［％］が設定され、「ＯＫ」ボタンが押下される。
【００８５】
編集情報１１０５は、何も編集を行っていない場合のパラメータ情報である。抽出者端末１０６は、何も編集しないことを明確にするために編集情報１１０５のようなパラメータ情報を出力してもよい。
【００８６】
図１２は、原動画情報の署名生成処理の概要を示す説明図である。署名生成部３０３に入力された原動画情報１２０１は、映像復号部７０２によってフレームごとに解析され、時系列順に並べられる。また、原動画情報１２０１は、格納部７０９に格納される。次に、各フレームは、転送部７０３によって、Ｐ、Ｂピクチャであれば変換部７０４に、Ｉ、ＩＤＲピクチャであれば静止画符号化部７０５に転送される。
【００８７】
変換部７０４に転送されたフレームは、変換部７０４によって独立に再生可能な動画フレームに変換される。具体的には、動画フレームＦ２、動画フレームＦ３、・・・、動画フレームＦｎである。変換方法については、図１０で前述した通りとなる。また、再生可能な動画フレームの形式は、Ｉ、ＩＤＲピクチャと同一なデータ形式でもよいし、非圧縮の画像フォーマットに従ってもよい。
【００８８】
次に署名生成装置１０３は、転送部７０３から転送されたＩ、ＩＤＲピクチャである動画フレームと、変換部７０４によって変換された動画フレームを、静止画符号化部７０５によって符号化し、静止画を生成する。具体的な静止画とは、静止画Ｊ１、静止画Ｊ２、静止画Ｊ３、・・・、静止画Ｊｎである。また、符号化時に、符号化パラメータ保持部７０７から符号化パラメータ情報１２０２を取得し、パラメータの値を参照して符号化を行ってもよい。
【００８９】
パラメータを取得する理由として、原動画情報から任意の１枚の画像を静止画として切り出しを行い、その切り出した静止画が、原動画情報の一部であり、改ざんされていないことを保証する必要がある。このため、画像フォーマットに従って符号化する際に、同一の符号化方法で処理されることが望ましいからである。
【００９０】
具体的には、たとえば、画像フォーマットの一つであるＪＰＥＧフォーマットに符号化する際に、動画フレームから符号化するソフトウェアやツールにより、作成方法が異なる場合がある。作成方法が異なると、肉眼では同じ画像に見えても、デジタルデータとしては異なる情報となる事象が発生する可能性がある。前述の事象を起こさないためには、署名生成時と署名検証時で同一の符号化方法で処理することで回避できる。
【００９１】
たとえば、ＪＰＥＧフォーマットへ符号化する際に必要な情報として、図７の符号化パラメータ保持部７０７の説明にて前述したように、画質に影響する圧縮率や品質レベル、画像の色や明るさに影響する色深度や輝度等がある。これらの情報は予め決定しておき、署名生成装置１０３内に事前に格納され、必要に応じて取得を行う。また、前述以外のパラメータとして、プログレッシブ形式と非プログレッシブ形式の設定を保持してもよい。また、ＪＰＥＧフォーマットの内部で使用されるＤＣＴ演算では、浮動小数点演算、精度の高い整数演算、高速な整数演算、のうち使用する設定等をパラメータとして保持してもよい。
【００９２】
また、各パラメータは、原動画情報ごとに保持していてもよい。たとえば、橋の点検を記録した原動画情報で、もし撮影位置が光のあまりあたらない位置であり、輝度が０％に近い状態の原動画情報であれば、静止画符号化部７０５にて、輝度を１００％に近い状態になるように符号化を行うと、符号化後の静止画が見やすくなる。このように、他の原動画情報は通常のパラメータ設定を使用し、特定の条件を持つ原動画情報は、特定のパラメータ設定を使用するように、ファイルごとにパラメータを保持してもよい。
【００９３】
また、前述ではＪＰＥＧフォーマットの例を挙げたが、図７の静止画符号化部７０５にて前述したように他の静止画フォーマットでもよい。それぞれのフォーマットに対してパラメータを保持し、静止画符号化部７０５にて符号化してもよい。
【００９４】
署名生成装置１０３は、静止画符号化部７０５によって符号化された静止画ごとに、ダイジェスト情報生成部７０６にてダイジェスト情報を生成する。具体的に署名生成装置１０３は、ダイジェスト情報Ｈ１、ダイジェスト情報Ｈ２、・・・、ダイジェスト情報Ｈｎを生成する。生成されたダイジェスト情報の集合に対して、電子署名生成部７０８が電子署名を生成する。署名情報は、ダイジェスト情報と電子署名になる。生成された署名情報は、格納部７０９に格納される。
【００９５】
また、原本性保証をより確実に行うために、署名生成装置１０３は、電子署名生成時に、ダイジェスト情報と静止画符号化部７０５にて使用した変換パラメータ情報をあわせて署名対象とし、署名対象に対して電子署名を生成してもよい。
【００９６】
ダイジェスト情報の生成には、一方向性ハッシュ関数を、電子署名の生成には、公開鍵暗号方式の一つであるＲＳＡ（Ｒｉｖｅｓｔ Ｓｈａｍｉｒ Ａｄｌｅｍａｎ）を使用することが可能である。一方向性ハッシュ関数には、ＭＤ５、ＳＨＡ−１、ＳＨＡ−２５６のようなアルゴリズムがあり、たとえば、ＳＨＡ−２５６では、１メッセージあたり、２５６ｂｉｔ（３２ｂｙｔｅ）のダイジェスト情報が生成される。
【００９７】
具体的には、たとえば、映像データが３０ｆｐｓ（ｆｐｓ：ｆｒａｍｅ Ｐｅｒ Ｓｅｃｏｎｄ）で約１時間の映像が記録される場合、３０ｆｐｓ×６０秒×６０分＝１０８，０００個のフレームが保存されることとなる。この場合、ＳＨＡ−２５６アルゴリズムの場合、１０８，０００フレーム×３２ｂｙｔｅ＝約３．５ＭｅｇａＢｙｔｅの情報となる。ＲＳＡで署名生成された情報とあわせて、約４ＭｅｇａＢｙｔｅの署名情報となり、動画情報に比べれば、少ない情報量の保存で原本性保証を実現することが可能である。
【００９８】
以上の操作によって、原動画情報の署名生成処理を行う。なお、図１２の具体的な処理内容としては、図２２、図２３にて後述する。
【００９９】
図１３は、原動画情報の署名検証処理の概要を示す説明図である。静止画検証装置１０７は、格納部７０９に格納された原動画情報１２０１と原動画情報１２０１の署名情報を取得する。取得した原動画情報１２０１が改ざんされていないかを、電子署名検証部７１０が、原動画情報１２０１の署名情報を用いて検証する。
【０１００】
原動画情報からダイジェスト情報を生成する処理は、署名生成処理と等しくなる。具体的には、原動画情報１２０１は、映像復号部７０２によってフレームごとに解析され、時系列順に並べられる。続けて、各フレームは、転送部７０３によって、Ｐ、Ｂピクチャであれば変換部７０４に、Ｉ、ＩＤＲピクチャであれば静止画符号化部７０５に転送される。
【０１０１】
変換部７０４に転送されたフレームは、変換部７０４によって独立に再生可能な動画フレームに変換される。次に静止画検証装置１０７は、転送部７０３から転送されたＩ、ＩＤＲピクチャである動画フレームと、変換部７０４によって変換された動画フレームを生成する。具体的には、動画フレームＦ２、動画フレームＦ３、・・・、動画フレームＦｎである。続けて静止画検証装置１０７は、静止画符号化部７０５によって符号化し、静止画を生成する。具体的には、静止画Ｊ１、静止画Ｊ２、静止画Ｊ３、・・・、静止画Ｊｎである。静止画符号化部７０５にて、符号化パラメータ情報１２０２を取得して符号化を行ってもよい。
【０１０２】
静止画検証装置１０７は、符号化された静止画ごとに、ダイジェスト情報生成部７０６によってダイジェスト情報を生成する。最後に、静止画検証装置１０７は、生成されたダイジェスト情報と、格納部７０９から取得されたダイジェスト情報を、電子署名検証部７１０によって一つずつ比較処理１３０１を行う。すべてのダイジェスト情報が一致した場合に、原動画情報は改ざんされていないことを確認できる。以上の操作によって、原動画情報の署名検証処理を行う。なお、図１３の具体的な処理内容としては、図２６にて後述する。
【０１０３】
図１４は、切り出し静止画情報、編集済み切り出し静止画情報の生成方法の概要を示す説明図である。図１４の説明では、抽出者端末１０６が先頭から５５５０枚目となるピクチャＪ５５５０を抽出し、部分拡大を行うことを想定する。ピクチャＪ５５５０が切り出し静止画情報１４０１となる。抽出者端末１０６は、ピクチャＪ５５５０の編集が完了すると、編集結果となる編集済み静止画情報１４０２を生成する。原動画情報からのどの位置を抽出したかを示す抽出位置情報１４０３を生成する。さらに、抽出者端末１０６は、編集記録部７１２に記録されたデータを用いてどの編集ツールを用いて、どのような編集作業を行ったかを示す編集情報１４０４を生成する。
【０１０４】
抽出位置情報とは、原動画情報１２０１を静止画情報に分解した際の、先頭から数えた位置の情報である。具体的に、抽出位置情報１４０３では、先頭から５５５０枚目に相当するという意味で、抽出位置情報１４０３＝５５５０が記録されている。編集情報１４０４は、図１１にて示した編集情報が記述される。図１４では、部分拡大を行うため、編集情報１４０４は編集情報１１０１に近い情報となる。
【０１０５】
生成された編集済み静止画情報１４０２は、格納部７０９によって格納される。また、切り出し静止画情報１４０１と、抽出位置情報１４０３と、編集情報１４０４と、原動画情報１２０１の署名情報は、編集済み切り出し情報の検証情報として、格納部７０９によって格納される。また、署名システム１００は、切り出し静止画情報１４０１と、抽出位置情報１４０３と、編集情報１４０４を署名対象１４０５として、抽出者端末１０６の電子署名の電子署名を生成し、編集を行った作業責任者を明確にしてもよい。
【０１０６】
図１５は、切り出し静止画情報の検証方法の概要を示す説明図である。検証対象となる画像は、編集済み静止画情報１４０２である。静止画検証装置１０７は、編集済み静止画情報１４０２を検証するために、格納部７０９によって格納されていた編集済み切り出し情報の検証情報を取得する。
【０１０７】
取得後、静止画検証装置１０７は、切り出し静止画情報１４０１からダイジェスト情報生成部７０６によってハッシュＨ５５５０を生成する。静止画検証装置１０７は、生成されたハッシュＨ５５５０と、原動画情報１２０１に対する署名情報内の抽出位置情報１４０３の位置に存在するハッシュＨ５５５０を比較し、一致するかをダイジェスト情報検証部７１４によって判断する。
【０１０８】
一致した場合、静止画検証装置１０７は、静止画復元部７１５によって正当性が保証できた切り出し静止画情報１４０１と、編集情報１４０４とから、復元静止画情報１５０１を生成する。生成後、静止画検証装置１０７は、編集済み静止画情報１４０２と復元静止画情報１５０１を比較し、一致するかを静止画判断部７１６によって判断する。静止画検証装置１０７は、ダイジェスト情報検証部７１４によって検証が成功し、かつ、静止画判断部７１６によって一致すると判断された場合、編集済み静止画検証部７１７によって編集済み静止画情報１４０２の正当性が保証できたとする。
【０１０９】
図１６は、原動画情報の抽出操作を示す説明図である。図１６において抽出者端末１０６に表示されている画面は、切り出し静止画情報の作成画面の例を示している。抽出者端末１０６は、再生ボタン（ＰＲＥＶＩＥＷ）の押下により、原動画情報の再生を行う。抽出者端末１０６は、原動画情報の再生を行いながら、抽出者は目視による切り出し指示によって切り出し位置を指定する。切り出し手順は、抽出者端末１０６は、シークバー（ＳＥＥＫＢＡＲ）を利用して、切り出しを行う位置まで操作され、その位置の時点で切り出しボタン（ＥＸＴＲＡＣＴＳＥＴ）が押下されることにより、切り出し位置を指定する。
【０１１０】
前述の操作によって切り出し位置（ＣＵＴＰＯＩＮＴ）が指定されるので、抽出者端末１０６は、実行ボタン（ＥＸＴＲＡＣＴＲＵＮ）が押下されることで、切り出し静止画情報の生成を行う。切り出し静止画情報に対して編集を行う場合、抽出者端末１０６は、編集ボタン（ＥＤＩＴＲＵＮ）を押下することで、切り出し静止画情報の編集画面に遷移する。本実施の形態では、切り出し静止画情報に対してさらに編集を行うことを想定して説明を行う。
【０１１１】
図１７は、切り出し静止画情報の編集情報の編集操作を示す説明図である。図１７において抽出者端末１０６に表示されている画面は、切り出し静止画情報の編集画面の例を示している。図１７の例では、抽出者端末１０６は、静止画情報に対する拡大・縮小、明るさ・コントラスト変更、解像度変更等の編集機能を有し（ＥＤＩＴＭＥＮＵ）ている。各機能操作は、シークバー（ＥＤＩＴＳＥＥＫＢＡＲ）や、数値による変更度数の指定、さらに画面中の静止画情報に対して操作を行う選択範囲の指定を行うことが可能である。また、部分拡大を行う場合、抽出者端末１０６は、拡大を行う領域（ＳＥＬＥＣＴＡＲＥＡ）をマウスなどの選択によって決定する。
【０１１２】
各編集操作が行われた後、抽出者端末１０６は、実行ボタンが押下されると（ＥＸＥＲＵＮ）、更なる編集を行った旨の情報と、編集済み切り出し静止画情報を生成する。生成後、抽出者端末１０６は、更なる編集を行った旨の情報と編集前の切り出し静止画情報と、編集済み切り出し静止画情報、原動画情報からの抽出位置情報、編集情報を映像抽出装置１０５に送信する。
【０１１３】
図１８は、検証対象の切り出し静止画情報の選択画面を示す説明図である。図１８において検証者端末１０８に表示されている画面は、切り出し静止画情報の署名検証画面の例を示している。検証者端末１０８は、参照ボタン（ＲＥＦＥＲＥＮＣＥ）が押下されることで、エクスプローラー上で切り出し静止画情報となるファイルを表示し、検証者は、検証対象となる切り出し静止画情報を選択することができる。ここで選択する切り出し静止画情報とは、公開された編集済み切り出し静止画情報を指し、この編集済み切り出し静止画情報を選択することで、検証者端末１０８は、本情報に付随する編集済み切り出し情報の検証情報を取得できる。
【０１１４】
選択後、検証者端末１０８は、署名検証ボタン（ＶＥＲＩＦＹＲＵＮ）が押下されることで、選択した切り出し静止画情報の署名検証処理を実行する。切り出し静止画情報の署名検証処理のフローチャートは、図２７にて後述する。図１９にて、署名検証処理の検証結果を表示した結果画面の説明を行う。
【０１１５】
図１９は、切り出し静止画情報の検証結果を示す説明図である。図１９において検証者端末１０８に表示されている画面は、切り出し静止画情報の署名検証結果画面の例を示している。検証者端末１０８は、検証結果を表示することにより、切り出し静止画情報が、原動画情報の一部が抽出・編集された静止画情報であり、抽出・編集後、改ざんされていないことを検証者に確認させることができる。また、検証者端末１０８は、原動画情報のどの部分が抽出されたかを示す切り出し位置を表示し、検証者に確認させることが可能である（ＶＥＲＩＦＹ１）。
【０１１６】
また、検証者端末１０８は、証明書確認ボタンが押下されることにより、原動画情報の電子署名情報を表示し、検証者は、原動画情報は誰が作成したのかを確認可能である（ＶＥＲＩＦＹ２）。本実施の形態では、検証者は、作成責任者が作成したことを確認できる。さらに、検証者端末１０８は、編集情報ボタンが押下されることにより、原動画情報から切り出し後、どのように編集操作を行ったかを示す編集情報を表示し、検証者は、編集情報を確認できる（ＶＥＲＩＦＹ３）。
【０１１７】
前述までの装置・構成を使用して、署名システム１００は、原動画情報の生成処理と署名検証処理、切り出し静止画情報の生成処理および編集処理、検証処理、という４つの処理を行う。各処理について、図２０〜図２９で示すフローチャートで説明する。また、フローチャート内での破線の矢印は、複数の装置間でのデータの送受信を示している。
【０１１８】
原動画情報の生成処理では、原動画情報の署名生成処理を行い、その内部では原動画情報の映像復号処理、独立フレーム生成処理、電子署名生成処理が行われる。原動画情報の署名検証処理では、原動画情報の映像復号処理、独立フレーム生成処理が行われる。切り出し静止画情報の生成処理および編集処理内では、原動画情報の署名検証処理が行われる。切り出し静止画情報の検証処理では、原動画情報の電子署名検証処理、復元静止画情報の生成処理、編集済み静止画情報の原本一部検証処理が行われる。また、電子署名生成処理、電子署名検証処理は、後述する図２０での電子署名の公開鍵登録処理を事前に行った後、図２１での電子署名付き情報の送受信処理、および受信装置の検証処理が行われる。
【０１１９】
図２０は、電子署名の公開鍵登録処理を示すフローチャートである。図２０では送信装置と認証機関装置１０２との間での公開鍵の登録を行うフローを示す。本実施の形態では、署名生成装置１０３、映像抽出装置１０５が電子署名の送信装置となる。
【０１２０】
初めに、送信装置は、鍵ペア（秘密鍵、および公開鍵）の生成を行う（ステップＳ２００１）。続けて、送信装置は、証明書発行依頼情報の入力をする（ステップＳ２００２）。入力される情報は、映像記録端末１０４、抽出者端末１０６に関する情報である。したがって、映像記録端末１０４が複数存在する場合は、それぞれの証明書発行依頼情報を入力してもよい。また、抽出者端末１０６においても、端末を使用するユーザが複数存在する場合には、そのユーザ分の証明書発行依頼情報を入力し、ユーザごとに公開鍵を使い分けてもよい。証明書発行依頼情報の入力が終了した後、送信装置は、その入力された証明書発行依頼情報と公開鍵を認証機関装置１０２へ送信する（ステップＳ２００３）。
【０１２１】
認証機関装置１０２は、証明書発行依頼情報と公開鍵を通信手段２０４にて受信する（ステップＳ２００４）。認証機関装置１０２の証明書発行部２０２は、公開鍵を含む公開鍵証明書を生成し（ステップＳ２００５）、公開鍵ＤＢ２０１に生成した公開鍵証明書を蓄積する（ステップＳ２００６）。その後、証明書発行部２０２は、通信手段２０４を制御し、ネットワーク１０１を介し、証明書発行依頼情報を送信してきた送信装置へ、発行した公開鍵証明書を送信する（ステップＳ２００７）。
【０１２２】
公開鍵証明書を受信した送信装置は（ステップＳ２００８）、ステップＳ２００１で生成した秘密鍵、および認証機関装置１０２から発行された公開鍵証明書を自身が有する記憶装置に蓄積し（ステップＳ２００９）、処理を完了する。記憶領域として、署名生成装置１０３は、署名生成部３０３内の記憶領域、映像抽出装置１０５は署名生成部３０３内の記憶領域に保持する。
【０１２３】
図２１は、電子署名付き情報の送受信処理、および受信装置の検証処理を示すフローチャートである。図２１では送信装置と受信装置の間での電子署名付き情報の送受信処理、受信装置と認証機関装置１０２の間での電子署名の検証処理を示す。本実施の形態では、署名生成装置１０３と映像抽出装置１０５が送信装置となり、対応する受信装置は、映像抽出装置１０５と静止画検証装置１０７となる。
【０１２４】
初めに、送信装置は、署名対象の要約情報（ハッシュ情報）を記憶領域に記憶している秘密鍵によって暗号化する（ステップＳ２１０１）。暗号化してできた情報が電子署名となる。続けて、送信装置は、署名対象と電子署名と同じく記憶領域に記憶している公開鍵証明書とを受信装置に送信する（ステップＳ２１０２）。
【０１２５】
受信装置は、署名対象と電子署名と公開鍵証明書とを受信し（ステップＳ２１０３）、受信した公開鍵証明書の有効期限や失効情報等を確認するため、認証機関装置１０２に対して公開鍵証明書を送信する（ステップＳ２１０４）。本実施の形態では、認証機関装置１０２が証明書発行・証明書検証の一連の機能をサポートしているものとする。次に認証機関装置１０２は公開鍵証明書を受信し（ステップＳ２１０５）、有効性の検証を行い（ステップＳ２１０６）、検証結果を受信装置に対して送信する（ステップＳ２１０７）。
【０１２６】
受信装置は、検証結果を受信し（ステップＳ２１０８）、検証結果が有効であるかを確認する（ステップＳ２１０９）。検証結果が有効でない場合には（ステップＳ２１０９：Ｎｏ）、受信装置は改変のないことを証明できないと判断し（ステップＳ２１１３）、処理を終了する。検証結果が有効である場合には（ステップＳ２１０９：Ｙｅｓ）、受信装置は受信した署名対象の要約情報（ハッシュ情報）を生成し（ステップＳ２１１０）、さらに受信した電子署名を公開鍵で復号する（ステップＳ２１１１）。そして受信装置は、生成した署名対象の要約情報と、電子署名を公開鍵で復号した値が一致するかを確認する（ステップＳ２１１２）。
【０１２７】
一致しない場合（ステップＳ２１１２：Ｎｏ）、受信装置は、ステップＳ２１１３の処理に移行し、受信装置は、処理を終了する。一致する場合（ステップＳ２１１２：Ｙｅｓ）、受信装置は、改変のないことが証明できたと判断し（ステップＳ２１１４）、署名対象を保持し（ステップＳ２１１５）、処理を終了する。ステップＳ２１１３を通った場合に、受信装置の操作端末、たとえば、映像抽出装置１０５であれば抽出者端末１０６、静止画検証装置１０７であれば検証者端末１０８に対して、電子署名が証明できなかった旨の表示を行う通知処理を行ってもよい。
【０１２８】
図２２は、原動画情報の生成処理を示すフローチャートである。映像記録端末１０４は、原動画情報を生成する（ステップＳ２２０１）。生成後、映像記録端末１０４は、録画終了要求を受け付けたかを確認する（ステップＳ２２０２）。録画終了要求を受け付けていない場合（ステップＳ２２０２：Ｎｏ）、映像記録端末１０４は、ステップＳ２２０１の処理に移行し、引き続き原動画情報を生成し続ける。録画終了要求を受け付けている場合（ステップＳ２２０２：Ｙｅｓ）、映像記録端末１０４は、生成完了した原動画情報を署名生成装置１０３に送信し（ステップＳ２２０３）、処理を終了する。
【０１２９】
署名生成装置１０３は、原動画情報を受信する（ステップＳ２２０４）。署名生成装置１０３は、受信した原動画情報の署名生成処理を行う（ステップＳ２２０５）。原動画情報の署名生成処理の詳細は、図２３にて後述する。署名生成後、署名生成装置１０３は、原動画情報と署名情報を、映像管理ＴＢ３０２を介し映像管理ＤＢ３０１に格納する（ステップＳ２２０６）。格納後、署名生成装置１０３は、原動画情報と署名情報を映像抽出装置１０５に送信し（ステップＳ２２０７）、処理を終了する。
【０１３０】
映像抽出装置１０５は、原動画情報と署名情報を受信し（ステップＳ２２０８）、受信した原動画情報と署名情報を、映像管理ＴＢ４０２を介し映像管理ＤＢ４０１に格納し（ステップＳ２２０９）、処理を終了する。なお、本実施の形態では、映像記録端末１０４は、録画終了要求を受け付けた後に、一括して原動画情報を送信したが、たとえばＭＰＥＧに符号化したフレームをＧＯＰ単位で署名生成装置１０３に順次送信してもよい。
【０１３１】
図２３は、原動画情報の署名生成処理を示すフローチャートである。原動画情報の署名生成処理は、処理呼び元の原動画情報の生成処理から、原動画情報を取得している。署名生成装置１０３は、符号化パラメータを取得する（ステップＳ２３０１）。取得後、署名生成装置１０３は、原動画情報の映像復号処理を行う（ステップＳ２３０２）。映像復号処理の詳細は、前述した図１０での符号１００１、符号１００２である。具体的には、署名生成装置１０３は、原動画情報のフォーマット形式に即して、復号処理を行い、各フレームがＩ、Ｐ、Ｂのいずれかのピクチャであるかを判断し、また、各フレームが時系列順でなければ時系列順に取得できるよう配置を変更する。
【０１３２】
ステップＳ２３０２にて、原動画情報からフレーム単位で取得する準備が整ったら、署名生成装置１０３は、先頭のフレームを取得し（ステップＳ２３０３）、取得したフレームの独立フレーム生成処理を行う（ステップＳ２３０４）。独立フレーム生成処理については、図２４にて後述する。
【０１３３】
次に、署名生成装置１０３は、出力された独立フレームを、符号化パラメータを基に静止画に符号化する（ステップＳ２３０５）。具体的には、署名生成装置１０３は、Ｉ、Ｐ、Ｂの各ピクチャに対して、画像フォーマットがＪＰＥＧの場合、ＪＰＥＧエンコードを行い、静止画情報を生成する。続けて、署名生成装置１０３は、符号化された静止画のダイジェスト情報を生成する（ステップＳ２３０６）。生成後、署名生成装置１０３は、取得したフレームが最後のフレームかを確認する（ステップＳ２３０７）。続きのフレームが存在する場合（ステップＳ２３０７：Ｎｏ）、署名生成装置１０３は、次のフレームを取得し（ステップＳ２３０８）、ステップＳ２３０４の処理に移行する。
【０１３４】
取得したフレームが最後のフレームである場合（ステップＳ２３０７：Ｙｅｓ）、署名生成装置１０３は、全静止画のダイジェスト情報の集合に対して、映像記録端末１０４の電子署名を生成し（ステップＳ２３０９）、処理を終了する。
【０１３５】
図２４は、独立フレーム生成処理を示すフローチャートである。独立フレーム生成処理は、署名生成装置１０３が実行する他、映像抽出装置１０５も実行する。署名生成装置１０３は、取得したフレームがＩピクチャかを確認する（ステップＳ２４０１）。ここでのＩピクチャとはＩＤＲピクチャも含む。
【０１３６】
Ｉピクチャであった場合（ステップＳ２４０１：Ｙｅｓ）、署名生成装置１０３は、取得したフレームを独立フレームに変換する（ステップＳ２４０７）。取得したフレームがＰ、Ｂピクチャであった場合（ステップＳ２４０１：Ｎｏ）、署名生成装置１０３は、前方のＩピクチャ、または、Ｐピクチャであるフレームを取得する（ステップＳ２４０２）。ここでの前方とは時間軸上で過去に位置する方向である。
【０１３７】
次に、署名生成装置１０３は、取得したフレームがＰピクチャかを確認する（ステップＳ２４０３）。Ｐピクチャである場合（ステップＳ２４０３：Ｙｅｓ）、署名生成装置１０３は、前方のフレームと取得したフレームから独立フレームに変換する（ステップＳ２４０６）。Ｂピクチャである場合（ステップＳ２４０３：Ｎｏ）、署名生成装置１０３は、後方のＩピクチャ、または、Ｐピクチャであるフレームを取得する（ステップＳ２４０４）。取得後、署名生成装置１０３は、前方のフレームと後方のフレームと取得したフレームから独立フレームに変換する（ステップＳ２４０５）。
【０１３８】
ステップＳ２４０７、ステップＳ２４０６、ステップＳ２４０５の処理後、署名生成装置１０３は、独立フレームを出力し（ステップＳ２４０８）、処理を終了する。なお、ステップＳ２４０７、ステップＳ２４０６、ステップＳ２４０５での変換の具体例は、前述した図１０の符号１００３から符号１００４への処理となる。
【０１３９】
図２５−１、図２５−２は、切り出し静止画情報の生成処理および編集処理を示すフローチャートである。切り出し静止画情報の生成処理および編集処理を行うには、まず原動画情報が必要となる。したがって、図２５−１では原動画情報の取得を、図２５−２では、切り出し静止画情報の生成と編集処理を行っている。
【０１４０】
まず、図２５−１において、抽出者端末１０６は、映像抽出装置１０５に、切り出し対象の原動画情報の取り出し指示を送信する（ステップＳ２５０１）。送信後、抽出者端末１０６は、映像抽出装置１０５から応答があるまで待機する。
【０１４１】
映像抽出装置１０５は、切り出し対象の原動画情報の取り出し指示を受信する（ステップＳ２５０２）。受信後、映像抽出装置１０５は、映像抽出装置１０５内の映像管理ＴＢ４０２を介して、映像管理ＤＢ４０１に蓄積された切り出し対象の原動画情報と署名情報を取り出し、署名検証部４０４を介して、原動画情報の署名検証処理を行う（ステップＳ２５０３）。原動画情報の署名検証処理の詳細は、図２６にて後述する。署名検証処理を行う理由は、切り出し処理を行う前に、原動画情報が改ざんされていないかどうかを確認するためである。
【０１４２】
原動画情報の署名検証処理の終了後、映像抽出装置１０５は、原動画情報の検証に成功したかを確認する（ステップＳ２５０４）。映像抽出装置１０５は、成功した場合（ステップＳ２５０４：Ｙｅｓ）原動画情報を、失敗した場合（ステップＳ２５０４：Ｎｏ）エラー通知をそれぞれ抽出者端末１０６に送信する（ステップＳ２５０５、ステップＳ２５０６）。
【０１４３】
抽出者端末１０６は、映像抽出装置１０５からの受信内容を確認する（ステップＳ２５０７）。受信内容が原動画情報だった場合（ステップＳ２５０７：Ｙｅｓ）、抽出者端末１０６は、原動画情報を表示する（ステップＳ２５０８）。受信内容が原動画情報でなかった場合（ステップＳ２５０７：Ｎｏ）、抽出者端末１０６は、エラーを受信したこととなり、エラー通知を表示し（ステップＳ２５０９）、処理を終了する。
【０１４４】
原動画情報を表示後、抽出者端末１０６は、原動画情報の静止画符号化指示を映像抽出装置１０５に送信する（ステップＳ２５１０）。原動画情報の静止画符号化指示を受信した映像抽出装置１０５は、原動画情報の静止画符号化処理を実行する（ステップＳ２５１１）。原動画情報の静止画符号化処理は、図２３にて示した原動画情報の署名生成処理のうち、ステップＳ２３０６の処理とステップＳ２３０９の処理とを除いた処理となる。静止画に符号化後、原動画情報の全静止画情報を抽出者端末１０６に送信する（ステップＳ２５１２）。抽出者端末１０６は、原動画情報の全静止画情報を受信する（ステップＳ２５１３）。抽出者端末１０６は、原動画情報の全静止画情報を用いて切り出し静止画情報の生成を行う。
【０１４５】
抽出者端末１０６は、原動画情報の全静止画情報から静止画を抽出し、切り出し情報の生成を行う。なお、抽出者端末１０６は、ステップＳ２５１０の処理において、抽出を行う原動画情報のフレームの位置情報を、静止画符号化指示とあわせて送信してもよい。そして位置情報を受信した映像抽出装置１０５は、位置情報に対応したフレームだけを静止画に符号化してもよい。具体的には、原動画情報の静止画符号化処理にて、映像抽出装置１０５は、ステップＳ２３０３の処理を「位置情報に対応したフレームを取得」として実行し、ステップＳ２３０７：Ｙｅｓのルートを処理する。これにより、映像抽出装置１０５は、位置情報に対応したフレームだけを静止画に符号化することができる。
【０１４６】
次に、図２５−２において、抽出者端末１０６は、切り出し静止画情報を生成する（ステップＳ２５１４）。切り出し静止画情報の生成の様子は、前述した図１４である。また、抽出者端末１０６の操作の様子は、前述した図１６である。本実施の形態では、フレーム５５５０が切り出されたことを想定する。
【０１４７】
切り出し静止画情報の生成が完了すると、抽出者端末１０６は、切り出し静止画情報を編集し、編集済み切り出し静止画情報を生成する（ステップＳ２５１５）。抽出者端末１０６が編集済み切り出し静止画情報を生成する様子は、前述した図１７である。編集済み切り出し静止画情報を生成後、抽出者端末１０６は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を、映像抽出装置１０５に送信する（ステップＳ２５１６）。
【０１４８】
待機中であった映像抽出装置１０５は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を受信する（ステップＳ２５１７）。受信後、映像抽出装置１０５は、編集済み切り出し静止画情報、抽出位置情報、切り出し静止画情報、編集情報を映像管理ＤＢ４０１に格納する（ステップＳ２５１８）。格納後、映像抽出装置１０５は、抽出位置情報、切り出し静止画情報、編集情報、原動画情報の署名情報を編集済み切り出し情報の検証情報に設定する（ステップＳ２５１９）。設定後、映像抽出装置１０５は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を静止画検証装置１０７に送信する（ステップＳ２５２０）。
【０１４９】
待機中であった静止画検証装置１０７は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を受信する（ステップＳ２５２１）。受信後、静止画検証装置１０７は、編集済み切り出し静止画情報、編集済み切り出し情報の検証情報を映像管理ＤＢ５０１に蓄積し（ステップＳ２５２２）、切り出し静止画情報の生成処理および編集処理を終了する。
【０１５０】
図２６は、原動画情報の署名検証処理を示すフローチャートである。前述した図１３にて、原動画情報の署名検証処理の様子を示す。初めに、映像抽出装置１０５は、原動画情報の電子署名検証処理を行う（ステップＳ２６０１）。検証後、映像抽出装置１０５は検証結果を確認する（ステップＳ２６０２）。検証結果が失敗だった場合（ステップＳ２６０２：Ｎｏ）、映像抽出装置１０５は、検証に失敗したことを出力し（ステップＳ２６１４）原動画情報の署名検証処理を終了する。検証に失敗した場合、映像抽出装置１０５は、抽出者端末１０６になんらかの改変があったことを通知する。
【０１５１】
検証結果が成功だった場合（ステップＳ２６０２：Ｙｅｓ）、映像抽出装置１０５は、符号化パラメータを取得する（ステップＳ２６０３）。なお、符号化パラメータは、署名生成装置１０３内に事前に格納された符号化パラメータと同一の情報が映像抽出装置１０５内に格納されていることが必要である。
【０１５２】
続けて、映像抽出装置１０５は、受信した原動画情報の映像復号処理を行う（ステップＳ２６０４）。原動画情報の映像復号処理については、図２３でのステップＳ２３０２の原動画情報の映像復号処理と等しい。ステップＳ２６０４にて、原動画情報からフレーム単位で取得する準備が整ったら、映像抽出装置１０５は、先頭のフレームを取得し（ステップＳ２６０５）、取得したフレームの独立フレーム生成処理を行う（ステップＳ２６０６）。独立フレーム生成処理については、図２４にて前述した。
【０１５３】
次に、映像抽出装置１０５は、出力された独立フレームを、符号化パラメータを基に静止画に符号化する（ステップＳ２６０７）。具体的には、映像抽出装置１０５は、Ｉ、Ｐ、Ｂの各ピクチャに対して、画像フォーマットがＪＰＥＧの場合、ＪＰＥＧエンコードを行い、静止画情報を生成する。続けて、映像抽出装置１０５は、符号化された静止画のダイジェスト情報を生成する（ステップＳ２６０８）。
【０１５４】
生成後、映像抽出装置１０５は、生成されたダイジェスト情報と原動画情報の署名情報に格納されているダイジェスト情報を比較し（ステップＳ２６０９）、一致するかを確認する（ステップＳ２６１０）。ダイジェスト情報の比較で一つでも一致しないものがあれば（ステップＳ２６１０：Ｎｏ）、映像抽出装置１０５は、なんらかの改変が発生したこととなり、ステップＳ２６１４の処理に移行する。
【０１５５】
ダイジェスト情報の比較が一致した場合（ステップＳ２６１０：Ｙｅｓ）、映像抽出装置１０５は、取得したフレームが最後のフレームかどうかを確認する（ステップＳ２６１１）。最後のフレームではない場合（ステップＳ２６１１：Ｎｏ）、映像抽出装置１０５は、次のフレームを取得し（ステップＳ２６１２）、ステップＳ２６０６の処理に移行する。取得したフレームが最後のフレームであった場合（ステップＳ２６１１：Ｙｅｓ）、映像抽出装置１０５は、検証に成功したことを出力し（ステップＳ２６１３）、原動画情報の署名検証処理を終了する。
【０１５６】
図２７は、切り出し静止画情報の検証処理を示すフローチャートである。検証者端末１０８は、検証対象の編集済み切り出し静止画情報の取り出し指示を静止画検証装置１０７に送信する（ステップＳ２７０１）。送信後、検証者端末１０８は、静止画検証装置１０７の応答があるまで待機する。
【０１５７】
静止画検証装置１０７は、検証対象の編集済み切り出し静止画情報の取り出し指示を受信する（ステップＳ２７０２）。受信後、静止画検証装置１０７は、編集済み切り出し静止画情報と、編集済み切り出し情報の検証情報を取り出す（ステップＳ２７０３）。取り出し後、静止画検証装置１０７は、原動画情報の電子署名検証処理を行う（ステップＳ２７０４）。処理終了後、原動画情報の電子署名検証処理が成功したかを判断する（ステップＳ２７０５）。原動画情報の電子署名検証処理が失敗した場合（ステップＳ２７０５：Ｎｏ）、静止画検証装置１０７は、エラー通知を検証者端末１０８に送信する（ステップＳ２７１１）。
【０１５８】
原動画情報の電子署名検証処理が成功した場合（ステップＳ２７０５：Ｙｅｓ）、静止画検証装置１０７は、切り出し静止画情報、編集情報から、復元静止画情報の生成処理を実行する（ステップＳ２７０６）。復元静止画情報の生成処理の詳細は、図２８にて後述する。復元静止画情報を生成後、静止画検証装置１０７は、復元静止画情報と編集済み静止画情報が一致したかを判断する（ステップＳ２７０７）。一致したと判断された場合（ステップＳ２７０７：Ｙｅｓ）、静止画検証装置１０７は、編集済み静止画情報の原本一部検証処理を実行する（ステップＳ２７０８）。編集済み静止画情報の原本一部検証処理の詳細は、図２９にて後述する。
【０１５９】
原本一部検証処理終了後、静止画検証装置１０７は、編集済み静止画情報の原本一部検証処理が成功したかを判断する（ステップＳ２７０９）。原本一部検証処理が成功した場合（ステップＳ２７０９：Ｙｅｓ）、静止画検証装置１０７は、編集済み静止画情報の検証結果を検証者端末１０８に送信する（ステップＳ２７１０）。復元静止画情報と編集済み静止画情報が一致しない場合（ステップＳ２７０７：Ｎｏ）、または、原本一部検証処理が失敗した場合（ステップＳ２７０９：Ｎｏ）、静止画検証装置１０７は、ステップＳ２７１１の処理に移行する。
【０１６０】
待機中であった検証者端末１０８は、受信内容を確認し、受信内容が編集済み静止画情報の検証結果かを判断する（ステップＳ２７１２）。受信内容が編集済み静止画情報の検証結果であった場合（ステップＳ２７１２：Ｙｅｓ）、検証者端末１０８は、編集済み静止画情報の検証結果を表示し（ステップＳ２７１４）、切り出し静止画情報の検証処理を終了する。編集済み静止画情報の検証結果の表示の様子は、前述した図１９である。受信内容が編集済み静止画情報の検証結果でない場合（ステップＳ２７１２：Ｎｏ）、検証者端末１０８は、エラー通知を表示し（ステップＳ２７１３）、切り出し静止画情報の検証処理を終了する。
【０１６１】
図２８は、復元静止画情報の生成処理を示すフローチャートである。図２８の例では、編集情報１１０１〜編集情報１１０３のように、編集内容で構成されている編集情報を用いて復元する場合の処理の例を示す。静止画検証装置１０７は、編集情報を取得する（ステップＳ２８０１）。取得後、静止画検証装置１０７は、編集情報の１行目の文字列を取得する（ステップＳ２８０２）。編集情報の１行目にはソフトウェアの情報が記載されている。取得後、静止画検証装置１０７は、取得した文字列に対応するソフトウェアを起動対象ソフトウェアに設定し、切り出し静止画情報を編集対象に設定する（ステップＳ２８０３）。
【０１６２】
設定後、静止画検証装置１０７は、変数ｉを２に設定する（ステップＳ２８０４）。変数ｉは、次に読み込む文字列の行数を示している。設定後、静止画検証装置１０７は、編集情報のｉ行目の文字列を取得する（ステップＳ２８０５）。取得後、静止画検証装置１０７は、取得した文字列が編集内容かを判断する（ステップＳ２８０６）。取得した文字列が編集内容でない場合（ステップＳ２８０６：Ｎｏ）、取得した文字列の記載内容を実行対象となる処理のパラメータとして追加する（ステップＳ２８１１）。
【０１６３】
編集内容である場合（ステップＳ２８０６：Ｙｅｓ）、静止画検証装置１０７は、実行対象となる処理が設定されているかを判断する（ステップＳ２８０７）。実行対象となる処理が設定されていない場合（ステップＳ２８０７：Ｎｏ）、静止画検証装置１０７は、取得した文字列の記載内容を実行対象となる処理に設定する（ステップＳ２８１０）。実行対象となる処理が設定されている場合（ステップＳ２８０７：Ｙｅｓ）、静止画検証装置１０７は、編集対象に実行対象となる処理を起動対象ソフトウェアで実行する（ステップＳ２８０８）。実行後、静止画検証装置１０７は、生成された画像を新たな編集対象に設定する（ステップＳ２８０９）。
【０１６４】
具体的な実行方法としては、静止画検証装置１０７上に搭載しているＯＳの１機能であるシェルから、起動対象ソフトウェアを実行してもよい。たとえば、編集情報が編集情報１１０１ならば、静止画検証装置１０７は、以下のようなコマンドをシェルから実行する。
【０１６５】
＄＞Ｐｉｃｔｕｒｅ ｔｏｏｌｓ ｖｅｒｓｉｏｎ ２．０ −ｃｒｏｐ ４００ｘ３０＋３００＋３００ −ｄｅｎｓｉｔｙ ７２ −ｓｃａｌｅ ＋２０％ Ｃ：￥Ｅｃｔｒａｃｔ．ｊｐｇ Ｃ：￥Ｅｃｔｒａｃｔ＿ｏｕｔ．ｊｐｇ
【０１６６】
上記例にて、“−ｃｒｏｐ”が“部分拡大”に対応するコマンド名を示している。また、“４００ｘ３０＋３００＋３００ −ｄｅｎｓｉｔｙ ７２ −ｓｃａｌｅ ＋２０％”は各パラメータに基づいた文字列を示している。また、“Ｃ：￥Ｅｃｔｒａｃｔ．ｊｐｇ”は復元前の画像であり、“Ｃ：￥Ｅｃｔｒａｃｔ＿ｏｕｔ．ｊｐｇ”は生成された復元後の画像を示している。
【０１６７】
ステップＳ２８１０、またはステップＳ２８１１の終了後、静止画検証装置１０７は、編集情報の最後の行を取得したかを判断する（ステップＳ２８１２）。最後の行を取得していない場合（ステップＳ２８１２：Ｎｏ）、静止画検証装置１０７は、変数ｉをインクリメントし（ステップＳ２８１３）、ステップＳ２８０５の処理に移行する。最後の行を取得した場合（ステップＳ２８１２：Ｙｅｓ）、静止画検証装置１０７は、実行対象となる処理が実行済みかを判断する（ステップＳ２８１４）。実行済みでない場合（ステップＳ２８１４：Ｎｏ）、静止画検証装置１０７は、編集対象に実行対象となる処理を起動対象ソフトウェアで実行する（ステップＳ２８１５）。実行済みの場合（ステップＳ２８１４：Ｙｅｓ）、または、ステップＳ２８１５の処理が終了後、静止画検証装置１０７は、編集対象を復元静止画情報として出力し（ステップＳ２８１６）、復元静止画情報の生成処理を終了する。
【０１６８】
図２８の例では、編集情報が編集内容で構成されている場合のフローチャートの例を示した。編集情報が編集操作で構成されている場合であれば、たとえば、静止画検証装置１０７は、編集情報に記載された起動対象ソフトウェアを起動する。続けて、静止画検証装置１０７は、編集情報の記載どおりにソフトウェアに対してイベントを送信することで、ソフトウェアの処理を実行してもよい。イベントの内容は、抽出者が起動対象ソフトウェアを操作したときに記録したマウスやキーボードのイベントであってもよい。このように、署名システム１００は、抽出者の代わりに静止画検証装置１０７のＯＳなどが起動対象ソフトウェアに対してイベントを送信することで、復元静止画情報を生成してもよい。
【０１６９】
図２９は、編集済み静止画情報の原本一部検証処理を示すフローチャートである。静止画検証装置１０７は、原動画情報からの抽出位置情報を取得する（ステップＳ２９０１）。取得後、静止画検証装置１０７は、原動画情報の署名情報に格納されているダイジェスト情報から、抽出位置情報に対応するフレームのダイジェスト情報を取得する（ステップＳ２９０２）。ダイジェスト情報を取得後、静止画検証装置１０７は、切り出し静止画情からダイジェスト情報を生成する（ステップＳ２９０３）。
【０１７０】
生成後、静止画検証装置１０７は、取得したダイジェスト情報と生成したダイジェスト情報が一致するかを判断する（ステップＳ２９０４）。一致した場合（ステップＳ２９０４：Ｙｅｓ）、静止画検証装置１０７は、検証に成功したことを出力し（ステップＳ２９０５）、編集済み静止画情報の原本一部検証処理を終了する。一致しない場合（ステップＳ２９０４：Ｎｏ）、静止画検証装置１０７は、検証に失敗したことを出力し（ステップＳ２９０６）、編集済み静止画情報の原本一部検証処理を終了する。
【０１７１】
以上説明したように、静止画検証装置、静止画検証方法、および静止画検証プログラムによれば、署名された動画像データの中から編集元画像を指定し、編集後、編集済み画像と編集元画像と編集元画像の動画像データにおける位置情報と編集情報を関連付ける。これにより、検証時には、関連付けられた編集元画像と位置情報と動画像データの署名から、編集元画像の正当性が保証できる。さらに、編集元画像と編集情報から編集済み画像を生成可能になるため、公開された編集済み画像の正当性が保証できる。
【０１７２】
編集済み画像の正当性がとれることにより、切り出し静止画情報に対して、ズーム化や明るさ調整等の編集を行っても、編集済み画像が改ざんされていないことに加え、動画像データからの抽出位置を第三者に証明することが可能である。
【０１７３】
また、静止画検証装置は、フレーム間圧縮された動画像データの予測フレームとその予測元とからなるフレームから、画像フォーマットで符号化することにより画像を生成し、画像ごとに要約情報を生成してもよい。これにより、フレーム間圧縮された動画像データであっても、動画像から切り出した画像に対して、編集を行っても改ざんされていないことを第三者に証明することが可能である。
【０１７４】
また、静止画検証装置は、動画像のフレームを画像フォーマットで符号化する際に、一つ以上のパラメータを適用して符号化し、画像ごとに要約情報を生成してもよい。これにより、生成された画像は、パラメータを設定することで、より見やすい、またはデータサイズが小さいといった、パラメータを変更する前よりよい画像を得ることができる。また、静止画検証装置は、動画像データによって毎回同じ編集を行う処理が存在すれば、前述の処理はパラメータに設定しておき、編集情報が変化する処理については、抽出者によって編集される際に、編集情報に記録してもよい。
【０１７５】
具体的には、たとえば、動画像データが常に暗部を撮影した動画像である場合、輝度の変更は毎回行われるため、静止画検証装置は、パラメータで輝度の変更を設定してもよい。また、生成された画像からの部分拡大の範囲が毎回異なるのであれば、静止画検証装置は、抽出者によって編集される際に、編集情報の一つとして部分拡大の範囲を記録してもよい。
【０１７６】
また、静止画検証装置は、検証対象となる編集済み画像を検証する際に、関連付けられた編集元画像と位置情報と動画像データの署名から、編集元画像の正当性を検証する。続けて、静止画検証装置は、編集元画像と編集情報から編集済み画像を復元し、復元結果と検証対象となる編集済み画像とを比較することにより、検証対象となる編集済み画像の正当性を検証してもよい。これにより、編集済み画像が元の動画像データの一部を編集した画像であり、改ざんされていないことを第三者に証明できる。また、編集済み画像に電子署名が付与されていれば、編集を行った抽出者が誰であるかが明らかであるため、他の第三者が編集済み画像に対して何らかの改変・追加等を施した場合でも、その追跡は可能である。
【０１７７】
また、静止画検証装置は、編集を行うソフトウェアとソフトウェアにて実行される編集処理と編集処理に付随する設定値とを編集情報として記録してもよい。これにより、編集情報から編集を行うソフトウェアに対するコマンド文が生成でき、静止画検証装置は、コマンド文の発行により編集済み画像を生成することができる。
【０１７８】
また、静止画検証装置は、編集を行うソフトウェアとソフトウェアに対して送信されたイベントを編集情報として記録してもよい。マウスやキーボードなどによってソフトウェアに送信されたイベントは、抽出者がソフトウェアに対して行った編集操作と一致する。これにより、送信されたイベントの記録をとり、ソフトウェアに対してイベントを送信することにより、抽出者が編集操作を行った際の操作を復元でき、静止画検証装置は編集済み画像を生成することができる。
【０１７９】
また、静止画検証装置は、編集元画像を指定する際に、動画像データ上の指定された動画フレームを基に静止画像データを生成してもよい。これにより、静止画検証に必要な静止画のみを符号化するだけでよく、静止画検証処理を高速化することができる。
【０１８０】
なお、本実施の形態で説明した静止画検証方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本静止画検証プログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また本静止画検証プログラムは、インターネット等のネットワークを介して配布してもよい。
【符号の説明】
【０１８１】
７０１ 入力部
７０２ 映像復号部
７０３ 転送部
７０４ 変換部
７０５ 静止画符号化部
７０６ ダイジェスト情報生成部
７０７ 符号化パラメータ保持部
７０８ 電子署名生成部
７０９ 格納部
７１０ 電子署名検証部
７１１ 指定部
７１２ 編集記録部
７１３ 関連付け部
７１４ ダイジェスト情報検証部
７１５ 静止画復元部
７１６ 静止画判断部
７１７ 編集済み静止画検証部
【特許請求の範囲】
【請求項１】
動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部と、
前記複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部と、
前記編集済み画像データの正当性の検証を行うときに、前記編集済み画像データに対応する静止画像データと前記編集情報を記録部から取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成する静止画復元部と、
生成された前記復元静止画像データと検証対象の前記編集済み画像データとを比較して一致しているかを判断する静止画判断部と、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するダイジェスト生成部と、
前記生成された要約情報と、前記記録部に記録された位置情報を基に前記格納部に記憶されている原本保証を行う前記編集済み画像データに対応する要約情報を格納部から抽出して比較し、一致しているかを検証するダイジェスト情報検証部と、
前記ダイジェスト情報検証部の検証結果と前記静止画判断部の判断結果を基に前記編集済み画像データの正当性を検証する編集済み静止画検証部と、
を有する静止画検証装置。
【請求項２】
前記動画像データを構成する複数の画像データは、独立で再生可能な動画フレームと、独立で再生不可能な予測フレームとからなる請求項１に記載の静止画検証装置。
【請求項３】
前記独立で再生不可能な予測フレームは、独立で再生可能な動画フレームに基づいて独立で再生可能な動画フレームへ変換した後で、画像フォーマットに従って静止画像に符号化される請求項２に記載の静止画検証装置。
【請求項４】
前記編集情報として、編集を行うソフトウェアと前記ソフトウェアで実行される編集処理内容と前記編集処理に付随する設定値とを有する請求項１〜３のいずれか一つに記載の静止画検証装置。
【請求項５】
前記静止画像の選択は、前記動画像データ上の指定を受けつけることで行い、指定された動画フレームを基に静止画像データが生成される請求項１〜４のいずれか一つに記載の静止画検証装置。
【請求項６】
コンピュータが編集済み画像データの正当性の検証を行う方法であって、
編集済み画像データの正当性の検証を行うときに、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部から、検証対象の前記編集済み画像データに対応する静止画像データと編集情報を取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成するステップと、
生成された前記復元静止画像データと前記検証対象の前記編集済み画像データとを比較して一致しているかを判断するステップと、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するステップと、
前記生成された要約情報と、前記動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部から、前記記録部に記録された位置情報を基に、原本保証を行う前記編集済み画像データに対応する要約情報を抽出して比較し、一致しているかを検証するステップと、
前記生成された要約情報と格納部に記憶されている要約情報との一致の検証結果と、前記復元静止画像データと前記検証対象の前記編集済み画像データとの比較の判断結果とを基に編集済静止画の正当性を検証するステップと、
を前記コンピュータが実行する編集済み画像データの正当性を検証する静止画検証方法。
【請求項７】
コンピュータに、
編集済み画像データの正当性の検証を行うときに、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部から、検証対象の前記編集済み画像データに対応する静止画像データと編集情報を取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成するステップと、
生成された前記復元静止画像データと前記検証対象の前記編集済み画像データとを比較して一致しているかを判断するステップと、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するステップと、
前記生成された要約情報と、前記動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部から、前記記録部に記録された位置情報を基に、原本保証を行う前記編集済み画像データに対応する要約情報を抽出して比較し、一致しているかを検証するステップと、
前記生成された要約情報と格納部に記憶されている要約情報との一致の検証結果と、前記復元静止画像データと前記検証対象の前記編集済み画像データとの比較の判断結果とを基に編集済静止画の正当性を検証するステップと、
を実行させる静止画検証プログラム。
【請求項１】
動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部と、
前記複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部と、
前記編集済み画像データの正当性の検証を行うときに、前記編集済み画像データに対応する静止画像データと前記編集情報を記録部から取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成する静止画復元部と、
生成された前記復元静止画像データと検証対象の前記編集済み画像データとを比較して一致しているかを判断する静止画判断部と、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するダイジェスト生成部と、
前記生成された要約情報と、前記記録部に記録された位置情報を基に前記格納部に記憶されている原本保証を行う前記編集済み画像データに対応する要約情報を格納部から抽出して比較し、一致しているかを検証するダイジェスト情報検証部と、
前記ダイジェスト情報検証部の検証結果と前記静止画判断部の判断結果を基に前記編集済み画像データの正当性を検証する編集済み静止画検証部と、
を有する静止画検証装置。
【請求項２】
前記動画像データを構成する複数の画像データは、独立で再生可能な動画フレームと、独立で再生不可能な予測フレームとからなる請求項１に記載の静止画検証装置。
【請求項３】
前記独立で再生不可能な予測フレームは、独立で再生可能な動画フレームに基づいて独立で再生可能な動画フレームへ変換した後で、画像フォーマットに従って静止画像に符号化される請求項２に記載の静止画検証装置。
【請求項４】
前記編集情報として、編集を行うソフトウェアと前記ソフトウェアで実行される編集処理内容と前記編集処理に付随する設定値とを有する請求項１〜３のいずれか一つに記載の静止画検証装置。
【請求項５】
前記静止画像の選択は、前記動画像データ上の指定を受けつけることで行い、指定された動画フレームを基に静止画像データが生成される請求項１〜４のいずれか一つに記載の静止画検証装置。
【請求項６】
コンピュータが編集済み画像データの正当性の検証を行う方法であって、
編集済み画像データの正当性の検証を行うときに、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部から、検証対象の前記編集済み画像データに対応する静止画像データと編集情報を取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成するステップと、
生成された前記復元静止画像データと前記検証対象の前記編集済み画像データとを比較して一致しているかを判断するステップと、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するステップと、
前記生成された要約情報と、前記動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部から、前記記録部に記録された位置情報を基に、原本保証を行う前記編集済み画像データに対応する要約情報を抽出して比較し、一致しているかを検証するステップと、
前記生成された要約情報と格納部に記憶されている要約情報との一致の検証結果と、前記復元静止画像データと前記検証対象の前記編集済み画像データとの比較の判断結果とを基に編集済静止画の正当性を検証するステップと、
を前記コンピュータが実行する編集済み画像データの正当性を検証する静止画検証方法。
【請求項７】
コンピュータに、
編集済み画像データの正当性の検証を行うときに、動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データから選択された静止画像データに編集処理を行い得られた編集済み画像データと、前記選択された静止画像の動画像データ上の位置情報と、前記選択された静止画像データと、前記編集処理の内容を表す編集情報とを記録する記録部から、検証対象の前記編集済み画像データに対応する静止画像データと編集情報を取り出し、前記編集情報を基に静止画像データの復元処理を行って復元静止画像データを生成するステップと、
生成された前記復元静止画像データと前記検証対象の前記編集済み画像データとを比較して一致しているかを判断するステップと、
前記記録部から、前記検証対象の前記編集済み画像データに対応する静止画像データを取得して要約情報を生成するステップと、
前記生成された要約情報と、前記動画像データを構成する複数の画像データを画像フォーマットに従って符号化することで得られた複数の静止画像データからそれぞれ生成された複数の要約情報を記憶する格納部から、前記記録部に記録された位置情報を基に、原本保証を行う前記編集済み画像データに対応する要約情報を抽出して比較し、一致しているかを検証するステップと、
前記生成された要約情報と格納部に記憶されている要約情報との一致の検証結果と、前記復元静止画像データと前記検証対象の前記編集済み画像データとの比較の判断結果とを基に編集済静止画の正当性を検証するステップと、
を実行させる静止画検証プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５−１】
【図２５−２】
【図２６】
【図２７】
【図２８】
【図２９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５−１】
【図２５−２】
【図２６】
【図２７】
【図２８】
【図２９】
【公開番号】特開２０１１−２１７２００（Ｐ２０１１−２１７２００Ａ）
【公開日】平成２３年１０月２７日（２０１１．１０．２７）
【国際特許分類】
【出願番号】特願２０１０−８４５６８（Ｐ２０１０−８４５６８）
【出願日】平成２２年３月３１日（２０１０．３．３１）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
【公開日】平成２３年１０月２７日（２０１１．１０．２７）
【国際特許分類】
【出願日】平成２２年３月３１日（２０１０．３．３１）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
[ Back to top ]