ファイル生成装置およびデータ出力装置
【課題】音声データや動画データ等について、再生装置の特性やデータの制作者の意図を反映した出力を得る技術を提供する。
【解決手段】時間経過を伴う電気信号を符号化した各種データをファイル化するにあたり、データを出力する出力装置におけるデータの出力態様を制御するための出力制御パラメータを併せてファイルに格納する。出力装置は、この出力制御パラメータを参照することにより、出力装置の特性やデータの制作者の意図を反映した出力制御を行うことができる。
【解決手段】時間経過を伴う電気信号を符号化した各種データをファイル化するにあたり、データを出力する出力装置におけるデータの出力態様を制御するための出力制御パラメータを併せてファイルに格納する。出力装置は、この出力制御パラメータを参照することにより、出力装置の特性やデータの制作者の意図を反映した出力制御を行うことができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、時間経過を伴う電気信号を符号化したデータの出力を制御する技術に関する。
【背景技術】
【０００２】
ビデオテープやＤＶＤに記録された動画、あるいはＣＤに記録された音楽などのデータには、その制作過程において、フェードイン・フェードアウトや色調補正、周波数イコライジングや残響効果等の様々なエフェクトが施されている。また、そのデータを再生する再生装置は、各メーカから多種多様な商品がラインナップされている。
【０００３】
しかし、データの制作者は、このような多種多様の再生装置の特性等を個々に考慮してデータを制作することは困難である。そのため、ある装置では効果的なエフェクトが、ある装置では効果的に感じられない場合等が生じていた。例えば、フェードイン処理が施された音楽を再生する際に、その再生可能な音量範囲の違いから、大口径スピーカを備えたステレオ装置では、直線的に音が経ち上がるように聞こえるが、携帯型プレーヤのヘッドフォンで聞く場合には、突然音が経ち上がるように聞こえる場合などがある。他の例としては、あるメーカのテレビの発色を基準として制作された動画が、他のメーカのテレビで再生すると、肌色が赤味がかって見えてしまう場合などがある。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、これらの課題に鑑みてなされたものであり、個々の再生環境に応じてデータを制作することなく、再生装置の特性やデータの制作者の意図を反映したデータの出力を得る技術を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題の少なくとも一部を解決するために、本発明は、第１の構成として、時間経過を伴う電気信号を符号化したデータを入力するデータ入力部と、前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するパラメータ入力部と、前記データと前記出力制御パラメータとを備えるファイルを生成するファイル生成部と、を備えるファイル生成装置を採用した。
【０００６】
このような構成によれば、データの時間依存の出力態様を制御可能なファイルを生成することができる。例えば、時間経過に応じて連続的または段階的に出力態様を変化させる制御や、あるまとまった時間単位で出力態様を変化させる制御等が可能となる。時間経過を伴う電気信号を符号化したデータとは、例えば、音声データや動画データとすることができる。なお、本発明および後述の種々の発明において、符号化とは、デジタル化や圧縮化、暗号化等の意味を表し、復号とは、前記各々に対応し、アナログ化や伸張化、平文化等の意味を表す。
【０００７】
また、上記構成において、前記ファイル生成部は、前記データの少なくとも一部と前記出力制御パラメータとを備えるフレームデータを複数配することによりファイルを生成することとしてもよい。このような態様とすれば、フレームデータ毎に詳細な出力制御を行うことができる。フレームデータは、例えば、前記データを音声データとした場合、任意の単位時間で音声データを断片化し、その断片毎に出力制御パラメータを含むヘッダを付加したデータをフレームデータとすることができる。また、前記データを動画データとした場合は、１／３０秒毎に表示される画像毎に出力制御パラメータを含むヘッダを付加することによりフレームデータとすることができる。このようなフレームデータを複数配することにより、１つのファイルとなる。ファイル内の各フレームデータの大きさは、固定長でもよいし、可変長でもよい。
【０００８】
また、上記構成において、前記出力制御パラメータは、前記データのフェードインまたはフェードアウト出力を制御することとしてもよい。このような態様とすれば、出力装置はフェードインやフェードアウト処理が可能となる。例えば、音声データの場合、音量を制御することによりフェードイン・フェードアウト処理が可能となり、動画データの場合は、明るさや表示領域のサイズを制御することにより可能となる。
【０００９】
また、上記構成において、前記出力制御パラメータは、前記データの出力速度変更時に出力される部分を特定することとしてもよい。このような態様とすれば、出力装置における早送り出力等の処理において、出力するデータの部分を特定することができる。例えば、出力変化の緩やかなデータ部では、次に出力するデータまでの間隔を長くし、出力変化が激しいデータ部については、短い間隔で出力する等といった制御が可能となる。このような部分の特定は、時間で指定してもよいし、出力するフレームを指定してもよい。
【００１０】
また、上記構成において、前記出力制御パラメータは、所定のタイミングで出力態様の切り替えを制御することとしてもよい。出力態様の切り替えは、出力に関し、知覚可能ないずれかのパラメータを変更することで実現することが好ましい。このような態様とすれば、例えば、音楽データにおいて、曲の転調時や第一楽章終了時等に音量や音色、あるいは施すエフェクトを変化させたり、動画データにおいて、シーンが変わった時等に色調や明度等を変化させるなどといった出力態様の切り替えを行うことができる。切り替えは１箇所に限られることはなく、複数箇所で可能である。
【００１１】
また、上記構成や種々の態様において、前記パラメータ入力部は、前記出力装置における出力環境に応じた出力制御パラメータを入力するファイル生成装置とすることができる。このような態様とすれば、出力装置における出力環境に応じた出力制御が可能となる。例えば、データを音声データとした場合、出力装置のダイナミックレンジに応じてフェードイン処理の初期音量を設定したり、その周波数特性に応じて高音の出力を弱めたイコライジング処理を設定すること等ができる。また、リビングルームやコンサートホール等の、出力装置が設置された周りの環境に応じてパラメータを設定することとしてもよい。データを動画データとした場合は、ＣＲＴ、テレビ、プロジェクタ、プラズマディスプレイ等の動画を表示する装置の特性に応じて、色調やフェードイン処理の初期明度等を設定することができる。
【００１２】
また、上記構成や種々の態様において、前記出力制御パラメータは、前記データの一部を省略して出力するためのデータとしてもよい。例えば、音声データや動画データの全フレームのうち、一部のフレームを間引くことにより、一部の時間範囲のみを再生する制御パラメータが相当する。かかるパラメータを用いることにより、例えば、「ダイジェストモード」が指定された場合には、音声データのサビにあたる部分、または動画データのクライマックスにあたる部分など、特定の場面のみを簡易に再生させることが可能となる。
上記パラメータは、音声データや動画データの各フレームの情報を削減するためのデータとしてもよい。例えば、試聴が指定されている場合には、音声データの高音域、低音域を削除し、音質を若干落とした状態で再生させたり、画像データの解像度を粗くして画質を落とした状態で再生させたりすることができる。音声データや動画データがネットワークを介して配信される場合、試聴が指定されている条件下では、満足のいく音質、画質での再生がされないため、音声データや動画データの適正な入手をユーザに促すことができる。
【００１３】
また、上記パラメータは、動画データの一部分をトリミングする情報としてもよい。こうすれば、例えば、解像度の粗い表示装置で動画を再生する場合でも、人の表情や文字など、重要な部分が視認可能な状態で表示させることができる。
【００１４】
上記構成や種々の態様において、前記データが複数のチャンネルを含んでいる場合には、前記出力制御パラメータは、各チャンネル単位で出力態様を制御するデータとしてもよい。こうすることにより、例えば、データに含まれる全チャンネルを再生することができない出力装置を用いる場合でも、十分な音響効果または画像効果が得られるよう、再生されるチャンネルを制御することができる。例えば、低音を強調すべき場面においては、低音チャンネルを優先的に使用し、その他の場面では、低音チャンネルを抑えることができる。
【００１５】
本発明は、第２の構成として、時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するファイル入力部と、復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する出力制御部と、を備えるデータ出力装置を採用した。
【００１６】
このような構成とすれば、出力制御パラメータを参照して、データの出力態様を制御することができる。時間経過を伴う電気信号を符号化したデータとは、既説のように、音声データや動画データとすることができる。データの出力態様は、本発明の第１の構成で説明した種々の出力制御パラメータに基づく制御が可能である。
【００１７】
本発明は、第３の構成として、次のような装置を採用可能である。すなわち、音声ファイルを生成する音声ファイル生成装置であって、音声データを入力する音声データ入力部と前記音声データを再生する再生装置に応じて該音声データの再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する音声ファイル生成部と、を備えることを要旨とする。
【００１８】
このような構成とすれば、再生装置に応じて再生態様を制御することができ、音声ファイル生成者の意図に即した再生を実現させることができる。
【００１９】
なお、上記構成において、前記再生制御パラメータは、前記音声データの少なくとも一部の周波数成分を制御することとしてもよい。このような態様であれば、音声データに対し、種々のイコライジング処理が可能となる。例えば、低城の周波数を強調したり、高域の周波数を強調したりすることができる。
【００２０】
また、上記構成において、前記再生制御パラメータは、前記音声データ再生時の音量を制御することとしてもよい。このような態様であれば、柔軟に音量の制御が可能となる。
【００２１】
また、上記構成において、前記再生制御パラメータは、前記音声データの少なくとも一部の繰り返し再生を制御することとしてもよい。かかる構成によれば、例えば、一連の音声データのうち、繰り返して演奏等される部分については、１回の演奏に対応する音声データのみを記録し、再生制御パラメータによって、この部分の繰り返し数、繰り返し時の音量、音色、エフェクトなどの少なくとも一部を制御する態様が考えられる。このような態様であれば、従来繰り返す分だけ記録していたデータが、１回の記録だけで済むこととなる。そのため、データ容量の削減が可能となる。
【００２２】
本発明の第４の構成は、音声データを再生する音声データ再生装置であって、音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する音声ファイル入力部と、前記再生制御パラメータを参照して、前記音声データの再生態様を制御する再生制御部と、を備える音声データ再生装置を採用した。
【００２３】
このような構成とすれば、音声データの再生態様を、再生制御パラメータを参照することにより制御することができる。再生態様は、本発明の第３の構成で説明した各種再生制御パラメータに基づき制御可能である。
【００２４】
本発明の第５の構成は、動画ファイルを生成する動画ファイル生成装置であって、動画データを入力する動画データ入力部と前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する動画ファイル生成部と、を備える動画ファイル生成装置を採用した。
【００２５】
このような構成とすれば、動画データの出力態様を制御可能なファイルを生成可能となる。
【００２６】
なお、上記構成において、前記再生制御パラメータは、前記動画データの少なくとも一部の繰り返し再生を制御することとしてもよい。このような態様であれば、従来繰り返す分だけ記録していた動画データが、１回の記録だけで済むこととなる。そのため、データ容量の削減が可能となる。
【００２７】
また、上記構成において、前記動画データには、動画に連動して表示される文字列データが含まれており、前記再生制御パラメータは、該文字列データの表示位置、大きさ、色の少なくとも一つを制御することとしてもよい。このような態様であれば、例えば動画データとともに記録した文字列データの位置や大きさ、色などを時間経過に応じて制御することが可能となる。また、時間経過に応じた制御以外にも、再生装置やその環境の特性に依存して制御してもよい。
【００２８】
本発明の第６の構成は、動画データを再生する動画データ再生装置であって、動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する動画ファイル入力部と、前記再生制御パラメータを参照して、前記動画データの再生態様を制御する再生制御部と、を備える動画データ再生装置を採用した。
このような構成であれば、再生制御パラメータを参照することにより、動画データの再生態様を制御可能となる。再生態様は、本発明の第５の構成で説明した各種再生制御パラメータに基づき制御可能である。
【００２９】
本発明は、上述のように、ファイル生成装置、データ出力装置、音声ファイル生成装置、音声データ再生装置、動画ファイル生成装置、動画データ再生装置として構成可能であるが、ファイル生成方法、データ出力方法、音声ファイル生成方法、音声データ再生方法、動画ファイル生成方法、動画データ再生方法として構成することもできる。
【００３０】
また、本発明は、上述の各種装置をコンピュータを用いて構成した場合に、その機能を実現するプログラムとして構成してもよい。プログラムとして構成した場合は、フレキシブルディスクやＣＤ−ＲＯＭ、ＤＶＤ、ＭＯ、ＩＣカード、ＲＯＭカートリッジ、ハードディスク等のコンピュータ読取可能な記録媒体に記録することができる。
【発明を実施するための最良の形態】
【００３１】
以下、本発明の実施の形態について図面を参照しつつ次の順序で説明する。
Ａ．第１実施例
（Ａ１）音声ファイル生成装置：
（Ａ２）音声ファイル生成処理：
（Ａ３）音声ファイル構造：
（Ａ４）音声再生装置：
（Ａ５）音声再生処理：
（Ａ６）再生制御：
Ｂ．第２実施例
（Ｂ１）動画ファイル生成装置：
（Ｂ２）動画ファイル生成処理：
（Ｂ３）動画ファイル構造：
（Ｂ４）動画再生装置：
（Ｂ５）動画再生処理：
（Ｂ６）再生制御
【００３２】
Ａ．第１実施例：
（Ａ１）音声ファイル生成装置：
図１は、音声ファイル生成装置の概略構成図である。音声ファイル生成装置１００は、時間経過を伴う電気信号である音声信号を符号化して生成した音声データと、各種パラメータを記録したヘッダとを含む音声ファイルを生成する。音声ファイル生成装置１００は、音声入力部１０１、Ａ／Ｄ変換部１０２、エンコーダ部１０３、パラメータ入力部１０４、ヘッダ生成部１０５、ファイル生成部１０６等により構成されている。
【００３３】
音声入力部１０１は、マイク等を用いることができ、音声を電気信号に変換して音声信号とする。Ａ／Ｄ変換部１０２は、アナログ信号である音声信号を、指定されたサンプリングレートや量子化ビット数でデジタル信号に変換する。エンコーダ部１０３は、このようにデジタル化した音声を、指定されたエンコード形式で符号化して音声データを生成する。エンコード形式は、ｍｐ３形式やｐｃｍ形式等を用いることができる。パラメータ入力部１０４は、上記サンプリングレートや量子化ビット数、エンコード方式の入力を行う。パラメータ入力部１０４は、また、後述する音声再生装置で参照される再生制御パラメータをユーザから入力する。ヘッダ生成部１０５は、パラメータ入力部１０４より入力した各種パラメータを記録したヘッダを生成する。ファイル生成部１０６は、上記生成した音声データとヘッダとを含む音声ファイルを生成する。生成した音声ファイルは記録媒体１０７に格納される。
【００３４】
ｍｐ３形式とは、音声を、サブバンド分解、心理聴覚評価、変形離散コサイン変換（ＭＤＣＴ）、量子化、ハフマン符号化等の各種処理を経ることにより圧縮する形式である。また、ｐｃｍ形式とは、音声を任意のサンプリングレートと量子化ビット数で単純にデジタル化した形式である。両者とも周知の技術であるため、本実施例では詳しい説明を省略する。
【００３５】
（Ａ２）音声ファイル生成処理：
図２は、音声ファイル生成処理のフローチャートである。音声ファイル生成装置１００は、まず、音声をデジタル信号としてデータ化するために、サンプリングレートや量子化ビット数、およびエンコード形式等の指定をユーザからパラメータ入力部１０４を介して入力する（ステップＳ１００）。音声ファイル生成装置１００は、これらの指定に基づき、音声入力部１０１とＡ／Ｄ変換部１０２とエンコーダ部１０３とを用いて音声を入力し、音声データを生成する（ステップＳ１０１）。次に、音声ファイル生成装置１００は、再生制御パラメータを、パラメータ入力部１０４を介しユーザから入力する（ステップＳ１０２）。音声ファイル生成装置１００は、入力された再生制御パラメータや、上記入力されたサンプリングレートや量子化ビット数、エンコード形式を記録したヘッダを生成する（ステップＳ１０３）。最後に、音声ファイル生成装置１００は、ファイル生成部１０６を用いてステップＳ１０１で生成した音声データと、ステップＳ１０３で生成したヘッダとを含む音声ファイルを生成して処理を終了する（ステップＳ１０４）。
【００３６】
（Ａ３）音声ファイル構造：
図３は、上記音声ファイル生成処理によって生成された音声ファイルの概略構造図である。音声ファイルは、ヘッダを格納するヘッダ部と、音声データを格納する音声データ格納部とにより構成されている。音声ファイルは、このように、ヘッダ１つと音声データ１つとにより構成される態様のほか、図４で示すように、ヘッダと音声データとを含むフレームデータを複数連続して配する態様とすることもできる。このような態様であれば、フレームデータ単位で各種パラメータの設定を行うことができるため、音声再生時の木目細かな再生制御を行うことができる。
【００３７】
図５は、前記ヘッダの詳細な構造図である。ヘッダには、図示するように、対応する音声データのサンプリングレート、量子化ビット数、エンコード形式が記録されている。後述する音声再生装置は、これらのパラメータを参照することにより、音声データの復号を行うことができる。
【００３８】
ヘッダには、その他に、再生制御パラメータが記録されている。再生制御パラメータは、後述する音声再生装置の音声再生時に参照されることにより、各種再生制御が可能となる。図示した「フェードイン」や「フェードアウト」等の各種パラメータによる再生制御の説明は後述する。
【００３９】
（Ａ４）音声再生装置：
図６は、音声再生装置の概略構成図である。本実施例における音声再生装置２００は、音声ファイル生成装置１００によって生成した音声ファイルを用いて音声を再生する。音声再生装置２００は、音声ファイル入力部２０１、ヘッダ解析部２０３、デコーダ部２０４、ＤＳＰ部２０５、Ｄ／Ａ変換部２０６、音声出力部２０７等により構成される。
音声ファイル入力部２０１は、記録媒体２０２から音声ファイルを入力する。ヘッダ解析部２０３は、入力した音声ファイルからヘッダを抽出し解析する。デコーダ部２０４は、音声ファイルから音声データを入力し、ヘッダ解析部２０３により解析されたエンコード形式、サンプリングレート、量子化ビット数に基づき音声データを復号する。ＤＳＰ部２０５は、ヘッダ解析部２０３により解析された再生制御パラメータに基づき、復号した音声データに対し再生制御を行う。Ｄ／Ａ変換部２０６は、デジタル信号である音声データをアナログ信号に変換する。音声出力部２０７は、アンプやスピーカ若しくはヘッドフォン等により構成されており、前記アナログ信号に基づき音声を出力する。
【００４０】
（Ａ５）音声再生処理：
図７は、音声再生処理のフローチャートである。まず、音声再生装置２００は、記録媒体２０２から音声ファイルを入力する（ステップＳ２００）。音声ファイルにはヘッダと音声データとが格納されている。そこで、音声再生装置２００は、まず、ヘッダ解析部によりヘッダを解析し、音声データのサンプリングレート、量子化ビット数、エンコード形式、再生制御パラメータ等のパラメータを獲得する（ステップＳ２０１）。音声再生装置２００は、獲得したこれらのパラメータのうち、サンプリングレート、量子化ビット数、エンコード形式等に基づき、デコーダ部を用いて音声データを復号する（ステップＳ２０２）。次に、音声再生装置２００は、ステップＳ２０１により獲得した再生制御パラメータに基づき、復号した音声データにＤＳＰ部を用いて再生制御を行う（ステップＳ２０３）。音声再生装置２００は、再生制御を行った音声データを、Ｄ／Ａ変換部２０６によりアナログ信号に変換し、音声出力部により出力する（ステップＳ２０４）。
【００４１】
なお、本実施例では、ＤＳＰ部２０５において復号された音声データを出力する際にＤ／Ａ変換を行うこととしたが、例えば、ＰＷＭ（ｐｕｌｓｅ ｗｉｄｔｈ ｍｏｄｕｌａｔｉｏｎ）方式の音声データであれば、Ｄ／Ａ変換を用いることなくアナログフィルタを介して音声出力を行うことも可能である。
【００４２】
（Ａ６）再生制御：
次に、再生制御パラメータに基づく音声データの再生制御について再び図５を用いて説明する。図５の再生制御パラメータには、フェードイン処理、フェードアウト処理、イコライジング処理および繰り返し再生処理、ダイジェスト情報、チャンネル制御が設定されている。音声再生装置は、これらのパラメータの指示に従い音声の再生を制御する。
【００４３】
「フェードイン」パラメータには、（ａ）通常、（ｂ）ラジカセ、（ｃ）ヘッドフォンステレオ用のプロファイルが設定されている。そのため、音声再生装置２００は、自身の特性に最適なプロファイルを選択し、音声データにフェードイン処理を施す。図中のグラフは、横軸がフェードイン処理を行う時間を表し、縦軸は、元の音声データの振幅に乗ずる係数を表す。フェードイン処理を行うデータの範囲は、時間によって設定してもよいし、フレームデータの範囲を指定することにより設定してもよい。また、パラメータは、プロファイルではなく、演算式を直接パラメータ中に定義することにより設定してもよい。演算式が音声再生装置２００によって予め定義されている場合は、演算式に用いる所定の係数をパラメータ中に設定することとしてもよい。
【００４４】
「フェードアウト」パラメータには、「フレームデータ１〜３」と設定されている。このような設定方法は、複数のフレームデータにより構成されている音声ファイルを用いて音声を再生する際に利用可能であり、フレームデータ１からフレームデータ３にかけて徐々に音量を小さくする処理を意味する。無論、フェードイン処理と同様に、プロファイルや演算式、係数による指定も行うことができる。
【００４５】
「イコライジング」パラメータには、フェードインパラメータと同じく３種類のプロファイルが設定されている。音声再生装置２００は、自身の特性に最適なプロファイルを選択してイコライジング処理を施す。図中のグラフは、横軸が音声の周波数帯域、縦軸が強調度合いを表す。なお、この場合も、プロファイルではなく、演算式や係数による指定を行うことができる。例えば、ｐｃｍ形式のような時間領域の信号に対して特定の周波数領域の信号を強調したり逆に弱めたりする場合、一般にデジタルフィルタ処理を施すが、このデジタルフィルタの演算式、もしくはフィルタの係数をパラメータ中に定義することによって、周波数領域における変調をかけることが可能となる。
【００４６】
「繰り返し再生」パラメータには、繰り返し再生を行う時間と回数が指定されている。図によれば、音声データ中の３６０秒から３７０秒の範囲にある音声データを３回繰り返して再生する処理を行うこととなる。指定方法は、時間による指定以外にも、繰り返すフレームデータの範囲を設定することにより可能である。
【００４７】
「ダイジェスト情報」は、ダイジェストモードでの再生が指示されている時に、再生されるべきフレームを特定するデータである。本実施例では、フレームに対して、１〜５の範囲で、ダイジェストレベルが付与されているものとした。ダイジェストレベル「１」は重要度の高いフレームを意味し、数値が大きくなる程、重要度が低下する。「レベル２」というダイジェスト情報は、ダイジェストモードにおいては、レベル１または２が付されたフレームを再生し、レベル３〜５のフレームは再生を省略することを意味する。各フレームに付したダイジェストレベルによって、ダイジェストモードでの再生時に、再生される個所を容易に制御することができる。例えば、音声データの場合には、ダイジェストモードでサビの部分を再生することができ、動画データの場合には、ダイジェストモードでクライマックスの場面を再生することができる。また、ダイジェスト情報を変更することにより、各フレームの情報を変更するまでなく、ダイジェストモードで再生される範囲を制御することができる。
【００４８】
ダイジェスト情報としては、このように再生範囲を制御する情報の他、動画データについて各フレームのトリミングを制御する情報を用いても良い。こうすることにより、例えば、解像度が低い表示装置で動画データを再生する場合には、画像をトリミングして表示することが可能となり、人間の表情や文字など、重要な部分を視認しやすい状態で表示することができる。
【００４９】
「チャンネル情報」は、データが多チャンネルの場合に、出力機器に応じて、各チャンネルの再生を制御するデータである。図の例では、音声データは、左チャンネル（Ｌ）、右チャンネル（Ｒ）、センタチャンネル（Ｃ）、左サラウンド（ＬＳ）、右サラウンド（ＲＳ）、低域強調チャンネル（ＬＦＥ）を有している。この音声データを、１チャンネルの出力機器で再生する場合には、図示する通り、Ｌチャンネルを０．５、Ｃチャンネルを０．３、ＬＦＥチャンネルを０．２の割合でミキシングして出力する。２チャンネルの出力機器で再生する場合には、左チャンネル（Ｌ）からは、Ｌチャンネルを０．５、Ｃチャンネルを０．１、ＬＳチャンネルを０．４でミキシングして出力する。右チャンネル（Ｒ）からは、Ｃチャンネルを０．２、Ｒチャンネルを０．５、ＬＳチャンネルを０．３でミキシングして出力する。このようにチャンネル単位での制御を行うことにより、出力機器のチャンネル数に応じて、音声データ作成時の意図を反映した出力が可能となる。本実施例では、ヘッダ部分にチャンネル制御を組み込んでいるが、各フレームに組み込んでも良い。こうすれば、音声データのうち、部分ごとに、強調すべきチャンネルを切り替えることができ、音声データ作成時の意図をより反映した出力が可能となる。
【００５０】
上述のイコライジング処理は、例えば、ｍｐ３形式で符号化された音声データであれば、ハフマン復号、逆量子化等の処理を経て、データを周波数領域の信号とした際に行うことができる。この場合、周波数領域において各周波数ごとに重み係数を乗じる等すればよい。また、「フェードアウト」「フェードイン」「繰り返し再生」の各種処理は、上記の処理後、逆ＭＤＣＴ変換等を行い、データを時間領域の信号とした際に行うことができる。時間領域では、各データは音の振幅をデジタル化したものに相当するため、重み係数を乗じるなどして、振幅を調整することにより「フェードイン」「フェードアウト」などを実現できる。
【００５１】
上述した再生制御パラメータを用いることにより、音声再生装置は、自身の特性を考慮してフェードインやフェードアウト処理を施すことができる。例えば、図５のフェードインパラメータで設定されているヘッドフォンステレオ用のプロファイルは、フェードイン開始の音量が大きく設定されているため、ダイナミックレンジの狭いヘッドフォンで再生する際に効果的である、また、イコライジングパラメータで設定されているヘッドフォンステレオ用のプロファイルを用いれば、高域の周波数成分を抑えた出力が可能のため、電車内等で使用する場合に耳障りな高音の音漏れを防ぐことができる。
【００５２】
その他にも、音量を制御するパラメータを付加することもできる。ヘッダ１つにより構成される音声ファイルであれば、時間を指定して、ある時間からある時間までは音量を小さくし、ある時間を超えれば音量を大きくするといった制御が可能である。フレームデータにより構成される音声ファイルであれば、フレーム毎に音量を詳細に設定することができる。また、音声再生装置が、リバーブ機能やコンプレッサー機能、あるいはピッチシフト機能等の各種エフェクト機能を備えていれば、これらの機能を利用可能とするパラメータを付加してもよい。
【００５３】
上述のフェードインやフェードアウト、イコライジング等の各種処理は、音声再生装置の特性にかかわらず制御することも可能である。この場合、音声データの作成者が意図した積極的な効果を反映させることができる。
【００５４】
Ｂ．第２実施例：
（Ｂ１）動画ファイル生成装置：
次に、時間経過を伴う電気信号として、映像信号を扱う動画ファイル生成装置について説明する。図８は、動画ファイル生成装置の概略構成図である。動画ファイル生成装置３００は、映像入力部３０１、Ａ／Ｄ変換部３０２、エンコーダ部３０３、パラメータ入力部３０４、ヘッダ生成部３０５、ファイル生成部３０６等により構成されている。
映像入力部３０１は、ＣＣＤカメラ等を用いることができ、映像を電気信号に変換する。Ａ／Ｄ変換部３０２は、電気信号として入力した映像を、デジタル信号に変換する。エンコーダ部３０３は、指定されたエンコード形式で前記デジタル信号を符号化して動画データを生成する。エンコード形式は、ＤＶ形式、ＭＰＥＧ形式等を用いることができる。パラメータ入力部３０Ａは、上記エンコード形式の指定のほか、後述する動画再生装置で参照されるユーザ所望の再生制御パラメータを入力する。ヘッダ生成部３０５は、パラメータ入力部３０４より入力した各種パラメータを記録したヘッダを生成する。ファイル生成部３０６は、上記生成した動画データとヘッダとを含む動画ファイルを生成する。生成した動画ファイルは、記録媒体３０７に格納される。
【００５５】
（Ｂ２）動画ファイル生成処理：
図９は、動画ファイル生成処理のフローチャートである。動画ファイル生成装置３００は、まず、入力する映像を符号化するためのエンコード形式を、パラメータ入力部３０４を介しユーザから入力する（ステップＳ３００）。動画ファイル生成装置３００は、入力されたエンコード形式に基づき、映像入力部３０１と、Ａ／Ｄ変換部３０２と、エンコーダ部３０３とを用いて映像を入力し、動画データを生成する（ステップＳ３０１）。次に、動画ファイル生成装置３００は、パラメータ入力部３０４を介し、ユーザから再生制御パラメータを入力する（ステップＳ３０２）。動画ファイル生成装置３００は、入力された再生制御パラメータや、上記エンコード形式等を記録したヘッダを生成する（ステップＳ３０３）。最後に、動画ファイル生成装置３００は、ファイル生成部３０６を用いてステップＳ３０１で生成した動画データと、ステップＳ３０３で生成したヘッダとを含む動画ファイルを生成して処理を終了する（ステップＳ３０４）。
【００５６】
（Ｂ３）動画ファイル構造：
上記動画ファイル生成処理によって生成した動画ファイルは、先に説明した音声ファイルの構造と同様の構造を採ることができる。すなわち、図３で示した音声ファイル構造において、ヘッダ部に、上記動画ファイル生成処理のステップＳ３０３で生成したヘッダを格納し、音声データ格納部を動画データ格納部として、上記ステップＳ３０１で生成した動画データを格納すればよい。また、動画ファイルにおいても、フレームデータを用いた構成を採ることができる。この場合においても、図４で示した音声ファイル構造と同様の構造で実現可能である。
【００５７】
図１０は、動画ファイルのヘッダの詳細な構造図である。ヘッダには、図示するように、動画データのエンコード形式が記録されている。後述する動画再生装置は、このパラメータを参照することにより動画データの復号を行うことができる。本図によれば、「ＭＰＥＧ４」形式でエンコードされていることがわかる。
【００５８】
また、ヘッダには、再生制御パラメータが記録されている。再生制御パラメータは、後述する動画再生装置において参照されることにより、各種再生制御が可能となる。図によれば、画質補正、字幕補正、繰り返し再生に関するパラメータが設定されている。これらのパラメータを用いた再生制御の説明については後述する。
【００５９】
（Ｂ４）動画再生装置：
図１１は、動画再生装置の概略構成図である。本実施例における動画再生装置４００は、動画ファイル生成装置３００によって生成した動画ファイルを用いて動画を再生する。動画再生装置４００は、動画ファイル入力部４０１、ヘッダ解析部４０３、デコーダ部４０４、ＤＳＰ部４０５、Ｄ／Ａ変換部４０６、映像出力部４０７等により構成される。
【００６０】
動画ファイル入力部４０１は、記録媒体４０２から動画ファイルを入力する。ヘッダ解析部４０３は、入力した動画ファイルからヘッダを抽出し解析する。デコーダ部４０４は、ヘッダ解析部４０３により解析されたエンコード形式に基づき動画ファイル内の動画データを復号する。ＤＳＰ部４０５は、ヘッダ解析部４０３により解析された再生制御パラメータに基づき、復号した動画データに対し再生制御を行う。Ｄ／Ａ変換部４０６は、デジタル信号である動画データを、ＲＧＢ信号やコンポジット信号等のアナログ信号に変換する。映像出力部は、ＣＲＴやテレビ等により構成されており、前記アナログ信号に基づき映像を出力する。
【００６１】
（Ｂ５）動画再生処理：
図１２は、動画再生処理のフローチャートである。まず、動画再生装置４００は、記録媒体４０２から動画ファイルを入力する（ステップＳ４００。）動画ファイルにはヘッダと動画データとが格納されている。そこで、動画再生装置４００は、まず、ヘッダ解析部によりヘッダを解析し、動画データのエンコード形式を示すパラメータや、再生制御パラメータを獲得する（ステップＳ４０１）。動画再生装置４００は、獲得したエンコード形式を示すパラメータに基づき、動画データを復号する（ステップＳ４０２）。次に、動画再生装置４００は、ステップＳ４０１により獲得した再生制御パラメータに基づき、復号した動画データにＤＳＰ部４０５を用いて再生制御を行う（ステップＳ４０３）。動画再生装置４００は、再生制御を行った動画データを、Ｄ／Ａ変換部４０６によりアナログ信号に変換し、映像出力部により出力する（ステップＳ４０４）。
【００６２】
（Ｂ６）再生制御：
次に、動画ファイルのヘッダに記録された再生制御パラメータに基づく動画データの再生制御について図１０および図１３を用いて説明する。図１０の再生制御パラメータには、画質補正処理、字幕補正処理、繰り返し再生処理を指定するパラメータが記録されており、動画再生装置は、これらのパラメータに従い動画データの出力を制御する。
【００６３】
「画質補正」パラメータには、動画再生装置のメーカ毎にシャープネス、ＲＧＢ補正、ガンマ値を設定するプロファイルが記録されている。図によれば、例えば、Ａ社の装置に対しては、元の動画に対してシャープネスを「＋２」だけ強め、ＲＧＢ（赤、緑、青）の内、Ｒ（赤）を「＋２」だけ強調し、ガンマ値を１．８に補正して再生する設定となっている。本実施例において、シャープネスとＲＧＢ補正の値は、元の動画データに対する強調度合いを１０段階で示したものであり、「＋２」は「＋２０％」の意である。一方、ガンマ値は絶対値を表す。動画再生装置４００は、これらのプロファイルの中から、自身の製造元を表すプロファイルを選択し、ＤＳＰ部４０５を用いて動画データに対し画質補正を施す。
【００６４】
「字幕補正」パラメータには、ＣＲＴやテレビ等により構成された映像出力部４０７のサイズに応じたプロファイルが設定されている。図によれば、例えば２２インチから３２インチまでの映像出力部４０７に対しては、元の文字よりサイズを１ピクセルだけ小さくした字幕を、画面下方に灰色で表示する設定となっている。無論、字幕を表示するためには、動画ファイル内に、字幕を表示するための文字列データが独立して格納されていなければならない。なお、ここでは「字幕」という表現を用いたが、テロップ等と同義の意味であり、文字列を表示する態様であればよい。動画再生装置４００は、自身の映像出力部４０７のサイズに対応したプロファイルを選択し、ＤＳＰ部４０５を用いて文字を修正し、字幕を表示する。
【００６５】
「繰り返し再生」パラメータには、繰り返し再生を行う動画データの部分が設定されている。図によれば、動画データの開始から３６０秒経た後、３７０秒までの１０秒間に記録されている動画データを３回再生する設定がされている。動画再生装置４００は、この設定により、繰り返し再生を行う。なお、繰り返し再生は、時間による範囲の指定のほかにも、フレームデータの範囲を指定することに行ってもよい。また、繰り返し再生を行うデータの範囲は、連続的な範囲とする必要はない。例えば、特定のシーンを、動画の冒頭と末尾などで使用する態様も含まれる。この場合には、繰り返し数に代えて、そのシーンを挿入する時刻を特定する情報をパラメータとして用いることができる。
【００６６】
再生制御パラメータには、早送り再生に関するパラメータを設定することもできる。図１３は、早送り再生に関する再生制御パラメータを設定した動画ファイルの概略図である。図示するように、動画ファイルは、フレームデータを連続して複数配することにより構成されており、一部のフレームデータのヘッダには、パラメータとして、「ｘ２」あるいは「ｘ３」というフラグが設定されている。この例では、「ｘ２」フラグは、２フレーム毎に設定されており、「ｘ３」フラグは、３フレーム毎に設定されている。動画再生装置４００は、ユーザから２倍速再生あるいは３倍速再生の指示があった場合に、このヘッダを解析し、２倍速再生であれば「ｘ２」フラグが存在するヘッダに対応したＡ、Ｃ、Ｅ、Ｇ、Ｉの動画データを再生し、３倍速再生であれば、「ｘ３」フラグの存在するヘッダに対応したＡ、Ｄ、Ｇ、Ｊの動画データを再生する。
【００６７】
なお、フラグは必ずしも等間隔に設定する必要はない。例えば、ｎ倍速再生の場合は、全体として再生するフレーム数が１／ｎ倍となるようにフラグを設定すればよい。このような構成とすれば、各シーンの重み付けを考慮した再生速度の制御が可能となる。例えば、動きの速いスポーツ中継等の動画データが記録された部分は、スキップするフレームデータを少なくすることにより、ゆっくりとした速度で早送り再生することができ、動きの遅い風景を撮影したような部分あれば、スキップするフレームデータを多くすることにより、早送り再生をより早く行うことができる。
【００６８】
また、動画の出力態様は、動画のシーンに応じて制御を切り替え可能であれば好適である。例えば、動きの激しいシーンであれば、シャープネスを強めることにより、はっきりと映像を映し出すことができる。また、夕日のシーンであれば、赤色を少し強調することにより、夕日をより効果的に映し出すことができる。
【００６９】
なお、再生制御にともなう上述の各種処理は、動画再生装置４００の特性にかかわらず制御可能であることは無論である。
【００７０】
以上、本発明の実施例を、第１実施例および第２実施例に基づき説明したが、本発明はこれらの実施例に限定されず、その趣旨を逸脱しない範囲で種々の構成を採ることができる。上述した各種処理はソフトウェアで実現してもよいし、ハードウェア的に実現するものとしてもよい。また、上述した実施例における音声ファイルや動画ファイルが記録される記録媒体は、フレキシブルディスクやＣＤ−ＲＯＭ／Ｒ／ＲＷ、ＤＶＤ、ＤＶＤ−Ｒ／ＲＷ／ＲＡＭ、ＭＯ、メモリカード、ハードディスク、ビデオテープ、音楽テープ、ＭＤ等が利用可能である。音声ファイルや動画ファイルは、記録媒体によるデータの受け渡し以外にも、ネットワークや無線通信によって受け渡しを行ってもよい。
【００７１】
産業上の利用可能性
本発明は、時間経過を伴う電気信号を符号化したデータの出力に利用可能である。
【図面の簡単な説明】
【００７２】
【図１】音声ファイル生成装置の概略構成図である。
【図２】音声ファイル生成処理のフローチャートである。
【図３】音声ファイルの概略構造図である。
【図４】音声ファイルの他の態様を示す概略構造図である。
【図５】音声ファイルに格納されたヘッダの詳細な構造図である。
【図６】音声再生装置の概略構成図である。
【図７】音声再生処理のフローチャートである。
【図８】動画ファイル生成装置の概略構成図である。
【図９】動画ファイル生成処理のフローチャートである。
【図１０】動画ファイルに格納されたヘッダの詳細な構造図である。
【図１１】動画再生装置の概略構成図である。
【図１２】動画再生処理のフローチャートである。
【図１３】早送り再生パラメータを設定した動画ファイルの概略構造図である。
【技術分野】
【０００１】
本発明は、時間経過を伴う電気信号を符号化したデータの出力を制御する技術に関する。
【背景技術】
【０００２】
ビデオテープやＤＶＤに記録された動画、あるいはＣＤに記録された音楽などのデータには、その制作過程において、フェードイン・フェードアウトや色調補正、周波数イコライジングや残響効果等の様々なエフェクトが施されている。また、そのデータを再生する再生装置は、各メーカから多種多様な商品がラインナップされている。
【０００３】
しかし、データの制作者は、このような多種多様の再生装置の特性等を個々に考慮してデータを制作することは困難である。そのため、ある装置では効果的なエフェクトが、ある装置では効果的に感じられない場合等が生じていた。例えば、フェードイン処理が施された音楽を再生する際に、その再生可能な音量範囲の違いから、大口径スピーカを備えたステレオ装置では、直線的に音が経ち上がるように聞こえるが、携帯型プレーヤのヘッドフォンで聞く場合には、突然音が経ち上がるように聞こえる場合などがある。他の例としては、あるメーカのテレビの発色を基準として制作された動画が、他のメーカのテレビで再生すると、肌色が赤味がかって見えてしまう場合などがある。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、これらの課題に鑑みてなされたものであり、個々の再生環境に応じてデータを制作することなく、再生装置の特性やデータの制作者の意図を反映したデータの出力を得る技術を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題の少なくとも一部を解決するために、本発明は、第１の構成として、時間経過を伴う電気信号を符号化したデータを入力するデータ入力部と、前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するパラメータ入力部と、前記データと前記出力制御パラメータとを備えるファイルを生成するファイル生成部と、を備えるファイル生成装置を採用した。
【０００６】
このような構成によれば、データの時間依存の出力態様を制御可能なファイルを生成することができる。例えば、時間経過に応じて連続的または段階的に出力態様を変化させる制御や、あるまとまった時間単位で出力態様を変化させる制御等が可能となる。時間経過を伴う電気信号を符号化したデータとは、例えば、音声データや動画データとすることができる。なお、本発明および後述の種々の発明において、符号化とは、デジタル化や圧縮化、暗号化等の意味を表し、復号とは、前記各々に対応し、アナログ化や伸張化、平文化等の意味を表す。
【０００７】
また、上記構成において、前記ファイル生成部は、前記データの少なくとも一部と前記出力制御パラメータとを備えるフレームデータを複数配することによりファイルを生成することとしてもよい。このような態様とすれば、フレームデータ毎に詳細な出力制御を行うことができる。フレームデータは、例えば、前記データを音声データとした場合、任意の単位時間で音声データを断片化し、その断片毎に出力制御パラメータを含むヘッダを付加したデータをフレームデータとすることができる。また、前記データを動画データとした場合は、１／３０秒毎に表示される画像毎に出力制御パラメータを含むヘッダを付加することによりフレームデータとすることができる。このようなフレームデータを複数配することにより、１つのファイルとなる。ファイル内の各フレームデータの大きさは、固定長でもよいし、可変長でもよい。
【０００８】
また、上記構成において、前記出力制御パラメータは、前記データのフェードインまたはフェードアウト出力を制御することとしてもよい。このような態様とすれば、出力装置はフェードインやフェードアウト処理が可能となる。例えば、音声データの場合、音量を制御することによりフェードイン・フェードアウト処理が可能となり、動画データの場合は、明るさや表示領域のサイズを制御することにより可能となる。
【０００９】
また、上記構成において、前記出力制御パラメータは、前記データの出力速度変更時に出力される部分を特定することとしてもよい。このような態様とすれば、出力装置における早送り出力等の処理において、出力するデータの部分を特定することができる。例えば、出力変化の緩やかなデータ部では、次に出力するデータまでの間隔を長くし、出力変化が激しいデータ部については、短い間隔で出力する等といった制御が可能となる。このような部分の特定は、時間で指定してもよいし、出力するフレームを指定してもよい。
【００１０】
また、上記構成において、前記出力制御パラメータは、所定のタイミングで出力態様の切り替えを制御することとしてもよい。出力態様の切り替えは、出力に関し、知覚可能ないずれかのパラメータを変更することで実現することが好ましい。このような態様とすれば、例えば、音楽データにおいて、曲の転調時や第一楽章終了時等に音量や音色、あるいは施すエフェクトを変化させたり、動画データにおいて、シーンが変わった時等に色調や明度等を変化させるなどといった出力態様の切り替えを行うことができる。切り替えは１箇所に限られることはなく、複数箇所で可能である。
【００１１】
また、上記構成や種々の態様において、前記パラメータ入力部は、前記出力装置における出力環境に応じた出力制御パラメータを入力するファイル生成装置とすることができる。このような態様とすれば、出力装置における出力環境に応じた出力制御が可能となる。例えば、データを音声データとした場合、出力装置のダイナミックレンジに応じてフェードイン処理の初期音量を設定したり、その周波数特性に応じて高音の出力を弱めたイコライジング処理を設定すること等ができる。また、リビングルームやコンサートホール等の、出力装置が設置された周りの環境に応じてパラメータを設定することとしてもよい。データを動画データとした場合は、ＣＲＴ、テレビ、プロジェクタ、プラズマディスプレイ等の動画を表示する装置の特性に応じて、色調やフェードイン処理の初期明度等を設定することができる。
【００１２】
また、上記構成や種々の態様において、前記出力制御パラメータは、前記データの一部を省略して出力するためのデータとしてもよい。例えば、音声データや動画データの全フレームのうち、一部のフレームを間引くことにより、一部の時間範囲のみを再生する制御パラメータが相当する。かかるパラメータを用いることにより、例えば、「ダイジェストモード」が指定された場合には、音声データのサビにあたる部分、または動画データのクライマックスにあたる部分など、特定の場面のみを簡易に再生させることが可能となる。
上記パラメータは、音声データや動画データの各フレームの情報を削減するためのデータとしてもよい。例えば、試聴が指定されている場合には、音声データの高音域、低音域を削除し、音質を若干落とした状態で再生させたり、画像データの解像度を粗くして画質を落とした状態で再生させたりすることができる。音声データや動画データがネットワークを介して配信される場合、試聴が指定されている条件下では、満足のいく音質、画質での再生がされないため、音声データや動画データの適正な入手をユーザに促すことができる。
【００１３】
また、上記パラメータは、動画データの一部分をトリミングする情報としてもよい。こうすれば、例えば、解像度の粗い表示装置で動画を再生する場合でも、人の表情や文字など、重要な部分が視認可能な状態で表示させることができる。
【００１４】
上記構成や種々の態様において、前記データが複数のチャンネルを含んでいる場合には、前記出力制御パラメータは、各チャンネル単位で出力態様を制御するデータとしてもよい。こうすることにより、例えば、データに含まれる全チャンネルを再生することができない出力装置を用いる場合でも、十分な音響効果または画像効果が得られるよう、再生されるチャンネルを制御することができる。例えば、低音を強調すべき場面においては、低音チャンネルを優先的に使用し、その他の場面では、低音チャンネルを抑えることができる。
【００１５】
本発明は、第２の構成として、時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するファイル入力部と、復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する出力制御部と、を備えるデータ出力装置を採用した。
【００１６】
このような構成とすれば、出力制御パラメータを参照して、データの出力態様を制御することができる。時間経過を伴う電気信号を符号化したデータとは、既説のように、音声データや動画データとすることができる。データの出力態様は、本発明の第１の構成で説明した種々の出力制御パラメータに基づく制御が可能である。
【００１７】
本発明は、第３の構成として、次のような装置を採用可能である。すなわち、音声ファイルを生成する音声ファイル生成装置であって、音声データを入力する音声データ入力部と前記音声データを再生する再生装置に応じて該音声データの再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する音声ファイル生成部と、を備えることを要旨とする。
【００１８】
このような構成とすれば、再生装置に応じて再生態様を制御することができ、音声ファイル生成者の意図に即した再生を実現させることができる。
【００１９】
なお、上記構成において、前記再生制御パラメータは、前記音声データの少なくとも一部の周波数成分を制御することとしてもよい。このような態様であれば、音声データに対し、種々のイコライジング処理が可能となる。例えば、低城の周波数を強調したり、高域の周波数を強調したりすることができる。
【００２０】
また、上記構成において、前記再生制御パラメータは、前記音声データ再生時の音量を制御することとしてもよい。このような態様であれば、柔軟に音量の制御が可能となる。
【００２１】
また、上記構成において、前記再生制御パラメータは、前記音声データの少なくとも一部の繰り返し再生を制御することとしてもよい。かかる構成によれば、例えば、一連の音声データのうち、繰り返して演奏等される部分については、１回の演奏に対応する音声データのみを記録し、再生制御パラメータによって、この部分の繰り返し数、繰り返し時の音量、音色、エフェクトなどの少なくとも一部を制御する態様が考えられる。このような態様であれば、従来繰り返す分だけ記録していたデータが、１回の記録だけで済むこととなる。そのため、データ容量の削減が可能となる。
【００２２】
本発明の第４の構成は、音声データを再生する音声データ再生装置であって、音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する音声ファイル入力部と、前記再生制御パラメータを参照して、前記音声データの再生態様を制御する再生制御部と、を備える音声データ再生装置を採用した。
【００２３】
このような構成とすれば、音声データの再生態様を、再生制御パラメータを参照することにより制御することができる。再生態様は、本発明の第３の構成で説明した各種再生制御パラメータに基づき制御可能である。
【００２４】
本発明の第５の構成は、動画ファイルを生成する動画ファイル生成装置であって、動画データを入力する動画データ入力部と前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する動画ファイル生成部と、を備える動画ファイル生成装置を採用した。
【００２５】
このような構成とすれば、動画データの出力態様を制御可能なファイルを生成可能となる。
【００２６】
なお、上記構成において、前記再生制御パラメータは、前記動画データの少なくとも一部の繰り返し再生を制御することとしてもよい。このような態様であれば、従来繰り返す分だけ記録していた動画データが、１回の記録だけで済むこととなる。そのため、データ容量の削減が可能となる。
【００２７】
また、上記構成において、前記動画データには、動画に連動して表示される文字列データが含まれており、前記再生制御パラメータは、該文字列データの表示位置、大きさ、色の少なくとも一つを制御することとしてもよい。このような態様であれば、例えば動画データとともに記録した文字列データの位置や大きさ、色などを時間経過に応じて制御することが可能となる。また、時間経過に応じた制御以外にも、再生装置やその環境の特性に依存して制御してもよい。
【００２８】
本発明の第６の構成は、動画データを再生する動画データ再生装置であって、動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する動画ファイル入力部と、前記再生制御パラメータを参照して、前記動画データの再生態様を制御する再生制御部と、を備える動画データ再生装置を採用した。
このような構成であれば、再生制御パラメータを参照することにより、動画データの再生態様を制御可能となる。再生態様は、本発明の第５の構成で説明した各種再生制御パラメータに基づき制御可能である。
【００２９】
本発明は、上述のように、ファイル生成装置、データ出力装置、音声ファイル生成装置、音声データ再生装置、動画ファイル生成装置、動画データ再生装置として構成可能であるが、ファイル生成方法、データ出力方法、音声ファイル生成方法、音声データ再生方法、動画ファイル生成方法、動画データ再生方法として構成することもできる。
【００３０】
また、本発明は、上述の各種装置をコンピュータを用いて構成した場合に、その機能を実現するプログラムとして構成してもよい。プログラムとして構成した場合は、フレキシブルディスクやＣＤ−ＲＯＭ、ＤＶＤ、ＭＯ、ＩＣカード、ＲＯＭカートリッジ、ハードディスク等のコンピュータ読取可能な記録媒体に記録することができる。
【発明を実施するための最良の形態】
【００３１】
以下、本発明の実施の形態について図面を参照しつつ次の順序で説明する。
Ａ．第１実施例
（Ａ１）音声ファイル生成装置：
（Ａ２）音声ファイル生成処理：
（Ａ３）音声ファイル構造：
（Ａ４）音声再生装置：
（Ａ５）音声再生処理：
（Ａ６）再生制御：
Ｂ．第２実施例
（Ｂ１）動画ファイル生成装置：
（Ｂ２）動画ファイル生成処理：
（Ｂ３）動画ファイル構造：
（Ｂ４）動画再生装置：
（Ｂ５）動画再生処理：
（Ｂ６）再生制御
【００３２】
Ａ．第１実施例：
（Ａ１）音声ファイル生成装置：
図１は、音声ファイル生成装置の概略構成図である。音声ファイル生成装置１００は、時間経過を伴う電気信号である音声信号を符号化して生成した音声データと、各種パラメータを記録したヘッダとを含む音声ファイルを生成する。音声ファイル生成装置１００は、音声入力部１０１、Ａ／Ｄ変換部１０２、エンコーダ部１０３、パラメータ入力部１０４、ヘッダ生成部１０５、ファイル生成部１０６等により構成されている。
【００３３】
音声入力部１０１は、マイク等を用いることができ、音声を電気信号に変換して音声信号とする。Ａ／Ｄ変換部１０２は、アナログ信号である音声信号を、指定されたサンプリングレートや量子化ビット数でデジタル信号に変換する。エンコーダ部１０３は、このようにデジタル化した音声を、指定されたエンコード形式で符号化して音声データを生成する。エンコード形式は、ｍｐ３形式やｐｃｍ形式等を用いることができる。パラメータ入力部１０４は、上記サンプリングレートや量子化ビット数、エンコード方式の入力を行う。パラメータ入力部１０４は、また、後述する音声再生装置で参照される再生制御パラメータをユーザから入力する。ヘッダ生成部１０５は、パラメータ入力部１０４より入力した各種パラメータを記録したヘッダを生成する。ファイル生成部１０６は、上記生成した音声データとヘッダとを含む音声ファイルを生成する。生成した音声ファイルは記録媒体１０７に格納される。
【００３４】
ｍｐ３形式とは、音声を、サブバンド分解、心理聴覚評価、変形離散コサイン変換（ＭＤＣＴ）、量子化、ハフマン符号化等の各種処理を経ることにより圧縮する形式である。また、ｐｃｍ形式とは、音声を任意のサンプリングレートと量子化ビット数で単純にデジタル化した形式である。両者とも周知の技術であるため、本実施例では詳しい説明を省略する。
【００３５】
（Ａ２）音声ファイル生成処理：
図２は、音声ファイル生成処理のフローチャートである。音声ファイル生成装置１００は、まず、音声をデジタル信号としてデータ化するために、サンプリングレートや量子化ビット数、およびエンコード形式等の指定をユーザからパラメータ入力部１０４を介して入力する（ステップＳ１００）。音声ファイル生成装置１００は、これらの指定に基づき、音声入力部１０１とＡ／Ｄ変換部１０２とエンコーダ部１０３とを用いて音声を入力し、音声データを生成する（ステップＳ１０１）。次に、音声ファイル生成装置１００は、再生制御パラメータを、パラメータ入力部１０４を介しユーザから入力する（ステップＳ１０２）。音声ファイル生成装置１００は、入力された再生制御パラメータや、上記入力されたサンプリングレートや量子化ビット数、エンコード形式を記録したヘッダを生成する（ステップＳ１０３）。最後に、音声ファイル生成装置１００は、ファイル生成部１０６を用いてステップＳ１０１で生成した音声データと、ステップＳ１０３で生成したヘッダとを含む音声ファイルを生成して処理を終了する（ステップＳ１０４）。
【００３６】
（Ａ３）音声ファイル構造：
図３は、上記音声ファイル生成処理によって生成された音声ファイルの概略構造図である。音声ファイルは、ヘッダを格納するヘッダ部と、音声データを格納する音声データ格納部とにより構成されている。音声ファイルは、このように、ヘッダ１つと音声データ１つとにより構成される態様のほか、図４で示すように、ヘッダと音声データとを含むフレームデータを複数連続して配する態様とすることもできる。このような態様であれば、フレームデータ単位で各種パラメータの設定を行うことができるため、音声再生時の木目細かな再生制御を行うことができる。
【００３７】
図５は、前記ヘッダの詳細な構造図である。ヘッダには、図示するように、対応する音声データのサンプリングレート、量子化ビット数、エンコード形式が記録されている。後述する音声再生装置は、これらのパラメータを参照することにより、音声データの復号を行うことができる。
【００３８】
ヘッダには、その他に、再生制御パラメータが記録されている。再生制御パラメータは、後述する音声再生装置の音声再生時に参照されることにより、各種再生制御が可能となる。図示した「フェードイン」や「フェードアウト」等の各種パラメータによる再生制御の説明は後述する。
【００３９】
（Ａ４）音声再生装置：
図６は、音声再生装置の概略構成図である。本実施例における音声再生装置２００は、音声ファイル生成装置１００によって生成した音声ファイルを用いて音声を再生する。音声再生装置２００は、音声ファイル入力部２０１、ヘッダ解析部２０３、デコーダ部２０４、ＤＳＰ部２０５、Ｄ／Ａ変換部２０６、音声出力部２０７等により構成される。
音声ファイル入力部２０１は、記録媒体２０２から音声ファイルを入力する。ヘッダ解析部２０３は、入力した音声ファイルからヘッダを抽出し解析する。デコーダ部２０４は、音声ファイルから音声データを入力し、ヘッダ解析部２０３により解析されたエンコード形式、サンプリングレート、量子化ビット数に基づき音声データを復号する。ＤＳＰ部２０５は、ヘッダ解析部２０３により解析された再生制御パラメータに基づき、復号した音声データに対し再生制御を行う。Ｄ／Ａ変換部２０６は、デジタル信号である音声データをアナログ信号に変換する。音声出力部２０７は、アンプやスピーカ若しくはヘッドフォン等により構成されており、前記アナログ信号に基づき音声を出力する。
【００４０】
（Ａ５）音声再生処理：
図７は、音声再生処理のフローチャートである。まず、音声再生装置２００は、記録媒体２０２から音声ファイルを入力する（ステップＳ２００）。音声ファイルにはヘッダと音声データとが格納されている。そこで、音声再生装置２００は、まず、ヘッダ解析部によりヘッダを解析し、音声データのサンプリングレート、量子化ビット数、エンコード形式、再生制御パラメータ等のパラメータを獲得する（ステップＳ２０１）。音声再生装置２００は、獲得したこれらのパラメータのうち、サンプリングレート、量子化ビット数、エンコード形式等に基づき、デコーダ部を用いて音声データを復号する（ステップＳ２０２）。次に、音声再生装置２００は、ステップＳ２０１により獲得した再生制御パラメータに基づき、復号した音声データにＤＳＰ部を用いて再生制御を行う（ステップＳ２０３）。音声再生装置２００は、再生制御を行った音声データを、Ｄ／Ａ変換部２０６によりアナログ信号に変換し、音声出力部により出力する（ステップＳ２０４）。
【００４１】
なお、本実施例では、ＤＳＰ部２０５において復号された音声データを出力する際にＤ／Ａ変換を行うこととしたが、例えば、ＰＷＭ（ｐｕｌｓｅ ｗｉｄｔｈ ｍｏｄｕｌａｔｉｏｎ）方式の音声データであれば、Ｄ／Ａ変換を用いることなくアナログフィルタを介して音声出力を行うことも可能である。
【００４２】
（Ａ６）再生制御：
次に、再生制御パラメータに基づく音声データの再生制御について再び図５を用いて説明する。図５の再生制御パラメータには、フェードイン処理、フェードアウト処理、イコライジング処理および繰り返し再生処理、ダイジェスト情報、チャンネル制御が設定されている。音声再生装置は、これらのパラメータの指示に従い音声の再生を制御する。
【００４３】
「フェードイン」パラメータには、（ａ）通常、（ｂ）ラジカセ、（ｃ）ヘッドフォンステレオ用のプロファイルが設定されている。そのため、音声再生装置２００は、自身の特性に最適なプロファイルを選択し、音声データにフェードイン処理を施す。図中のグラフは、横軸がフェードイン処理を行う時間を表し、縦軸は、元の音声データの振幅に乗ずる係数を表す。フェードイン処理を行うデータの範囲は、時間によって設定してもよいし、フレームデータの範囲を指定することにより設定してもよい。また、パラメータは、プロファイルではなく、演算式を直接パラメータ中に定義することにより設定してもよい。演算式が音声再生装置２００によって予め定義されている場合は、演算式に用いる所定の係数をパラメータ中に設定することとしてもよい。
【００４４】
「フェードアウト」パラメータには、「フレームデータ１〜３」と設定されている。このような設定方法は、複数のフレームデータにより構成されている音声ファイルを用いて音声を再生する際に利用可能であり、フレームデータ１からフレームデータ３にかけて徐々に音量を小さくする処理を意味する。無論、フェードイン処理と同様に、プロファイルや演算式、係数による指定も行うことができる。
【００４５】
「イコライジング」パラメータには、フェードインパラメータと同じく３種類のプロファイルが設定されている。音声再生装置２００は、自身の特性に最適なプロファイルを選択してイコライジング処理を施す。図中のグラフは、横軸が音声の周波数帯域、縦軸が強調度合いを表す。なお、この場合も、プロファイルではなく、演算式や係数による指定を行うことができる。例えば、ｐｃｍ形式のような時間領域の信号に対して特定の周波数領域の信号を強調したり逆に弱めたりする場合、一般にデジタルフィルタ処理を施すが、このデジタルフィルタの演算式、もしくはフィルタの係数をパラメータ中に定義することによって、周波数領域における変調をかけることが可能となる。
【００４６】
「繰り返し再生」パラメータには、繰り返し再生を行う時間と回数が指定されている。図によれば、音声データ中の３６０秒から３７０秒の範囲にある音声データを３回繰り返して再生する処理を行うこととなる。指定方法は、時間による指定以外にも、繰り返すフレームデータの範囲を設定することにより可能である。
【００４７】
「ダイジェスト情報」は、ダイジェストモードでの再生が指示されている時に、再生されるべきフレームを特定するデータである。本実施例では、フレームに対して、１〜５の範囲で、ダイジェストレベルが付与されているものとした。ダイジェストレベル「１」は重要度の高いフレームを意味し、数値が大きくなる程、重要度が低下する。「レベル２」というダイジェスト情報は、ダイジェストモードにおいては、レベル１または２が付されたフレームを再生し、レベル３〜５のフレームは再生を省略することを意味する。各フレームに付したダイジェストレベルによって、ダイジェストモードでの再生時に、再生される個所を容易に制御することができる。例えば、音声データの場合には、ダイジェストモードでサビの部分を再生することができ、動画データの場合には、ダイジェストモードでクライマックスの場面を再生することができる。また、ダイジェスト情報を変更することにより、各フレームの情報を変更するまでなく、ダイジェストモードで再生される範囲を制御することができる。
【００４８】
ダイジェスト情報としては、このように再生範囲を制御する情報の他、動画データについて各フレームのトリミングを制御する情報を用いても良い。こうすることにより、例えば、解像度が低い表示装置で動画データを再生する場合には、画像をトリミングして表示することが可能となり、人間の表情や文字など、重要な部分を視認しやすい状態で表示することができる。
【００４９】
「チャンネル情報」は、データが多チャンネルの場合に、出力機器に応じて、各チャンネルの再生を制御するデータである。図の例では、音声データは、左チャンネル（Ｌ）、右チャンネル（Ｒ）、センタチャンネル（Ｃ）、左サラウンド（ＬＳ）、右サラウンド（ＲＳ）、低域強調チャンネル（ＬＦＥ）を有している。この音声データを、１チャンネルの出力機器で再生する場合には、図示する通り、Ｌチャンネルを０．５、Ｃチャンネルを０．３、ＬＦＥチャンネルを０．２の割合でミキシングして出力する。２チャンネルの出力機器で再生する場合には、左チャンネル（Ｌ）からは、Ｌチャンネルを０．５、Ｃチャンネルを０．１、ＬＳチャンネルを０．４でミキシングして出力する。右チャンネル（Ｒ）からは、Ｃチャンネルを０．２、Ｒチャンネルを０．５、ＬＳチャンネルを０．３でミキシングして出力する。このようにチャンネル単位での制御を行うことにより、出力機器のチャンネル数に応じて、音声データ作成時の意図を反映した出力が可能となる。本実施例では、ヘッダ部分にチャンネル制御を組み込んでいるが、各フレームに組み込んでも良い。こうすれば、音声データのうち、部分ごとに、強調すべきチャンネルを切り替えることができ、音声データ作成時の意図をより反映した出力が可能となる。
【００５０】
上述のイコライジング処理は、例えば、ｍｐ３形式で符号化された音声データであれば、ハフマン復号、逆量子化等の処理を経て、データを周波数領域の信号とした際に行うことができる。この場合、周波数領域において各周波数ごとに重み係数を乗じる等すればよい。また、「フェードアウト」「フェードイン」「繰り返し再生」の各種処理は、上記の処理後、逆ＭＤＣＴ変換等を行い、データを時間領域の信号とした際に行うことができる。時間領域では、各データは音の振幅をデジタル化したものに相当するため、重み係数を乗じるなどして、振幅を調整することにより「フェードイン」「フェードアウト」などを実現できる。
【００５１】
上述した再生制御パラメータを用いることにより、音声再生装置は、自身の特性を考慮してフェードインやフェードアウト処理を施すことができる。例えば、図５のフェードインパラメータで設定されているヘッドフォンステレオ用のプロファイルは、フェードイン開始の音量が大きく設定されているため、ダイナミックレンジの狭いヘッドフォンで再生する際に効果的である、また、イコライジングパラメータで設定されているヘッドフォンステレオ用のプロファイルを用いれば、高域の周波数成分を抑えた出力が可能のため、電車内等で使用する場合に耳障りな高音の音漏れを防ぐことができる。
【００５２】
その他にも、音量を制御するパラメータを付加することもできる。ヘッダ１つにより構成される音声ファイルであれば、時間を指定して、ある時間からある時間までは音量を小さくし、ある時間を超えれば音量を大きくするといった制御が可能である。フレームデータにより構成される音声ファイルであれば、フレーム毎に音量を詳細に設定することができる。また、音声再生装置が、リバーブ機能やコンプレッサー機能、あるいはピッチシフト機能等の各種エフェクト機能を備えていれば、これらの機能を利用可能とするパラメータを付加してもよい。
【００５３】
上述のフェードインやフェードアウト、イコライジング等の各種処理は、音声再生装置の特性にかかわらず制御することも可能である。この場合、音声データの作成者が意図した積極的な効果を反映させることができる。
【００５４】
Ｂ．第２実施例：
（Ｂ１）動画ファイル生成装置：
次に、時間経過を伴う電気信号として、映像信号を扱う動画ファイル生成装置について説明する。図８は、動画ファイル生成装置の概略構成図である。動画ファイル生成装置３００は、映像入力部３０１、Ａ／Ｄ変換部３０２、エンコーダ部３０３、パラメータ入力部３０４、ヘッダ生成部３０５、ファイル生成部３０６等により構成されている。
映像入力部３０１は、ＣＣＤカメラ等を用いることができ、映像を電気信号に変換する。Ａ／Ｄ変換部３０２は、電気信号として入力した映像を、デジタル信号に変換する。エンコーダ部３０３は、指定されたエンコード形式で前記デジタル信号を符号化して動画データを生成する。エンコード形式は、ＤＶ形式、ＭＰＥＧ形式等を用いることができる。パラメータ入力部３０Ａは、上記エンコード形式の指定のほか、後述する動画再生装置で参照されるユーザ所望の再生制御パラメータを入力する。ヘッダ生成部３０５は、パラメータ入力部３０４より入力した各種パラメータを記録したヘッダを生成する。ファイル生成部３０６は、上記生成した動画データとヘッダとを含む動画ファイルを生成する。生成した動画ファイルは、記録媒体３０７に格納される。
【００５５】
（Ｂ２）動画ファイル生成処理：
図９は、動画ファイル生成処理のフローチャートである。動画ファイル生成装置３００は、まず、入力する映像を符号化するためのエンコード形式を、パラメータ入力部３０４を介しユーザから入力する（ステップＳ３００）。動画ファイル生成装置３００は、入力されたエンコード形式に基づき、映像入力部３０１と、Ａ／Ｄ変換部３０２と、エンコーダ部３０３とを用いて映像を入力し、動画データを生成する（ステップＳ３０１）。次に、動画ファイル生成装置３００は、パラメータ入力部３０４を介し、ユーザから再生制御パラメータを入力する（ステップＳ３０２）。動画ファイル生成装置３００は、入力された再生制御パラメータや、上記エンコード形式等を記録したヘッダを生成する（ステップＳ３０３）。最後に、動画ファイル生成装置３００は、ファイル生成部３０６を用いてステップＳ３０１で生成した動画データと、ステップＳ３０３で生成したヘッダとを含む動画ファイルを生成して処理を終了する（ステップＳ３０４）。
【００５６】
（Ｂ３）動画ファイル構造：
上記動画ファイル生成処理によって生成した動画ファイルは、先に説明した音声ファイルの構造と同様の構造を採ることができる。すなわち、図３で示した音声ファイル構造において、ヘッダ部に、上記動画ファイル生成処理のステップＳ３０３で生成したヘッダを格納し、音声データ格納部を動画データ格納部として、上記ステップＳ３０１で生成した動画データを格納すればよい。また、動画ファイルにおいても、フレームデータを用いた構成を採ることができる。この場合においても、図４で示した音声ファイル構造と同様の構造で実現可能である。
【００５７】
図１０は、動画ファイルのヘッダの詳細な構造図である。ヘッダには、図示するように、動画データのエンコード形式が記録されている。後述する動画再生装置は、このパラメータを参照することにより動画データの復号を行うことができる。本図によれば、「ＭＰＥＧ４」形式でエンコードされていることがわかる。
【００５８】
また、ヘッダには、再生制御パラメータが記録されている。再生制御パラメータは、後述する動画再生装置において参照されることにより、各種再生制御が可能となる。図によれば、画質補正、字幕補正、繰り返し再生に関するパラメータが設定されている。これらのパラメータを用いた再生制御の説明については後述する。
【００５９】
（Ｂ４）動画再生装置：
図１１は、動画再生装置の概略構成図である。本実施例における動画再生装置４００は、動画ファイル生成装置３００によって生成した動画ファイルを用いて動画を再生する。動画再生装置４００は、動画ファイル入力部４０１、ヘッダ解析部４０３、デコーダ部４０４、ＤＳＰ部４０５、Ｄ／Ａ変換部４０６、映像出力部４０７等により構成される。
【００６０】
動画ファイル入力部４０１は、記録媒体４０２から動画ファイルを入力する。ヘッダ解析部４０３は、入力した動画ファイルからヘッダを抽出し解析する。デコーダ部４０４は、ヘッダ解析部４０３により解析されたエンコード形式に基づき動画ファイル内の動画データを復号する。ＤＳＰ部４０５は、ヘッダ解析部４０３により解析された再生制御パラメータに基づき、復号した動画データに対し再生制御を行う。Ｄ／Ａ変換部４０６は、デジタル信号である動画データを、ＲＧＢ信号やコンポジット信号等のアナログ信号に変換する。映像出力部は、ＣＲＴやテレビ等により構成されており、前記アナログ信号に基づき映像を出力する。
【００６１】
（Ｂ５）動画再生処理：
図１２は、動画再生処理のフローチャートである。まず、動画再生装置４００は、記録媒体４０２から動画ファイルを入力する（ステップＳ４００。）動画ファイルにはヘッダと動画データとが格納されている。そこで、動画再生装置４００は、まず、ヘッダ解析部によりヘッダを解析し、動画データのエンコード形式を示すパラメータや、再生制御パラメータを獲得する（ステップＳ４０１）。動画再生装置４００は、獲得したエンコード形式を示すパラメータに基づき、動画データを復号する（ステップＳ４０２）。次に、動画再生装置４００は、ステップＳ４０１により獲得した再生制御パラメータに基づき、復号した動画データにＤＳＰ部４０５を用いて再生制御を行う（ステップＳ４０３）。動画再生装置４００は、再生制御を行った動画データを、Ｄ／Ａ変換部４０６によりアナログ信号に変換し、映像出力部により出力する（ステップＳ４０４）。
【００６２】
（Ｂ６）再生制御：
次に、動画ファイルのヘッダに記録された再生制御パラメータに基づく動画データの再生制御について図１０および図１３を用いて説明する。図１０の再生制御パラメータには、画質補正処理、字幕補正処理、繰り返し再生処理を指定するパラメータが記録されており、動画再生装置は、これらのパラメータに従い動画データの出力を制御する。
【００６３】
「画質補正」パラメータには、動画再生装置のメーカ毎にシャープネス、ＲＧＢ補正、ガンマ値を設定するプロファイルが記録されている。図によれば、例えば、Ａ社の装置に対しては、元の動画に対してシャープネスを「＋２」だけ強め、ＲＧＢ（赤、緑、青）の内、Ｒ（赤）を「＋２」だけ強調し、ガンマ値を１．８に補正して再生する設定となっている。本実施例において、シャープネスとＲＧＢ補正の値は、元の動画データに対する強調度合いを１０段階で示したものであり、「＋２」は「＋２０％」の意である。一方、ガンマ値は絶対値を表す。動画再生装置４００は、これらのプロファイルの中から、自身の製造元を表すプロファイルを選択し、ＤＳＰ部４０５を用いて動画データに対し画質補正を施す。
【００６４】
「字幕補正」パラメータには、ＣＲＴやテレビ等により構成された映像出力部４０７のサイズに応じたプロファイルが設定されている。図によれば、例えば２２インチから３２インチまでの映像出力部４０７に対しては、元の文字よりサイズを１ピクセルだけ小さくした字幕を、画面下方に灰色で表示する設定となっている。無論、字幕を表示するためには、動画ファイル内に、字幕を表示するための文字列データが独立して格納されていなければならない。なお、ここでは「字幕」という表現を用いたが、テロップ等と同義の意味であり、文字列を表示する態様であればよい。動画再生装置４００は、自身の映像出力部４０７のサイズに対応したプロファイルを選択し、ＤＳＰ部４０５を用いて文字を修正し、字幕を表示する。
【００６５】
「繰り返し再生」パラメータには、繰り返し再生を行う動画データの部分が設定されている。図によれば、動画データの開始から３６０秒経た後、３７０秒までの１０秒間に記録されている動画データを３回再生する設定がされている。動画再生装置４００は、この設定により、繰り返し再生を行う。なお、繰り返し再生は、時間による範囲の指定のほかにも、フレームデータの範囲を指定することに行ってもよい。また、繰り返し再生を行うデータの範囲は、連続的な範囲とする必要はない。例えば、特定のシーンを、動画の冒頭と末尾などで使用する態様も含まれる。この場合には、繰り返し数に代えて、そのシーンを挿入する時刻を特定する情報をパラメータとして用いることができる。
【００６６】
再生制御パラメータには、早送り再生に関するパラメータを設定することもできる。図１３は、早送り再生に関する再生制御パラメータを設定した動画ファイルの概略図である。図示するように、動画ファイルは、フレームデータを連続して複数配することにより構成されており、一部のフレームデータのヘッダには、パラメータとして、「ｘ２」あるいは「ｘ３」というフラグが設定されている。この例では、「ｘ２」フラグは、２フレーム毎に設定されており、「ｘ３」フラグは、３フレーム毎に設定されている。動画再生装置４００は、ユーザから２倍速再生あるいは３倍速再生の指示があった場合に、このヘッダを解析し、２倍速再生であれば「ｘ２」フラグが存在するヘッダに対応したＡ、Ｃ、Ｅ、Ｇ、Ｉの動画データを再生し、３倍速再生であれば、「ｘ３」フラグの存在するヘッダに対応したＡ、Ｄ、Ｇ、Ｊの動画データを再生する。
【００６７】
なお、フラグは必ずしも等間隔に設定する必要はない。例えば、ｎ倍速再生の場合は、全体として再生するフレーム数が１／ｎ倍となるようにフラグを設定すればよい。このような構成とすれば、各シーンの重み付けを考慮した再生速度の制御が可能となる。例えば、動きの速いスポーツ中継等の動画データが記録された部分は、スキップするフレームデータを少なくすることにより、ゆっくりとした速度で早送り再生することができ、動きの遅い風景を撮影したような部分あれば、スキップするフレームデータを多くすることにより、早送り再生をより早く行うことができる。
【００６８】
また、動画の出力態様は、動画のシーンに応じて制御を切り替え可能であれば好適である。例えば、動きの激しいシーンであれば、シャープネスを強めることにより、はっきりと映像を映し出すことができる。また、夕日のシーンであれば、赤色を少し強調することにより、夕日をより効果的に映し出すことができる。
【００６９】
なお、再生制御にともなう上述の各種処理は、動画再生装置４００の特性にかかわらず制御可能であることは無論である。
【００７０】
以上、本発明の実施例を、第１実施例および第２実施例に基づき説明したが、本発明はこれらの実施例に限定されず、その趣旨を逸脱しない範囲で種々の構成を採ることができる。上述した各種処理はソフトウェアで実現してもよいし、ハードウェア的に実現するものとしてもよい。また、上述した実施例における音声ファイルや動画ファイルが記録される記録媒体は、フレキシブルディスクやＣＤ−ＲＯＭ／Ｒ／ＲＷ、ＤＶＤ、ＤＶＤ−Ｒ／ＲＷ／ＲＡＭ、ＭＯ、メモリカード、ハードディスク、ビデオテープ、音楽テープ、ＭＤ等が利用可能である。音声ファイルや動画ファイルは、記録媒体によるデータの受け渡し以外にも、ネットワークや無線通信によって受け渡しを行ってもよい。
【００７１】
産業上の利用可能性
本発明は、時間経過を伴う電気信号を符号化したデータの出力に利用可能である。
【図面の簡単な説明】
【００７２】
【図１】音声ファイル生成装置の概略構成図である。
【図２】音声ファイル生成処理のフローチャートである。
【図３】音声ファイルの概略構造図である。
【図４】音声ファイルの他の態様を示す概略構造図である。
【図５】音声ファイルに格納されたヘッダの詳細な構造図である。
【図６】音声再生装置の概略構成図である。
【図７】音声再生処理のフローチャートである。
【図８】動画ファイル生成装置の概略構成図である。
【図９】動画ファイル生成処理のフローチャートである。
【図１０】動画ファイルに格納されたヘッダの詳細な構造図である。
【図１１】動画再生装置の概略構成図である。
【図１２】動画再生処理のフローチャートである。
【図１３】早送り再生パラメータを設定した動画ファイルの概略構造図である。
【特許請求の範囲】
【請求項１】
時間経過を伴う電気信号を符号化したデータを入力するデータ入力部と、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するパラメータ入力部と、
前記データと前記出力制御パラメータとを備えるファイルを生成するファイル生成部と、
を備えるファイル生成装置。
【請求項２】
請求項１に記載のファイル生成装置であって、
前記ファイル生成部は、前記データの少なくとも一部と前記出力制御パラメータとを備えるフレームデータを複数配することによりファイルを生成するファイル生成装置。
【請求項３】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、前記データのフェードインまたはフェードアウト出力を制御するファイル生成装置。
【請求項４】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、前記データの出力速度変更時に出力される部分を特定するファイル生成装置。
【請求項５】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、所定のタイミングで出力態様の切り替えを制御するファイル生成装置。
【請求項６】
請求項１のいずれかに記載のファイル生成装置であって、
前記パラメータ入力部は、前記出力装置における出力環境に応じた出力制御パラメータを入力するファイル生成装置。
【請求項７】
請求項１記載のファイル生成装置であって、
前記出力制御パラメータは、所定条件下での出力時において、前記データの一部を省略して出力するためのデータであるファイル生成装置。
【請求項８】
請求項１記載のファイル生成装置であって、
前記データは複数のチャンネルを有しており、
前記出力制御パラメータは、各チャンネル単位で出力態様を制御するデータであるファイル生成装置。
【請求項９】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するファイル入力部と、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する出力制御部と、
を備えるデータ出力装置。
【請求項１０】
音声ファイルを生成する音声ファイル生成装置であって、
音声データを入力する音声データ入力部と
前記音声データを再生する再生装置に応じて該音声データの再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する音声ファイル生成部と、
を備える音声ファイル生成装置。
【請求項１１】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データの少なくとも一部の周波数成分を制御する音声ファイル生成装置。
【請求項１２】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データ再生時の音量を制御する音声ファイル生成装置。
【請求項１３】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データの少なくとも一部の繰り返し再生を制御する音声ファイル生成装置。
【請求項１４】
音声データを再生する音声データ再生装置であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する音声ファイル入力部と、
前記再生制御パラメータを参照して、前記音声データの再生態様を制御する再生制御部と、
を備える音声データ再生装置。
【請求項１５】
動画ファイルを生成する動画ファイル生成装置であって、
動画データを入力する動画データ入力部と
前記動画データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する動画ファイル生成部と、
を備える動画ファイル生成装置。
【請求項１６】
請求項１５に記載の動画ファイル生成装置であって、
前記再生制御パラメータは、前記動画データの少なくとも一部の繰り返し再生を制御する動画ファイル生成装置。
【請求項１７】
請求項１５に記載の動画ファイル生成装置であって、
前記動画データには、動画に連動して表示される文字列データが含まれており、
前記再生制御パラメータは、該文字列データの表示位置、大きさ、色の少なくとも一つを制御する動画ファイル生成装置
【請求項１８】
動画データを再生する動画データ再生装置であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する動画ファイル入力部と、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御する再生制御部と、
を備える動画データ再生装置。
【請求項１９】
時間経過を伴う電気信号を符号化したデータを入力するステップと、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するステップと、
前記データと前記出力制御パラメータとを備えるファイルを生成するステップと、
を備えるファイル生成方法。
【請求項２０】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するステップと、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御するステップと、
を備えるデータ出力方法。
【請求項２１】
音声ファイルを生成する音声ファイル生成方法であって、
音声データを入力するステップと、
前記音声データを再生する再生装置における該音声データの時間依存の再生態様を制御する再生制御パラメータを入力するステップと、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成するステップと、
を備える音声ファイル生成方法。
【請求項２２】
音声データを再生する音声データ再生方法であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力するステップと、
前記再生制御パラメータを参照して、前記音声データの再生態様を制御するステップと、
を備える音声データ再生方法。
【請求項２３】
動画ファイルを生成する動画ファイル生成方法であって、
動画データを入力するステップと、
前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するステップと、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成するステップと、
を備える動画ファイル生成方法。
【請求項２４】
動画データを再生する動画データ再生方法であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力するステップと、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御するステップと、
を備える動画データ再生方法。
【請求項２５】
時間経過を伴う電気信号を符号化したデータを入力する機能と、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力する機能と、
前記データと前記出力制御パラメータとを備えるファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２６】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力する機能と、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２７】
音声ファイルを生成するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
音声データを入力する機能と、
前記音声データを再生する再生装置における該音声データの時間依存の再生態様を制御する再生制御パラメータを入力する機能と、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２８】
音声データを再生するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する機能と、
前記再生制御パラメータを参照して前記音声データの再生態様を制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２９】
動画ファイルを生成するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
動画データを入力する機能と、
前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力する機能と、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項３０】
動画データを再生するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する機能と、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項１】
時間経過を伴う電気信号を符号化したデータを入力するデータ入力部と、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するパラメータ入力部と、
前記データと前記出力制御パラメータとを備えるファイルを生成するファイル生成部と、
を備えるファイル生成装置。
【請求項２】
請求項１に記載のファイル生成装置であって、
前記ファイル生成部は、前記データの少なくとも一部と前記出力制御パラメータとを備えるフレームデータを複数配することによりファイルを生成するファイル生成装置。
【請求項３】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、前記データのフェードインまたはフェードアウト出力を制御するファイル生成装置。
【請求項４】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、前記データの出力速度変更時に出力される部分を特定するファイル生成装置。
【請求項５】
請求項１に記載のファイル生成装置であって、
前記出力制御パラメータは、所定のタイミングで出力態様の切り替えを制御するファイル生成装置。
【請求項６】
請求項１のいずれかに記載のファイル生成装置であって、
前記パラメータ入力部は、前記出力装置における出力環境に応じた出力制御パラメータを入力するファイル生成装置。
【請求項７】
請求項１記載のファイル生成装置であって、
前記出力制御パラメータは、所定条件下での出力時において、前記データの一部を省略して出力するためのデータであるファイル生成装置。
【請求項８】
請求項１記載のファイル生成装置であって、
前記データは複数のチャンネルを有しており、
前記出力制御パラメータは、各チャンネル単位で出力態様を制御するデータであるファイル生成装置。
【請求項９】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するファイル入力部と、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する出力制御部と、
を備えるデータ出力装置。
【請求項１０】
音声ファイルを生成する音声ファイル生成装置であって、
音声データを入力する音声データ入力部と
前記音声データを再生する再生装置に応じて該音声データの再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する音声ファイル生成部と、
を備える音声ファイル生成装置。
【請求項１１】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データの少なくとも一部の周波数成分を制御する音声ファイル生成装置。
【請求項１２】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データ再生時の音量を制御する音声ファイル生成装置。
【請求項１３】
請求項１０に記載の音声ファイル生成装置であって、
前記再生制御パラメータは、前記音声データの少なくとも一部の繰り返し再生を制御する音声ファイル生成装置。
【請求項１４】
音声データを再生する音声データ再生装置であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する音声ファイル入力部と、
前記再生制御パラメータを参照して、前記音声データの再生態様を制御する再生制御部と、
を備える音声データ再生装置。
【請求項１５】
動画ファイルを生成する動画ファイル生成装置であって、
動画データを入力する動画データ入力部と
前記動画データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するパラメータ入力部と、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する動画ファイル生成部と、
を備える動画ファイル生成装置。
【請求項１６】
請求項１５に記載の動画ファイル生成装置であって、
前記再生制御パラメータは、前記動画データの少なくとも一部の繰り返し再生を制御する動画ファイル生成装置。
【請求項１７】
請求項１５に記載の動画ファイル生成装置であって、
前記動画データには、動画に連動して表示される文字列データが含まれており、
前記再生制御パラメータは、該文字列データの表示位置、大きさ、色の少なくとも一つを制御する動画ファイル生成装置
【請求項１８】
動画データを再生する動画データ再生装置であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する動画ファイル入力部と、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御する再生制御部と、
を備える動画データ再生装置。
【請求項１９】
時間経過を伴う電気信号を符号化したデータを入力するステップと、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力するステップと、
前記データと前記出力制御パラメータとを備えるファイルを生成するステップと、
を備えるファイル生成方法。
【請求項２０】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力するステップと、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御するステップと、
を備えるデータ出力方法。
【請求項２１】
音声ファイルを生成する音声ファイル生成方法であって、
音声データを入力するステップと、
前記音声データを再生する再生装置における該音声データの時間依存の再生態様を制御する再生制御パラメータを入力するステップと、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成するステップと、
を備える音声ファイル生成方法。
【請求項２２】
音声データを再生する音声データ再生方法であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力するステップと、
前記再生制御パラメータを参照して、前記音声データの再生態様を制御するステップと、
を備える音声データ再生方法。
【請求項２３】
動画ファイルを生成する動画ファイル生成方法であって、
動画データを入力するステップと、
前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力するステップと、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成するステップと、
を備える動画ファイル生成方法。
【請求項２４】
動画データを再生する動画データ再生方法であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力するステップと、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御するステップと、
を備える動画データ再生方法。
【請求項２５】
時間経過を伴う電気信号を符号化したデータを入力する機能と、
前記データを復号して出力する出力装置における前記データの時間依存の出力態様を制御する出力制御パラメータを入力する機能と、
前記データと前記出力制御パラメータとを備えるファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２６】
時間経過を伴う電気信号を符号化したデータと、該データの時間依存の出力態様を制御する出力制御パラメータとを備えるファイルを入力する機能と、
復号した前記データの出力態様を、前記出力制御パラメータを参照し制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２７】
音声ファイルを生成するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
音声データを入力する機能と、
前記音声データを再生する再生装置における該音声データの時間依存の再生態様を制御する再生制御パラメータを入力する機能と、
前記音声データと前記再生制御パラメータとを備える音声ファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２８】
音声データを再生するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
音声データと、該音声データの時間依存の再生態様を制御する再生制御パラメータとを含む音声ファイルを入力する機能と、
前記再生制御パラメータを参照して前記音声データの再生態様を制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項２９】
動画ファイルを生成するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
動画データを入力する機能と、
前記音声データを再生する再生装置における該動画データの時間依存の再生態様を制御する再生制御パラメータを入力する機能と、
前記動画データと前記再生制御パラメータとを備える動画ファイルを生成する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項３０】
動画データを再生するコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
動画データと、該動画データの時間依存の再生態様を制御する再生制御パラメータとを含む動画ファイルを入力する機能と、
前記再生制御パラメータを参照して、前記動画データの再生態様を制御する機能と、
をコンピュータに実現させるコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００９−５３６９（Ｐ２００９−５３６９Ａ）
【公開日】平成２１年１月８日（２００９．１．８）
【国際特許分類】
【出願番号】特願２００８−１７７１２４（Ｐ２００８−１７７１２４）
【出願日】平成２０年７月７日（２００８．７．７）
【分割の表示】特願２００３−５３７３１２（Ｐ２００３−５３７３１２）の分割
【原出願日】平成１４年１０月１５日（２００２．１０．１５）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成２１年１月８日（２００９．１．８）
【国際特許分類】
【出願日】平成２０年７月７日（２００８．７．７）
【分割の表示】特願２００３−５３７３１２（Ｐ２００３−５３７３１２）の分割
【原出願日】平成１４年１０月１５日（２００２．１０．１５）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]