録画再生装置
【課題】
選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能な映像再生装置を提供する。
【解決手段】
ユーザがリモコンの次飛ばし見ボタンを押下した場合、現在再生中の映像コンテンツの中で、時間的位置として最も近い次のテロップ出現情報を検索する（S502）。そして次のテロップ出現情報が見つかった場合はS504に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてテロップ映像が重畳して表示されているその映像で一時停止状態とする。
選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能な映像再生装置を提供する。
【解決手段】
ユーザがリモコンの次飛ばし見ボタンを押下した場合、現在再生中の映像コンテンツの中で、時間的位置として最も近い次のテロップ出現情報を検索する（S502）。そして次のテロップ出現情報が見つかった場合はS504に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてテロップ映像が重畳して表示されているその映像で一時停止状態とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像コンテンツを再生する再生装置に関し、特に再生映像中のテロップ画像を検出して再生制御する映像再生装置に関するものである。
【背景技術】
【０００２】
従来より、映像データを再生する際に、再生した映像の中から特定のシーンや画像を検出する等して再生制御動作に利用する技術が存在する。
【０００３】
例えば、映像または音声の付加情報・特徴量に基づいて、その画面に対応する識別信号を生成しておき、再生時のどの識別信号に対応する映像を再生するかユーザが選択できるように一覧表示し、選択された映像を再生する再生装置がある。
【特許文献１】特開２００１−２８５７１６号公報（第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、上述したような従来技術は、映像データの飛ばし見の開始点を選択して再生するのみであり、別の映像を見るためにいちいち選択画面を表示させて見たい映像を選択するという操作は、操作手順が多く非常に煩雑な作業となっていた。
そこで、本発明は上述した課題を解決するために、選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能な録画再生装置を提供することを目的とするものである。
【課題を解決するための手段】
【０００５】
本発明は上述したような課題を解決するため、映像コンテンツの中からテロップの領域検出を行うテロップ検出手段と、前記テロップ検出手段で検出されたテロップ領域が存在する再生位置を示すテロップ出現情報を前記映像コンテンツと共に記録装置に記録する記録手段と、前記記録された映像コンテンツを再生する再生手段と、前記映像コンテンツを再生中に所定の操作が行われたとき、前記記録装置に記録された前記テロップ出現情報を検索し、所定の再生制御を実行する再生制御手段とを具備したものである。
【０００６】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして一時停止させるものである。
【０００７】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して一時停止するものである。
【０００８】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして通常再生するものである。
【０００９】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して通常再生するものである。
【００１０】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで遡ってスキップまたは早送りし、一時停止また通常再生するものである。
【発明の効果】
【００１１】
予め記録されたテロップ画像出現情報を検索することで、簡単な操作で、操作選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明における実施形態について図面を用いて説明する。
【００１３】
まず本実施形態の録画再生装置の基本的なシステム構成を図１を参照して説明する。なお、本実施形態ではディジタル放送を例として説明するが、特にそれに限定するものではない。
【００１４】
チューナ１０１は、アンテナで受信したディジタル変調信号を選局・復調し、復調後のMPEG2-TS（Transport Stream）信号をトランスポートデコーダ１０２に送る。トランスポートデコーダ１０２は、受けたMPEG2-TS信号の中から所望の番組のパケットを選択してフィルタリングし、選択したパケットからAVのPES(Packetized Elementary Stream)信号を取り出す。取り出したPES信号をAVデコーダ１０３に送り、AVデコーダ１０３は映像・音声の復号（デコード）、フォーマット変換などを行い、音声は音声出力に、映像はOSD(On Screen Display)コントローラ１０７によりOSDデータ（データ放送により放送される２次元グラフィクスデータ）と合成されて映像出力に出力される。
【００１５】
CPU１０９は、この映像記録再生装置全体の制御を司り、EEPROM１０５に格納されたプログラムをSDRAM１０６にロードして実行する。このCPU１０９では、受信した放送番組データをHDD１１２に録画する番組録画プログラム、受信した映像の中に表示されたテロップの領域を検出したり、テロップ文字を認識するテロップ領域検出・認識プログラム、HDD１１２に蓄積された番組データを再生する番組再生プログラムなどが実行される。
【００１６】
図２に、テロップ領域検出・認識プログラムのフローチャートを示す。本実施形態においては、番組の録画中にテロップ領域検出・認識処理を行うものとする。また、本実施形態においては、処理の対象とするテロップは、映像中における画素的な位置が一定時間以上静止しており、かつ、テロップ文字の近傍の背景と比べて高輝度の画素から構成される、という性質を持つものとする。また、テロップは、その出現から消滅までの間、色や輝度の変化が少ないものとする。
【００１７】
S201は、映像の中からテロップが表示されている領域を取り出す処理である。通常、テロップは数秒間静止しているのが普通であると考えられるため、時間的に変動の小さいエッジや輝度の変動が少ない画素を求めれば、それがテロップ領域である可能性が高い。そこで、連続する複数のフレームの画像からエッジを検出し、複数のフレームに共通しているエッジだけを取り出し、静止エッジを求める。また、連続する複数のフレームの画像から、輝度の変動が少ない画素だけを取り出す。静止エッジと輝度の変動が少ない画素の位置情報から、テロップ領域を算出する。
【００１８】
S202は、S201で求めたテロップ領域の座標、サイズ、出現時刻、消滅時刻をテロップ出現情報としてHDDに格納する。ここで格納した情報は、映像再生時に参照する。
【００１９】
S203は、S201で求めたテロップ表示領域から画素ごとに文字かそうでないかを判別する処理である。S201で求めたテロップ表示領域の輝度のヒストグラムから文字部の輝度分布を推定して、文字切り出しの閾値を計算し、下流のS204の入力となる画像データを生成する。図１４に輝度のヒストグラムの一例を示す。1401はヒストグラムより推定した文字部の輝度分布であり、1402は文字部とそうでない部分の閾値とする値を示す。
【００２０】
S204は、文字部とそうでない部分の２値に分別された画像からテキスト情報（文字コード）を得る処理である。この処理には、OCR（Optical Character Reader）処理としてよく知られた既存の技術を用いるものとする。が、必ずしもこの処理は必要というわけではなく、テキスト情報が得られないとしても、S202までの処理によってテロップ出現情報が蓄積されていれば、本発明の目的は達せられる。
【００２１】
S205は、S204で得られたテロップ領域・テキスト情報をもとに、同一テロップの出現、継続、消滅を判定するとともに、そのテロップが表示されている間にそのテロップについて複数の結果が得られた場合には、それらのうちからより高精度な結果を選択する処理である。
【００２２】
S206は、S205で作成したテロップ情報（テロップ領域の座標、サイズ、テキスト情報、出現時刻、消滅時刻）をHDDに格納する処理を行う。S202ですでにテロップ領域の情報が格納されているが、これにS204で得たテキスト情報を付加するなどの補正を行う。
【００２３】
次に、テロップ認識処理を行いながら録画した番組を、再生して視聴するときの処理を、図３を用いて説明する。なお、以下の記述においては、録画した番組のことをタイトルと呼ぶこともある。また、ユーザの操作をリモコンでの操作として説明するが、特にリモコンに限定するものではなく、例えば装置本体に同様の機能をもつボタンを備えることによっても同様の操作が可能となるし、モデム、IEEE802.11などのLAN、Bluetoothなどのネットワークデバイス経由で、別のパソコン、AV機器、携帯電話などから操作することも可能である。
【００２４】
まず、再生したいタイトルを選択するために、HDD１１４に録画済みのタイトルが一覧表示されるボタン（図１３のb12）を押下する。本実施形態の装置は、図３のS301によりタイトル一覧表示ボタンが押下されたことを検知すると、タイトル一覧表示画面（図１５参照）をテレビ画面上に表示する。この画面には、録画した日時順に８個のタイトルが表示され、各タイトルにはサムネイル、タイトル名などが表示されている。図１３のb6、b7、b9、b10の方向ボタンを押下することにより、フォーカスの移動、ページ切替（次の８タイトル、または前の８タイトルの表示）を行うことができる。ユーザは方向ボタンを押下して所望のタイトルにフォーカスを移動し、b15の再生ボタンあるいはb8の決定ボタンを押下してそのタイトルを再生する（図３のS304）。
【００２５】
ここまでの操作により、画面上ではS303で選択したタイトルが再生されている「タイトル再生」状態となっている。以下、テロップの出現情報を用いた飛ばし見の処理を説明する。
【００２６】
図５は、次のテロップが出現する位置までスキップしてその位置の映像で一時停止する処理を示したものである。S501にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S502）。検索する際、テロップの座標、サイズ、テキスト情報などをもとに、次のテロップ出現情報を取捨選択することも可能である。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S503）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS504に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてその映像で一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S501に戻って上記と同様の処理を行う。
【００２７】
このように上述した実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。近年の番組はテロップ表示が増加し、特にバラエティ番組では出演者の発話ごとにテロップが頻繁に出ることも珍しくない。このような場合、テロップの出たシーンをワンタッチで飛ばし見するだけで、トークのおおまかな内容を知ることができる。
【００２８】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００２９】
次に、本発明の第２の実施形態について説明する。
【００３０】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、上述した第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００３１】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００３２】
図６は、次のテロップが出現する位置まで早送り再生し、その位置の映像で一時停止する処理を示したものである。S601にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S602参照）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S603）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS604に移行し、早送り再生を行う。S603で検索したテロップ出現情報にある出現時刻の映像まで到達したら、早送り再生を止めて一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S601に戻って上記と同様の処理を行う。
【００３３】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００３４】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００３５】
さらに、次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することによりおおまかな内容を把握することができるという効果がある。
【００３６】
次に、本発明に関する第３の実施形態を説明する。
【００３７】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００３８】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００３９】
図７は、次のテロップが出現する位置までスキップして、その位置の映像から通常再生する処理を示したものである。S701にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S702）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S703）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS704に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてその映像から通常速度の再生を行う。図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S701に戻って上記と同様の処理を行う。
【００４０】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第１の実施形態のように一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００４１】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００４２】
次に、本発明の第４の実施形態を説明する。
【００４３】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００４４】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００４５】
図８は、次のテロップが出現する位置まで早送り再生し、その位置の映像から通常再生する処理を示したものである。S801にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S802）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S803）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS804に移行し、早送り再生を行う。S803で検索したテロップ出現情報にある出現時刻の映像まで到達したら、早送り再生を止めて通常速度の再生を行う。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S801に戻って上記と同様の処理を行う。
【００４６】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第１の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００４７】
次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することにより内容を把握することができるという効果がある。
【００４８】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００４９】
次に、本発明の第５の実施形態を説明する。
【００５０】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００５１】
映像を飛ばし見するときの処理も基本的には第一の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００５２】
図９は、次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像で一時停止する処理を示したものである。S901にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S902）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S903）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS904に移行し、そのテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像をシークしてその映像で一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S901に戻って上記と同様の処理を行う。
【００５３】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００５４】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００５５】
さらに、野球中継における得点シーンやサッカー中継におけるゴールシーンなどのように、得点したプレイの直後に得点を示すテロップが表示される場合がある。この場合、ユーザとしては、得点を得ることとなったプレイの映像が見たいはずであり、得点したことを示すテロップは付随的なものであるばかりでなく、プレイの前に見てしまってはプレイそのものに対する興味をそぐ原因ともなりかねない類の映像である。本実施形態にあるように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００５６】
次に、本発明の第６の実施形態を説明する。
【００５７】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００５８】
映像を飛ばし見するときの処理は基本的には第二の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００５９】
図１０は、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像で一時停止する処理を示したものである。S1001にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1002）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1003）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1004に移行し、早送り再生を行う。S1003で検索したテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像まで到達したら、早送り再生を止めて一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1001に戻って上記と同様の処理を行う。
【００６０】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００６１】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００６２】
さらに、次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することによりおおまかな内容を把握することができるという効果がある。
【００６３】
さらに、第五の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００６４】
次に、本発明の第７の実施形態（変形例）を説明する。
【００６５】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００６６】
映像を飛ばし見するときの処理は基本的には第三の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００６７】
図１１は、次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像から通常再生する処理を示したものである。S1101にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1102）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1103）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1104に移行し、そのテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像をシークしてその映像から通常速度の再生を行う。図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1101に戻って上記と同様の処理を行う。
【００６８】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第一の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００６９】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００７０】
さらに、第５の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００７１】
次に、本発明の第８の実施形態を説明する。
【００７２】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００７３】
映像を飛ばし見するときの処理は基本的には第四の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００７４】
図１２は、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像から通常再生する処理を示したものである。S1201にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1202）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1203）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1204に移行し、早送り再生を行う。S1203で検索したテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像まで到達したら、早送り再生を止めて通常速度の再生を行う。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1201に戻って上記と同様の処理を行う。
【００７５】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第一の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００７６】
次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することにより内容を把握することができるという効果がある。
【００７７】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００７８】
さらに、第５の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【図面の簡単な説明】
【００７９】
【図１】本発明の実施形態を示す映像再生装置のシステム構成図である。
【図２】テロップ領域検出・認識プログラムのフローチャートである。
【図３】テロップ認識処理を行いながら録画した番組を、再生して視聴するときのフローチャートである。
【図４】再生停止制御動作のフローチャートである。
【図５】次のテロップが出現する位置までスキップしてその位置の映像で一時停止する処理を示したフローチャートである。
【図６】次のテロップが出現する位置まで早送り再生し、その位置の映像で一時停止する処理を示したフローチャートである。
【図７】次のテロップが出現する位置までスキップして、その位置の映像から通常再生する処理を示したフローチャートである。
【図８】次のテロップが出現する位置まで早送り再生し、その位置の映像から通常再生する処理を示したフローチャートである。
【図９】次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像で一時停止する処理を示したフローチャートである。
【図１０】次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像で一時停止する処理を示したフローチャートである。
【図１１】次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像から通常再生する処理を示したフローチャートである。
【図１２】、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像から通常再生する処理を示したフローチャートである。
【図１３】リモートコントローラのボタン配置を示した正面図である。
【図１４】輝度のヒストグラムの一例を示す図である。
【図１５】テレビ画面上に表示されるタイトル一覧表示画面の一例を示す図である。
【符号の説明】
【００８０】
１０１…チューナ、１０２…トランスポートデコーダ、１０３…ＡＶデコーダ、１０４…ダイレクトＲＤＲＡＭ、１０５…ＥＥＰＲＯＭ、１０６…ＳＤＲＡＭ、１０７…ＯＳＤコントローラ、１０８…モデム、１０９…ＬＡＮモジュール、１１０…Buluetoothモジュール１１１…ＣＰＵ、１１２…リモコンＩ／Ｆ、１１３…ＡＴＡＰＩ Ｉ／Ｆ、１１４…ＨＤＤ。
【技術分野】
【０００１】
本発明は、映像コンテンツを再生する再生装置に関し、特に再生映像中のテロップ画像を検出して再生制御する映像再生装置に関するものである。
【背景技術】
【０００２】
従来より、映像データを再生する際に、再生した映像の中から特定のシーンや画像を検出する等して再生制御動作に利用する技術が存在する。
【０００３】
例えば、映像または音声の付加情報・特徴量に基づいて、その画面に対応する識別信号を生成しておき、再生時のどの識別信号に対応する映像を再生するかユーザが選択できるように一覧表示し、選択された映像を再生する再生装置がある。
【特許文献１】特開２００１−２８５７１６号公報（第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、上述したような従来技術は、映像データの飛ばし見の開始点を選択して再生するのみであり、別の映像を見るためにいちいち選択画面を表示させて見たい映像を選択するという操作は、操作手順が多く非常に煩雑な作業となっていた。
そこで、本発明は上述した課題を解決するために、選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能な録画再生装置を提供することを目的とするものである。
【課題を解決するための手段】
【０００５】
本発明は上述したような課題を解決するため、映像コンテンツの中からテロップの領域検出を行うテロップ検出手段と、前記テロップ検出手段で検出されたテロップ領域が存在する再生位置を示すテロップ出現情報を前記映像コンテンツと共に記録装置に記録する記録手段と、前記記録された映像コンテンツを再生する再生手段と、前記映像コンテンツを再生中に所定の操作が行われたとき、前記記録装置に記録された前記テロップ出現情報を検索し、所定の再生制御を実行する再生制御手段とを具備したものである。
【０００６】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして一時停止させるものである。
【０００７】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して一時停止するものである。
【０００８】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして通常再生するものである。
【０００９】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して通常再生するものである。
【００１０】
また本発明は上述した課題を解決するため、所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで遡ってスキップまたは早送りし、一時停止また通常再生するものである。
【発明の効果】
【００１１】
予め記録されたテロップ画像出現情報を検索することで、簡単な操作で、操作選択画面を表示させることなく、ワンタッチで次の映像を見ることが可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明における実施形態について図面を用いて説明する。
【００１３】
まず本実施形態の録画再生装置の基本的なシステム構成を図１を参照して説明する。なお、本実施形態ではディジタル放送を例として説明するが、特にそれに限定するものではない。
【００１４】
チューナ１０１は、アンテナで受信したディジタル変調信号を選局・復調し、復調後のMPEG2-TS（Transport Stream）信号をトランスポートデコーダ１０２に送る。トランスポートデコーダ１０２は、受けたMPEG2-TS信号の中から所望の番組のパケットを選択してフィルタリングし、選択したパケットからAVのPES(Packetized Elementary Stream)信号を取り出す。取り出したPES信号をAVデコーダ１０３に送り、AVデコーダ１０３は映像・音声の復号（デコード）、フォーマット変換などを行い、音声は音声出力に、映像はOSD(On Screen Display)コントローラ１０７によりOSDデータ（データ放送により放送される２次元グラフィクスデータ）と合成されて映像出力に出力される。
【００１５】
CPU１０９は、この映像記録再生装置全体の制御を司り、EEPROM１０５に格納されたプログラムをSDRAM１０６にロードして実行する。このCPU１０９では、受信した放送番組データをHDD１１２に録画する番組録画プログラム、受信した映像の中に表示されたテロップの領域を検出したり、テロップ文字を認識するテロップ領域検出・認識プログラム、HDD１１２に蓄積された番組データを再生する番組再生プログラムなどが実行される。
【００１６】
図２に、テロップ領域検出・認識プログラムのフローチャートを示す。本実施形態においては、番組の録画中にテロップ領域検出・認識処理を行うものとする。また、本実施形態においては、処理の対象とするテロップは、映像中における画素的な位置が一定時間以上静止しており、かつ、テロップ文字の近傍の背景と比べて高輝度の画素から構成される、という性質を持つものとする。また、テロップは、その出現から消滅までの間、色や輝度の変化が少ないものとする。
【００１７】
S201は、映像の中からテロップが表示されている領域を取り出す処理である。通常、テロップは数秒間静止しているのが普通であると考えられるため、時間的に変動の小さいエッジや輝度の変動が少ない画素を求めれば、それがテロップ領域である可能性が高い。そこで、連続する複数のフレームの画像からエッジを検出し、複数のフレームに共通しているエッジだけを取り出し、静止エッジを求める。また、連続する複数のフレームの画像から、輝度の変動が少ない画素だけを取り出す。静止エッジと輝度の変動が少ない画素の位置情報から、テロップ領域を算出する。
【００１８】
S202は、S201で求めたテロップ領域の座標、サイズ、出現時刻、消滅時刻をテロップ出現情報としてHDDに格納する。ここで格納した情報は、映像再生時に参照する。
【００１９】
S203は、S201で求めたテロップ表示領域から画素ごとに文字かそうでないかを判別する処理である。S201で求めたテロップ表示領域の輝度のヒストグラムから文字部の輝度分布を推定して、文字切り出しの閾値を計算し、下流のS204の入力となる画像データを生成する。図１４に輝度のヒストグラムの一例を示す。1401はヒストグラムより推定した文字部の輝度分布であり、1402は文字部とそうでない部分の閾値とする値を示す。
【００２０】
S204は、文字部とそうでない部分の２値に分別された画像からテキスト情報（文字コード）を得る処理である。この処理には、OCR（Optical Character Reader）処理としてよく知られた既存の技術を用いるものとする。が、必ずしもこの処理は必要というわけではなく、テキスト情報が得られないとしても、S202までの処理によってテロップ出現情報が蓄積されていれば、本発明の目的は達せられる。
【００２１】
S205は、S204で得られたテロップ領域・テキスト情報をもとに、同一テロップの出現、継続、消滅を判定するとともに、そのテロップが表示されている間にそのテロップについて複数の結果が得られた場合には、それらのうちからより高精度な結果を選択する処理である。
【００２２】
S206は、S205で作成したテロップ情報（テロップ領域の座標、サイズ、テキスト情報、出現時刻、消滅時刻）をHDDに格納する処理を行う。S202ですでにテロップ領域の情報が格納されているが、これにS204で得たテキスト情報を付加するなどの補正を行う。
【００２３】
次に、テロップ認識処理を行いながら録画した番組を、再生して視聴するときの処理を、図３を用いて説明する。なお、以下の記述においては、録画した番組のことをタイトルと呼ぶこともある。また、ユーザの操作をリモコンでの操作として説明するが、特にリモコンに限定するものではなく、例えば装置本体に同様の機能をもつボタンを備えることによっても同様の操作が可能となるし、モデム、IEEE802.11などのLAN、Bluetoothなどのネットワークデバイス経由で、別のパソコン、AV機器、携帯電話などから操作することも可能である。
【００２４】
まず、再生したいタイトルを選択するために、HDD１１４に録画済みのタイトルが一覧表示されるボタン（図１３のb12）を押下する。本実施形態の装置は、図３のS301によりタイトル一覧表示ボタンが押下されたことを検知すると、タイトル一覧表示画面（図１５参照）をテレビ画面上に表示する。この画面には、録画した日時順に８個のタイトルが表示され、各タイトルにはサムネイル、タイトル名などが表示されている。図１３のb6、b7、b9、b10の方向ボタンを押下することにより、フォーカスの移動、ページ切替（次の８タイトル、または前の８タイトルの表示）を行うことができる。ユーザは方向ボタンを押下して所望のタイトルにフォーカスを移動し、b15の再生ボタンあるいはb8の決定ボタンを押下してそのタイトルを再生する（図３のS304）。
【００２５】
ここまでの操作により、画面上ではS303で選択したタイトルが再生されている「タイトル再生」状態となっている。以下、テロップの出現情報を用いた飛ばし見の処理を説明する。
【００２６】
図５は、次のテロップが出現する位置までスキップしてその位置の映像で一時停止する処理を示したものである。S501にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S502）。検索する際、テロップの座標、サイズ、テキスト情報などをもとに、次のテロップ出現情報を取捨選択することも可能である。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S503）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS504に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてその映像で一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S501に戻って上記と同様の処理を行う。
【００２７】
このように上述した実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。近年の番組はテロップ表示が増加し、特にバラエティ番組では出演者の発話ごとにテロップが頻繁に出ることも珍しくない。このような場合、テロップの出たシーンをワンタッチで飛ばし見するだけで、トークのおおまかな内容を知ることができる。
【００２８】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００２９】
次に、本発明の第２の実施形態について説明する。
【００３０】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、上述した第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００３１】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００３２】
図６は、次のテロップが出現する位置まで早送り再生し、その位置の映像で一時停止する処理を示したものである。S601にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S602参照）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S603）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS604に移行し、早送り再生を行う。S603で検索したテロップ出現情報にある出現時刻の映像まで到達したら、早送り再生を止めて一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S601に戻って上記と同様の処理を行う。
【００３３】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００３４】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００３５】
さらに、次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することによりおおまかな内容を把握することができるという効果がある。
【００３６】
次に、本発明に関する第３の実施形態を説明する。
【００３７】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００３８】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００３９】
図７は、次のテロップが出現する位置までスキップして、その位置の映像から通常再生する処理を示したものである。S701にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S702）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S703）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS704に移行し、そのテロップ出現情報にある出現時刻の映像をシークしてその映像から通常速度の再生を行う。図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S701に戻って上記と同様の処理を行う。
【００４０】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第１の実施形態のように一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００４１】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００４２】
次に、本発明の第４の実施形態を説明する。
【００４３】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００４４】
第１の実施形態と異なる点は、テロップの出現情報を利用して映像を飛ばし見するときの処理である。以下、本実施形態における飛ばし見処理を説明する。
【００４５】
図８は、次のテロップが出現する位置まで早送り再生し、その位置の映像から通常再生する処理を示したものである。S801にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S802）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S803）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS804に移行し、早送り再生を行う。S803で検索したテロップ出現情報にある出現時刻の映像まで到達したら、早送り再生を止めて通常速度の再生を行う。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S801に戻って上記と同様の処理を行う。
【００４６】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第１の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００４７】
次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することにより内容を把握することができるという効果がある。
【００４８】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００４９】
次に、本発明の第５の実施形態を説明する。
【００５０】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第１の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００５１】
映像を飛ばし見するときの処理も基本的には第一の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００５２】
図９は、次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像で一時停止する処理を示したものである。S901にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S902）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S903）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS904に移行し、そのテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像をシークしてその映像で一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S901に戻って上記と同様の処理を行う。
【００５３】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００５４】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００５５】
さらに、野球中継における得点シーンやサッカー中継におけるゴールシーンなどのように、得点したプレイの直後に得点を示すテロップが表示される場合がある。この場合、ユーザとしては、得点を得ることとなったプレイの映像が見たいはずであり、得点したことを示すテロップは付随的なものであるばかりでなく、プレイの前に見てしまってはプレイそのものに対する興味をそぐ原因ともなりかねない類の映像である。本実施形態にあるように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００５６】
次に、本発明の第６の実施形態を説明する。
【００５７】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００５８】
映像を飛ばし見するときの処理は基本的には第二の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００５９】
図１０は、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像で一時停止する処理を示したものである。S1001にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1002）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1003）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1004に移行し、早送り再生を行う。S1003で検索したテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像まで到達したら、早送り再生を止めて一時停止状態となる。ユーザの再生ボタン（図１３のb15）押下、または一時停止ボタン（図１３のb13）押下により一時停止が解除され、タイトル再生状態となる。それまでは一時停止状態のままとなる。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1001に戻って上記と同様の処理を行う。
【００６０】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、じっくり見たい場合は通常の再生を行うこともできるため、番組のあらすじを追いながら見たいシーンだけを短時間で見ることができる。
【００６１】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００６２】
さらに、次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することによりおおまかな内容を把握することができるという効果がある。
【００６３】
さらに、第五の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００６４】
次に、本発明の第７の実施形態（変形例）を説明する。
【００６５】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００６６】
映像を飛ばし見するときの処理は基本的には第三の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００６７】
図１１は、次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像から通常再生する処理を示したものである。S1101にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1102）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1103）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1104に移行し、そのテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像をシークしてその映像から通常速度の再生を行う。図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1101に戻って上記と同様の処理を行う。
【００６８】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第一の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００６９】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００７０】
さらに、第５の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【００７１】
次に、本発明の第８の実施形態を説明する。
【００７２】
本実施形態の基本構成、テロップ領域検出・認識プログラムのフローチャート、タイトルを再生するまでの処理、停止処理は、第一の実施形態と同様である。すなわち、基本構成は図１に、テロップ領域検出・認識プログラムのフローチャートは図２に、タイトルを再生するまでの処理は図３に、停止処理は図４に示した通りである。
【００７３】
映像を飛ばし見するときの処理は基本的には第四の実施形態とほぼ同様であるが、異なるのは、飛ばし見する際次のテロップの出現位置から所定時間だけ遡った時点の映像を表示する点である。以下、本実施形態における飛ばし見処理を説明する。
【００７４】
図１２は、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像から通常再生する処理を示したものである。S1201にあるように、ユーザがリモコンの次飛ばし見ボタン（図１３のb21）を押下した場合、現在再生中の時間的位置に最も近い次のテロップ出現情報を検索する（S1202）。次のテロップ出現情報が見つからなかった場合は、「タイトル再生」状態に戻る（S1203）。そのため、表面上はユーザが次飛ばし見ボタンを押しても何も変化がなかったように見えるため、画面上に「次のテロップはありません」などのメッセージを表示してもよい。次のテロップ出現情報が見つかった場合はS1204に移行し、早送り再生を行う。S1203で検索したテロップ出現情報にある出現時刻から所定時間だけ遡った時点の映像まで到達したら、早送り再生を止めて通常速度の再生を行う。また、図４に示すように、停止ボタン（図１３のb14）を押下することにより再生を停止する。次飛ばし見ボタンを押下すると、S1201に戻って上記と同様の処理を行う。
【００７５】
本実施形態によれば、番組の中でテロップが出現するシーンをワンタッチで次々と飛ばしながら見ることができ、テロップ出現位置から自動的に再生されるため、第一の実施形態のようにいちいち一時停止状態を解除する必要がない。番組のあらすじを追いながら見たいシーンだけじっくり見ることができる。
【００７６】
次のテロップ映像まで早送り再生することにより、次のテロップ出現までのおおまかな映像、長さをユーザは知ることができる。たまたま次のテロップ出現まで非常に間がある場合でも、早送り映像を視聴することにより内容を把握することができるという効果がある。
【００７７】
また、出現するテロップは、番組の性格、テロップ自体の表示内容、番組制作者の意図などによって多種多様なフォント、文字飾り、特殊文字、絵文字、ロゴ、特殊効果が使い分けられていることが多い。このため、すべてのテロップに対して文字として認識しテキスト化することは非常に困難である。本実施形態によれば、テロップを文字として認識してテキスト化することは必ずしも必要でなく、テロップが出現したことを検出するだけで上記の飛ばし見効果を得ることができる。
【００７８】
さらに、第５の実施形態でも述べたように、テロップ出現位置から所定時間だけ遡った時点の映像を表示することにより、見たいシーンを見逃さず、かつテロップより先に見ることができる、という効果が得られる。
【図面の簡単な説明】
【００７９】
【図１】本発明の実施形態を示す映像再生装置のシステム構成図である。
【図２】テロップ領域検出・認識プログラムのフローチャートである。
【図３】テロップ認識処理を行いながら録画した番組を、再生して視聴するときのフローチャートである。
【図４】再生停止制御動作のフローチャートである。
【図５】次のテロップが出現する位置までスキップしてその位置の映像で一時停止する処理を示したフローチャートである。
【図６】次のテロップが出現する位置まで早送り再生し、その位置の映像で一時停止する処理を示したフローチャートである。
【図７】次のテロップが出現する位置までスキップして、その位置の映像から通常再生する処理を示したフローチャートである。
【図８】次のテロップが出現する位置まで早送り再生し、その位置の映像から通常再生する処理を示したフローチャートである。
【図９】次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像で一時停止する処理を示したフローチャートである。
【図１０】次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像で一時停止する処理を示したフローチャートである。
【図１１】次のテロップが出現する位置から所定時間だけ遡った時点までスキップして、その位置の映像から通常再生する処理を示したフローチャートである。
【図１２】、次のテロップが出現する位置から所定時間だけ遡った時点まで早送り再生し、その位置の映像から通常再生する処理を示したフローチャートである。
【図１３】リモートコントローラのボタン配置を示した正面図である。
【図１４】輝度のヒストグラムの一例を示す図である。
【図１５】テレビ画面上に表示されるタイトル一覧表示画面の一例を示す図である。
【符号の説明】
【００８０】
１０１…チューナ、１０２…トランスポートデコーダ、１０３…ＡＶデコーダ、１０４…ダイレクトＲＤＲＡＭ、１０５…ＥＥＰＲＯＭ、１０６…ＳＤＲＡＭ、１０７…ＯＳＤコントローラ、１０８…モデム、１０９…ＬＡＮモジュール、１１０…Buluetoothモジュール１１１…ＣＰＵ、１１２…リモコンＩ／Ｆ、１１３…ＡＴＡＰＩ Ｉ／Ｆ、１１４…ＨＤＤ。
【特許請求の範囲】
【請求項１】
再生中の映像コンテンツの中からテロップ映像を検出するテロップ検出手段と、
前記テロップ検出手段で検出されたテロップ領域が存在する再生位置を示すテロップ出現情報を前記映像コンテンツと共に記録装置に記録する記録手段と、
前記記録された映像コンテンツを再生する再生手段と、
前記映像コンテンツを再生中に所定の操作が行われたとき、前記記録装置に記録された前記テロップ出現情報を検索し、所定の再生制御を実行する再生制御手段とを具備したことを特徴とする録画再生装置。
【請求項２】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして一時停止させることを特徴とする請求項１記載の録画再生装置。
【請求項３】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して一時停止することを特徴とする請求項１記載の録画再生装置。
【請求項４】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして通常再生することを特徴とする請求項１記載の録画再生装置。
【請求項５】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して通常再生することを特徴とする請求項１記載の録画再生装置。
【請求項６】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで遡ってスキップまたは早送りし、一時停止また通常再生することを特徴とする請求項１記載の録画再生装置。
【請求項１】
再生中の映像コンテンツの中からテロップ映像を検出するテロップ検出手段と、
前記テロップ検出手段で検出されたテロップ領域が存在する再生位置を示すテロップ出現情報を前記映像コンテンツと共に記録装置に記録する記録手段と、
前記記録された映像コンテンツを再生する再生手段と、
前記映像コンテンツを再生中に所定の操作が行われたとき、前記記録装置に記録された前記テロップ出現情報を検索し、所定の再生制御を実行する再生制御手段とを具備したことを特徴とする録画再生装置。
【請求項２】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして一時停止させることを特徴とする請求項１記載の録画再生装置。
【請求項３】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して一時停止することを特徴とする請求項１記載の録画再生装置。
【請求項４】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像までスキップして通常再生することを特徴とする請求項１記載の録画再生装置。
【請求項５】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで早送り再生して通常再生することを特徴とする請求項１記載の録画再生装置。
【請求項６】
前記再生制御手段は、前記所定の操作が行われたとき、前記テロップ出現情報に対応する映像まで遡ってスキップまたは早送りし、一時停止また通常再生することを特徴とする請求項１記載の録画再生装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２００６−１８０１８０（Ｐ２００６−１８０１８０Ａ）
【公開日】平成１８年７月６日（２００６．７．６）
【国際特許分類】
【出願番号】特願２００４−３７０８６５（Ｐ２００４−３７０８６５）
【出願日】平成１６年１２月２２日（２００４．１２．２２）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成１８年７月６日（２００６．７．６）
【国際特許分類】
【出願日】平成１６年１２月２２日（２００４．１２．２２）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]