メタデータを自動的に生成/更新するマルチメディア・データの記録方法及び装置
検索対象になるメディアデータの場面を分類するための少なくとも1つの検索対象項目を入力され、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも1つの場面を選択し、選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成し、メタデータをヘッダ領域に記録してメディアデータをペイロード領域に記録するマルチメディア・データの記録方法である。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、マルチメディア・データの記録方法及び装置に係り、さらに詳細には、多様な再生機能を具現できるマルチメディア・データを記録する方法及び装置に関する。
【背景技術】
【0002】
最近、商業的なコンテンツ提供者(contents provider)だけではなく、一般的な個人ユーザも、デジタル・カムコーダまたはデジタルカメラのようなデジタル映像撮像装置を利用して、多様なマルチメディア・コンテンツを制作する。特に、UCC(user created content)が個人用ブログだけではなく、商業的にも利用されており、日々表現する情報の範囲が広くなっている。
【0003】
UCCのユーザ層が広くなって、制作レベルが高まるにつれ、UCCを撮影するためのマルチメディア撮影装置及びマルチメディア・データ記録装置は、さらに多くの機能を具現できることを期待されている。
【0004】
DVD(digital versatile disc)のように、コンテンツ提供者から提供される保存型メディア(packaged media)は、マルチメディア再生機を介して多様な方法で再生され、メディアファイル内にメタデータを有している。既存のメディアファイルは、単純に再生できるデータだけが記録されており、付加的な機能のための細部検索対象項目のためのメタデータが記録されていない。
【発明の概要】
【発明が解決しようとする課題】
【0005】
本発明のマルチメディア・データの記録方法は、メタデータを新たに生成したり、既存のメタデータを更新することによって、多様な再生機能を具現できるマルチメディア・データを記録する方法を提案する。
【0006】
また、多様な再生機能を具現するために、あらかじめ登録された検索対象項目を介して、自動的に検索対象項目と関連した場面についての情報を収集してメタデータに記録する方法を提案する。
【0007】
また、ユーザの決定によって、検索対象項目と関連した場面情報を収集してメタデータに記録する方法を提案する。
【課題を解決するための手段】
【0008】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データの記録方法は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される段階、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも1つの場面を選択する段階、選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成する段階、及びメタデータをヘッダ領域に記録してメディアデータをペイロード領域に記録する段階を含む。
【0009】
一実施形態の検索対象項目の入力段階は、検索対象項目がデータベースまたは既生成のメタデータから入力される。
【0010】
一実施形態のメタデータ生成段階は、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換する段階をさらに含む。
【0011】
一実施形態のメタデータ生成段階は、検索対象項目を含むメタデータを生成する段階、及び検索対象項目が含まれたメタデータが場面情報を含むように更新する段階を含む。
【0012】
一実施形態のメタデータ生成段階は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【0013】
一実施形態の記録段階は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【0014】
他の実施形態の記録段階は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【0015】
一実施形態の検索対象項目の入力段階は、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報を入力される段階をさらに含み、場面選択段階は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する段階、抽出された対比情報と代表特徴情報との類似度を測定する段階、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として決定する段階をさらに含む。
【0016】
一実施形態の場面選択段階は、検索対象項目及び現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【0017】
一実施形態のユーザインターフェースは、検索対象項目が選択されるためにそれぞれの検索対象項目を示す映像アイコンを含み、映像アイコンは、現在場面を利用して新しい映像アイコンに更新される。
【0018】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ再生方法は、検索する場面の検索対象項目が選択される段階、検索対象項目に係わるメタデータを決定する段階、及び決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する段階を含む。
【0019】
一実施形態は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報及び代表特徴情報を抽出して再生する段階をさらに含む。
【0020】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ記録装置は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される検索対象項目入力部、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも1つの場面を選択する場面選択部、選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成するメタデータ生成部、及びメタデータをヘッダ領域に記録し、メディアデータをペイロードに領域に記録する記録部を含む。
【0021】
本発明は、本発明の一実施形態によるマルチメディア・データの記録方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【0022】
また本発明は、本発明の一実施形態によるマルチメディア・データ再生方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【発明の効果】
【0023】
従って、本発明のマルチメディア・データの記録方法及び装置は、検索対象項目に関連した場面情報を記録したメタデータを新たに生成したり、既存のメタデータを更新することによって、ユーザが所望の検索対象項目を再生したり、検索対象項目に関する場面を再生する効果がある。
【0024】
また、本発明を介して記録されたマルチメディア・データによって、マルチメディア再生機が、マルチメディア・コンテンツの再生及び検索のような多様な機能を容易に具現できる。
【0025】
一般ユーザが作ったマルチメディア・コンテンツにも、自動的に新しいメタデータの挿入及び既存のメタデータの更新が可能なので、ユーザが容易にマルチメディア・コンテンツを制作できる。
【0026】
本発明についてその望ましい実施形態を中心に述べるが、本発明が属する技術分野で当業者は、本発明が本発明の本質的な特性から外れない範囲で変形された形態で具現されうることを理解することができるであろう。従って、開示された実施形態は、限定的な観点ではなくして、説明的な観点から考慮されねばならない。本発明の範囲は、前述の説明ではなくして特許請求の範囲に示されており、それと同等な範囲内にあるあらゆる差異点は、本発明に含まれたものであると解釈されねばならない。
【図面の簡単な説明】
【0027】
【図1A】本発明の一実施形態によるマルチメディア・データ記録装置のブロック図である。
【図1B】本発明の一実施形態によるマルチメディア・データ記録装置の場面選択部のブロック図である。
【図2】本発明の一実施形態によるマルチメディア・データ記録装置の概要を図示する図である。
【図3】本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明する図である。
【図4A】本発明の一実施形態によって更新されるメタデータを図示する図である。
【図4B】本発明の他の実施形態によって生成されるメタデータを図示する図である。
【図5】本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図6】本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図7】本発明の一実施形態によって人物情報を検索する方法を図示する図である。
【図8】本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明する図である。
【図9】本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートである。
【図10】本発明の一実施形態によるマルチメディア・データ再生装置のブロック図である。
【図11】本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートである。
【発明を実施するための形態】
【0028】
以下、本発明の一実施形態によるマルチメディア・データの記録方法及び装置について説明する。
【0029】
図1Aは、本発明の一実施形態によるマルチメディア・データ記録装置のブロック図を図示している。
【0030】
本発明の一実施形態によるマルチメディア・データ記録装置100は、検索対象項目入力部110、場面選択部120、メタデータ生成部130及び記録部140を含む。
【0031】
検索対象項目入力部110は、ユーザの入力によって、検索対象になるメディアデータの場面を分類するための少なくとも1つの検索対象項目を入力され、検索対象項目を場面選択部120に出力する。
【0032】
検索対象項目入力部110は、検索対象項目を、データベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されうる。また、検索対象項目入力部110は、ユーザの入力によって、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力されうる。
【0033】
検索対象項目入力部110は、以下の図2を参照して詳述する。
【0034】
場面選択部120は、メディアデータと、検索対象項目入力部110からの検索対象項目とを入力され、メディアデータの入力途中で、メディアデータの場面のうち、登録されたそれぞれの検索対象項目に対応する少なくとも1つの場面を選択し、メタデータ生成部130に出力する。
【0035】
本発明の一実施形態で、メディアデータは、撮影または録画されることによって入力されうる。
【0036】
図1Bによれば、場面選択部120は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する対比情報抽出部121、抽出された対比情報と代表特徴情報との類似度を測定する類似度測定部122、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する場面決定部123を含む。
【0037】
メタデータ生成部130は、場面選択部120から入力された選択された場面のインデックスまたは再生時点のうち、少なくとも1つである場面情報を含むメタデータを生成し、記録部140に出力する。
【0038】
メタデータ生成部130の一実施形態は、図面には図示されていないが、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含む。
【0039】
メタデータ生成部130の一実施形態は、検索対象項目を含むメタデータに生成し、検索対象項目が含まれたメタデータが場面情報を含むように更新する。
【0040】
また、メタデータ生成部130の他の実施形態は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【0041】
場面選択部120、メタデータ生成部130は、以下の図3を参照しつつ詳述する。
【0042】
記録部140は、メタデータ生成部130からメタデータを入力されてメディアデータを入力され、メタデータをヘッダ領域に記録して、メディアデータをペイロード領域に記録することによって、マルチメディア・データを生成する。
【0043】
記録部140の一実施形態は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【0044】
記録部140の他の実施形態は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【0045】
記録部140は以下の図3、図4A、図4B及び図6を参照しつつ詳述する。
【0046】
図面には図示されていないが、マルチメディア・データ記録装置100は、ユーザ要請によって、前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースをさらに含む。マルチメディア・データ記録装置100が、ユーザインターフェースを有する場合、場面選択部120の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【0047】
また、本発明の一実施形態は、現在記録されているコンテンツが、リアルタイムで再生されたり、所望のマルチメディア・データから検索対象項目を検索して再生できる再生部を含むことができる。
【0048】
図2は、本発明の一実施形態によるマルチメディア・データ記録装置100の概要を図示している。図2では、マルチメディア・データ記録装置100の一実施形態として、デジタル・カムコーダ200を利用し、検索対象項目入力部110を中心に、マルチメディア・データ記録装置100の機能について詳述する。
【0049】
デジタル・カムコーダ200は、獲得された画像及び音響情報を含むメディアデータを、マルチメディア・データに記録することによって、マルチメディア・データを生成する。
【0050】
検索対象項目入力部110の一実施形態は、メディアデータが入力される前、ユーザがあらかじめ検索対象項目をマルチメディア・データ記録装置100の臨時データベースに保存しておく。一実施形態は、メディアデータを登場人物によって処理するために、ユーザが、人物情報210を設定してあらかじめ入力され、デジタル・カムコーダ200のデータベースに保存しておく。人物情報210は、登場人物「父」、「母」、「末っ子」、「長女」を含み、それぞれの人物は、氏名、生年月日、結婚記念日、兄弟関係、職業のような基本細部情報が設定される。
【0051】
検索対象項目入力部110の一実施形態で、基本細部情報は更新が可能であり、細部情報のヒストリ(history)情報が保存されうる。また、基本細部情報は、XML(extensible markup language)形態で保存されうる。
【0052】
検索対象項目入力部110の一実施形態は、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力される。例えば、人物情報においては、当該人物の声、写真などが代表特徴情報として登録され、類似度測定時に使われる。
【0053】
デジタル・カムコーダ200が利用する検索対象項目がすでに保存されているデータベースに保存されていたり、現在メタデータにすでに保存されている場合には、データベースまたはメタデータから、検索対象項目を入力されうる。
【0054】
デジタル・カムコーダ200は、人物情報210を利用して生成された場面情報をメタデータ220に記録し、獲得されたメディアデータ及びメタデータ220を、マルチメディア・データ230に記録する。
【0055】
再生機器240は、マルチメディア・データ230を再生する。再生機器240は、マルチメディア・データ記録装置200それ自体でもあり、他の再生機器240が、マルチメディア・データ記録装置200によって生成されたマルチメディア・データ230を再生することもできる。
【0056】
図3は、本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明している。図3を参考にして、場面選択部120、メタデータ生成部130及び記録部140について詳述する。場面選択部120の対比情報抽出部121、類似度測定部122及び場面決定部123の機能も共に説明する。
【0057】
あらかじめ検索対象項目入力部110が、ユーザによって入力された人物情報を入力され(段階310)、マルチメディア・データ記録装置は100は、臨時保存部またはデータベースに人物情報を保存しておくことができる。
【0058】
マルチメディア・データ記録装置100にメディアデータが入力されれば(段階310)、メタデータ生成部130は、臨時保存部またはデータベースから人物情報を入力され、メディアデータから人物情報に対応する場面情報を抽出し、検索対象項目に対する場面情報を含むメタデータを生成する(段階330)。
【0059】
場面情報を含むメタデータを生成する過程(段階330)について順に述べれば、検索対象になる人物が当該場面に含まれているか否かを分析し(段階332)、メタデータ・フォーマットを変換し(段階334)、メタデータを生成したり更新する(段階336)。
【0060】
さらに詳細に述べれば、場面分析過程(段階332)で、場面選択部120の場面情報抽出部121は、入力されるメディアデータの現在場面を分析し、前記検索対象項目の関連情報を抽出する。また、場面選択部120の類似度測定部122は、抽出された関連情報及び前記メタデータの検索対象項目の代表特徴情報との類似度を測定する。場面選択部120の場面決定部123は、類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する。
【0061】
場面選択部120の一実施形態は、検索対象項目についての登録された代表特徴情報として人物の写真を具備し、入力されたメディアデータが圧縮された映像である場合、顔認識技法などを介して、メディアデータのIフレーム(in frame)の登場人物と、登録された写真との類似度を測定することによって、分析及び比較する。
【0062】
また他の実施形態は、入力されるメディアデータの特定シーケンスを指定し、当該シーケンス内の映像での人物だけを分析して類似度を測定する。
【0063】
入力されるメディアデータが音響である場合、登録された特徴情報である人物の音声と入力された音響との類似度が測定されて判読されうる。
【0064】
また、人物が頻繁に使用する単語が、人物情報の代表特徴情報として登録された場合、入力されたメディアデータの音響のうち、当該単語が言及されているか否か音響分析を介して分析されうる。
【0065】
フォーマット変換段階(段階334)で、メタデータ生成部130のフォーマット変換部は、場面情報が記録されたメタデータを、マルチメディア・データに合うフォーマットに変換する。また、メタデータ生成部130の一実施形態は、検索対象項目に対応する場面情報を記録するためのメタデータを、マルチメディア・データフォーマットに合うように新たに生成する。メタデータ生成部130の一実施形態は、メタデータに当該人物が登場した場面の時点を場面情報として記録する。
【0066】
メタデータ生成または更新過程(段階336)で、メタデータ生成部130の一実施形態は、メタデータの既存情報に場面情報を追加して記録する。メタデータ生成部130の他の実施形態は、既存のメタデータと別個に、場面情報を記録した新しいメタデータを生成する。
【0067】
記録部140は、メタデータをヘッダ領域に記録し、かつメディアデータをペイロード領域に記録してマルチメディア・データを生成する(段階340)。ペイロード領域にメディアデータが記録され(段階342)、ヘッダ領域にメタデータ領域が記録される(段階344)。
【0068】
記録部140の一実施形態は、メディアデータ記録(段階342)及びメタデータ記録(段階344)を同時に遂行する。すなわち、メディアデータがペイロード領域に記録されると同時に、メタデータがヘッダ領域に記録される。記録部140の他の実施形態は、メディアデータを記録(段階342)した後に、メタデータを記録(段階344)する。すなわち、メディアデータが、ペイロード領域にいずれも記録された後、メタデータがヘッダ領域に記録される。
【0069】
以下、図4A及び図4Bを参考にして、マルチメディア・データ記録装置100によって生成されるマルチメディア・データの実施形態について説明する。
【0070】
図4Aは、本発明の一実施形態によって更新されるメタデータを図示する。
【0071】
メタデータ生成部130は、場面選択部120で選択された場面の場面情報をメタデータに記録する。
【0072】
一実施形態は、更新される前のメタデータ402は、検索対象項目(図面での人物情報412及び414)だけ記録されている。一実施形態は、検索対象項目412及び414だけではなく、それぞれの検索対象項目についての細部情報422及び424を含むこともできる。
【0073】
メタデータ生成部130は、場面選択部120でそれぞれの検索対象項目412及び414について選択された場面情報432及び434を、メタデータ402にさらに記録し、メタデータ404を生成する。従って、本実施形態は、既存のメタデータを更新させる。
【0074】
図4Bは、本発明の他の実施形態によって生成されるメタデータを図示する。
【0075】
メタデータ生成部130の一実施形態は、既存検索対象項目(図面での人物情報)が記録されているメタデータ452とは別個に、それぞれの検索対象項目462及び464について選択された場面情報482及び484を記録したメタデータ454を新たに生成する。
【0076】
従って、検索対象項目462及び464、及びそれぞれの検索対象項目についての細部情報472及び474を含むメタデータ452と別個に、それぞれの検索対象項目についての場面情報482及び484だけを検索対象項目別に分類しておいたメタデータ454が新たに生成されもする。この場合には、新たに生成されたメタデータ454が、既存のメタデータ452の検索対象項目462及び464との連繋情報を含むことができる。
【0077】
図5は、本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【0078】
段階510で、検索対象項目入力部110は、マルチメディア・データ記録装置100に検索対象項目を入力する。段階520で、マルチメディア・データ記録装置100は、メディアデータを入力される。
【0079】
段階530で、場面分析部120の対比情報抽出部121は、段階520で入力されたメディアデータを分析し、検索対象項目と比較される対比情報を抽出し、類似度測定部122は、段階510で入力された検索対象項目と抽出された対比情報とを比較する。
【0080】
段階540で、場面分析部120の場面決定部123は、現在場面の場面情報が新たにメタデータとして追加されるか否かを判断する。
【0081】
段階550で、メタデータ生成部130の一実施形態は、場面情報を記録するメタデータを新たに生成する。または、メタデータ生成部130の変換部は、場面情報を保存するメタデータをマルチメディア・データフォーマットに変換する。
【0082】
段階560で、メタデータ生成部130は、既存のメタデータ情報と、新たに追加されたメタデータ情報とを合成する。一実施形態は、検索対象項目についての場面情報が既存の検索対象項目が記録されたメタデータに追加する。他の実施形態は、検索対象項目についての場面情報が記録されたメタデータと別個に、場面情報だけ記録されたメタデータを生成できる。
【0083】
段階570で、記録部140は、ペイロード領域にメディアデータを記録し、ヘッダ領域にメタデータを記録し、マルチメディア・データを生成する。
【0084】
段階580で、再生部の一実施形態は、登録された検索対象項目の細部情報を再生する。再生部の他の実施形態は、メタデータに記録された検索対象項目による場面情報を検索し、所望の検索対象項目についての場面だけを再生する。
【0085】
図6は、本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【0086】
図6を参照して、記録部140の動作過程について詳述する。図6で、メディアデータは、入力されつつマルチメディア・データに続けて記録されるので、メタデータがメディアデータの記録と同時に記録されるか否かが判断される。
【0087】
段階610は、段階510と遂行動作が同一である。
【0088】
段階620は、段階540と遂行動作は同一であり、現在場面情報をメタデータに新たに追加するならば、段階630に進む。現在場面情報がメタデータに追加されないならば、段階625が進められる。
【0089】
段階625で、現在場面情報をメタデータに追加しないものであるので、メディアデータだけ保存される。
【0090】
段階630で、メタデータとメディアデータとがマルチメディア・データに同時に記録されるか否かが判断される。もし2つのデータが同時に記録されるならば、段階640に進み、同時に記録されるものではなければ、段階650に進む。
【0091】
段階640で、マルチメディア・データにメディアデータ及びメタデータが同時に記録される。
【0092】
段階660で、メディアデータの入力が完了したか否かを判断する。すなわち、メディアデータの記録が完了したか否かを判断する。もしメディアデータの入力が完了したとすれば、段階690に進み、マルチメディア・データの記録が完了する。
【0093】
メディアデータの入力が完了していないならば、段階640に戻って進められる。
【0094】
段階650で、メディアデータは、マルチメディア・データに記録され、メタデータは、バッファに臨時保存される。
【0095】
段階670で、メディアデータの入力が完了、すなわち、メディアデータの記録が完了しているか否かを判断する。
【0096】
もしメディアデータの入力が完了したとすれば、段階680に進み、メディアデータの入力が完了していないならば、段階660に戻って進められる。
【0097】
段階680で、バッファに臨時保存されていたメタデータがマルチメディア・データに別途に一度に記録された後、段階690に進み、マルチメディア・データの記録が完了する。
【0098】
図7は、本発明の一実施形態によって人物情報を検索する方法を図示する。図7を参考にして、再生部の一実施形態の検索対象項目及び基本細部情報の再生機能及び検索機能について説明する。図7は、検索対象項目として、ブックマーク、人物、チャプタを有する場合を例にとる。
【0099】
アイコン712,714及び716は、検索単位になる検索対象項目を図示している。
【0100】
アイコン722,724及び726は、人物情報として登録されたそれぞれの人物を示す映像を図示している。
【0101】
情報734は、選択された人物の基本細部情報であり、映像742,744及び746は、選択された人物の出演場面を図示する。
【0102】
再生部の一実施形態は、ユーザが特定人物の出演場面を検索したい場合、検索メニュー710の人物アイコン714を選択すれば、下位フレーム720で登録された人物722,724及び726を確認することができる。
【0103】
ユーザがどの人物726かを選択すれば、再生部は、選択された人物726についての細部情報及び場面情報を表示する情報メニュー730を再生する。選択された人物726についての情報メニュー730は、マルチメディア・データ記録装置100に入力された基本細部情報734を画面に表示し、メタデータに記録された場面時点の場面を表示する映像742,744及び746を画面に表示する。従って、ユーザが出演場面のうち一つを選択すれば、再生部は、その出演時点の場面を検索して再生できる。
【0104】
図8は、本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明している。
【0105】
マルチメディア・データ記録装置100の一実施形態であるデジタル・カムコーダ810は、自主的にマルチメディア・データを再生させることができる再生画面820を有することができる。再生画面820は、検索対象項目のアイコンが羅列された検索メニュー830、及び現在のマルチメディア・データが再生される再生窓840を具備する。
【0106】
マルチメディア・データ記録装置100の一実施形態は、ユーザ要請によって、検索対象項目及び現在場面を対応させるためのユーザインターフェースを含む。場面選択部120の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。ユーザインターフェースは、html形態でありうる。
【0107】
すなわち、説明の便宜のために、デジタル・カムコーダ810を例にとれば、ユーザが現在撮影している映像を再生窓820の1フレーム840を介して確認することができ、再生窓820には、ユーザがあらかじめ登録しておいたそれぞれの検索対象項目が配列されているフレーム830が配されたユーザインターフェースが備わっている。検索対象項目は、人物情報、チャプタ情報などを含む。
【0108】
ユーザがフレーム840を介して現在撮影されている場面を見ていて、現在場面を特定検索対象項目に対応させたいとき、フレーム830の当該検索対象項目のアイコンを選択すれば、現在場面の場面情報が、当該検索対象項目の場面情報として決定されうる。
【0109】
ユーザインターフェースの一実施形態は、検索対象項目が選択されるために、それぞれの検索対象項目を示す映像アイコンを含む。映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されうる。
【0110】
図9は、本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートを図示している。
【0111】
段階910で、検索対象になるメディアデータの場面を分類するための少なくとも1つの分類基準項目が入力される。
【0112】
段階920で、メディアデータの入力途中で、それぞれの分類基準項目に対応する少なくとも1つの場面が選択される。
【0113】
段階930で、選択された場面のインデックスまたは再生時点のうち、少なくとも1つである場面情報がメタデータに記録される。
【0114】
段階940で、メタデータがヘッダ領域に記録され、メディアデータがペイロード領域に記録され、マルチメディア・データが生成される。
【0115】
図10は、本発明の一実施形態によるマルチメディア・データ再生装置のブロック図を示している。
【0116】
一実施形態によるマルチメディア・データ再生装置150は、検索対象項目選択部160、メタデータ決定部170、情報再生部180及び場面再生部190を含む。
【0117】
図11は、本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートを図示している。
【0118】
段階1010で、検索対象項目選択部160は、検索する場面の検索対象項目を選択する。
【0119】
段階1020で、メタデータ決定部170は、検索対象項目に係わるメタデータを決定する。
【0120】
段階1030で、情報再生部180は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報または代表特徴情報を抽出して再生する。
【0121】
段階1040で、場面再生部190は、決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データが再生される。
【0122】
一方、前述の本発明の実施形態は、コンピュータで実行されうるプログラムとして作成可能であり、コンピュータで読み取り可能な記録媒体を利用し、前記プログラムを動作させる汎用デジタル・コンピュータで具現されうる。前記コンピュータで読み取り可能な記録媒体は、マグネチック記録媒体(例えば、ROM(read-only memory)、フロッピー(登録商標)ディスク、ハードディスクなど)、光学的判読媒体(例えば、CD−ROM、DVDなど)を含む。
【技術分野】
【0001】
本発明は、マルチメディア・データの記録方法及び装置に係り、さらに詳細には、多様な再生機能を具現できるマルチメディア・データを記録する方法及び装置に関する。
【背景技術】
【0002】
最近、商業的なコンテンツ提供者(contents provider)だけではなく、一般的な個人ユーザも、デジタル・カムコーダまたはデジタルカメラのようなデジタル映像撮像装置を利用して、多様なマルチメディア・コンテンツを制作する。特に、UCC(user created content)が個人用ブログだけではなく、商業的にも利用されており、日々表現する情報の範囲が広くなっている。
【0003】
UCCのユーザ層が広くなって、制作レベルが高まるにつれ、UCCを撮影するためのマルチメディア撮影装置及びマルチメディア・データ記録装置は、さらに多くの機能を具現できることを期待されている。
【0004】
DVD(digital versatile disc)のように、コンテンツ提供者から提供される保存型メディア(packaged media)は、マルチメディア再生機を介して多様な方法で再生され、メディアファイル内にメタデータを有している。既存のメディアファイルは、単純に再生できるデータだけが記録されており、付加的な機能のための細部検索対象項目のためのメタデータが記録されていない。
【発明の概要】
【発明が解決しようとする課題】
【0005】
本発明のマルチメディア・データの記録方法は、メタデータを新たに生成したり、既存のメタデータを更新することによって、多様な再生機能を具現できるマルチメディア・データを記録する方法を提案する。
【0006】
また、多様な再生機能を具現するために、あらかじめ登録された検索対象項目を介して、自動的に検索対象項目と関連した場面についての情報を収集してメタデータに記録する方法を提案する。
【0007】
また、ユーザの決定によって、検索対象項目と関連した場面情報を収集してメタデータに記録する方法を提案する。
【課題を解決するための手段】
【0008】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データの記録方法は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される段階、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも1つの場面を選択する段階、選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成する段階、及びメタデータをヘッダ領域に記録してメディアデータをペイロード領域に記録する段階を含む。
【0009】
一実施形態の検索対象項目の入力段階は、検索対象項目がデータベースまたは既生成のメタデータから入力される。
【0010】
一実施形態のメタデータ生成段階は、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換する段階をさらに含む。
【0011】
一実施形態のメタデータ生成段階は、検索対象項目を含むメタデータを生成する段階、及び検索対象項目が含まれたメタデータが場面情報を含むように更新する段階を含む。
【0012】
一実施形態のメタデータ生成段階は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【0013】
一実施形態の記録段階は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【0014】
他の実施形態の記録段階は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【0015】
一実施形態の検索対象項目の入力段階は、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報を入力される段階をさらに含み、場面選択段階は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する段階、抽出された対比情報と代表特徴情報との類似度を測定する段階、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として決定する段階をさらに含む。
【0016】
一実施形態の場面選択段階は、検索対象項目及び現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【0017】
一実施形態のユーザインターフェースは、検索対象項目が選択されるためにそれぞれの検索対象項目を示す映像アイコンを含み、映像アイコンは、現在場面を利用して新しい映像アイコンに更新される。
【0018】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ再生方法は、検索する場面の検索対象項目が選択される段階、検索対象項目に係わるメタデータを決定する段階、及び決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する段階を含む。
【0019】
一実施形態は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報及び代表特徴情報を抽出して再生する段階をさらに含む。
【0020】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ記録装置は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される検索対象項目入力部、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも1つの場面を選択する場面選択部、選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成するメタデータ生成部、及びメタデータをヘッダ領域に記録し、メディアデータをペイロードに領域に記録する記録部を含む。
【0021】
本発明は、本発明の一実施形態によるマルチメディア・データの記録方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【0022】
また本発明は、本発明の一実施形態によるマルチメディア・データ再生方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【発明の効果】
【0023】
従って、本発明のマルチメディア・データの記録方法及び装置は、検索対象項目に関連した場面情報を記録したメタデータを新たに生成したり、既存のメタデータを更新することによって、ユーザが所望の検索対象項目を再生したり、検索対象項目に関する場面を再生する効果がある。
【0024】
また、本発明を介して記録されたマルチメディア・データによって、マルチメディア再生機が、マルチメディア・コンテンツの再生及び検索のような多様な機能を容易に具現できる。
【0025】
一般ユーザが作ったマルチメディア・コンテンツにも、自動的に新しいメタデータの挿入及び既存のメタデータの更新が可能なので、ユーザが容易にマルチメディア・コンテンツを制作できる。
【0026】
本発明についてその望ましい実施形態を中心に述べるが、本発明が属する技術分野で当業者は、本発明が本発明の本質的な特性から外れない範囲で変形された形態で具現されうることを理解することができるであろう。従って、開示された実施形態は、限定的な観点ではなくして、説明的な観点から考慮されねばならない。本発明の範囲は、前述の説明ではなくして特許請求の範囲に示されており、それと同等な範囲内にあるあらゆる差異点は、本発明に含まれたものであると解釈されねばならない。
【図面の簡単な説明】
【0027】
【図1A】本発明の一実施形態によるマルチメディア・データ記録装置のブロック図である。
【図1B】本発明の一実施形態によるマルチメディア・データ記録装置の場面選択部のブロック図である。
【図2】本発明の一実施形態によるマルチメディア・データ記録装置の概要を図示する図である。
【図3】本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明する図である。
【図4A】本発明の一実施形態によって更新されるメタデータを図示する図である。
【図4B】本発明の他の実施形態によって生成されるメタデータを図示する図である。
【図5】本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図6】本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図7】本発明の一実施形態によって人物情報を検索する方法を図示する図である。
【図8】本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明する図である。
【図9】本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートである。
【図10】本発明の一実施形態によるマルチメディア・データ再生装置のブロック図である。
【図11】本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートである。
【発明を実施するための形態】
【0028】
以下、本発明の一実施形態によるマルチメディア・データの記録方法及び装置について説明する。
【0029】
図1Aは、本発明の一実施形態によるマルチメディア・データ記録装置のブロック図を図示している。
【0030】
本発明の一実施形態によるマルチメディア・データ記録装置100は、検索対象項目入力部110、場面選択部120、メタデータ生成部130及び記録部140を含む。
【0031】
検索対象項目入力部110は、ユーザの入力によって、検索対象になるメディアデータの場面を分類するための少なくとも1つの検索対象項目を入力され、検索対象項目を場面選択部120に出力する。
【0032】
検索対象項目入力部110は、検索対象項目を、データベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されうる。また、検索対象項目入力部110は、ユーザの入力によって、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力されうる。
【0033】
検索対象項目入力部110は、以下の図2を参照して詳述する。
【0034】
場面選択部120は、メディアデータと、検索対象項目入力部110からの検索対象項目とを入力され、メディアデータの入力途中で、メディアデータの場面のうち、登録されたそれぞれの検索対象項目に対応する少なくとも1つの場面を選択し、メタデータ生成部130に出力する。
【0035】
本発明の一実施形態で、メディアデータは、撮影または録画されることによって入力されうる。
【0036】
図1Bによれば、場面選択部120は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する対比情報抽出部121、抽出された対比情報と代表特徴情報との類似度を測定する類似度測定部122、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する場面決定部123を含む。
【0037】
メタデータ生成部130は、場面選択部120から入力された選択された場面のインデックスまたは再生時点のうち、少なくとも1つである場面情報を含むメタデータを生成し、記録部140に出力する。
【0038】
メタデータ生成部130の一実施形態は、図面には図示されていないが、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含む。
【0039】
メタデータ生成部130の一実施形態は、検索対象項目を含むメタデータに生成し、検索対象項目が含まれたメタデータが場面情報を含むように更新する。
【0040】
また、メタデータ生成部130の他の実施形態は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【0041】
場面選択部120、メタデータ生成部130は、以下の図3を参照しつつ詳述する。
【0042】
記録部140は、メタデータ生成部130からメタデータを入力されてメディアデータを入力され、メタデータをヘッダ領域に記録して、メディアデータをペイロード領域に記録することによって、マルチメディア・データを生成する。
【0043】
記録部140の一実施形態は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【0044】
記録部140の他の実施形態は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【0045】
記録部140は以下の図3、図4A、図4B及び図6を参照しつつ詳述する。
【0046】
図面には図示されていないが、マルチメディア・データ記録装置100は、ユーザ要請によって、前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースをさらに含む。マルチメディア・データ記録装置100が、ユーザインターフェースを有する場合、場面選択部120の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【0047】
また、本発明の一実施形態は、現在記録されているコンテンツが、リアルタイムで再生されたり、所望のマルチメディア・データから検索対象項目を検索して再生できる再生部を含むことができる。
【0048】
図2は、本発明の一実施形態によるマルチメディア・データ記録装置100の概要を図示している。図2では、マルチメディア・データ記録装置100の一実施形態として、デジタル・カムコーダ200を利用し、検索対象項目入力部110を中心に、マルチメディア・データ記録装置100の機能について詳述する。
【0049】
デジタル・カムコーダ200は、獲得された画像及び音響情報を含むメディアデータを、マルチメディア・データに記録することによって、マルチメディア・データを生成する。
【0050】
検索対象項目入力部110の一実施形態は、メディアデータが入力される前、ユーザがあらかじめ検索対象項目をマルチメディア・データ記録装置100の臨時データベースに保存しておく。一実施形態は、メディアデータを登場人物によって処理するために、ユーザが、人物情報210を設定してあらかじめ入力され、デジタル・カムコーダ200のデータベースに保存しておく。人物情報210は、登場人物「父」、「母」、「末っ子」、「長女」を含み、それぞれの人物は、氏名、生年月日、結婚記念日、兄弟関係、職業のような基本細部情報が設定される。
【0051】
検索対象項目入力部110の一実施形態で、基本細部情報は更新が可能であり、細部情報のヒストリ(history)情報が保存されうる。また、基本細部情報は、XML(extensible markup language)形態で保存されうる。
【0052】
検索対象項目入力部110の一実施形態は、それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力される。例えば、人物情報においては、当該人物の声、写真などが代表特徴情報として登録され、類似度測定時に使われる。
【0053】
デジタル・カムコーダ200が利用する検索対象項目がすでに保存されているデータベースに保存されていたり、現在メタデータにすでに保存されている場合には、データベースまたはメタデータから、検索対象項目を入力されうる。
【0054】
デジタル・カムコーダ200は、人物情報210を利用して生成された場面情報をメタデータ220に記録し、獲得されたメディアデータ及びメタデータ220を、マルチメディア・データ230に記録する。
【0055】
再生機器240は、マルチメディア・データ230を再生する。再生機器240は、マルチメディア・データ記録装置200それ自体でもあり、他の再生機器240が、マルチメディア・データ記録装置200によって生成されたマルチメディア・データ230を再生することもできる。
【0056】
図3は、本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明している。図3を参考にして、場面選択部120、メタデータ生成部130及び記録部140について詳述する。場面選択部120の対比情報抽出部121、類似度測定部122及び場面決定部123の機能も共に説明する。
【0057】
あらかじめ検索対象項目入力部110が、ユーザによって入力された人物情報を入力され(段階310)、マルチメディア・データ記録装置は100は、臨時保存部またはデータベースに人物情報を保存しておくことができる。
【0058】
マルチメディア・データ記録装置100にメディアデータが入力されれば(段階310)、メタデータ生成部130は、臨時保存部またはデータベースから人物情報を入力され、メディアデータから人物情報に対応する場面情報を抽出し、検索対象項目に対する場面情報を含むメタデータを生成する(段階330)。
【0059】
場面情報を含むメタデータを生成する過程(段階330)について順に述べれば、検索対象になる人物が当該場面に含まれているか否かを分析し(段階332)、メタデータ・フォーマットを変換し(段階334)、メタデータを生成したり更新する(段階336)。
【0060】
さらに詳細に述べれば、場面分析過程(段階332)で、場面選択部120の場面情報抽出部121は、入力されるメディアデータの現在場面を分析し、前記検索対象項目の関連情報を抽出する。また、場面選択部120の類似度測定部122は、抽出された関連情報及び前記メタデータの検索対象項目の代表特徴情報との類似度を測定する。場面選択部120の場面決定部123は、類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する。
【0061】
場面選択部120の一実施形態は、検索対象項目についての登録された代表特徴情報として人物の写真を具備し、入力されたメディアデータが圧縮された映像である場合、顔認識技法などを介して、メディアデータのIフレーム(in frame)の登場人物と、登録された写真との類似度を測定することによって、分析及び比較する。
【0062】
また他の実施形態は、入力されるメディアデータの特定シーケンスを指定し、当該シーケンス内の映像での人物だけを分析して類似度を測定する。
【0063】
入力されるメディアデータが音響である場合、登録された特徴情報である人物の音声と入力された音響との類似度が測定されて判読されうる。
【0064】
また、人物が頻繁に使用する単語が、人物情報の代表特徴情報として登録された場合、入力されたメディアデータの音響のうち、当該単語が言及されているか否か音響分析を介して分析されうる。
【0065】
フォーマット変換段階(段階334)で、メタデータ生成部130のフォーマット変換部は、場面情報が記録されたメタデータを、マルチメディア・データに合うフォーマットに変換する。また、メタデータ生成部130の一実施形態は、検索対象項目に対応する場面情報を記録するためのメタデータを、マルチメディア・データフォーマットに合うように新たに生成する。メタデータ生成部130の一実施形態は、メタデータに当該人物が登場した場面の時点を場面情報として記録する。
【0066】
メタデータ生成または更新過程(段階336)で、メタデータ生成部130の一実施形態は、メタデータの既存情報に場面情報を追加して記録する。メタデータ生成部130の他の実施形態は、既存のメタデータと別個に、場面情報を記録した新しいメタデータを生成する。
【0067】
記録部140は、メタデータをヘッダ領域に記録し、かつメディアデータをペイロード領域に記録してマルチメディア・データを生成する(段階340)。ペイロード領域にメディアデータが記録され(段階342)、ヘッダ領域にメタデータ領域が記録される(段階344)。
【0068】
記録部140の一実施形態は、メディアデータ記録(段階342)及びメタデータ記録(段階344)を同時に遂行する。すなわち、メディアデータがペイロード領域に記録されると同時に、メタデータがヘッダ領域に記録される。記録部140の他の実施形態は、メディアデータを記録(段階342)した後に、メタデータを記録(段階344)する。すなわち、メディアデータが、ペイロード領域にいずれも記録された後、メタデータがヘッダ領域に記録される。
【0069】
以下、図4A及び図4Bを参考にして、マルチメディア・データ記録装置100によって生成されるマルチメディア・データの実施形態について説明する。
【0070】
図4Aは、本発明の一実施形態によって更新されるメタデータを図示する。
【0071】
メタデータ生成部130は、場面選択部120で選択された場面の場面情報をメタデータに記録する。
【0072】
一実施形態は、更新される前のメタデータ402は、検索対象項目(図面での人物情報412及び414)だけ記録されている。一実施形態は、検索対象項目412及び414だけではなく、それぞれの検索対象項目についての細部情報422及び424を含むこともできる。
【0073】
メタデータ生成部130は、場面選択部120でそれぞれの検索対象項目412及び414について選択された場面情報432及び434を、メタデータ402にさらに記録し、メタデータ404を生成する。従って、本実施形態は、既存のメタデータを更新させる。
【0074】
図4Bは、本発明の他の実施形態によって生成されるメタデータを図示する。
【0075】
メタデータ生成部130の一実施形態は、既存検索対象項目(図面での人物情報)が記録されているメタデータ452とは別個に、それぞれの検索対象項目462及び464について選択された場面情報482及び484を記録したメタデータ454を新たに生成する。
【0076】
従って、検索対象項目462及び464、及びそれぞれの検索対象項目についての細部情報472及び474を含むメタデータ452と別個に、それぞれの検索対象項目についての場面情報482及び484だけを検索対象項目別に分類しておいたメタデータ454が新たに生成されもする。この場合には、新たに生成されたメタデータ454が、既存のメタデータ452の検索対象項目462及び464との連繋情報を含むことができる。
【0077】
図5は、本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【0078】
段階510で、検索対象項目入力部110は、マルチメディア・データ記録装置100に検索対象項目を入力する。段階520で、マルチメディア・データ記録装置100は、メディアデータを入力される。
【0079】
段階530で、場面分析部120の対比情報抽出部121は、段階520で入力されたメディアデータを分析し、検索対象項目と比較される対比情報を抽出し、類似度測定部122は、段階510で入力された検索対象項目と抽出された対比情報とを比較する。
【0080】
段階540で、場面分析部120の場面決定部123は、現在場面の場面情報が新たにメタデータとして追加されるか否かを判断する。
【0081】
段階550で、メタデータ生成部130の一実施形態は、場面情報を記録するメタデータを新たに生成する。または、メタデータ生成部130の変換部は、場面情報を保存するメタデータをマルチメディア・データフォーマットに変換する。
【0082】
段階560で、メタデータ生成部130は、既存のメタデータ情報と、新たに追加されたメタデータ情報とを合成する。一実施形態は、検索対象項目についての場面情報が既存の検索対象項目が記録されたメタデータに追加する。他の実施形態は、検索対象項目についての場面情報が記録されたメタデータと別個に、場面情報だけ記録されたメタデータを生成できる。
【0083】
段階570で、記録部140は、ペイロード領域にメディアデータを記録し、ヘッダ領域にメタデータを記録し、マルチメディア・データを生成する。
【0084】
段階580で、再生部の一実施形態は、登録された検索対象項目の細部情報を再生する。再生部の他の実施形態は、メタデータに記録された検索対象項目による場面情報を検索し、所望の検索対象項目についての場面だけを再生する。
【0085】
図6は、本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【0086】
図6を参照して、記録部140の動作過程について詳述する。図6で、メディアデータは、入力されつつマルチメディア・データに続けて記録されるので、メタデータがメディアデータの記録と同時に記録されるか否かが判断される。
【0087】
段階610は、段階510と遂行動作が同一である。
【0088】
段階620は、段階540と遂行動作は同一であり、現在場面情報をメタデータに新たに追加するならば、段階630に進む。現在場面情報がメタデータに追加されないならば、段階625が進められる。
【0089】
段階625で、現在場面情報をメタデータに追加しないものであるので、メディアデータだけ保存される。
【0090】
段階630で、メタデータとメディアデータとがマルチメディア・データに同時に記録されるか否かが判断される。もし2つのデータが同時に記録されるならば、段階640に進み、同時に記録されるものではなければ、段階650に進む。
【0091】
段階640で、マルチメディア・データにメディアデータ及びメタデータが同時に記録される。
【0092】
段階660で、メディアデータの入力が完了したか否かを判断する。すなわち、メディアデータの記録が完了したか否かを判断する。もしメディアデータの入力が完了したとすれば、段階690に進み、マルチメディア・データの記録が完了する。
【0093】
メディアデータの入力が完了していないならば、段階640に戻って進められる。
【0094】
段階650で、メディアデータは、マルチメディア・データに記録され、メタデータは、バッファに臨時保存される。
【0095】
段階670で、メディアデータの入力が完了、すなわち、メディアデータの記録が完了しているか否かを判断する。
【0096】
もしメディアデータの入力が完了したとすれば、段階680に進み、メディアデータの入力が完了していないならば、段階660に戻って進められる。
【0097】
段階680で、バッファに臨時保存されていたメタデータがマルチメディア・データに別途に一度に記録された後、段階690に進み、マルチメディア・データの記録が完了する。
【0098】
図7は、本発明の一実施形態によって人物情報を検索する方法を図示する。図7を参考にして、再生部の一実施形態の検索対象項目及び基本細部情報の再生機能及び検索機能について説明する。図7は、検索対象項目として、ブックマーク、人物、チャプタを有する場合を例にとる。
【0099】
アイコン712,714及び716は、検索単位になる検索対象項目を図示している。
【0100】
アイコン722,724及び726は、人物情報として登録されたそれぞれの人物を示す映像を図示している。
【0101】
情報734は、選択された人物の基本細部情報であり、映像742,744及び746は、選択された人物の出演場面を図示する。
【0102】
再生部の一実施形態は、ユーザが特定人物の出演場面を検索したい場合、検索メニュー710の人物アイコン714を選択すれば、下位フレーム720で登録された人物722,724及び726を確認することができる。
【0103】
ユーザがどの人物726かを選択すれば、再生部は、選択された人物726についての細部情報及び場面情報を表示する情報メニュー730を再生する。選択された人物726についての情報メニュー730は、マルチメディア・データ記録装置100に入力された基本細部情報734を画面に表示し、メタデータに記録された場面時点の場面を表示する映像742,744及び746を画面に表示する。従って、ユーザが出演場面のうち一つを選択すれば、再生部は、その出演時点の場面を検索して再生できる。
【0104】
図8は、本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明している。
【0105】
マルチメディア・データ記録装置100の一実施形態であるデジタル・カムコーダ810は、自主的にマルチメディア・データを再生させることができる再生画面820を有することができる。再生画面820は、検索対象項目のアイコンが羅列された検索メニュー830、及び現在のマルチメディア・データが再生される再生窓840を具備する。
【0106】
マルチメディア・データ記録装置100の一実施形態は、ユーザ要請によって、検索対象項目及び現在場面を対応させるためのユーザインターフェースを含む。場面選択部120の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。ユーザインターフェースは、html形態でありうる。
【0107】
すなわち、説明の便宜のために、デジタル・カムコーダ810を例にとれば、ユーザが現在撮影している映像を再生窓820の1フレーム840を介して確認することができ、再生窓820には、ユーザがあらかじめ登録しておいたそれぞれの検索対象項目が配列されているフレーム830が配されたユーザインターフェースが備わっている。検索対象項目は、人物情報、チャプタ情報などを含む。
【0108】
ユーザがフレーム840を介して現在撮影されている場面を見ていて、現在場面を特定検索対象項目に対応させたいとき、フレーム830の当該検索対象項目のアイコンを選択すれば、現在場面の場面情報が、当該検索対象項目の場面情報として決定されうる。
【0109】
ユーザインターフェースの一実施形態は、検索対象項目が選択されるために、それぞれの検索対象項目を示す映像アイコンを含む。映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されうる。
【0110】
図9は、本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートを図示している。
【0111】
段階910で、検索対象になるメディアデータの場面を分類するための少なくとも1つの分類基準項目が入力される。
【0112】
段階920で、メディアデータの入力途中で、それぞれの分類基準項目に対応する少なくとも1つの場面が選択される。
【0113】
段階930で、選択された場面のインデックスまたは再生時点のうち、少なくとも1つである場面情報がメタデータに記録される。
【0114】
段階940で、メタデータがヘッダ領域に記録され、メディアデータがペイロード領域に記録され、マルチメディア・データが生成される。
【0115】
図10は、本発明の一実施形態によるマルチメディア・データ再生装置のブロック図を示している。
【0116】
一実施形態によるマルチメディア・データ再生装置150は、検索対象項目選択部160、メタデータ決定部170、情報再生部180及び場面再生部190を含む。
【0117】
図11は、本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートを図示している。
【0118】
段階1010で、検索対象項目選択部160は、検索する場面の検索対象項目を選択する。
【0119】
段階1020で、メタデータ決定部170は、検索対象項目に係わるメタデータを決定する。
【0120】
段階1030で、情報再生部180は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報または代表特徴情報を抽出して再生する。
【0121】
段階1040で、場面再生部190は、決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データが再生される。
【0122】
一方、前述の本発明の実施形態は、コンピュータで実行されうるプログラムとして作成可能であり、コンピュータで読み取り可能な記録媒体を利用し、前記プログラムを動作させる汎用デジタル・コンピュータで具現されうる。前記コンピュータで読み取り可能な記録媒体は、マグネチック記録媒体(例えば、ROM(read-only memory)、フロッピー(登録商標)ディスク、ハードディスクなど)、光学的判読媒体(例えば、CD−ROM、DVDなど)を含む。
【特許請求の範囲】
【請求項1】
マルチメディア・データを記録する方法において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される段階と、
前記メディアデータの入力途中で、前記それぞれの検索対象項目に対応する少なくとも1つの場面を選択する段階と、
前記選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成する段階と、
前記メタデータをヘッダ領域に記録し、前記メディアデータをペイロード領域に記録する段階とを含むことを特徴とするマルチメディア・データの記録方法。
【請求項2】
前記検索対象項目の入力段階は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項3】
前記メタデータ生成段階は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換する段階をさらに含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項4】
前記メタデータ生成段階は、
前記検索対象項目を含むメタデータを生成する段階と、
前記検索対象項目が含まれたメタデータが、前記場面情報を含むように更新する段階とを含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項5】
前記メタデータ生成段階は、前記選択された場面の場面情報及び前記検索対象項目との連繋情報を含むメタデータを生成することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項6】
前記記録段階は、前記メディアデータを前記ペイロード領域に記録する同時に、前記メタデータを前記ヘッダ領域に記録することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項7】
前記記録段階は、前記メディアデータを前記ペイロード領域にいずれも記録した後、前記メタデータを、前記ヘッダ領域に記録することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項8】
前記検索対象項目の入力段階は、前記それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報を入力される段階をさらに含み、
前記場面選択段階は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する段階と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する段階と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する段階とを含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項9】
前記場面選択段階は、
前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を前記検索対象項目のうち、いずれか一つに対応させることによって、前記メディアデータの場面を選択することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項10】
前記ユーザインターフェースは、前記検索対象項目が選択されるために、前記それぞれの検索対象項目を示す映像アイコンを含み、
前記映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されることを特徴とする請求項9に記載のマルチメディア・データの記録方法。
【請求項11】
検索する場面の検索対象項目が選択される段階と、
前記検索対象項目に係わるメタデータを決定する段階と、
前記決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する段階とを含むことを特徴とするマルチメディア・データ再生方法。
【請求項12】
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する段階をさらに含むことを特徴とする請求項11に記載のマルチメディア・データ再生方法。
【請求項13】
マルチメディア・データを記録する装置において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される検索対象項目入力部と、
前記メディアデータの入力途中で、前記それぞれの検索対象項目に対応する少なくとも1つの場面を選択する場面選択部と、
前記選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成するメタデータ生成部と、
前記メタデータをヘッダ領域に記録し、前記メディアデータをペイロード領域に記録する記録部とを含むことを特徴とするマルチメディア・データ記録装置。
【請求項14】
前記検索対象項目入力部は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項15】
前記メタデータ生成部は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含むことを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項16】
前記メタデータ生成部は、
前記検索対象項目を含むメタデータを生成し、
前記検索対象項目が含まれたメタデータが前記場面情報を含むように、更新することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項17】
前記メタデータ生成部は、前記選択された場面の場面情報及び前記検索対象項目との連繋情報を含むメタデータを生成することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項18】
前記記録部は、前記メディアデータを前記ペイロード領域に記録すると同時に、前記メタデータを、前記ヘッダ領域に記録することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項19】
前記記録部は、前記メディアデータを前記ペイロード領域にいずれも記録した後、前記メタデータを前記ヘッダ領域に記録することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項20】
前記検索対象項目入力部は、前記それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力され、
前記場面選択部は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する対比情報抽出部と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する類似度測定部と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する場面決定部とをさらに含むことを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項21】
前記場面選択部は、
前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を前記検索対象項目のうち、いずれか一つに対応させることによって、前記メディアデータの場面を選択することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項22】
前記ユーザインターフェースは、前記検索対象項目が選択されるために、前記それぞれの検索対象項目を示す映像アイコンを含み、
前記映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されることを特徴とする請求項21に記載のマルチメディア・データ記録装置。
【請求項23】
検索する場面の検索対象項目が選択される検索対象項目選択部と、
前記検索対象項目に係わるメタデータを決定するメタデータ決定部と、
前記決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する場面再生部とを含むことを特徴とするマルチメディア・データ再生装置。
【請求項24】
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する情報再生部をさらに含むことを特徴とする請求項23に記載のマルチメディア・データ再生装置。
【請求項25】
請求項1に記載のマルチメディア・データの記録方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な可能な記録媒体。
【請求項26】
請求項11に記載のマルチメディア・データ再生方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な可能な記録媒体。
【請求項1】
マルチメディア・データを記録する方法において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される段階と、
前記メディアデータの入力途中で、前記それぞれの検索対象項目に対応する少なくとも1つの場面を選択する段階と、
前記選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成する段階と、
前記メタデータをヘッダ領域に記録し、前記メディアデータをペイロード領域に記録する段階とを含むことを特徴とするマルチメディア・データの記録方法。
【請求項2】
前記検索対象項目の入力段階は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項3】
前記メタデータ生成段階は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換する段階をさらに含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項4】
前記メタデータ生成段階は、
前記検索対象項目を含むメタデータを生成する段階と、
前記検索対象項目が含まれたメタデータが、前記場面情報を含むように更新する段階とを含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項5】
前記メタデータ生成段階は、前記選択された場面の場面情報及び前記検索対象項目との連繋情報を含むメタデータを生成することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項6】
前記記録段階は、前記メディアデータを前記ペイロード領域に記録する同時に、前記メタデータを前記ヘッダ領域に記録することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項7】
前記記録段階は、前記メディアデータを前記ペイロード領域にいずれも記録した後、前記メタデータを、前記ヘッダ領域に記録することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項8】
前記検索対象項目の入力段階は、前記それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報を入力される段階をさらに含み、
前記場面選択段階は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する段階と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する段階と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する段階とを含むことを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項9】
前記場面選択段階は、
前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を前記検索対象項目のうち、いずれか一つに対応させることによって、前記メディアデータの場面を選択することを特徴とする請求項1に記載のマルチメディア・データの記録方法。
【請求項10】
前記ユーザインターフェースは、前記検索対象項目が選択されるために、前記それぞれの検索対象項目を示す映像アイコンを含み、
前記映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されることを特徴とする請求項9に記載のマルチメディア・データの記録方法。
【請求項11】
検索する場面の検索対象項目が選択される段階と、
前記検索対象項目に係わるメタデータを決定する段階と、
前記決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する段階とを含むことを特徴とするマルチメディア・データ再生方法。
【請求項12】
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する段階をさらに含むことを特徴とする請求項11に記載のマルチメディア・データ再生方法。
【請求項13】
マルチメディア・データを記録する装置において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも1つの検索対象項目を入力される検索対象項目入力部と、
前記メディアデータの入力途中で、前記それぞれの検索対象項目に対応する少なくとも1つの場面を選択する場面選択部と、
前記選択された場面のインデックスまたは再生時点のうち、少なくとも1つの場面情報を含むメタデータを生成するメタデータ生成部と、
前記メタデータをヘッダ領域に記録し、前記メディアデータをペイロード領域に記録する記録部とを含むことを特徴とするマルチメディア・データ記録装置。
【請求項14】
前記検索対象項目入力部は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項15】
前記メタデータ生成部は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含むことを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項16】
前記メタデータ生成部は、
前記検索対象項目を含むメタデータを生成し、
前記検索対象項目が含まれたメタデータが前記場面情報を含むように、更新することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項17】
前記メタデータ生成部は、前記選択された場面の場面情報及び前記検索対象項目との連繋情報を含むメタデータを生成することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項18】
前記記録部は、前記メディアデータを前記ペイロード領域に記録すると同時に、前記メタデータを、前記ヘッダ領域に記録することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項19】
前記記録部は、前記メディアデータを前記ペイロード領域にいずれも記録した後、前記メタデータを前記ヘッダ領域に記録することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項20】
前記検索対象項目入力部は、前記それぞれの検索対象項目を表現できる少なくとも1つの代表特徴情報をさらに入力され、
前記場面選択部は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する対比情報抽出部と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する類似度測定部と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する場面決定部とをさらに含むことを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項21】
前記場面選択部は、
前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を前記検索対象項目のうち、いずれか一つに対応させることによって、前記メディアデータの場面を選択することを特徴とする請求項13に記載のマルチメディア・データ記録装置。
【請求項22】
前記ユーザインターフェースは、前記検索対象項目が選択されるために、前記それぞれの検索対象項目を示す映像アイコンを含み、
前記映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されることを特徴とする請求項21に記載のマルチメディア・データ記録装置。
【請求項23】
検索する場面の検索対象項目が選択される検索対象項目選択部と、
前記検索対象項目に係わるメタデータを決定するメタデータ決定部と、
前記決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する場面再生部とを含むことを特徴とするマルチメディア・データ再生装置。
【請求項24】
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する情報再生部をさらに含むことを特徴とする請求項23に記載のマルチメディア・データ再生装置。
【請求項25】
請求項1に記載のマルチメディア・データの記録方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な可能な記録媒体。
【請求項26】
請求項11に記載のマルチメディア・データ再生方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な可能な記録媒体。
【図1A】
【図1B】
【図2】
【図3】
【図4A】
【図4B】
【図5】
【図6】
【図8】
【図9】
【図10】
【図11】
【図7】
【図1B】
【図2】
【図3】
【図4A】
【図4B】
【図5】
【図6】
【図8】
【図9】
【図10】
【図11】
【図7】
【公表番号】特表2010−539628(P2010−539628A)
【公表日】平成22年12月16日(2010.12.16)
【国際特許分類】
【出願番号】特願2010−524769(P2010−524769)
【出願日】平成20年3月5日(2008.3.5)
【国際出願番号】PCT/KR2008/001237
【国際公開番号】WO2009/035193
【国際公開日】平成21年3月19日(2009.3.19)
【出願人】(503447036)サムスン エレクトロニクス カンパニー リミテッド (2,221)
【Fターム(参考)】
【公表日】平成22年12月16日(2010.12.16)
【国際特許分類】
【出願日】平成20年3月5日(2008.3.5)
【国際出願番号】PCT/KR2008/001237
【国際公開番号】WO2009/035193
【国際公開日】平成21年3月19日(2009.3.19)
【出願人】(503447036)サムスン エレクトロニクス カンパニー リミテッド (2,221)
【Fターム(参考)】
[ Back to top ]