色温度を用いた映像ブラウジング装置及びその方法
【課題】色温度を用いた映像ブラウジング装置を提供する。
【解決手段】映像ブラウジング装置は、多数の映像データを記憶するデータ記憶部と、映像の各々に対する色温度を計算し、計算された色温度をデータ記憶部に記憶する色温度計算部と、映像ブラウジングモードを入力するための命令入力部、色温度を映像検索条件として用いて入力されたブラウジングモードに該当する映像を分類し、分類された映像をブラウジングする色温度ブラウジング部とを含む。そして、映像ブラウジング方法は、多数の入力映像の色温度を求める段階、色温度をそれに対応する映像と関連して記憶する段階、ブラウジングモードが入力されれば色温度を映像検索条件として用いてブラウジングモードに対応する映像を分類する段階、及び分類された映像をブラウジングする段階を含む。
【解決手段】映像ブラウジング装置は、多数の映像データを記憶するデータ記憶部と、映像の各々に対する色温度を計算し、計算された色温度をデータ記憶部に記憶する色温度計算部と、映像ブラウジングモードを入力するための命令入力部、色温度を映像検索条件として用いて入力されたブラウジングモードに該当する映像を分類し、分類された映像をブラウジングする色温度ブラウジング部とを含む。そして、映像ブラウジング方法は、多数の入力映像の色温度を求める段階、色温度をそれに対応する映像と関連して記憶する段階、ブラウジングモードが入力されれば色温度を映像検索条件として用いてブラウジングモードに対応する映像を分類する段階、及び分類された映像をブラウジングする段階を含む。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は映像ブラウジング装置に係り、特に映像が有する色温度を計算し、これを用いて映像をブラウジングする装置及び方法に関する。
【背景技術】
【０００２】
一般に、カラー映像を識別する方法は色相(hue)、彩度(saturation)、明度(brightness)の３つの知覚変数に分類される。通常、‘カラー’という単語は、緑色や黄色のように色合いを識別する色相を意味する。色相と関連した特徴、例えば映像内の色の空間的分布、色の構造的位置、主要色などに関する情報は映像のディスプレー時、映像の検索のための映像検索条件として使われる。
【０００３】
映像が有している色相は観察者をしてそれぞれ他の感じを有させる。例えば、赤色や黄色トーンの多い映像は観察者に暖かさを感じさせ、青色や紫トーンの多い映像は観察者に冷たさや涼しさを感じさせる。したがって、このような映像の寒暖(heat and cold)に対する人間の認識程度を示す色温度(color temperatureまたはcorrelated color temperature)は、検索内容を定義する重要な条件になる。実際に、多くの商品製作社や広告製作社では、広告を出そうとする商品を表現する時、これを最もよく表現しうる背景映像を探し出すことを重要に思う。例えば、新たに開発されたビールの宣伝ポスターに使われる背景映像を探そうとする時、背景映像は広告コンセプトによって北極海のように涼しい感じの映像が使われたり、熱帯の夕陽のように暑い感じの映像が使われる。この場合、映像の色温度を映像検索に使用すれば、大量の映像を含んでいる映像データベース内で類似した感じの映像を容易に探し出せる。しかし、大部分の映像データは色の空間的分布、色の構造的位置、主要色など、映像の物理的な特徴によって区分されるだけで、定量化された色温度情報を含んでいないために、寒暖のような映像に対する観察者の感じによって所望の映像を容易に検索できない問題点がある。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明が解決しようとする技術的課題は、映像の色温度を求め、これを用いて映像を検索することによって、寒暖のような映像に対する観察者の感じによって映像をブラウジングする装置及び方法を提供するところにある。
【課題を解決するための手段】
【０００５】
前記課題を達成するために本発明に係るブラウジング装置は、映像ブラウジングモードを入力するための命令入力部と、入力映像の色温度を計算する色温度計算部と、前記色温度が前記ブラウジングモードの色温度範囲に該当する場合前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする。
【０００６】
前記課題を達成するために本発明に係るブラウジング装置は、多数の映像データを記憶するデータ記憶部と、前記映像の各々に対する色温度を計算し、計算された前記色温度を前記データ記憶部に記憶する色温度計算部と、映像ブラウジングモードを入力するための命令入力部と、前記色温度を映像検索条件として用いて前記ブラウジングモードに該当する映像を分類し、分類された前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする。
【０００７】
前記ブラウジング装置において、好ましくは、前記色温度は、ケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したものである。また、好ましくは、前記ブラウジングモードは、前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードである。また、好ましくは、前記色温度計算部は、前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、前記照明色を前記色温度に変換する色温度変換部とを含む。また、好ましくは、前記色座標系変換部は、前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する。
【０００８】
前記課題を達成するために本発明に係るブラウジング方法は、ブラウジングモードが入力されれば、入力映像の色温度を求める段階と、前記色温度が前記ブラウジングモードの色温度範囲に属すれば、前記映像をブラウジングする段階とを含むことを特徴とする。
【０００９】
前記課題を達成するために本発明に係るブラウジング方法は、多数の入力映像の色温度を求める段階と、前記色温度をそれに対応する映像と関連して記憶する段階と、ブラウジングモードが入力されれば、前記色温度を映像検索条件として用いて前記ブラウジングモードに対応する映像を分類する段階と、前記分類された映像をブラウジングする段階とを含むことを特徴とする。
【００１０】
前記ブラウジング方法において、好ましくは、前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したものである。また、好ましくは、前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードである。また、好ましくは、前記色温度を求める段階は、前記映像の座標系を光源の色座標系に変換する段階と、前記色座標系を用いて照明色を求める段階と、前記照明色を前記色温度に変換する段階とを含む。また、好ましくは、前記光源の色座標系に変換する段階は、前記映像をCIE X、Y、Z空間に変換する段階と、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含む。
【００１１】
前記課題を達成するための本発明の他の装置は、入力映像を記憶する映像データベースと、入力映像の色温度を計算する色温度計算部と、色温度計算部から受信された色温度によって入力映像を記述するメタデータを生成するメタデータ生成部と、メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、使用者から映像ブラウジングモードを入力される命令入力部と、映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を映像データベースから受信して出力する色温度ブラウジング部とを含む。この装置は、好ましくは、入力された映像が動映像である場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含む。また、好ましくは、前記メタデータ生成部は、入力映像の色温度を、所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを生成する。また、好ましくは、前記所定の区間は、人が映像に対して感じる寒暖の程度によって分類したHOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうち何れか１つを示す第1表現子を含む。また、好ましくは、前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含む。また、前記装置は、好ましくは、前記映像ブラウジング部から受信される映像を使用者に出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が前記第1区間に属する場合に色温度が低い順に、前記ブラウジングモードの色温度が前記第2及び第3区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が前記第4区間に属する場合に色温度が高い映像から出力する。
【００１２】
前記課題を達成するための本発明の他の方法は、入力映像の色温度を計算する段階と、入力映像の色温度を所定の区間に分割された色温度範囲に対応させ、入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを入力映像に対して生成して記憶する段階と、入力されたブラウジングモードの色温度が属する区間を示す表現子を含むメタデータを検索する段階と、検索されたメタデータに該当する映像をブラウジングする段階とを含む。
【００１３】
また、前記方法は、コンピュータを機能させるためのプログラムとして提供することができる。
【発明の効果】
【００１４】
本発明に係る映像ブラウジング装置及び方法によれば、人間の映像に対する寒暖の感じの程度が色温度として定量化され、色温度を映像検索条件として用いて映像を１つまたはそれ以上のグループに分類しうる。したがって、入力されたブラウジングモードに対応する映像をブラウジングするか、多数の映像データを含む大型データベースまたはビデオデータ内で同じ感じの映像を容易に分類してブラウジングしうる。
【発明を実施するための最良の形態】
【００１５】
以下、添付された図面を参照して本発明の望ましい実施例について詳細に説明する。
図１は、本発明の望ましい第1及び第2実施例に係る映像ブラウジング装置３０及びこれを備えた映像ディスプレー装置１００のブロック図である。図１を参照すれば、映像ディスプレー装置１００は所望の映像を自由に選択しうる映像ブラウジング装置３０、映像データまたは映像データに関する情報を書込み/読み取りするためのデータ記憶部６０、ブラウジング条件などを入力するための命令入力部７０、及びディスプレー８０を含む。ここで、映像ブラウジング装置３０は、色温度計算部１０と色温度ブラウジング部２０で構成される。色温度計算部１０は映像の色温度を計算する機能を行い、色温度ブラウジング部２０は色温度を映像検索条件として用いてブラウジング条件に符合する映像をブラウジングする機能を行う。データ記憶部６０は多数の映像を記憶するためのデータ記憶手段であって、例えば大量の映像データを含むデータベース(database)などがある。このデータベースには写真のような多数の静止映像が含まれ、映画やドラマのようなビデオ映像データも含みうる。そして、データ記憶部６０に記憶される映像データはメタデータ(metadata)で構成できる。このような構成を有する映像ブラウジング装置３０及び映像ディスプレー装置１００の動作は次の通りである。
【００１６】
映像ブラウジング装置３０の色温度計算部１０はデータ記憶部６０に記憶されている映像IMGに対する色温度IMG'を求め、求められた色温度IMG'をデータ記憶部６０または色温度ブラウジング部２０に伝送する。色温度ブラウジング部２０は命令入力部７０から入力されるブラウジング条件のブラウジングモード(browsingmode)に応答し、色温度計算部１０またはデータ記憶部６０から伝送される色温度IMG'を検索して検索条件に合う映像をブラウジングする。ディスプレー８０は色温度ブラウジング部２０から発生されたブラウジング結果IMG#BRSをディスプレーする。この際、映像ブラウジング装置３０は色温度計算部１０により求められた色温度IMG'をデータ記憶部６０に記憶した後、映像のブラウジングにもこれを使用でき、色温度計算部１０から直接色温度IMG'を受け入れて映像のブラウジングに使用しても良い。後述されるが、それぞれの映像はその映像が有している色温度によって少なくとも１つ以上のグループに区分されてブラウジングされる。ブラウジングモードはこのように映像の色温度IMG'によって分類されたそれぞれのグループ、例えば熱さ(Hot)、温かさ(Warm)、普通(Moderate)、涼しさ(Cool)のようにその映像が有している色温度によって類似した感じを与える映像のグループを選択するための選択モードを意味する。
【００１７】
図２は、図１に示された色温度計算部１０の詳細ブロック図であり、図３は図１に示された映像ディスプレー装置で行われた映像ブラウジング結果の一例を示すための図面である。
【００１８】
まず、図２を参照すれば、色温度計算部１０は映像の座標系を光源の色座標系(chromaticity coordinates)に変換し、変換された色座標系によって照明色を求める色座標系変換部１２と、照明色を色温度に変換する色温度変換部１４を含む。色座標系変換部１２はデータ記憶部６０から伝送される映像IMGの座標系を光源の色座標系に変換するために入力映像IMGをCIE(Commission Internationale de L'Eclairage)X、Y、Z空間に変換する(図４の121段階及び図５の1210段階参照)。CIE X、Y、Z空間は1931年国際照明委員会で制定されたX、Y、Zによる色の表示方法を意味する。CIE X、Y、Z空間への映像座標系変換が行われば、色座標系変換部１２はCIE X、Y、Z空間の映像IMGを光源の色座標系に変換する(図４の122段階及び図５の1220段階参照)。映像IMGの座標系が光源の色座標系に変換されれば、色座標系変換部１２は変換された色座標系に基づいて照明色を求める(図４の123段階及び図５の1230段階参照)。ここで、光源の色座標系とは、CIE X、Y、Z空間をx、yの2次元座標系として示したものであって、色工学分野で一般に使われる座標系である。
【００１９】
光源の色座標系で照明色を求める方法には多様な方法があるが、そのうち１つの方法は色相の密度を用いることである。この方法は、色座標系の各点に対して白色基準点となす角度と距離とを求め、求められた角度と距離から得られた２画像を合成する。そして、合成された画像から同じ値を有する画素を収集し、収集された色相集合の数によって照明色を決定する。こおような方法は、本出願人により取得された特開平10-118862号及び大韓民国特許登録番号第10-230446号に開示されている。照明色を求める他の１つの方法は高速処理が可能な方法であって、多数の色遷移帯(color transition band)を探して各色遷移帯に含まれた画素の色度座標から直線を近似化し、その直線間の交点の平均を照明色として定める方法である。この方法は本出願人により取得された大韓民国特許登録番号第10-237284号に開示されている。
【００２０】
色温度変換部１４は、色座標系変換部１２により照明色が求められると、求められた照明色を色温度IMG'に変換する(図４の140段階及び図５の1400段階参照)。一般に、色温度は黒鉛のような黒い放射体に温度を加えつつ適切な温度になれば放出する視覚的な可視エネルギーを計量化したものであって、映像に対して人間が感じる寒暖の程度を定量化するのに使われる。ケルビン温度(K゜)として表示される色温度は、物体が固有色を示す時の摂氏温度に絶対温度(273゜)を足したものと表現される。
【００２１】
色温度変換部１４により求められた色温度IMG'は１映像の全体特徴を示す表現子(descriptor)として使われる。データ記憶部６０に記憶された映像データは、ブラウジング時に色温度ブラウジング部２０によって色温度IMG'範囲によって少なくとも１つ以上のグループに分類される。この際、行われる映像の分類は人間が映像に対して感じる寒暖の程度による分類を意味し、各グループはブラウジングモードとして表現される。例えば、2250K以下の色温度IMG'は熱さを、2251Kないし4170Kの色温度IMG'は温かさを、4171Kないし8060Kの色温度IMG'は普通を、8061K以上の色温度IMG'は涼しさを、各々示すグループに各々分類される。
【００２２】
図３に示されたブラウジング結果は熱さHotを示すグループに対するブラウジング結果を示す。本発明による映像ブラウジング装置３０は、例えば使用者がブラウジングモードを熱さHotと指定すれば、データ記憶部６０に記憶されている多数の映像のうち熱さHotに属する映像が図３のようにブラウジングされる。所定の部類に属する映像がブラウジングされれば、使用者はブラウジングされた多数の映像のうち所望の映像を選択しうる。このような色温度IMG'による映像の分類によって、観察者の映像に対する感じによる映像ブラウジングが容易に行われる。
【００２３】
図４は、本発明の一実施例に係る映像ブラウジング方法を説明するフローチャートである。図４に示されたブラウジング方法は色温度計算部１０で計算された映像IMGの色温度IMG'をデータ記憶部６０に記憶せず、色温度IMG'を映像のブラウジングに直接利用する場合を示す。
【００２４】
図４を参照すれば、本発明による映像ブラウジング方法は、まずブラウジングモードの入力の如何を判別する(71段階)。ブラウジングモードは人間が映像に対して感じる寒暖の程度によって分類された少なくとも１つ以上のグループのうち何れか１つを指定するためのものであって、例えば熱さHot、温みWarm、普通Moderate、涼しさCoolのうち何れか１つのグループを選択する。前記グループのうち何れか１つがブラウジングモードで選択されれば、入力映像はCIE X、Y、Z空間に変換され(121段階)、CIE X、Y、Z空間の映像は光源の色座標系に変換される(122段階)。映像を表示する方法はシステムの特性やデータの特性によって色々な方法が可能であるが、映像が色の表示方法のCIE X、Y、Z空間に表示されていなければ、前述したようにまず映像をCIE X、Y、Z空間に変換した後、これを用いて光源の色座標系に変換する。しかし、もし、CIE X、Y、Z空間に映像が表示されていれば、前記映像はCIE X、Y、Z空間への変換を経ず、直接光源の色座標系に変換される。
【００２５】
映像の座標系が光源の色座標系に変換されれば、色相の密度を用いたり色遷移帯を用いる前述した照明色を求める方法によって照明色が決定され(123段階)、決定された照明色は色温度に変換される(140段階)。このような方法により映像の色温度が決定されれば、映像の色温度がブラウジングモードの色温度範囲に属するか否かが判別される(200段階)。判別の結果、映像の色温度がブラウジングモードの色温度範囲に属すれば、該当映像はブラウジングされる(290段階)。
【００２６】
図５は、本発明の他の実施例に係る映像ブラウジング方法を説明するフローチャートである。図５に示されたブラウジング方法は色温度計算部１０で計算された映像IMGの色温度IMG'をデータ記憶部６０に記憶しておいていて、ブラウジングモードが入力されれば色温度IMG'を用いてブラウジングモードに対応する映像を分類してブラウジングする場合を示す。
【００２７】
図５を参照すれば、本発明による映像ブラウジング方法は、まず入力映像をCIE X、Y、Z空間に変換し(1210段階)、CIE X、Y、Z空間の映像を光源の色座標系に変換する(1220段階)。映像の座標系が光源の色座標系に変換されれば、前述した照明色を求める方法によって照明色が決定される(1230段階)。決定された照明色は色温度に変換され(1400段階)、変換された色温度はデータ記憶部にメタデータ形態に記憶される(2600段階)。次いで、ブラウジングモードが入力されたか否かが判別される(2700段階)。判別の結果、ブラウジングモードが入力されたならば、データ記憶部に記憶されている色温度が映像検索条件として使われてブラウジングモードに対応する映像が分類され(2800段階)、分類された映像がブラウジングされる(2900段階)。
【００２８】
以下、図５及び図６を参照して本発明の第3実施例を説明する。第3実施例は第2実施例と類似しているが、入力映像の色温度を所定の区間に対応させ、入力映像の色温度が対応する区間の情報をメタデータとして生成して記憶するという点で差がある。
【００２９】
図６は、本発明の第3実施例に係る色温度ブラウジング装置の構成を示すブロック図である。
【００３０】
第3実施例の色温度ブラウジング装置は映像を入力される映像入力部４０、入力映像を記憶する映像データベース６０、入力映像の色温度を計算する色温度計算部１０、色温度計算部１０から受信された色温度によって入力映像を記述するメタデータを生成するメタデータ生成部５０、メタデータ生成部５０から受信されたメタデータを記憶するメタデータデータベース９０、使用者から映像ブラウジングモードを入力される命令入力部７０、映像ブラウジングモードに対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を映像データベース６０から受信して出力する色温度ブラウジング部２０を含む。
【００３１】
また、入力映像が動映像である場合には入力された映像をショット単位に分割するショット分割部４５をさらに含む。
【００３２】
図７は、図６に示された色温度ブラウジング装置の動作を示すフローチャートである。
【００３３】
図７を参照すれば、第3実施例の色温度ブラウジング装置は入力映像をCIE X、Y、Z空間に変換し(1210段階)、CIE X、Y、Z空間の映像を光源の色座標系に変換する(1220段階)。映像の座標系が光源の色座標系に変換されれば、前述した照明色を求める方法によって照明色が決定され(1230段階)、決定された照明色は色温度に変換された後、メタデータ生成部５０に出力される(1400段階)。
【００３４】
メタデータ生成部５０は、使用者が映像の暖かい程度に対する感じによる映像のブラウジングを可能にするために、入力映像の色温度を所定の区間に分割された色温度範囲に対応させることによって、入力映像を分類し(2610段階)、入力映像が分類された区間(すなわち、入力映像の色温度を含む区間)の情報を示すメタデータを生成する(2620段階)。
【００３５】
本発明の第3実施例で用いられる色温度範囲は1次的に映像に対して人間が感じる感情によってM個の色温度範囲に分割され、そのそれぞれの範囲は再びM個の範囲に分割される。結局、全体色温度範囲はM*N個の範囲に分割される。
【００３６】
例えば、全体色温度範囲はブラウジングモードで使用者によって入力されるHOT、WARM、MODERATE、及びCOOLを示す4つの色温度区間に分割される。hotは2250K以下、warmは2251Kないし4170K、moderateは4171Kないし8060K、coolは8061K以上の色温度範囲でマッピングされうる。
【００３７】
メタデータ生成部５０は入力映像の色温度が前述したN個の色温度範囲のうち何れの色温度範囲に属するかを判断して入力映像をHOT映像、WARM映像、MODERATE映像及びCOOL映像に分類する。その後、入力映像に対して入力映像が属する分類を示す第1表現子をメタデータとして生成する。前述した4つの分類を映像に対するメタデータとして表現すれば、各映像は2bitの表現だけでも分類されうる。一例として00はhot映像を、01はwarm映像を、10はmoderate映像を、11はcool映像を表現することになる。
【００３８】
しかし、2ビットだけで構成されたメタデータによって映像ＤＢ６０に記憶された多数の映像をブラウジングして使用者にディスプレーすれば、同じ分類に属する多数の映像がランダムにディスプレーされる。結局、使用者はブラウジングの一貫性が不足することを感じることになり、このような問題点を解消するために、HOT、WARM、MODERATE、及びCOOLのそれぞれの範囲を再び一定に分けてこれを表現することが必要である。
【００３９】
このために、一定していない色温度スケールの代わりに一定しているReciprocal色温度スケールを用いて各分類別色温度範囲を分割する。まず、前記各分類別色温度範囲をreciprocal色温度範囲に変えた後、これを均等に分割した後、入力映像が属する範囲を示す第2表現子をメタデータとして生成する。Reciprocal色温度(RC)はRC=1000000/色温度(C)の数式を用いて計算され、分割されたN個の色温度範囲はUpper(ln(N))bitとして表現できる。ここで、Upper()は該当値を含む最大自然数である(例:Upper(2.1)=3)。このようにM個の分類を再びN個の色温度範囲に分割すれば、全てUpper(ln(M))+Upper(ln(N))個のビットで入力映像が属する色温度範囲を表現しうる。本発明の第3実施例ではM=4、及びN=64に設定され、したがってメタデータは2ビットの第1表現子及び6ビットの第2表現子で構成される。
【００４０】
メタデータ生成部５０は前述したように入力映像のメタデータを生成し、生成されたメタデータをメタデータＤＢ９０に記憶する(2630段階)。
【００４１】
一方、使用者からブラウジングモードが命令入力部７０を通じて入力されれば(2700段階)、色温度ブラウジング部2０はブラウジングモードで入力された色温度範囲と対応する色温度範囲を示す第1表現子を有するメタデータをメタデータＤＢ９０で検索する(2800段階)。
【００４２】
検索された映像はディスプレー８０を通じて使用者に出力される。図８に示されたように、本発明の第3実施例はCOOL分類の場合、高い温度範囲から順序に映像が表示され、ModerateとWARM分類との場合には分類の指定されたMean値(例:Warm mean=2925K、Moderate mean=5500K)を含む範囲から近い範囲に含まれる映像順に、すなわち、MEAN値からの偏差の小さな領域から大きな領域順にディスプレーされる。HOT分類の場合、低温から高温順にディスプレーすれば良い。
【００４３】
以上、本発明の実施例として静止映像に対するブラウジングが具体的に例示されたが、その他にも動映像データに対しても本発明を適用しうる。具体的に、本発明による色温度計算及びこれを用いた映像のブラウジングは、多数の映像の集合よりなる映像ショット(shot)にも拡張して適用しうる。例えば、映画やドラマのようなビデオ内容物はカメラの急激な変化によって一定のショット単位に区分できる。一般に、１つのビデオショットは主に一定の光源下で撮られる場合が大部分である。したがって、１つのビデオショット内に含まれた各映像別色温度はそれらの平均や中間値として表示され、これはビデオショット全体の特性を示す色温度表示子として使用されうる。このようなショット単位の色温度表現子を用いてビデオ内で類似した色温度を有するショット単位のブラウジングもできる。したがって、本発明に係るブラウジング装置は静止映像はもとよりビデオ内容物のような動映像に対する色温度台別ブラウジングが可能である。
【００４４】
また、本発明はコンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコード（コンピュータプログラム）として実現可能である。コンピュータで読み取り可能な記録媒体はコンピュータシステムによって読み取り可能なデータが格納される全ての記録装置を含む。コンピュータが読み取り可能な記録媒体の例としては、ROM、RAM、CD-ROM、磁気テープ、フレキシブルディスク、光データ記憶装置などがある。本発明はまた、情報伝送媒体により伝送可能なコード（コンピュータプログラム）として実現可能である。情報を伝送可能な媒体としては、キャリアウェーブ(例えば、インターネットを通じた伝送)の形に実現されるものも含む。また、コンピュータで読み取り可能な記録媒体はネットワークで連結されたコンピュータシステムに分散され、分散方式でコンピュータで読み取り可能なコードとして保存及び実行が可能である。
【図面の簡単な説明】
【００４５】
【図１】本発明の望ましい実施例に係る映像ブラウジング装置及びこれを備えた映像ディスプレー装置のブロック図である。
【図２】図１に示された色温度計算部の詳細ブロック図である。
【図３】図１に示された映像ディスプレー装置で行われた映像ブラウジング結果の一例を示すための図面である。
【図４】本発明の一実施例に係る映像ブラウジング方法を説明するフローチャートである。
【図５】本発明の他の実施例に係る映像ブラウジング方法を説明するフローチャートである。
【図６】本発明の第３の実施例に係る映像ブラウジング装置のブロック図である。
【図７】図６に示された映像ブラウジング装置の動作を示すフローチャートである。
【図８】本発明の第３の実施例に係る映像ブラウジング装置における映像ブラウジング順序を説明するためのグラフである。
【符号の説明】
【００４６】
１０ 色温度計算部
１２ 色座標系変換部
１４ 色温度変換部
２０ 色温度ブラウジング部
３０ 映像ブラウジング装置
４０ 映像入力部
６０ データ記憶部（映像データ記憶部、映像データベース）
７０ 命令入力部
８０ ディスプレー
９０ メタデータ記憶部（メタデータデータベース）
１００ 映像ディスプレー装置
【技術分野】
【０００１】
本発明は映像ブラウジング装置に係り、特に映像が有する色温度を計算し、これを用いて映像をブラウジングする装置及び方法に関する。
【背景技術】
【０００２】
一般に、カラー映像を識別する方法は色相(hue)、彩度(saturation)、明度(brightness)の３つの知覚変数に分類される。通常、‘カラー’という単語は、緑色や黄色のように色合いを識別する色相を意味する。色相と関連した特徴、例えば映像内の色の空間的分布、色の構造的位置、主要色などに関する情報は映像のディスプレー時、映像の検索のための映像検索条件として使われる。
【０００３】
映像が有している色相は観察者をしてそれぞれ他の感じを有させる。例えば、赤色や黄色トーンの多い映像は観察者に暖かさを感じさせ、青色や紫トーンの多い映像は観察者に冷たさや涼しさを感じさせる。したがって、このような映像の寒暖(heat and cold)に対する人間の認識程度を示す色温度(color temperatureまたはcorrelated color temperature)は、検索内容を定義する重要な条件になる。実際に、多くの商品製作社や広告製作社では、広告を出そうとする商品を表現する時、これを最もよく表現しうる背景映像を探し出すことを重要に思う。例えば、新たに開発されたビールの宣伝ポスターに使われる背景映像を探そうとする時、背景映像は広告コンセプトによって北極海のように涼しい感じの映像が使われたり、熱帯の夕陽のように暑い感じの映像が使われる。この場合、映像の色温度を映像検索に使用すれば、大量の映像を含んでいる映像データベース内で類似した感じの映像を容易に探し出せる。しかし、大部分の映像データは色の空間的分布、色の構造的位置、主要色など、映像の物理的な特徴によって区分されるだけで、定量化された色温度情報を含んでいないために、寒暖のような映像に対する観察者の感じによって所望の映像を容易に検索できない問題点がある。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明が解決しようとする技術的課題は、映像の色温度を求め、これを用いて映像を検索することによって、寒暖のような映像に対する観察者の感じによって映像をブラウジングする装置及び方法を提供するところにある。
【課題を解決するための手段】
【０００５】
前記課題を達成するために本発明に係るブラウジング装置は、映像ブラウジングモードを入力するための命令入力部と、入力映像の色温度を計算する色温度計算部と、前記色温度が前記ブラウジングモードの色温度範囲に該当する場合前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする。
【０００６】
前記課題を達成するために本発明に係るブラウジング装置は、多数の映像データを記憶するデータ記憶部と、前記映像の各々に対する色温度を計算し、計算された前記色温度を前記データ記憶部に記憶する色温度計算部と、映像ブラウジングモードを入力するための命令入力部と、前記色温度を映像検索条件として用いて前記ブラウジングモードに該当する映像を分類し、分類された前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする。
【０００７】
前記ブラウジング装置において、好ましくは、前記色温度は、ケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したものである。また、好ましくは、前記ブラウジングモードは、前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードである。また、好ましくは、前記色温度計算部は、前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、前記照明色を前記色温度に変換する色温度変換部とを含む。また、好ましくは、前記色座標系変換部は、前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する。
【０００８】
前記課題を達成するために本発明に係るブラウジング方法は、ブラウジングモードが入力されれば、入力映像の色温度を求める段階と、前記色温度が前記ブラウジングモードの色温度範囲に属すれば、前記映像をブラウジングする段階とを含むことを特徴とする。
【０００９】
前記課題を達成するために本発明に係るブラウジング方法は、多数の入力映像の色温度を求める段階と、前記色温度をそれに対応する映像と関連して記憶する段階と、ブラウジングモードが入力されれば、前記色温度を映像検索条件として用いて前記ブラウジングモードに対応する映像を分類する段階と、前記分類された映像をブラウジングする段階とを含むことを特徴とする。
【００１０】
前記ブラウジング方法において、好ましくは、前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したものである。また、好ましくは、前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードである。また、好ましくは、前記色温度を求める段階は、前記映像の座標系を光源の色座標系に変換する段階と、前記色座標系を用いて照明色を求める段階と、前記照明色を前記色温度に変換する段階とを含む。また、好ましくは、前記光源の色座標系に変換する段階は、前記映像をCIE X、Y、Z空間に変換する段階と、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含む。
【００１１】
前記課題を達成するための本発明の他の装置は、入力映像を記憶する映像データベースと、入力映像の色温度を計算する色温度計算部と、色温度計算部から受信された色温度によって入力映像を記述するメタデータを生成するメタデータ生成部と、メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、使用者から映像ブラウジングモードを入力される命令入力部と、映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を映像データベースから受信して出力する色温度ブラウジング部とを含む。この装置は、好ましくは、入力された映像が動映像である場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含む。また、好ましくは、前記メタデータ生成部は、入力映像の色温度を、所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを生成する。また、好ましくは、前記所定の区間は、人が映像に対して感じる寒暖の程度によって分類したHOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうち何れか１つを示す第1表現子を含む。また、好ましくは、前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含む。また、前記装置は、好ましくは、前記映像ブラウジング部から受信される映像を使用者に出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が前記第1区間に属する場合に色温度が低い順に、前記ブラウジングモードの色温度が前記第2及び第3区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が前記第4区間に属する場合に色温度が高い映像から出力する。
【００１２】
前記課題を達成するための本発明の他の方法は、入力映像の色温度を計算する段階と、入力映像の色温度を所定の区間に分割された色温度範囲に対応させ、入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを入力映像に対して生成して記憶する段階と、入力されたブラウジングモードの色温度が属する区間を示す表現子を含むメタデータを検索する段階と、検索されたメタデータに該当する映像をブラウジングする段階とを含む。
【００１３】
また、前記方法は、コンピュータを機能させるためのプログラムとして提供することができる。
【発明の効果】
【００１４】
本発明に係る映像ブラウジング装置及び方法によれば、人間の映像に対する寒暖の感じの程度が色温度として定量化され、色温度を映像検索条件として用いて映像を１つまたはそれ以上のグループに分類しうる。したがって、入力されたブラウジングモードに対応する映像をブラウジングするか、多数の映像データを含む大型データベースまたはビデオデータ内で同じ感じの映像を容易に分類してブラウジングしうる。
【発明を実施するための最良の形態】
【００１５】
以下、添付された図面を参照して本発明の望ましい実施例について詳細に説明する。
図１は、本発明の望ましい第1及び第2実施例に係る映像ブラウジング装置３０及びこれを備えた映像ディスプレー装置１００のブロック図である。図１を参照すれば、映像ディスプレー装置１００は所望の映像を自由に選択しうる映像ブラウジング装置３０、映像データまたは映像データに関する情報を書込み/読み取りするためのデータ記憶部６０、ブラウジング条件などを入力するための命令入力部７０、及びディスプレー８０を含む。ここで、映像ブラウジング装置３０は、色温度計算部１０と色温度ブラウジング部２０で構成される。色温度計算部１０は映像の色温度を計算する機能を行い、色温度ブラウジング部２０は色温度を映像検索条件として用いてブラウジング条件に符合する映像をブラウジングする機能を行う。データ記憶部６０は多数の映像を記憶するためのデータ記憶手段であって、例えば大量の映像データを含むデータベース(database)などがある。このデータベースには写真のような多数の静止映像が含まれ、映画やドラマのようなビデオ映像データも含みうる。そして、データ記憶部６０に記憶される映像データはメタデータ(metadata)で構成できる。このような構成を有する映像ブラウジング装置３０及び映像ディスプレー装置１００の動作は次の通りである。
【００１６】
映像ブラウジング装置３０の色温度計算部１０はデータ記憶部６０に記憶されている映像IMGに対する色温度IMG'を求め、求められた色温度IMG'をデータ記憶部６０または色温度ブラウジング部２０に伝送する。色温度ブラウジング部２０は命令入力部７０から入力されるブラウジング条件のブラウジングモード(browsingmode)に応答し、色温度計算部１０またはデータ記憶部６０から伝送される色温度IMG'を検索して検索条件に合う映像をブラウジングする。ディスプレー８０は色温度ブラウジング部２０から発生されたブラウジング結果IMG#BRSをディスプレーする。この際、映像ブラウジング装置３０は色温度計算部１０により求められた色温度IMG'をデータ記憶部６０に記憶した後、映像のブラウジングにもこれを使用でき、色温度計算部１０から直接色温度IMG'を受け入れて映像のブラウジングに使用しても良い。後述されるが、それぞれの映像はその映像が有している色温度によって少なくとも１つ以上のグループに区分されてブラウジングされる。ブラウジングモードはこのように映像の色温度IMG'によって分類されたそれぞれのグループ、例えば熱さ(Hot)、温かさ(Warm)、普通(Moderate)、涼しさ(Cool)のようにその映像が有している色温度によって類似した感じを与える映像のグループを選択するための選択モードを意味する。
【００１７】
図２は、図１に示された色温度計算部１０の詳細ブロック図であり、図３は図１に示された映像ディスプレー装置で行われた映像ブラウジング結果の一例を示すための図面である。
【００１８】
まず、図２を参照すれば、色温度計算部１０は映像の座標系を光源の色座標系(chromaticity coordinates)に変換し、変換された色座標系によって照明色を求める色座標系変換部１２と、照明色を色温度に変換する色温度変換部１４を含む。色座標系変換部１２はデータ記憶部６０から伝送される映像IMGの座標系を光源の色座標系に変換するために入力映像IMGをCIE(Commission Internationale de L'Eclairage)X、Y、Z空間に変換する(図４の121段階及び図５の1210段階参照)。CIE X、Y、Z空間は1931年国際照明委員会で制定されたX、Y、Zによる色の表示方法を意味する。CIE X、Y、Z空間への映像座標系変換が行われば、色座標系変換部１２はCIE X、Y、Z空間の映像IMGを光源の色座標系に変換する(図４の122段階及び図５の1220段階参照)。映像IMGの座標系が光源の色座標系に変換されれば、色座標系変換部１２は変換された色座標系に基づいて照明色を求める(図４の123段階及び図５の1230段階参照)。ここで、光源の色座標系とは、CIE X、Y、Z空間をx、yの2次元座標系として示したものであって、色工学分野で一般に使われる座標系である。
【００１９】
光源の色座標系で照明色を求める方法には多様な方法があるが、そのうち１つの方法は色相の密度を用いることである。この方法は、色座標系の各点に対して白色基準点となす角度と距離とを求め、求められた角度と距離から得られた２画像を合成する。そして、合成された画像から同じ値を有する画素を収集し、収集された色相集合の数によって照明色を決定する。こおような方法は、本出願人により取得された特開平10-118862号及び大韓民国特許登録番号第10-230446号に開示されている。照明色を求める他の１つの方法は高速処理が可能な方法であって、多数の色遷移帯(color transition band)を探して各色遷移帯に含まれた画素の色度座標から直線を近似化し、その直線間の交点の平均を照明色として定める方法である。この方法は本出願人により取得された大韓民国特許登録番号第10-237284号に開示されている。
【００２０】
色温度変換部１４は、色座標系変換部１２により照明色が求められると、求められた照明色を色温度IMG'に変換する(図４の140段階及び図５の1400段階参照)。一般に、色温度は黒鉛のような黒い放射体に温度を加えつつ適切な温度になれば放出する視覚的な可視エネルギーを計量化したものであって、映像に対して人間が感じる寒暖の程度を定量化するのに使われる。ケルビン温度(K゜)として表示される色温度は、物体が固有色を示す時の摂氏温度に絶対温度(273゜)を足したものと表現される。
【００２１】
色温度変換部１４により求められた色温度IMG'は１映像の全体特徴を示す表現子(descriptor)として使われる。データ記憶部６０に記憶された映像データは、ブラウジング時に色温度ブラウジング部２０によって色温度IMG'範囲によって少なくとも１つ以上のグループに分類される。この際、行われる映像の分類は人間が映像に対して感じる寒暖の程度による分類を意味し、各グループはブラウジングモードとして表現される。例えば、2250K以下の色温度IMG'は熱さを、2251Kないし4170Kの色温度IMG'は温かさを、4171Kないし8060Kの色温度IMG'は普通を、8061K以上の色温度IMG'は涼しさを、各々示すグループに各々分類される。
【００２２】
図３に示されたブラウジング結果は熱さHotを示すグループに対するブラウジング結果を示す。本発明による映像ブラウジング装置３０は、例えば使用者がブラウジングモードを熱さHotと指定すれば、データ記憶部６０に記憶されている多数の映像のうち熱さHotに属する映像が図３のようにブラウジングされる。所定の部類に属する映像がブラウジングされれば、使用者はブラウジングされた多数の映像のうち所望の映像を選択しうる。このような色温度IMG'による映像の分類によって、観察者の映像に対する感じによる映像ブラウジングが容易に行われる。
【００２３】
図４は、本発明の一実施例に係る映像ブラウジング方法を説明するフローチャートである。図４に示されたブラウジング方法は色温度計算部１０で計算された映像IMGの色温度IMG'をデータ記憶部６０に記憶せず、色温度IMG'を映像のブラウジングに直接利用する場合を示す。
【００２４】
図４を参照すれば、本発明による映像ブラウジング方法は、まずブラウジングモードの入力の如何を判別する(71段階)。ブラウジングモードは人間が映像に対して感じる寒暖の程度によって分類された少なくとも１つ以上のグループのうち何れか１つを指定するためのものであって、例えば熱さHot、温みWarm、普通Moderate、涼しさCoolのうち何れか１つのグループを選択する。前記グループのうち何れか１つがブラウジングモードで選択されれば、入力映像はCIE X、Y、Z空間に変換され(121段階)、CIE X、Y、Z空間の映像は光源の色座標系に変換される(122段階)。映像を表示する方法はシステムの特性やデータの特性によって色々な方法が可能であるが、映像が色の表示方法のCIE X、Y、Z空間に表示されていなければ、前述したようにまず映像をCIE X、Y、Z空間に変換した後、これを用いて光源の色座標系に変換する。しかし、もし、CIE X、Y、Z空間に映像が表示されていれば、前記映像はCIE X、Y、Z空間への変換を経ず、直接光源の色座標系に変換される。
【００２５】
映像の座標系が光源の色座標系に変換されれば、色相の密度を用いたり色遷移帯を用いる前述した照明色を求める方法によって照明色が決定され(123段階)、決定された照明色は色温度に変換される(140段階)。このような方法により映像の色温度が決定されれば、映像の色温度がブラウジングモードの色温度範囲に属するか否かが判別される(200段階)。判別の結果、映像の色温度がブラウジングモードの色温度範囲に属すれば、該当映像はブラウジングされる(290段階)。
【００２６】
図５は、本発明の他の実施例に係る映像ブラウジング方法を説明するフローチャートである。図５に示されたブラウジング方法は色温度計算部１０で計算された映像IMGの色温度IMG'をデータ記憶部６０に記憶しておいていて、ブラウジングモードが入力されれば色温度IMG'を用いてブラウジングモードに対応する映像を分類してブラウジングする場合を示す。
【００２７】
図５を参照すれば、本発明による映像ブラウジング方法は、まず入力映像をCIE X、Y、Z空間に変換し(1210段階)、CIE X、Y、Z空間の映像を光源の色座標系に変換する(1220段階)。映像の座標系が光源の色座標系に変換されれば、前述した照明色を求める方法によって照明色が決定される(1230段階)。決定された照明色は色温度に変換され(1400段階)、変換された色温度はデータ記憶部にメタデータ形態に記憶される(2600段階)。次いで、ブラウジングモードが入力されたか否かが判別される(2700段階)。判別の結果、ブラウジングモードが入力されたならば、データ記憶部に記憶されている色温度が映像検索条件として使われてブラウジングモードに対応する映像が分類され(2800段階)、分類された映像がブラウジングされる(2900段階)。
【００２８】
以下、図５及び図６を参照して本発明の第3実施例を説明する。第3実施例は第2実施例と類似しているが、入力映像の色温度を所定の区間に対応させ、入力映像の色温度が対応する区間の情報をメタデータとして生成して記憶するという点で差がある。
【００２９】
図６は、本発明の第3実施例に係る色温度ブラウジング装置の構成を示すブロック図である。
【００３０】
第3実施例の色温度ブラウジング装置は映像を入力される映像入力部４０、入力映像を記憶する映像データベース６０、入力映像の色温度を計算する色温度計算部１０、色温度計算部１０から受信された色温度によって入力映像を記述するメタデータを生成するメタデータ生成部５０、メタデータ生成部５０から受信されたメタデータを記憶するメタデータデータベース９０、使用者から映像ブラウジングモードを入力される命令入力部７０、映像ブラウジングモードに対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を映像データベース６０から受信して出力する色温度ブラウジング部２０を含む。
【００３１】
また、入力映像が動映像である場合には入力された映像をショット単位に分割するショット分割部４５をさらに含む。
【００３２】
図７は、図６に示された色温度ブラウジング装置の動作を示すフローチャートである。
【００３３】
図７を参照すれば、第3実施例の色温度ブラウジング装置は入力映像をCIE X、Y、Z空間に変換し(1210段階)、CIE X、Y、Z空間の映像を光源の色座標系に変換する(1220段階)。映像の座標系が光源の色座標系に変換されれば、前述した照明色を求める方法によって照明色が決定され(1230段階)、決定された照明色は色温度に変換された後、メタデータ生成部５０に出力される(1400段階)。
【００３４】
メタデータ生成部５０は、使用者が映像の暖かい程度に対する感じによる映像のブラウジングを可能にするために、入力映像の色温度を所定の区間に分割された色温度範囲に対応させることによって、入力映像を分類し(2610段階)、入力映像が分類された区間(すなわち、入力映像の色温度を含む区間)の情報を示すメタデータを生成する(2620段階)。
【００３５】
本発明の第3実施例で用いられる色温度範囲は1次的に映像に対して人間が感じる感情によってM個の色温度範囲に分割され、そのそれぞれの範囲は再びM個の範囲に分割される。結局、全体色温度範囲はM*N個の範囲に分割される。
【００３６】
例えば、全体色温度範囲はブラウジングモードで使用者によって入力されるHOT、WARM、MODERATE、及びCOOLを示す4つの色温度区間に分割される。hotは2250K以下、warmは2251Kないし4170K、moderateは4171Kないし8060K、coolは8061K以上の色温度範囲でマッピングされうる。
【００３７】
メタデータ生成部５０は入力映像の色温度が前述したN個の色温度範囲のうち何れの色温度範囲に属するかを判断して入力映像をHOT映像、WARM映像、MODERATE映像及びCOOL映像に分類する。その後、入力映像に対して入力映像が属する分類を示す第1表現子をメタデータとして生成する。前述した4つの分類を映像に対するメタデータとして表現すれば、各映像は2bitの表現だけでも分類されうる。一例として00はhot映像を、01はwarm映像を、10はmoderate映像を、11はcool映像を表現することになる。
【００３８】
しかし、2ビットだけで構成されたメタデータによって映像ＤＢ６０に記憶された多数の映像をブラウジングして使用者にディスプレーすれば、同じ分類に属する多数の映像がランダムにディスプレーされる。結局、使用者はブラウジングの一貫性が不足することを感じることになり、このような問題点を解消するために、HOT、WARM、MODERATE、及びCOOLのそれぞれの範囲を再び一定に分けてこれを表現することが必要である。
【００３９】
このために、一定していない色温度スケールの代わりに一定しているReciprocal色温度スケールを用いて各分類別色温度範囲を分割する。まず、前記各分類別色温度範囲をreciprocal色温度範囲に変えた後、これを均等に分割した後、入力映像が属する範囲を示す第2表現子をメタデータとして生成する。Reciprocal色温度(RC)はRC=1000000/色温度(C)の数式を用いて計算され、分割されたN個の色温度範囲はUpper(ln(N))bitとして表現できる。ここで、Upper()は該当値を含む最大自然数である(例:Upper(2.1)=3)。このようにM個の分類を再びN個の色温度範囲に分割すれば、全てUpper(ln(M))+Upper(ln(N))個のビットで入力映像が属する色温度範囲を表現しうる。本発明の第3実施例ではM=4、及びN=64に設定され、したがってメタデータは2ビットの第1表現子及び6ビットの第2表現子で構成される。
【００４０】
メタデータ生成部５０は前述したように入力映像のメタデータを生成し、生成されたメタデータをメタデータＤＢ９０に記憶する(2630段階)。
【００４１】
一方、使用者からブラウジングモードが命令入力部７０を通じて入力されれば(2700段階)、色温度ブラウジング部2０はブラウジングモードで入力された色温度範囲と対応する色温度範囲を示す第1表現子を有するメタデータをメタデータＤＢ９０で検索する(2800段階)。
【００４２】
検索された映像はディスプレー８０を通じて使用者に出力される。図８に示されたように、本発明の第3実施例はCOOL分類の場合、高い温度範囲から順序に映像が表示され、ModerateとWARM分類との場合には分類の指定されたMean値(例:Warm mean=2925K、Moderate mean=5500K)を含む範囲から近い範囲に含まれる映像順に、すなわち、MEAN値からの偏差の小さな領域から大きな領域順にディスプレーされる。HOT分類の場合、低温から高温順にディスプレーすれば良い。
【００４３】
以上、本発明の実施例として静止映像に対するブラウジングが具体的に例示されたが、その他にも動映像データに対しても本発明を適用しうる。具体的に、本発明による色温度計算及びこれを用いた映像のブラウジングは、多数の映像の集合よりなる映像ショット(shot)にも拡張して適用しうる。例えば、映画やドラマのようなビデオ内容物はカメラの急激な変化によって一定のショット単位に区分できる。一般に、１つのビデオショットは主に一定の光源下で撮られる場合が大部分である。したがって、１つのビデオショット内に含まれた各映像別色温度はそれらの平均や中間値として表示され、これはビデオショット全体の特性を示す色温度表示子として使用されうる。このようなショット単位の色温度表現子を用いてビデオ内で類似した色温度を有するショット単位のブラウジングもできる。したがって、本発明に係るブラウジング装置は静止映像はもとよりビデオ内容物のような動映像に対する色温度台別ブラウジングが可能である。
【００４４】
また、本発明はコンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコード（コンピュータプログラム）として実現可能である。コンピュータで読み取り可能な記録媒体はコンピュータシステムによって読み取り可能なデータが格納される全ての記録装置を含む。コンピュータが読み取り可能な記録媒体の例としては、ROM、RAM、CD-ROM、磁気テープ、フレキシブルディスク、光データ記憶装置などがある。本発明はまた、情報伝送媒体により伝送可能なコード（コンピュータプログラム）として実現可能である。情報を伝送可能な媒体としては、キャリアウェーブ(例えば、インターネットを通じた伝送)の形に実現されるものも含む。また、コンピュータで読み取り可能な記録媒体はネットワークで連結されたコンピュータシステムに分散され、分散方式でコンピュータで読み取り可能なコードとして保存及び実行が可能である。
【図面の簡単な説明】
【００４５】
【図１】本発明の望ましい実施例に係る映像ブラウジング装置及びこれを備えた映像ディスプレー装置のブロック図である。
【図２】図１に示された色温度計算部の詳細ブロック図である。
【図３】図１に示された映像ディスプレー装置で行われた映像ブラウジング結果の一例を示すための図面である。
【図４】本発明の一実施例に係る映像ブラウジング方法を説明するフローチャートである。
【図５】本発明の他の実施例に係る映像ブラウジング方法を説明するフローチャートである。
【図６】本発明の第３の実施例に係る映像ブラウジング装置のブロック図である。
【図７】図６に示された映像ブラウジング装置の動作を示すフローチャートである。
【図８】本発明の第３の実施例に係る映像ブラウジング装置における映像ブラウジング順序を説明するためのグラフである。
【符号の説明】
【００４６】
１０ 色温度計算部
１２ 色座標系変換部
１４ 色温度変換部
２０ 色温度ブラウジング部
３０ 映像ブラウジング装置
４０ 映像入力部
６０ データ記憶部（映像データ記憶部、映像データベース）
７０ 命令入力部
８０ ディスプレー
９０ メタデータ記憶部（メタデータデータベース）
１００ 映像ディスプレー装置
【特許請求の範囲】
【請求項１】
映像ブラウジングモードを入力するための命令入力部と、入力映像の色温度を計算する色温度計算部と、
前記色温度が前記ブラウジングモードの色温度範囲に該当する場合、前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項３】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項４】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部とを含むことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項５】
前記色座標系変換部は前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項６】
多数の映像データを記憶するデータ記憶部と、
前記映像の各々に対する色温度を計算し、計算された前記色温度を前記データ記憶部に記憶する色温度計算部と、
映像ブラウジングモードを入力するための命令入力部と、
前記色温度を映像検索条件として用いて前記ブラウジングモードに該当する映像を分類し、分類された前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項７】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項８】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項９】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部とを含むことを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項１０】
前記色座標系変換部は前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項１１】
ブラウジングモードが入力されれば、入力映像の色温度を求める段階と、
前記色温度が前記ブラウジングモードの色温度範囲に属すれば、前記映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１２】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１３】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１４】
前記色温度を求める段階は、
前記入力映像の座標系を光源の色座標系に変換する段階と、
前記色座標系を用いて前記映像の照明色を求める段階と、
前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１５】
前記光源の色座標系に変換する段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１６】
多数の入力映像の色温度を求める段階と、
前記色温度をそれに対応する映像と関連して記憶する段階と、
ブラウジングモードが入力されれば、前記色温度を映像検索条件として用いて前記ブラウジングモードに対応する映像を分類する段階と、
前記分類された映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１７】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項１８】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項１９】
前記色温度を求める段階は、
前記入力映像の座標系を光源の色座標系に変換する段階と、
前記色座標系を用いて前記映像の照明色を求める段階と、
前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項２０】
前記光源の色座標系に変換する段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項２１】
請求項１１の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項２２】
請求項１６の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項２３】
入力映像を記憶する映像データベースと、
入力映像の色温度を計算する色温度計算部と、
前記色温度計算部から受信された色温度によって前記入力映像を記述するメタデータを生成するメタデータ生成部と、
前記メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、
使用者から映像ブラウジングモードを入力される命令入力部と、
前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２４】
入力された映像が動映像である場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含むことを特徴とする請求項２３に記載の映像ブラウジング装置。
【請求項２５】
前記メタデータ生成部は、
入力映像の色温度を、所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを生成することを特徴とする請求項２３に記載の映像ブラウジング装置。
【請求項２６】
前記所定の区間は、
人が映像に対して感じる寒暖の程度によって分類したHOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうち何れか１つを示す第1表現子を含むことを特徴とする請求項２５に記載の映像ブラウジング装置。
【請求項２７】
前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含むことを特徴とする請求項２６に記載の映像ブラウジング装置。
【請求項２８】
前記映像ブラウジング部から受信される映像を使用者に出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が前記第1区間に属する場合に色温度が低い順に、前記ブラウジングモードの色温度が前記第2及び第3区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が前記第4区間に属する場合に色温度が高い映像から出力することを特徴とする請求項２６に記載の映像ブラウジング装置。
【請求項２９】
(a) 入力映像の色温度を計算する段階と、
(b) 前記入力映像の色温度を所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを前記入力映像に対して生成して記憶する段階と、
(c) 入力されたブラウジングモードの色温度が属する区間を示す表現子を含むメタデータを検索する段階と、
(d) 検索されたメタデータに該当する映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項３０】
前記(a)段階は、
(a1) 前記入力映像の座標系を光源の色座標系に変換する段階と、
(a2) 前記色座標系を用いて前記映像の照明色を求める段階と、
(a3) 前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項２９に記載の色温度を用いた映像ブラウジング方法。
【請求項３１】
前記(a1)段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項３０に記載の色温度を用いた映像ブラウジング方法。
【請求項３２】
前記所定の区間は、
人間が映像に対して感じる寒暖の程度によって、HOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうちど何れか１つを示す第1表現子を含むことを特徴とする請求項２９に記載の映像ブラウジング方法。
【請求項３３】
前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含むことを特徴とする請求項３２に記載の映像ブラウジング装置。
【請求項３４】
請求項２９の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項３５】
請求項１１の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【請求項３６】
請求項１６の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【請求項３７】
請求項２９の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【特許請求の範囲】
【請求項１】
映像の色温度を算出する色温度計算部と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって所定の色温度区間に分け、前記映像の色温度が属する色温度区間を示す所定ビットの第１メタデータと、前記所定の色温度区間で各色温度区間を所定のサブ区間に分け、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す所定ビットの第２メタデータで前記映像を記述するメタデータ生成部を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２】
映像の色温度を算出する色温度計算部と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって“熱さ”、“温かさ”、“普通”、“涼しさ”に該当する四つの色温度区間に分け、前記映像の色温度が属する色温度区間を示す２ビットの第１メタデータを生成し、前記四つの色温度区間で各色温度区間を６４個のサブ区間に分割され、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す６ビットの第２メタデータで前記映像を記述するメタデータ生成部を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング装置。
【請求項３】
前記映像を記憶する映像データベースと、
前記メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、
ユーザから前記映像ブラウジングモードを入力される命令入力部と、
前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する色温度ブラウジング部をさらに含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項４】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部を含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項５】
前記色座標系変換部は前記映像をCIE X,Y,Z空間に変換した後、前記CIE X,Y,Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項４に記載の色温度を用いた映像ブラウジング装置。
【請求項６】
入力された映像が動映像の場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項７】
前記色温度区間は、
人が映像に対して感じる寒暖の程度によって分類した“熱さ”に対する１６６７Ｋないし２２５０Ｋの第１区間、“温かさ”に対応する２２５１Ｋないし４１７０Ｋの第２区間、“普通”に対応する４１７１Ｋないし８０６０Ｋの第３区間及び“涼しさ”に対応する８０６１Ｋないし２５０００Ｋの第４区間より構成され、前記第１メタデータは第１ないし第４区間のうちいずれか一つを示す第１表現子を含むことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項８】
前記第１ないし第４区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって６４個の区間に分割され、前記第２メタデータは前記６４個の区間を示す第２表現子を含むことを特徴とする請求項７に記載の色温度を用いた映像ブラウジング装置。
【請求項９】
前記映像ブラウジング部から受信される映像をユーザに出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が最高の区間に属する場合色温度が低い順から、前記ブラウジングモードの色温度が中間である区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が最低の区間に属する場合に色温度が高い映像から出力することを特徴とする請求項３に記載の色温度を用いた映像ブラウジング装置。
【請求項１０】
映像の色温度を算出する段階と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって所定の色温度区間に分け、前記映像の色温度が属する色温度区間を示す所定ビットの第１メタデータと、前記所定の色温度区間で各色温度区間を所定のサブ区間に分け、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す所定ビットの第２メタデータで前記映像を記述する段階を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１１】
映像の色温度を算出する段階と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって“熱さ”、“温かさ”、“普通”、“涼しさ”に該当する四つの色温度区間に分け、前記映像の色温度が属する色温度区間を示す２ビットの第１メタデータを生成し、前記四つの色温度区間で各色温度区間を６４個のサブ区間に分け、 前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す６ビットの第２メタデータで前記映像を記述する段階を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１２】
前記映像を映像データベースに記憶する段階と、
前記映像のメタデータをメタデータデータベースに記憶する段階と、
ユーザから前記映像ブラウジングモードを入力される段階と、
前記メタデータデータベースから前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する段階をさらに含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１３】
前記色温度計算段階は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める段階と、
前記照明色を前記色温度に変換する段階を含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１４】
前記色座標系変換段階は前記映像をCIE X,Y,Z空間に変換した後、前記CIE X,Y,Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項１３に記載の色温度を用いた映像ブラウジング方法。
【請求項１５】
入力された映像が動映像の場合に入力された動映像をショット単位で分割する段階をさらに含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１６】
前記色温度区間は、
人が映像に対して感じる寒暖の程度によって分類した“熱さ”に対応する１６６７Ｋないし２２５０Ｋの第１区間、“温かさ”に対応する２２５１Ｋないし４１７０Ｋの第２区間、“普通”に対応する４１７１Ｋないし８０５０Ｋの第３区間及び“涼しさ”に対応する８０６１Ｋないし２５０００Ｋの第４区間より構成され、前記第１メタデータは第１ないし第４区間のうちいずれか一つを示す第１表現子を含むことを特徴とする請求項１０に記載の色温度を用いた映像ブラウジング方法。
【請求項１７】
前記第１ないし第４区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって６４個の区間に分割され、前記第２メタデータは前記６４個の区間を示す第２表現子を含むことを特徴とする請求項１６に記載の映像ブラウジング方法。
【請求項１８】
前記出力段階は前記ブラウジングモードの色温度が最高の区間に属する場合色温度が低い順から、前記ブラウジングモードの色温度が中間の区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が最低の区間に属する場合に色温度が高い映像から出力することを特徴とする請求項１２に記載の映像ブラウジング方法。
【請求項１９】
請求項１０ないし１８のいずれか一つの方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項１】
映像ブラウジングモードを入力するための命令入力部と、入力映像の色温度を計算する色温度計算部と、
前記色温度が前記ブラウジングモードの色温度範囲に該当する場合、前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項３】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項４】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部とを含むことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項５】
前記色座標系変換部は前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項６】
多数の映像データを記憶するデータ記憶部と、
前記映像の各々に対する色温度を計算し、計算された前記色温度を前記データ記憶部に記憶する色温度計算部と、
映像ブラウジングモードを入力するための命令入力部と、
前記色温度を映像検索条件として用いて前記ブラウジングモードに該当する映像を分類し、分類された前記映像をブラウジングする色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項７】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項８】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項９】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部とを含むことを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項１０】
前記色座標系変換部は前記映像をCIE X、Y、Z空間に変換した後、前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項６に記載の色温度を用いた映像ブラウジング装置。
【請求項１１】
ブラウジングモードが入力されれば、入力映像の色温度を求める段階と、
前記色温度が前記ブラウジングモードの色温度範囲に属すれば、前記映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１２】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１３】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１４】
前記色温度を求める段階は、
前記入力映像の座標系を光源の色座標系に変換する段階と、
前記色座標系を用いて前記映像の照明色を求める段階と、
前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１５】
前記光源の色座標系に変換する段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１６】
多数の入力映像の色温度を求める段階と、
前記色温度をそれに対応する映像と関連して記憶する段階と、
ブラウジングモードが入力されれば、前記色温度を映像検索条件として用いて前記ブラウジングモードに対応する映像を分類する段階と、
前記分類された映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１７】
前記色温度はケルビン温度を用いて前記映像に対して人間が感じる寒暖の程度を定量化したことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項１８】
前記ブラウジングモードは前記映像に対して人間が感じる寒暖の程度を示す少なくとも１つの選択モードであることを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項１９】
前記色温度を求める段階は、
前記入力映像の座標系を光源の色座標系に変換する段階と、
前記色座標系を用いて前記映像の照明色を求める段階と、
前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項２０】
前記光源の色座標系に変換する段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項１６に記載の色温度を用いた映像ブラウジング方法。
【請求項２１】
請求項１１の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項２２】
請求項１６の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項２３】
入力映像を記憶する映像データベースと、
入力映像の色温度を計算する色温度計算部と、
前記色温度計算部から受信された色温度によって前記入力映像を記述するメタデータを生成するメタデータ生成部と、
前記メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、
使用者から映像ブラウジングモードを入力される命令入力部と、
前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する色温度ブラウジング部とを含むことを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２４】
入力された映像が動映像である場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含むことを特徴とする請求項２３に記載の映像ブラウジング装置。
【請求項２５】
前記メタデータ生成部は、
入力映像の色温度を、所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを生成することを特徴とする請求項２３に記載の映像ブラウジング装置。
【請求項２６】
前記所定の区間は、
人が映像に対して感じる寒暖の程度によって分類したHOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうち何れか１つを示す第1表現子を含むことを特徴とする請求項２５に記載の映像ブラウジング装置。
【請求項２７】
前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含むことを特徴とする請求項２６に記載の映像ブラウジング装置。
【請求項２８】
前記映像ブラウジング部から受信される映像を使用者に出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が前記第1区間に属する場合に色温度が低い順に、前記ブラウジングモードの色温度が前記第2及び第3区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が前記第4区間に属する場合に色温度が高い映像から出力することを特徴とする請求項２６に記載の映像ブラウジング装置。
【請求項２９】
(a) 入力映像の色温度を計算する段階と、
(b) 前記入力映像の色温度を所定の区間に分割された色温度範囲に対応させ、前記入力映像の色温度が含まれる区間情報を示す表現子を含むメタデータを前記入力映像に対して生成して記憶する段階と、
(c) 入力されたブラウジングモードの色温度が属する区間を示す表現子を含むメタデータを検索する段階と、
(d) 検索されたメタデータに該当する映像をブラウジングする段階とを含むことを特徴とする色温度を用いた映像ブラウジング方法。
【請求項３０】
前記(a)段階は、
(a1) 前記入力映像の座標系を光源の色座標系に変換する段階と、
(a2) 前記色座標系を用いて前記映像の照明色を求める段階と、
(a3) 前記照明色を前記色温度に変換する段階とを含むことを特徴とする請求項２９に記載の色温度を用いた映像ブラウジング方法。
【請求項３１】
前記(a1)段階は、
前記映像をCIE X、Y、Z空間に変換する段階と、
前記CIE X、Y、Z空間の映像を前記光源の色座標系に変換する段階とを含むことを特徴とする請求項３０に記載の色温度を用いた映像ブラウジング方法。
【請求項３２】
前記所定の区間は、
人間が映像に対して感じる寒暖の程度によって、HOTに対応する1667Kないし2250Kの第1区間、WARMに対応する2251Kないし4170Kの第2区間、MODERATEに対応する4171Kないし8060Kの第3区間及びCOOLに対応する8061Kないし25000Kの第4区間より構成され、前記メタデータは第1ないし第4区間のうちど何れか１つを示す第1表現子を含むことを特徴とする請求項２９に記載の映像ブラウジング方法。
【請求項３３】
前記第1ないし第4区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって64個の区間に分割され、前記メタデータは前記64個の区間を示す第2表現子を含むことを特徴とする請求項３２に記載の映像ブラウジング装置。
【請求項３４】
請求項２９の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項３５】
請求項１１の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【請求項３６】
請求項１６の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【請求項３７】
請求項２９の方法を実行する手段としてコンピュータを機能させるためのプログラム。
【特許請求の範囲】
【請求項１】
映像の色温度を算出する色温度計算部と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって所定の色温度区間に分け、前記映像の色温度が属する色温度区間を示す所定ビットの第１メタデータと、前記所定の色温度区間で各色温度区間を所定のサブ区間に分け、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す所定ビットの第２メタデータで前記映像を記述するメタデータ生成部を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング装置。
【請求項２】
映像の色温度を算出する色温度計算部と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって“熱さ”、“温かさ”、“普通”、“涼しさ”に該当する四つの色温度区間に分け、前記映像の色温度が属する色温度区間を示す２ビットの第１メタデータを生成し、前記四つの色温度区間で各色温度区間を６４個のサブ区間に分割され、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す６ビットの第２メタデータで前記映像を記述するメタデータ生成部を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング装置。
【請求項３】
前記映像を記憶する映像データベースと、
前記メタデータ生成部から受信されたメタデータを記憶するメタデータデータベースと、
ユーザから前記映像ブラウジングモードを入力される命令入力部と、
前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する色温度ブラウジング部をさらに含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項４】
前記色温度計算部は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める色座標系変換部と、
前記照明色を前記色温度に変換する色温度変換部を含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項５】
前記色座標系変換部は前記映像をCIE X,Y,Z空間に変換した後、前記CIE X,Y,Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項４に記載の色温度を用いた映像ブラウジング装置。
【請求項６】
入力された映像が動映像の場合に入力された動映像をショット単位で分割して前記映像データベース及び前記色温度計算部に出力する映像入力部をさらに含むことを特徴とする請求項１または２に記載の色温度を用いた映像ブラウジング装置。
【請求項７】
前記色温度区間は、
人が映像に対して感じる寒暖の程度によって分類した“熱さ”に対する１６６７Ｋないし２２５０Ｋの第１区間、“温かさ”に対応する２２５１Ｋないし４１７０Ｋの第２区間、“普通”に対応する４１７１Ｋないし８０６０Ｋの第３区間及び“涼しさ”に対応する８０６１Ｋないし２５０００Ｋの第４区間より構成され、前記第１メタデータは第１ないし第４区間のうちいずれか一つを示す第１表現子を含むことを特徴とする請求項１に記載の色温度を用いた映像ブラウジング装置。
【請求項８】
前記第１ないし第４区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって６４個の区間に分割され、前記第２メタデータは前記６４個の区間を示す第２表現子を含むことを特徴とする請求項７に記載の色温度を用いた映像ブラウジング装置。
【請求項９】
前記映像ブラウジング部から受信される映像をユーザに出力するディスプレーをさらに含み、前記ディスプレーは前記ブラウジングモードの色温度が最高の区間に属する場合色温度が低い順から、前記ブラウジングモードの色温度が中間である区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が最低の区間に属する場合に色温度が高い映像から出力することを特徴とする請求項３に記載の色温度を用いた映像ブラウジング装置。
【請求項１０】
映像の色温度を算出する段階と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって所定の色温度区間に分け、前記映像の色温度が属する色温度区間を示す所定ビットの第１メタデータと、前記所定の色温度区間で各色温度区間を所定のサブ区間に分け、前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す所定ビットの第２メタデータで前記映像を記述する段階を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１１】
映像の色温度を算出する段階と、
映像ブラウジングモードを人が映像に対して感じる寒暖の程度によって“熱さ”、“温かさ”、“普通”、“涼しさ”に該当する四つの色温度区間に分け、前記映像の色温度が属する色温度区間を示す２ビットの第１メタデータを生成し、前記四つの色温度区間で各色温度区間を６４個のサブ区間に分け、 前記映像の色温度が属する色温度区間で前記映像の色温度が属するサブ区間を示す６ビットの第２メタデータで前記映像を記述する段階を含み、前記映像のメタデータを用いて映像をブラウジングすることを特徴とする色温度を用いた映像ブラウジング方法。
【請求項１２】
前記映像を映像データベースに記憶する段階と、
前記映像のメタデータをメタデータデータベースに記憶する段階と、
ユーザから前記映像ブラウジングモードを入力される段階と、
前記メタデータデータベースから前記映像ブラウジングモードの検索される色温度に対応する範囲のメタデータを検索し、検索されたメタデータに対応する映像を前記映像データベースから受信して出力する段階をさらに含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１３】
前記色温度計算段階は、
前記映像の座標系を光源の色座標系に変換し、前記色座標系を用いて照明色を求める段階と、
前記照明色を前記色温度に変換する段階を含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１４】
前記色座標系変換段階は前記映像をCIE X,Y,Z空間に変換した後、前記CIE X,Y,Z空間の映像を前記光源の色座標系に変換することを特徴とする請求項１３に記載の色温度を用いた映像ブラウジング方法。
【請求項１５】
入力された映像が動映像の場合に入力された動映像をショット単位で分割する段階をさらに含むことを特徴とする請求項１０または１１に記載の色温度を用いた映像ブラウジング方法。
【請求項１６】
前記色温度区間は、
人が映像に対して感じる寒暖の程度によって分類した“熱さ”に対応する１６６７Ｋないし２２５０Ｋの第１区間、“温かさ”に対応する２２５１Ｋないし４１７０Ｋの第２区間、“普通”に対応する４１７１Ｋないし８０５０Ｋの第３区間及び“涼しさ”に対応する８０６１Ｋないし２５０００Ｋの第４区間より構成され、前記第１メタデータは第１ないし第４区間のうちいずれか一つを示す第１表現子を含むことを特徴とする請求項１０に記載の色温度を用いた映像ブラウジング方法。
【請求項１７】
前記第１ないし第４区間の各々は1000000を映像の色温度で割った値のRECIPROCAL色温度によって６４個の区間に分割され、前記第２メタデータは前記６４個の区間を示す第２表現子を含むことを特徴とする請求項１６に記載の映像ブラウジング方法。
【請求項１８】
前記出力段階は前記ブラウジングモードの色温度が最高の区間に属する場合色温度が低い順から、前記ブラウジングモードの色温度が中間の区間に属する場合には前記区間の平均値から偏差が小さい順に、前記ブラウジングモードの色温度が最低の区間に属する場合に色温度が高い映像から出力することを特徴とする請求項１２に記載の映像ブラウジング方法。
【請求項１９】
請求項１０ないし１８のいずれか一つの方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【図１】
【図２】
【図４】
【図５】
【図６】
【図７】
【図３】
【図８】
【図２】
【図４】
【図５】
【図６】
【図７】
【図３】
【図８】
【公開番号】特開２００６−１３９８１０（Ｐ２００６−１３９８１０Ａ）
【公開日】平成１８年６月１日（２００６．６．１）
【国際特許分類】
【出願番号】特願２００６−３３１２５（Ｐ２００６−３３１２５）
【出願日】平成１８年２月９日（２００６．２．９）
【分割の表示】特願２００２−１９９６７８（Ｐ２００２−１９９６７８）の分割
【原出願日】平成１４年７月９日（２００２．７．９）
【出願人】（３９００１９８３９）三星電子株式会社 (8,520)
【氏名又は名称原語表記】Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ．
【住所又は居所原語表記】４１６，Ｍａｅｔａｎ−ｄｏｎｇ，Ｙｅｏｎｇｔｏｎｇ−ｇｕ，Ｓｕｗｏｎ−ｓｉ Ｇｙｅｏｎｇｇｉ−ｄｏ，Ｒｅｐｕｂｌｉｃ ｏｆ Ｋｏｒｅａ
【Ｆターム（参考）】
【公開日】平成１８年６月１日（２００６．６．１）
【国際特許分類】
【出願日】平成１８年２月９日（２００６．２．９）
【分割の表示】特願２００２−１９９６７８（Ｐ２００２−１９９６７８）の分割
【原出願日】平成１４年７月９日（２００２．７．９）
【出願人】（３９００１９８３９）三星電子株式会社 (8,520)
【氏名又は名称原語表記】Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ．
【住所又は居所原語表記】４１６，Ｍａｅｔａｎ−ｄｏｎｇ，Ｙｅｏｎｇｔｏｎｇ−ｇｕ，Ｓｕｗｏｎ−ｓｉ Ｇｙｅｏｎｇｇｉ−ｄｏ，Ｒｅｐｕｂｌｉｃ ｏｆ Ｋｏｒｅａ
【Ｆターム（参考）】
[ Back to top ]