調理支援装置、および調理支援方法
【課題】食材を簡単に調理できるようにする調理支援装置、および調理支援方法を提供すること。
【解決手段】調理支援装置１は、デジタルカメラ部１０と、プロジェクター部２０と、識別処理部３０と、調理方法決定部４０と、調理方法指示部５０とを備えている。デジタルカメラ部１０は、システムキッチンの調理台Ｔに載置された食材Ｆを撮像する。識別処理部３０は、撮像された画像に写る食材の種類を識別し、調理方法決定部４０は、識別された食材に対する調理方法を決定する。調理方法指示部５０は、識別した食材に対する調理方法を示す画像をプロジェクター部２０に投影させる。プロジェクター部２０が投影した画像は、調理台Ｔに載置された食材Ｆに重なって表示されるので、調理者にとっては、調理台Ｔに載置された食材Ｆに対する調理方法が分かり易く、食材を簡単に調理できるようになる。
【解決手段】調理支援装置１は、デジタルカメラ部１０と、プロジェクター部２０と、識別処理部３０と、調理方法決定部４０と、調理方法指示部５０とを備えている。デジタルカメラ部１０は、システムキッチンの調理台Ｔに載置された食材Ｆを撮像する。識別処理部３０は、撮像された画像に写る食材の種類を識別し、調理方法決定部４０は、識別された食材に対する調理方法を決定する。調理方法指示部５０は、識別した食材に対する調理方法を示す画像をプロジェクター部２０に投影させる。プロジェクター部２０が投影した画像は、調理台Ｔに載置された食材Ｆに重なって表示されるので、調理者にとっては、調理台Ｔに載置された食材Ｆに対する調理方法が分かり易く、食材を簡単に調理できるようになる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、システムキッチン等における調理を支援する調理支援装置、および調理支援方法に関する。
【背景技術】
【０００２】
従来、プロジェクター装置により、システムキッチンの天板上に操作パネルを投影し、投影された操作パネルの項目をユーザーが指示することにより、調理姿勢を維持しながら、必要な情報を視認できるようにしたキッチンシステムが知られている。（例えば、特許文献１参照）。また、特許文献１に記載のキッチンシステムでは、ユーザーの指示によって料理のレシピを表示するようになっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−３１４５３１号公報（第２０頁、段落（０１３８）および（０１３９）参照）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載のキッチンシステムは、レシピを表示しているが、実際の食材に対する調理方法をその食材に対して直接指示するものではない。このため、調理しようとする者は、一方でレシピを読み進めながら、他方で調理にも取り掛かっているという状況が発生することになり、特に、料理の初心者にとっては簡単に調理できるとはいえなかった。
【課題を解決するための手段】
【０００５】
本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態または適用例として実現することが可能である。
【０００６】
［適用例１］食材の調理を支援する調理支援装置であって、前記食材を被写体とした撮像を行う撮像部と、画像を投影するための投影部と、前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別する識別部と、前記識別された食材の種類に応じて、前記食材への調理方法を決定する調理方法決定部と、を備え、前記投影部は、前記決定した調理方法を表す画像を前記食材に重ねて投影することを特徴とする調理支援装置。
【０００７】
この構成によれば、食材に重ねて当該食材への調理方法を表す画像が投影表示される。したがって、食材を調理しようとする者は、食材自体を視認することにより、その食材に対する調理方法を簡単に知ることができ、食材の調理が簡単になる。
【０００８】
［適用例２］上記調理支援装置において、前記調理方法決定部は、前記識別された食材から作ることができる献立を決定し、前記決定した献立を作るために前記識別された食材に対して行うべき調理の方法を決定することを特徴とする調理支援装置。
【０００９】
この構成によれば、献立に応じた調理方法を表す画像が食材に重ねて投影表示されるので、食材を調理しようとする者は、献立に応じた適切な調理方法を簡単に知ることができる。
【００１０】
［適用例３］上記調理支援装置において、前記投影部は、前記決定した献立の盛り付け例を表す画像を投影することを特徴とする調理支援装置。
【００１１】
この構成によれば、献立の盛り付け例を表す画像が投影表示されるので、調理する者は、料理の盛り付けを簡単に行うことができる。
【００１２】
［適用例４］上記調理支援装置において、料理皿を被写体とする画像が前記撮像部によって撮像された場合、前記投影部は、前記決定した献立の盛り付け例を表す画像を前記料理皿に重ねて投影することを特徴とする調理支援装置。
【００１３】
この構成によれば、献立の盛り付け例を表す画像が料理皿に重ねて投影表示されるので、料理の盛り付けがよりイメージし易くなって、料理の盛り付けをより簡単に行うことができる。
【００１４】
［適用例５］食材の調理を支援する調理支援方法であって、前記食材を被写体とした撮像を行うステップと、前記撮像された画像に写る食材の種類を判定するステップと、前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別するステップと、前記識別された食材の種類に応じて、前記食材への調理方法を決定するステップと、前記決定した調理方法を表す画像を前記食材に重ねて投影するステップと、を含むことを特徴とする調理支援方法。
【００１５】
このようにすれば、食材に重ねて当該食材への調理方法を表す画像が投影表示されるので、調理する者は食材自体を視認することにより、その食材に対する調理方法を簡単に知ることができる。
【図面の簡単な説明】
【００１６】
【図１】本実施例に係る調理支援装置の概略を示す図。
【図２】調理支援装置の構成を示す図。
【図３】プロジェクター部の断面構成を示す図。
【図４】光学エンジンの構成を示す図。
【図５】食材データベースを説明する図。
【図６】献立データベースを説明する図。
【図７】調理支援装置の動作手順を示すフローチャート。
【図８】食材に対する調理方法の投影表示例を示す図。
【発明を実施するための形態】
【００１７】
以下、本発明の実施の形態について実施例に基づいて説明する。
【００１８】
図１は、本実施例に係る調理支援装置の概略図である。図１に示すように、調理支援装置１はシステムキッチン２等に設けられ、システムキッチン２における調理者の立ち位置側から見て、調理台Ｔより奥側に設置される。なお、本実施例の調理支援装置１は、調理台Ｔに載置された食材を用いる調理方法を、調理する者に案内しようとするものである。
【００１９】
図２に、調理支援装置の構成を示す。図２に示すように、調理支援装置１は、デジタルカメラ部（撮像部）１０と、プロジェクター部（投影部）２０と、識別処理部（識別部）３０と、食材データベース３５と、調理方法決定部４０と、献立データベース４５と、調理方法指示部５０と、を備えている。以下、調理支援装置１の各構成について説明する。
【００２０】
デジタルカメラ部１０は、撮像レンズ、撮像素子、撮像回路等を有するハードウェア部であり、撮像レンズから取り込んだ被写体光を撮像素子が画像信号に変換し、撮像回路が画像信号を画像に変換することにより、被写体の撮像を行う。また、デジタルカメラ部１０は、調理台Ｔおよび調理台Ｔに載置された食材Ｆを撮像可能な位置に設置される。
【００２１】
プロジェクター部２０は、画像の光学像を投影表示するハードウェア部であり、キッチンの調理台Ｔ上の所定領域Ａ（図１参照）が投影面となるように設置される。
【００２２】
ここで、プロジェクター部２０の構成について説明する。図３は、プロジェクター部２０の断面構成を示す図である。図３に示すように、プロジェクター部２０は、光学エンジン２１と、投写レンズ２２と、第１ミラー２３と、第２ミラー２４とを有する。
【００２３】
図４に、光学エンジン２１の概略構成を示す。図４に示すように、光学エンジン２１は、赤光（Ｒ光）、緑光（Ｇ光）、青光（Ｂ光）の各色用ＬＥＤ２１０Ｒ，２１０Ｇ，２１０Ｂと、コリメータレンズ２２０Ｒ，２２０Ｇ，２２０Ｂと、空間光変調装置２３０Ｒ，２３０Ｇ，２３０Ｂと、クロスダイクロイックプリズム２４０を有する。
【００２４】
ＬＥＤ２１０Ｒは、Ｒ光を供給する固体光源である。ＬＥＤ２１０ＲからのＲ光は、コリメータレンズ２２０Ｒで平行化された後、空間光変調装置２３０Ｒに入射する。空間光変調装置２３０Ｒは、Ｒ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｒで変調されたＲ光は、色合成光学系であるクロスダイクロイックプリズム２４０に入射する。
【００２５】
ＬＥＤ２１０Ｇは、Ｇ光を供給する固体光源である。ＬＥＤ２１０ＧからのＧ光は、コリメータレンズ２２０Ｇで平行化された後、空間光変調装置２３０Ｇに入射する。空間光変調装置２３０Ｇは、Ｇ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｇで変調されたＧ光は、クロスダイクロイックプリズム２４０に入射する。
【００２６】
ＬＥＤ２１０Ｂは、Ｂ光を供給する固体光源である。ＬＥＤ２１０ＢからのＢ光は、コリメータレンズ２２０Ｂで平行化された後、空間光変調装置２３０Ｂに入射する。空間光変調装置２３０Ｂは、Ｂ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｂで変調されたＢ光は、クロスダイクロイックプリズム２４０に入射する。
【００２７】
クロスダイクロイックプリズム２４０には、互いに略直交するように配置された２つのダイクロイック膜２５０，２６０が形成されている。第１ダイクロイック膜２５０は、Ｒ光を反射し、Ｇ光およびＢ光を透過させる。一方、第２ダイクロイック膜２６０は、Ｂ光を反射し、Ｒ光およびＧ光を透過させる。これにより、クロスダイクロイックプリズム２４０は、それぞれ異なる側から入射したＲ光、Ｇ光およびＢ光を合成し、投写レンズ２２の方向へ出射する。クロスダイクロイックプリズム２４０で合成された光は投写レンズ２２によって投写される。
【００２８】
なお、光学エンジン２１としては、上述の構成に限られることなく、例えば、ＬＥＤ以外の固体光源を用いてもよいし、高圧水銀ランプ等のランプ光源からの光をロッドインテグレーターやフライアイレンズで均一化して、均一な平行光を光変調装置に入射する構成としてもよい。また、空間光変調装置としても、透過型の液晶表示装置に限られることなく、反射型の液晶表示装置、ＤＭＤ（Digital Micromirror Device）、ＧＬＶ（Grating Light Value）等を用いてもよい。
【００２９】
図３の説明に戻って、第１ミラー２３は、投写レンズ２２および第２ミラー２４に対向する位置に設けられている。第１ミラー２３は、投写レンズ２２からの光を反射により折り曲げて第２ミラー２４に向けて進行させる。
【００３０】
第２ミラー２４は、第１ミラー２３に対向する位置であって、プロジェクター部２０を箱状に囲む筐体の内側、調理台Ｔとは反対となる面に設けられている。第２ミラー２４の反射面は、調理台Ｔの方向に向けて凸状となる曲面形状をしており、第１ミラー２３からの光を反射することにより、主に鉛直方向に光を広角化する。こうして、投写レンズ２２だけでなく、さらに第２ミラー２４によって光を広角化することにより、投写レンズ２２から投影面までの距離を短縮できる、また、投写レンズ２２のみによって広角化する場合に比べると、投写レンズ２２の小型化、軽量化を図ることができる。
【００３１】
また、第２ミラー２４によって反射された光は調理台Ｔの面に沿う方向に進行する。すなわち、調理台Ｔの面に対して寝かせた光が進行する。これにより、第２ミラー２４で反射した光は、プロジェクター部２０の出射側に設けられたガラス等の透明部材２５を透過して、調理台Ｔを照射する。
【００３２】
こうして、光学エンジン２１から出射された光を第１ミラー２３、第２ミラー２４で順次反射させることによって、プロジェクター部２０は、空間光変調装置２３０で変調した画像光を調理台Ｔ上の所定領域Ａに投影する。なお、調理支援装置１は、調理者の立ち位置から見てシステムキッチン２の奥側に設置されており、且つ、調理台Ｔの面に沿う方向に投写光が進行するようにしたことにより、調理台Ｔに向けて出射した光が、調理する者自身の手等によって遮られることを防いでいる。
【００３３】
次に、図２の説明に戻って、識別処理部３０について説明する。識別処理部３０は、デジタルカメラ部１０が撮像した画像に基づいて、画像に被写体として写った食材の種類を識別する画像処理を行う。
【００３４】
識別処理部３０による識別は、食材データベース３５を参照することにより行われる。図５に例として示すように、食材データベース３５には、様々な食材のそれぞれについて、食材の代表的な色彩を示す色データと食材の代表的な外形を表すテンプレートデータが登録されている。識別処理部３０は、食材データベース３５に登録された色データ、テンプレートデータを用いた画像処理によって、画像に写った食材の種類を識別する。
【００３５】
例えば、識別処理部３０は、食材が調理台に載置される前後の画像を比較することにより変化が生じた領域を抽出する。そして、抽出領域の色を、食材データベース３５に登録された各食材の色データと照合し、抽出領域の色に該当する色データの食材が候補となる。さらに、各候補について、食材データベース３５に登録された各テンプレートとのテンプレートマッチングを行い、一致度が最も大きくなった候補の食材名として認識することにより、調理台Ｔに載置された食材の種類が判明する。もっとも、食材の識別方法としては、これに限られるものではない。
【００３６】
また、調理台Ｔに料理皿がセットされている場合、識別処理部３０は、画像に被写体として写った料理皿を認識するための処理を行う。
【００３７】
調理方法決定部４０は、献立データベース４５を参照して、識別された食材に対する調理方法を決定する。図６に例として示すように、献立データベース４５には、様々な献立のそれぞれについて、必要な食材のデータ、調理方法のデータ、盛り付け例の画像データが登録されている。調理方法決定部４０は、献立データベース４５のうち、必要な食材のデータを参照して、識別処理部３０によって種類が判明した食材から作ることができる献立を決定する。図６の献立データベース４５によれば、例えば、食材Ａ、食材Ｂ、食材Ｄが画像に写っていた場合、すなわち、調理台Ｔに載置されていた場合、献立Ａを作ることができると判断される。そして、さらに献立データベース４５を参照することにより、決定した献立に応じて調理方法および盛り付け例が決定する。
【００３８】
調理方法指示部５０は、調理台Ｔに載置された食材への調理方法を表す画像や、調理後の盛り付け例を表す画像をプロジェクター部２０に投影させることにより、調理方法、盛り付けを、調理者に指示する制御を行う。
【００３９】
図７は、調理支援装置１の動作手順を示すフローチャートである。以下、調理支援装置１の動作についてフローチャートに従って説明する。
【００４０】
図７の処理を開始すると、まず、デジタルカメラ部１０は、調理台Ｔを撮像する（ステップＳ１０）。これにより、調理台Ｔに載置された食材を被写体とした画像が撮像される。
【００４１】
次に、識別処理部３０は、食材データベース３５を参照して、画像に写った食材を識別して、食材の種類、および調理台Ｔに載置された食材の位置を特定する（ステップＳ２０）。なお、撮像した画像に、複数の食材が写っていた場合、それぞれの食材について食材の種類および位置が特定される。
【００４２】
次に、調理方法決定部４０は、献立データベース４５を参照して、調理台Ｔに載置された食材から作ることができる献立を決定する（ステップＳ３０）。なお、調理台Ｔに載置された食材から複数の献立を作ることが可能であった場合、例えば、システムキッチンに設けられた操作パネル、リモコン（図示なし）等へのユーザー操作、または音声認識等によって、所望の献立を決定する。
【００４３】
次に、調理方法指示部５０は、献立に応じた食材の調理方法を食材Ｆに重ねて投影することにより、食材Ｆに対する調理の指示を行う（ステップＳ４０）。ここでは、調理データに従って、図８に例として示す画像が食材Ｆに重ねて投影表示される。なお、図８では、調理台Ｔに載置された実物の食材Ｆを破線で示し、プロジェクター部２０が投影する画像を実線で示している。プロジェクター部２０が投影する画像には、食材に対するカットラインＣＬ、および調理方法を指示するメッセージＭが含まれている。カットラインＣＬは実物の食材Ｆに重ねて投影され、実物の食材Ｆを指し示すメッセージＭにより、指し示す食材Ｆに対してカットラインＣＬに沿ってカットする旨を指示している。すなわち、調理方法指示部５０は、投影時に食材Ｆに重なる位置にカットラインＣＬおよびメッセージＭを配置した投影用画像を生成して、この投影用画像をプロジェクター部２０に投影させる。
【００４４】
このとき、調理者は、調理台Ｔに投影表示されたメッセージＭの指示に従い、カットラインＣＬに沿って食材Ｆをカットすることができる。なお、図８では、調理の指示を一例についてのみ示したが、この指示に従う調理作業を終えると、次の調理作業を指示する画面が調理台Ｔに投影されるようにして、調理方法が次々に指示される。
【００４５】
調理台Ｔに次々に投影される指示に従って調理を終えると、次に、調理方法指示部５０は、調理後の料理について盛り付け指示を行うかを判断する（ステップＳ５０）。この判断は、例えば、操作パネル、リモコン等への操作または音声認識等に基づいて行われる。ユーザー操作に従い、盛り付け指示を行うと判断した場合（ステップＳ５０：Ｙｅｓ）、ステップＳ６０に進む。盛り付け指示を行わないと判断した場合（ステップＳ５０：Ｎｏ）、盛り付け指示を行うことなく、図７の処理を終了する。
【００４６】
ステップＳ６０に処理が進み、調理方法指示部５０からの指示によって調理者が料理皿を調理台Ｔにセットすると、デジタルカメラ部１０は調理台Ｔを撮像する（ステップＳ７０）。
【００４７】
次に、識別処理部３０は、画像に写った料理皿を識別して、料理皿の位置を特定する（ステップＳ８０）。そして、調理方法指示部５０は、プロジェクター部２０を制御して、献立に応じた盛り付け例の画像を料理皿に重ねて投影表示させる（ステップＳ９０）。すなわち、調理方法指示部５０は、投影時に料理皿に重なる位置に盛り付け例の画像を配置した投影用画像を生成して、この投影用画像をプロジェクター部２０に投影させる。このとき、調理者は、調理台Ｔに投影表示された画像に従って、調理した料理を料理皿に盛り付けることができる。こうして、盛り付け例の表示が行われると、図７の処理を終了する。
【００４８】
以上に述べたように、本実施例の調理支援装置１によれば、調理台Ｔに載置された食材Ｆに重ねて、その食材への調理方法が投影表示されるので、調理者は、どの食材に対してどのような調理を行うべきであるかを簡単に把握することができ、調理台Ｔに載置された食材Ｆに対する調理方法が分かり易い。したがって、調理者には食材の調理を簡単に行うことができるようになり、利便性に優れた調理環境を提供することが可能となる。
【００４９】
以上、実施の形態の一実施例について説明したが、実施の形態としては上述した全ての構成を備えたものに限られることなく、また、その趣旨に逸脱しない様々な形態としてもよい。以下、変形例について説明する。
【００５０】
（変形例１）上記実施例では、投影時に食材に重なる位置にカットラインＣＬやメッセージＭ等を配置した画像を生成するようにしたが、食材に重ねた画像表示を行う方法としてはこれに限られない。例えば、投写レンズの位置をシフトさせるレンズシフト機構を設けたプロジェクター部２０の構成とし、調理方法指示部５０は、レンズシフトを制御することによってカットラインＣＬやメッセージＭ等、調理方法を指示する表示の投影位置を実際の食材に重ねるように調整してもよい。
【００５１】
（変形例２）上記実施例では、システムキッチン２の調理台に載置された食材Ｆに対して、作ることができる献立を決定するようにしたが、これに限られない。例えば、調理者から献立の指定を始めに受けて、献立に必要な食材Ｆの画像を調理台Ｔに投影する。その後、投影された全ての食材Ｆが調理台Ｔに実際に載置された場合に、各食材に対する調理方法を各食材に重ねて投影表示するようにしてもよい。
【００５２】
（変形例３）上記実施例では、調理支援装置１が、撮像部としてのデジタルカメラ部１０および投影部としてのプロジェクター部２０を内蔵しているが、撮像部または投影部を外付けの構成としてもよい。すなわち、調理支援装置に対してデジタルスチルカメラやデジタルビデオカメラを外付け接続した構成としてもよいし、調理支援装置に対してプロジェクターを外付け接続した構成としてもよい。
【符号の説明】
【００５３】
１…調理支援装置、２…システムキッチン、１０…撮像部としてのデジタルカメラ部、２０…投影部としてのプロジェクター部、２１…光学エンジン、２２…投写レンズ、２３…第１ミラー、２４…第２ミラー、３０…識別部としての識別処理部、３５…食材データベース、４０…調理方法決定部、４５…献立データベース、５０…調理方法指示部。
【技術分野】
【０００１】
本発明は、システムキッチン等における調理を支援する調理支援装置、および調理支援方法に関する。
【背景技術】
【０００２】
従来、プロジェクター装置により、システムキッチンの天板上に操作パネルを投影し、投影された操作パネルの項目をユーザーが指示することにより、調理姿勢を維持しながら、必要な情報を視認できるようにしたキッチンシステムが知られている。（例えば、特許文献１参照）。また、特許文献１に記載のキッチンシステムでは、ユーザーの指示によって料理のレシピを表示するようになっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−３１４５３１号公報（第２０頁、段落（０１３８）および（０１３９）参照）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載のキッチンシステムは、レシピを表示しているが、実際の食材に対する調理方法をその食材に対して直接指示するものではない。このため、調理しようとする者は、一方でレシピを読み進めながら、他方で調理にも取り掛かっているという状況が発生することになり、特に、料理の初心者にとっては簡単に調理できるとはいえなかった。
【課題を解決するための手段】
【０００５】
本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態または適用例として実現することが可能である。
【０００６】
［適用例１］食材の調理を支援する調理支援装置であって、前記食材を被写体とした撮像を行う撮像部と、画像を投影するための投影部と、前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別する識別部と、前記識別された食材の種類に応じて、前記食材への調理方法を決定する調理方法決定部と、を備え、前記投影部は、前記決定した調理方法を表す画像を前記食材に重ねて投影することを特徴とする調理支援装置。
【０００７】
この構成によれば、食材に重ねて当該食材への調理方法を表す画像が投影表示される。したがって、食材を調理しようとする者は、食材自体を視認することにより、その食材に対する調理方法を簡単に知ることができ、食材の調理が簡単になる。
【０００８】
［適用例２］上記調理支援装置において、前記調理方法決定部は、前記識別された食材から作ることができる献立を決定し、前記決定した献立を作るために前記識別された食材に対して行うべき調理の方法を決定することを特徴とする調理支援装置。
【０００９】
この構成によれば、献立に応じた調理方法を表す画像が食材に重ねて投影表示されるので、食材を調理しようとする者は、献立に応じた適切な調理方法を簡単に知ることができる。
【００１０】
［適用例３］上記調理支援装置において、前記投影部は、前記決定した献立の盛り付け例を表す画像を投影することを特徴とする調理支援装置。
【００１１】
この構成によれば、献立の盛り付け例を表す画像が投影表示されるので、調理する者は、料理の盛り付けを簡単に行うことができる。
【００１２】
［適用例４］上記調理支援装置において、料理皿を被写体とする画像が前記撮像部によって撮像された場合、前記投影部は、前記決定した献立の盛り付け例を表す画像を前記料理皿に重ねて投影することを特徴とする調理支援装置。
【００１３】
この構成によれば、献立の盛り付け例を表す画像が料理皿に重ねて投影表示されるので、料理の盛り付けがよりイメージし易くなって、料理の盛り付けをより簡単に行うことができる。
【００１４】
［適用例５］食材の調理を支援する調理支援方法であって、前記食材を被写体とした撮像を行うステップと、前記撮像された画像に写る食材の種類を判定するステップと、前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別するステップと、前記識別された食材の種類に応じて、前記食材への調理方法を決定するステップと、前記決定した調理方法を表す画像を前記食材に重ねて投影するステップと、を含むことを特徴とする調理支援方法。
【００１５】
このようにすれば、食材に重ねて当該食材への調理方法を表す画像が投影表示されるので、調理する者は食材自体を視認することにより、その食材に対する調理方法を簡単に知ることができる。
【図面の簡単な説明】
【００１６】
【図１】本実施例に係る調理支援装置の概略を示す図。
【図２】調理支援装置の構成を示す図。
【図３】プロジェクター部の断面構成を示す図。
【図４】光学エンジンの構成を示す図。
【図５】食材データベースを説明する図。
【図６】献立データベースを説明する図。
【図７】調理支援装置の動作手順を示すフローチャート。
【図８】食材に対する調理方法の投影表示例を示す図。
【発明を実施するための形態】
【００１７】
以下、本発明の実施の形態について実施例に基づいて説明する。
【００１８】
図１は、本実施例に係る調理支援装置の概略図である。図１に示すように、調理支援装置１はシステムキッチン２等に設けられ、システムキッチン２における調理者の立ち位置側から見て、調理台Ｔより奥側に設置される。なお、本実施例の調理支援装置１は、調理台Ｔに載置された食材を用いる調理方法を、調理する者に案内しようとするものである。
【００１９】
図２に、調理支援装置の構成を示す。図２に示すように、調理支援装置１は、デジタルカメラ部（撮像部）１０と、プロジェクター部（投影部）２０と、識別処理部（識別部）３０と、食材データベース３５と、調理方法決定部４０と、献立データベース４５と、調理方法指示部５０と、を備えている。以下、調理支援装置１の各構成について説明する。
【００２０】
デジタルカメラ部１０は、撮像レンズ、撮像素子、撮像回路等を有するハードウェア部であり、撮像レンズから取り込んだ被写体光を撮像素子が画像信号に変換し、撮像回路が画像信号を画像に変換することにより、被写体の撮像を行う。また、デジタルカメラ部１０は、調理台Ｔおよび調理台Ｔに載置された食材Ｆを撮像可能な位置に設置される。
【００２１】
プロジェクター部２０は、画像の光学像を投影表示するハードウェア部であり、キッチンの調理台Ｔ上の所定領域Ａ（図１参照）が投影面となるように設置される。
【００２２】
ここで、プロジェクター部２０の構成について説明する。図３は、プロジェクター部２０の断面構成を示す図である。図３に示すように、プロジェクター部２０は、光学エンジン２１と、投写レンズ２２と、第１ミラー２３と、第２ミラー２４とを有する。
【００２３】
図４に、光学エンジン２１の概略構成を示す。図４に示すように、光学エンジン２１は、赤光（Ｒ光）、緑光（Ｇ光）、青光（Ｂ光）の各色用ＬＥＤ２１０Ｒ，２１０Ｇ，２１０Ｂと、コリメータレンズ２２０Ｒ，２２０Ｇ，２２０Ｂと、空間光変調装置２３０Ｒ，２３０Ｇ，２３０Ｂと、クロスダイクロイックプリズム２４０を有する。
【００２４】
ＬＥＤ２１０Ｒは、Ｒ光を供給する固体光源である。ＬＥＤ２１０ＲからのＲ光は、コリメータレンズ２２０Ｒで平行化された後、空間光変調装置２３０Ｒに入射する。空間光変調装置２３０Ｒは、Ｒ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｒで変調されたＲ光は、色合成光学系であるクロスダイクロイックプリズム２４０に入射する。
【００２５】
ＬＥＤ２１０Ｇは、Ｇ光を供給する固体光源である。ＬＥＤ２１０ＧからのＧ光は、コリメータレンズ２２０Ｇで平行化された後、空間光変調装置２３０Ｇに入射する。空間光変調装置２３０Ｇは、Ｇ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｇで変調されたＧ光は、クロスダイクロイックプリズム２４０に入射する。
【００２６】
ＬＥＤ２１０Ｂは、Ｂ光を供給する固体光源である。ＬＥＤ２１０ＢからのＢ光は、コリメータレンズ２２０Ｂで平行化された後、空間光変調装置２３０Ｂに入射する。空間光変調装置２３０Ｂは、Ｂ光を画像信号に応じて変調する透過型の液晶表示装置である。空間光変調装置２３０Ｂで変調されたＢ光は、クロスダイクロイックプリズム２４０に入射する。
【００２７】
クロスダイクロイックプリズム２４０には、互いに略直交するように配置された２つのダイクロイック膜２５０，２６０が形成されている。第１ダイクロイック膜２５０は、Ｒ光を反射し、Ｇ光およびＢ光を透過させる。一方、第２ダイクロイック膜２６０は、Ｂ光を反射し、Ｒ光およびＧ光を透過させる。これにより、クロスダイクロイックプリズム２４０は、それぞれ異なる側から入射したＲ光、Ｇ光およびＢ光を合成し、投写レンズ２２の方向へ出射する。クロスダイクロイックプリズム２４０で合成された光は投写レンズ２２によって投写される。
【００２８】
なお、光学エンジン２１としては、上述の構成に限られることなく、例えば、ＬＥＤ以外の固体光源を用いてもよいし、高圧水銀ランプ等のランプ光源からの光をロッドインテグレーターやフライアイレンズで均一化して、均一な平行光を光変調装置に入射する構成としてもよい。また、空間光変調装置としても、透過型の液晶表示装置に限られることなく、反射型の液晶表示装置、ＤＭＤ（Digital Micromirror Device）、ＧＬＶ（Grating Light Value）等を用いてもよい。
【００２９】
図３の説明に戻って、第１ミラー２３は、投写レンズ２２および第２ミラー２４に対向する位置に設けられている。第１ミラー２３は、投写レンズ２２からの光を反射により折り曲げて第２ミラー２４に向けて進行させる。
【００３０】
第２ミラー２４は、第１ミラー２３に対向する位置であって、プロジェクター部２０を箱状に囲む筐体の内側、調理台Ｔとは反対となる面に設けられている。第２ミラー２４の反射面は、調理台Ｔの方向に向けて凸状となる曲面形状をしており、第１ミラー２３からの光を反射することにより、主に鉛直方向に光を広角化する。こうして、投写レンズ２２だけでなく、さらに第２ミラー２４によって光を広角化することにより、投写レンズ２２から投影面までの距離を短縮できる、また、投写レンズ２２のみによって広角化する場合に比べると、投写レンズ２２の小型化、軽量化を図ることができる。
【００３１】
また、第２ミラー２４によって反射された光は調理台Ｔの面に沿う方向に進行する。すなわち、調理台Ｔの面に対して寝かせた光が進行する。これにより、第２ミラー２４で反射した光は、プロジェクター部２０の出射側に設けられたガラス等の透明部材２５を透過して、調理台Ｔを照射する。
【００３２】
こうして、光学エンジン２１から出射された光を第１ミラー２３、第２ミラー２４で順次反射させることによって、プロジェクター部２０は、空間光変調装置２３０で変調した画像光を調理台Ｔ上の所定領域Ａに投影する。なお、調理支援装置１は、調理者の立ち位置から見てシステムキッチン２の奥側に設置されており、且つ、調理台Ｔの面に沿う方向に投写光が進行するようにしたことにより、調理台Ｔに向けて出射した光が、調理する者自身の手等によって遮られることを防いでいる。
【００３３】
次に、図２の説明に戻って、識別処理部３０について説明する。識別処理部３０は、デジタルカメラ部１０が撮像した画像に基づいて、画像に被写体として写った食材の種類を識別する画像処理を行う。
【００３４】
識別処理部３０による識別は、食材データベース３５を参照することにより行われる。図５に例として示すように、食材データベース３５には、様々な食材のそれぞれについて、食材の代表的な色彩を示す色データと食材の代表的な外形を表すテンプレートデータが登録されている。識別処理部３０は、食材データベース３５に登録された色データ、テンプレートデータを用いた画像処理によって、画像に写った食材の種類を識別する。
【００３５】
例えば、識別処理部３０は、食材が調理台に載置される前後の画像を比較することにより変化が生じた領域を抽出する。そして、抽出領域の色を、食材データベース３５に登録された各食材の色データと照合し、抽出領域の色に該当する色データの食材が候補となる。さらに、各候補について、食材データベース３５に登録された各テンプレートとのテンプレートマッチングを行い、一致度が最も大きくなった候補の食材名として認識することにより、調理台Ｔに載置された食材の種類が判明する。もっとも、食材の識別方法としては、これに限られるものではない。
【００３６】
また、調理台Ｔに料理皿がセットされている場合、識別処理部３０は、画像に被写体として写った料理皿を認識するための処理を行う。
【００３７】
調理方法決定部４０は、献立データベース４５を参照して、識別された食材に対する調理方法を決定する。図６に例として示すように、献立データベース４５には、様々な献立のそれぞれについて、必要な食材のデータ、調理方法のデータ、盛り付け例の画像データが登録されている。調理方法決定部４０は、献立データベース４５のうち、必要な食材のデータを参照して、識別処理部３０によって種類が判明した食材から作ることができる献立を決定する。図６の献立データベース４５によれば、例えば、食材Ａ、食材Ｂ、食材Ｄが画像に写っていた場合、すなわち、調理台Ｔに載置されていた場合、献立Ａを作ることができると判断される。そして、さらに献立データベース４５を参照することにより、決定した献立に応じて調理方法および盛り付け例が決定する。
【００３８】
調理方法指示部５０は、調理台Ｔに載置された食材への調理方法を表す画像や、調理後の盛り付け例を表す画像をプロジェクター部２０に投影させることにより、調理方法、盛り付けを、調理者に指示する制御を行う。
【００３９】
図７は、調理支援装置１の動作手順を示すフローチャートである。以下、調理支援装置１の動作についてフローチャートに従って説明する。
【００４０】
図７の処理を開始すると、まず、デジタルカメラ部１０は、調理台Ｔを撮像する（ステップＳ１０）。これにより、調理台Ｔに載置された食材を被写体とした画像が撮像される。
【００４１】
次に、識別処理部３０は、食材データベース３５を参照して、画像に写った食材を識別して、食材の種類、および調理台Ｔに載置された食材の位置を特定する（ステップＳ２０）。なお、撮像した画像に、複数の食材が写っていた場合、それぞれの食材について食材の種類および位置が特定される。
【００４２】
次に、調理方法決定部４０は、献立データベース４５を参照して、調理台Ｔに載置された食材から作ることができる献立を決定する（ステップＳ３０）。なお、調理台Ｔに載置された食材から複数の献立を作ることが可能であった場合、例えば、システムキッチンに設けられた操作パネル、リモコン（図示なし）等へのユーザー操作、または音声認識等によって、所望の献立を決定する。
【００４３】
次に、調理方法指示部５０は、献立に応じた食材の調理方法を食材Ｆに重ねて投影することにより、食材Ｆに対する調理の指示を行う（ステップＳ４０）。ここでは、調理データに従って、図８に例として示す画像が食材Ｆに重ねて投影表示される。なお、図８では、調理台Ｔに載置された実物の食材Ｆを破線で示し、プロジェクター部２０が投影する画像を実線で示している。プロジェクター部２０が投影する画像には、食材に対するカットラインＣＬ、および調理方法を指示するメッセージＭが含まれている。カットラインＣＬは実物の食材Ｆに重ねて投影され、実物の食材Ｆを指し示すメッセージＭにより、指し示す食材Ｆに対してカットラインＣＬに沿ってカットする旨を指示している。すなわち、調理方法指示部５０は、投影時に食材Ｆに重なる位置にカットラインＣＬおよびメッセージＭを配置した投影用画像を生成して、この投影用画像をプロジェクター部２０に投影させる。
【００４４】
このとき、調理者は、調理台Ｔに投影表示されたメッセージＭの指示に従い、カットラインＣＬに沿って食材Ｆをカットすることができる。なお、図８では、調理の指示を一例についてのみ示したが、この指示に従う調理作業を終えると、次の調理作業を指示する画面が調理台Ｔに投影されるようにして、調理方法が次々に指示される。
【００４５】
調理台Ｔに次々に投影される指示に従って調理を終えると、次に、調理方法指示部５０は、調理後の料理について盛り付け指示を行うかを判断する（ステップＳ５０）。この判断は、例えば、操作パネル、リモコン等への操作または音声認識等に基づいて行われる。ユーザー操作に従い、盛り付け指示を行うと判断した場合（ステップＳ５０：Ｙｅｓ）、ステップＳ６０に進む。盛り付け指示を行わないと判断した場合（ステップＳ５０：Ｎｏ）、盛り付け指示を行うことなく、図７の処理を終了する。
【００４６】
ステップＳ６０に処理が進み、調理方法指示部５０からの指示によって調理者が料理皿を調理台Ｔにセットすると、デジタルカメラ部１０は調理台Ｔを撮像する（ステップＳ７０）。
【００４７】
次に、識別処理部３０は、画像に写った料理皿を識別して、料理皿の位置を特定する（ステップＳ８０）。そして、調理方法指示部５０は、プロジェクター部２０を制御して、献立に応じた盛り付け例の画像を料理皿に重ねて投影表示させる（ステップＳ９０）。すなわち、調理方法指示部５０は、投影時に料理皿に重なる位置に盛り付け例の画像を配置した投影用画像を生成して、この投影用画像をプロジェクター部２０に投影させる。このとき、調理者は、調理台Ｔに投影表示された画像に従って、調理した料理を料理皿に盛り付けることができる。こうして、盛り付け例の表示が行われると、図７の処理を終了する。
【００４８】
以上に述べたように、本実施例の調理支援装置１によれば、調理台Ｔに載置された食材Ｆに重ねて、その食材への調理方法が投影表示されるので、調理者は、どの食材に対してどのような調理を行うべきであるかを簡単に把握することができ、調理台Ｔに載置された食材Ｆに対する調理方法が分かり易い。したがって、調理者には食材の調理を簡単に行うことができるようになり、利便性に優れた調理環境を提供することが可能となる。
【００４９】
以上、実施の形態の一実施例について説明したが、実施の形態としては上述した全ての構成を備えたものに限られることなく、また、その趣旨に逸脱しない様々な形態としてもよい。以下、変形例について説明する。
【００５０】
（変形例１）上記実施例では、投影時に食材に重なる位置にカットラインＣＬやメッセージＭ等を配置した画像を生成するようにしたが、食材に重ねた画像表示を行う方法としてはこれに限られない。例えば、投写レンズの位置をシフトさせるレンズシフト機構を設けたプロジェクター部２０の構成とし、調理方法指示部５０は、レンズシフトを制御することによってカットラインＣＬやメッセージＭ等、調理方法を指示する表示の投影位置を実際の食材に重ねるように調整してもよい。
【００５１】
（変形例２）上記実施例では、システムキッチン２の調理台に載置された食材Ｆに対して、作ることができる献立を決定するようにしたが、これに限られない。例えば、調理者から献立の指定を始めに受けて、献立に必要な食材Ｆの画像を調理台Ｔに投影する。その後、投影された全ての食材Ｆが調理台Ｔに実際に載置された場合に、各食材に対する調理方法を各食材に重ねて投影表示するようにしてもよい。
【００５２】
（変形例３）上記実施例では、調理支援装置１が、撮像部としてのデジタルカメラ部１０および投影部としてのプロジェクター部２０を内蔵しているが、撮像部または投影部を外付けの構成としてもよい。すなわち、調理支援装置に対してデジタルスチルカメラやデジタルビデオカメラを外付け接続した構成としてもよいし、調理支援装置に対してプロジェクターを外付け接続した構成としてもよい。
【符号の説明】
【００５３】
１…調理支援装置、２…システムキッチン、１０…撮像部としてのデジタルカメラ部、２０…投影部としてのプロジェクター部、２１…光学エンジン、２２…投写レンズ、２３…第１ミラー、２４…第２ミラー、３０…識別部としての識別処理部、３５…食材データベース、４０…調理方法決定部、４５…献立データベース、５０…調理方法指示部。
【特許請求の範囲】
【請求項１】
食材の調理を支援する調理支援装置であって、
前記食材を被写体とした撮像を行う撮像部と、
画像を投影するための投影部と、
前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別する識別部と、
前記識別された食材の種類に応じて、前記食材への調理方法を決定する調理方法決定部と、を備え、
前記投影部は、前記決定した調理方法を表す画像を前記食材に重ねて投影することを特徴とする調理支援装置。
【請求項２】
請求項１に記載の調理支援装置において、
前記調理方法決定部は、前記識別された食材から作ることができる献立を決定し、前記決定した献立を作るために前記識別された食材に対して行うべき調理の方法を決定することを特徴とする調理支援装置。
【請求項３】
請求項２に記載の調理支援装置において、
前記投影部は、前記決定した献立の盛り付け例を表す画像を投影することを特徴とする調理支援装置。
【請求項４】
請求項３に記載の調理支援装置において、
料理皿を被写体とする画像が前記撮像部によって撮像された場合、前記投影部は、前記決定した献立の盛り付け例を表す画像を前記料理皿に重ねて投影することを特徴とする調理支援装置。
【請求項５】
食材の調理を支援する調理支援方法であって、
前記食材を被写体とした撮像を行うステップと、
前記撮像された画像に写る食材の種類を判定するステップと、
前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別するステップと、
前記識別された食材の種類に応じて、前記食材への調理方法を決定するステップと、
前記決定した調理方法を表す画像を前記食材に重ねて投影するステップと、を含むことを特徴とする調理支援方法。
【請求項１】
食材の調理を支援する調理支援装置であって、
前記食材を被写体とした撮像を行う撮像部と、
画像を投影するための投影部と、
前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別する識別部と、
前記識別された食材の種類に応じて、前記食材への調理方法を決定する調理方法決定部と、を備え、
前記投影部は、前記決定した調理方法を表す画像を前記食材に重ねて投影することを特徴とする調理支援装置。
【請求項２】
請求項１に記載の調理支援装置において、
前記調理方法決定部は、前記識別された食材から作ることができる献立を決定し、前記決定した献立を作るために前記識別された食材に対して行うべき調理の方法を決定することを特徴とする調理支援装置。
【請求項３】
請求項２に記載の調理支援装置において、
前記投影部は、前記決定した献立の盛り付け例を表す画像を投影することを特徴とする調理支援装置。
【請求項４】
請求項３に記載の調理支援装置において、
料理皿を被写体とする画像が前記撮像部によって撮像された場合、前記投影部は、前記決定した献立の盛り付け例を表す画像を前記料理皿に重ねて投影することを特徴とする調理支援装置。
【請求項５】
食材の調理を支援する調理支援方法であって、
前記食材を被写体とした撮像を行うステップと、
前記撮像された画像に写る食材の種類を判定するステップと、
前記撮像された画像に基づく画像処理により、前記画像に写る食材の種類を識別するステップと、
前記識別された食材の種類に応じて、前記食材への調理方法を決定するステップと、
前記決定した調理方法を表す画像を前記食材に重ねて投影するステップと、を含むことを特徴とする調理支援方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１０−１９１７４５（Ｐ２０１０−１９１７４５Ａ）
【公開日】平成２２年９月２日（２０１０．９．２）
【国際特許分類】
【出願番号】特願２００９−３６２６４（Ｐ２００９−３６２６４）
【出願日】平成２１年２月１９日（２００９．２．１９）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成２２年９月２日（２０１０．９．２）
【国際特許分類】
【出願日】平成２１年２月１９日（２００９．２．１９）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]