情報処理装置、店舗システム及びプログラム
【課題】店員が棚札をチェックする際の負担を低減することを可能とする。
【解決手段】情報処理装置１は、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６とを備える。画像データ取込部６０１は、カメラ５０が撮像した画像を取り込む。棚札認識部６０２は、取り込まれた画像に含まれる棚札を認識する。バーコード読取部６０３は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識部６０４は、認識された棚札に記載されている文字を認識する。照合部６０５は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知部６０６は、照合の結果に応じた報知を行う。
【解決手段】情報処理装置１は、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６とを備える。画像データ取込部６０１は、カメラ５０が撮像した画像を取り込む。棚札認識部６０２は、取り込まれた画像に含まれる棚札を認識する。バーコード読取部６０３は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識部６０４は、認識された棚札に記載されている文字を認識する。照合部６０５は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知部６０６は、照合の結果に応じた報知を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、情報処理装置、店舗システム及びプログラムに関する。
【背景技術】
【０００２】
従来、商品の値段等を表示する棚札を電子化した電子棚札システムが知られている。この電子棚札システムでは、ハンディターミナル等で、商品を識別するコードと棚札を識別するコードとが読み取られて、電子棚札システムにて商品と棚札とが関連づけられる。そして、商品のデータが、商品に関連付けられた棚札に、無線あるいは有線のネットワークを介して送信され、その棚札で商品名や価格等の情報が表示される。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
ところで、電子棚札システムの棚札は同じ大きさで統一されて目立たないことから、特売などを行う棚札は紙に大きく印字する場合がある。また、電子棚札システムを導入していない店舗では、陳列する全ての商品について、商品名や価格等の情報を印字した棚札を用いている。このような電子棚札システム以外の棚札については、システム上の商品名や価格と、棚札に印字している商品名や価格との間に齟齬が生じやすいため、店員が店舗を見回ってチェックする必要があるが、このチェック作業は店員への負担が大きいものであった。
【課題を解決するための手段】
【０００４】
上述した課題を解決するために、本発明の実施形態は、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段と、を備えることを特徴とする情報処理装置である。画像取込手段は、撮像手段が撮像した画像を取り込む。棚札認識手段は、取り込まれた画像に含まれる棚札を認識する。読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【０００５】
また、本発明の実施形態は、撮像装置と、情報処理装置と、を有することを特徴とする店舗システムである。撮像装置は、店舗内を撮像する。情報処理装置は、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段とを備える情報処理装置と、を備える。画像取込手段は、撮像装置が撮像した画像を取り込む。認識手段は、取り込まれた画像に含まれる棚札を認識する。棚札読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【０００６】
また、本発明の実施形態は、情報処理装置のコンピュータを、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段と、して機能させることを特徴とするプログラムである。画像取込手段は、撮像手段が撮像した画像を取り込む。棚札認識手段は、取り込まれた画像に含まれる棚札を認識する。読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【図面の簡単な説明】
【０００７】
【図１】図１は、店舗における情報処理装置の使用例を示す概念図である。
【図２】図２は、情報処理装置の正面外観を示す外観図である。
【図３】図３は、情報処理装置の背面外観を示す外観図である。
【図４】図４は、情報処理装置の構成を示すブロック図である。
【図５】図５は、情報処理装置の動作の一例を示すフローチャートである。
【図６】図６は、ディスプレイの表示例を示す情報処理装置の外観図である。
【図７】図７は、店舗システムの全体構成を概略的に示すシステム構成図である。
【図８】図８は、店舗システムにおける情報処理装置の表示画面例を示す図である。
【発明を実施するための形態】
【０００８】
以下では、本実施形態にかかる情報処理装置、店舗システム及びプログラムを図面を参照して説明する。
【０００９】
[第１の実施形態]
第１の実施形態では、システム上の商品名や価格と、棚札に印字している商品名や価格とのチェック作業を店員が店舗を見回って行う際に用いる情報処理装置を例示する。図１は店舗における情報処理装置の使用例を示す概念図である。図１に示すように、第１の実施形態では、店員Ｈは、情報処理装置１を所持して店舗１００内を見回りながら、情報処理装置１に表示される情報を確認し、棚札に印字している商品名や価格のチェックを行う。
【００１０】
図２は、情報処理装置１の正面外観を示す外観図である。図３は、情報処理装置１の背面外観を示す外観図である。図２に示すように、情報処理装置１の筐体１０正面には、ＬＣＤ（Liquid Crystal Display）等のディスプレイ２０と、そのディスプレイ２０に積層されたタッチパネル３０と、各種操作入力を行うための操作キー４０とを備える。図３に示すように、情報処理装置１の筐体１０背面には、ＣＭＯＳイメージセンサやＣＣＤイメージセンサなどのカメラ５０を備える。
【００１１】
店員Ｈは、筐体１０のサイドや背面などに手を添えて情報処理装置１を保持し、タッチパネル３０や操作キー４０による操作入力や、ディスプレイ２０の画面表示などを確認して使用する。この使用の際に、カメラ５０で撮像した画像をディスプレイ２０に表示する場合は、筐体１０背面にカメラ５０が設けられていることから、店員Ｈがディスプレイ２０を見る方向とカメラ５０が撮像する方向とが略一致することとなる。
【００１２】
図４は、情報処理装置１の構成を示すブロック図である。情報処理装置１は、ＣＰＵ６０（Central Processing Unit）と、ＲＯＭ６２（Read Only Memory）と、ＲＡＭ６３（Random Access Memory）と、通信Ｉ／Ｆ６４と、入出力ポート６５と、操作コントローラ６６と、表示コントローラ６７と、カメラコントローラ６８と、ＨＤＤ６９とを主に備えており、これらをアドレスバス、データバスなどのバスライン６１で接続して構成されている。
【００１３】
ＣＰＵ６０は、情報処理装置１の動作全体を制御する制御部として機能する。ＲＯＭ６２は、本実施形態にかかるプログラムや、ＣＰＵ６０の動作を制御するその他のプログラム等を記憶している。ＲＡＭ６３は、ＲＯＭ６２が記憶する各種プログラムを展開する際にＣＰＵ６０のワークエリアとして機能する。また、ＲＡＭ６３は、カメラ５０によって撮像した画像データなどの各種データを格納する。
【００１４】
通信Ｉ／Ｆ６４は、有線又は無線を介して接続された、店舗のデータを統括して管理するストアコンピュータＳＣなどの情報機器との間のデータ通信を制御する。入出力ポート６５は、ＵＳＢ（Universal Serial Bus）などの外部接続Ｉ／Ｆ６５１やブザー６５２と接続する通信ポートである。入出力ポート６５は、ＣＰＵ６０の制御の下、外部接続Ｉ／Ｆ６５１におけるデータの入出力や、ブザー６５２への駆動信号の出力などを行う。操作コントローラ６６は、タッチパネル３０や操作キー４０からの操作信号を取り込む。表示コントローラ６７は、ディスプレイ２０に対するデータ表示を制御する。カメラコントローラ６８は、カメラ５０の撮像動作を制御する。
【００１５】
ＨＤＤ６９（Hard Disk Drive）には、プログラムや各種ファイルが記憶されている。ＨＤＤ６９に記憶されているプログラムや各種ファイルは、情報処理装置１の起動時に、その全部又は一部がＲＡＭ６３にコピーされてＣＰＵ６０により順次実行される。ＨＤＤ６９に記憶されているプログラムの一例は、店員が棚札のチェック作業時に起動するプログラムＰＲである。通信Ｉ／Ｆ６４に記憶されているファイルの一例は、ストアコンピュータＳＣから配信されて格納されているＰＬＵファイルＦである。
【００１６】
ＰＬＵファイルＦは、商品を識別するため、商品ごとにユニークに割り当てられた商品コード（商品識別情報）ごとに、その商品名、価格、商品分類などの商品にかかる情報を格納するファイルである。すなわち、ＰＬＵファイルＦは、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報である。情報処理装置１では、バーコード読取部６０３（詳細は後述する）で読み取られた商品コードでＰＬＵファイルＦに記憶された情報を参照することで、読み取られた商品コードに対応した商品にかかる情報を取得する。
【００１７】
ここで、ＣＰＵ６０がプログラムを実行することで実現される、情報処理装置１の機能構成について説明する。ＣＰＵ６０は、ＲＡＭ６３に展開されたＲＯＭ６２が記憶するプログラムやプログラムＰＲに従って動作することで、図４に示すように、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６として機能する。
【００１８】
画像データ取込部６０１は、カメラコントローラ６８に撮像オン信号を出力してカメラ５０に撮像動作を開始させる。画像データ取込部６０１は、撮像動作開始後にカメラ５０が撮像した画像データ（フレーム画像）を取り込んで、ＲＡＭ６３の画像ワークエリアに格納する。
【００１９】
棚札認識部６０２は、画像データ取込部６０１により取り込まれたフレーム画像に含まれる商品の棚札を認識する。棚札は、紙などの媒体に商品を識別するための情報、商品名、価格などを記載した店頭広告であり、商品ごとに設置するものの他、特売などを行う商品にＰＯＰ（Point of Purchase）表示するものであってもよい。本実施形態において、棚札には、商品を識別するための商品コードなどを含むバーコード、商品名及び価格の少なくとも一方が記載されているものとする。
【００２０】
棚札認識部６０２がフレーム画像に含まれる棚札を認識する一つの方法としては、フレーム画像を２値化した画像から輪郭線を抽出し、縞状の線（バーコード）と、文字形状の線（商品名、価格）とを含む枠を棚札として認識する方法がある。また、店舗で用いる棚札の形状にかかる情報を予め登録しておき、パターンマッチング技術によりフレーム画像の中から予め登録されている棚札の形状と類似する領域を棚札として認識する方法もある。棚札認識部６０２は、上述した方法の一つ又は組み合わせなどを用いることで、棚札を認識する。
【００２１】
バーコード読取部６０３は、棚札認識部６０２により認識された棚札に記載されているコードシンボル（バーコード）を読み取る。具体的には、取り込まれたフレーム画像において認識された棚札の領域から、パターンマッチング技術によるバーコードの検出や、所定のファインダパターンから二次元コードの検出などを行う。バーコード読取部６０３は、検出したバーコードを所定の規則に従ったコード情報（例えばＪＡＮコード）に変換することで、検出したバーコードに対応した商品コードを読み取る。これにより、バーコード読取部６０３は、カメラ５０により棚札が撮像された際に、その棚札に添付されたバーコードに対応した商品コードを読み取ることができる。
【００２２】
文字認識部６０４は、棚札認識部６０２により認識された棚札に記載されている文字（商品名、価格）を読み取る。具体的には、取り込まれたフレーム画像において認識された棚札の領域に対してＯＣＲ処理を施すことで文字認識を行う。この文字認識においては、「円」が記載された文字列については価格の読み取りとし、「円」が記載されていない文字列については商品名の読み取りとしてよい。また、棚札には、商品名及び価格の少なくとも一方が記載されていることから、文字認識部６０４は、商品名及び価格の少なくとも一方の文字を認識する。
【００２３】
照合部６０５は、ＰＬＵファイルＦを参照して、バーコード読取部６０３により読み取られた商品コードに対応して登録されている、商品名や価格などの商品にかかる情報と、文字認識部６０４により認識された文字（商品名、価格）との照合を行う。具体的には、バーコード読取部６０３により読み取られた商品コードに対応してＰＬＵファイルＦに登録されている商品にかかる情報を取得する。次いで、取得した商品にかかる情報の中で文字認識部６０４により認識された文字と一致する部分の有無を判定し、照合の結果とする。例えば、文字認識部６０４により棚札に記載された商品名が認識された場合、棚札の記載とＰＬＵファイルＦの登録とが一致していれば、取得した商品にかかる情報の中で商品名が一致する部分として検出されることとなる。また、文字認識部６０４により棚札に記載された価格が認識された場合、棚札の記載とＰＬＵファイルＦの登録とが一致していれば、取得した商品にかかる情報の中で価格が一致する部分として検出されることとなる。逆に、棚札の記載とＰＬＵファイルＦの登録とが不一致であれば、取得した商品にかかる情報の中で一致する部分が検出されないこととなる。
【００２４】
報知部６０６は、照合部６０５による照合の結果に応じた報知を、ブザー６５２による音声出力やディスプレイ２０による画面表示で行う。具体的には、棚札の記載とＰＬＵファイルＦの登録とが不一致である場合に、警告音の出力や、警告画面の表示などを行う。
【００２５】
次に、情報処理装置１の動作について詳細に説明する。図５は、情報処理装置１の動作の一例を示すフローチャートである。
【００２６】
図５に示すように、処理が開始されると、画像データ取込部６０１は、カメラコントローラ６８に撮像オン信号を出力してカメラ５０による撮像を開始する（Ｓ１）。次いで、ＣＰＵ６０は、カメラ５０で撮像した画像のディスプレイ２０への表示を開始する（Ｓ２）。
【００２７】
次いで、画像データ取込部６０１は、カメラ５０が撮像してＲＡＭ６３に保存されたフレーム画像（撮像画像）を取り込む（Ｓ３）。次いで、棚札認識部６０２は、画像データ取込部６０１により取り込まれたフレーム画像に含まれる棚札を認識する（Ｓ４）。ここで認識した棚札の位置については、ＲＡＭ６３の作業領域にスタックされ、後の処理で利用される。また、複数の棚札が認識された場合は、各々の棚札の位置がスタックされるものとする。
【００２８】
次いで、バーコード読取部６０３は、Ｓ４において認識された棚札に記載されているバーコードを読み取り、商品コードを取得する（Ｓ５）。次いで、文字認識部６０４は、Ｓ４において認識された棚札に記載されている文字（商品名、価格）を認識する（Ｓ６）。次いで、照合部６０５は、Ｓ５において取得した商品コードに対応して登録されている、商品名や価格などの商品にかかる情報をＰＬＵファイルＦより取得し、Ｓ６により認識された文字（商品名、価格）との照合を行う（Ｓ７）。
【００２９】
次いで、ＣＰＵ６０は、Ｓ７における照合の結果、バーコード読み取りによりＰＬＵファイルＦから取得した価格、商品名と、文字認識による棚札の価格、商品名とが異なるか否か（一致／不一致）を判定する（Ｓ８）。
【００３０】
一致する場合（Ｓ８：ＮＯ）、報知部６０６は、棚札の価格、商品名がＰＬＵファイルＦの登録内容と一致することを示すシンボル画像を、認識した棚札の位置に応じてディスプレイ２０に表示し（Ｓ９）、Ｓ１１へ処理を進める。不一致の場合（Ｓ８：ＹＥＳ）、報知部６０６は、棚札の価格、商品名がＰＬＵファイルＦの登録内容と異なることを示すシンボル画像を、認識した棚札の位置に応じてディスプレイ２０に表示し（Ｓ１０）、Ｓ１１へ処理を進める。なお、Ｓ１０では、ブザー６５２により警告音を出力してもよい。
【００３１】
Ｓ１１において、ＣＰＵ６０は、Ｓ４において認識した全ての棚札についての読み取りが終了したか否かを判定する。全ての棚札の読み取りが終了していない場合（Ｓ１１：ＮＯ）、ＣＰＵ６０はＳ５へ処理を戻す。Ｓ５に処理が戻されることで、次にスタックされている棚札について（Ｓ５〜Ｓ１０）の処理が行われることとなる。全ての棚札の読み取りが終了している場合（Ｓ１１：ＹＥＳ）、ＣＰＵ６０はＳ１２へ処理を進める。
【００３２】
上述したＳ５〜Ｓ１１の処理が繰り返されることで、フレーム画像に含まれる全ての棚札について、価格、商品名がＰＬＵファイルＦの登録内容と一致するか否かの報知がディスプレイ２０の表示により行われることとなる。図６は、ディスプレイ２０の表示例を示す情報処理装置１の外観図である。
【００３３】
図６において、認識マークＭ１は認識された棚札を示す。シンボル画像Ｍ２は、棚札の価格がＰＬＵファイルＦの登録内容と一致することを示す。シンボル画像Ｍ３は、棚札の価格がＰＬＵファイルＦの登録内容と異なることを示す。シンボル画像Ｍ２、シンボル画像Ｍ３に表示された価格は、ＰＬＵファイルＦに登録されている価格である。シンボル画像Ｍ２、シンボル画像Ｍ３は、色や形状などを変えて表示される。なお、図６は価格のみの例であるが、商品名についても同様であることは言うまでもない。また、図６に例示した表示レイアウトは一例であり、シンボル画像Ｍ２、シンボル画像Ｍ３の形状や表示位置についても特に図示例に限定しない。
【００３４】
図６に示すように、ディスプレイ２０には、Ｓ２により表示が開始された撮像した画像に、シンボル画像Ｍ２又はシンボル画像Ｍ３が認識マークＭ１に対応した位置、すなわち認識された棚札の位置に対応した位置に重畳して表示される。したがって、店員Ｈは、どの棚札の価格がＰＬＵファイルＦの登録内容と一致するか否かを容易に認識できる。
【００３５】
Ｓ１２において、ＣＰＵ６０は、タッチパネル３０や操作キー４０からの操作指示などによる業務終了の有無を判定する。業務を継続する場合（Ｓ１２：ＮＯ）、ＣＰＵ６０は、Ｓ３へ処理を戻して処理を継続させる。業務を終了する場合（Ｓ１２：ＹＥＳ）、ＣＰＵ６０は、カメラ５０で撮像した画像のディスプレイ２０への表示を終了する（Ｓ１３）。次いで、画像データ取込部６０１は、カメラコントローラ６８に撮像オフ信号を出力してカメラ５０による撮像を終了し（Ｓ１４）、処理を終了する。
【００３６】
以上のように、情報処理装置１は、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６とを備える。画像データ取込部６０１は、カメラ５０が撮像した画像を取り込む。棚札認識部６０２は、取り込まれた画像に含まれる棚札を認識する。バーコード読取部６０３は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識部６０４は、認識された棚札に記載されている文字を認識する。照合部６０５は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知部６０６は、照合の結果に応じた報知を行う。したがって、店員Ｈは照合の結果に応じた報知を確認するだけで棚札のチェックができる。このため、情報処理装置１は、店員Ｈが行うチェック作業の負担を低減することができる。
【００３７】
[第２の実施形態]
第２の実施形態では、システム上の商品名や価格と、棚札に印字している商品名や価格とのチェック作業をレジ台やバックヤードなどに設置された情報処理装置を用いて店員が行う店舗システムを例示する。
【００３８】
図７は、店舗システム２００の全体構成を概略的に示すシステム構成図である。図７に示す店舗システム２００は、レジ台や店舗のバックヤードなどに設置される情報処理装置２０１、レジ台に設置されるＰＯＳ端末２０２、店舗内を撮像するライブカメラ２０３、店舗システム２００全体を制御するサーバとしてのストアコンピュータＳＣ等を備えている。また、店舗システム２００では、情報処理装置２０１、ＰＯＳ端末２０２、ライブカメラ２０３、ストアコンピュータＳＣがＬＡＮ（Local Area Network）などの通信ネットワークにより互いに通信可能に接続されている。
【００３９】
情報処理装置２０１は、情報処理装置１と略同一の構成を有するＰＣ（Personal Computer）などである。ライブカメラ２０３は、店舗の売場ごとに、例えば天井などに吊り下げられて設置される。ライブカメラ２０３は、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの撮像素子と、通信インターフェースとを有しており、撮像した画像を通信ネットワークにブロードキャストする。したがって、情報処理装置２０１は、店員Ｈが持ち歩くこと無く店舗内の画像を取り込むことができ、取り込んだ画像から図５に例示した処理を行うことができる。
【００４０】
図８は、店舗システム２００における情報処理装置２０１の表示画面例を示す図である。図８に示すように、情報処理装置２０１の表示画面Ｇには、ライブカメラ２０３で撮像した画像に、シンボル画像Ｍ２又はシンボル画像Ｍ３が認識マークＭ１に対応した位置、すなわち認識された棚札の位置に対応した位置に重畳して表示される。したがって、店員Ｈは、店舗内を見回ることなく、どの棚札の価格がＰＬＵファイルＦの登録内容と一致するか否かを容易に認識できる。
【００４１】
本実施形態の情報処理装置１で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供される。本実施形態の情報処理装置１で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【００４２】
さらに、本実施形態の情報処理装置１で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報処理装置１で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００４３】
本実施形態の情報処理装置１で実行されるプログラムは、上述した各部（画像データ取込部６０１、棚札認識部６０２、バーコード読取部６０３、文字認識部６０４、照合部６０５、報知部６０６）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像データ取込部６０１、棚札認識部６０２、バーコード読取部６０３、文字認識部６０４、照合部６０５、報知部６０６が主記憶装置上に生成されるようになっている。
【符号の説明】
【００４４】
１、２０１ 情報処理装置
１０ 筐体
２０ ディスプレイ
３０ タッチパネル
５０ カメラ
６０ ＣＰＵ
６２ ＲＯＭ
６３ ＲＡＭ
６９ ＨＤＤ
２００ 店舗システム
２０２ ＰＯＳ端末
２０３ ライブカメラ
６０１ 画像データ取込部
６０２ 棚札認識部
６０３ バーコード読取部
６０４ 文字認識部
６０５ 照合部
６０６ 報知部
６５２ ブザー
Ｆ ＰＬＵファイル
Ｇ 表示画面
Ｍ１ 認識マーク
Ｍ２、Ｍ３ シンボル画像
ＰＲ プログラム
ＳＣ ストアコンピュータ
【先行技術文献】
【特許文献】
【００４５】
【特許文献１】特許第３５６０９８８公報
【技術分野】
【０００１】
本発明の実施形態は、情報処理装置、店舗システム及びプログラムに関する。
【背景技術】
【０００２】
従来、商品の値段等を表示する棚札を電子化した電子棚札システムが知られている。この電子棚札システムでは、ハンディターミナル等で、商品を識別するコードと棚札を識別するコードとが読み取られて、電子棚札システムにて商品と棚札とが関連づけられる。そして、商品のデータが、商品に関連付けられた棚札に、無線あるいは有線のネットワークを介して送信され、その棚札で商品名や価格等の情報が表示される。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
ところで、電子棚札システムの棚札は同じ大きさで統一されて目立たないことから、特売などを行う棚札は紙に大きく印字する場合がある。また、電子棚札システムを導入していない店舗では、陳列する全ての商品について、商品名や価格等の情報を印字した棚札を用いている。このような電子棚札システム以外の棚札については、システム上の商品名や価格と、棚札に印字している商品名や価格との間に齟齬が生じやすいため、店員が店舗を見回ってチェックする必要があるが、このチェック作業は店員への負担が大きいものであった。
【課題を解決するための手段】
【０００４】
上述した課題を解決するために、本発明の実施形態は、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段と、を備えることを特徴とする情報処理装置である。画像取込手段は、撮像手段が撮像した画像を取り込む。棚札認識手段は、取り込まれた画像に含まれる棚札を認識する。読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【０００５】
また、本発明の実施形態は、撮像装置と、情報処理装置と、を有することを特徴とする店舗システムである。撮像装置は、店舗内を撮像する。情報処理装置は、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段とを備える情報処理装置と、を備える。画像取込手段は、撮像装置が撮像した画像を取り込む。認識手段は、取り込まれた画像に含まれる棚札を認識する。棚札読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【０００６】
また、本発明の実施形態は、情報処理装置のコンピュータを、画像取込手段と、棚札認識手段と、読取手段と、文字認識手段と、照合手段と、報知手段と、して機能させることを特徴とするプログラムである。画像取込手段は、撮像手段が撮像した画像を取り込む。棚札認識手段は、取り込まれた画像に含まれる棚札を認識する。読取手段は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識手段は、認識された棚札に記載されている文字を認識する。照合手段は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知手段は、照合の結果に応じた報知を行う。
【図面の簡単な説明】
【０００７】
【図１】図１は、店舗における情報処理装置の使用例を示す概念図である。
【図２】図２は、情報処理装置の正面外観を示す外観図である。
【図３】図３は、情報処理装置の背面外観を示す外観図である。
【図４】図４は、情報処理装置の構成を示すブロック図である。
【図５】図５は、情報処理装置の動作の一例を示すフローチャートである。
【図６】図６は、ディスプレイの表示例を示す情報処理装置の外観図である。
【図７】図７は、店舗システムの全体構成を概略的に示すシステム構成図である。
【図８】図８は、店舗システムにおける情報処理装置の表示画面例を示す図である。
【発明を実施するための形態】
【０００８】
以下では、本実施形態にかかる情報処理装置、店舗システム及びプログラムを図面を参照して説明する。
【０００９】
[第１の実施形態]
第１の実施形態では、システム上の商品名や価格と、棚札に印字している商品名や価格とのチェック作業を店員が店舗を見回って行う際に用いる情報処理装置を例示する。図１は店舗における情報処理装置の使用例を示す概念図である。図１に示すように、第１の実施形態では、店員Ｈは、情報処理装置１を所持して店舗１００内を見回りながら、情報処理装置１に表示される情報を確認し、棚札に印字している商品名や価格のチェックを行う。
【００１０】
図２は、情報処理装置１の正面外観を示す外観図である。図３は、情報処理装置１の背面外観を示す外観図である。図２に示すように、情報処理装置１の筐体１０正面には、ＬＣＤ（Liquid Crystal Display）等のディスプレイ２０と、そのディスプレイ２０に積層されたタッチパネル３０と、各種操作入力を行うための操作キー４０とを備える。図３に示すように、情報処理装置１の筐体１０背面には、ＣＭＯＳイメージセンサやＣＣＤイメージセンサなどのカメラ５０を備える。
【００１１】
店員Ｈは、筐体１０のサイドや背面などに手を添えて情報処理装置１を保持し、タッチパネル３０や操作キー４０による操作入力や、ディスプレイ２０の画面表示などを確認して使用する。この使用の際に、カメラ５０で撮像した画像をディスプレイ２０に表示する場合は、筐体１０背面にカメラ５０が設けられていることから、店員Ｈがディスプレイ２０を見る方向とカメラ５０が撮像する方向とが略一致することとなる。
【００１２】
図４は、情報処理装置１の構成を示すブロック図である。情報処理装置１は、ＣＰＵ６０（Central Processing Unit）と、ＲＯＭ６２（Read Only Memory）と、ＲＡＭ６３（Random Access Memory）と、通信Ｉ／Ｆ６４と、入出力ポート６５と、操作コントローラ６６と、表示コントローラ６７と、カメラコントローラ６８と、ＨＤＤ６９とを主に備えており、これらをアドレスバス、データバスなどのバスライン６１で接続して構成されている。
【００１３】
ＣＰＵ６０は、情報処理装置１の動作全体を制御する制御部として機能する。ＲＯＭ６２は、本実施形態にかかるプログラムや、ＣＰＵ６０の動作を制御するその他のプログラム等を記憶している。ＲＡＭ６３は、ＲＯＭ６２が記憶する各種プログラムを展開する際にＣＰＵ６０のワークエリアとして機能する。また、ＲＡＭ６３は、カメラ５０によって撮像した画像データなどの各種データを格納する。
【００１４】
通信Ｉ／Ｆ６４は、有線又は無線を介して接続された、店舗のデータを統括して管理するストアコンピュータＳＣなどの情報機器との間のデータ通信を制御する。入出力ポート６５は、ＵＳＢ（Universal Serial Bus）などの外部接続Ｉ／Ｆ６５１やブザー６５２と接続する通信ポートである。入出力ポート６５は、ＣＰＵ６０の制御の下、外部接続Ｉ／Ｆ６５１におけるデータの入出力や、ブザー６５２への駆動信号の出力などを行う。操作コントローラ６６は、タッチパネル３０や操作キー４０からの操作信号を取り込む。表示コントローラ６７は、ディスプレイ２０に対するデータ表示を制御する。カメラコントローラ６８は、カメラ５０の撮像動作を制御する。
【００１５】
ＨＤＤ６９（Hard Disk Drive）には、プログラムや各種ファイルが記憶されている。ＨＤＤ６９に記憶されているプログラムや各種ファイルは、情報処理装置１の起動時に、その全部又は一部がＲＡＭ６３にコピーされてＣＰＵ６０により順次実行される。ＨＤＤ６９に記憶されているプログラムの一例は、店員が棚札のチェック作業時に起動するプログラムＰＲである。通信Ｉ／Ｆ６４に記憶されているファイルの一例は、ストアコンピュータＳＣから配信されて格納されているＰＬＵファイルＦである。
【００１６】
ＰＬＵファイルＦは、商品を識別するため、商品ごとにユニークに割り当てられた商品コード（商品識別情報）ごとに、その商品名、価格、商品分類などの商品にかかる情報を格納するファイルである。すなわち、ＰＬＵファイルＦは、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報である。情報処理装置１では、バーコード読取部６０３（詳細は後述する）で読み取られた商品コードでＰＬＵファイルＦに記憶された情報を参照することで、読み取られた商品コードに対応した商品にかかる情報を取得する。
【００１７】
ここで、ＣＰＵ６０がプログラムを実行することで実現される、情報処理装置１の機能構成について説明する。ＣＰＵ６０は、ＲＡＭ６３に展開されたＲＯＭ６２が記憶するプログラムやプログラムＰＲに従って動作することで、図４に示すように、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６として機能する。
【００１８】
画像データ取込部６０１は、カメラコントローラ６８に撮像オン信号を出力してカメラ５０に撮像動作を開始させる。画像データ取込部６０１は、撮像動作開始後にカメラ５０が撮像した画像データ（フレーム画像）を取り込んで、ＲＡＭ６３の画像ワークエリアに格納する。
【００１９】
棚札認識部６０２は、画像データ取込部６０１により取り込まれたフレーム画像に含まれる商品の棚札を認識する。棚札は、紙などの媒体に商品を識別するための情報、商品名、価格などを記載した店頭広告であり、商品ごとに設置するものの他、特売などを行う商品にＰＯＰ（Point of Purchase）表示するものであってもよい。本実施形態において、棚札には、商品を識別するための商品コードなどを含むバーコード、商品名及び価格の少なくとも一方が記載されているものとする。
【００２０】
棚札認識部６０２がフレーム画像に含まれる棚札を認識する一つの方法としては、フレーム画像を２値化した画像から輪郭線を抽出し、縞状の線（バーコード）と、文字形状の線（商品名、価格）とを含む枠を棚札として認識する方法がある。また、店舗で用いる棚札の形状にかかる情報を予め登録しておき、パターンマッチング技術によりフレーム画像の中から予め登録されている棚札の形状と類似する領域を棚札として認識する方法もある。棚札認識部６０２は、上述した方法の一つ又は組み合わせなどを用いることで、棚札を認識する。
【００２１】
バーコード読取部６０３は、棚札認識部６０２により認識された棚札に記載されているコードシンボル（バーコード）を読み取る。具体的には、取り込まれたフレーム画像において認識された棚札の領域から、パターンマッチング技術によるバーコードの検出や、所定のファインダパターンから二次元コードの検出などを行う。バーコード読取部６０３は、検出したバーコードを所定の規則に従ったコード情報（例えばＪＡＮコード）に変換することで、検出したバーコードに対応した商品コードを読み取る。これにより、バーコード読取部６０３は、カメラ５０により棚札が撮像された際に、その棚札に添付されたバーコードに対応した商品コードを読み取ることができる。
【００２２】
文字認識部６０４は、棚札認識部６０２により認識された棚札に記載されている文字（商品名、価格）を読み取る。具体的には、取り込まれたフレーム画像において認識された棚札の領域に対してＯＣＲ処理を施すことで文字認識を行う。この文字認識においては、「円」が記載された文字列については価格の読み取りとし、「円」が記載されていない文字列については商品名の読み取りとしてよい。また、棚札には、商品名及び価格の少なくとも一方が記載されていることから、文字認識部６０４は、商品名及び価格の少なくとも一方の文字を認識する。
【００２３】
照合部６０５は、ＰＬＵファイルＦを参照して、バーコード読取部６０３により読み取られた商品コードに対応して登録されている、商品名や価格などの商品にかかる情報と、文字認識部６０４により認識された文字（商品名、価格）との照合を行う。具体的には、バーコード読取部６０３により読み取られた商品コードに対応してＰＬＵファイルＦに登録されている商品にかかる情報を取得する。次いで、取得した商品にかかる情報の中で文字認識部６０４により認識された文字と一致する部分の有無を判定し、照合の結果とする。例えば、文字認識部６０４により棚札に記載された商品名が認識された場合、棚札の記載とＰＬＵファイルＦの登録とが一致していれば、取得した商品にかかる情報の中で商品名が一致する部分として検出されることとなる。また、文字認識部６０４により棚札に記載された価格が認識された場合、棚札の記載とＰＬＵファイルＦの登録とが一致していれば、取得した商品にかかる情報の中で価格が一致する部分として検出されることとなる。逆に、棚札の記載とＰＬＵファイルＦの登録とが不一致であれば、取得した商品にかかる情報の中で一致する部分が検出されないこととなる。
【００２４】
報知部６０６は、照合部６０５による照合の結果に応じた報知を、ブザー６５２による音声出力やディスプレイ２０による画面表示で行う。具体的には、棚札の記載とＰＬＵファイルＦの登録とが不一致である場合に、警告音の出力や、警告画面の表示などを行う。
【００２５】
次に、情報処理装置１の動作について詳細に説明する。図５は、情報処理装置１の動作の一例を示すフローチャートである。
【００２６】
図５に示すように、処理が開始されると、画像データ取込部６０１は、カメラコントローラ６８に撮像オン信号を出力してカメラ５０による撮像を開始する（Ｓ１）。次いで、ＣＰＵ６０は、カメラ５０で撮像した画像のディスプレイ２０への表示を開始する（Ｓ２）。
【００２７】
次いで、画像データ取込部６０１は、カメラ５０が撮像してＲＡＭ６３に保存されたフレーム画像（撮像画像）を取り込む（Ｓ３）。次いで、棚札認識部６０２は、画像データ取込部６０１により取り込まれたフレーム画像に含まれる棚札を認識する（Ｓ４）。ここで認識した棚札の位置については、ＲＡＭ６３の作業領域にスタックされ、後の処理で利用される。また、複数の棚札が認識された場合は、各々の棚札の位置がスタックされるものとする。
【００２８】
次いで、バーコード読取部６０３は、Ｓ４において認識された棚札に記載されているバーコードを読み取り、商品コードを取得する（Ｓ５）。次いで、文字認識部６０４は、Ｓ４において認識された棚札に記載されている文字（商品名、価格）を認識する（Ｓ６）。次いで、照合部６０５は、Ｓ５において取得した商品コードに対応して登録されている、商品名や価格などの商品にかかる情報をＰＬＵファイルＦより取得し、Ｓ６により認識された文字（商品名、価格）との照合を行う（Ｓ７）。
【００２９】
次いで、ＣＰＵ６０は、Ｓ７における照合の結果、バーコード読み取りによりＰＬＵファイルＦから取得した価格、商品名と、文字認識による棚札の価格、商品名とが異なるか否か（一致／不一致）を判定する（Ｓ８）。
【００３０】
一致する場合（Ｓ８：ＮＯ）、報知部６０６は、棚札の価格、商品名がＰＬＵファイルＦの登録内容と一致することを示すシンボル画像を、認識した棚札の位置に応じてディスプレイ２０に表示し（Ｓ９）、Ｓ１１へ処理を進める。不一致の場合（Ｓ８：ＹＥＳ）、報知部６０６は、棚札の価格、商品名がＰＬＵファイルＦの登録内容と異なることを示すシンボル画像を、認識した棚札の位置に応じてディスプレイ２０に表示し（Ｓ１０）、Ｓ１１へ処理を進める。なお、Ｓ１０では、ブザー６５２により警告音を出力してもよい。
【００３１】
Ｓ１１において、ＣＰＵ６０は、Ｓ４において認識した全ての棚札についての読み取りが終了したか否かを判定する。全ての棚札の読み取りが終了していない場合（Ｓ１１：ＮＯ）、ＣＰＵ６０はＳ５へ処理を戻す。Ｓ５に処理が戻されることで、次にスタックされている棚札について（Ｓ５〜Ｓ１０）の処理が行われることとなる。全ての棚札の読み取りが終了している場合（Ｓ１１：ＹＥＳ）、ＣＰＵ６０はＳ１２へ処理を進める。
【００３２】
上述したＳ５〜Ｓ１１の処理が繰り返されることで、フレーム画像に含まれる全ての棚札について、価格、商品名がＰＬＵファイルＦの登録内容と一致するか否かの報知がディスプレイ２０の表示により行われることとなる。図６は、ディスプレイ２０の表示例を示す情報処理装置１の外観図である。
【００３３】
図６において、認識マークＭ１は認識された棚札を示す。シンボル画像Ｍ２は、棚札の価格がＰＬＵファイルＦの登録内容と一致することを示す。シンボル画像Ｍ３は、棚札の価格がＰＬＵファイルＦの登録内容と異なることを示す。シンボル画像Ｍ２、シンボル画像Ｍ３に表示された価格は、ＰＬＵファイルＦに登録されている価格である。シンボル画像Ｍ２、シンボル画像Ｍ３は、色や形状などを変えて表示される。なお、図６は価格のみの例であるが、商品名についても同様であることは言うまでもない。また、図６に例示した表示レイアウトは一例であり、シンボル画像Ｍ２、シンボル画像Ｍ３の形状や表示位置についても特に図示例に限定しない。
【００３４】
図６に示すように、ディスプレイ２０には、Ｓ２により表示が開始された撮像した画像に、シンボル画像Ｍ２又はシンボル画像Ｍ３が認識マークＭ１に対応した位置、すなわち認識された棚札の位置に対応した位置に重畳して表示される。したがって、店員Ｈは、どの棚札の価格がＰＬＵファイルＦの登録内容と一致するか否かを容易に認識できる。
【００３５】
Ｓ１２において、ＣＰＵ６０は、タッチパネル３０や操作キー４０からの操作指示などによる業務終了の有無を判定する。業務を継続する場合（Ｓ１２：ＮＯ）、ＣＰＵ６０は、Ｓ３へ処理を戻して処理を継続させる。業務を終了する場合（Ｓ１２：ＹＥＳ）、ＣＰＵ６０は、カメラ５０で撮像した画像のディスプレイ２０への表示を終了する（Ｓ１３）。次いで、画像データ取込部６０１は、カメラコントローラ６８に撮像オフ信号を出力してカメラ５０による撮像を終了し（Ｓ１４）、処理を終了する。
【００３６】
以上のように、情報処理装置１は、画像データ取込部６０１と、棚札認識部６０２と、バーコード読取部６０３と、文字認識部６０４と、照合部６０５と、報知部６０６とを備える。画像データ取込部６０１は、カメラ５０が撮像した画像を取り込む。棚札認識部６０２は、取り込まれた画像に含まれる棚札を認識する。バーコード読取部６０３は、認識された棚札から商品を識別するための商品識別情報を読み取る。文字認識部６０４は、認識された棚札に記載されている文字を認識する。照合部６０５は、商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた商品識別情報に対応して登録されている情報と、認識された文字との照合を行う。報知部６０６は、照合の結果に応じた報知を行う。したがって、店員Ｈは照合の結果に応じた報知を確認するだけで棚札のチェックができる。このため、情報処理装置１は、店員Ｈが行うチェック作業の負担を低減することができる。
【００３７】
[第２の実施形態]
第２の実施形態では、システム上の商品名や価格と、棚札に印字している商品名や価格とのチェック作業をレジ台やバックヤードなどに設置された情報処理装置を用いて店員が行う店舗システムを例示する。
【００３８】
図７は、店舗システム２００の全体構成を概略的に示すシステム構成図である。図７に示す店舗システム２００は、レジ台や店舗のバックヤードなどに設置される情報処理装置２０１、レジ台に設置されるＰＯＳ端末２０２、店舗内を撮像するライブカメラ２０３、店舗システム２００全体を制御するサーバとしてのストアコンピュータＳＣ等を備えている。また、店舗システム２００では、情報処理装置２０１、ＰＯＳ端末２０２、ライブカメラ２０３、ストアコンピュータＳＣがＬＡＮ（Local Area Network）などの通信ネットワークにより互いに通信可能に接続されている。
【００３９】
情報処理装置２０１は、情報処理装置１と略同一の構成を有するＰＣ（Personal Computer）などである。ライブカメラ２０３は、店舗の売場ごとに、例えば天井などに吊り下げられて設置される。ライブカメラ２０３は、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの撮像素子と、通信インターフェースとを有しており、撮像した画像を通信ネットワークにブロードキャストする。したがって、情報処理装置２０１は、店員Ｈが持ち歩くこと無く店舗内の画像を取り込むことができ、取り込んだ画像から図５に例示した処理を行うことができる。
【００４０】
図８は、店舗システム２００における情報処理装置２０１の表示画面例を示す図である。図８に示すように、情報処理装置２０１の表示画面Ｇには、ライブカメラ２０３で撮像した画像に、シンボル画像Ｍ２又はシンボル画像Ｍ３が認識マークＭ１に対応した位置、すなわち認識された棚札の位置に対応した位置に重畳して表示される。したがって、店員Ｈは、店舗内を見回ることなく、どの棚札の価格がＰＬＵファイルＦの登録内容と一致するか否かを容易に認識できる。
【００４１】
本実施形態の情報処理装置１で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供される。本実施形態の情報処理装置１で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【００４２】
さらに、本実施形態の情報処理装置１で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報処理装置１で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００４３】
本実施形態の情報処理装置１で実行されるプログラムは、上述した各部（画像データ取込部６０１、棚札認識部６０２、バーコード読取部６０３、文字認識部６０４、照合部６０５、報知部６０６）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像データ取込部６０１、棚札認識部６０２、バーコード読取部６０３、文字認識部６０４、照合部６０５、報知部６０６が主記憶装置上に生成されるようになっている。
【符号の説明】
【００４４】
１、２０１ 情報処理装置
１０ 筐体
２０ ディスプレイ
３０ タッチパネル
５０ カメラ
６０ ＣＰＵ
６２ ＲＯＭ
６３ ＲＡＭ
６９ ＨＤＤ
２００ 店舗システム
２０２ ＰＯＳ端末
２０３ ライブカメラ
６０１ 画像データ取込部
６０２ 棚札認識部
６０３ バーコード読取部
６０４ 文字認識部
６０５ 照合部
６０６ 報知部
６５２ ブザー
Ｆ ＰＬＵファイル
Ｇ 表示画面
Ｍ１ 認識マーク
Ｍ２、Ｍ３ シンボル画像
ＰＲ プログラム
ＳＣ ストアコンピュータ
【先行技術文献】
【特許文献】
【００４５】
【特許文献１】特許第３５６０９８８公報
【特許請求の範囲】
【請求項１】
撮像手段が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記文字認識手段は、認識された前記棚札に記載されている商品名及び価格の少なくとも一方を認識し、
前記照合手段は、読み取られた前記商品識別情報に対応して登録されている商品名及び価格と、認識された前記商品名及び価格の少なくとも一方とを照合し、
前記報知手段は、前記照合の結果の一致又は不一致を報知すること、
を特徴とする請求項１に記載の情報処理装置。
【請求項３】
撮像した前記画像を表示する表示手段を更に備え、
前記報知手段は、前記表示手段に前記照合の結果に応じた表示を行うこと、
を特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記報知手段は、撮像した前記画像において認識された前記棚札に対応した位置に、当該棚札にかかる前記照合の結果を重畳して表示すること、
を特徴とする請求項３に記載の情報処理装置。
【請求項５】
店舗内を撮像する撮像装置と、
撮像装置が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段とを備える情報処理装置と、
を有することを特徴とする店舗システム。
【請求項６】
情報処理装置のコンピュータを、
撮像手段が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段と、
して機能させることを特徴とするプログラム。
【請求項１】
撮像手段が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記文字認識手段は、認識された前記棚札に記載されている商品名及び価格の少なくとも一方を認識し、
前記照合手段は、読み取られた前記商品識別情報に対応して登録されている商品名及び価格と、認識された前記商品名及び価格の少なくとも一方とを照合し、
前記報知手段は、前記照合の結果の一致又は不一致を報知すること、
を特徴とする請求項１に記載の情報処理装置。
【請求項３】
撮像した前記画像を表示する表示手段を更に備え、
前記報知手段は、前記表示手段に前記照合の結果に応じた表示を行うこと、
を特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記報知手段は、撮像した前記画像において認識された前記棚札に対応した位置に、当該棚札にかかる前記照合の結果を重畳して表示すること、
を特徴とする請求項３に記載の情報処理装置。
【請求項５】
店舗内を撮像する撮像装置と、
撮像装置が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段とを備える情報処理装置と、
を有することを特徴とする店舗システム。
【請求項６】
情報処理装置のコンピュータを、
撮像手段が撮像した画像を取り込む画像取込手段と、
取り込まれた前記画像に含まれる棚札を認識する棚札認識手段と、
認識された前記棚札から商品を識別するための商品識別情報を読み取る読取手段と、
認識された前記棚札に記載されている文字を認識する文字認識手段と、
前記商品識別情報ごとに商品にかかる情報が予め登録されている商品登録情報を参照して、読み取られた前記商品識別情報に対応して登録されている情報と、認識された前記文字との照合を行う照合手段と、
前記照合の結果に応じた報知を行う報知手段と、
して機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−５３７１１（Ｐ２０１２−５３７１１Ａ）
【公開日】平成２４年３月１５日（２０１２．３．１５）
【国際特許分類】
【出願番号】特願２０１０−１９６２０７（Ｐ２０１０−１９６２０７）
【出願日】平成２２年９月１日（２０１０．９．１）
【出願人】（０００００３５６２）東芝テック株式会社 (5,631)
【Ｆターム（参考）】
【公開日】平成２４年３月１５日（２０１２．３．１５）
【国際特許分類】
【出願日】平成２２年９月１日（２０１０．９．１）
【出願人】（０００００３５６２）東芝テック株式会社 (5,631)
【Ｆターム（参考）】
[ Back to top ]