操作画面制御装置、画像形成装置、およびコンピュータプログラム
【課題】どの操作画面を表示した状態からでも、ユーザに手間をかけることなくかつ短時間で目的の操作画面に音声によって遷移できること。
【解決手段】音声入力部２４、音声を認識して音声コマンドＳＷを生成するコマンド認識部４４、複数の操作画面ＧＭを記憶する操作画面記憶部４０、操作画面ＧＭのそれぞれに対応して設けられ、音声コマンドＳＷとリンク情報ＫＷとを対応付けて登録する辞書テーブルＴＢ、音声コマンドが生成されたときに表示されている操作画面に対応した辞書テーブルＴＢを参照して音声コマンドに対応する操作画面に遷移させる画面表示制御部４２、および、特定の操作画面ＧＭに遷移させるための音声コマンドを辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドＳＷおよびリンク情報ＫＷを、対象となる全ての辞書テーブルに追加登録する一括登録部４５を設ける。
【解決手段】音声入力部２４、音声を認識して音声コマンドＳＷを生成するコマンド認識部４４、複数の操作画面ＧＭを記憶する操作画面記憶部４０、操作画面ＧＭのそれぞれに対応して設けられ、音声コマンドＳＷとリンク情報ＫＷとを対応付けて登録する辞書テーブルＴＢ、音声コマンドが生成されたときに表示されている操作画面に対応した辞書テーブルＴＢを参照して音声コマンドに対応する操作画面に遷移させる画面表示制御部４２、および、特定の操作画面ＧＭに遷移させるための音声コマンドを辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドＳＷおよびリンク情報ＫＷを、対象となる全ての辞書テーブルに追加登録する一括登録部４５を設ける。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置、画像形成装置、およびコンピュータプログラムに関する。
【背景技術】
【０００２】
近年、画像形成装置の高性能化にともなって、画像形成装置の操作パネルに表示される操作画面（設定画面）の内容が多岐に渡るようになり、操作画面の数が増大している。また、操作画面についてのツリー構造の階層も深くなる傾向があり、ユーザにとっては自分の好きなページまたはよく使う操作画面を探すのが困難となってきている。
【０００３】
したがって、例えば、現に表示されている操作画面から系列の異なる別の操作画面へ遷移させたい場合に、遷移途中の多くの画面を表示させる必要があり、なかなか目的の操作画面に移ることができない。このように、目的の操作画面を表示させることがユーザにとって手間がかかり、そのための操作時間が増大している。
【０００４】
また、画像形成装置に音声認識機能を持たせることが提案されている。音声認識機能を持った画像形成装置においては、ユーザは音声によって操作画面における操作を行うことができる。例えば、ある操作画面を表示した状態で、その操作画面に表示されたキーを押すことに代えて、音声コマンドによってそのキーを押したと同じ操作を行うことができる。
【０００５】
また、音声認識装置において、単語音声が機器の持つ特定のモードにかかわらず全てのモードで認識対象となることを示すクラスター情報を登録することが提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平５−３５２９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
音声認識機能を持った画像形成装置では、音声によって操作画面における操作を行うことができるので、目的の操作画面に遷移するための音声コマンドをそれぞれの操作画面ごとに登録しておけば便利である。
【０００８】
しかし、その場合には、ユーザは多数の音声コマンドを記憶しておかなければならず、音声コマンドを忘れてしまって操作できなくなることもある。
【０００９】
また、目的の操作画面に直接に遷移するためのキーをお気に入り画面として操作画面上に表示しておくことが考えられる。しかし、この場合に、画面のサイズには限りがあるので、お気に入り画面が多数あるような場合に、それらの全部を１つの操作画面に表示させることができないことがある。
【００１０】
また、上に述べた特許文献１に記載の音声認識装置では、そのようなクラスター情報を登録することによって、登録された単語音声を全てのモードで認識することはできても、どの画面からでも手間をかけることなく短時間でユーザの希望する操作画面に遷移することはできない。
【００１１】
本発明は、このような問題点に鑑み、操作パネルの表示面に表示される操作画面を音声によって操作する際に、どの操作画面を表示した状態からでも、ユーザに手間をかけることなくかつ短時間で目的の操作画面に遷移できるようにすることを目的とする。
【課題を解決するための手段】
【００１２】
本発明の実施形態に係る操作画面制御装置は、ユーザに音声を入力させるための音声入力手段と、入力された音声を認識して音声コマンドを生成する音声認識部と、前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、を有する。
【００１３】
好ましくは、前記辞書テーブルには、前記リンク情報として、その操作がなされたときに前記特定の操作画面に遷移するように設定されたキーについてのキー情報が登録されている。
【００１４】
好ましくは、前記操作画面に表示されるキーについてのキー情報と、当該キーの操作がなされたときに遷移する遷移先の操作画面の操作画面情報とを対応付けて記憶する操作画面選択テーブルが設けられており、前記辞書テーブルには、前記リンク情報として、いずれかの前記操作画面に表示されるキーについてのキー情報が登録されており、前記画面切り替え手段は、前記辞書テーブルを参照することによって得られた前記キー情報を用い、前記操作画面選択テーブルを参照することにより、入力された音声コマンドに対応する操作画面に遷移させる。
【発明の効果】
【００１５】
本発明によると、操作パネルの表示面に表示される操作画面を音声によって操作する際に、どの操作画面を表示した状態からでも、ユーザに手間をかけることなくかつ短時間で目的の操作画面に遷移できるようになる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態に係る画像形成装置を含むネットワークシステムの例を示す図である。
【図２】一実施形態の画像形成装置のハードウェア構成の例を示す図である。
【図３】操作パネルの例を示す図である。
【図４】画像形成装置の構成の例を示す図である。
【図５】音声認識機能関連のモジュールの構成の例を示す図である。
【図６】操作画面制御部の機能的な構成の例を示す図である。
【図７】各画面に対応して辞書テーブルが設けられている例を示す図である。
【図８】基本設定画面に対応した辞書テーブルの例を示す図である。
【図９】倍率画面に対応した辞書テーブルの例を示す図である。
【図１０】画面／ページ集約画面に対応した辞書テーブルの例を示す図である。
【図１１】操作画面選択テーブルの例を示す図である。
【図１２】縮小画面を含む操作画面の遷移状態の例を示す図である。
【図１３】コマンド情報が追加登録された辞書テーブルの例を示す図である。
【図１４】お気に入り画面を登録する場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１５】音声コマンドが入力された場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１６】操作画面の階層構造の例を示す図である。
【図１７】各操作画面での設定操作の状態を示す最上位の階層の操作画面の例を示す図である。
【図１８】設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１９】第２実施形態の画像形成装置における操作画面制御部の機能的な構成の例を示す図である。
【図２０】専用辞書テーブルの例を示す図である。
【図２１】第２実施形態における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【発明を実施するための形態】
【００１７】
〔第１実施形態〕
図１に示すネットワークシステムＳＹＳは、本発明の一実施形態の画像形成装置１を含むネットワークシステムである。
【００１８】
図１に示すように、ネットワークシステムＳＹＳは、画像形成装置１、ファイルサーバ２ａ、端末装置３ａ、および通信回線ＮＴ１などによって構成される。
【００１９】
画像形成装置１、ファイルサーバ２ａ、および端末装置３ａは、それぞれ、通信回線ＮＴ１を介して互いに接続されている。通信回線ＮＴ１として、ＬＡＮ、ＷＡＮ、イントラネット、または専用線などが用いられる。
【００２０】
ファイルサーバ２ａは、電子文書（電子データ）を管理するためのファイルサーバである。
【００２１】
端末装置３は、ネットワークシステムＳＹＳのユーザが用いる端末装置である。各ユーザは、この端末装置３を用いて、後で説明する画像形成装置１の「ＰＣプリント機能」を利用することができる。
【００２２】
ファックス端末４ａは、通信回線ＮＴ２を介して画像形成装置１または他のファックス端末との間でファクシミリによるデータの送受信を行う。なお、通信回線ＮＴ２として、公衆回線などが用いられる。
【００２３】
画像形成装置１は、コピー機能、ＰＣプリント機能、ファックス送信機能、電子メール送信機能、ＳＭＢ送信機能、ＦＴＰ送信機能、およびボックス（Ｂｏｘ）機能などの様々なアプリケーション機能を集約した画像形成装置である。複合機またはＭＦＰ（Multi Function Peripherals）などと呼ばれることもある。
【００２４】
本実施形態の画像形成装置１には、上記のコピー機能などの基本的な機能のほかに、音声実行機能が備えられている。音声実行機能は、音声認識処理（ＶＮ）を実行し、その音声認識処理の結果に基づいて所定の処理を実行する機能である。音声認識処理は、図１に示す画像形成装置１の操作パネル１０ｆに備えられているマイクＭＫから入力される音声を、記憶媒体に記憶されている認識辞書（グラマー）に基づいて認識するための処理である。
【００２５】
図２に示すように、画像形成装置１は、ＣＰＵ１０ａ、ＲＡＭ１０ｂ、ＲＯＭ１０ｃ、ハードディスク１０ｄ、制御用回路１０ｅ、操作パネル１０ｆ、スキャナ部１０ｇ、プリンタ部１０ｈ、ファックス部１０ｊ、およびネットワークインタフェース１０ｋなどによって構成される。
【００２６】
スキャナ部１０ｇは、原稿の用紙（以下、単に「原稿」と記載する。）に描かれている写真、文字、絵、図表などの画像を光学的に読み取って電子データ化する装置である。原稿として、紙、紙以外の種々のシート、物などを用いることが可能である。
【００２７】
プリンタ部１０ｈは、スキャナ部１０ｇが読み取った画像データまたは他の装置から送信されてきた画像データを、イエロー、マゼンタ、シアン、およびブラックの４色のトナーを使用して用紙に印刷する。
【００２８】
ファックス部１０ｊは、スキャナ部１０ｇが読み取った画像データを、通信回線を介してファックス端末に送信しまたはファックス端末から送信されてくる画像データを受信する。
【００２９】
ネットワークインタフェース１０ｋは、ＮＩＣ（Network Interface Card）であって、ＬＡＮまたはインターネットなどを介して他の装置への接続を行い、電子データの送受信などを行う。
【００３０】
制御用回路１０ｅは、ハードディスク１０ｄ、操作パネル１０ｆ、スキャナ部１０ｇ、プリンタ部１０ｈ、ファックス部１０ｊ、およびネットワークインタフェース１０ｋなどの装置を制御する。
【００３１】
操作パネル１０ｆは、ユーザが画像形成装置１に指示を与えまたは画像形成装置１からユーザにメッセージを通知するために用いられる。
【００３２】
これら各部または各装置の一部が連携することによって、前述のアプリケーション機能が実現される。
【００３３】
「コピー機能」は、スキャナ部１０ｇによって原稿の画像を読み取り、それによって得た画像データをプリンタ部１０ｈによって用紙に印刷する機能である。
【００３４】
「ＰＣプリント機能」は、ネットワークインタフェース１０ｋによって通信回線を介して画像形成装置１と互いに接続されている端末装置（以下、単に「端末装置」と記載する）などから画像データなどを受信し、プリンタ部１０ｈによってその画像データなどを用紙に印刷する機能である。この機能は、「ネットワークプリンティング」と呼ばれることもある。
【００３５】
「ファックス送信機能」は、スキャナ部１０ｇで読み取った画像データなどをファックス部１０ｊからファックス端末などに送信する機能である。
【００３６】
「ファックス受信機能」は、ファックス部１０ｊによってファックス端末などから画像データを受信し、プリンタ部１０ｈによってその画像データを用紙に印刷する機能である。
【００３７】
「電子メール送信機能」は、スキャナ部１０ｇで読み取った画像データなどを電子メールに添付してネットワークインタフェース１０ｋから送信する機能である。
【００３８】
「ＳＭＢ送信機能」は、スキャナ部１０ｇで読み取った画像データなどを、ＳＭＢ（Server Message Block）に基づいて、ＩＰアドレスなどで指定される送信先に直接送信する機能である。
【００３９】
「ＦＴＰ送信機能」は、スキャナ部１０ｇで読み取った画像データなどをＦＴＰ（File Transfer Protocol）に基づいて送信する機能である。
【００４０】
「ボックス機能」は、ユーザごとに「ボックス」または「パーソナルボックス」などと呼ばれる、パーソナルコンピュータにおけるフォルダまたはディレクトリなどに相当する記憶領域をハードディスク１０ｄに設けておき、ユーザがスキャナ部１０ｇを操作するなどして得た画像データなどを自分の記憶領域に保存できるようにする機能である。「ドキュメントサーバ機能」と呼ばれることもある。
【００４１】
ＰＣプリント機能を利用する際に端末装置において予めボックスを指定しておくことによって、プリントを行いつつプリントする画像データをそのボックス内に保存させることができる。ボックスの指定は、例えば、端末装置にインストールされている画像形成装置１のドライバの機能を用いて行うことができる。
【００４２】
図３に示すように操作パネル１０ｆには、タッチパネルＴＰ、マイクＭＫ、操作部ＴＫ、および音声認識ボタンＫＢ、コピーボタンＭＢ、スキャンＦＡＸボタンＳＢ、およびＢＯＸボタンＸＢなどが設けられている。
【００４３】
タッチパネルＴＰは、画像形成装置１からユーザに通知するメッセージまたは各種機能を利用するための画面（操作画面ＧＭ）などを表示する表示装置である。タッチパネルの機能によって入力装置としての役割も果たす。
【００４４】
マイク（マイクロフォン）ＭＫは、ユーザが音声（音声コマンド）を入力するための装置であり、入力された音声をアナログの音声データ（アナログ音声データＡＮＤＴ）に変換する。
【００４５】
操作部ＴＫは、プリントの枚数またはファックス番号などを入力するためのボタン群を含む。
【００４６】
音声認識ボタンＫＢは、音声認識モード（音声認識を行うためのモード）への切替えを行うためのボタンである。このボタンが押されると、画像形成装置１は、音声認識処理を実行し、音声認識の結果に基づいて所定の処理を実行する。
【００４７】
コピーボタンＭＢは、印刷モード（画像データなどを用紙に印刷するためのモード）への切り替えを行うためのボタンである。このボタンが押されると、コピーについての設定を行う画面（コピー設定画面）がタッチパネルＴＰに表示される。
【００４８】
スキャンＦＡＸボタンＳＢは、送信モード（画像データなどを他の装置に送信するためのモード）への切り替えを行うためのボタンである。このボタンが押されると、画像データなどの送信先の設定を行うための画面がタッチパネルＴＰに表示される。
【００４９】
ＢＯＸボタンＸＢは、ボックスモード（ボックスへの画像データの保存またはボックスに保存されている画像データなどの参照を行うためのモード）への切り替えを行うためのボタンである。このボタンが押されると、画像データなどの保存先となるボックスまたは参照したいボックスの指定を行うための画面がタッチパネルＴＰに表示される。
【００５０】
図４には、画像形成装置１の構成が機能的に整理して示されている。
【００５１】
図４において、スキャナ部１０ｇで読み取られた画像データに対し、入力画像処理部２２において、色補正処理、解像度変換処理などの画像処理が必要に応じて実施され、その後にメモリ１０ｂに記憶される。画像データは、必要に応じてメモリ１０ｂから読み出され、出力画像処理部２３において、色変換処理、スクリーン制御処理、スムージング処理、濃度補正処理などが必要に応じて施され、プリンタ部１０ｈに送られる。プリンタ部１０ｈにおいて、用紙に印刷される。
【００５２】
操作パネル１０ｆに設けられたマイクＭＫから入力されたユーザの音声は、音声入力部２４によって音声データに変換され、システムＩＦ２１を経てＣＰＵ１０ａに入力され、処理される。
【００５３】
ハードディスク１０ｄには、画像形成装置１の操作のための複数の操作画面ＧＭが予め格納されており、その中から、ユーザの操作に応じて、またユーザの音声の入力に応じて、必要な操作画面ＧＭが読み出され、操作パネル１０ｆのタッチパネルＴＰに表示される。
【００５４】
ＣＰＵ１０ａは、入力された音声に基づいて音声認識処理および操作画面制御を行う他、画像形成装置１の全体を制御する。
【００５５】
例えば、操作画面制御において、ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え処理、および、特定の操作画面に遷移させるための音声コマンドを辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび特定の操作画面へのリンク情報を、対象となる全ての辞書テーブルに追加登録する一括登録処理、などを実行する。詳しくは後で述べる。
【００５６】
これらの機能または処理を実現するためのコンピュータプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどの記録媒体ＭＳ１および半導体メモリＭＳ２などの可搬型の記録媒体ＭＳ（図２参照）に記録しておき、それらからインストールすることが可能である。また、ネットワークを介してサーバからダウンロードすることも可能である。
【００５７】
これらの機能を実現するためのコンピュータプログラムおよびデータは、ハードディスク１ｇにインストールされ、必要に応じてＲＡＭ１０ｂにロードされ、ＣＰＵ１０ａによって実行される。なお、ＣＰＵ１０ａはコンピュータとして動作することが可能である。また、外部のコンピュータとＬＡＮなどを介して接続するようにしてもよい。また、画像形成装置１の一部または全部の機能をデジタルプロセッサまたはハードウェア回路によって実現するように構成してもよい。
【００５８】
図５において、画像形成装置１には、音声認識処理を実行するための音声認識アプリケーション３１が設けられる。すなわち、音声入力装置（マイク）ＭＫから入力された音声は、音声データに変換された後、音声入力ドライバ３４により、ＯＳ（Operating System) ３３を経由して音声認識アプリケーション３１に入力される。
【００５９】
音声認識アプリケーション３１は、音声認識ライブラリ３２を管理し、ユーザの発した音声を認識して音声コマンド（文字列）を生成する。また、音声コマンドに対応した内部動作に変換する。
【００６０】
声紋判別部３５において、音声コマンドの波形などが解析され、声紋判別が行われる。声紋判別によって、声紋情報である音声ＩＤが生成される。音声ＩＤは、音声コマンドを発したユーザを特定するために用いられる。
【００６１】
登録のために生成された音声コマンドは、音声認識ライブラリ３２の辞書テーブルＴＢに追加登録される。また、音声コマンドが制御のために生成された場合には、生成された音声コマンドに基づいて、操作画面制御、その他の制御が行われる。システムＩＦ３６は、各種の設定情報の保存および読み出しなどを行う。
【００６２】
以下において、操作画面制御部ＳＳの処理および動作について、図６〜図１８を参照して説明する。なお、ここでは、ユーザがよく使う画面（以下、「お気に入り画面」と記載することがある）を、「縮小画面ＧＭ３３」および「ページ集約画面ＧＭ３４」とした場合を例にあげて説明する。
【００６３】
図６は画像形成装置１における操作画面制御部ＳＳの機能的な構成の例を示す図、図７は各画面に対応して辞書テーブルが設けられている例を示す図、図８は基本設定画面ＧＭ３０に対応した辞書テーブルＴＢ３０の例を示す図、図９は倍率画面ＧＭ３１に対応した辞書テーブルＴＢ３１の例を示す図、図１０は画面／ページ集約画面ＧＭ３２に対応した辞書テーブルＴＢ３２の例を示す図、図１１は操作画面選択テーブルＴＢ５０の例を示す図、図１２は縮小画面ＧＭ３３およびページ集約画面ＧＭ３４を含む操作画面の遷移状態の例を示す図、図１３はお気に入り画面についての新たなコマンド情報ＤＴが追加登録された辞書テーブルＴＢの例を示す図、図１４はお気に入り画面を登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャート、図１５は音声コマンドが入力された場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャート、図１６は操作画面の階層が深くかつ複雑な状態の例を示す図、図１７は各操作画面での設定操作の状態を示す最上位の階層の操作画面の例を示す図、図１８は設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【００６４】
図６において、操作画面制御部ＳＳは、操作画面記憶部４０、音声認識ライブラリ４１、画面表示制御部４２、声紋判別部４３、コマンド認識部４４、一括登録部４５、総合制御部４６、および画像処理部４７などを有する。
【００６５】
なお、以下に述べる音声認識処理（ＶＤ）は、主に音声認識ライブラリ４１、声紋判別部４３、コマンド認識部４４、および音声入力部２４によって実行される。音声入力部２４も操作画面制御部ＳＳの機能的な構成の一つである。
【００６６】
図６において、操作画面記憶部４０は、ユーザが画像形成装置１に指示を与えまたは画像形成装置１からユーザにメッセージを通知するための操作画面ＧＭを記憶する。操作画面ＧＭのそれぞれには、他の操作画面ＧＭと識別するための画面番号が付されている。
【００６７】
音声認識ライブラリ４１は、辞書テーブルＴＢ（ＴＢ３０、３１、３２、…）を記憶し管理する。辞書テーブルＴＢは、図７に示すように、それぞれの操作画面ＧＭに対応付けて設けられる。
【００６８】
ここで、辞書テーブルＴＢについて詳細に説明する。図８〜図１０に、図７に示す基本設定画面ＧＭ３０、倍率画面ＧＭ３１、画面／ページ集約画面ＧＭ３２のそれぞれに対応した辞書テーブルＴＢ３０、ＴＢ３１、ＴＢ３２の例を示す。辞書テーブルＴＢ３０、ＴＢ３１、ＴＢ３２は、その構成は互いに同一であり、内容の一部が互いに異なる。
【００６９】
つまり、辞書テーブルＴＢ３０には、図８に示すように、音声コマンドに関する情報であるコマンド情報ＤＴ３０が、記憶され管理されている。なお、辞書テーブルＴＢ３１、３２では、コマンド情報ＤＴ３１、３２がそれぞれ記憶され管理されている。
【００７０】
コマンド情報ＤＴ３０には、入力された音声コマンドに応じて操作画面ＧＭを遷移させる場合における遷移先の操作画面に関するリンク情報（キー情報）ＫＷ、画面番号ＧＲＮに示される画面番号の画面に表示される操作キーの名称（操作キー名）または操作項目名を示す備考ＧＷ、および音声により入力される音声コマンドＳＷが、互いに対応付けて記録される。画面番号ＧＲＮには、その辞書テーブルＴＢと対応付けられている操作画面の画面番号が記録される。
【００７１】
つまり、音声コマンドＳＷとして、備考ＧＷに示される操作キー名と同じ語句またはその操作キー名に対してユーザが発声する言葉（語句）のゆらぎを考慮して変更が加えられた語句（コマンド語句）が、記録されている。１つのリンク情報ＫＷに対応して複数の音声コマンドＳＷを記録することが可能である。
【００７２】
また、リンク情報ＫＷとして、図７に示す基本設定画面ＧＭ３０に表示された操作キーのキー情報Ｙ２１〜Ｙ２７が記録されている。
【００７３】
したがって、例えば、入力された音声コマンドが、辞書テーブルＴＢ３０に記録された音声コマンドＳＷのいずれかと一致する場合に、リンク情報ＫＷに示されるキー情報Ｙに対応付けられた画面番号の操作画面へ遷移するための処理が実行される。つまり、その音声コマンドＳＷに対応付けられた備考ＧＷに示される操作キー名の操作キーが押下されたものとして処理が実行される。
【００７４】
図６に戻って、画面表示制御部４２は、音声が入力されたタイミングまたは操作パネル１０ｆに備えられたボタンが押されたタイミングで、所定の操作画面を操作パネル１０ｆに表示させるための処理を行う。また、画面表示制御部４２は、操作画面選択テーブルＴＢ５０を管理しており、総合制御部４６からの制御信号に基づいて操作画面選択テーブルＴＢ５０を参照することにより、現在表示されている操作画面を入力された音声コマンドに対応する操作画面に遷移させるための処理を行う。
【００７５】
操作画面選択テーブルＴＢ５０には、遷移先画面情報ＤＴ５０が記憶され管理されている。遷移先画面情報ＤＴ５０は、図１１に示すように、リンク情報ＫＷと遷移先画面番号ＲＷとを対応付けて示すものである。リンク情報ＫＷとして、操作キーのキー情報Ｙが記録される。遷移先画面番号ＲＷは、キー情報Ｙで示されたキーが押されたときの遷移先の操作画面ＧＭの画面番号である。
【００７６】
したがって、ユーザから音声が入力されると、コマンド認識部４４は、その音声を認識して音声コマンドＳＷを生成した後、辞書テーブルＴＢ３０を参照し、生成した音声コマンドＳＷに対応したキー情報Ｙを取得する。取得したキー情報Ｙは総合制御部４６に送られる。総合制御部４６は、そのキー情報Ｙを、制御信号ＳＮ１として画面表示制御部４２に送る。
【００７７】
画面表示制御部４２は、キー情報Ｙに基づいて操作画面選択テーブルＴＢ５０を検索し、そのキー情報Ｙに対応する遷移先画面番号ＲＷを取得する。そして、取得した遷移先画面番号ＲＷの操作画面ＧＭをタッチパネルＴＰに表示する。
【００７８】
例えば、図１１の遷移先画面情報ＤＴ５０において、リンク情報ＫＷの１つであるキー情報Ｙ２４には、画面番号１０Ｇ０９０００が対応付けられている。画面表示制御部４２は、キー情報Ｙ２４を制御信号ＳＮ１として受け取ると、画面番号１０Ｇ０９０００の操作画面ＧＭである倍率画面ＧＭ３１を操作画面記憶部４０から抽出し、表示する。
【００７９】
また、他の例として、画面表示制御部４２がキー情報Ｙ２５を制御信号ＳＮ１として受け取ると、画面番号１０Ｇ１２０００の画面／ページ集約画面ＧＭ３２を操作画面記憶部４０から抽出し、表示する。
【００８０】
図６に戻って、声紋判別部４３は、ユーザの声紋を判別して声紋情報を生成する。つまり、声紋判別部４３は、音声コマンドを入力したユーザの声紋を判別するための処理を行う。例えば、ユーザが音声コマンドを発声したときの発声が開始されてから終了するまでの時間（発声時間）、音声の周波数スペクトル、および音声のボリュームなどを測定し解析することによって、音声コマンドを入力したユーザがいずれのユーザであるかを判別するための処理を行う。そして、音声コマンドを入力したユーザがいずれのユーザであるかを示す判別結果信号ＳＮ２を、コマンド認識部４４へ送る。
【００８１】
コマンド認識部４４は、ユーザから音声が入力されたときに、その音声を認識して音声コマンドＳＷを生成する。そして、辞書テーブルＴＢ３０を参照し、生成した音声コマンドＳＷに対応したキー情報Ｙを取得する。辞書テーブルＴＢ３０を参照する際に、判別結果信号ＳＮ２をも用い、音声コマンドＳＷおよび声紋情報の両方が一致するキー情報Ｙを取得する。取得したキー情報Ｙは、認識結果信号ＳＮ３として総合制御部４６に送られる。総合制御部４６は、そのキー情報Ｙを、制御信号ＳＮ１として画面表示制御部４２に送る。
【００８２】
なお、コマンド認識部４４は、音声認識に際して、まず、音声入力部２４から取得した音声データＤＧＤＴを文字列（以下、「認識対象語句」と記載することがある）に変換し、辞書テーブルＴＢ３０に記録されている音声コマンドＳＷの中から、認識対象語句と一致するものを抽出する。そして、認識対象語句と一致する音声コマンドＳＷが抽出されると、その音声コマンドＳＷに対応付けられたリンク情報ＫＷを読み出す。
【００８３】
一括登録部４５は、特定の操作画面ＧＭに遷移させるための音声コマンドを辞書テーブルＴＢに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび特定の操作画面ＧＭへのリンク情報ＫＷを、音声認識ライブラリ４１に記憶されている全ての辞書テーブルＴＢに追加登録するための処理（コマンド登録処理）を行う。
【００８４】
次に、コマンド登録処理について、ユーザの操作手順とともに説明する。
【００８５】
コマンド登録処理は、ユーザによるお気に入り画面登録操作によって開始される。
【００８６】
ユーザは、まず、お気に入り画面を決定する。第１実施形態では、縮小画面ＧＭ３３およびページ集約画面ＧＭ３４がユーザのお気に入り画面である。縮小画面ＧＭ３３およびページ集約画面ＧＭ３４へ遷移するための例が図１２に示されている。
【００８７】
図１２において、例えば基本設定画面ＧＭ３０において、倍率キー（ボタン）ＢＴＮ１０が押下された場合、または音声により倍率キーＢＴＮ１０に対応する音声コマンドが入力された場合に、倍率画面ＧＭ３１に遷移する。そして、倍率画面ＧＭ３１において、縮小キーＢＴＮ１２が押下された場合、または音声により縮小キーＢＴＮ１２に対応する音声コマンドが入力された場合は、縮小画面ＧＭ３３に遷移する。
【００８８】
また、基本設定画面ＧＭ３０において、画面／ページ集約キーＢＴＮ１１が押下された場合、または音声により画面／ページ集約キーＢＴＮ１１に対応する音声コマンドが入力された場合は、画面／ページ集約画面ＧＭ３２に遷移する。そして、画面／ページ集約画面ＧＭ３２において、ページ集約キーＢＴＮ１３が押下された場合または音声によりページ集約キーＢＴＮ１３に対応する音声コマンドが入力された場合は、ページ集約画面ＧＭ３４に遷移する。
【００８９】
お気に入り画面登録操作としては、２つの操作方法がある。１つは、お気に入り画面へ遷移するための操作キー（お気に入り画面の１つ前の操作画面に表示される操作キー）を指定し、指定した操作キーに任意の語句からなる音声コマンドを登録する方法である。
【００９０】
この方法を採用する場合は、ユーザは、まず操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す。これにより、画像形成装置１では、特定の操作画面に遷移させるための音声コマンドを辞書テーブルＴＢに追加登録する旨の指令があったと判断し、音声登録モードに移行する。
【００９１】
ユーザは、お気に入り画面へ遷移するための操作キーが表示された操作画面ＧＭを表示させるための操作を行う。例えば、お気に入り画面が「縮小画面ＧＭ３３」である場合は、その１つ前の画面である倍率画面ＧＭ３１を表示させる。そして、倍率画面ＧＭ３１において、縮小画面ＧＭ３３へ遷移するための操作キーつまり縮小キーＢＴＮ１２を押下して指定する。お気に入り画面が「ページ集約画面ＧＭ３４」である場合は、画面／ページ集約画面ＧＭ３２を表示させ、ページ集約画面ＧＭ３４に遷移するための操作キーつまりページ集約キーＢＴＮ１３を押下して指定する。
【００９２】
操作キーが指定されると、操作画面制御部ＳＳは、ユーザに対し、登録する音声コマンドを発声するためのメッセージ（発声メッセージ）を示す画面を表示する。または、画像形成装置１に備えられているスピーカー（図示せず）から予め登録されている音声ガイドを流して、ユーザに音声を発声するよう促す。
【００９３】
ユーザは、発声メッセージが示された画面が表示されまたは音声ガイドが流れると、音声認識ボタンＫＢを今度は軽く押して、音声を発声し入力する。
【００９４】
音声が入力されると、声紋判別部４３は声紋情報を生成する。声紋情報は、例えば音声ＩＤ情報ＶＤとして一括登録部４５に送られる。
【００９５】
また、声紋判別部４３による処理にともなって、コマンド認識部４４では、入力された音声に対応する音声コマンドＳＷを生成する。生成した音声コマンドＳＷは、一括登録部４５に送られる。
【００９６】
一括登録部４５では、音声コマンドＳＷおよび音声ＩＤ情報ＶＤを取得すると、音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに登録するための処理を実行する。このとき、音声コマンドＳＷおよび音声ＩＤ情報ＶＤの他、ユーザが指定した操作キーに対応するリンク情報ＫＷも登録される。
【００９７】
リンク情報ＫＷについては、ユーザが指定した操作キーに対応付けられているリンク情報ＫＷを、例えば、その操作キーが表示されている操作画面に対応付けられている辞書テーブルＴＢから検索する。例えば、ユーザが縮小キーＢＴＮ１２を指定した場合は、縮小キーＢＴＮ１２が表示されている倍率画面ＧＭ３１に対応付けられている辞書テーブルＴＢ３１（図９参照）から、当該キーに対応付けられているリンク情報ＫＷである「Ｙ３３」を検索し抽出する（図７参照）。
【００９８】
そして、音声コマンドＳＷ、音声ＩＤ情報ＶＤ、抽出したリンク情報ＫＷ、およびユーザが指定した操作キーの操作項目名を、お気に入り画面についての新たなコマンド情報ＤＴとして音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに追加登録する（図１３参照）。
【００９９】
お気に入り画面登録操作の２つ目の操作方法は、お気に入り画面として登録したい画面を表示させて操作する方法である。
【０１００】
この方法を採用する場合は、ユーザは、お気に入り画面として登録したい操作画面を表示させ、その操作画面の画面名称部分を押下する。例えば、縮小画面ＧＭ３３の場合は、図１２に示す縮小画面ＧＭ３３の画面名称部分ＭＳを押下する。
【０１０１】
すると、操作画面制御部ＳＳでは、画面名称部分ＭＳが押下された操作画面（お気に入り画面）の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中からお気に入り画面に遷移するための操作キーを検索し、上述の１つ目の操作方法のように、ユーザによってお気に入り画面の１つ前の操作画面に表示される操作キーが指定された場合の処理と同様の処理を実行する。
【０１０２】
いずれの操作方法を採用するかは、ユーザが選択することができる。
【０１０３】
図６に戻って、総合制御部４６は、画像処理部４７を制御するとともに、操作画面制御部ＳＳの全体をも制御する。また、総合制御部４６は、コマンド認識部４４から認識結果信号ＳＮ３を受け取ると、認識結果信号ＳＮ３が操作画面を遷移するための信号であるのかまたは画像形成装置１が備えている機能に関する設定を示す信号であるのかを判別する。その判別の結果に応じて、各部に制御信号を送る。認識結果信号ＳＮ３は、操作画面を遷移するための信号であるので、認識結果信号ＳＮ３を受け取ると、画面表示制御部４２に対して現在表示されている操作画面を遷移すべき旨および遷移先の操作画面のリンク情報ＫＷを示す制御信号ＳＮ１を送る。
【０１０４】
画像処理部４７は、総合制御部４６からの制御信号に応じて、スキャナ部１０ｇが読み取った画像データまたは他の装置から送信されてきた画像データなどに対し、種々の画像処理を施す。
【０１０５】
次に、コマンド登録処理を実行する場合における画像形成装置１全体の処理について、図１４のフローチャートを参照して説明する。
【０１０６】
ユーザは、操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す（＃７１）。これにより、画像形成装置１では、お気に入り画面を登録するための処理（コマンド登録処理）が開始される（＃７２）。
【０１０７】
次に、ユーザは、操作キーを指定することによってお気に入り画面を登録するための処理を実行させるか、お気に入り画面を表示させて処理を実行させるかを選択する。操作キーを指定することによってお気に入り画面を登録するための処理を実行させる場合（＃７３で１が選択された場合）は、ユーザはお気に入り画面の１つ前の操作画面を表示させ、お気に入り画面に遷移するための操作キーを押下して指定する（＃７４）。
【０１０８】
お気に入り画面として登録したい画面を表示させて処理を実行させる場合（＃７３で２が選択された場合）は、ユーザは、お気に入り画面として登録したい操作画面を表示させ（＃８２）、その操作画面の画面名称部分ＭＳを押下する（＃８３）。
【０１０９】
操作画面制御部ＳＳは、お気に入り画面の画面名称部分ＭＳが押下された場合は、お気に入り画面の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中からお気に入り画面に遷移するための操作キーを抽出し、抽出した操作キーが指定されたものとして、処理を実行する。
【０１１０】
操作キーが指定されると、画像形成装置１は、発声メッセージを表示しまたは音声出力し、ユーザの発声を促す（＃７５）。
【０１１１】
ユーザは、音声認識ボタンＫＢを軽く押して（＃７６）、登録したい音声コマンドを発声し入力する（＃７７）。音声コマンドが入力されると、音声ＩＤが生成され保存される（＃７８）。また、音声認識によって音声コマンドＳＷが生成される（＃７９、＃８０）。そして、音声コマンドＳＷ、音声ＩＤ、リンク情報ＫＷ、および操作項目名を、お気に入り画面についての新たなコマンド情報ＤＴとして、すべての辞書テーブルＴＢに追加登録する（＃８１）。
【０１１２】
次に、コマンド認識処理における画像形成装置１全体の処理について、図１５のフローチャートを参照して説明する。
【０１１３】
ユーザは、操作パネル１０ｆに設けられている音声認識ボタンＫＢを（軽く）押す（＃９１）。これにより、画像形成装置１では、コマンド認識処理を開始する指令があったと判断する（＃９２）。ユーザは、音声を入力する（＃９３）。
【０１１４】
画像形成装置１は、入力された音声に対する音声認識処理を実行し、音声コマンドＳＷを生成する（＃９４）。そして、生成された音声コマンドＳＷを、辞書テーブルＴＢに記憶されている音声コマンドＳＷと照合する（＃９６）。また、入力された音声に対して声紋情報を生成する（＃９５）。
【０１１５】
辞書テーブルＴＢにおいて一致する音声コマンドＳＷが複数あった場合には（＃９７でＹｅｓ）、声紋情報を参照し、声紋情報が一致する音声コマンドＳＷを特定し、１つのリンク情報ＫＷを抽出する（＃９８）。そして、操作画面選択テーブルＴＢ５０を参照して、入力された音声に対応した操作画面ＧＭを抽出して表示する（＃９９）。なお、ステップ＃９９においては、入力された音声が辞書テーブルＴＢに音声コマンドＳＷとして記録されていなかった場合には、入力された音声に対応した処理を行う。
【０１１６】
このように、第１実施形態では、お気に入り画面についてのコマンド情報ＤＴが音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに一括して追加登録されるので、ユーザは、どの操作画面からでもお気に入り画面を遷移させるための音声コマンドを発声することによって、お気に入り画面を表示させることができる。
【０１１７】
したがって、ユーザにとっては、画面操作の簡略化および迅速化を図ることができる。例えば、図１６に示すように操作画面の階層が深くかつ複雑になっている場合でも、お気に入り画面を容易に表示させることができる。
【０１１８】
また、追加登録されるお気に入り画面についてのコマンド情報ＤＴには音声ＩＤも含まれるので、複数のユーザによって同一の音声コマンドが登録されていても、その音声コマンドを登録したユーザを区別することができる。
〔お気に入り画面登録操作の変形例〕
第１実施形態では、ユーザが設定操作を行う前の操作画面をお気に入り画面として登録する場合を例に説明したが、ユーザは設定操作の途中の状態の操作画面をお気に入り画面と同様に登録することもできる。
【０１１９】
例えば、図１２に示す縮小画面ＧＭ３３は、コピーの倍率を９３．０％とする設定を行った状態を示す。また、同図に示すページ集約画面ＧＭ３４は、印刷の出力形態をツーインワン（分割）とする設定を行った状態を示す。この状態で操作画面における設定操作を一時中断する場合に、ユーザは設定操作の途中の縮小画面ＧＭ３３またはページ集約画面ＧＮ３４について設定状態を保持しつつ、お気に入り画面のように登録するための操作を行う。これにより、いずれの操作画面からでも、設定操作の途中の操作画面を呼び出して続きの設定操作を再開することができる。また、ユーザが設定操作を再開する場合に、図１７に示すように、各操作画面での設定操作の状態を最上位の階層の操作画面（本実施形態では基本設定画面ＧＭ３０）に表示させることもできる。音声ガイドで報知してもよい。
【０１２０】
次に、設定操作の途中の状態の操作画面（以下、「設定途中画面」と記載する）をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理について、フローチャートを参照して説明する。
【０１２１】
図１８は設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１２２】
図１８において、ユーザは、各操作画面において所定の設定操作を行う（＃１１１）。このとき、設定操作を一時中断する場合に、操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す（＃１１２）。ここで、ユーザは、設定状態を保持せずに、表示されている操作画面を第１実施形態で説明したようにお気に入り画面として登録する場合は（＃１１３で１が選択された場合）、操作キーを指定するかまたはお気に入り画面の画面名称部分ＭＳを押下するなどして、お気に入り画面登録操作を開始させる（＃１１４）。
【０１２３】
現在表示されている設定途中画面の設定状態を保持させたい場合は（＃１１３で２が選択された場合）、ユーザは、設定途中画面の設定状態をメモリ１０ｂ（ハードディスク１０ｄ）などに保存するための操作を行う。すると、画像形成装置１は、設定途中画面についてお気に入り画面登録操作が開始されたものとして、上述の第１実施形態で説明したコマンド登録処理と同様の処理を実行する。この場合のコマンド登録処理は、お気に入り画面の画面名称部分ＭＳが押下された場合の処理と同一である。つまり、画像形成装置１は、設定途中画面の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中から設定途中画面に遷移するための操作キーを検索し、検索した操作キーが押下され指定されたものとして、第１実施形態におけるコマンド登録処理と同様の処理（図１４の＃７５〜＃８０）を実行する（＃１１６〜＃１２０）。そして、コマンド語句情報ＳＴおよび抽出したリンク情報ＫＷを、お気に入り画面についての新たなコマンド情報ＤＴとして音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに追加登録する（＃１２１）。なお、コマンド語句情報ＳＴおよび抽出したリンク情報ＫＷ以外に音声ＩＤまたは操作キーの操作項目名なども登録するようにしてもよい。
〔第２実施形態〕
次に、第２実施形態について、図１９〜図２１を参照して説明する。なお、第２実施形態については、第１実施形態におけるネットワークシステムＳＹＳおよび画像形成装置１と異なる部分についてのみ説明する。また、図１９〜図２１において、第１実施形態と同一の構成要素には同一の符号を付してその詳細な説明を適宜省略する。
【０１２４】
図１９は第２実施形態の画像形成装置１における操作画面制御部ＳＳＢの機能的な構成の例を示す図、図２０は専用辞書テーブルＴＢ６０の例を示す図、図２１は第２実施形態における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１２５】
第１実施形態では、お気に入り画面についての新たなコマンド情報ＤＴを、音声認識ライブラリ４１に記憶されている全ての辞書テーブルＴＢ（操作画面記憶部４０に記憶されているすべての操作画面ＧＭに対応付けて設けられている辞書テーブルＴＢ）に追加登録するようにしたが、それに代えて、操作画面ＧＭに対応付けて設けられている辞書テーブルＴＢとは別の専用辞書テーブルＴＢ６０（図１９参照）に、お気に入り画面についての新たなコマンド情報ＤＴを追加登録するようにしてもよい。
【０１２６】
図１９において、音声認識ライブラリ４１Ｂは、辞書テーブルＴＢ（ＴＢ３０、３１、３２、…）および専用辞書テーブルＴＢ６０を記憶し管理している。
【０１２７】
登録部４５Ｂは、音声ＩＤ情報ＶＤ、音声コマンドＳＷ、およびリンク情報ＫＷを取得すると、それらをお気に入り画面についての新たなコマンド情報ＤＴ（コマンド情報ＤＴ６０）として、音声認識ライブラリ４１Ｂに記憶されている専用辞書テーブルＴＢ６０（図２０参照）に登録する。
【０１２８】
コマンド認識部４４Ｂは、基本的には第１実施形態のコマンド認識処理と同様の処理を実行する。第１実施形態のコマンド認識処理と異なる点は、コマンド認識処理を実行する際、まず、図２０に示す専用辞書テーブルＴＢ６０に記憶されているコマンド情報ＤＴ６０を参照して、入力された音声コマンドと一致する音声コマンドＳＷを検索する。そして、入力された音声コマンドと一致する音声コマンドＳＷが検索されなかった場合に、現在表示されている操作画面に対応付けられている辞書テーブルＴＢに記憶されているコマンド情報ＤＴを参照する。
【０１２９】
専用辞書テーブルＴＢ６０にはお気に入り画面についての新たなコマンド情報ＤＴ（コマンド情報ＤＴ６０）しか登録されない。したがって、お気に入り画面へ遷移するための音声コマンドが入力された場合は、各操作画面についての辞書テーブルＴＢを参照するよりも短時間で入力された音声コマンドと一致する音声コマンドＳＷを検索することができ、コマンド認識処理をより早く完了させることができる。
【０１３０】
図２０は第２実施形態における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１３１】
次に、第２実施形態における画像形成装置１全体の処理について、図２０のフローチャートを参照して説明する。
【０１３２】
ステップ＃１３１〜１３４の処理は、第１実施形態の図１６のステップ＃９１〜９４と同じである。画像形成装置１は、入力された音声コマンドに対して音声認識処理を実行し、専用辞書テーブルＴＢ６０に記憶されているコマンド情報ＤＴ６０の音声コマンドＳＷと照合する（＃１３６）。
【０１３３】
専用辞書テーブル６０から認識対象語句と一致する音声コマンドＳＷを検索することができなかった場合は、次に、現在表示されている操作画面ＧＭに対応する辞書テーブルＴＢを参照する。
【０１３４】
ステップ＃１３５、１３７〜１３９については、図１６のステップ＃９５、９７〜９９と同じである。
【０１３５】
なお、第２の実施形態では、専門辞書テーブルＴＢ６０または辞書テーブルＴＢに登録されている音声コマンドＳＷのうち、入力された音声コマンドと一致する音声コマンドＳＷを音声認識処理の結果として採用する（＃１３８）。
【０１３６】
上述の実施形態において、操作画面制御部ＳＳは本発明における「操作画面制御装置」に相当し、音声入力部２４は本発明における「音声入力手段」に相当する。音声認識ライブラリ４１、声紋判別部４３、およびコマンド認識部４４は、本発明の「音声認識部」に相当する。画面表示制御部４２は本発明における「画面切り替え手段」に相当し、一括登録部４５は本発明における「一括登録手段」に相当する。
【０１３７】
また、音声ＩＤ情報ＶＤは本発明における「声紋情報」に相当し、声紋判別部４３は本発明における「声紋判別部」に相当する。また、メモリ１０ｂ（ハードディスク１０ｄ）は本発明における記憶装置に相当する。
【０１３８】
その他、操作画面制御部ＳＳ、画像形成装置１、およびネットワークシステムＳＹＳの構成、機能、各データが示す内容、テーブルの内容、処理の内容または順序などは、本発明の趣旨に沿って適宜変更することができる。
【符号の説明】
【０１３９】
１ 画像形成装置
２４ 音声入力部（音声入力手段、音声認識部）
４１、４１Ｂ 音声認識ライブラリ（音声認識部）
４２ 画面表示制御部（画面切り替え手段）
４３ 声紋判別部（音声認識部、声紋判別部）
４４、４４Ｂ コマンド認識部（音声認識部）
４５ 一括登録部（一括登録手段）
４５Ｂ 登録部
ＤＴ３０、３１、３２、６０ コマンド情報
ＫＷ リンク情報（キー情報）
Ｙ２１〜Ｙ２７ キー情報
ＳＳ，ＳＳＢ 操作画面制御部（操作画面制御装置）
ＳＷ 音声コマンド
ＴＢ３０、３１、３２ 辞書テーブル
ＴＢ５０ 操作画面選択テーブル
ＴＢ６０ 専用辞書テーブル
ＶＤ 音声ＩＤ情報（声紋情報）
【技術分野】
【０００１】
本発明は、操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置、画像形成装置、およびコンピュータプログラムに関する。
【背景技術】
【０００２】
近年、画像形成装置の高性能化にともなって、画像形成装置の操作パネルに表示される操作画面（設定画面）の内容が多岐に渡るようになり、操作画面の数が増大している。また、操作画面についてのツリー構造の階層も深くなる傾向があり、ユーザにとっては自分の好きなページまたはよく使う操作画面を探すのが困難となってきている。
【０００３】
したがって、例えば、現に表示されている操作画面から系列の異なる別の操作画面へ遷移させたい場合に、遷移途中の多くの画面を表示させる必要があり、なかなか目的の操作画面に移ることができない。このように、目的の操作画面を表示させることがユーザにとって手間がかかり、そのための操作時間が増大している。
【０００４】
また、画像形成装置に音声認識機能を持たせることが提案されている。音声認識機能を持った画像形成装置においては、ユーザは音声によって操作画面における操作を行うことができる。例えば、ある操作画面を表示した状態で、その操作画面に表示されたキーを押すことに代えて、音声コマンドによってそのキーを押したと同じ操作を行うことができる。
【０００５】
また、音声認識装置において、単語音声が機器の持つ特定のモードにかかわらず全てのモードで認識対象となることを示すクラスター情報を登録することが提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平５−３５２９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
音声認識機能を持った画像形成装置では、音声によって操作画面における操作を行うことができるので、目的の操作画面に遷移するための音声コマンドをそれぞれの操作画面ごとに登録しておけば便利である。
【０００８】
しかし、その場合には、ユーザは多数の音声コマンドを記憶しておかなければならず、音声コマンドを忘れてしまって操作できなくなることもある。
【０００９】
また、目的の操作画面に直接に遷移するためのキーをお気に入り画面として操作画面上に表示しておくことが考えられる。しかし、この場合に、画面のサイズには限りがあるので、お気に入り画面が多数あるような場合に、それらの全部を１つの操作画面に表示させることができないことがある。
【００１０】
また、上に述べた特許文献１に記載の音声認識装置では、そのようなクラスター情報を登録することによって、登録された単語音声を全てのモードで認識することはできても、どの画面からでも手間をかけることなく短時間でユーザの希望する操作画面に遷移することはできない。
【００１１】
本発明は、このような問題点に鑑み、操作パネルの表示面に表示される操作画面を音声によって操作する際に、どの操作画面を表示した状態からでも、ユーザに手間をかけることなくかつ短時間で目的の操作画面に遷移できるようにすることを目的とする。
【課題を解決するための手段】
【００１２】
本発明の実施形態に係る操作画面制御装置は、ユーザに音声を入力させるための音声入力手段と、入力された音声を認識して音声コマンドを生成する音声認識部と、前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、を有する。
【００１３】
好ましくは、前記辞書テーブルには、前記リンク情報として、その操作がなされたときに前記特定の操作画面に遷移するように設定されたキーについてのキー情報が登録されている。
【００１４】
好ましくは、前記操作画面に表示されるキーについてのキー情報と、当該キーの操作がなされたときに遷移する遷移先の操作画面の操作画面情報とを対応付けて記憶する操作画面選択テーブルが設けられており、前記辞書テーブルには、前記リンク情報として、いずれかの前記操作画面に表示されるキーについてのキー情報が登録されており、前記画面切り替え手段は、前記辞書テーブルを参照することによって得られた前記キー情報を用い、前記操作画面選択テーブルを参照することにより、入力された音声コマンドに対応する操作画面に遷移させる。
【発明の効果】
【００１５】
本発明によると、操作パネルの表示面に表示される操作画面を音声によって操作する際に、どの操作画面を表示した状態からでも、ユーザに手間をかけることなくかつ短時間で目的の操作画面に遷移できるようになる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態に係る画像形成装置を含むネットワークシステムの例を示す図である。
【図２】一実施形態の画像形成装置のハードウェア構成の例を示す図である。
【図３】操作パネルの例を示す図である。
【図４】画像形成装置の構成の例を示す図である。
【図５】音声認識機能関連のモジュールの構成の例を示す図である。
【図６】操作画面制御部の機能的な構成の例を示す図である。
【図７】各画面に対応して辞書テーブルが設けられている例を示す図である。
【図８】基本設定画面に対応した辞書テーブルの例を示す図である。
【図９】倍率画面に対応した辞書テーブルの例を示す図である。
【図１０】画面／ページ集約画面に対応した辞書テーブルの例を示す図である。
【図１１】操作画面選択テーブルの例を示す図である。
【図１２】縮小画面を含む操作画面の遷移状態の例を示す図である。
【図１３】コマンド情報が追加登録された辞書テーブルの例を示す図である。
【図１４】お気に入り画面を登録する場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１５】音声コマンドが入力された場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１６】操作画面の階層構造の例を示す図である。
【図１７】各操作画面での設定操作の状態を示す最上位の階層の操作画面の例を示す図である。
【図１８】設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【図１９】第２実施形態の画像形成装置における操作画面制御部の機能的な構成の例を示す図である。
【図２０】専用辞書テーブルの例を示す図である。
【図２１】第２実施形態における画像形成装置全体の処理の流れの例を説明するためのフローチャートである。
【発明を実施するための形態】
【００１７】
〔第１実施形態〕
図１に示すネットワークシステムＳＹＳは、本発明の一実施形態の画像形成装置１を含むネットワークシステムである。
【００１８】
図１に示すように、ネットワークシステムＳＹＳは、画像形成装置１、ファイルサーバ２ａ、端末装置３ａ、および通信回線ＮＴ１などによって構成される。
【００１９】
画像形成装置１、ファイルサーバ２ａ、および端末装置３ａは、それぞれ、通信回線ＮＴ１を介して互いに接続されている。通信回線ＮＴ１として、ＬＡＮ、ＷＡＮ、イントラネット、または専用線などが用いられる。
【００２０】
ファイルサーバ２ａは、電子文書（電子データ）を管理するためのファイルサーバである。
【００２１】
端末装置３は、ネットワークシステムＳＹＳのユーザが用いる端末装置である。各ユーザは、この端末装置３を用いて、後で説明する画像形成装置１の「ＰＣプリント機能」を利用することができる。
【００２２】
ファックス端末４ａは、通信回線ＮＴ２を介して画像形成装置１または他のファックス端末との間でファクシミリによるデータの送受信を行う。なお、通信回線ＮＴ２として、公衆回線などが用いられる。
【００２３】
画像形成装置１は、コピー機能、ＰＣプリント機能、ファックス送信機能、電子メール送信機能、ＳＭＢ送信機能、ＦＴＰ送信機能、およびボックス（Ｂｏｘ）機能などの様々なアプリケーション機能を集約した画像形成装置である。複合機またはＭＦＰ（Multi Function Peripherals）などと呼ばれることもある。
【００２４】
本実施形態の画像形成装置１には、上記のコピー機能などの基本的な機能のほかに、音声実行機能が備えられている。音声実行機能は、音声認識処理（ＶＮ）を実行し、その音声認識処理の結果に基づいて所定の処理を実行する機能である。音声認識処理は、図１に示す画像形成装置１の操作パネル１０ｆに備えられているマイクＭＫから入力される音声を、記憶媒体に記憶されている認識辞書（グラマー）に基づいて認識するための処理である。
【００２５】
図２に示すように、画像形成装置１は、ＣＰＵ１０ａ、ＲＡＭ１０ｂ、ＲＯＭ１０ｃ、ハードディスク１０ｄ、制御用回路１０ｅ、操作パネル１０ｆ、スキャナ部１０ｇ、プリンタ部１０ｈ、ファックス部１０ｊ、およびネットワークインタフェース１０ｋなどによって構成される。
【００２６】
スキャナ部１０ｇは、原稿の用紙（以下、単に「原稿」と記載する。）に描かれている写真、文字、絵、図表などの画像を光学的に読み取って電子データ化する装置である。原稿として、紙、紙以外の種々のシート、物などを用いることが可能である。
【００２７】
プリンタ部１０ｈは、スキャナ部１０ｇが読み取った画像データまたは他の装置から送信されてきた画像データを、イエロー、マゼンタ、シアン、およびブラックの４色のトナーを使用して用紙に印刷する。
【００２８】
ファックス部１０ｊは、スキャナ部１０ｇが読み取った画像データを、通信回線を介してファックス端末に送信しまたはファックス端末から送信されてくる画像データを受信する。
【００２９】
ネットワークインタフェース１０ｋは、ＮＩＣ（Network Interface Card）であって、ＬＡＮまたはインターネットなどを介して他の装置への接続を行い、電子データの送受信などを行う。
【００３０】
制御用回路１０ｅは、ハードディスク１０ｄ、操作パネル１０ｆ、スキャナ部１０ｇ、プリンタ部１０ｈ、ファックス部１０ｊ、およびネットワークインタフェース１０ｋなどの装置を制御する。
【００３１】
操作パネル１０ｆは、ユーザが画像形成装置１に指示を与えまたは画像形成装置１からユーザにメッセージを通知するために用いられる。
【００３２】
これら各部または各装置の一部が連携することによって、前述のアプリケーション機能が実現される。
【００３３】
「コピー機能」は、スキャナ部１０ｇによって原稿の画像を読み取り、それによって得た画像データをプリンタ部１０ｈによって用紙に印刷する機能である。
【００３４】
「ＰＣプリント機能」は、ネットワークインタフェース１０ｋによって通信回線を介して画像形成装置１と互いに接続されている端末装置（以下、単に「端末装置」と記載する）などから画像データなどを受信し、プリンタ部１０ｈによってその画像データなどを用紙に印刷する機能である。この機能は、「ネットワークプリンティング」と呼ばれることもある。
【００３５】
「ファックス送信機能」は、スキャナ部１０ｇで読み取った画像データなどをファックス部１０ｊからファックス端末などに送信する機能である。
【００３６】
「ファックス受信機能」は、ファックス部１０ｊによってファックス端末などから画像データを受信し、プリンタ部１０ｈによってその画像データを用紙に印刷する機能である。
【００３７】
「電子メール送信機能」は、スキャナ部１０ｇで読み取った画像データなどを電子メールに添付してネットワークインタフェース１０ｋから送信する機能である。
【００３８】
「ＳＭＢ送信機能」は、スキャナ部１０ｇで読み取った画像データなどを、ＳＭＢ（Server Message Block）に基づいて、ＩＰアドレスなどで指定される送信先に直接送信する機能である。
【００３９】
「ＦＴＰ送信機能」は、スキャナ部１０ｇで読み取った画像データなどをＦＴＰ（File Transfer Protocol）に基づいて送信する機能である。
【００４０】
「ボックス機能」は、ユーザごとに「ボックス」または「パーソナルボックス」などと呼ばれる、パーソナルコンピュータにおけるフォルダまたはディレクトリなどに相当する記憶領域をハードディスク１０ｄに設けておき、ユーザがスキャナ部１０ｇを操作するなどして得た画像データなどを自分の記憶領域に保存できるようにする機能である。「ドキュメントサーバ機能」と呼ばれることもある。
【００４１】
ＰＣプリント機能を利用する際に端末装置において予めボックスを指定しておくことによって、プリントを行いつつプリントする画像データをそのボックス内に保存させることができる。ボックスの指定は、例えば、端末装置にインストールされている画像形成装置１のドライバの機能を用いて行うことができる。
【００４２】
図３に示すように操作パネル１０ｆには、タッチパネルＴＰ、マイクＭＫ、操作部ＴＫ、および音声認識ボタンＫＢ、コピーボタンＭＢ、スキャンＦＡＸボタンＳＢ、およびＢＯＸボタンＸＢなどが設けられている。
【００４３】
タッチパネルＴＰは、画像形成装置１からユーザに通知するメッセージまたは各種機能を利用するための画面（操作画面ＧＭ）などを表示する表示装置である。タッチパネルの機能によって入力装置としての役割も果たす。
【００４４】
マイク（マイクロフォン）ＭＫは、ユーザが音声（音声コマンド）を入力するための装置であり、入力された音声をアナログの音声データ（アナログ音声データＡＮＤＴ）に変換する。
【００４５】
操作部ＴＫは、プリントの枚数またはファックス番号などを入力するためのボタン群を含む。
【００４６】
音声認識ボタンＫＢは、音声認識モード（音声認識を行うためのモード）への切替えを行うためのボタンである。このボタンが押されると、画像形成装置１は、音声認識処理を実行し、音声認識の結果に基づいて所定の処理を実行する。
【００４７】
コピーボタンＭＢは、印刷モード（画像データなどを用紙に印刷するためのモード）への切り替えを行うためのボタンである。このボタンが押されると、コピーについての設定を行う画面（コピー設定画面）がタッチパネルＴＰに表示される。
【００４８】
スキャンＦＡＸボタンＳＢは、送信モード（画像データなどを他の装置に送信するためのモード）への切り替えを行うためのボタンである。このボタンが押されると、画像データなどの送信先の設定を行うための画面がタッチパネルＴＰに表示される。
【００４９】
ＢＯＸボタンＸＢは、ボックスモード（ボックスへの画像データの保存またはボックスに保存されている画像データなどの参照を行うためのモード）への切り替えを行うためのボタンである。このボタンが押されると、画像データなどの保存先となるボックスまたは参照したいボックスの指定を行うための画面がタッチパネルＴＰに表示される。
【００５０】
図４には、画像形成装置１の構成が機能的に整理して示されている。
【００５１】
図４において、スキャナ部１０ｇで読み取られた画像データに対し、入力画像処理部２２において、色補正処理、解像度変換処理などの画像処理が必要に応じて実施され、その後にメモリ１０ｂに記憶される。画像データは、必要に応じてメモリ１０ｂから読み出され、出力画像処理部２３において、色変換処理、スクリーン制御処理、スムージング処理、濃度補正処理などが必要に応じて施され、プリンタ部１０ｈに送られる。プリンタ部１０ｈにおいて、用紙に印刷される。
【００５２】
操作パネル１０ｆに設けられたマイクＭＫから入力されたユーザの音声は、音声入力部２４によって音声データに変換され、システムＩＦ２１を経てＣＰＵ１０ａに入力され、処理される。
【００５３】
ハードディスク１０ｄには、画像形成装置１の操作のための複数の操作画面ＧＭが予め格納されており、その中から、ユーザの操作に応じて、またユーザの音声の入力に応じて、必要な操作画面ＧＭが読み出され、操作パネル１０ｆのタッチパネルＴＰに表示される。
【００５４】
ＣＰＵ１０ａは、入力された音声に基づいて音声認識処理および操作画面制御を行う他、画像形成装置１の全体を制御する。
【００５５】
例えば、操作画面制御において、ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え処理、および、特定の操作画面に遷移させるための音声コマンドを辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび特定の操作画面へのリンク情報を、対象となる全ての辞書テーブルに追加登録する一括登録処理、などを実行する。詳しくは後で述べる。
【００５６】
これらの機能または処理を実現するためのコンピュータプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどの記録媒体ＭＳ１および半導体メモリＭＳ２などの可搬型の記録媒体ＭＳ（図２参照）に記録しておき、それらからインストールすることが可能である。また、ネットワークを介してサーバからダウンロードすることも可能である。
【００５７】
これらの機能を実現するためのコンピュータプログラムおよびデータは、ハードディスク１ｇにインストールされ、必要に応じてＲＡＭ１０ｂにロードされ、ＣＰＵ１０ａによって実行される。なお、ＣＰＵ１０ａはコンピュータとして動作することが可能である。また、外部のコンピュータとＬＡＮなどを介して接続するようにしてもよい。また、画像形成装置１の一部または全部の機能をデジタルプロセッサまたはハードウェア回路によって実現するように構成してもよい。
【００５８】
図５において、画像形成装置１には、音声認識処理を実行するための音声認識アプリケーション３１が設けられる。すなわち、音声入力装置（マイク）ＭＫから入力された音声は、音声データに変換された後、音声入力ドライバ３４により、ＯＳ（Operating System) ３３を経由して音声認識アプリケーション３１に入力される。
【００５９】
音声認識アプリケーション３１は、音声認識ライブラリ３２を管理し、ユーザの発した音声を認識して音声コマンド（文字列）を生成する。また、音声コマンドに対応した内部動作に変換する。
【００６０】
声紋判別部３５において、音声コマンドの波形などが解析され、声紋判別が行われる。声紋判別によって、声紋情報である音声ＩＤが生成される。音声ＩＤは、音声コマンドを発したユーザを特定するために用いられる。
【００６１】
登録のために生成された音声コマンドは、音声認識ライブラリ３２の辞書テーブルＴＢに追加登録される。また、音声コマンドが制御のために生成された場合には、生成された音声コマンドに基づいて、操作画面制御、その他の制御が行われる。システムＩＦ３６は、各種の設定情報の保存および読み出しなどを行う。
【００６２】
以下において、操作画面制御部ＳＳの処理および動作について、図６〜図１８を参照して説明する。なお、ここでは、ユーザがよく使う画面（以下、「お気に入り画面」と記載することがある）を、「縮小画面ＧＭ３３」および「ページ集約画面ＧＭ３４」とした場合を例にあげて説明する。
【００６３】
図６は画像形成装置１における操作画面制御部ＳＳの機能的な構成の例を示す図、図７は各画面に対応して辞書テーブルが設けられている例を示す図、図８は基本設定画面ＧＭ３０に対応した辞書テーブルＴＢ３０の例を示す図、図９は倍率画面ＧＭ３１に対応した辞書テーブルＴＢ３１の例を示す図、図１０は画面／ページ集約画面ＧＭ３２に対応した辞書テーブルＴＢ３２の例を示す図、図１１は操作画面選択テーブルＴＢ５０の例を示す図、図１２は縮小画面ＧＭ３３およびページ集約画面ＧＭ３４を含む操作画面の遷移状態の例を示す図、図１３はお気に入り画面についての新たなコマンド情報ＤＴが追加登録された辞書テーブルＴＢの例を示す図、図１４はお気に入り画面を登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャート、図１５は音声コマンドが入力された場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャート、図１６は操作画面の階層が深くかつ複雑な状態の例を示す図、図１７は各操作画面での設定操作の状態を示す最上位の階層の操作画面の例を示す図、図１８は設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【００６４】
図６において、操作画面制御部ＳＳは、操作画面記憶部４０、音声認識ライブラリ４１、画面表示制御部４２、声紋判別部４３、コマンド認識部４４、一括登録部４５、総合制御部４６、および画像処理部４７などを有する。
【００６５】
なお、以下に述べる音声認識処理（ＶＤ）は、主に音声認識ライブラリ４１、声紋判別部４３、コマンド認識部４４、および音声入力部２４によって実行される。音声入力部２４も操作画面制御部ＳＳの機能的な構成の一つである。
【００６６】
図６において、操作画面記憶部４０は、ユーザが画像形成装置１に指示を与えまたは画像形成装置１からユーザにメッセージを通知するための操作画面ＧＭを記憶する。操作画面ＧＭのそれぞれには、他の操作画面ＧＭと識別するための画面番号が付されている。
【００６７】
音声認識ライブラリ４１は、辞書テーブルＴＢ（ＴＢ３０、３１、３２、…）を記憶し管理する。辞書テーブルＴＢは、図７に示すように、それぞれの操作画面ＧＭに対応付けて設けられる。
【００６８】
ここで、辞書テーブルＴＢについて詳細に説明する。図８〜図１０に、図７に示す基本設定画面ＧＭ３０、倍率画面ＧＭ３１、画面／ページ集約画面ＧＭ３２のそれぞれに対応した辞書テーブルＴＢ３０、ＴＢ３１、ＴＢ３２の例を示す。辞書テーブルＴＢ３０、ＴＢ３１、ＴＢ３２は、その構成は互いに同一であり、内容の一部が互いに異なる。
【００６９】
つまり、辞書テーブルＴＢ３０には、図８に示すように、音声コマンドに関する情報であるコマンド情報ＤＴ３０が、記憶され管理されている。なお、辞書テーブルＴＢ３１、３２では、コマンド情報ＤＴ３１、３２がそれぞれ記憶され管理されている。
【００７０】
コマンド情報ＤＴ３０には、入力された音声コマンドに応じて操作画面ＧＭを遷移させる場合における遷移先の操作画面に関するリンク情報（キー情報）ＫＷ、画面番号ＧＲＮに示される画面番号の画面に表示される操作キーの名称（操作キー名）または操作項目名を示す備考ＧＷ、および音声により入力される音声コマンドＳＷが、互いに対応付けて記録される。画面番号ＧＲＮには、その辞書テーブルＴＢと対応付けられている操作画面の画面番号が記録される。
【００７１】
つまり、音声コマンドＳＷとして、備考ＧＷに示される操作キー名と同じ語句またはその操作キー名に対してユーザが発声する言葉（語句）のゆらぎを考慮して変更が加えられた語句（コマンド語句）が、記録されている。１つのリンク情報ＫＷに対応して複数の音声コマンドＳＷを記録することが可能である。
【００７２】
また、リンク情報ＫＷとして、図７に示す基本設定画面ＧＭ３０に表示された操作キーのキー情報Ｙ２１〜Ｙ２７が記録されている。
【００７３】
したがって、例えば、入力された音声コマンドが、辞書テーブルＴＢ３０に記録された音声コマンドＳＷのいずれかと一致する場合に、リンク情報ＫＷに示されるキー情報Ｙに対応付けられた画面番号の操作画面へ遷移するための処理が実行される。つまり、その音声コマンドＳＷに対応付けられた備考ＧＷに示される操作キー名の操作キーが押下されたものとして処理が実行される。
【００７４】
図６に戻って、画面表示制御部４２は、音声が入力されたタイミングまたは操作パネル１０ｆに備えられたボタンが押されたタイミングで、所定の操作画面を操作パネル１０ｆに表示させるための処理を行う。また、画面表示制御部４２は、操作画面選択テーブルＴＢ５０を管理しており、総合制御部４６からの制御信号に基づいて操作画面選択テーブルＴＢ５０を参照することにより、現在表示されている操作画面を入力された音声コマンドに対応する操作画面に遷移させるための処理を行う。
【００７５】
操作画面選択テーブルＴＢ５０には、遷移先画面情報ＤＴ５０が記憶され管理されている。遷移先画面情報ＤＴ５０は、図１１に示すように、リンク情報ＫＷと遷移先画面番号ＲＷとを対応付けて示すものである。リンク情報ＫＷとして、操作キーのキー情報Ｙが記録される。遷移先画面番号ＲＷは、キー情報Ｙで示されたキーが押されたときの遷移先の操作画面ＧＭの画面番号である。
【００７６】
したがって、ユーザから音声が入力されると、コマンド認識部４４は、その音声を認識して音声コマンドＳＷを生成した後、辞書テーブルＴＢ３０を参照し、生成した音声コマンドＳＷに対応したキー情報Ｙを取得する。取得したキー情報Ｙは総合制御部４６に送られる。総合制御部４６は、そのキー情報Ｙを、制御信号ＳＮ１として画面表示制御部４２に送る。
【００７７】
画面表示制御部４２は、キー情報Ｙに基づいて操作画面選択テーブルＴＢ５０を検索し、そのキー情報Ｙに対応する遷移先画面番号ＲＷを取得する。そして、取得した遷移先画面番号ＲＷの操作画面ＧＭをタッチパネルＴＰに表示する。
【００７８】
例えば、図１１の遷移先画面情報ＤＴ５０において、リンク情報ＫＷの１つであるキー情報Ｙ２４には、画面番号１０Ｇ０９０００が対応付けられている。画面表示制御部４２は、キー情報Ｙ２４を制御信号ＳＮ１として受け取ると、画面番号１０Ｇ０９０００の操作画面ＧＭである倍率画面ＧＭ３１を操作画面記憶部４０から抽出し、表示する。
【００７９】
また、他の例として、画面表示制御部４２がキー情報Ｙ２５を制御信号ＳＮ１として受け取ると、画面番号１０Ｇ１２０００の画面／ページ集約画面ＧＭ３２を操作画面記憶部４０から抽出し、表示する。
【００８０】
図６に戻って、声紋判別部４３は、ユーザの声紋を判別して声紋情報を生成する。つまり、声紋判別部４３は、音声コマンドを入力したユーザの声紋を判別するための処理を行う。例えば、ユーザが音声コマンドを発声したときの発声が開始されてから終了するまでの時間（発声時間）、音声の周波数スペクトル、および音声のボリュームなどを測定し解析することによって、音声コマンドを入力したユーザがいずれのユーザであるかを判別するための処理を行う。そして、音声コマンドを入力したユーザがいずれのユーザであるかを示す判別結果信号ＳＮ２を、コマンド認識部４４へ送る。
【００８１】
コマンド認識部４４は、ユーザから音声が入力されたときに、その音声を認識して音声コマンドＳＷを生成する。そして、辞書テーブルＴＢ３０を参照し、生成した音声コマンドＳＷに対応したキー情報Ｙを取得する。辞書テーブルＴＢ３０を参照する際に、判別結果信号ＳＮ２をも用い、音声コマンドＳＷおよび声紋情報の両方が一致するキー情報Ｙを取得する。取得したキー情報Ｙは、認識結果信号ＳＮ３として総合制御部４６に送られる。総合制御部４６は、そのキー情報Ｙを、制御信号ＳＮ１として画面表示制御部４２に送る。
【００８２】
なお、コマンド認識部４４は、音声認識に際して、まず、音声入力部２４から取得した音声データＤＧＤＴを文字列（以下、「認識対象語句」と記載することがある）に変換し、辞書テーブルＴＢ３０に記録されている音声コマンドＳＷの中から、認識対象語句と一致するものを抽出する。そして、認識対象語句と一致する音声コマンドＳＷが抽出されると、その音声コマンドＳＷに対応付けられたリンク情報ＫＷを読み出す。
【００８３】
一括登録部４５は、特定の操作画面ＧＭに遷移させるための音声コマンドを辞書テーブルＴＢに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび特定の操作画面ＧＭへのリンク情報ＫＷを、音声認識ライブラリ４１に記憶されている全ての辞書テーブルＴＢに追加登録するための処理（コマンド登録処理）を行う。
【００８４】
次に、コマンド登録処理について、ユーザの操作手順とともに説明する。
【００８５】
コマンド登録処理は、ユーザによるお気に入り画面登録操作によって開始される。
【００８６】
ユーザは、まず、お気に入り画面を決定する。第１実施形態では、縮小画面ＧＭ３３およびページ集約画面ＧＭ３４がユーザのお気に入り画面である。縮小画面ＧＭ３３およびページ集約画面ＧＭ３４へ遷移するための例が図１２に示されている。
【００８７】
図１２において、例えば基本設定画面ＧＭ３０において、倍率キー（ボタン）ＢＴＮ１０が押下された場合、または音声により倍率キーＢＴＮ１０に対応する音声コマンドが入力された場合に、倍率画面ＧＭ３１に遷移する。そして、倍率画面ＧＭ３１において、縮小キーＢＴＮ１２が押下された場合、または音声により縮小キーＢＴＮ１２に対応する音声コマンドが入力された場合は、縮小画面ＧＭ３３に遷移する。
【００８８】
また、基本設定画面ＧＭ３０において、画面／ページ集約キーＢＴＮ１１が押下された場合、または音声により画面／ページ集約キーＢＴＮ１１に対応する音声コマンドが入力された場合は、画面／ページ集約画面ＧＭ３２に遷移する。そして、画面／ページ集約画面ＧＭ３２において、ページ集約キーＢＴＮ１３が押下された場合または音声によりページ集約キーＢＴＮ１３に対応する音声コマンドが入力された場合は、ページ集約画面ＧＭ３４に遷移する。
【００８９】
お気に入り画面登録操作としては、２つの操作方法がある。１つは、お気に入り画面へ遷移するための操作キー（お気に入り画面の１つ前の操作画面に表示される操作キー）を指定し、指定した操作キーに任意の語句からなる音声コマンドを登録する方法である。
【００９０】
この方法を採用する場合は、ユーザは、まず操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す。これにより、画像形成装置１では、特定の操作画面に遷移させるための音声コマンドを辞書テーブルＴＢに追加登録する旨の指令があったと判断し、音声登録モードに移行する。
【００９１】
ユーザは、お気に入り画面へ遷移するための操作キーが表示された操作画面ＧＭを表示させるための操作を行う。例えば、お気に入り画面が「縮小画面ＧＭ３３」である場合は、その１つ前の画面である倍率画面ＧＭ３１を表示させる。そして、倍率画面ＧＭ３１において、縮小画面ＧＭ３３へ遷移するための操作キーつまり縮小キーＢＴＮ１２を押下して指定する。お気に入り画面が「ページ集約画面ＧＭ３４」である場合は、画面／ページ集約画面ＧＭ３２を表示させ、ページ集約画面ＧＭ３４に遷移するための操作キーつまりページ集約キーＢＴＮ１３を押下して指定する。
【００９２】
操作キーが指定されると、操作画面制御部ＳＳは、ユーザに対し、登録する音声コマンドを発声するためのメッセージ（発声メッセージ）を示す画面を表示する。または、画像形成装置１に備えられているスピーカー（図示せず）から予め登録されている音声ガイドを流して、ユーザに音声を発声するよう促す。
【００９３】
ユーザは、発声メッセージが示された画面が表示されまたは音声ガイドが流れると、音声認識ボタンＫＢを今度は軽く押して、音声を発声し入力する。
【００９４】
音声が入力されると、声紋判別部４３は声紋情報を生成する。声紋情報は、例えば音声ＩＤ情報ＶＤとして一括登録部４５に送られる。
【００９５】
また、声紋判別部４３による処理にともなって、コマンド認識部４４では、入力された音声に対応する音声コマンドＳＷを生成する。生成した音声コマンドＳＷは、一括登録部４５に送られる。
【００９６】
一括登録部４５では、音声コマンドＳＷおよび音声ＩＤ情報ＶＤを取得すると、音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに登録するための処理を実行する。このとき、音声コマンドＳＷおよび音声ＩＤ情報ＶＤの他、ユーザが指定した操作キーに対応するリンク情報ＫＷも登録される。
【００９７】
リンク情報ＫＷについては、ユーザが指定した操作キーに対応付けられているリンク情報ＫＷを、例えば、その操作キーが表示されている操作画面に対応付けられている辞書テーブルＴＢから検索する。例えば、ユーザが縮小キーＢＴＮ１２を指定した場合は、縮小キーＢＴＮ１２が表示されている倍率画面ＧＭ３１に対応付けられている辞書テーブルＴＢ３１（図９参照）から、当該キーに対応付けられているリンク情報ＫＷである「Ｙ３３」を検索し抽出する（図７参照）。
【００９８】
そして、音声コマンドＳＷ、音声ＩＤ情報ＶＤ、抽出したリンク情報ＫＷ、およびユーザが指定した操作キーの操作項目名を、お気に入り画面についての新たなコマンド情報ＤＴとして音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに追加登録する（図１３参照）。
【００９９】
お気に入り画面登録操作の２つ目の操作方法は、お気に入り画面として登録したい画面を表示させて操作する方法である。
【０１００】
この方法を採用する場合は、ユーザは、お気に入り画面として登録したい操作画面を表示させ、その操作画面の画面名称部分を押下する。例えば、縮小画面ＧＭ３３の場合は、図１２に示す縮小画面ＧＭ３３の画面名称部分ＭＳを押下する。
【０１０１】
すると、操作画面制御部ＳＳでは、画面名称部分ＭＳが押下された操作画面（お気に入り画面）の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中からお気に入り画面に遷移するための操作キーを検索し、上述の１つ目の操作方法のように、ユーザによってお気に入り画面の１つ前の操作画面に表示される操作キーが指定された場合の処理と同様の処理を実行する。
【０１０２】
いずれの操作方法を採用するかは、ユーザが選択することができる。
【０１０３】
図６に戻って、総合制御部４６は、画像処理部４７を制御するとともに、操作画面制御部ＳＳの全体をも制御する。また、総合制御部４６は、コマンド認識部４４から認識結果信号ＳＮ３を受け取ると、認識結果信号ＳＮ３が操作画面を遷移するための信号であるのかまたは画像形成装置１が備えている機能に関する設定を示す信号であるのかを判別する。その判別の結果に応じて、各部に制御信号を送る。認識結果信号ＳＮ３は、操作画面を遷移するための信号であるので、認識結果信号ＳＮ３を受け取ると、画面表示制御部４２に対して現在表示されている操作画面を遷移すべき旨および遷移先の操作画面のリンク情報ＫＷを示す制御信号ＳＮ１を送る。
【０１０４】
画像処理部４７は、総合制御部４６からの制御信号に応じて、スキャナ部１０ｇが読み取った画像データまたは他の装置から送信されてきた画像データなどに対し、種々の画像処理を施す。
【０１０５】
次に、コマンド登録処理を実行する場合における画像形成装置１全体の処理について、図１４のフローチャートを参照して説明する。
【０１０６】
ユーザは、操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す（＃７１）。これにより、画像形成装置１では、お気に入り画面を登録するための処理（コマンド登録処理）が開始される（＃７２）。
【０１０７】
次に、ユーザは、操作キーを指定することによってお気に入り画面を登録するための処理を実行させるか、お気に入り画面を表示させて処理を実行させるかを選択する。操作キーを指定することによってお気に入り画面を登録するための処理を実行させる場合（＃７３で１が選択された場合）は、ユーザはお気に入り画面の１つ前の操作画面を表示させ、お気に入り画面に遷移するための操作キーを押下して指定する（＃７４）。
【０１０８】
お気に入り画面として登録したい画面を表示させて処理を実行させる場合（＃７３で２が選択された場合）は、ユーザは、お気に入り画面として登録したい操作画面を表示させ（＃８２）、その操作画面の画面名称部分ＭＳを押下する（＃８３）。
【０１０９】
操作画面制御部ＳＳは、お気に入り画面の画面名称部分ＭＳが押下された場合は、お気に入り画面の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中からお気に入り画面に遷移するための操作キーを抽出し、抽出した操作キーが指定されたものとして、処理を実行する。
【０１１０】
操作キーが指定されると、画像形成装置１は、発声メッセージを表示しまたは音声出力し、ユーザの発声を促す（＃７５）。
【０１１１】
ユーザは、音声認識ボタンＫＢを軽く押して（＃７６）、登録したい音声コマンドを発声し入力する（＃７７）。音声コマンドが入力されると、音声ＩＤが生成され保存される（＃７８）。また、音声認識によって音声コマンドＳＷが生成される（＃７９、＃８０）。そして、音声コマンドＳＷ、音声ＩＤ、リンク情報ＫＷ、および操作項目名を、お気に入り画面についての新たなコマンド情報ＤＴとして、すべての辞書テーブルＴＢに追加登録する（＃８１）。
【０１１２】
次に、コマンド認識処理における画像形成装置１全体の処理について、図１５のフローチャートを参照して説明する。
【０１１３】
ユーザは、操作パネル１０ｆに設けられている音声認識ボタンＫＢを（軽く）押す（＃９１）。これにより、画像形成装置１では、コマンド認識処理を開始する指令があったと判断する（＃９２）。ユーザは、音声を入力する（＃９３）。
【０１１４】
画像形成装置１は、入力された音声に対する音声認識処理を実行し、音声コマンドＳＷを生成する（＃９４）。そして、生成された音声コマンドＳＷを、辞書テーブルＴＢに記憶されている音声コマンドＳＷと照合する（＃９６）。また、入力された音声に対して声紋情報を生成する（＃９５）。
【０１１５】
辞書テーブルＴＢにおいて一致する音声コマンドＳＷが複数あった場合には（＃９７でＹｅｓ）、声紋情報を参照し、声紋情報が一致する音声コマンドＳＷを特定し、１つのリンク情報ＫＷを抽出する（＃９８）。そして、操作画面選択テーブルＴＢ５０を参照して、入力された音声に対応した操作画面ＧＭを抽出して表示する（＃９９）。なお、ステップ＃９９においては、入力された音声が辞書テーブルＴＢに音声コマンドＳＷとして記録されていなかった場合には、入力された音声に対応した処理を行う。
【０１１６】
このように、第１実施形態では、お気に入り画面についてのコマンド情報ＤＴが音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに一括して追加登録されるので、ユーザは、どの操作画面からでもお気に入り画面を遷移させるための音声コマンドを発声することによって、お気に入り画面を表示させることができる。
【０１１７】
したがって、ユーザにとっては、画面操作の簡略化および迅速化を図ることができる。例えば、図１６に示すように操作画面の階層が深くかつ複雑になっている場合でも、お気に入り画面を容易に表示させることができる。
【０１１８】
また、追加登録されるお気に入り画面についてのコマンド情報ＤＴには音声ＩＤも含まれるので、複数のユーザによって同一の音声コマンドが登録されていても、その音声コマンドを登録したユーザを区別することができる。
〔お気に入り画面登録操作の変形例〕
第１実施形態では、ユーザが設定操作を行う前の操作画面をお気に入り画面として登録する場合を例に説明したが、ユーザは設定操作の途中の状態の操作画面をお気に入り画面と同様に登録することもできる。
【０１１９】
例えば、図１２に示す縮小画面ＧＭ３３は、コピーの倍率を９３．０％とする設定を行った状態を示す。また、同図に示すページ集約画面ＧＭ３４は、印刷の出力形態をツーインワン（分割）とする設定を行った状態を示す。この状態で操作画面における設定操作を一時中断する場合に、ユーザは設定操作の途中の縮小画面ＧＭ３３またはページ集約画面ＧＮ３４について設定状態を保持しつつ、お気に入り画面のように登録するための操作を行う。これにより、いずれの操作画面からでも、設定操作の途中の操作画面を呼び出して続きの設定操作を再開することができる。また、ユーザが設定操作を再開する場合に、図１７に示すように、各操作画面での設定操作の状態を最上位の階層の操作画面（本実施形態では基本設定画面ＧＭ３０）に表示させることもできる。音声ガイドで報知してもよい。
【０１２０】
次に、設定操作の途中の状態の操作画面（以下、「設定途中画面」と記載する）をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理について、フローチャートを参照して説明する。
【０１２１】
図１８は設定操作の途中の状態の操作画面をお気に入り画面と同様に登録する場合における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１２２】
図１８において、ユーザは、各操作画面において所定の設定操作を行う（＃１１１）。このとき、設定操作を一時中断する場合に、操作パネル１０ｆに設けられている音声認識ボタンＫＢを長く押す（＃１１２）。ここで、ユーザは、設定状態を保持せずに、表示されている操作画面を第１実施形態で説明したようにお気に入り画面として登録する場合は（＃１１３で１が選択された場合）、操作キーを指定するかまたはお気に入り画面の画面名称部分ＭＳを押下するなどして、お気に入り画面登録操作を開始させる（＃１１４）。
【０１２３】
現在表示されている設定途中画面の設定状態を保持させたい場合は（＃１１３で２が選択された場合）、ユーザは、設定途中画面の設定状態をメモリ１０ｂ（ハードディスク１０ｄ）などに保存するための操作を行う。すると、画像形成装置１は、設定途中画面についてお気に入り画面登録操作が開始されたものとして、上述の第１実施形態で説明したコマンド登録処理と同様の処理を実行する。この場合のコマンド登録処理は、お気に入り画面の画面名称部分ＭＳが押下された場合の処理と同一である。つまり、画像形成装置１は、設定途中画面の１つ前の操作画面を操作画面記憶部４０から検索する。そして、検索した操作画面に表示される操作キーの中から設定途中画面に遷移するための操作キーを検索し、検索した操作キーが押下され指定されたものとして、第１実施形態におけるコマンド登録処理と同様の処理（図１４の＃７５〜＃８０）を実行する（＃１１６〜＃１２０）。そして、コマンド語句情報ＳＴおよび抽出したリンク情報ＫＷを、お気に入り画面についての新たなコマンド情報ＤＴとして音声認識ライブラリ４１に記憶されているすべての辞書テーブルＴＢに追加登録する（＃１２１）。なお、コマンド語句情報ＳＴおよび抽出したリンク情報ＫＷ以外に音声ＩＤまたは操作キーの操作項目名なども登録するようにしてもよい。
〔第２実施形態〕
次に、第２実施形態について、図１９〜図２１を参照して説明する。なお、第２実施形態については、第１実施形態におけるネットワークシステムＳＹＳおよび画像形成装置１と異なる部分についてのみ説明する。また、図１９〜図２１において、第１実施形態と同一の構成要素には同一の符号を付してその詳細な説明を適宜省略する。
【０１２４】
図１９は第２実施形態の画像形成装置１における操作画面制御部ＳＳＢの機能的な構成の例を示す図、図２０は専用辞書テーブルＴＢ６０の例を示す図、図２１は第２実施形態における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１２５】
第１実施形態では、お気に入り画面についての新たなコマンド情報ＤＴを、音声認識ライブラリ４１に記憶されている全ての辞書テーブルＴＢ（操作画面記憶部４０に記憶されているすべての操作画面ＧＭに対応付けて設けられている辞書テーブルＴＢ）に追加登録するようにしたが、それに代えて、操作画面ＧＭに対応付けて設けられている辞書テーブルＴＢとは別の専用辞書テーブルＴＢ６０（図１９参照）に、お気に入り画面についての新たなコマンド情報ＤＴを追加登録するようにしてもよい。
【０１２６】
図１９において、音声認識ライブラリ４１Ｂは、辞書テーブルＴＢ（ＴＢ３０、３１、３２、…）および専用辞書テーブルＴＢ６０を記憶し管理している。
【０１２７】
登録部４５Ｂは、音声ＩＤ情報ＶＤ、音声コマンドＳＷ、およびリンク情報ＫＷを取得すると、それらをお気に入り画面についての新たなコマンド情報ＤＴ（コマンド情報ＤＴ６０）として、音声認識ライブラリ４１Ｂに記憶されている専用辞書テーブルＴＢ６０（図２０参照）に登録する。
【０１２８】
コマンド認識部４４Ｂは、基本的には第１実施形態のコマンド認識処理と同様の処理を実行する。第１実施形態のコマンド認識処理と異なる点は、コマンド認識処理を実行する際、まず、図２０に示す専用辞書テーブルＴＢ６０に記憶されているコマンド情報ＤＴ６０を参照して、入力された音声コマンドと一致する音声コマンドＳＷを検索する。そして、入力された音声コマンドと一致する音声コマンドＳＷが検索されなかった場合に、現在表示されている操作画面に対応付けられている辞書テーブルＴＢに記憶されているコマンド情報ＤＴを参照する。
【０１２９】
専用辞書テーブルＴＢ６０にはお気に入り画面についての新たなコマンド情報ＤＴ（コマンド情報ＤＴ６０）しか登録されない。したがって、お気に入り画面へ遷移するための音声コマンドが入力された場合は、各操作画面についての辞書テーブルＴＢを参照するよりも短時間で入力された音声コマンドと一致する音声コマンドＳＷを検索することができ、コマンド認識処理をより早く完了させることができる。
【０１３０】
図２０は第２実施形態における画像形成装置１全体の処理の流れの例を説明するためのフローチャートである。
【０１３１】
次に、第２実施形態における画像形成装置１全体の処理について、図２０のフローチャートを参照して説明する。
【０１３２】
ステップ＃１３１〜１３４の処理は、第１実施形態の図１６のステップ＃９１〜９４と同じである。画像形成装置１は、入力された音声コマンドに対して音声認識処理を実行し、専用辞書テーブルＴＢ６０に記憶されているコマンド情報ＤＴ６０の音声コマンドＳＷと照合する（＃１３６）。
【０１３３】
専用辞書テーブル６０から認識対象語句と一致する音声コマンドＳＷを検索することができなかった場合は、次に、現在表示されている操作画面ＧＭに対応する辞書テーブルＴＢを参照する。
【０１３４】
ステップ＃１３５、１３７〜１３９については、図１６のステップ＃９５、９７〜９９と同じである。
【０１３５】
なお、第２の実施形態では、専門辞書テーブルＴＢ６０または辞書テーブルＴＢに登録されている音声コマンドＳＷのうち、入力された音声コマンドと一致する音声コマンドＳＷを音声認識処理の結果として採用する（＃１３８）。
【０１３６】
上述の実施形態において、操作画面制御部ＳＳは本発明における「操作画面制御装置」に相当し、音声入力部２４は本発明における「音声入力手段」に相当する。音声認識ライブラリ４１、声紋判別部４３、およびコマンド認識部４４は、本発明の「音声認識部」に相当する。画面表示制御部４２は本発明における「画面切り替え手段」に相当し、一括登録部４５は本発明における「一括登録手段」に相当する。
【０１３７】
また、音声ＩＤ情報ＶＤは本発明における「声紋情報」に相当し、声紋判別部４３は本発明における「声紋判別部」に相当する。また、メモリ１０ｂ（ハードディスク１０ｄ）は本発明における記憶装置に相当する。
【０１３８】
その他、操作画面制御部ＳＳ、画像形成装置１、およびネットワークシステムＳＹＳの構成、機能、各データが示す内容、テーブルの内容、処理の内容または順序などは、本発明の趣旨に沿って適宜変更することができる。
【符号の説明】
【０１３９】
１ 画像形成装置
２４ 音声入力部（音声入力手段、音声認識部）
４１、４１Ｂ 音声認識ライブラリ（音声認識部）
４２ 画面表示制御部（画面切り替え手段）
４３ 声紋判別部（音声認識部、声紋判別部）
４４、４４Ｂ コマンド認識部（音声認識部）
４５ 一括登録部（一括登録手段）
４５Ｂ 登録部
ＤＴ３０、３１、３２、６０ コマンド情報
ＫＷ リンク情報（キー情報）
Ｙ２１〜Ｙ２７ キー情報
ＳＳ，ＳＳＢ 操作画面制御部（操作画面制御装置）
ＳＷ 音声コマンド
ＴＢ３０、３１、３２ 辞書テーブル
ＴＢ５０ 操作画面選択テーブル
ＴＢ６０ 専用辞書テーブル
ＶＤ 音声ＩＤ情報（声紋情報）
【特許請求の範囲】
【請求項１】
操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置であって、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、
を有することを特徴とする操作画面制御装置。
【請求項２】
前記辞書テーブルには、前記リンク情報として、その操作がなされたときに前記特定の操作画面に遷移するように設定されたキーについてのキー情報が登録されている、
請求項１記載の操作画面制御装置。
【請求項３】
前記操作画面に表示されるキーについてのキー情報と、当該キーの操作がなされたときに遷移する遷移先の操作画面の操作画面情報とを対応付けて記憶する操作画面選択テーブルが設けられており、
前記辞書テーブルには、前記リンク情報として、いずれかの前記操作画面に表示されるキーについてのキー情報が登録されており、
前記画面切り替え手段は、前記辞書テーブルを参照することによって得られた前記キー情報を用い、前記操作画面選択テーブルを参照することにより、入力された音声コマンドに対応する操作画面に遷移させる、
請求項１記載の操作画面制御装置。
【請求項４】
前記辞書テーブルには、１つの前記リンク情報に対応して複数の前記音声コマンドを登録可能である、
請求項２または３記載の操作画面制御装置。
【請求項５】
前記音声認識部は、ユーザの声紋を判別して声紋情報を生成する声紋判別部を有しており、
前記辞書テーブルには、前記音声コマンドとともに前記声紋情報が登録されており、
前記画面切り替え手段は、前記辞書テーブルに登録された音声コマンドおよび声紋情報が一致するリンク情報を抽出し、抽出されたリンク情報に基づいて前記操作画面を遷移させる、
請求項４記載の操作画面制御装置。
【請求項６】
前記一括登録手段は、前記操作画面に対応して設けられたすべての前記辞書テーブルを対象として追加登録する、
請求項１ないし５のいずれかに記載の操作画面制御装置。
【請求項７】
前記一括登録手段は、追加登録の処理過程において処理の中断の指令があったときに、そのときの状態を記憶装置に記憶して保持する、
請求項１ないし６のいずれかに記載の操作画面制御装置。
【請求項８】
操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置であって、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
追加登録のためにユーザの音声によって生成された音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する専用辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、最初に前記専用辞書テーブルを参照することにより、また前記専用辞書テーブルに当該音声コマンドが登録されていない場合には前記音声コマンドが生成されたときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
を有することを特徴とする操作画面制御装置。
【請求項９】
請求項１ないし８のいずれかに記載の操作画面制御装置を備えた画像形成装置。
【請求項１０】
操作パネルの表示面に表示される操作画面を音声によって操作することが可能な画像形成装置に設けられたコンピュータのためのコンピュータプログラムであって、
前記コンピュータにより実行されたときに、前記画像形成装置に、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、
を実現させることを特徴とするコンピュータプログラム。
【請求項１】
操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置であって、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、
を有することを特徴とする操作画面制御装置。
【請求項２】
前記辞書テーブルには、前記リンク情報として、その操作がなされたときに前記特定の操作画面に遷移するように設定されたキーについてのキー情報が登録されている、
請求項１記載の操作画面制御装置。
【請求項３】
前記操作画面に表示されるキーについてのキー情報と、当該キーの操作がなされたときに遷移する遷移先の操作画面の操作画面情報とを対応付けて記憶する操作画面選択テーブルが設けられており、
前記辞書テーブルには、前記リンク情報として、いずれかの前記操作画面に表示されるキーについてのキー情報が登録されており、
前記画面切り替え手段は、前記辞書テーブルを参照することによって得られた前記キー情報を用い、前記操作画面選択テーブルを参照することにより、入力された音声コマンドに対応する操作画面に遷移させる、
請求項１記載の操作画面制御装置。
【請求項４】
前記辞書テーブルには、１つの前記リンク情報に対応して複数の前記音声コマンドを登録可能である、
請求項２または３記載の操作画面制御装置。
【請求項５】
前記音声認識部は、ユーザの声紋を判別して声紋情報を生成する声紋判別部を有しており、
前記辞書テーブルには、前記音声コマンドとともに前記声紋情報が登録されており、
前記画面切り替え手段は、前記辞書テーブルに登録された音声コマンドおよび声紋情報が一致するリンク情報を抽出し、抽出されたリンク情報に基づいて前記操作画面を遷移させる、
請求項４記載の操作画面制御装置。
【請求項６】
前記一括登録手段は、前記操作画面に対応して設けられたすべての前記辞書テーブルを対象として追加登録する、
請求項１ないし５のいずれかに記載の操作画面制御装置。
【請求項７】
前記一括登録手段は、追加登録の処理過程において処理の中断の指令があったときに、そのときの状態を記憶装置に記憶して保持する、
請求項１ないし６のいずれかに記載の操作画面制御装置。
【請求項８】
操作パネルの表示面に表示される操作画面を音声によって操作するための操作画面制御装置であって、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
追加登録のためにユーザの音声によって生成された音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する専用辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、最初に前記専用辞書テーブルを参照することにより、また前記専用辞書テーブルに当該音声コマンドが登録されていない場合には前記音声コマンドが生成されたときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
を有することを特徴とする操作画面制御装置。
【請求項９】
請求項１ないし８のいずれかに記載の操作画面制御装置を備えた画像形成装置。
【請求項１０】
操作パネルの表示面に表示される操作画面を音声によって操作することが可能な画像形成装置に設けられたコンピュータのためのコンピュータプログラムであって、
前記コンピュータにより実行されたときに、前記画像形成装置に、
ユーザに音声を入力させるための音声入力手段と、
入力された音声を認識して音声コマンドを生成する音声認識部と、
前記操作パネルの表示面に表示するために準備された複数の操作画面を記憶する操作画面記憶手段と、
前記操作画面のそれぞれに対応して設けられ、音声コマンドと各音声コマンドによって遷移すべき操作画面へのリンク情報とを対応付けて登録する辞書テーブルと、
ユーザの音声によって音声コマンドが生成されたときに、そのときに表示されている操作画面に対応した前記辞書テーブルを参照することにより、生成された音声コマンドに対応する操作画面に遷移させる画面切り替え手段と、
特定の操作画面に遷移させるための音声コマンドを前記辞書テーブルに追加登録する旨の指令があったときに、追加登録する音声コマンドおよび前記特定の操作画面へのリンク情報を、対象となる全ての前記辞書テーブルに追加登録する一括登録手段と、
を実現させることを特徴とするコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【公開番号】特開２０１０−２２４８９０（Ｐ２０１０−２２４８９０Ａ）
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願番号】特願２００９−７１７１９（Ｐ２００９−７１７１９）
【出願日】平成２１年３月２４日（２００９．３．２４）
【出願人】（３０３０００３７２）コニカミノルタビジネステクノロジーズ株式会社 (12,802)
【Ｆターム（参考）】
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願日】平成２１年３月２４日（２００９．３．２４）
【出願人】（３０３０００３７２）コニカミノルタビジネステクノロジーズ株式会社 (12,802)
【Ｆターム（参考）】
[ Back to top ]