ユーザインタフェース装置、項目設定方法およびプログラム
【課題】入力情報に対して自然な流れで設定の手順を踏むことができる操作性が良好なユーザインタフェース装置を提供する。
【解決手段】解析部１１は、入力情報を文書構成要素に解析する。表示生成部１２は、解析部１１による解析に基づいて仕上がり予想表示情報を生成する。項目選択部１３は、解析結果に基づいて処理が可能な処理項目を選択する。操作表示部１４は、予想表示情報を表示し、かつ、項目選択部１３が選択した処理項目を表示し表示した処理項目の候補から指定を受け付ける。領域生成部１５は、指定を受け付けた処理項目による処理の対象となる領域の候補を操作表示部１４に表示させる。操作表示部１４は表示した領域の候補の中から選択する入力を受け付ける。設定部１６は、先ず指定された処理項目の設定を行ってから、次に候補の領域から処理対象となる領域の指定を受け付ける。
【解決手段】解析部１１は、入力情報を文書構成要素に解析する。表示生成部１２は、解析部１１による解析に基づいて仕上がり予想表示情報を生成する。項目選択部１３は、解析結果に基づいて処理が可能な処理項目を選択する。操作表示部１４は、予想表示情報を表示し、かつ、項目選択部１３が選択した処理項目を表示し表示した処理項目の候補から指定を受け付ける。領域生成部１５は、指定を受け付けた処理項目による処理の対象となる領域の候補を操作表示部１４に表示させる。操作表示部１４は表示した領域の候補の中から選択する入力を受け付ける。設定部１６は、先ず指定された処理項目の設定を行ってから、次に候補の領域から処理対象となる領域の指定を受け付ける。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザインタフェース装置、項目設定方法およびプログラムに関し、特に、操作表示部を備えた電子機器上で画像編集を行うユーザインタフェース装置、項目設定方法およびプログラムに関する。
【背景技術】
【０００２】
従来、デジタル複合機などの画像形成装置においては、操作設定や出力する原稿の状態などを表示するタッチパネルは非常に狭く、その狭い表示面で操作の設定を行うために、操作性が決して良いと言えるものではなかった。
【０００３】
このような問題を解決するために、スキャナで画像を読み込み、文字領域、写真領域、図形領域、背景領域を分離して分離した画像領域を操作者に選択させ、希望する領域選択キーが押されると、選択された画像領域毎に、濃度やカラーバランスの調整内容を指定するための画面が表示され、指定された調整内容に応じて濃度やカラーバランスが調整されて画像形成が行われる技術が考案されていた（特許文献１）。
【０００４】
特許文献１の技術では、画像領域における調整内容の設定画面が表示されて選択メニューが表れ、表れたメニューから選択操作を行うため、利便性の高い技術だった。
【０００５】
【特許文献１】特開２００２−１１２０２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の技術においては、タッチパネルの画面で設定する点については利便性が高かったとしても、設定後の実際の出来上がり画像がどのように出力されるかは表示されないため、印刷として出来上がる配置や状態が印刷前には不明であるという問題があった。
【０００７】
また、タッチパネルの画面においては、領域を先に指定するよりもむしろ、設定項目のメニューを先に表示させて、しかる後に領域を指定するニーズが高かったが、特許文献１に記載の技術はこのようなニーズに応えることができなかった。
【０００８】
本発明は、このような問題を解決するためになされ、その目的は、入力情報に対して、操作者が自然な操作の流れの中で設定の手順を自然に踏ませることができる操作性が良好でユーザフレンドリなユーザインタフェース装置、項目設定方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００９】
上述した課題を解決し、目的を達成するために、請求項１にかかる発明のユーザインタフェース装置は、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、入力画像を文書構成要素に解析する解析手段と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目選択手段と、前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、を備える。
【００１０】
請求項２にかかる発明のユーザインタフェース装置は、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、入力画像を文書構成要素に解析する解析手段と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目表示手段と、前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、を備える。
【００１１】
請求項３にかかる発明は、請求項１または２に記載のユーザインタフェース装置において、前記処理項目指定手段は、文字情報の入力に応じて前記処理項目の指定を受け付ける。
【００１２】
請求項４にかかる発明は、請求項１または２に記載のユーザインタフェース装置において、前記領域候補指定手段は、文字情報の入力に応じて前記領域候補の指定を受け付ける。
【００１３】
請求項５にかかる発明のユーザインタフェース装置は、請求項１に記載のユーザインタフェース装置における仕上がり予想表示情報の第１の操作表示形態と請求項２に記載のユーザインタフェース装置における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替手段を備える。
【００１４】
請求項６にかかる発明は、請求項５に記載のユーザインタフェース装置において、前記切替手段は、操作者からの前記第１の操作表示形態および前記第２の操作表示形態の間で切り替え指定入力を受け付ける。
【００１５】
請求項７にかかる発明は、請求項５または６に記載のユーザインタフェース装置において、前記切替手段は、前記第１の操作表示形態および前記第２の操作表示形態を、時間によって切り替える。
【００１６】
請求項８にかかる発明は、請求項５〜７のいずれか１つに記載のユーザインタフェース装置において、前記領域候補についての情報、前記処理項目についての情報および前記切替手段による切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納する履歴手段をさらに備え、前記切替手段は、前記履歴手段が格納する前記履歴情報に基づいて前記第１の操作表示形態および前記第２の操作表示形態の間で切り替える。
【００１７】
請求項９にかかる発明は、請求項８に記載のユーザインタフェース装置において、前記処理項目表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、前記処理項目情報を選択する。
【００１８】
請求項１０にかかる発明は、請求項８または９に記載のユーザインタフェース装置において、前記領域候補表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、仕上がり予想表示における前記領域候補を、前記操作表示手段に表示させる。
【００１９】
請求項１１にかかる発明は、請求項８〜１０のいずれか１つに記載のユーザインタフェース装置において、識別情報を受け付ける識別手段をさらに備え、前記履歴手段は、前記識別手段によって受け付けられた前記識別情報に基づいて、前記履歴情報をそれぞれ格納し、前記切替手段、前記処理項目表示手段、および前記領域候補表示手段の少なくともいずれか１つは、前記履歴手段に格納された前記履歴情報を前記識別情報に基づいて使用する。
【００２０】
請求項１２にかかる発明の項目設定方法は、入力画像を文書構成要素に解析する解析工程と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択工程と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、を含む。
【００２１】
請求項１３にかかる発明の項目設定方法は、入力画像を文書構成要素に解析する解析工程と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示工程と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、を含む。
【００２２】
請求項１４にかかる発明の項目設定方法は、請求項１２に記載の項目設定方法における仕上がり予想表示情報の第１の操作表示形態と請求項１３に記載の項目設定方法における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替工程を含む。
【００２３】
請求項１５にかかる発明のプログラムは、入力画像を文書構成要素に解析する解析機能と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択機能と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、をコンピュータに実行させる。
【００２４】
請求項１６にかかる発明のプログラムは、入力画像を文書構成要素に解析する解析機能と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示機能と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、をコンピュータに実行させる。
【００２５】
請求項１７にかかる発明のプログラムは、請求項１５に記載のプログラムにおける仕上がり予想表示情報の第１の操作表示形態と請求項１６に記載のプログラムにおける仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替機能をコンピュータに実行させる。
【発明の効果】
【００２６】
請求項１，１２，１５にかかる発明によれば、入力情報を文書構成要素に解析し、解析結果に基づいて入力情報の仕上がり予想表示情報を生成し、解析結果に基づいて処理を施すことが可能な処理項目を選択し、操作表示手段において予想表示情報を表示し、かつ、選択した処理項目の情報を表示し表示した処理項目から処理項目の指定を受け付け、受け付けた処理項目によって処理対象となる領域候補を操作表示手段に表示させる、指定された処理項目、および選択入力を受け付けた領域とを設定することによって、設定結果を反映した予想表示情報を生成して操作表示手段に再び表示させる。この構成によって、先ず処理項目を表示して指定を受け付け、しかる後に受け付けられた処理項目の対象となる領域の候補を表示して指定を受け付ける形態（第１の操作表示形態）から設定することができ、自然な操作の流れの中で、処理設定の手順を踏むことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００２７】
請求項２，１３，１６にかかる発明によれば、入力情報を文書構成要素に解析し、解析結果に基づいて、仕上がり予想表示における処理項目の実行対象となる領域候補を表示させ、表示した領域候補から領域の選択入力を受け付け、選択入力を受け付けた領域で可能な処理項目を選択し、選択された処理項目の候補を表示して指定を受け付けて、操作表示手段に表示させた領域から選択を受け付けた領域、および受け付けた処理項目を設定することによって、領域の候補を表示して指定を受け付けてから指定された領域での処理項目を表示して指定を受け付ける。この構成によって、先ず領域の候補を表示して指定を受け付け、しかる後に指定された領域における処理項目を表示して指定を受け付ける形態（第２の操作表示形態）から設定することができ、自然な操作の流れの中で、処理設定の手順を踏むことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００２８】
請求項３，１４，１７にかかる発明によれば、処理項目指定手段は、文字情報の入力に応じて処理項目の指定を受け付けることによって、操作者からの手動による入力によって処置設定を行うことができる。
【００２９】
請求項４にかかる発明によれば、領域候補指定手段は、文字情報の入力に応じて領域候補の指定を受け付けることによって、操作者からの手動による入力によって処置設定を行うことができる。
【００３０】
請求項５にかかる発明によれば、第１の操作表示形態と第２の操作表示形態とを選択的に切り替える切替手段を備えることにより、第１の操作表示形態、即ち最初に処理項目の候補を表示して指定を受け付け、次に指定された処理項目の対象となる領域の候補を表示して指定を受け付ける操作表示形態と、第２の操作表示形態、即ち最初に処理を受け付ける領域の候補を表示して指定を受け付け、次に指定された領域での処理項目の候補を表示して指定を受け付ける操作表示形態との間で切り替えて、設定を行うことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００３１】
請求項６にかかる発明によれば、操作者からの第１の操作表示形態および第２の操作表示形態の間で切り替え指定入力を受け付けることによって、操作者の手動によって第１および第２の操作表示形態を切り替えることができる。
【００３２】
請求項７にかかる発明によれば、第１の操作表示形態および第２の操作表示形態を、時間によって切り替えることによって、例えば、第１の操作表示形態において操作者からの入力がない場合は、第２の操作表示形態に切り替えることができるので、よりユーザフレンドリなインタフェースとなる。
【００３３】
請求項８にかかる発明によれば、領域候補についての情報、処理項目についての情報、および切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納し、履歴情報に基づいて第１および第２の操作表示形態の間で切り替えることによって、今までの使用履歴に即した操作表示形態に切り替えることができる。
【００３４】
請求項９にかかる発明によれば、格納している履歴情報に基づいて、処理項目情報を選択するので、より使用頻度の高い処理項目を優先して表示することができる。
【００３５】
請求項１０にかかる発明によれば、格納している履歴情報に基づいて、仕上がり予想表示における領域候補を表示するので、より使用頻度の高い領域の候補を優先して表示することができる。
【００３６】
請求項１１にかかる発明によれば、識別情報を受け付け、受け付けられた識別情報に基づいて、履歴情報を格納して、第１および第２の操作表示形態の切り替え、処理項目の選択、および領域候補の表示の少なくともいずれかを識別情報に基づく履歴情報によって行うので、例えば操作者を識別して頻度の高い表示形態を優先して表示することができる。
【発明を実施するための最良の形態】
【００３７】
以下に添付図面を参照して、この発明にかかるユーザインタフェース装置、項目設定方法およびプログラムの最良な実施の形態を、実施の形態１〜５、および変形例１〜３に沿って詳細に説明する。
【００３８】
（１．実施の形態１）
（１．１．ユーザインタフェース装置の構成）
図１は、実施の形態１によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。画像形成装置はスキャナ１、画像処理部２、出力処理部３、画像出力部４、メモリ（ハードディスクドライブ（ＨＤＤ））５、およびユーザインタフェース装置１０を備える。
【００３９】
スキャナ１は、原稿画像を読み取る。画像処理部２は、読み取った原稿画像をデジタルデータに変換して画像データを生成し、ユーザインタフェース装置１０に送信する。ユーザインタフェース装置１０は、画像データを受信して表示し、各種の設定を受け付ける。出力処理部３は、ユーザインタフェース装置１０によって受け付けられた設定に基づいて入力画像データに対して出力処理を施す。また、出力処理部３は、入力画像データに対してガンマ変換など各種の画像処理を施す。画像出力部４は、出力処理部３によって施された出力処理に従って画像出力する。
【００４０】
実施の形態１によるユーザインタフェース装置１０は、解析部１１、表示生成部１２、項目選択部１３、操作表示手段である操作表示部１４、領域生成部１５、および設定部１６を備える。
【００４１】
解析部１１は、解析手段として機能するものであって、入力情報を文書構成要素に解析する。表示生成部１２は、予想情報生成手段として機能するものであって、解析部１１による解析結果に基づいて仕上がり予想表示情報を生成して操作表示部１４に出力する。また、表示生成部１２は、新予想情報生成手段としても機能するものであって、処理項目を反映した新たな仕上がり予想表示情報を生成して操作表示部１４に出力する。項目選択部１３は、処理項目選択手段として機能するものであって、解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。操作表示部１４は、表示生成部１２が生成した予想表示情報を表示する。領域生成部１５は、領域候補表示手段として機能するものであって、操作表示部１４が指定を受け付けた処理項目によって処理対象となる仕上がり予想表示における領域の候補を操作表示部１４に表示させる。設定部１６は、処理項目指定手段として機能するものであって、項目選択部１３が選択した処理項目の情報を表示し、表示した処理項目の候補から処理項目の指定を受け付ける。また、設定部１６は、領域候補指定手段としても機能するものであって、領域生成部１５が操作表示部１４に表示させた領域の候補から領域を選択する入力を受け付け、該選択入力が受け付けられた領域において、すでに指定されている処理項目の設定を行う。
【００４２】
実施の形態１によるユーザインタフェース装置１０は、画像データを入力し、先ず処理項目を表示して処理項目の指定を受け付け、次に受け付けられた処理項目の対象となる領域を表示して領域の指定を受け付ける。このような操作表示形態を、ここでは第１のインタフェースモード（第１の操作表示形態）と称する。実施の形態１によるユーザインタフェース装置は、第１のインタフェースモードを介して、入力情報に処理項目実行の設定を受け付け、受け付けられた設定を反映させて、さらに操作表示部３に表示して、処理項目の指定および領域の選択入力を受け付ける。
【００４３】
解析部１１は、入力した画像データに対して、文字画像、写真画像、図表画像、およびその他の画像のうちいずれの画像種であるかを解析する。解析部１１はまた、解析した結果に基づいて、画像データを分割する。分割は、たとえば、文章の場合は段落ごとに分割する。写真画像および図表画像の場合は、それぞれ写真画像および図表画像ごとに分割する。
【００４４】
このような分割は、例えば、文字であると判定した部分が連続した領域を判定することによって文字の集まった領域として分割することができる。また、中間調画素が連続することを検出して、写真画像の領域であることを検出し、写真画像領域を分割することができる。また、エッジ部と、濃淡の差が激しい領域であることを検出することによって、図表画像であることが検出できる。それ以外については、文字、写真、および図表画像でないものと判定し、分割処理を施す。これらは公知技術であるので詳細な説明を省略する。
【００４５】
表示生成部１２は、解析部１１による解析結果に基づいて仕上がり予想表示情報を生成する。解析部１１による解析結果によって、原稿全体のページにおける大枠が縁取られた状態で表示しても良い。また、画像データが領域ごとに縁取られた状態で表示しても良い。表示生成部１２は、このように全体領域、あるいは個々の領域ごとに分けられた状態で表示する画像データを生成して、操作表示部１４に表示させる。
【００４６】
また、表示生成部１２は、設定部１６によって設定された内容に従って、仕上がり予想表示情報を生成し、操作表示部１４に新しく生成された仕上がり予想を表示させる。
【００４７】
ここで、表示生成部１２は、最初に読み込んだ状態に対して、デフォルトの設定で、如何なる処理をも施さない状態での表示としておく。しかし、一般的に使用頻度の高い設定、例えば、左上でのホッチキス綴じの処理を施した状態での表示をデフォルト設定として表示することもできる。
【００４８】
項目選択部１３は、解析部１１による解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。解析結果によっては、例えばモノクロデータである場合はカラー設定などは不要になる。一方、スキャナ１によってスキャンされる時に、分厚い本などの原稿の場合は、原稿の縁に黒い枠のイメージが出現するので、解析部１１が黒い枠を検知した場合、「わく消去」という設定が必要となってくる。このように、項目選択部１３は、解析部１１による解析結果に基づいて設定が必要となる項目を選択し、不必要な項目を非選択とする。
【００４９】
図２は、操作表示部における入力した画像データ、および選択可能な処理項目の表示を示す模式図である。操作表示部１４の表示面２００には、読み取られた画像データによる画像２０１が表示されている。画像２０１には、読み取りデータの境界を示す外枠２０２、文字領域２０３、写真領域２０４〜２０６が表示される。
【００５０】
項目選択部１３は、解析部１１による解析結果に従って、処理項目を選択して、処理項目としてステープル２１１、パンチ２１２、綴じ代調整２１３、わく消去２１４、スタンプ２１５、およびページ番号２１６を選択し、画面の右側に表示させている。
【００５１】
また、項目選択部１３によって選択された処理項目として、出力カラー２２１、出力濃度２２２、用紙２２３、拡大／縮小２２４、片面／両面２２５、集約２２６、ソート／スタック２２７、および地肌２２８が、画面の左側に表示される。
【００５２】
操作表示部１４は、操作者からのメニューの指定、および領域の選択を含む各種の設定入力を受け付ける。操作表示部１４は、人間の指先、スタイラスペン、その他の接触入力具を介して接触することによって入力を受け付ける。操作表示部１４は、指先やペン先からの押圧により抵抗の変化を検知する抵抗膜方式、あるいはアナログ容量結合方式などの公知技術によって、表示するパネル面のそれぞれの位置における入力を検出する。以下に入力の形態として、操作表示部１４に対して接触して入力を行う接触入力（タッチ入力とも称する）を例に挙げて説明するが、必ずしもタッチ入力のみが本発明の実施の形態ではなく、マウスやキーボードを含む種々の入力方式を適用することができる。
【００５３】
図３は、操作表示部において、処理項目が選択された場合の表示を説明する模式図である。図４は、処理項目と設定可能領域との対応定義テーブルの模式図である。今、操作者によって操作表示部１４において表示されている処理項目のうち、パンチ穴２１２が接触入力により選択されたとする。
【００５４】
操作表示部１４が、パンチ穴２１２からの接触入力を検知すると、表示生成部１２は、「パンチ穴」に対応して設定できるパンチ穴の領域を、図４に示した対応定義テーブルから読み出して、設定できる領域３０２および３０３を、操作表示部１４に表示する。パンチ穴が可能な領域３０２および３０３を、読み取った全体の画像３０１において表示する形態は、互いに重畳する形態でも良く、上書きして表示する形態でも良い。あるいは、可能な領域の色を変化させる、点滅させる、あるいはそれ以外をダークアウトさせるなどの表現形態を適用することができる。
【００５５】
操作者は、図３に示されたパンチ穴領域３０３に接触することによって選択入力を行う。操作表示部１４は、パンチ穴２１２からの接触入力を受け付け、設定部１６は、受け付けた領域においてパンチ穴処理を施す設定を行う。
【００５６】
表示生成部１２は、設定部１６によって設定された内容に従って、さらに、操作表示部１４において表示する仕上がり予想情報を生成して操作表示部１４において表示させる。この、新しく表示された仕上がり予想画面から、修正などの設定入力を受け付ける。受け付けた設定は再び反映されて表示され、受け付けない場合は、印刷実行を受け付ける。
【００５７】
設定部１６が設定した設定情報は、印刷実行が受け付けられた場合、出力処理部３に送信され、画像出力部４は、出力処理部３によって出力処理を施された出力情報に従って画像出力する。
【００５８】
こうして、ユーザインタフェース装置１０は、画像データを入力し、最初に処理項目を表示して処理項目の指定を受け付け、次に受け付けられた処理項目の対象となる領域を表示して領域の指定を受け付ける第１のインタフェースモードによって操作者からの各種の処理項目の設定を受け付けることができる。
【００５９】
（１．２．ユーザインタフェース装置による設定手順）
図５は、実施の形態１によるユーザインタフェース装置による設定手順を説明するフローチャートである。ここでは、スキャナ１が原稿を読み込んで入力情報を取得するものとして説明するが、ネットワークを介し、あるいは記録媒体を介して文書情報を入力する構成も可能である。
【００６０】
解析部１１は、入力情報を文書構成要素に解析する。解析には、ヒストグラムの変化、エッジ部の検出、文字認識など公知の技術を使うことができる（ステップＳ１０１）。
【００６１】
表示生成部１２は、解析部１１の解析結果に基づいて操作表示部１４に仕上がり予想画面を表示させる。仕上がり予想画面は、図２に示したように、原稿画像の中で、用紙と画像データ部分を枠で縁取ることによって、領域を見易いものとする（ステップＳ１０２）。
【００６２】
項目選択部１３は、解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。画像データによっては、設定が不可能な処理項目もあるため、このような表示することが無意味な項目を排除して、操作上可能な項目を選択する。例えば、モノクロデータに対してカラー設定は意味がないので、カラー設定の項目は排除する。また、所定値よりも大きな余白値を検知した場合は、優先的にパンチ穴や綴じ代を処理項目の候補として選択する（ステップＳ１０３）。
【００６３】
操作表示部１４は、項目選択部１３で選択された処理項目の情報を表示する。表示例は、図２で示されたステープル２１１〜ページ番号２１６、および出力カラー２２１〜地肌２２８の設定項目である（ステップＳ１０４）。
【００６４】
操作表示部１４は、操作表示部１４に表示した処理項目から、操作者による指定入力を受け付ける。ここで、指定入力は接触入力であることが好ましいが、それに限らずマウス・キーボードの形式であっても良い（ステップＳ１０５）。
【００６５】
操作表示部１４が、指定入力を受け付けた場合（ステップＳ１０５のＹｅｓ）、領域生成部１５は、項目指定を受け付けた処理項目によって処理対象となる仕上がり予想表示における領域の候補を、操作表示部１４に表示させる。例えば図４に示した対応テーブルによって、パンチ穴が選択された場合、パンチ穴を設定すべき領域としては、（４０，０）および（２００，４０）で定義される領域３０２と、（０，４０）および（４０，２７０）で定義される領域３０３とが、図３に示したように候補の領域として対応付けられて表示される（ステップＳ１０６）。
【００６６】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０５のＮｏ）、そのま
ま終了して、例えば印刷の実行に移行する。
【００６７】
操作表示部１４は、表示された領域３０２および３０３の候補の中から、領域を選択する入力を受け付けたか否かを検知する（ステップＳ１０７）。選択入力を検知した場合、例えば領域３０３が選択された入力を検知した場合（ステップＳ１０７のＹｅｓ）、設定部１６は、ステップＳ１０５において指定を受け付けた処理項目、およびステップＳ１０７において操作表示部１４が選択入力を受け付けた領域を設定する（ステップＳ１０８）。
【００６８】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０７のＮｏ）、そのまま終了して、例えば印刷の実行に移行する。
【００６９】
表示生成部は、設定部１６による設定結果に基づいて操作表示部１４において入力情報の仕上がり予想情報を生成して操作表示部１４に表示させる（ステップＳ１０９）。そして、再び項目選択部１３が項目を選択するＳステップ１０３に移行してステップＳ１０３以降を繰り返す。これによって、調整の試行を繰り返すことができる。
【００７０】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０５のＮｏ、およびステップＳ１０７のＮｏ）は、そのまま終了して、例えば印刷の実行に移行する。
【００７１】
この手順によって、先ず処理項目を表示して指定を受け付け、しかる後に指定を受け付けた処理項目の対象となる領域の候補を表示し、処理を施す領域の指定を受け付けるという第１のインタフェースモードによって、入力情報に対して処理項目実行の設定を受け付ける。
【００７２】
（１．３．効果）
このように、実施の形態１によるユーザインタフェース装置１０によると、最初に設定すべきメニューを表示し、このメニューの中から操作者は処理項目を選択した場合、選択された項目によって処理可能な領域が表示されて操作者は次に、処理する領域を指定するという自然な操作の流れの中で、処理設定の手順を踏ませるように導くことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００７３】
（変形例１）
ここで、操作表示部１４は、操作者が処理項目を指定する指定入力を行った場合、指定された処理項目を受け付ける構成とすることができる。例えば、アルファベットを入力できる画面（不図示）を表示して文字情報の入力を受け付け、受け付けた処理内容に対応する処理項目を、項目選択部１３は選択し、選択された処理内容を操作表示部１４は表示して選択入力を受け付ける。
【００７４】
また、処理を施す領域についても、操作者は、操作表示部１４から数字情報を入力し、領域生成部１５は入力された数字情報によって、領域情報を生成して操作表示部１４におて表示することが望ましい。
【００７５】
このように構成することによって、操作者が手動で処理項目および領域情報を入力することができ、より詳細に処理内容および処理対象の領域を設定することができる。
【００７６】
（２．実施の形態２）
実施の形態２によるユーザインタフェース装置が実施の形態１と異なる点は、入力情報に対して、先ず領域生成部１５は、解析結果に基づいて表示生成部１２が生成する仕上がり予想表示において、処理項目の実行対象となる領域の候補を操作表示部１４に表示させ、操作表示部１４は表示した領域の候補から操作者による領域を選択する選択入力を受け付け、項目選択部１３は選択入力を受け付けた領域において処理可能な処理項目の候補を選択し、操作表示部１４は選択された処理項目の候補を表示して処理項目の指定を受け付けることである。
【００７７】
このようにして操作表示部１４は先ず候補となる領域を表示して次に領域において可能な処理項目を表示して受け付け、設定部１６は操作表示部１４が受け付けた領域および処理項目を設定する。ここで、実施の形態２によるユーザインタフェース装置２０（不図示）は、その機能的ブロック図が実施の形態１による場合と同じであるので、図示を省略する。
【００７８】
実施の形態２によるユーザインタフェース装置２０は、最初に領域を表示して領域の指定を受け付け、次に受け付けられた領域で処理可能な処理項目を表示して処理項目の指定を受け付ける。このような表示形態をここでは、第２のインタフェースモード（第２の操作表示形態）と称する。
【００７９】
図６は、実施の形態２によるユーザインタフェース装置によって表示される画面の模式図である。図７は、領域が選択されることによって処理可能な項目が表示されることを説明する図である。図８は、表示された処理項目の候補から項目が選択された場合を説明する図である。図９は、実施の形態２によるユーザインタフェース装置による設定手順を説明するフローチャートである。図６〜９を参照しながら、実施の形態２によるユーザインタフェース装置の設定手順を説明する。
【００８０】
スキャナ１によって読み込まれた原稿画像６０１は、解析部１１による解析結果に基づいて、表示生成部１２が仕上がり予想を表示させる（ステップＳ２０１）。領域生成部１５は、また、解析結果に基づいて、設定可能な処理項目の対象となる領域を表示する領域情報を生成する。そして、生成した領域情報によって、操作表示部１４に処理項目の対象となる領域を表示する。図６では、操作表示部１４の画面６００において、処理項目の対象となる領域６０２〜６１０が表示されている（ステップＳ２０２）。
【００８１】
これらの領域６０２〜６１０は、接触入力による選択を受け付ける（ステップＳ２０３）。ここで今、領域６０６が選択されたとする（ステップＳ２０３のＹｅｓ）。そうすると、項目選択部１３は、領域６０６に対応して設定可能な項目対応定義テーブルから選択し（ステップＳ２０４）、操作表示部１４は、選択された処理項目を画面７００に表示させる（図７）。領域６０６に対応して可能な処理項目は、図７に示されているように、とじしろ調整７１１、わく消去７１２、およびスタンプ７１３の処理項目が表示される。
【００８２】
これらの処理項目は、例えば図４に示した対応定義テーブルによって対応付けて選択できる。処理項目は、ここでは仕上がり表示の右側に表示されている。ここで、対応しない項目、例えばステープル処理などについては、グレーアウトで表示しても良く、全く表示を消しておくこともできる（ステップＳ２０５）。
【００８３】
今、ここで操作表示部１４において表示されている項目のうち、綴じ代調整７１１が選択入力を受け付けると（ステップＳ２０６のＹｅｓ）、領域生成部１５は、操作表示部１４において項目による仕上がり情報を生成して表示させる。操作表示部１４において表示する画面は、図８に示したように変化する。この場合、選択された綴じ代調整８１１を強調表示しても良く、あるいは他の表示を消すことによって選択されたことを表示しても良い。
【００８４】
綴じ代調整８１２の選択入力を受け付けたことによって今度は、また領域生成部１５が設定すべき領域を表示する（図８）。表示生成部１２は、操作表示部１４の画面８０２が上下左右に移動設定するためのアイコン８０３を生成して、操作表示部１４に表示し、該アイコンを介して上下左右への移動および決定の入力を受け付ける。
【００８５】
設定部１６は、このようにして領域の選択を受け付け、受け付けられた領域において処理可能な処理項目の候補を提示し、候補の中から選択の指定を受け付ける（ステップＳ２０７）。
【００８６】
このように、実施の形態２によるユーザインタフェース装置２０によると、最初に処理設定が可能な領域を表示しておき、操作者が領域を指定すると該領域において設定できるメニューを表示し、このメニューの中から操作者は処理項目を選択することができるので、処理すべき領域を最初に指定し、次にその領域での処理項目を設定するという自然な操作の流れの中で、処理設定の手順を踏ませるように導くことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００８７】
（３．実施の形態３）
図１０は、実施の形態３によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【００８８】
実施の形態３によるユーザインタフェース装置３０が、実施の形態１および２と異なる点は、すでに説明した第１のユーザインタフェースモード（第１の操作表示形態）および第２のユーザインタフェースモード（第２の操作表示形態）の間で操作表示の形態を切り替える切替部３１を、さらに備え、切替部３１によって切り替えられる操作表示形態で、操作表示部１４において表示することである。
【００８９】
切替部３１は、操作者からの第１のユーザインタフェースモードおよび第２のユーザインタフェースモードの間で切り替え指定入力を受け付ける構成とすることが望ましい。切替部３１は、操作表示部１４に表示されるアイコン、あるいは選択メニューの形態（不図示）で画面上に表示して配設されるように構成することができる。
【００９０】
この構成によって、第１のユーザインタフェースモード、即ち最初に処理項目の候補を表示して指定を受け付け、次に指定された処理項目の対象となる領域の候補を表示して指定を受け付ける操作表示形態と、第２のユーザインタフェースモード、即ち最初に処理を受け付ける領域の候補を表示して指定を受け付け、次に指定された領域での処理項目の候補を表示して指定を受け付ける操作表示形態との間で切り替えて、設定を行うことができる。
【００９１】
このように実施の形態３によるユーザインタフェース装置は、第１のユーザインタフェースモードで設定することも、また第２のユーザインタフェースモードで設定することも可能であるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００９２】
（変形例２）
ここでユーザインタフェース装置３０は、時間を計測する計時部３２を備え、切替部３１は、第１のインタフェースモードと第２のインタフェースモードとの間での操作表示形態を、計時部３２の時間計測によって切り替えるものとする。例えば、１０秒間おきに第１および第２のインタフェースモードによる表示を切り替える。
【００９３】
あるいは、第１のインタフェースモードで１０秒間継続して表示し、その間に、設定入力を受け付けない場合には、第２のインタフェースモードに切り替えて表示する。しかし、第１のインタフェースモードにおいて１０秒以内に設定入力を受け付けた場合は、そのまま第１のインタフェースモードによる表示を継続する。
【００９４】
このように構成することによって、操作者が一定時間設定入力を行わない場合は、他のインタフェースモードに切り替えるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００９５】
（４．実施の形態４）
図１１は、実施の形態４によるユーザインタフェース装置の機能的ブロック図である。ユーザインタフェース装置４０が、実施の形態３と異なる点は、履歴部４１をさらに備えることである。
【００９６】
履歴部４１は、設定部１６が設定した領域についての情報、処理項目についての情報、および切替部３１による切り替えについての情報の少なくともいずれかの情報を履歴情報として格納する。
【００９７】
ここで切替部３１は、履歴部４１が格納する履歴情報に基づいて第１および第２のユーザインタフェースモードの間で切り替える。この構成によって、ユーザインタフェース装置が第１のユーザインタフェースモードか、あるいは第２のユーザインタフェースモードかいずれの表示形態で表示される可能性が高いかを履歴情報に基づいて判定して切り替えて表示するので、操作者の所望の操作表示形態で表示することができる。
【００９８】
また、項目選択部１３は、履歴部４１の格納する履歴情報に基づいて、処理項目情報を選択する。この構成によって、処理項目を選択して表示する際に、選択される可能性の高い処理項目を優先的に表示させることができる。
【００９９】
また、領域生成部１５は、履歴部４１の格納する履歴情報に基づいて、仕上がり予想表示における領域の候補を、操作表示部１４に表示させる。この構成によって、領域の候補を表示する際に、選択される可能性の高い領域の候補を優先的に表示させることができる。
【０１００】
（５．実施の形態５）
図１２は、実施の形態５によるユーザインタフェース装置の機能的ブロック図である。実施の形態５によるユーザインタフェース装置５０が、実施の形態４と異なる点は、識別情報を受け付ける識別部５１を、さらに備える点である。そして、履歴部４１は、識別部５１によって受け付けられた識別情報に基づいて、履歴情報をそれぞれ格納する。
【０１０１】
この構成によって、切替部３１は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して第１および第２のユーザインタフェースモードの間で表示形態を切り替えて表示できるので、例えば操作者を識別情報によって識別し識別された操作者ごとに好適な表示形態に切り替えて表示させることができる。
【０１０２】
（変形例３）
また、項目選択部１３は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して表示すべき項目を選択するので、操作者を識別情報によって識別し識別された操作者ごとに良く指定を受ける処理項目を選択して表示することができるので、操作者ごとに好適な処理項目メニューを表示することができる。
【０１０３】
また、領域生成部１５は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して表示すべき領域を優先的に表示するので、操作者を識別情報によって識別し識別された操作者ごとに良く選択する領域を優先的に表示することができるので、操作者ごとに
好適な領域候補を表示することができる。
【０１０４】
このように実施の形態５によるユーザインタフェース装置５０は、識別部５１が識別情報を受け付けることによって、例えば操作者ごとの履歴情報を使用でき、これによって、操作者ごとに好適な処理項目および領域候補をきめ細かく表示することができるので、操作性が高くユーザフレンドリなインタフェースを提供することができる。
【０１０５】
（６．ハードウェア構成など）
図１３は、実施の形態によるユーザインタフェース装置を備えた画像形成装置のハードウェア構成を示すブロック図である。この画像形成装置は、ファックスやスキャナなどの複合的機能を備える複合機（ＭＦＰ）として構成されている。図に示すように、このＭＦＰは、コントローラ２２１０とエンジン部２２６０とをＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）バスで接続した構成となる。コントローラ２２１０は、ＭＦＰ全体の制御、画像表示制御、各種制御、画像処理制御など、ＦＣＵＩ／Ｆ２２３０、操作表示部１４からの入力を制御するコントローラである。エンジン部２２６０は、ＰＣＩバスに接続可能な画像処理エンジンなどであり、例えば取得した画像データに対して誤差拡散やガンマ変換などの画像処理部分が含まれる。
【０１０６】
コントローラ２２１０は、ＣＰＵ２２１１と、ノースブリッジ（ＮＢ）２２１３と、システムメモリ（ＭＥＭ−Ｐ）２２１２と、サウスブリッジ（ＳＢ）２２１４と、ローカルメモリ（ＭＥＭ−Ｃ）２２１７と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）２２１６と、ハードディスクドライブ５とを有し、ノースブリッジ２２１３とＡＳＩＣ２２１６との間をＡＧＰ（Ａｃｃｅｌｅｒａｔｅｄ Ｇｒａｐｈｉｃｓ Ｐｏｒｔ）バス２２１５で接続した構成となる。また、ＭＥＭ−Ｐ２２１２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２２１２ａと、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２２１２ｂとをさらに有する。
【０１０７】
ＣＰＵ２２１１は、ＭＦＰの全体制御を行うものであり、ＮＢ２２１３、ＭＥＭ−Ｐ２２１２およびＳＢ２２１４からなるチップセットを有し、このチップセットを介して他の機器と接続される。
【０１０８】
ＮＢ２２１３は、ＣＰＵ２２１１とＭＥＭ−Ｐ２２１２、ＳＢ２２１４、ＡＧＰ２２１５とを接続するためのブリッジであり、ＭＥＭ−Ｐ２２１２に対する読み書きなどを制御するメモリコントローラと、ＰＣＩマスタおよびＡＧＰターゲットとを有する。
【０１０９】
ＭＥＭ−Ｐ２２１２は、プログラムやデータの格納用メモリ、プログラムやデータの展開用メモリなどとして用いるシステムメモリであり、ＲＯＭ４４６とＲＡＭ２２１２ｂとからなる。ＲＯＭ２２１２ａは、プログラムやデータの格納用メモリとして用いる読み出し専用のメモリであり、ＲＡＭ２２１２ｂは、プログラムやデータの展開用メモリ、画像処理時の画像描画メモリなどとして用いる書き込みおよび読み出し可能なメモリである。
【０１１０】
ＳＢ２２１４は、ＮＢ２２１３とＰＣＩデバイス、周辺デバイスとを接続するためのブリッジである。このＳＢ２２１４は、ＰＣＩバスを介してＮＢ２２１３と接続されており、このＰＣＩバスには、ＦＣＵＩ／Ｆ２２３０なども接続される。
【０１１１】
ＡＳＩＣ２２１６は、マルチメディア情報処理用のハードウェア要素を有するマルチメディア情報処理用途向けのＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）であり、ＡＧＰ２２１５、ＰＣＩバス、ＨＤＤ５およびＭＥＭ−Ｃ２２１７をそれぞれ接続するブリッジの役割を有する。
【０１１２】
このＡＳＩＣ２２１６は、ＰＣＩターゲットおよびＡＧＰマスタと、ＡＳＩＣ２２１６の中核をなすアービタ（ＡＲＢ）と、ＭＥＭ−Ｃ２２１７を制御するメモリコントローラと、ハードウェアロジック等により画像データの回転などを行う複数のＤＭＡＣ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）と、エンジン部２２６０との間でＰＣＩバスを介してＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）２２４０、ＩＥＥＥ（ｔｈｅ Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｎｇｉｎｅｅｒｓ）１３９４インタフェース２２５０が接続される。
【０１１３】
ＭＥＭ−Ｃ２２１７は、送信用画像バッファ、符号バッファとして用いるローカルメモリであり、ＨＤＤ５は、画像データの蓄積、プログラムの蓄積、フォントデータの蓄積、フォームの蓄積を行うためのストーレジである。
【０１１４】
ＡＧＰ２２１５は、グラフィック処理を高速化するために提案されたグラフィックスアクセラレータカード用のバスインタフェースであり、ＭＥＭ−Ｐ２２１２に高スループットで直接アクセスすることにより、グラフィクスアクセラレータカードを高速にするものである。
【０１１５】
ＡＳＩＣ２２１６に接続する操作表示部２２２０は、操作者からの操作入力を受け付けて、ＡＳＩＣ２２１６に受け付けられた操作入力情報を送信する。
【０１１６】
なお、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、ＲＯＭ等に予め組み込まれて提供される。
【０１１７】
実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【０１１８】
さらに、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【０１１９】
実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、上述した各部（解析部１１、表示生成部１２、項目選択部１３、操作表示部１４、領域生成部１５、設定部１６、切替部３１、計時部３２、および履歴部４１など）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭから画像処理プログラムを読み出して実行することにより上記各部が主記憶装置上に解析部１１、表示生成部１２、項目選択部１３、操作表示部１４、領域生成部１５、設定部１６、切替部３１、計時部３２、および履歴部４１などが主記憶装置上に生成されるようになっている。
【０１２０】
以上説明した本発明の実施の形態あるいは変形例は、説明のための一例であって、本発明はここに説明したこれらの具体例に限定されるものではない。
【産業上の利用可能性】
【０１２１】
以上のように、本発明にかかるユーザインタフェース装置、項目設定方法およびプログラムは、電子機器の有する操作表示技術に有用である。
【図面の簡単な説明】
【０１２２】
【図１】実施の形態１によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【図２】操作表示部における入力した画像データ、および選択可能な処理項目の表示を示す模式図である。
【図３】操作表示部において、処理項目が選択された場合の表示を説明する模式図である。
【図４】処理項目と設定可能領域との対応定義テーブルの模式図である。
【図５】実施の形態１によるユーザインタフェース装置による設定手順を説明するフローチャートである。
【図６】実施の形態２によるユーザインタフェース装置によって表示される画面の模式図である。
【図７】領域が選択されることによって処理可能な項目が表示されることを説明する図である。
【図８】表示された処理項目の候補から項目が選択された場合を説明する図である。
【図９】実施の形態２によるユーザインタフェース装置による設定手順を説明するフローチャートである。
【図１０】実施の形態３によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【図１１】実施の形態４によるユーザインタフェース装置の機能的ブロック図である。
【図１２】実施の形態５によるユーザインタフェース装置の機能的ブロック図である。
【図１３】実施の形態によるユーザインタフェース装置を備えた画像形成装置のハードウェア構成を示すブロック図である。
【符号の説明】
【０１２３】
１ スキャナ
２ 画像処理部
３ 出力処理部
４ 画像出力部
５ メモリ（ＨＤＤ）
１０、２０、３０、４０、５０ ユーザインタフェース装置
１１ 解析部
１２ 表示生成部
１３ 項目選択部
１４ 操作表示部
１５ 領域生成部
１６ 設定部
３１ 切替部
３２ 計時部
４１ 履歴部
【技術分野】
【０００１】
本発明は、ユーザインタフェース装置、項目設定方法およびプログラムに関し、特に、操作表示部を備えた電子機器上で画像編集を行うユーザインタフェース装置、項目設定方法およびプログラムに関する。
【背景技術】
【０００２】
従来、デジタル複合機などの画像形成装置においては、操作設定や出力する原稿の状態などを表示するタッチパネルは非常に狭く、その狭い表示面で操作の設定を行うために、操作性が決して良いと言えるものではなかった。
【０００３】
このような問題を解決するために、スキャナで画像を読み込み、文字領域、写真領域、図形領域、背景領域を分離して分離した画像領域を操作者に選択させ、希望する領域選択キーが押されると、選択された画像領域毎に、濃度やカラーバランスの調整内容を指定するための画面が表示され、指定された調整内容に応じて濃度やカラーバランスが調整されて画像形成が行われる技術が考案されていた（特許文献１）。
【０００４】
特許文献１の技術では、画像領域における調整内容の設定画面が表示されて選択メニューが表れ、表れたメニューから選択操作を行うため、利便性の高い技術だった。
【０００５】
【特許文献１】特開２００２−１１２０２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の技術においては、タッチパネルの画面で設定する点については利便性が高かったとしても、設定後の実際の出来上がり画像がどのように出力されるかは表示されないため、印刷として出来上がる配置や状態が印刷前には不明であるという問題があった。
【０００７】
また、タッチパネルの画面においては、領域を先に指定するよりもむしろ、設定項目のメニューを先に表示させて、しかる後に領域を指定するニーズが高かったが、特許文献１に記載の技術はこのようなニーズに応えることができなかった。
【０００８】
本発明は、このような問題を解決するためになされ、その目的は、入力情報に対して、操作者が自然な操作の流れの中で設定の手順を自然に踏ませることができる操作性が良好でユーザフレンドリなユーザインタフェース装置、項目設定方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００９】
上述した課題を解決し、目的を達成するために、請求項１にかかる発明のユーザインタフェース装置は、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、入力画像を文書構成要素に解析する解析手段と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目選択手段と、前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、を備える。
【００１０】
請求項２にかかる発明のユーザインタフェース装置は、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、入力画像を文書構成要素に解析する解析手段と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目表示手段と、前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、を備える。
【００１１】
請求項３にかかる発明は、請求項１または２に記載のユーザインタフェース装置において、前記処理項目指定手段は、文字情報の入力に応じて前記処理項目の指定を受け付ける。
【００１２】
請求項４にかかる発明は、請求項１または２に記載のユーザインタフェース装置において、前記領域候補指定手段は、文字情報の入力に応じて前記領域候補の指定を受け付ける。
【００１３】
請求項５にかかる発明のユーザインタフェース装置は、請求項１に記載のユーザインタフェース装置における仕上がり予想表示情報の第１の操作表示形態と請求項２に記載のユーザインタフェース装置における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替手段を備える。
【００１４】
請求項６にかかる発明は、請求項５に記載のユーザインタフェース装置において、前記切替手段は、操作者からの前記第１の操作表示形態および前記第２の操作表示形態の間で切り替え指定入力を受け付ける。
【００１５】
請求項７にかかる発明は、請求項５または６に記載のユーザインタフェース装置において、前記切替手段は、前記第１の操作表示形態および前記第２の操作表示形態を、時間によって切り替える。
【００１６】
請求項８にかかる発明は、請求項５〜７のいずれか１つに記載のユーザインタフェース装置において、前記領域候補についての情報、前記処理項目についての情報および前記切替手段による切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納する履歴手段をさらに備え、前記切替手段は、前記履歴手段が格納する前記履歴情報に基づいて前記第１の操作表示形態および前記第２の操作表示形態の間で切り替える。
【００１７】
請求項９にかかる発明は、請求項８に記載のユーザインタフェース装置において、前記処理項目表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、前記処理項目情報を選択する。
【００１８】
請求項１０にかかる発明は、請求項８または９に記載のユーザインタフェース装置において、前記領域候補表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、仕上がり予想表示における前記領域候補を、前記操作表示手段に表示させる。
【００１９】
請求項１１にかかる発明は、請求項８〜１０のいずれか１つに記載のユーザインタフェース装置において、識別情報を受け付ける識別手段をさらに備え、前記履歴手段は、前記識別手段によって受け付けられた前記識別情報に基づいて、前記履歴情報をそれぞれ格納し、前記切替手段、前記処理項目表示手段、および前記領域候補表示手段の少なくともいずれか１つは、前記履歴手段に格納された前記履歴情報を前記識別情報に基づいて使用する。
【００２０】
請求項１２にかかる発明の項目設定方法は、入力画像を文書構成要素に解析する解析工程と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択工程と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、を含む。
【００２１】
請求項１３にかかる発明の項目設定方法は、入力画像を文書構成要素に解析する解析工程と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示工程と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、を含む。
【００２２】
請求項１４にかかる発明の項目設定方法は、請求項１２に記載の項目設定方法における仕上がり予想表示情報の第１の操作表示形態と請求項１３に記載の項目設定方法における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替工程を含む。
【００２３】
請求項１５にかかる発明のプログラムは、入力画像を文書構成要素に解析する解析機能と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択機能と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、をコンピュータに実行させる。
【００２４】
請求項１６にかかる発明のプログラムは、入力画像を文書構成要素に解析する解析機能と、前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示機能と、前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、をコンピュータに実行させる。
【００２５】
請求項１７にかかる発明のプログラムは、請求項１５に記載のプログラムにおける仕上がり予想表示情報の第１の操作表示形態と請求項１６に記載のプログラムにおける仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替機能をコンピュータに実行させる。
【発明の効果】
【００２６】
請求項１，１２，１５にかかる発明によれば、入力情報を文書構成要素に解析し、解析結果に基づいて入力情報の仕上がり予想表示情報を生成し、解析結果に基づいて処理を施すことが可能な処理項目を選択し、操作表示手段において予想表示情報を表示し、かつ、選択した処理項目の情報を表示し表示した処理項目から処理項目の指定を受け付け、受け付けた処理項目によって処理対象となる領域候補を操作表示手段に表示させる、指定された処理項目、および選択入力を受け付けた領域とを設定することによって、設定結果を反映した予想表示情報を生成して操作表示手段に再び表示させる。この構成によって、先ず処理項目を表示して指定を受け付け、しかる後に受け付けられた処理項目の対象となる領域の候補を表示して指定を受け付ける形態（第１の操作表示形態）から設定することができ、自然な操作の流れの中で、処理設定の手順を踏むことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００２７】
請求項２，１３，１６にかかる発明によれば、入力情報を文書構成要素に解析し、解析結果に基づいて、仕上がり予想表示における処理項目の実行対象となる領域候補を表示させ、表示した領域候補から領域の選択入力を受け付け、選択入力を受け付けた領域で可能な処理項目を選択し、選択された処理項目の候補を表示して指定を受け付けて、操作表示手段に表示させた領域から選択を受け付けた領域、および受け付けた処理項目を設定することによって、領域の候補を表示して指定を受け付けてから指定された領域での処理項目を表示して指定を受け付ける。この構成によって、先ず領域の候補を表示して指定を受け付け、しかる後に指定された領域における処理項目を表示して指定を受け付ける形態（第２の操作表示形態）から設定することができ、自然な操作の流れの中で、処理設定の手順を踏むことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００２８】
請求項３，１４，１７にかかる発明によれば、処理項目指定手段は、文字情報の入力に応じて処理項目の指定を受け付けることによって、操作者からの手動による入力によって処置設定を行うことができる。
【００２９】
請求項４にかかる発明によれば、領域候補指定手段は、文字情報の入力に応じて領域候補の指定を受け付けることによって、操作者からの手動による入力によって処置設定を行うことができる。
【００３０】
請求項５にかかる発明によれば、第１の操作表示形態と第２の操作表示形態とを選択的に切り替える切替手段を備えることにより、第１の操作表示形態、即ち最初に処理項目の候補を表示して指定を受け付け、次に指定された処理項目の対象となる領域の候補を表示して指定を受け付ける操作表示形態と、第２の操作表示形態、即ち最初に処理を受け付ける領域の候補を表示して指定を受け付け、次に指定された領域での処理項目の候補を表示して指定を受け付ける操作表示形態との間で切り替えて、設定を行うことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００３１】
請求項６にかかる発明によれば、操作者からの第１の操作表示形態および第２の操作表示形態の間で切り替え指定入力を受け付けることによって、操作者の手動によって第１および第２の操作表示形態を切り替えることができる。
【００３２】
請求項７にかかる発明によれば、第１の操作表示形態および第２の操作表示形態を、時間によって切り替えることによって、例えば、第１の操作表示形態において操作者からの入力がない場合は、第２の操作表示形態に切り替えることができるので、よりユーザフレンドリなインタフェースとなる。
【００３３】
請求項８にかかる発明によれば、領域候補についての情報、処理項目についての情報、および切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納し、履歴情報に基づいて第１および第２の操作表示形態の間で切り替えることによって、今までの使用履歴に即した操作表示形態に切り替えることができる。
【００３４】
請求項９にかかる発明によれば、格納している履歴情報に基づいて、処理項目情報を選択するので、より使用頻度の高い処理項目を優先して表示することができる。
【００３５】
請求項１０にかかる発明によれば、格納している履歴情報に基づいて、仕上がり予想表示における領域候補を表示するので、より使用頻度の高い領域の候補を優先して表示することができる。
【００３６】
請求項１１にかかる発明によれば、識別情報を受け付け、受け付けられた識別情報に基づいて、履歴情報を格納して、第１および第２の操作表示形態の切り替え、処理項目の選択、および領域候補の表示の少なくともいずれかを識別情報に基づく履歴情報によって行うので、例えば操作者を識別して頻度の高い表示形態を優先して表示することができる。
【発明を実施するための最良の形態】
【００３７】
以下に添付図面を参照して、この発明にかかるユーザインタフェース装置、項目設定方法およびプログラムの最良な実施の形態を、実施の形態１〜５、および変形例１〜３に沿って詳細に説明する。
【００３８】
（１．実施の形態１）
（１．１．ユーザインタフェース装置の構成）
図１は、実施の形態１によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。画像形成装置はスキャナ１、画像処理部２、出力処理部３、画像出力部４、メモリ（ハードディスクドライブ（ＨＤＤ））５、およびユーザインタフェース装置１０を備える。
【００３９】
スキャナ１は、原稿画像を読み取る。画像処理部２は、読み取った原稿画像をデジタルデータに変換して画像データを生成し、ユーザインタフェース装置１０に送信する。ユーザインタフェース装置１０は、画像データを受信して表示し、各種の設定を受け付ける。出力処理部３は、ユーザインタフェース装置１０によって受け付けられた設定に基づいて入力画像データに対して出力処理を施す。また、出力処理部３は、入力画像データに対してガンマ変換など各種の画像処理を施す。画像出力部４は、出力処理部３によって施された出力処理に従って画像出力する。
【００４０】
実施の形態１によるユーザインタフェース装置１０は、解析部１１、表示生成部１２、項目選択部１３、操作表示手段である操作表示部１４、領域生成部１５、および設定部１６を備える。
【００４１】
解析部１１は、解析手段として機能するものであって、入力情報を文書構成要素に解析する。表示生成部１２は、予想情報生成手段として機能するものであって、解析部１１による解析結果に基づいて仕上がり予想表示情報を生成して操作表示部１４に出力する。また、表示生成部１２は、新予想情報生成手段としても機能するものであって、処理項目を反映した新たな仕上がり予想表示情報を生成して操作表示部１４に出力する。項目選択部１３は、処理項目選択手段として機能するものであって、解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。操作表示部１４は、表示生成部１２が生成した予想表示情報を表示する。領域生成部１５は、領域候補表示手段として機能するものであって、操作表示部１４が指定を受け付けた処理項目によって処理対象となる仕上がり予想表示における領域の候補を操作表示部１４に表示させる。設定部１６は、処理項目指定手段として機能するものであって、項目選択部１３が選択した処理項目の情報を表示し、表示した処理項目の候補から処理項目の指定を受け付ける。また、設定部１６は、領域候補指定手段としても機能するものであって、領域生成部１５が操作表示部１４に表示させた領域の候補から領域を選択する入力を受け付け、該選択入力が受け付けられた領域において、すでに指定されている処理項目の設定を行う。
【００４２】
実施の形態１によるユーザインタフェース装置１０は、画像データを入力し、先ず処理項目を表示して処理項目の指定を受け付け、次に受け付けられた処理項目の対象となる領域を表示して領域の指定を受け付ける。このような操作表示形態を、ここでは第１のインタフェースモード（第１の操作表示形態）と称する。実施の形態１によるユーザインタフェース装置は、第１のインタフェースモードを介して、入力情報に処理項目実行の設定を受け付け、受け付けられた設定を反映させて、さらに操作表示部３に表示して、処理項目の指定および領域の選択入力を受け付ける。
【００４３】
解析部１１は、入力した画像データに対して、文字画像、写真画像、図表画像、およびその他の画像のうちいずれの画像種であるかを解析する。解析部１１はまた、解析した結果に基づいて、画像データを分割する。分割は、たとえば、文章の場合は段落ごとに分割する。写真画像および図表画像の場合は、それぞれ写真画像および図表画像ごとに分割する。
【００４４】
このような分割は、例えば、文字であると判定した部分が連続した領域を判定することによって文字の集まった領域として分割することができる。また、中間調画素が連続することを検出して、写真画像の領域であることを検出し、写真画像領域を分割することができる。また、エッジ部と、濃淡の差が激しい領域であることを検出することによって、図表画像であることが検出できる。それ以外については、文字、写真、および図表画像でないものと判定し、分割処理を施す。これらは公知技術であるので詳細な説明を省略する。
【００４５】
表示生成部１２は、解析部１１による解析結果に基づいて仕上がり予想表示情報を生成する。解析部１１による解析結果によって、原稿全体のページにおける大枠が縁取られた状態で表示しても良い。また、画像データが領域ごとに縁取られた状態で表示しても良い。表示生成部１２は、このように全体領域、あるいは個々の領域ごとに分けられた状態で表示する画像データを生成して、操作表示部１４に表示させる。
【００４６】
また、表示生成部１２は、設定部１６によって設定された内容に従って、仕上がり予想表示情報を生成し、操作表示部１４に新しく生成された仕上がり予想を表示させる。
【００４７】
ここで、表示生成部１２は、最初に読み込んだ状態に対して、デフォルトの設定で、如何なる処理をも施さない状態での表示としておく。しかし、一般的に使用頻度の高い設定、例えば、左上でのホッチキス綴じの処理を施した状態での表示をデフォルト設定として表示することもできる。
【００４８】
項目選択部１３は、解析部１１による解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。解析結果によっては、例えばモノクロデータである場合はカラー設定などは不要になる。一方、スキャナ１によってスキャンされる時に、分厚い本などの原稿の場合は、原稿の縁に黒い枠のイメージが出現するので、解析部１１が黒い枠を検知した場合、「わく消去」という設定が必要となってくる。このように、項目選択部１３は、解析部１１による解析結果に基づいて設定が必要となる項目を選択し、不必要な項目を非選択とする。
【００４９】
図２は、操作表示部における入力した画像データ、および選択可能な処理項目の表示を示す模式図である。操作表示部１４の表示面２００には、読み取られた画像データによる画像２０１が表示されている。画像２０１には、読み取りデータの境界を示す外枠２０２、文字領域２０３、写真領域２０４〜２０６が表示される。
【００５０】
項目選択部１３は、解析部１１による解析結果に従って、処理項目を選択して、処理項目としてステープル２１１、パンチ２１２、綴じ代調整２１３、わく消去２１４、スタンプ２１５、およびページ番号２１６を選択し、画面の右側に表示させている。
【００５１】
また、項目選択部１３によって選択された処理項目として、出力カラー２２１、出力濃度２２２、用紙２２３、拡大／縮小２２４、片面／両面２２５、集約２２６、ソート／スタック２２７、および地肌２２８が、画面の左側に表示される。
【００５２】
操作表示部１４は、操作者からのメニューの指定、および領域の選択を含む各種の設定入力を受け付ける。操作表示部１４は、人間の指先、スタイラスペン、その他の接触入力具を介して接触することによって入力を受け付ける。操作表示部１４は、指先やペン先からの押圧により抵抗の変化を検知する抵抗膜方式、あるいはアナログ容量結合方式などの公知技術によって、表示するパネル面のそれぞれの位置における入力を検出する。以下に入力の形態として、操作表示部１４に対して接触して入力を行う接触入力（タッチ入力とも称する）を例に挙げて説明するが、必ずしもタッチ入力のみが本発明の実施の形態ではなく、マウスやキーボードを含む種々の入力方式を適用することができる。
【００５３】
図３は、操作表示部において、処理項目が選択された場合の表示を説明する模式図である。図４は、処理項目と設定可能領域との対応定義テーブルの模式図である。今、操作者によって操作表示部１４において表示されている処理項目のうち、パンチ穴２１２が接触入力により選択されたとする。
【００５４】
操作表示部１４が、パンチ穴２１２からの接触入力を検知すると、表示生成部１２は、「パンチ穴」に対応して設定できるパンチ穴の領域を、図４に示した対応定義テーブルから読み出して、設定できる領域３０２および３０３を、操作表示部１４に表示する。パンチ穴が可能な領域３０２および３０３を、読み取った全体の画像３０１において表示する形態は、互いに重畳する形態でも良く、上書きして表示する形態でも良い。あるいは、可能な領域の色を変化させる、点滅させる、あるいはそれ以外をダークアウトさせるなどの表現形態を適用することができる。
【００５５】
操作者は、図３に示されたパンチ穴領域３０３に接触することによって選択入力を行う。操作表示部１４は、パンチ穴２１２からの接触入力を受け付け、設定部１６は、受け付けた領域においてパンチ穴処理を施す設定を行う。
【００５６】
表示生成部１２は、設定部１６によって設定された内容に従って、さらに、操作表示部１４において表示する仕上がり予想情報を生成して操作表示部１４において表示させる。この、新しく表示された仕上がり予想画面から、修正などの設定入力を受け付ける。受け付けた設定は再び反映されて表示され、受け付けない場合は、印刷実行を受け付ける。
【００５７】
設定部１６が設定した設定情報は、印刷実行が受け付けられた場合、出力処理部３に送信され、画像出力部４は、出力処理部３によって出力処理を施された出力情報に従って画像出力する。
【００５８】
こうして、ユーザインタフェース装置１０は、画像データを入力し、最初に処理項目を表示して処理項目の指定を受け付け、次に受け付けられた処理項目の対象となる領域を表示して領域の指定を受け付ける第１のインタフェースモードによって操作者からの各種の処理項目の設定を受け付けることができる。
【００５９】
（１．２．ユーザインタフェース装置による設定手順）
図５は、実施の形態１によるユーザインタフェース装置による設定手順を説明するフローチャートである。ここでは、スキャナ１が原稿を読み込んで入力情報を取得するものとして説明するが、ネットワークを介し、あるいは記録媒体を介して文書情報を入力する構成も可能である。
【００６０】
解析部１１は、入力情報を文書構成要素に解析する。解析には、ヒストグラムの変化、エッジ部の検出、文字認識など公知の技術を使うことができる（ステップＳ１０１）。
【００６１】
表示生成部１２は、解析部１１の解析結果に基づいて操作表示部１４に仕上がり予想画面を表示させる。仕上がり予想画面は、図２に示したように、原稿画像の中で、用紙と画像データ部分を枠で縁取ることによって、領域を見易いものとする（ステップＳ１０２）。
【００６２】
項目選択部１３は、解析結果に基づいて入力情報に処理を施すことが可能な処理項目を選択する。画像データによっては、設定が不可能な処理項目もあるため、このような表示することが無意味な項目を排除して、操作上可能な項目を選択する。例えば、モノクロデータに対してカラー設定は意味がないので、カラー設定の項目は排除する。また、所定値よりも大きな余白値を検知した場合は、優先的にパンチ穴や綴じ代を処理項目の候補として選択する（ステップＳ１０３）。
【００６３】
操作表示部１４は、項目選択部１３で選択された処理項目の情報を表示する。表示例は、図２で示されたステープル２１１〜ページ番号２１６、および出力カラー２２１〜地肌２２８の設定項目である（ステップＳ１０４）。
【００６４】
操作表示部１４は、操作表示部１４に表示した処理項目から、操作者による指定入力を受け付ける。ここで、指定入力は接触入力であることが好ましいが、それに限らずマウス・キーボードの形式であっても良い（ステップＳ１０５）。
【００６５】
操作表示部１４が、指定入力を受け付けた場合（ステップＳ１０５のＹｅｓ）、領域生成部１５は、項目指定を受け付けた処理項目によって処理対象となる仕上がり予想表示における領域の候補を、操作表示部１４に表示させる。例えば図４に示した対応テーブルによって、パンチ穴が選択された場合、パンチ穴を設定すべき領域としては、（４０，０）および（２００，４０）で定義される領域３０２と、（０，４０）および（４０，２７０）で定義される領域３０３とが、図３に示したように候補の領域として対応付けられて表示される（ステップＳ１０６）。
【００６６】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０５のＮｏ）、そのま
ま終了して、例えば印刷の実行に移行する。
【００６７】
操作表示部１４は、表示された領域３０２および３０３の候補の中から、領域を選択する入力を受け付けたか否かを検知する（ステップＳ１０７）。選択入力を検知した場合、例えば領域３０３が選択された入力を検知した場合（ステップＳ１０７のＹｅｓ）、設定部１６は、ステップＳ１０５において指定を受け付けた処理項目、およびステップＳ１０７において操作表示部１４が選択入力を受け付けた領域を設定する（ステップＳ１０８）。
【００６８】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０７のＮｏ）、そのまま終了して、例えば印刷の実行に移行する。
【００６９】
表示生成部は、設定部１６による設定結果に基づいて操作表示部１４において入力情報の仕上がり予想情報を生成して操作表示部１４に表示させる（ステップＳ１０９）。そして、再び項目選択部１３が項目を選択するＳステップ１０３に移行してステップＳ１０３以降を繰り返す。これによって、調整の試行を繰り返すことができる。
【００７０】
操作表示部１４が、指定入力を受け付けない場合（ステップＳ１０５のＮｏ、およびステップＳ１０７のＮｏ）は、そのまま終了して、例えば印刷の実行に移行する。
【００７１】
この手順によって、先ず処理項目を表示して指定を受け付け、しかる後に指定を受け付けた処理項目の対象となる領域の候補を表示し、処理を施す領域の指定を受け付けるという第１のインタフェースモードによって、入力情報に対して処理項目実行の設定を受け付ける。
【００７２】
（１．３．効果）
このように、実施の形態１によるユーザインタフェース装置１０によると、最初に設定すべきメニューを表示し、このメニューの中から操作者は処理項目を選択した場合、選択された項目によって処理可能な領域が表示されて操作者は次に、処理する領域を指定するという自然な操作の流れの中で、処理設定の手順を踏ませるように導くことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００７３】
（変形例１）
ここで、操作表示部１４は、操作者が処理項目を指定する指定入力を行った場合、指定された処理項目を受け付ける構成とすることができる。例えば、アルファベットを入力できる画面（不図示）を表示して文字情報の入力を受け付け、受け付けた処理内容に対応する処理項目を、項目選択部１３は選択し、選択された処理内容を操作表示部１４は表示して選択入力を受け付ける。
【００７４】
また、処理を施す領域についても、操作者は、操作表示部１４から数字情報を入力し、領域生成部１５は入力された数字情報によって、領域情報を生成して操作表示部１４におて表示することが望ましい。
【００７５】
このように構成することによって、操作者が手動で処理項目および領域情報を入力することができ、より詳細に処理内容および処理対象の領域を設定することができる。
【００７６】
（２．実施の形態２）
実施の形態２によるユーザインタフェース装置が実施の形態１と異なる点は、入力情報に対して、先ず領域生成部１５は、解析結果に基づいて表示生成部１２が生成する仕上がり予想表示において、処理項目の実行対象となる領域の候補を操作表示部１４に表示させ、操作表示部１４は表示した領域の候補から操作者による領域を選択する選択入力を受け付け、項目選択部１３は選択入力を受け付けた領域において処理可能な処理項目の候補を選択し、操作表示部１４は選択された処理項目の候補を表示して処理項目の指定を受け付けることである。
【００７７】
このようにして操作表示部１４は先ず候補となる領域を表示して次に領域において可能な処理項目を表示して受け付け、設定部１６は操作表示部１４が受け付けた領域および処理項目を設定する。ここで、実施の形態２によるユーザインタフェース装置２０（不図示）は、その機能的ブロック図が実施の形態１による場合と同じであるので、図示を省略する。
【００７８】
実施の形態２によるユーザインタフェース装置２０は、最初に領域を表示して領域の指定を受け付け、次に受け付けられた領域で処理可能な処理項目を表示して処理項目の指定を受け付ける。このような表示形態をここでは、第２のインタフェースモード（第２の操作表示形態）と称する。
【００７９】
図６は、実施の形態２によるユーザインタフェース装置によって表示される画面の模式図である。図７は、領域が選択されることによって処理可能な項目が表示されることを説明する図である。図８は、表示された処理項目の候補から項目が選択された場合を説明する図である。図９は、実施の形態２によるユーザインタフェース装置による設定手順を説明するフローチャートである。図６〜９を参照しながら、実施の形態２によるユーザインタフェース装置の設定手順を説明する。
【００８０】
スキャナ１によって読み込まれた原稿画像６０１は、解析部１１による解析結果に基づいて、表示生成部１２が仕上がり予想を表示させる（ステップＳ２０１）。領域生成部１５は、また、解析結果に基づいて、設定可能な処理項目の対象となる領域を表示する領域情報を生成する。そして、生成した領域情報によって、操作表示部１４に処理項目の対象となる領域を表示する。図６では、操作表示部１４の画面６００において、処理項目の対象となる領域６０２〜６１０が表示されている（ステップＳ２０２）。
【００８１】
これらの領域６０２〜６１０は、接触入力による選択を受け付ける（ステップＳ２０３）。ここで今、領域６０６が選択されたとする（ステップＳ２０３のＹｅｓ）。そうすると、項目選択部１３は、領域６０６に対応して設定可能な項目対応定義テーブルから選択し（ステップＳ２０４）、操作表示部１４は、選択された処理項目を画面７００に表示させる（図７）。領域６０６に対応して可能な処理項目は、図７に示されているように、とじしろ調整７１１、わく消去７１２、およびスタンプ７１３の処理項目が表示される。
【００８２】
これらの処理項目は、例えば図４に示した対応定義テーブルによって対応付けて選択できる。処理項目は、ここでは仕上がり表示の右側に表示されている。ここで、対応しない項目、例えばステープル処理などについては、グレーアウトで表示しても良く、全く表示を消しておくこともできる（ステップＳ２０５）。
【００８３】
今、ここで操作表示部１４において表示されている項目のうち、綴じ代調整７１１が選択入力を受け付けると（ステップＳ２０６のＹｅｓ）、領域生成部１５は、操作表示部１４において項目による仕上がり情報を生成して表示させる。操作表示部１４において表示する画面は、図８に示したように変化する。この場合、選択された綴じ代調整８１１を強調表示しても良く、あるいは他の表示を消すことによって選択されたことを表示しても良い。
【００８４】
綴じ代調整８１２の選択入力を受け付けたことによって今度は、また領域生成部１５が設定すべき領域を表示する（図８）。表示生成部１２は、操作表示部１４の画面８０２が上下左右に移動設定するためのアイコン８０３を生成して、操作表示部１４に表示し、該アイコンを介して上下左右への移動および決定の入力を受け付ける。
【００８５】
設定部１６は、このようにして領域の選択を受け付け、受け付けられた領域において処理可能な処理項目の候補を提示し、候補の中から選択の指定を受け付ける（ステップＳ２０７）。
【００８６】
このように、実施の形態２によるユーザインタフェース装置２０によると、最初に処理設定が可能な領域を表示しておき、操作者が領域を指定すると該領域において設定できるメニューを表示し、このメニューの中から操作者は処理項目を選択することができるので、処理すべき領域を最初に指定し、次にその領域での処理項目を設定するという自然な操作の流れの中で、処理設定の手順を踏ませるように導くことができるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００８７】
（３．実施の形態３）
図１０は、実施の形態３によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【００８８】
実施の形態３によるユーザインタフェース装置３０が、実施の形態１および２と異なる点は、すでに説明した第１のユーザインタフェースモード（第１の操作表示形態）および第２のユーザインタフェースモード（第２の操作表示形態）の間で操作表示の形態を切り替える切替部３１を、さらに備え、切替部３１によって切り替えられる操作表示形態で、操作表示部１４において表示することである。
【００８９】
切替部３１は、操作者からの第１のユーザインタフェースモードおよび第２のユーザインタフェースモードの間で切り替え指定入力を受け付ける構成とすることが望ましい。切替部３１は、操作表示部１４に表示されるアイコン、あるいは選択メニューの形態（不図示）で画面上に表示して配設されるように構成することができる。
【００９０】
この構成によって、第１のユーザインタフェースモード、即ち最初に処理項目の候補を表示して指定を受け付け、次に指定された処理項目の対象となる領域の候補を表示して指定を受け付ける操作表示形態と、第２のユーザインタフェースモード、即ち最初に処理を受け付ける領域の候補を表示して指定を受け付け、次に指定された領域での処理項目の候補を表示して指定を受け付ける操作表示形態との間で切り替えて、設定を行うことができる。
【００９１】
このように実施の形態３によるユーザインタフェース装置は、第１のユーザインタフェースモードで設定することも、また第２のユーザインタフェースモードで設定することも可能であるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００９２】
（変形例２）
ここでユーザインタフェース装置３０は、時間を計測する計時部３２を備え、切替部３１は、第１のインタフェースモードと第２のインタフェースモードとの間での操作表示形態を、計時部３２の時間計測によって切り替えるものとする。例えば、１０秒間おきに第１および第２のインタフェースモードによる表示を切り替える。
【００９３】
あるいは、第１のインタフェースモードで１０秒間継続して表示し、その間に、設定入力を受け付けない場合には、第２のインタフェースモードに切り替えて表示する。しかし、第１のインタフェースモードにおいて１０秒以内に設定入力を受け付けた場合は、そのまま第１のインタフェースモードによる表示を継続する。
【００９４】
このように構成することによって、操作者が一定時間設定入力を行わない場合は、他のインタフェースモードに切り替えるので、操作性が良くユーザフレンドリなユーザインタフェースを提供することができる。
【００９５】
（４．実施の形態４）
図１１は、実施の形態４によるユーザインタフェース装置の機能的ブロック図である。ユーザインタフェース装置４０が、実施の形態３と異なる点は、履歴部４１をさらに備えることである。
【００９６】
履歴部４１は、設定部１６が設定した領域についての情報、処理項目についての情報、および切替部３１による切り替えについての情報の少なくともいずれかの情報を履歴情報として格納する。
【００９７】
ここで切替部３１は、履歴部４１が格納する履歴情報に基づいて第１および第２のユーザインタフェースモードの間で切り替える。この構成によって、ユーザインタフェース装置が第１のユーザインタフェースモードか、あるいは第２のユーザインタフェースモードかいずれの表示形態で表示される可能性が高いかを履歴情報に基づいて判定して切り替えて表示するので、操作者の所望の操作表示形態で表示することができる。
【００９８】
また、項目選択部１３は、履歴部４１の格納する履歴情報に基づいて、処理項目情報を選択する。この構成によって、処理項目を選択して表示する際に、選択される可能性の高い処理項目を優先的に表示させることができる。
【００９９】
また、領域生成部１５は、履歴部４１の格納する履歴情報に基づいて、仕上がり予想表示における領域の候補を、操作表示部１４に表示させる。この構成によって、領域の候補を表示する際に、選択される可能性の高い領域の候補を優先的に表示させることができる。
【０１００】
（５．実施の形態５）
図１２は、実施の形態５によるユーザインタフェース装置の機能的ブロック図である。実施の形態５によるユーザインタフェース装置５０が、実施の形態４と異なる点は、識別情報を受け付ける識別部５１を、さらに備える点である。そして、履歴部４１は、識別部５１によって受け付けられた識別情報に基づいて、履歴情報をそれぞれ格納する。
【０１０１】
この構成によって、切替部３１は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して第１および第２のユーザインタフェースモードの間で表示形態を切り替えて表示できるので、例えば操作者を識別情報によって識別し識別された操作者ごとに好適な表示形態に切り替えて表示させることができる。
【０１０２】
（変形例３）
また、項目選択部１３は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して表示すべき項目を選択するので、操作者を識別情報によって識別し識別された操作者ごとに良く指定を受ける処理項目を選択して表示することができるので、操作者ごとに好適な処理項目メニューを表示することができる。
【０１０３】
また、領域生成部１５は、履歴部４１に格納された履歴情報を、識別情報に基づいて使用して表示すべき領域を優先的に表示するので、操作者を識別情報によって識別し識別された操作者ごとに良く選択する領域を優先的に表示することができるので、操作者ごとに
好適な領域候補を表示することができる。
【０１０４】
このように実施の形態５によるユーザインタフェース装置５０は、識別部５１が識別情報を受け付けることによって、例えば操作者ごとの履歴情報を使用でき、これによって、操作者ごとに好適な処理項目および領域候補をきめ細かく表示することができるので、操作性が高くユーザフレンドリなインタフェースを提供することができる。
【０１０５】
（６．ハードウェア構成など）
図１３は、実施の形態によるユーザインタフェース装置を備えた画像形成装置のハードウェア構成を示すブロック図である。この画像形成装置は、ファックスやスキャナなどの複合的機能を備える複合機（ＭＦＰ）として構成されている。図に示すように、このＭＦＰは、コントローラ２２１０とエンジン部２２６０とをＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）バスで接続した構成となる。コントローラ２２１０は、ＭＦＰ全体の制御、画像表示制御、各種制御、画像処理制御など、ＦＣＵＩ／Ｆ２２３０、操作表示部１４からの入力を制御するコントローラである。エンジン部２２６０は、ＰＣＩバスに接続可能な画像処理エンジンなどであり、例えば取得した画像データに対して誤差拡散やガンマ変換などの画像処理部分が含まれる。
【０１０６】
コントローラ２２１０は、ＣＰＵ２２１１と、ノースブリッジ（ＮＢ）２２１３と、システムメモリ（ＭＥＭ−Ｐ）２２１２と、サウスブリッジ（ＳＢ）２２１４と、ローカルメモリ（ＭＥＭ−Ｃ）２２１７と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）２２１６と、ハードディスクドライブ５とを有し、ノースブリッジ２２１３とＡＳＩＣ２２１６との間をＡＧＰ（Ａｃｃｅｌｅｒａｔｅｄ Ｇｒａｐｈｉｃｓ Ｐｏｒｔ）バス２２１５で接続した構成となる。また、ＭＥＭ−Ｐ２２１２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２２１２ａと、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２２１２ｂとをさらに有する。
【０１０７】
ＣＰＵ２２１１は、ＭＦＰの全体制御を行うものであり、ＮＢ２２１３、ＭＥＭ−Ｐ２２１２およびＳＢ２２１４からなるチップセットを有し、このチップセットを介して他の機器と接続される。
【０１０８】
ＮＢ２２１３は、ＣＰＵ２２１１とＭＥＭ−Ｐ２２１２、ＳＢ２２１４、ＡＧＰ２２１５とを接続するためのブリッジであり、ＭＥＭ−Ｐ２２１２に対する読み書きなどを制御するメモリコントローラと、ＰＣＩマスタおよびＡＧＰターゲットとを有する。
【０１０９】
ＭＥＭ−Ｐ２２１２は、プログラムやデータの格納用メモリ、プログラムやデータの展開用メモリなどとして用いるシステムメモリであり、ＲＯＭ４４６とＲＡＭ２２１２ｂとからなる。ＲＯＭ２２１２ａは、プログラムやデータの格納用メモリとして用いる読み出し専用のメモリであり、ＲＡＭ２２１２ｂは、プログラムやデータの展開用メモリ、画像処理時の画像描画メモリなどとして用いる書き込みおよび読み出し可能なメモリである。
【０１１０】
ＳＢ２２１４は、ＮＢ２２１３とＰＣＩデバイス、周辺デバイスとを接続するためのブリッジである。このＳＢ２２１４は、ＰＣＩバスを介してＮＢ２２１３と接続されており、このＰＣＩバスには、ＦＣＵＩ／Ｆ２２３０なども接続される。
【０１１１】
ＡＳＩＣ２２１６は、マルチメディア情報処理用のハードウェア要素を有するマルチメディア情報処理用途向けのＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）であり、ＡＧＰ２２１５、ＰＣＩバス、ＨＤＤ５およびＭＥＭ−Ｃ２２１７をそれぞれ接続するブリッジの役割を有する。
【０１１２】
このＡＳＩＣ２２１６は、ＰＣＩターゲットおよびＡＧＰマスタと、ＡＳＩＣ２２１６の中核をなすアービタ（ＡＲＢ）と、ＭＥＭ−Ｃ２２１７を制御するメモリコントローラと、ハードウェアロジック等により画像データの回転などを行う複数のＤＭＡＣ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌｌｅｒ）と、エンジン部２２６０との間でＰＣＩバスを介してＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）２２４０、ＩＥＥＥ（ｔｈｅ Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｎｇｉｎｅｅｒｓ）１３９４インタフェース２２５０が接続される。
【０１１３】
ＭＥＭ−Ｃ２２１７は、送信用画像バッファ、符号バッファとして用いるローカルメモリであり、ＨＤＤ５は、画像データの蓄積、プログラムの蓄積、フォントデータの蓄積、フォームの蓄積を行うためのストーレジである。
【０１１４】
ＡＧＰ２２１５は、グラフィック処理を高速化するために提案されたグラフィックスアクセラレータカード用のバスインタフェースであり、ＭＥＭ−Ｐ２２１２に高スループットで直接アクセスすることにより、グラフィクスアクセラレータカードを高速にするものである。
【０１１５】
ＡＳＩＣ２２１６に接続する操作表示部２２２０は、操作者からの操作入力を受け付けて、ＡＳＩＣ２２１６に受け付けられた操作入力情報を送信する。
【０１１６】
なお、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、ＲＯＭ等に予め組み込まれて提供される。
【０１１７】
実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【０１１８】
さらに、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【０１１９】
実施の形態による画像補正部を組み込んだＭＦＰで実行される画像補正プログラムは、上述した各部（解析部１１、表示生成部１２、項目選択部１３、操作表示部１４、領域生成部１５、設定部１６、切替部３１、計時部３２、および履歴部４１など）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭから画像処理プログラムを読み出して実行することにより上記各部が主記憶装置上に解析部１１、表示生成部１２、項目選択部１３、操作表示部１４、領域生成部１５、設定部１６、切替部３１、計時部３２、および履歴部４１などが主記憶装置上に生成されるようになっている。
【０１２０】
以上説明した本発明の実施の形態あるいは変形例は、説明のための一例であって、本発明はここに説明したこれらの具体例に限定されるものではない。
【産業上の利用可能性】
【０１２１】
以上のように、本発明にかかるユーザインタフェース装置、項目設定方法およびプログラムは、電子機器の有する操作表示技術に有用である。
【図面の簡単な説明】
【０１２２】
【図１】実施の形態１によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【図２】操作表示部における入力した画像データ、および選択可能な処理項目の表示を示す模式図である。
【図３】操作表示部において、処理項目が選択された場合の表示を説明する模式図である。
【図４】処理項目と設定可能領域との対応定義テーブルの模式図である。
【図５】実施の形態１によるユーザインタフェース装置による設定手順を説明するフローチャートである。
【図６】実施の形態２によるユーザインタフェース装置によって表示される画面の模式図である。
【図７】領域が選択されることによって処理可能な項目が表示されることを説明する図である。
【図８】表示された処理項目の候補から項目が選択された場合を説明する図である。
【図９】実施の形態２によるユーザインタフェース装置による設定手順を説明するフローチャートである。
【図１０】実施の形態３によるユーザインタフェース装置を備えた画像形成装置の機能的ブロック図である。
【図１１】実施の形態４によるユーザインタフェース装置の機能的ブロック図である。
【図１２】実施の形態５によるユーザインタフェース装置の機能的ブロック図である。
【図１３】実施の形態によるユーザインタフェース装置を備えた画像形成装置のハードウェア構成を示すブロック図である。
【符号の説明】
【０１２３】
１ スキャナ
２ 画像処理部
３ 出力処理部
４ 画像出力部
５ メモリ（ＨＤＤ）
１０、２０、３０、４０、５０ ユーザインタフェース装置
１１ 解析部
１２ 表示生成部
１３ 項目選択部
１４ 操作表示部
１５ 領域生成部
１６ 設定部
３１ 切替部
３２ 計時部
４１ 履歴部
【特許請求の範囲】
【請求項１】
画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、
入力画像を文書構成要素に解析する解析手段と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目選択手段と、
前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、
前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、
を備えることを特徴とするユーザインタフェース装置。
【請求項２】
画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、
入力画像を文書構成要素に解析する解析手段と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、
前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目表示手段と、
前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、
を備えることを特徴とするユーザインタフェース装置。
【請求項３】
前記処理項目指定手段は、文字情報の入力に応じて前記処理項目の指定を受け付ける、
ことを特徴とする請求項１または２に記載のユーザインタフェース装置。
【請求項４】
前記領域候補指定手段は、文字情報の入力に応じて前記領域候補の指定を受け付ける、
ことを特徴とする請求項１または２に記載のユーザインタフェース装置。
【請求項５】
請求項１に記載のユーザインタフェース装置における仕上がり予想表示情報の第１の操作表示形態と請求項２に記載のユーザインタフェース装置における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替手段を備える、
ことを特徴とするユーザインタフェース装置。
【請求項６】
前記切替手段は、操作者からの前記第１の操作表示形態および前記第２の操作表示形態の間で切り替え指定入力を受け付ける、
ことを特徴とする請求項５に記載のユーザインタフェース装置。
【請求項７】
前記切替手段は、前記第１の操作表示形態および前記第２の操作表示形態を、時間によって切り替える、
ことを特徴とする請求項５または６に記載のユーザインタフェース装置。
【請求項８】
前記領域候補についての情報、前記処理項目についての情報および前記切替手段による切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納する履歴手段をさらに備え、
前記切替手段は、前記履歴手段が格納する前記履歴情報に基づいて前記第１の操作表示形態および前記第２の操作表示形態の間で切り替える、
ことを特徴とする請求項５〜７のいずれか１つに記載のユーザインタフェース装置。
【請求項９】
前記処理項目表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、前記処理項目情報を選択する、
ことを特徴とする請求項８に記載のユーザインタフェース装置。
【請求項１０】
前記領域候補表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、仕上がり予想表示における前記領域候補を、前記操作表示手段に表示させる、
ことを特徴とする請求項８または９に記載のユーザインタフェース装置。
【請求項１１】
識別情報を受け付ける識別手段をさらに備え、
前記履歴手段は、前記識別手段によって受け付けられた前記識別情報に基づいて、前記履歴情報をそれぞれ格納し、
前記切替手段、前記処理項目表示手段、および前記領域候補表示手段の少なくともいずれか１つは、前記履歴手段に格納された前記履歴情報を前記識別情報に基づいて使用する、
ことを特徴とする請求項８〜１０のいずれか１つに記載のユーザインタフェース装置。
【請求項１２】
入力画像を文書構成要素に解析する解析工程と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択工程と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、
を含むことを特徴とする項目設定方法。
【請求項１３】
入力画像を文書構成要素に解析する解析工程と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示工程と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、
を含むことを特徴とする項目設定方法。
【請求項１４】
請求項１２に記載の項目設定方法における仕上がり予想表示情報の第１の操作表示形態と請求項１３に記載の項目設定方法における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替工程を含むことを特徴とする項目設定方法。
【請求項１５】
入力画像を文書構成要素に解析する解析機能と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択機能と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１６】
入力画像を文書構成要素に解析する解析機能と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示機能と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１７】
請求項１５に記載のプログラムにおける仕上がり予想表示情報の第１の操作表示形態と請求項１６に記載のプログラムにおける仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替機能をコンピュータに実行させることを特徴とするプログラム。
【請求項１】
画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、
入力画像を文書構成要素に解析する解析手段と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目選択手段と、
前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、
前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、
を備えることを特徴とするユーザインタフェース装置。
【請求項２】
画像の表示および表示画像上の位置の指定操作を受け付ける操作表示手段と、
入力画像を文書構成要素に解析する解析手段と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して前記操作表示手段に出力する予想情報生成手段と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示手段に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示手段と、
前記操作表示手段に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定手段と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示手段に出力する処理項目表示手段と、
前記操作表示手段に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定手段と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示手段に出力する新予想情報生成手段と、
を備えることを特徴とするユーザインタフェース装置。
【請求項３】
前記処理項目指定手段は、文字情報の入力に応じて前記処理項目の指定を受け付ける、
ことを特徴とする請求項１または２に記載のユーザインタフェース装置。
【請求項４】
前記領域候補指定手段は、文字情報の入力に応じて前記領域候補の指定を受け付ける、
ことを特徴とする請求項１または２に記載のユーザインタフェース装置。
【請求項５】
請求項１に記載のユーザインタフェース装置における仕上がり予想表示情報の第１の操作表示形態と請求項２に記載のユーザインタフェース装置における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替手段を備える、
ことを特徴とするユーザインタフェース装置。
【請求項６】
前記切替手段は、操作者からの前記第１の操作表示形態および前記第２の操作表示形態の間で切り替え指定入力を受け付ける、
ことを特徴とする請求項５に記載のユーザインタフェース装置。
【請求項７】
前記切替手段は、前記第１の操作表示形態および前記第２の操作表示形態を、時間によって切り替える、
ことを特徴とする請求項５または６に記載のユーザインタフェース装置。
【請求項８】
前記領域候補についての情報、前記処理項目についての情報および前記切替手段による切り替えについての情報の少なくともいずれか１つの情報を履歴情報として格納する履歴手段をさらに備え、
前記切替手段は、前記履歴手段が格納する前記履歴情報に基づいて前記第１の操作表示形態および前記第２の操作表示形態の間で切り替える、
ことを特徴とする請求項５〜７のいずれか１つに記載のユーザインタフェース装置。
【請求項９】
前記処理項目表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、前記処理項目情報を選択する、
ことを特徴とする請求項８に記載のユーザインタフェース装置。
【請求項１０】
前記領域候補表示手段は、前記履歴手段の格納する前記履歴情報に基づいて、仕上がり予想表示における前記領域候補を、前記操作表示手段に表示させる、
ことを特徴とする請求項８または９に記載のユーザインタフェース装置。
【請求項１１】
識別情報を受け付ける識別手段をさらに備え、
前記履歴手段は、前記識別手段によって受け付けられた前記識別情報に基づいて、前記履歴情報をそれぞれ格納し、
前記切替手段、前記処理項目表示手段、および前記領域候補表示手段の少なくともいずれか１つは、前記履歴手段に格納された前記履歴情報を前記識別情報に基づいて使用する、
ことを特徴とする請求項８〜１０のいずれか１つに記載のユーザインタフェース装置。
【請求項１２】
入力画像を文書構成要素に解析する解析工程と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択工程と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、
を含むことを特徴とする項目設定方法。
【請求項１３】
入力画像を文書構成要素に解析する解析工程と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成工程と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示工程と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定工程と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示工程と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定工程と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成工程と、
を含むことを特徴とする項目設定方法。
【請求項１４】
請求項１２に記載の項目設定方法における仕上がり予想表示情報の第１の操作表示形態と請求項１３に記載の項目設定方法における仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替工程を含むことを特徴とする項目設定方法。
【請求項１５】
入力画像を文書構成要素に解析する解析機能と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、
前記解析結果に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目選択機能と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、
指定を受け付けた前記処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、
指定を受け付けた前記領域候補における前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１６】
入力画像を文書構成要素に解析する解析機能と、
前記解析結果に基づいて前記入力情報の仕上がり予想表示情報を生成して、画像の表示および表示画像上の位置の指定操作を受け付ける操作表示部に出力する予想情報生成機能と、
前記解析結果に基づいて前記入力画像に処理を施すことが可能な処理項目の対象となる領域候補を前記操作表示部に出力して前記仕上がり予想表示情報とともに表示させる領域候補表示機能と、
前記操作表示部に表示された前記領域候補から一の前記領域候補の指定を受け付ける領域候補指定機能と、
指定を受け付けた前記領域候補に基づき前記入力画像に処理を施すことが可能な処理項目の情報を選択して前記操作表示部に出力する処理項目表示機能と、
前記操作表示部に表示された前記処理項目から一の前記処理項目の指定を受け付ける処理項目指定機能と、
指定を受け付けた前記処理項目を反映した新たな仕上がり予想表示情報を生成して前記操作表示部に出力する新予想情報生成機能と、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１７】
請求項１５に記載のプログラムにおける仕上がり予想表示情報の第１の操作表示形態と請求項１６に記載のプログラムにおける仕上がり予想表示情報の第２の操作表示形態とを選択的に切り替える切替機能をコンピュータに実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００７−１８８４７４（Ｐ２００７−１８８４７４Ａ）
【公開日】平成１９年７月２６日（２００７．７．２６）
【国際特許分類】
【出願番号】特願２００６−２９０８９０（Ｐ２００６−２９０８９０）
【出願日】平成１８年１０月２６日（２００６．１０．２６）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
【公開日】平成１９年７月２６日（２００７．７．２６）
【国際特許分類】
【出願日】平成１８年１０月２６日（２００６．１０．２６）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
[ Back to top ]