画面編集装置、画面編集方法及びプログラム
【課題】 表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善する。
【解決手段】 表示器に表示させるGUIの内容を編集し、編集結果を保存する画面編集装置であって、編集対象の画面構成要素の選択を受け付け、その選択された画面構成要素につき、GUIに表示させるか否かを定める表示設定を行うことができる画面編集装置に、GUIに配置可能なボタン等の各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶させておき、キーワードの入力を受け付けて、そのキーワード受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示することができるようにした。
【解決手段】 表示器に表示させるGUIの内容を編集し、編集結果を保存する画面編集装置であって、編集対象の画面構成要素の選択を受け付け、その選択された画面構成要素につき、GUIに表示させるか否かを定める表示設定を行うことができる画面編集装置に、GUIに配置可能なボタン等の各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶させておき、キーワードの入力を受け付けて、そのキーワード受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示することができるようにした。
【発明の詳細な説明】
【技術分野】
【0001】
この発明は、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法及び、コンピュータを上記のような画面編集装置として機能させるためのプログラムに関する。
【背景技術】
【0002】
従来から、表示器にGUI(グラフィカル・ユーザ・インタフェース)の画面を表示させ、そのGUIにおいて、種々のデータの表示や操作の受付を行うことが知られている。
そして、GUIの設計は、ユーザからの操作を受け付けるためのボタンや、設定内容を表示するための文字表示枠等の、種々の部品を画面上に配置して行うことができる。また、近年では、メーカーが提供するGUIをそのまま使用するのではなく、ユーザが画面の内容を編集して自身の用途に合ったGUIを作成する、カスタマイズに関する要望が多くある。
【0003】
このようなGUIのカスタマイズに関する技術としては、例えば特許文献1乃至3に記載のものが知られている。
特許文献1には、パネルカスタマイズモードを選択することにより、液晶表示器に表示させている表示画面中の機能キーにつき、表示/非表示,位置,サイズ等を変更することができる画像形成装置が記載されている。
特許文献2には、ユーザ端末からサーバにアクセスして電子機器の操作画面を編集できるようにする技術が記載されている。また、この編集の例として、操作ボタンの拡大縮小、切断、合成、位置変更、あるいはボタンの機能を殺す(消してしまう)、等が挙げられている。
特許文献3には、画面レイアウトが設定されたHTMLファイルに対して修正を行うことによりGUIのカスタマイズを可能とした産業用機器が記載されている。
【特許文献1】特開2005−45370号公報
【特許文献2】特開2003−150971号公報
【特許文献3】特開2003−5825号公報
【発明の開示】
【発明が解決しようとする課題】
【0004】
ところで、装置のメーカーがGUIのカスタマイズ機能を提供しようとする場合、予めユーザのニーズを予測して、そのニーズに合ったGUIをデザインして雛形として提供することは可能である。しかし、ユーザのニーズがその雛形と合わない場合には、ユーザは、ボタンの位置を移動させたり、表示/非表示を切り替えたりというように、自分でGUIの内容を変更する操作を行わなければならない。このため、装置が広範な設定項目を有し、それに伴って多数のGUI画面を有する場合、ユーザが所望の内容の画面を編集するには膨大な労力を要する場合もある。
【0005】
例えば、コピー、プリント、ファクシミリ通信等の機能を有するデジタル複合機(MFP)において、ユーザが片面印刷による紙資源の無駄を無くしたいと考え、片面印刷をできなくしようとする場合、GUIのカスタマイズにより片面印刷に関するボタンを全て非表示にすることにより、この意図を実現できるものの、片面印刷に関するボタンは、数十〜数百画面に及ぶGUIの各所に点在しているため、それらを1つ1つ探して非表示に設定するには非常に手間がかかるし、また、片面印刷に関するボタンを全て漏れなく非表示に設定することも難しい、といった具合である。
【0006】
この発明は、このような問題を解決し、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することを目的とする。
【課題を解決するための手段】
【0007】
この発明の画面編集装置は、上記の目的を達成するため、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置において、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、編集対象の画面構成要素の選択を受け付ける選択受付手段と、その選択受付手段により選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手段と、キーワードの入力を受け付けるキーワード受付手段と、そのキーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手段とを設けたものである。
【0008】
このような画面編集装置において、上記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段を設け、上記受付手段に、上記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段を設けるとよい。
さらに、上記キーワード記憶手段を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段とし、上記抽出手段を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手段とするとよい。
【0009】
あるいは、上記編集対象として選択されている画面構成要素と対応するキーワードを用いて、そのキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する第2の抽出手段を設けるとよい。
また、上記の各画面編集装置において、上記抽出手段が抽出した画面構成要素のうち、ユーザが選択した任意の数の画面構成要素につき、一括して上記表示設定を行う手段を設けるとよい。
あるいは、上記抽出手段に、抽出した画面構成要素を、上記操作画面のプレビュー中で強調して表示する手段を設けるとよい。
【0010】
また、この発明の画面編集方法は、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法であって、コンピュータが、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手順と、編集対象の画面構成要素の選択を受け付ける選択受付手順と、その選択受付手順で選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手順と、キーワードの入力を受け付けるキーワード受付手順と、そのキーワード受付手順で受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手順とを実行するものである。
【0011】
このような画面編集方法において、上記コンピュータが、上記キーワード記憶手順で記憶したキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手順を実行し、上記受付手順を、上記表示手順で表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手順とするとよい。
さらに、上記キーワード記憶手順を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手順とし、上記抽出手順を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手順とするとよい。
【0012】
また、この発明のプログラムは、コンピュータを、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置として機能させるためのプログラムであって、上記コンピュータを、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、編集対象の画面構成要素の選択を受け付ける選択受付手段と、その選択受付手段により選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手段と、キーワードの入力を受け付けるキーワード受付手段と、そのキーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手段として機能させるためのプログラムを含むプログラムである。
【0013】
このようなプログラムにおいて、上記コンピュータを、上記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段として機能させるためのプログラムを含め、上記受付手段を、上記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段とするとよい。
さらに、上記キーワード記憶手段を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段とし、上記抽出手段を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手段とするとよい。
【発明の効果】
【0014】
以上のようなこの発明の画面編集装置又は画面編集方法によれば、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することができる。
また、この発明のプログラムによれば、コンピュータを画面編集装置として機能させ、上記の効果を得ることができる。
【発明を実施するための最良の形態】
【0015】
以下、この発明を実施するための最良の形態を図面に基づいて具体的に説明する。
この発明の画面編集装置は、何らかの装置の表示器に表示させる操作画面の内容を編集する装置である。そして、この画面編集装置は、操作画面を表示させる装置自体に画面編集機能を設けて実現することもできるし、操作画面を表示させる装置とネットワーク等の通信路を介して通信可能なPC(パーソナルコンピュータ)等のコンピュータに、所要のアプリケーションプログラムを実行させることにより実現してもよい。
【0016】
また、編集機能は、操作画面を表示させる装置自体がアプリケーションサーバとして機能して提供し、PC等からウェブブラウザのような一般的なクライアントアプリケーションによりアクセスしてその編集機能を利用できるようにしてもよい。また、全く独立した編集装置によって操作画面のデータのみを編集し、このデータを記録媒体に記録して、操作画面を表示する装置に、画面のデータをその記録媒体から読み出させるような構成でもよい。
すなわち、画面編集装置を実現するためのハードウェアは、CPU,ROM,RAM等を有し、一定の演算能力を有するものであればどのようなものであってもよい。
【0017】
ここでは、その一例として、PCにより画面編集装置を実現し、そのPCとネットワーク接続された画像処理装置に表示させる操作画面の内容を編集する場合の実施形態について説明する。
【0018】
〔第1の実施形態:図1乃至図15〕
まず、図1に、操作画面を表示させる画像処理装置のハードウェア構成を示す。
この画像処理装置10は、図1に示すように、プリンタエンジン,スキャナエンジン,画像蓄積用HDD等からなるエンジン部19と、通信I/F17とを有し、CPU11,ROM12,RAM13等により構成される制御部によりアプリケーションプログラムを実行してこれらのエンジン部19及び通信I/F17を制御することにより、プリント,スキャン,コピー,ドキュメントボックス,ファクシミリ通信等の機能を実現することができる装置である。後からアプリケーションプログラムを追加することにより、実現可能な機能の種類を増やすこともできる。
【0019】
また、画像処理装置10は、表示器である液晶ディスプレイ(LCD)にタッチパネルを積層した操作パネル18を有し、この操作パネル18にGUIを表示して、ユーザからの設定や動作指示等の操作を受け付け、その内容に従った動作を行う。そして、これらの動作に必要な設定内容等のデータのうち、変更可能かつ電源をOFFした場合でも保持しておく必要のあるデータは、NVRAM(不揮発RAM)14に記憶させておく。
【0020】
これらのうち、CPU11,ROM12,RAM13,NVRAM14,通信I/F17は、システムバス20によって接続され、操作パネル18とエンジン部19は、それぞれパネルI/F15とエンジンI/F16とを介してシステムバス20に接続される。
また、通信I/F17は、LAN(ローカルエリアネットワーク)等のネットワーク30を介して、この発明の第1の実施形態の画面編集装置として機能するPC40と通信可能な状態となっている。なお、この通信には、有線、無線を問わず、任意の通信経路を用いることができる。
【0021】
図2には、以上のような画像処理装置10及びPC40の機能のうち、GUIの表示及びカスタマイズに関する機能を示す。
図2に示すように、画像処理装置10は、制御部110及び記憶部120を有する。
このうち、制御部110は、通信手段111,画面定義データ管理手段112,画面生成手段113,個人認証管理手段114を有し、これらの機能は、CPU11が所要のプログラムを実行することにより実現される。また、記憶部120は、画面定義データ記憶手段121,認証データ記憶手段122を有し、これらの機能は、NVRAM14により実現される。
【0022】
そして、通信手段111は、他の装置やプロセスとの間でデータを送受信する機能を有する。この送受信は例えば、PC40と通信して、GUI編集機能を提供するUIカスタマイズツール200に対し、編集用に、画面定義データ記憶手段121に記憶している、画像処理装置10がGUIの表示に使用する画面定義データを提供するものである。あるいは、UIカスタマイズツール200において編集された画面定義データを受信して、画像処理装置10がGUIの表示に使用するデータとして画面定義データ記憶手段121に記憶させたりするものである。また、通信手段111は、GUIを使用するアプリケーションからの、操作パネル18に表示させるべき画面の指示を受け取る機能も有する。
【0023】
画面定義データ管理手段112は、画面定義データ記憶手段121が記憶するGUIのデータを管理する機能を有する。そして、GUIの表示や編集を行う場合に必要なデータを画面定義データ記憶手段121から読み出したり、UIカスタマイズツール200による編集後の画面定義データを画面定義データ記憶手段121に保存したりする。GUIの表示を行う場合、読み出した画面定義データは画面生成手段113に渡す。
【0024】
画面生成手段113は、画面定義データ管理手段112から受け取った画面定義データに基づき、操作パネル18での表示に用いるGUIの画像データを生成し、この画像データに基づいて操作パネル18にGUIを表示させる機能を有する。詳細は後述するが、画面定義データ記憶手段121では、画面定義データは、ボタン、メッセージ、アイコン等の座標や形状、サイズ等を示すデータとして記憶されているため、画面生成手段113では、このデータに基づき、ボタン、メッセージ、アイコン等を表示画面のビットマップ中に描画する処理を行って、GUIの画像データを生成する。
【0025】
個人認証管理手段114は、ユーザID、パスワード、あるいは指紋や静脈などのバイオメトリクス情報といった認証データを用いて、画面の表示を指示したユーザを認証する機能を有する。この認証は、ユーザが入力した認証データを、認証データ記憶手段122に記憶されている認証データと照合することにより行う。この認証の結果は、ユーザによる画像処理装置10の使用の許可/不許可の判断や、ユーザに応じて表示させるGUI画面を変えることによる利用機能制限等が考えられる。例えば、同種のGUI画面について複数の画面定義データを用意しておき、特定のユーザが画像処理装置10を利用する場合に、特定の機能を選択するためのボタンを非表示にしたGUIを表示させるようにすれば、そのユーザに、非表示にした機能を利用させないようにすることができる。
【0026】
画像処理装置10は、以上の各手段により、画面編集装置により編集された画面定義データに従ったGUIを操作パネル18に表示させ、そのGUIによりユーザの操作を受け付けることができる。
【0027】
一方、PC40は、CPUが所要のアプリケーションプログラムを実行することにより、ユーザに、画像処理装置10に表示させるGUI画面を編集する機能を提供するUIカスタマイズツール200として機能する。
そして、このUIカスタマイズツール200は、通信手段201,画面定義データ入出力手段202,画面構成要素抽出手段203,カスタマイズ手段210を有する。
【0028】
これらのうち、通信手段201は、他の装置やプロセスとの間でデータを送受信する機能を有する。ここでは、制御部110にアクセスして編集すべきGUIの内容を示す画面定義データを取得したり、編集後の画面定義データを画像処理装置10に送信して画面定義データ記憶手段121に記憶させたりする通信を行う。
【0029】
画面定義データ入出力手段202は、ユーザから編集する画面定義データの読み出し指示があった場合に、通信手段201を介して画像処理装置10から必要な画面定義データを取得して記憶し、カスタマイズ手段210による変更や、画面構成要素抽出手段203による検索及び抽出に供する機能を有する。また、ユーザから新規保存又は上書き保存の指示があった場合に、編集中の画面定義データを通信手段201を介して画像処理装置10に送信し、保存させる機能も有する。
画面構成要素抽出手段203は、後に詳述するが、編集中の画面定義データから、ユーザに指定されたキーワードと対応する画面構成要素を検索して抽出する機能を有する。
【0030】
カスタマイズ手段210は、編集画面生成手段211に加え、画面定義データの内容を変更する各手段を有する。
編集画面生成手段211は、画面定義データ入出力手段202が記憶する、編集中のGUIの内容を示す画面定義データに基づき、PC40のディスプレイにGUI編集画面を表示させ、GUIの編集操作や検索操作を受け付ける機能を有する。
【0031】
画面定義データの内容を変更する手段については、図2には、表示/非表示変更手段212,座標変更手段213,サイズ変更手段214を示している。そして、これらは、GUI編集画面において受け付けた指示に従い、画面定義データ入出力手段202が記憶する画面定義データのうち、編集中のGUIに含まれるボタン、メッセージ、アイコン等の画面構成要素に関するプロパティの値を変更する手段である。
【0032】
表示/非表示変更手段212は、画面構成要素をGUIに表示させるか否かを定める表示/非表示の設定を、座標変更手段213は、画面構成要素をGUI上のどこに配置するかを定める座標を、サイズ変更手段214は、画面構成要素をGUI上にどのようなサイズで配置するかを定めるサイズを、それぞれ変更する手段である。これら以外にも、画面定義データに含まれるプロパティの種類のうち変更し得るもの毎に、対応する変更手段を設ける。
【0033】
PC40は、以上の各手段により、画像処理装置10の操作パネル18に表示させるGUI画面の内容を編集し、編集結果を画像処理装置10に保存させることができる。もちろん、編集結果をPC40側に保存することもできる。
【0034】
次に、図3乃至図6を用いて、GUIの内容を示す画面定義データ及びこれに関連するデータについて説明する。
図3に示すのは、画像処理装置10が使用するGUIの内容を規定するデータセットの構成である。
【0035】
上述のように、画像処理装置10は、アプリケーション(以下、略して「アプリ」ともいう)によってコピーやドキュメントボックス等の機能を実現する装置であり、アプリを任意に追加して機能を追加可能な構成としている。そこで、使用するGUIのデータも、図3に示すように、アプリ毎に、そのアプリが使用する画面のセットを規定する画面一覧データを記憶するようにしている。そして、画像処理装置10にインストールした各アプリと対応させて画面一覧指定データを用意し、どのアプリについてのGUIを表示させる場合にどの画面一覧データを参照すればよいかがわかるようにしている。
【0036】
また、各画面一覧データには、アプリが使用する画面毎に、その画面の内容を規定する画面定義データの位置を示す参照データを用意している。
そして、この画面定義データが、1画面分のGUIの内容を規定するデータである。
【0037】
図4に、この画面定義データの例を示す。
この図には、コピーアプリで使用するトップ画面である、コピートップ画面の内容を規定するデータを示した。そして、この図に示すように、画面定義データは、特定の画面に配置し得る各画面構成要素につき、その識別子,種別,座標,サイズ,形状,フォントサイズ,表示有無,キーワードIDの情報を含む。
【0038】
このうち「識別子」は、画面構成要素を特定するために用いる情報であり、ボタンの操作イベントに応じて実行するコードの特定,GUIに表示するキャプションの選択,GUI上での状態変化(非選択状態/選択状態等)のターゲットの指定等に用いられる。
「種別」は、画面構成要素のふるまいの特性を示す情報である。ここでは、操作が可能な「ボタン」と、単に文字列を表示するだけの「メッセージ」、単に画像を表示するだけの「アイコン」のいずれかを設定可能としている。
【0039】
「座標」は、GUI画面の表示領域の左上を基点として、画面構成要素の表示位置を2次元で規定する情報である。
「サイズ」は、GUI画面上に画面構成要素を表示させる際の幅及び高さを規定する情報である。
「形状」は、GUI画面上に画面構成要素を表示させる際に使用する画像データのファイル名を規定する情報である。この「形状」で規定する画像データは、画像処理装置10において、GUI画面を表示する際に読み出すことができるように、所定のフォルダに予め格納しておく。また、「メッセージ」の表示には、画像データを用いないので、「種別」が「メッセージ」である画面構成要素については、「形状」の値を設定する必要はない。
【0040】
「フォントサイズ」は、ボタン上に表示するキャプションや、メッセージとして表示する文字列のフォントサイズを規定するデータである。
「表示有無」は、画面構成要素をGUI画面に表示させるか否かを規定するデータである。そして、GUI画面を操作パネル18に表示させる際、「表示有無」の値が「表示」であれば、対応する画面構成要素をGUI画面上に配置するが、「非表示」である場合、対応する画面構成要素はGUI画面上に配置しない。従って、例えば、あるボタンが「非表示」である場合、ユーザは、そのボタンによる操作を行えなくなるため、このことにより、ユーザに対し、特定の操作や、特定の機能の利用を禁止することができる。
ここまでのデータが、GUI画面の表示に用いるデータである。
【0041】
図5に、これらの画面定義データに従って表示されるGUI画面の例を示す。
画像処理装置10において、操作パネル18にGUI画面を表示させる際には、これらのデータに基づき、GUI画面の表示領域に、「表示有無」の値が「表示」である各画面構成要素につき、「形状」により規定されるファイルの画像データを、「サイズ」により規定されるサイズに変形し、「座標」により規定される位置に配置して、さらに、「識別子」と対応して使用言語毎に用意された図示しないキャプションテーブルに登録されているキャプションを「フォントサイズ」により規定されるサイズの文字で「座標」及び「サイズ」に従って定められる位置に描画して、GUI画面の画像データを生成する。
【0042】
また、これ以外にも、画像処理装置10においてなされている設定の内容をGUIに動的に表示する場合もあり得る。例えば、給紙トレイを選択するボタンに、トレイに載置されている用紙のサイズや向き等を表示する場合である。この場合、画像処理装置10が、識別子により画面構成要素を特定して、必要に応じて画面構成要素の表示を更新する処理を行う。
【0043】
また、図4に示した画面定義データのうち、「キーワードID」は、GUIの編集中に画面構成要素の検索及び抽出に利用できるようにするために、画面構成要素と対応させて用意したキーワードを示す情報である。ただし、ここでは、使用言語の切り換えに対応するため、画面定義データ中には、キーワードのIDを示すのみとし、実際に検索に使用するキーワードは、言語毎に用意した別のキーワードテーブルに記憶させている。
【0044】
図6及び図7に、このキーワードテーブルの例を示す。
図6に示すのが日本語用、図7に示すのが英語用のテーブルであり、それぞれ、キーワードIDと、該当言語においてそのキーワードIDを有する画面構成要素に対応付けるキーワード文字列とを記憶している。このとき、複数の画面構成要素に対して同じキーワードが対応付けられていても、問題ない。そのキーワードを用いて抽出を行った場合に、複数の画面構成要素が抽出されるだけである。また、GUI編集中のユーザが指定したキーワードに従って画面構成要素の検索と抽出を行う際には、そのユーザが表示に使用している言語と対応するキーワードテーブルの内容に従って、各画面構成要素と対応するキーワードを特定する。
【0045】
このキーワードテーブルは、GUI画面の表示には用いないため、画像処理装置10に記憶させる必要はないが、画面一覧データ又は画面定義データとセットで記憶させておくと、PC40がGUIの編集を行う際にこれとセットで読み出すことができ、データの管理が容易である。
また、これらのキーワードIDとキーワード文字列が、GUI画面に配置可能な画面構成要素に対応するキーワードを示すデータであり、GUI画面の編集時にこれらのデータを記憶する画面定義データ入出力手段202が、キーワード記憶手段に該当する。
【0046】
またここでは、上記のキーワードテーブルとは別に、GUIの編集を行う際に使用するデータとして、各画面構成要素の名称を示すデータも用意している。この名称は、キーワードに従った検索による抽出の結果を分かり易く表示するために用いるものである。また、ユーザが編集対象等として選択した画面構成要素が何であるかを分かり易く表示するためにも用いるものである。
【0047】
図8及び図9に、この名称を記憶させる名称テーブルの例を示す。
この名称テーブルは、各画面構成要素の画面構成要素識別子と対応させて、その識別子が示す画面構成要素の名称を記載したものである。そして、図の例では、その名称を2つ登録可能とし、名称1としては、画面構成要素が配置される画面の名称を、名称2としては、画面構成要素自体の機能を表す名称を登録し、これらによって、ユーザが画面構成要素を容易に特定できるようにしている。
【0048】
しかし、これら以外の名称を用いることも、もちろん可能である。名称の用途を鑑みれば、キーワードの場合と異なり、異なる画面構成要素について全く同じ名称を登録することは好ましくないが、全く同じ名称が複数あっても技術的には問題ない。また、各画面構成要素のキーワードと名称とは、同じであっても異なっていてもよい。
また、名称テーブルも、キーワードテーブルと同様、言語毎に用意しており、図8に示すのが日本語用、図9に示すのが英語用のテーブルである。また、この名称テーブルも、GUI画面自体の表示には用いないため、キーワードテーブルと同様、PC40が参照可能であれば、画像処理装置10に記憶させる必要はない。
【0049】
以上の図3,図4,図6乃至図9に示したデータのうち、画面一覧データと、画面定義データにおける「識別子」及び「キーワードID」、さらにキーワードテーブルと名称テーブルの内容は、基本的には画像処理装置10のメーカーが提供するものであり、ユーザが変更できるようにする必要はない。そして、これらのデータは、画像処理装置10において使用し得るGUIの内容を示すデータと、そのGUIに配置可能な画面構成要素を示すデータである。ただし、ユーザが全く新しい独自の画面やボタン等を追加できるようにする場合には、これらのデータを変更可能にすることも考えられる。
【0050】
また、1つのアプリで使用する画面は、後述するように階層的な配置となっているが、その階層構造については、アプリのプログラムによって実現すればよい。しかし、画面を編集する際にも、どの画面がどの階層に属するかが分かると画面の選択がしやすいため、この階層構造を示すデータを、編集時に参照できるように、画面一覧データ等に含ませておくとよい。
【0051】
次に、図10に、PC40のUIカスタマイズツール200がGUI画面の編集操作を受け付けるためのGUI編集画面の表示例を示す。
この図に示すGUI編集画面300は、PC40のディスプレイに、PC40上で起動されたUIカスタマイズツール200の機能により表示される画面である。そして、UIカスタマイズツール200は、編集するデータの読み出し先を指定され、読み出し指示を受けると、その読み出し先から、図3に示したようなデータセットを読み出し、そのデータセットの内容に基づき、図10に示すようなGUI編集画面300を表示する。図10に示すのは、画像処理装置10からデータセットを読み出した場合の表示例である。
【0052】
この画面においては、まず、コピータブ301,ボックスタブ302,文書送信タブ303の3つのタブにより、画像処理装置10が備えるどのアプリで使用するGUIの編集を行うかの選択を受け付ける。なお、GUI編集画面300に表示するタブは、編集対象として取得したデータセットにどのアプリで使用するGUIのデータが含まれているかに従って決定する。また、タブとしては、これらの他、検索タブ401も設けているが、この検索タブ401は、この実施形態の特徴である、キーワードを用いた画面構成要素の検索及び抽出の指示を受け付ける画面を表示させるためのボタンである。
【0053】
図10では、コピータブ301が選択された状態を示しており、この状態では、編集内容表示部310に、コピーアプリが使用するGUI画面を編集するための画面が表示される。
このうち、画面リスト表示部320は、タブにより選択されたアプリが使用するGUIのリストをツリー形式で表示する部分である。このツリーにおいて、アプリの起動時に表示される画面を最上位の画面、最上位の画面から、その画面に配置されたボタンの操作により移行する画面を下位の画面、その下位の画面に配置されたボタンの操作により移行する画面をさらに下位の画面、としている。そして、通常は、上位の画面ほど広範な設定や機能選択を受け付ける画面であり、下位の画面ほど、特定の機能に関する詳細な設定を受け付けるための画面としてデザインされる。
【0054】
そして、ユーザは、画面リスト表示部320に表示されるリストから編集対象とする1つのGUI画面を選択することができる。そして、どのGUI画面が選択されているかは、カーソル321により示し、その選択されたGUI画面の内容が、プレビュー表示部330に表示される。図10では、リストの一番上のコピートップ画面が選択された状態を示している。
【0055】
プレビュー表示部330に表示されるのは、ユーザによる編集結果を反映させた、操作パネル18に表示させるGUI画面のプレビューである。そして、この画面中で、表示内容を編集したいボタン等の画面構成要素をクリック等により選択することができる。
そして、プレビュー表示部330で選択された編集対象の画面構成要素の現在の状態を示す情報が、プロパティ表示部340及び表示有無表示部350に表示される。
【0056】
図10では、自動用紙選択ボタン331が選択された状態を示しており、プロパティ表示部340には、このボタンについての現在の情報として、名称,種別,座標,サイズ(幅及び高さ),フォントサイズの情報が表示されている。これらのデータのうち、名称以外は、図4に示した画面定義データの内容を表示したものである。そして、ユーザは、所望の項目を選択した上で、テキスト入力、プルダウンメニュー、カーソルボタン等の図示しないユーザインタフェースから所望の値又は変更指示を入力することにより、各項目の値を変更することができる。
【0057】
画面定義データのうち図10に示されていない項目や、各言語におけるキャプションも、画面に表示させて編集することができる。そして、以上の変更がなされると、その内容は、直ちにプレビュー表示部330の表示に反映される。ただし、名称については、編集中のユーザの使用言語と対応する名称テーブルの内容に基づき、選択された画面構成要素と対応する名称を表示しており、この値は編集不可である。またここでは、表示スペースの都合上、さらには、画面の名称は画面リスト表示部320に表示されており、ここに別途表示する必要性が乏しいため、名称テーブル上の「名称2」のみを表示している。
【0058】
また、表示有無表示部350には、編集対象の画面構成要素に関する「表示有無」の値を設定するための表示ボタン351と非表示ボタン352が表示され、このうち、現在設定されている内容と対応するボタンが反転表示される。図10の例では、自動用紙選択ボタン331は「表示」の状態であるので、表示ボタン351が反転表示状態となっている。そして、非表示ボタン352を押下することにより、自動用紙選択ボタン331を「非表示」の状態に設定することができる。この表示/非表示の変更も、直ちにプレビュー表示部330の表示に反映される。
【0059】
なお、あるボタンを「非表示」に設定してしまうと、そのボタンはプレビュー表示部330に表示されなくなってしまい、以後、画面上でクリックできなくなってしまう。そこで、図示はしていないが、GUI編集画面300には、表示/非表示を問わず、画面リスト表示部320で選択された画面のデータに含まれている画面構成要素のリストを表示させるためのボタンを設けており、ユーザは、非表示の画面構成要素についての情報を編集したい場合には、このリストから編集対象を選択することができる。
【0060】
また、保存ボタン362は、以上のようなGUI編集画面300で編集した画面の内容の保存指示を受け付けるためのボタンであり、PC40は、保存ボタン362が押下された場合に、編集後のデータセットを、ユーザが指定した保存先に保存する。画像送信装置10が保存先に指定された場合、表示に使用できる状態で保存させることができる。また、PC40側にファイルとして保存することもできる。
読み込みボタン361は、GUI編集画面300で編集するデータの読み出し指示を受け付けるためのボタンである。PC40は、読み込みボタン361が押下された場合に、ユーザが指定した読み出し元から、GUI画面の内容を示すデータセットを読み出して、編集対象として記憶し、その内容に併せてGUI編集画面の表示を更新する。
これらの保存や読み出しは、アプリケーション単位、すなわち図3に示した1つの画面一覧データが示す画面定義データの単位で行うこともできる。
【0061】
GUI画面の編集は、以上の編集内容表示部310において、読み込みボタン361を押下して編集する画面定義データのセットを読み出し、画面リスト表示部320で編集対象のGUI画面を選択し、プレビュー表示部330で表示内容を変更する画面構成要素を編集対象として選択し、プロパティ表示部340や表示有無表示部350でその画面構成要素のプロパティを変更することによって行う。
また、関連要素検索ボタン370は、編集対象となっている画面構成要素と対応するキーワードを用いて、この実施形態の特徴である、画面構成要素の検索及び抽出を行ってその結果を表示させるためのボタンである。
【0062】
次に、図11に、検索タブ401の選択に応じて表示される、キーワードを用いた画面構成要素の検索及び抽出を指示するための画面の表示例を示す。
GUI編集画面300において検索タブ401が選択されると、PC40は、GUI編集画面300内に、その検索タブ401と対応する表示部として、検索表示部410を表示する。なお、この状態でも、コピータブ301,ボックスタブ302,文書送信タブ303は表示されており、ユーザは、これらのタブを選択することにより、図10に示したような編集内容表示部を表示させることができる。
【0063】
一方、検索表示部410には、キーワード入力部411,キーワードリスト表示部412,検索実行ボタン413を設けている。
キーワード入力部411は、検索に使用するキーワードの入力を受け付ける部分であり、キーワードをテキスト入力可能である。また、検索タブ401が選択された時点でGUI編集画面300において編集対象の画面構成要素が選択されていれば、その画面構成要素と対応付けられているキーワードが初期値として表示される。従って、ユーザが対応するキーワードを把握していない場合でも、編集中の画面構成要素と関連する画面構成要素を検索するためのキーワードを容易に指定することができる。
【0064】
また、キーワードリスト表示部412は、検索タブ401が選択された時点でGUI編集画面300において編集対象のGUI画面が選択されていれば、その画面について、そうでなければアプリのトップ画面について、画面内に配置可能な画面構成要素の少なくとも1つと対応するキーワードをリストとして表示する領域である。そして、このリストに含まれるキーワードのうちいずれかをクリックすることにより、クリックしたキーワードをキーワード入力部411に入力することができる。従って、ユーザが的確なキーワードを把握していない場合でも、編集中の画面に配置可能な画面構成要素と関連する画面構成要素を検索するためのキーワードを容易に指定することができる。
【0065】
また、検索実行ボタン413は、検索開始の指示を受け付けるためのボタンである。そして、これが押下された場合、PC40は、編集対象として読み込んであるデータセットに含まれる全ての画面定義データを検索し、キーワード入力部411に入力されたキーワードと対応付けられている画面構成要素を抽出して、その結果を画面に表示する。
なお、編集内容表示部310で関連要素検索ボタン370が押下された場合には、以上の検索表示部410の表示は行わず、直ちに、編集対象となっている画面構成要素と対応するキーワードを用いて画面構成要素の検索と抽出を行って、その結果を表示する。
【0066】
図12に、この検索結果を表示する画面の例を示す。
図11に示した検索実行ボタン413が押下された場合、検索表示部410の表示は、図12に示すような、画面構成要素の検索結果を表示する検索結果表示部420に切り替わる。編集内容表示部310で関連要素検索ボタン370が押下された場合には、編集内容表示部310の表示が検索結果表示部420に切り替わる。
【0067】
この画面には、まず、抽出リスト表示部421が含まれており、この部分には、アプリケーション毎に、検索に用いたものと同じキーワードと対応する画面構成要素のリストが表示される。各構成要素を表示する文字列としては、ユーザの使用言語と対応する名称テーブルに登録されている、名称1及び名称2の文字列を用いる。そして、これらの名称の間に「:」を挟んで表示することにより、抽出された画面構成要素が、どの画面に配置されるどの画面構成要素かをユーザが把握できるようにしている。
また、リストには、各画面構成要素と対応するチェックボックスを表示し、一括非表示ボタン422による一括非表示設定を行う画面構成要素をユーザが選択できるようにしている。
【0068】
一括非表示ボタン422は、抽出リスト表示部421で選択された画面構成要素につき、一括して非表示を設定する指示を行うためのボタンである。このボタンが押下された場合、PC40のCPUは、抽出リスト表示部421においてチェックボックスがオンになっている全ての画面構成要素につき、画面定義データ中の「表示有無」の内容を「非表示」に設定する。そして、このことにより、特定のキーワードに関連付けられるボタン等の画面構成要素が、多岐に亘る画面に配置されていたとしても、これらを容易に漏れなく非表示に設定することができる。
【0069】
メーカーがキーワードを用意する場合に、同じ機能に関連する画面構成要素には同じキーワードを対応付けると考えられるため、このことは、特定の機能に関連するボタン等を容易に漏れなく非表示に設定することができることを意味する。そして、GUI上でボタンを非表示にすることににより、特定の機能の利用を禁止しようとする場合、このように、特定の機能に関連するボタン等を容易に漏れなく非表示に設定できることは、非常に有用である。
【0070】
特に、関連要素検索ボタン370による検索では、ワンタッチで、編集中の画面構成要素と同じキーワードが対応付けられた画面構成要素を検索することができるため、編集中の画面構成要素と同時に編集したい画面構成要素を効率的に抽出することができる。
なお、検索結果表示部420には、一括非表示ボタン422以外に、抽出リスト表示部421で選択された画面構成要素につき一括して表示を設定したり、抽出リスト表示部421における全てのチェックボックスを一括してオン又はオフにしたりするためのボタンを設けてもよい。
【0071】
次に、PC40のCPUが以上説明してきた画面構成要素の抽出に関する機能を実現するために実行する処理について説明する。ここで説明する処理は全て、PC40のCPUが、UIカスタマイズツール200の機能を実現するためのアプリケーションプログラムを実行することにより行うものである。
【0072】
まず、図13に、図11に示した検索表示部410の表示処理のフローチャートを示す。この処理は、図10に示した検索タブ401が選択された場合に実行するものである。
この場合、PC40のCPUは、まずステップS11で、検索タブ401が選択された時点で表示されていた編集内容表示部310において編集対象の画面構成要素が選択されているか否か判断する。そして、これが選択されていない場合、キーワードリスト表示部412に表示させるキーワードリストの表示に必要なデータを収集すべく、ステップS12に進む。
【0073】
そしてここでは、その編集内容表示部310において編集対象の画面が選択されているか否か判断する。そして、選択されていれば、ステップS13に進み、選択されている画面の画面定義データを参照対象とする。参照されていなければ、ステップS14に進み、選択されているアプリケーションの最上位画面の画面定義データを取得して参照対象とする。
【0074】
いずれの場合も、その後ステップS15に進み、編集作業中のユーザの表示言語IDと対応する、図6及び図7に示したようなキーワードテーブルを取得する。なお、表示言語IDは、UIカスタマイズツール200における画面の表示に使用する言語を示すIDであり、ユーザ情報に含まれる使用言語の情報や、ユーザが行った使用言語の設定に従って決定することができる。
【0075】
ステップS15の後は、ステップS16乃至S19の画面定義データ走査ループを、ステップS13又はS14で参照対象とした画面定義データに含まれる画面構成要素を1つずつ参照しながら、全ての画面構成要素を参照するまで繰り返す。すなわち、参照対象とした画面定義データテーブルに登録されている各画面構成要素について順次、画面定義データテーブルからその画面構成要素と対応するキーワードIDを取得し(S17)、ここで取得したキーワードIDをキーにステップS15で取得したキーワードテーブルから対応するキーワード文字列を取得して保持する(S18)処理を行う。
【0076】
その後、ステップS20に進んでGUI編集画面300に図11に示した検索表示部410の枠を表示する。この「枠」は、検索表示部410のうちキーワードリスト表示部412以外の、キーワードの内容に関わらず固定的な表示を行う部分である。そして、ステップS21で、ステップS18で保持したキーワード文字列のリストを、キーワードリスト表示部412に表示して、処理を終了する。
【0077】
一方、ステップS11で編集対象の画面構成要素が選択されていた場合、検索表示部410のキーワード入力部に表示させるキーワードの初期値とすべきキーワード文字列を取得すべく、ステップS22に進む。
そしてこの場合、ステップS22で、ステップS15の場合と同様に編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得し、ステップS23で適当な画面定義データから編集対象として選択されている画面構成要素のキーワードIDを取得する。その後、ステップS24で、ステップS18の場合と同様、キーワードIDと対応するキーワード文字列をキーワードテーブルから取得して保持する。
【0078】
そして、ステップS25で、ステップS20の場合と同様、検索表示部410の枠を表示し、ステップS26で、キーワード入力部411の初期値として、ステップS24で保持したキーワード文字列を表示し、処理を終了する。この場合、キーワードリスト表示部412には何も表示しなくてよい。
【0079】
以上の処理により、PC40は、関連要素検索ボタン370の押下に応じてGUI編集画面300に検索表示部410を表示させ、検索に用いるキーワードの入力を受け付ける状態に移行することができる。
またこのとき、編集内容表示部310において編集対象のGUI画面が選択されていれば、その画面に配置し得る画面構成要素の少なくとも1つと対応するキーワードを、検索に用いるキーワードの候補としてキーワードリスト表示部412に表示させることができる。また、編集内容表示部310において編集対象の画面構成要素が選択されていれば、その画面構成要素と対応するキーワードを、検索に用いるキーワードの候補としてキーワード入力部411に表示させることができる。さらに、キーワードとして、編集作業に使用している言語のキーワードを表示させることができる。
【0080】
なお、図13に示した処理は、ステップS11でYESの場合にはキーワードリストを表示する処理を実行しないようになっているが、この場合にも、編集対象として選択されている画面の画面定義データテーブルを参照対象として画面定義データ走査ループの処理を実行し、キーワードリストを表示するようにしてもよい。また、ステップS11でYESの場合には、検索表示部410を表示せずに、ステップS24で保持したキーワード文字列を用いて直ちに次に説明する検索処理を行って検索結果表示部420を表示するようにすることも考えられる。
【0081】
次に、図14及び図15に、図12に示した検索結果表示部420の表示処理のフローチャートを示す。この処理は、図11に示した検索実行ボタン413が押下された場合又は図10に示した関連要素検索ボタン370が押下された場合に実行するものである。
この場合、PC40のCPUは、まずステップS31で、検索に用いるキーワードを保持すると共に、ステップS32で、図13のステップS15の場合と同様、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。検索に用いるキーワードは、検索実行ボタン413が押下された場合には、キーワード入力部411に入力されていたキーワードであり、関連要素検索ボタン370が押下された場合には、押下時点で編集対象として選択されていた画面構成要素と対応するキーワードである。後者の場合、図13のステップS23及びS24と同様な処理で、検索に用いるキーワードを取得することができる。
【0082】
ステップS32の後は、ステップS33乃至S41で、入れ子式の3つのループ処理を行う。一番外側のループは、UIカスタマイズツール200により編集中のGUIを使用する各アプリを順次参照対象としてステップS34乃至S40の処理を実行するアプリケーション走査ループである。ここで参照対象とすべきアプリは、図3に示したアプリケーションのリストにより決定できる。
【0083】
次のループは、ステップS33で参照対象としたアプリが使用するGUIを示す各画面定義データを順次参照対象としてステップS35乃至S39の処理を実行する画面一覧走査ループである。ここで参照対象とすべき画面定義データは、図3に示した画面一覧データに従って決定できる。
【0084】
そして、最も内側のループは、ステップS34で参照対象とした画面定義データに登録されている各画面構成要素を順次参照対象としてステップS36乃至S38の処理を実行する画面定義データ走査ループである。
そして、画面定義データ走査ループでは、まずステップS36で、参照中の画面構成要素と対応するキーワード文字列を取得する。この取得は、参照中の画面定義データから、参照中の画面構成要素のキーワードIDを取得し、ステップS32で取得したキーワードテーブルからこのキーワードIDと対応するキーワード文字列を取得して行うことができる。
【0085】
次のステップS37では、ステップS36で取得したキーワード文字列を、ステップS31で保持した検索に用いるキーワードと比較する。そして、これが一致していれば、参照中の画面構成要素は、検索により抽出すべき画面構成要素であると判断できるため、ステップS38に進み、参照中の画面構成要素につき、アプリケーション識別子及び画面構成要素識別子を保持する。
そして、以上の3つの入れ子式のループ処理を全て終了すると、ステップS38で保持したデータに基づき、画面構成要素の抽出結果を示す検索結果表示部420の表示を行うべく、ステップS42に進んで図15に示す部分の処理を行う。
【0086】
そしてここでは、まずステップS42で検索結果表示部420の枠を表示する。この「枠」は、検索結果表示部420のうち抽出リスト表示部421以外の、抽出された画面構成要素の内容に関わらず固定的な表示を行う部分である。
そして、ステップS43で、編集作業中のユーザの表示言語IDと対応する名称テーブルを取得する。その後、ステップS38で識別子を保持した全てのアプリケーション、すなわち検索により抽出された画面構成要素が1つでも属するアプリケーションを参照するまで、その各アプリケーションを順次参照してステップS44乃至S50の検索結果走査ループAの処理を行う。なお、同じアプリについて複数回アプリケーション識別子が保持されていたとしても、ここで参照対象とするのは1回のみである。
【0087】
この検索結果走査ループAでは、まずステップS45で、アプリケーション識別子と編集作業中のユーザの表示言語IDとに基づいて、参照中のアプリケーションの名称を示す文字列を図示しないテーブルから取得し、これを抽出リスト表示部421に表示する。その後、ステップS38でデータを保持した画面構成要素のうち、参照中のアプリケーションで用いる画面構成要素に関する表示を行うべく、これらの画面構成要素を順次参照してステップS46乃至S49の検索結果走査ループBの処理を行う。
【0088】
この検索結果走査ループBでは、ステップS47で、画面構成要素識別子と編集作業中のユーザの表示言語IDとに基づいて、参照中の画面構成要素の名称を示す文字列を名称テーブルから取得し、必要に応じてこれを加工して抽出リスト表示部421に表示する。そして、ステップS48で、表示した画面構成要素と対応するチェックボックスを表示する。ここでは、ステップS48の加工として、名称テーブルに登録されている名称1の文字列と名称2の文字列とを、「:」を挟んで連結する処理を行うようにしている。
そして、以上の検索結果走査ループA,Bが終了すると、図12及び図13に示した処理は終了する。
【0089】
以上の処理により、PC40は、検索実行ボタン413又は関連要素検索ボタン370の押下に応じて、ユーザにより指定されたキーワードと同じキーワードが対応付けられた画面構成要素のリストを、図10に示した検索結果表示部420に表示することができる。このことによる効果は、図12の説明で述べた通りである。
なお、ステップS37でのキーワードの比較について、完全一致の場合だけでなく、部分一致であっても、キーワードが一致したと判断するようにしてもよい。
【0090】
〔第2の実施形態:図16乃至図28〕
次に、この発明の画面編集装置の第2の実施形態について説明する。
この実施形態が第1の実施形態と異なる点は、主に、画面構成要素と対応するキーワードとして互いに上位/下位の関係を有する複数のキーワードを設定できるようにした点と、画面構成要素を検索する範囲を指定できるようにした点である。また、この第2の実施形態の画面編集装置と、その画面編集装置で編集した操作画面を表示させる画像処理装置は、キーワードが複数になったことに伴い、取り扱うデータの形式に差はあるものの、ハードウェア構成及び基本的な機能構成は、第1の実施形態の場合と同様である。
そこで、第2の実施形態については、第1の実施形態と異なる点を中心に説明する。また、第1の実施形態と実質的に同じ構成要素には、同じ符号を用いる。
【0091】
まず、図16乃至図21を用いて、上位/下位の関係を有する複数のキーワードの用途について説明する。
図16は、画像処理装置10がドキュメントボックスアプリで使用する画面のうち、印字画面より下位の画面の遷移例を示す図である。図17乃至図21は、図16に示した各画面の表示例を示す図である。
【0092】
図17に示す印字画面610は、ドキュメントボックスアプリにより蓄積文書の印刷を行う際に、蓄積文書に付加して印刷する書誌情報やスタンプ等の内容を設定するための画面のうち、最上位の画面である。そして、この画面において、この画面に配置された画面構成要素である、機密管理ナンバリング,スタンプ印字,ユーザスタンプ印字,日付印字,ページ印字のボタンを押下することにより、それぞれの印字内容についてのより詳細な設定を行うための下位の画面に移行することができる。
【0093】
図16は、このような印字画面610をスタートとする画面遷移の一部を示す図であり、この図では、四角の中に画面の名称を示し、その画面において、矢印の脇に示したボタンが押下された場合に、矢印の先の画面に移行することを示している。例えば、図16の遷移例では、印字画面610において日付印字ボタン611を押下した場合には、表示が図18に示す日付印字画面620に移行することを示している。
【0094】
この日付印字画面620は、文書に付加する日付の書式や位置等を設定するための画面であり、画面上のボタンを押下することにより、項目毎に詳細な設定を行うためのさらに下位の画面に移行することができる。例えば、図16に示した通り、書式の変更ボタン621を押下すると、日付の書式を設定するための図19に示す日付の書式画面630に移行し、印字色ボタン622を押下すると、日付の印字色を設定するための図20に示す印字色変更画面640に移行し、変更ボタン623を押下すると、日付の印字位置を設定するための図21に示す印字位置画面650に移行する。
【0095】
そして、例えば印字色変更画面640には、設定可能な印字色と対応するイエロー,レッド,シアン,マゼンタ,グリーン,ブルー,ブラックの7つのボタンが配置され、これらを押下することにより、日付の印字色を設定することができる。
また、日付の印字を全ページに行うか、先頭ページのみ行うかの設定は、日付印字画面620において、全ページボタン624と先頭ページのみボタン625により行うことができる。
【0096】
ここで、図22に、以上の図17乃至図21に示した画面に設けたボタン相互の関係をベン図として示す。
この図において、最も外側の集合610aは、図17乃至図21に示した画面の中で最上位の印字画面610に関係する画面構成要素の集合を示す。また、その内側に記載した5つの楕円がそれぞれ、印字画面610に配置した機密管理ナンバリング,スタンプ印字,ユーザスタンプ印字,日付印字,ページ印字のボタン及び、そのボタンの押下に応じて表示される下位の画面に関係する画面構成要素の集合を示す。ただし、スペースの都合上、日付印字ボタン611に関する集合620aのみ、集合内の要素を図示している。
【0097】
集合620aの要素としては、まず、下位の画面へ移行するための、書式の変更ボタン621,印字色ボタン622,変更ボタン623と対応する集合630a,640a,650aがある。そして、これらの集合の要素は、ボタンの押下に応じて移行する画面に配置される画面構成要素である。また、集合620aの要素には、印字ページに関する設定を行うための全ページボタン624及び先頭ページのみボタン625と対応する要素624a,625aもある。
【0098】
すなわち、各画面と対応する集合には、その画面への移行を指示するためのボタンと、その画面上に配置されるボタンとが含まれる。また、画面単位でなく、機能単位でボタン群が1つの集合を構成すると考えることもでき、ここでは、全ページボタン624及び先頭ページのみボタン625のように、1つの画面内に、特定の機能に関する設定を行うためのボタン群が配置される場合、それらも独自の集合を構成すると考えている。
また、図面を簡単にするため、図22には、画面の移行やパラメータの値の設定を行うためのボタンのみを示したが、単なるメッセージや、OK,戻る等のボタンといった他の画面構成要素についても、配置される画面と対応する集合の要素であると考えることができる。
【0099】
ところで、第1の実施形態では、各画面構成要素について、1つのキーワードを対応付けていた。しかし、この手法では、例えば、あるボタンにそのボタンにより設定するパラメータの値に応じたキーワードを対応付けてしまうと、そのパラメータの値が共通するボタンは容易に検索できるものの、ボタンにより設定するパラメータの項目が共通するボタンの検索は困難であるといった事態が生じる。
【0100】
例えば、色数を指定するボタンにつき、設定するパラメータの値に着目して、「自動カラー選択」,「フルカラー」,「2色」,「単色」といったキーワードを対応付けてしまうと、これらのボタンと対応するキーワードは全て別々のものになってしまうため、「色数を指定するボタン」のような、設定するパラメータの項目という括りでは検索を行うことができない。
そこで、この第2の実施形態では、図22に示したような画面構成要素相互の関係を利用して、各画面構成要素に、広い括りから狭い括りまで、互いに上位/下位の関係を有する複数のキーワードを対応付けるようにしている。
【0101】
図22の例では、印字機能に関連する集合610aに属する画面構成要素には、最上位の第1レベルのキーワードとして「印字」を対応付け、その中で、日付印字機能に関連する集合620aに属する画面構成要素には、次の第2レベルのキーワードとして「日付印字」を対応付けることが考えられる。また、同様に、印字色の設定に関連する集合640aに属する画面構成要素には、次の第3のレベルのキーワードとして「印字色」を対応付け、さらに、印字色変更画面640に配置される各画面構成要素には、「イエロー」,「レッド」等、特定の画面構成要素を示す最下位の第4のレベルのキーワードを対応付けることが考えられる。
【0102】
このような規則に従って対応付けるキーワードを定めると、例えば印字色変更画面640中のレッドボタン641については、上位から順に、「印字」,「日付印字」,「印字色」,「レッド」の4つのキーワードが対応付けられることになる。
また、日付印字画面620に配置される印字色ボタン622について同様な規則でキーワードを対応付けると、上位から順に、「印字」,「日付印字」,「印字色」の3つのキーワードが対応付けられる。第4レベルのキーワードは特に必要ないため、何も用意しなくてよい。しかし、印字色変更画面640内の画面構成要素と区別するため、第3レベルと同じ「印字色」のキーワードを対応付けることも考えられる。このように、対応付け可能な全てのレベルのキーワードを対応付けることは必須ではない。
【0103】
また、図22では日付印字機能についてのみ内容を詳しく示したが、例えばスタンプ印字機能に関する画面にも印字色の設定を行うための画面があれば、その画面を表示させるためのボタンや、その画面に配置されるボタンについても、第3レベルのキーワードとして日付印字機能の場合と同様な「印字色」のキーワードを対応付けるとよい。このようにしておけば、第3レベルのキーワード「印字色」で画面構成要素の検索を行うことにより、上位の機能の違いを気にせず、印字色の設定に関連する画面構成要素を抽出することができる。
【0104】
また、図22に示した印字機能以外の機能に関する画面に配置する画面構成要素についても、同様に階層的なキーワードを定めることができるが、この場合にも、下位のキーワードについて、他の機能と共通のものを用いることにより、機能横断的な抽出を可能とすることができる。
なお、このように定めたキーワードは、第1の実施形態の場合と同様、画面定義データ中に記述しておけばよい。また、画面定義データ中への記述はキーワードIDとして行い、言語毎にキーワードテーブルを用意してキーワードIDをキーワード文字列に変換できるようにするとよいことも、第1の実施形態の場合と同様である。
【0105】
図23に、第2の実施形態における画面定義データの例を示す。
この図には、画面定義データを、XML(Extensible Markup Language)形式で記述した例を示している。
そして、図に示した中で最上位のwindow要素1つがGUI1画面分のデータを示す。window要素の属性については、id属性の値は、GUI画面の識別情報を、function属性の値は、そのGUI画面がどのアプリで使用される画面であるかを、shape属性の値は、GUI画面の背景として使用する画像データのファイル名を示す。
【0106】
また、window要素の子要素であるitem要素1つが、その画面に配置可能な画面構成要素1つ分のデータを示す。そして、item要素の属性の値が、図4に示した画面定義データテーブルにおける各設定項目の内容を示し、id属性が画面構成要素の「識別子」を、type属性が「種別」を、x属性及びy属性が「座標」を、w属性及びh属性が「サイズ」を、shape属性が「形状」を、font属性が「フォントサイズ」を、visible属性が「表示有無」を、それぞれ示す。visible属性については、「true」が「表示」を、「false」が「非表示」を示す。
【0107】
また、2番目のitem要素が有するcustomize属性の値は、visible属性の値を「false」に設定可能であるか否か、すなわち画面構成要素を非表示できるか否かを示し、「false」は、これが不可であることを示す。一部の画面構成要素については、非表示にしてしまうとGUIの動作に不都合が生じることがあるため、このような画面構成要素を常に「表示」にしておけるように、このcustomize属性を設けている。図の例では、2番目のitem要素はOKボタンを示すものであり、これを非表示にしてしまうと、設定内容を確定できなくなってしまい、GUIの動作に不都合が生じると考えられるため、このvisible属性の値を「false」に設定している。
【0108】
また、キーワードIDは、item要素の子要素であるkeyword要素の属性として記述している。図23に示した例では、4つのレベルのキーワードを設定可能であり、それぞれのレベルのキーワードのIDを、kw1,kw2,kw3,kw4の属性値として記述できる。あるレベルのキーワードを設定しない場合には、単に対応する属性値を記述しなければよい。
【0109】
図24には、キーワードテーブルの例を示す。
このキーワードテーブルも、画面定義データと同様、XML形式で記述することができる。そしてここでは、図中で最上位のmessage_list要素1つが、1つのキーワードテーブルの内容を示し、language属性の値が、このテーブルがどの言語のキーワード文字列を記述したものであるかを示す。また、message_list要素の子要素であるmessage要素1つが、1つのキーワードに関するデータを示す。すなわち、message要素のid属性の値がキーワードIDを、string属性の値がこれと対応するキーワード文字列を、それぞれ示す。
【0110】
なお、キーワードテーブルには、キーワードIDがどのレベルのキーワードを示すものかを記述する必要はない。また、同じキーワードIDが、複数の異なるレベルのキーワードを示すために使われていても、全く問題ない。
また、図示は省略するが、名称テーブルも、キーワードテーブルと同様にXML形式で記述することができる。例えば、message要素のid属性の値が画面構成要素IDを、string属性の値がこれと対応する名称の文字列を、それぞれ示すようにすればよい。図8,図9に示したように名称を複数登録する場合には、string1属性,string2属性等として、これらを記載できるようにすればよい。
【0111】
次に、図25に、第2の実施形態における検索表示部の表示例を示す。
第2の実施形態においても、GUI編集画面300において検索タブ401が選択された場合にPC40が検索表示部の表示を行うことは第1の実施形態と同様であるが、その内容は、図25に示したようなものとしている。
すなわち、検索表示部410′には、検索開始の指示を受け付けるための検索実行ボタン413の他には、検索範囲設定部430,各レベルのキーワード選択部441〜444,検索条件設定部451を設けている。
【0112】
このうち、検索範囲設定部430は、画面構成要素の検索を行う際の検索範囲の指定を受け付ける部分であり、アプリ毎にチェックボックスを設け、そのオン/オフにより、各アプリで使用するGUIのデータを検索範囲に含めるか否かを設定できるようにしている。どのアプリについてチェックボックスを設けるかは、例えば、編集対象としてPC40に読み込んである画面定義データにつき、window要素のfunction属性の値をサーチして決定することができる。
【0113】
キーワード選択部441〜444は、検索に使用する第1〜第4レベル(項目1〜項目4)のキーワードの選択を受け付ける部分であり、項目4(第4レベル)について選択を受け付けるキーワード選択部444について示しているように、プルダウンメニュー445により、キーワードの選択を受け付けるものである。プルダウンメニューに選択肢としてどのようなキーワードを表示するかについては、その表示処理の説明において後述する。
【0114】
検索条件設定部451は、検索の際にどのレベルのキーワードを考慮するかの設定を受け付ける部分である。検索条件設定部451はテキストボックスであり、ユーザが適宜に論理式を入力することができる。図では、項目1乃至項目4の全てのキーワードについてAND検索を行う設定がなされた例を示している。また、テキストボックスではなく、例えば、アンド検索に使用するキーワードの項目の選択をチェックボックス等により受け付ける形式とすることも考えられる。
【0115】
そして、このような検索表示部410′において、ユーザにより検索範囲,キーワード及び検索条件の設定がなされた後、検索実行ボタン413が押下された場合、PC40のCPUは、編集対象として読み込んである全ての画面データを検索し、指定された条件に一致する画面構成要素を抽出して、第1の実施形態で図12を用いて説明したような検索結果表示部420に表示する。この画面については、第1の実施形態の場合と同じ形式のものを用いることができる。
【0116】
次に、PC40のCPUが以上説明してきた画面構成要素の抽出に関する機能を実現するために実行する処理について説明する。ここで説明する処理も全て、PC40のCPUが、UIカスタマイズツール200の機能を実現するためのアプリケーションプログラムを実行することにより行うものである。
まず、図26に、検索表示部410′におけるプルダウンメニューの表示処理のフローチャートを示す。この処理は、図25に示した検索表示部410′においてプルダウンメニューを開くボタンが押下された場合に実行するものである。
【0117】
この処理においては、まずステップS61で、どの項目のキーワード選択部においてプルダウンメニューを開くボタンが押下されたかを判断する。そして、これが項目1〜4のいずれであるかに応じて、ステップS62〜S65のいずれかに進み、検索項目及び参照項目を設定する。
【0118】
具体的には、項目1のキーワード選択部441においてボタンが押下された場合には、ステップS62で検索条件を「なし」に設定すると共に、参照項目を「項目1」に設定する。項目2のキーワード選択部442においてボタンが押下された場合には、ステップS63で検索条件を「項目1」に設定すると共に、参照項目を「項目2」に設定する。項目3のボタンが押下された場合には、ステップS64で検索条件を「項目1&項目2」に設定すると共に、参照項目を「項目3」に設定する。項目4のボタンが押下された場合には、ステップS65で検索条件を「項目1&項目2&項目3」に設定すると共に、参照項目を「項目4」に設定する。すなわち、ボタンが押下されたキーワード選択部と対応する項目を参照項目に、それより上位の項目を検索条件に設定する。
【0119】
そして、ステップS62〜S65の後は、ステップS66乃至S71で、入れ子式の2つのループ処理を行う。
外側のループは、UIカスタマイズツール200により編集中のGUIのデータに含まれる全ての画面定義データを順次参照対象としてステップS67乃至S70の処理を実行する画面一覧走査ループである。
【0120】
内側のループは、ステップS66で参照対象とした画面定義データに含まれる各画面構成要素を順次参照対象としてステップS68及びS69の処理を実行する画面定義データ走査ループである。
この画面定義データ走査ループでは、まずステップS68で、参照中の画面構成要素に関する検索項目の全てのキーワードIDが、現在その項目について選択されているキーワードのキーワードIDと一致するか否か判断する。この検索項目は、ステップS62〜S65で設定した項目であり、また、各項目について選択されているキーワードのキーワードIDは、プルダウンメニューによりキーワード文字列が選択された際に、キーワード列と対応付けて記憶しておけばよい。また、検索項目が「なし」の場合、ステップS68の判断は常にYESとし、検索項目についてキーワードが未選択の場合は、その項目についてはキーワードIDが常に一致しているとする。
【0121】
そして、ステップS68でYESの場合、ステップS69に進み、参照中の画面構成要素に関する参照項目のキーワードIDを保持し、ステップS70に進む。NOの場合は、そのままステップS70に進む。
これらの2つの入れ子式のループ処理を全て完了すると、UIカスタマイズツール200によりGUIに配置可能な画面構成要素のうち、ボタンが押下された項目より上位の項目について現在選択されているものと同じキーワードが設定されている全ての画面構成要素につき、ボタンが押下された項目のキーワードIDを保持することができる。
【0122】
これらの処理の後、次のステップS72では、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。表示言語IDについては、図13のステップS15の場合と同様に把握できる。そしてその後、ステップS73乃至S75のキーワードID走査ループを、ステップS69で保持した全種類のキーワードIDを順次参照しながら繰り返す。すなわち、ステップS72で取得した文字列変換テーブルから参照中のキーワードIDと対応するキーワードIDを取得して保持する。なお、ステップS69では同じキーワードIDが複数回保持される場合もあるが、ステップS73で参照対象とするのは、1種類につき1回のみである。
【0123】
そして、このキーワードID走査ループの処理により、プルダウンメニューに選択肢として表示すべきキーワード文字列のリストを作成できるため、次のステップS76で、そのリストに従って、ボタンが押下された項目のキーワードの選択を受け付けるプルダウンメニューを表示して、処理を終了する。
【0124】
以上の処理により、上位から順に検索に使用するキーワードを選択していく場合に、既に選択したキーワードに関連する下位のキーワードを容易に選択できるようなプルダウンメニューを自動的に作成でき、検索に使用する複数のキーワードを効率よく選択可能とすることができる。特に、全キーワードについてアンド検索を行う場合には、段階的に検索対象を絞り込めるようなキーワードの選択が可能となる。
【0125】
次に、図27及び図28に、図25に示した検索表示部410′において検索実行が指示された場合に実行する検索結果の表示処理のフローチャートを示す。この処理は、図25に示した検索実行ボタン413が押下された場合に実行するものであり、検索結果の表示形式は、第1の実施形態で図12を用いて説明したものと同じである。
【0126】
この場合、PC40のCPUは、まずステップS81で、検索表示部410′において受け付けた、検索対象のアプリ、検索に用いる各項目のキーワード及び検索条件の指定内容を保持すると共に、ステップS82で、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。表示言語IDについては、図13のステップS15の場合と同様に把握できる。
その後、ステップS83〜S91で、入れ子式の3つのループ処理を行う。一番外側のループは、ステップS81で保持した検索対象の各アプリを順次参照対象としてステップS84乃至S90の処理を実行するアプリ走査ループである。
【0127】
次のループは、ステップS83で参照対象としたアプリが使用する各画面定義データを順次参照対象としてステップS85乃至S89の処理を実行する画面一覧走査ループである。ここで参照対象とすべき画面定義データは、図3に示した画面一覧データにより決定できる。
そして、最も内側のループは、ステップS84で参照対象とした画面定義データに含まれる各画面構成要素を順次参照対象としてステップS86乃至S88の処理を実行する画面定義データ走査ループである。
【0128】
そして、画面定義データ走査ループでは、まずステップS86で、参照中の画面構成要素と対応付けられている各項目のキーワードを取得する。この取得は、参照中の画面定義データから、参照中の画面構成要素と対応するキーワードIDを取得し、ステップS82で取得したキーワードテーブルからこのキーワードIDと対応するキーワード文字列を取得して行うことができる。
【0129】
次のステップS87では、ステップS86で取得したキーワードを、ステップS81で保持した検索に用いるキーワードと項目毎に比較する。そして、ステップS81で保持した検索条件が示す項目について、これらが一致していれば、参照中の画面構成要素は、検索により抽出すべき画面構成要素であると判断できる。そこでこの場合、ステップS88に進み、参照中の画面構成要素につき、どのアプリが使用する画面に含まれるかを示すアプリケーション識別子(window要素のfunction属性)、および画面構成要素自身の識別子である画面構成要素識別子(item要素のid属性)を保持する。
【0130】
そして、以上の3つの入れ子式のループ処理を全て終了すると、ステップS88で保持したデータに基づき、画面構成要素の抽出結果を示す検索結果表示部420の表示を行うべく、ステップS92に進んで図28に示す部分の処理を行う。
そしてここでは、まずステップS92で検索結果表示部420の枠を表示する。この「枠」は、検索結果表示部420のうち抽出リスト表示部421以外の、抽出された画面構成要素の内容に関わらず固定的な表示を行う部分である。
その後、ステップS93で、編集作業中のユーザの表示言語IDと対応する名称リストを取得する。
【0131】
次に、ステップS94〜S100で、入れ子式の2つのループ処理を行う。外側のループは、ステップS88で識別子を保持した全てのアプリを順次参照対象としてステップS95乃至S99の処理を実行する検索結果走査ループAである。なお、同じアプリについて複数回アプリケーション識別子が保持されていたとしても、ここで参照対象とするのは1回のみである。
そして、ステップS95では、参照中のアプリの名称文字列を、アプリケーション識別子と編集作業中のユーザの表示言語IDとに基づいて図示しないテーブルから取得し、検索結果表示部420のうち抽出リスト表示部421に表示する。
【0132】
その後、ステップS96乃至S99の検索結果走査ループBで、ステップS88で識別子を保持した画面構成要素のうち、対応するアプリケーション識別子が参照中のアプリと一致するものを順次参照対象としてステップS97及びS98に示す処理を実行する。すなわち、ステップS97で、参照中の画面構成要素の名称を示す文字列を、画面構成要素識別子と、ステップS93で取得した文字列テーブルとに基づいて取得し、必要に応じてこれを加工して、抽出した画面構成要素を表す文字列として抽出リスト表示部421に表示する。また、ステップS98で、その表示した画面構成要素と対応するチェックボックスを抽出リスト表示部421に表示する。
そして、ステップS94〜S100のループ処理が全て終了すると、図28の処理は終了する。
【0133】
以上の処理により、PC40は、検索実行ボタン413の押下に応じて、ユーザにより指定された複数のキーワード及び検索条件に従い、指定されたキーワードと同じキーワードが対応付けられた画面構成要素のリストを表示することができる。画面構成要素がどのアプリが使用する画面に配置されるものかに応じて、画面構成要素を分類して表示することができる。
この実施形態においては、このように、各画面構成要素に、上位/下位の関係を有する複数のキーワードを設定できるようにしているため、体系付けられたキーワードによる検索が可能となり、目的の画面構成要素の詳細な絞り込みを容易に行うことができる。
【0134】
〔変形例:図29〕
以上で実施形態の説明を終了するが、この発明において、装置の構成、具体的な処理内容、表示する画面の内容や用途、データの形式等が、以上説明してきた実施形態において具体的に説明したものに限られないことは、もちろんである。
例えば、画面構成要素の検索結果を、図12に示した検索結果表示部に代えて、図11に示した編集内容表示部310の脇に表示させるようにしてもよい。
【0135】
図29に、この構成を採用した場合の、検索結果表示画面の例を示す。
この例では、画面構成要素の検索結果を、GUI画面に対する編集操作を受け付ける編集内容表示部310の脇に、抽出リスト380として表示している。このリストの書式及びリストの表示に必要な処理は、上述の各実施形態で述べた抽出リスト表示部421の場合と同様でよい。図27の例では、表示スペースの都合上、図8に示した「名称2」のみで、抽出された画面構成要素の表示を行っているが、「名称1」も用いた表示を行うことももちろん可能である。
【0136】
また、抽出リスト380の画面構成要素はマウスのクリック等により選択可能であり、PC40は、カーソル381により選択された画面構成要素を示す。またこのとき、抽出リスト380において選択された画面構成要素を、編集内容表示部310において編集操作を受け付ける画面構成要素として選択し、その画面構成要素をユーザが特定できるように強調する表示を行う。例えば、符号Aで示すように、選択された画面構成要素を枠線で囲う表示を行う。
また、抽出リスト380において選択された画面構成要素が現在表示中のGUI画面に表示されていないものであったり、現在タブにより選択されているアプリと異なるアプリで使用されるものであったりした場合には、GUI画面やタブの選択も、抽出リスト380において選択された画面構成要素を含むものに切り換える。
【0137】
このような表示を行うようにすれば、キーワード検索により抽出された画面構成要素がどんな画面に配置されるどのような画面構成要素かをユーザが容易に認識できる上、単にリストから画面構成要素を選択するだけで、直ちに編集内容表示部310において抽出された画面構成要素に関する編集操作を行うことができるため、効率的な編集操作が可能となる。
【0138】
なお、選択された画面構成要素を強調する表示としては、枠囲いの他、点滅させる、色を変える、濃度を変える、ハッチングを付す等、種々のものが考えられる。また、抽出リスト表示部421においていずれかの画面構成要素を示す文字列がクリックされた場合に、その画面構成要素が選択された状態の編集内容表示部310及び抽出リスト380の表示に移行するようにしてもよい。
【0139】
また、抽出リスト380において選択された画面構成要素だけでなく、抽出された画面構成要素のうち、選択された画面構成要素と同じ画面に配置される画面構成要素も、同様に強調して表示してもよい。あるいは、抽出リスト380における画面構成要素と無関係に、編集内容表示部310へGUI画面のプレビューを表示させる場合に、その画面に表示される画面構成要素のうち、キーワード検索により抽出された画面構成要素を強調して表示するようにしてもよい。
【0140】
また、抽出リスト380の表示につき、抽出した画面構成要素がどのGUI画面に配置されるものであるかがわかるように、アプリ毎だけでなく、GUI画面毎に分けてリストを表示するようにしてもよい。第2の実施形態のように、各画面構成要素に系統的に複数のキーワードを設定している場合には、画面構成要素の名称に代えて、またはこれに加えて、抽出結果をキーワードそのものを用いて表示したり、さらに、抽出結果を上位のキーワードについてソートして表示し、かつ上位から下位まで、複数のキーワードを並べて表示することによっても、画面構成要素がどの画面に属するものかを分かり易くすることができる。画面構成要素の種別を、キーワードと合わせて表示するようにしてもよい。
【0141】
また、キーワードにつき、各言語のキーワード文字列を直接画面定義データ内に記述することは妨げられない。逆に、キーワードIDを画面定義データ内に記述せず、これとは別のテーブルに記載することも考えられる。この場合、例えば、画面構成要素の識別子と、キーワードID又はキーワード文字列とを対応付けるテーブルを別途用意すればよい。
【0142】
また、この発明を、画像処理装置以外の装置で用いるGUIの編集を行う画面編集装置に適用してもよいことはもちろんである。例えば、この発明は、ネットワーク家電,自動販売機,医療機器,電源装置,空調システム,ガス・水道・電気等の計量システム,自動車,航空機,汎用コンピュータ等の任意の電子装置について、その装置の備える表示器に表示させる操作画面を編集する装置として、実現できる。
また、画面に表示させる操作部の構成も、ボタンに限られない。
【0143】
また、この発明の記録媒体は、コンピュータにハードウェアを制御させて上述したような画面編集装置として機能させるためのプログラムを記録した記録媒体である。このような記録媒体からこのプログラムをRAMに読み出させてCPUに実行させることにより、上述した実施形態や変形例と同様の効果を得ることができる。また、このようなプログラムを、記録媒体の配布によらず、ダウンロード等により提供することも可能である。
また、以上述べてきた各実施形態の構成及び変形例は、矛盾しない範囲で適宜組み合わせて適用することも可能である。
【産業上の利用可能性】
【0144】
以上説明してきたように、この発明の画面編集装置又は画面編集方法によれば、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することができる。
従って、この発明を適用することにより、表示器に表示させる画面を容易にカスタマイズ可能な編集環境を提供することができる。
【図面の簡単な説明】
【0145】
【図1】この発明の第1の実施形態である画面編集装置により編集した画面データに基づいて画面を表示する装置の例である画像処理装置のハードウェア構成を示すブロック図である。
【図2】図1に示した画像処理装置及びPCの機能のうち、GUIの表示及びカスタマイズに関する機能の構成を示す、機能ブロック図である。
【図3】図1に示した画像処理装置が使用するGUIの内容を規定するデータセットの構成を示す図である。
【図4】図3に示した画面定義データの内容をより詳細に示す図である。
【図5】図4に示した画面定義データに従って表示されるGUI画面の例を示す図である。
【0146】
【図6】この発明の実施形態である画面編集装置が使用するキーワードテーブルの例を示す図である。
【図7】その別の例を示す図である。
【図8】この発明の実施形態である画面編集装置が使用する名称テーブルの例を示す図である。
【図9】その別の例を示す図である。
【図10】図2に示したPCのUIカスタマイズツールがGUI画面の編集操作を受け付けるためのGUI編集画面の表示例を示す図である。
【0147】
【図11】UIカスタマイズツールがキーワードを用いた画面構成要素の検索及び抽出の指示を受け付けるための画面の表示例である。
【図12】同じくキーワードを用いた画面構成要素の検索結果を表示する画面の表示例を示す図である。
【図13】図2に示したPCのCPUが実行する、図11に示した検索表示部の表示処理のフローチャートである。
【図14】同じく図12に示した検索結果表示部の表示処理のフローチャートである。
【図15】その続きのフローチャートである。
【0148】
【図16】画像処理装置がドキュメントボックスアプリで使用する画面のうち、印字画面より下位の画面の遷移例を示す図である。
【図17】図16に示した印字画面の内容を示す図である。
【図18】図16に示した日付印字画面の内容を示す図である。
【図19】図16に示した書式画面の内容を示す図である。
【図20】図16に示した印字色変更画面の内容を示す図である。
【0149】
【図21】図16に示した印字位置画面の内容を示す図である。
【図22】図17乃至図21に示した画面に設けたボタン相互の関係を示す図である。
【図23】この発明の第2の実施形態で用いる画面定義データの例を示す図である。
【図24】同じくキーワードテーブルの例を示す図である。
【図25】この発明の画面編集装置の第2の実施形態であるPCが表示する検索表示部の例を示す図である。
【0150】
【図26】そのPCのCPUが実行する、検索表示部におけるプルダウンメニューの表示処理のフローチャートである。
【図27】同じく検索表示部において検索実行が指示された場合に実行する検索結果の表示処理のフローチャートである。
【図28】その続きのフローチャートである。
【図29】この発明の変形例において画面編集装置であるPCが画面構成要素の検索結果を表示する画面の例を示す図である。
【符号の説明】
【0151】
10:画像処理装置、11:CPU、12:ROM、13:RAM、14:NVRAM、
15:パネルI/F、16:エンジンI/F、17:通信I/F、18:操作パネル、
19:エンジン部、20:システムバス、30:ネットワーク、40:PC、110:制御部、111:通信手段、112:画面定義データ管理手段、113:画面生成手段、114:個人認証管理手段、120:記憶部、121:画面定義データ記憶手段、122:認証データ記憶手段、200:UIカスタマイズツール、201:通信手段、202:画面定義データ入出力手段、203:画面構成要素抽出手段、210:カスタマイズ手段、300:GUI編集画面、310,310′:編集内容表示部、370:関連要素検索ボタン、410:検索表示部、411:キーワード入力部,412:キーワードリスト表示部,413:検索実行ボタン、420:検索結果表示部、421:抽出リスト表示部、422:一括非表示ボタン
【技術分野】
【0001】
この発明は、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法及び、コンピュータを上記のような画面編集装置として機能させるためのプログラムに関する。
【背景技術】
【0002】
従来から、表示器にGUI(グラフィカル・ユーザ・インタフェース)の画面を表示させ、そのGUIにおいて、種々のデータの表示や操作の受付を行うことが知られている。
そして、GUIの設計は、ユーザからの操作を受け付けるためのボタンや、設定内容を表示するための文字表示枠等の、種々の部品を画面上に配置して行うことができる。また、近年では、メーカーが提供するGUIをそのまま使用するのではなく、ユーザが画面の内容を編集して自身の用途に合ったGUIを作成する、カスタマイズに関する要望が多くある。
【0003】
このようなGUIのカスタマイズに関する技術としては、例えば特許文献1乃至3に記載のものが知られている。
特許文献1には、パネルカスタマイズモードを選択することにより、液晶表示器に表示させている表示画面中の機能キーにつき、表示/非表示,位置,サイズ等を変更することができる画像形成装置が記載されている。
特許文献2には、ユーザ端末からサーバにアクセスして電子機器の操作画面を編集できるようにする技術が記載されている。また、この編集の例として、操作ボタンの拡大縮小、切断、合成、位置変更、あるいはボタンの機能を殺す(消してしまう)、等が挙げられている。
特許文献3には、画面レイアウトが設定されたHTMLファイルに対して修正を行うことによりGUIのカスタマイズを可能とした産業用機器が記載されている。
【特許文献1】特開2005−45370号公報
【特許文献2】特開2003−150971号公報
【特許文献3】特開2003−5825号公報
【発明の開示】
【発明が解決しようとする課題】
【0004】
ところで、装置のメーカーがGUIのカスタマイズ機能を提供しようとする場合、予めユーザのニーズを予測して、そのニーズに合ったGUIをデザインして雛形として提供することは可能である。しかし、ユーザのニーズがその雛形と合わない場合には、ユーザは、ボタンの位置を移動させたり、表示/非表示を切り替えたりというように、自分でGUIの内容を変更する操作を行わなければならない。このため、装置が広範な設定項目を有し、それに伴って多数のGUI画面を有する場合、ユーザが所望の内容の画面を編集するには膨大な労力を要する場合もある。
【0005】
例えば、コピー、プリント、ファクシミリ通信等の機能を有するデジタル複合機(MFP)において、ユーザが片面印刷による紙資源の無駄を無くしたいと考え、片面印刷をできなくしようとする場合、GUIのカスタマイズにより片面印刷に関するボタンを全て非表示にすることにより、この意図を実現できるものの、片面印刷に関するボタンは、数十〜数百画面に及ぶGUIの各所に点在しているため、それらを1つ1つ探して非表示に設定するには非常に手間がかかるし、また、片面印刷に関するボタンを全て漏れなく非表示に設定することも難しい、といった具合である。
【0006】
この発明は、このような問題を解決し、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することを目的とする。
【課題を解決するための手段】
【0007】
この発明の画面編集装置は、上記の目的を達成するため、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置において、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、編集対象の画面構成要素の選択を受け付ける選択受付手段と、その選択受付手段により選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手段と、キーワードの入力を受け付けるキーワード受付手段と、そのキーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手段とを設けたものである。
【0008】
このような画面編集装置において、上記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段を設け、上記受付手段に、上記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段を設けるとよい。
さらに、上記キーワード記憶手段を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段とし、上記抽出手段を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手段とするとよい。
【0009】
あるいは、上記編集対象として選択されている画面構成要素と対応するキーワードを用いて、そのキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する第2の抽出手段を設けるとよい。
また、上記の各画面編集装置において、上記抽出手段が抽出した画面構成要素のうち、ユーザが選択した任意の数の画面構成要素につき、一括して上記表示設定を行う手段を設けるとよい。
あるいは、上記抽出手段に、抽出した画面構成要素を、上記操作画面のプレビュー中で強調して表示する手段を設けるとよい。
【0010】
また、この発明の画面編集方法は、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法であって、コンピュータが、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手順と、編集対象の画面構成要素の選択を受け付ける選択受付手順と、その選択受付手順で選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手順と、キーワードの入力を受け付けるキーワード受付手順と、そのキーワード受付手順で受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手順とを実行するものである。
【0011】
このような画面編集方法において、上記コンピュータが、上記キーワード記憶手順で記憶したキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手順を実行し、上記受付手順を、上記表示手順で表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手順とするとよい。
さらに、上記キーワード記憶手順を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手順とし、上記抽出手順を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手順とするとよい。
【0012】
また、この発明のプログラムは、コンピュータを、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置として機能させるためのプログラムであって、上記コンピュータを、上記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、編集対象の画面構成要素の選択を受け付ける選択受付手段と、その選択受付手段により選択された画面構成要素について上記操作画面に表示させるか否かを定める表示設定を行う手段と、キーワードの入力を受け付けるキーワード受付手段と、そのキーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手段として機能させるためのプログラムを含むプログラムである。
【0013】
このようなプログラムにおいて、上記コンピュータを、上記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段として機能させるためのプログラムを含め、上記受付手段を、上記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段とするとよい。
さらに、上記キーワード記憶手段を、上記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段とし、上記抽出手段を、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて上記画面構成要素の抽出を行うことが可能な手段とするとよい。
【発明の効果】
【0014】
以上のようなこの発明の画面編集装置又は画面編集方法によれば、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することができる。
また、この発明のプログラムによれば、コンピュータを画面編集装置として機能させ、上記の効果を得ることができる。
【発明を実施するための最良の形態】
【0015】
以下、この発明を実施するための最良の形態を図面に基づいて具体的に説明する。
この発明の画面編集装置は、何らかの装置の表示器に表示させる操作画面の内容を編集する装置である。そして、この画面編集装置は、操作画面を表示させる装置自体に画面編集機能を設けて実現することもできるし、操作画面を表示させる装置とネットワーク等の通信路を介して通信可能なPC(パーソナルコンピュータ)等のコンピュータに、所要のアプリケーションプログラムを実行させることにより実現してもよい。
【0016】
また、編集機能は、操作画面を表示させる装置自体がアプリケーションサーバとして機能して提供し、PC等からウェブブラウザのような一般的なクライアントアプリケーションによりアクセスしてその編集機能を利用できるようにしてもよい。また、全く独立した編集装置によって操作画面のデータのみを編集し、このデータを記録媒体に記録して、操作画面を表示する装置に、画面のデータをその記録媒体から読み出させるような構成でもよい。
すなわち、画面編集装置を実現するためのハードウェアは、CPU,ROM,RAM等を有し、一定の演算能力を有するものであればどのようなものであってもよい。
【0017】
ここでは、その一例として、PCにより画面編集装置を実現し、そのPCとネットワーク接続された画像処理装置に表示させる操作画面の内容を編集する場合の実施形態について説明する。
【0018】
〔第1の実施形態:図1乃至図15〕
まず、図1に、操作画面を表示させる画像処理装置のハードウェア構成を示す。
この画像処理装置10は、図1に示すように、プリンタエンジン,スキャナエンジン,画像蓄積用HDD等からなるエンジン部19と、通信I/F17とを有し、CPU11,ROM12,RAM13等により構成される制御部によりアプリケーションプログラムを実行してこれらのエンジン部19及び通信I/F17を制御することにより、プリント,スキャン,コピー,ドキュメントボックス,ファクシミリ通信等の機能を実現することができる装置である。後からアプリケーションプログラムを追加することにより、実現可能な機能の種類を増やすこともできる。
【0019】
また、画像処理装置10は、表示器である液晶ディスプレイ(LCD)にタッチパネルを積層した操作パネル18を有し、この操作パネル18にGUIを表示して、ユーザからの設定や動作指示等の操作を受け付け、その内容に従った動作を行う。そして、これらの動作に必要な設定内容等のデータのうち、変更可能かつ電源をOFFした場合でも保持しておく必要のあるデータは、NVRAM(不揮発RAM)14に記憶させておく。
【0020】
これらのうち、CPU11,ROM12,RAM13,NVRAM14,通信I/F17は、システムバス20によって接続され、操作パネル18とエンジン部19は、それぞれパネルI/F15とエンジンI/F16とを介してシステムバス20に接続される。
また、通信I/F17は、LAN(ローカルエリアネットワーク)等のネットワーク30を介して、この発明の第1の実施形態の画面編集装置として機能するPC40と通信可能な状態となっている。なお、この通信には、有線、無線を問わず、任意の通信経路を用いることができる。
【0021】
図2には、以上のような画像処理装置10及びPC40の機能のうち、GUIの表示及びカスタマイズに関する機能を示す。
図2に示すように、画像処理装置10は、制御部110及び記憶部120を有する。
このうち、制御部110は、通信手段111,画面定義データ管理手段112,画面生成手段113,個人認証管理手段114を有し、これらの機能は、CPU11が所要のプログラムを実行することにより実現される。また、記憶部120は、画面定義データ記憶手段121,認証データ記憶手段122を有し、これらの機能は、NVRAM14により実現される。
【0022】
そして、通信手段111は、他の装置やプロセスとの間でデータを送受信する機能を有する。この送受信は例えば、PC40と通信して、GUI編集機能を提供するUIカスタマイズツール200に対し、編集用に、画面定義データ記憶手段121に記憶している、画像処理装置10がGUIの表示に使用する画面定義データを提供するものである。あるいは、UIカスタマイズツール200において編集された画面定義データを受信して、画像処理装置10がGUIの表示に使用するデータとして画面定義データ記憶手段121に記憶させたりするものである。また、通信手段111は、GUIを使用するアプリケーションからの、操作パネル18に表示させるべき画面の指示を受け取る機能も有する。
【0023】
画面定義データ管理手段112は、画面定義データ記憶手段121が記憶するGUIのデータを管理する機能を有する。そして、GUIの表示や編集を行う場合に必要なデータを画面定義データ記憶手段121から読み出したり、UIカスタマイズツール200による編集後の画面定義データを画面定義データ記憶手段121に保存したりする。GUIの表示を行う場合、読み出した画面定義データは画面生成手段113に渡す。
【0024】
画面生成手段113は、画面定義データ管理手段112から受け取った画面定義データに基づき、操作パネル18での表示に用いるGUIの画像データを生成し、この画像データに基づいて操作パネル18にGUIを表示させる機能を有する。詳細は後述するが、画面定義データ記憶手段121では、画面定義データは、ボタン、メッセージ、アイコン等の座標や形状、サイズ等を示すデータとして記憶されているため、画面生成手段113では、このデータに基づき、ボタン、メッセージ、アイコン等を表示画面のビットマップ中に描画する処理を行って、GUIの画像データを生成する。
【0025】
個人認証管理手段114は、ユーザID、パスワード、あるいは指紋や静脈などのバイオメトリクス情報といった認証データを用いて、画面の表示を指示したユーザを認証する機能を有する。この認証は、ユーザが入力した認証データを、認証データ記憶手段122に記憶されている認証データと照合することにより行う。この認証の結果は、ユーザによる画像処理装置10の使用の許可/不許可の判断や、ユーザに応じて表示させるGUI画面を変えることによる利用機能制限等が考えられる。例えば、同種のGUI画面について複数の画面定義データを用意しておき、特定のユーザが画像処理装置10を利用する場合に、特定の機能を選択するためのボタンを非表示にしたGUIを表示させるようにすれば、そのユーザに、非表示にした機能を利用させないようにすることができる。
【0026】
画像処理装置10は、以上の各手段により、画面編集装置により編集された画面定義データに従ったGUIを操作パネル18に表示させ、そのGUIによりユーザの操作を受け付けることができる。
【0027】
一方、PC40は、CPUが所要のアプリケーションプログラムを実行することにより、ユーザに、画像処理装置10に表示させるGUI画面を編集する機能を提供するUIカスタマイズツール200として機能する。
そして、このUIカスタマイズツール200は、通信手段201,画面定義データ入出力手段202,画面構成要素抽出手段203,カスタマイズ手段210を有する。
【0028】
これらのうち、通信手段201は、他の装置やプロセスとの間でデータを送受信する機能を有する。ここでは、制御部110にアクセスして編集すべきGUIの内容を示す画面定義データを取得したり、編集後の画面定義データを画像処理装置10に送信して画面定義データ記憶手段121に記憶させたりする通信を行う。
【0029】
画面定義データ入出力手段202は、ユーザから編集する画面定義データの読み出し指示があった場合に、通信手段201を介して画像処理装置10から必要な画面定義データを取得して記憶し、カスタマイズ手段210による変更や、画面構成要素抽出手段203による検索及び抽出に供する機能を有する。また、ユーザから新規保存又は上書き保存の指示があった場合に、編集中の画面定義データを通信手段201を介して画像処理装置10に送信し、保存させる機能も有する。
画面構成要素抽出手段203は、後に詳述するが、編集中の画面定義データから、ユーザに指定されたキーワードと対応する画面構成要素を検索して抽出する機能を有する。
【0030】
カスタマイズ手段210は、編集画面生成手段211に加え、画面定義データの内容を変更する各手段を有する。
編集画面生成手段211は、画面定義データ入出力手段202が記憶する、編集中のGUIの内容を示す画面定義データに基づき、PC40のディスプレイにGUI編集画面を表示させ、GUIの編集操作や検索操作を受け付ける機能を有する。
【0031】
画面定義データの内容を変更する手段については、図2には、表示/非表示変更手段212,座標変更手段213,サイズ変更手段214を示している。そして、これらは、GUI編集画面において受け付けた指示に従い、画面定義データ入出力手段202が記憶する画面定義データのうち、編集中のGUIに含まれるボタン、メッセージ、アイコン等の画面構成要素に関するプロパティの値を変更する手段である。
【0032】
表示/非表示変更手段212は、画面構成要素をGUIに表示させるか否かを定める表示/非表示の設定を、座標変更手段213は、画面構成要素をGUI上のどこに配置するかを定める座標を、サイズ変更手段214は、画面構成要素をGUI上にどのようなサイズで配置するかを定めるサイズを、それぞれ変更する手段である。これら以外にも、画面定義データに含まれるプロパティの種類のうち変更し得るもの毎に、対応する変更手段を設ける。
【0033】
PC40は、以上の各手段により、画像処理装置10の操作パネル18に表示させるGUI画面の内容を編集し、編集結果を画像処理装置10に保存させることができる。もちろん、編集結果をPC40側に保存することもできる。
【0034】
次に、図3乃至図6を用いて、GUIの内容を示す画面定義データ及びこれに関連するデータについて説明する。
図3に示すのは、画像処理装置10が使用するGUIの内容を規定するデータセットの構成である。
【0035】
上述のように、画像処理装置10は、アプリケーション(以下、略して「アプリ」ともいう)によってコピーやドキュメントボックス等の機能を実現する装置であり、アプリを任意に追加して機能を追加可能な構成としている。そこで、使用するGUIのデータも、図3に示すように、アプリ毎に、そのアプリが使用する画面のセットを規定する画面一覧データを記憶するようにしている。そして、画像処理装置10にインストールした各アプリと対応させて画面一覧指定データを用意し、どのアプリについてのGUIを表示させる場合にどの画面一覧データを参照すればよいかがわかるようにしている。
【0036】
また、各画面一覧データには、アプリが使用する画面毎に、その画面の内容を規定する画面定義データの位置を示す参照データを用意している。
そして、この画面定義データが、1画面分のGUIの内容を規定するデータである。
【0037】
図4に、この画面定義データの例を示す。
この図には、コピーアプリで使用するトップ画面である、コピートップ画面の内容を規定するデータを示した。そして、この図に示すように、画面定義データは、特定の画面に配置し得る各画面構成要素につき、その識別子,種別,座標,サイズ,形状,フォントサイズ,表示有無,キーワードIDの情報を含む。
【0038】
このうち「識別子」は、画面構成要素を特定するために用いる情報であり、ボタンの操作イベントに応じて実行するコードの特定,GUIに表示するキャプションの選択,GUI上での状態変化(非選択状態/選択状態等)のターゲットの指定等に用いられる。
「種別」は、画面構成要素のふるまいの特性を示す情報である。ここでは、操作が可能な「ボタン」と、単に文字列を表示するだけの「メッセージ」、単に画像を表示するだけの「アイコン」のいずれかを設定可能としている。
【0039】
「座標」は、GUI画面の表示領域の左上を基点として、画面構成要素の表示位置を2次元で規定する情報である。
「サイズ」は、GUI画面上に画面構成要素を表示させる際の幅及び高さを規定する情報である。
「形状」は、GUI画面上に画面構成要素を表示させる際に使用する画像データのファイル名を規定する情報である。この「形状」で規定する画像データは、画像処理装置10において、GUI画面を表示する際に読み出すことができるように、所定のフォルダに予め格納しておく。また、「メッセージ」の表示には、画像データを用いないので、「種別」が「メッセージ」である画面構成要素については、「形状」の値を設定する必要はない。
【0040】
「フォントサイズ」は、ボタン上に表示するキャプションや、メッセージとして表示する文字列のフォントサイズを規定するデータである。
「表示有無」は、画面構成要素をGUI画面に表示させるか否かを規定するデータである。そして、GUI画面を操作パネル18に表示させる際、「表示有無」の値が「表示」であれば、対応する画面構成要素をGUI画面上に配置するが、「非表示」である場合、対応する画面構成要素はGUI画面上に配置しない。従って、例えば、あるボタンが「非表示」である場合、ユーザは、そのボタンによる操作を行えなくなるため、このことにより、ユーザに対し、特定の操作や、特定の機能の利用を禁止することができる。
ここまでのデータが、GUI画面の表示に用いるデータである。
【0041】
図5に、これらの画面定義データに従って表示されるGUI画面の例を示す。
画像処理装置10において、操作パネル18にGUI画面を表示させる際には、これらのデータに基づき、GUI画面の表示領域に、「表示有無」の値が「表示」である各画面構成要素につき、「形状」により規定されるファイルの画像データを、「サイズ」により規定されるサイズに変形し、「座標」により規定される位置に配置して、さらに、「識別子」と対応して使用言語毎に用意された図示しないキャプションテーブルに登録されているキャプションを「フォントサイズ」により規定されるサイズの文字で「座標」及び「サイズ」に従って定められる位置に描画して、GUI画面の画像データを生成する。
【0042】
また、これ以外にも、画像処理装置10においてなされている設定の内容をGUIに動的に表示する場合もあり得る。例えば、給紙トレイを選択するボタンに、トレイに載置されている用紙のサイズや向き等を表示する場合である。この場合、画像処理装置10が、識別子により画面構成要素を特定して、必要に応じて画面構成要素の表示を更新する処理を行う。
【0043】
また、図4に示した画面定義データのうち、「キーワードID」は、GUIの編集中に画面構成要素の検索及び抽出に利用できるようにするために、画面構成要素と対応させて用意したキーワードを示す情報である。ただし、ここでは、使用言語の切り換えに対応するため、画面定義データ中には、キーワードのIDを示すのみとし、実際に検索に使用するキーワードは、言語毎に用意した別のキーワードテーブルに記憶させている。
【0044】
図6及び図7に、このキーワードテーブルの例を示す。
図6に示すのが日本語用、図7に示すのが英語用のテーブルであり、それぞれ、キーワードIDと、該当言語においてそのキーワードIDを有する画面構成要素に対応付けるキーワード文字列とを記憶している。このとき、複数の画面構成要素に対して同じキーワードが対応付けられていても、問題ない。そのキーワードを用いて抽出を行った場合に、複数の画面構成要素が抽出されるだけである。また、GUI編集中のユーザが指定したキーワードに従って画面構成要素の検索と抽出を行う際には、そのユーザが表示に使用している言語と対応するキーワードテーブルの内容に従って、各画面構成要素と対応するキーワードを特定する。
【0045】
このキーワードテーブルは、GUI画面の表示には用いないため、画像処理装置10に記憶させる必要はないが、画面一覧データ又は画面定義データとセットで記憶させておくと、PC40がGUIの編集を行う際にこれとセットで読み出すことができ、データの管理が容易である。
また、これらのキーワードIDとキーワード文字列が、GUI画面に配置可能な画面構成要素に対応するキーワードを示すデータであり、GUI画面の編集時にこれらのデータを記憶する画面定義データ入出力手段202が、キーワード記憶手段に該当する。
【0046】
またここでは、上記のキーワードテーブルとは別に、GUIの編集を行う際に使用するデータとして、各画面構成要素の名称を示すデータも用意している。この名称は、キーワードに従った検索による抽出の結果を分かり易く表示するために用いるものである。また、ユーザが編集対象等として選択した画面構成要素が何であるかを分かり易く表示するためにも用いるものである。
【0047】
図8及び図9に、この名称を記憶させる名称テーブルの例を示す。
この名称テーブルは、各画面構成要素の画面構成要素識別子と対応させて、その識別子が示す画面構成要素の名称を記載したものである。そして、図の例では、その名称を2つ登録可能とし、名称1としては、画面構成要素が配置される画面の名称を、名称2としては、画面構成要素自体の機能を表す名称を登録し、これらによって、ユーザが画面構成要素を容易に特定できるようにしている。
【0048】
しかし、これら以外の名称を用いることも、もちろん可能である。名称の用途を鑑みれば、キーワードの場合と異なり、異なる画面構成要素について全く同じ名称を登録することは好ましくないが、全く同じ名称が複数あっても技術的には問題ない。また、各画面構成要素のキーワードと名称とは、同じであっても異なっていてもよい。
また、名称テーブルも、キーワードテーブルと同様、言語毎に用意しており、図8に示すのが日本語用、図9に示すのが英語用のテーブルである。また、この名称テーブルも、GUI画面自体の表示には用いないため、キーワードテーブルと同様、PC40が参照可能であれば、画像処理装置10に記憶させる必要はない。
【0049】
以上の図3,図4,図6乃至図9に示したデータのうち、画面一覧データと、画面定義データにおける「識別子」及び「キーワードID」、さらにキーワードテーブルと名称テーブルの内容は、基本的には画像処理装置10のメーカーが提供するものであり、ユーザが変更できるようにする必要はない。そして、これらのデータは、画像処理装置10において使用し得るGUIの内容を示すデータと、そのGUIに配置可能な画面構成要素を示すデータである。ただし、ユーザが全く新しい独自の画面やボタン等を追加できるようにする場合には、これらのデータを変更可能にすることも考えられる。
【0050】
また、1つのアプリで使用する画面は、後述するように階層的な配置となっているが、その階層構造については、アプリのプログラムによって実現すればよい。しかし、画面を編集する際にも、どの画面がどの階層に属するかが分かると画面の選択がしやすいため、この階層構造を示すデータを、編集時に参照できるように、画面一覧データ等に含ませておくとよい。
【0051】
次に、図10に、PC40のUIカスタマイズツール200がGUI画面の編集操作を受け付けるためのGUI編集画面の表示例を示す。
この図に示すGUI編集画面300は、PC40のディスプレイに、PC40上で起動されたUIカスタマイズツール200の機能により表示される画面である。そして、UIカスタマイズツール200は、編集するデータの読み出し先を指定され、読み出し指示を受けると、その読み出し先から、図3に示したようなデータセットを読み出し、そのデータセットの内容に基づき、図10に示すようなGUI編集画面300を表示する。図10に示すのは、画像処理装置10からデータセットを読み出した場合の表示例である。
【0052】
この画面においては、まず、コピータブ301,ボックスタブ302,文書送信タブ303の3つのタブにより、画像処理装置10が備えるどのアプリで使用するGUIの編集を行うかの選択を受け付ける。なお、GUI編集画面300に表示するタブは、編集対象として取得したデータセットにどのアプリで使用するGUIのデータが含まれているかに従って決定する。また、タブとしては、これらの他、検索タブ401も設けているが、この検索タブ401は、この実施形態の特徴である、キーワードを用いた画面構成要素の検索及び抽出の指示を受け付ける画面を表示させるためのボタンである。
【0053】
図10では、コピータブ301が選択された状態を示しており、この状態では、編集内容表示部310に、コピーアプリが使用するGUI画面を編集するための画面が表示される。
このうち、画面リスト表示部320は、タブにより選択されたアプリが使用するGUIのリストをツリー形式で表示する部分である。このツリーにおいて、アプリの起動時に表示される画面を最上位の画面、最上位の画面から、その画面に配置されたボタンの操作により移行する画面を下位の画面、その下位の画面に配置されたボタンの操作により移行する画面をさらに下位の画面、としている。そして、通常は、上位の画面ほど広範な設定や機能選択を受け付ける画面であり、下位の画面ほど、特定の機能に関する詳細な設定を受け付けるための画面としてデザインされる。
【0054】
そして、ユーザは、画面リスト表示部320に表示されるリストから編集対象とする1つのGUI画面を選択することができる。そして、どのGUI画面が選択されているかは、カーソル321により示し、その選択されたGUI画面の内容が、プレビュー表示部330に表示される。図10では、リストの一番上のコピートップ画面が選択された状態を示している。
【0055】
プレビュー表示部330に表示されるのは、ユーザによる編集結果を反映させた、操作パネル18に表示させるGUI画面のプレビューである。そして、この画面中で、表示内容を編集したいボタン等の画面構成要素をクリック等により選択することができる。
そして、プレビュー表示部330で選択された編集対象の画面構成要素の現在の状態を示す情報が、プロパティ表示部340及び表示有無表示部350に表示される。
【0056】
図10では、自動用紙選択ボタン331が選択された状態を示しており、プロパティ表示部340には、このボタンについての現在の情報として、名称,種別,座標,サイズ(幅及び高さ),フォントサイズの情報が表示されている。これらのデータのうち、名称以外は、図4に示した画面定義データの内容を表示したものである。そして、ユーザは、所望の項目を選択した上で、テキスト入力、プルダウンメニュー、カーソルボタン等の図示しないユーザインタフェースから所望の値又は変更指示を入力することにより、各項目の値を変更することができる。
【0057】
画面定義データのうち図10に示されていない項目や、各言語におけるキャプションも、画面に表示させて編集することができる。そして、以上の変更がなされると、その内容は、直ちにプレビュー表示部330の表示に反映される。ただし、名称については、編集中のユーザの使用言語と対応する名称テーブルの内容に基づき、選択された画面構成要素と対応する名称を表示しており、この値は編集不可である。またここでは、表示スペースの都合上、さらには、画面の名称は画面リスト表示部320に表示されており、ここに別途表示する必要性が乏しいため、名称テーブル上の「名称2」のみを表示している。
【0058】
また、表示有無表示部350には、編集対象の画面構成要素に関する「表示有無」の値を設定するための表示ボタン351と非表示ボタン352が表示され、このうち、現在設定されている内容と対応するボタンが反転表示される。図10の例では、自動用紙選択ボタン331は「表示」の状態であるので、表示ボタン351が反転表示状態となっている。そして、非表示ボタン352を押下することにより、自動用紙選択ボタン331を「非表示」の状態に設定することができる。この表示/非表示の変更も、直ちにプレビュー表示部330の表示に反映される。
【0059】
なお、あるボタンを「非表示」に設定してしまうと、そのボタンはプレビュー表示部330に表示されなくなってしまい、以後、画面上でクリックできなくなってしまう。そこで、図示はしていないが、GUI編集画面300には、表示/非表示を問わず、画面リスト表示部320で選択された画面のデータに含まれている画面構成要素のリストを表示させるためのボタンを設けており、ユーザは、非表示の画面構成要素についての情報を編集したい場合には、このリストから編集対象を選択することができる。
【0060】
また、保存ボタン362は、以上のようなGUI編集画面300で編集した画面の内容の保存指示を受け付けるためのボタンであり、PC40は、保存ボタン362が押下された場合に、編集後のデータセットを、ユーザが指定した保存先に保存する。画像送信装置10が保存先に指定された場合、表示に使用できる状態で保存させることができる。また、PC40側にファイルとして保存することもできる。
読み込みボタン361は、GUI編集画面300で編集するデータの読み出し指示を受け付けるためのボタンである。PC40は、読み込みボタン361が押下された場合に、ユーザが指定した読み出し元から、GUI画面の内容を示すデータセットを読み出して、編集対象として記憶し、その内容に併せてGUI編集画面の表示を更新する。
これらの保存や読み出しは、アプリケーション単位、すなわち図3に示した1つの画面一覧データが示す画面定義データの単位で行うこともできる。
【0061】
GUI画面の編集は、以上の編集内容表示部310において、読み込みボタン361を押下して編集する画面定義データのセットを読み出し、画面リスト表示部320で編集対象のGUI画面を選択し、プレビュー表示部330で表示内容を変更する画面構成要素を編集対象として選択し、プロパティ表示部340や表示有無表示部350でその画面構成要素のプロパティを変更することによって行う。
また、関連要素検索ボタン370は、編集対象となっている画面構成要素と対応するキーワードを用いて、この実施形態の特徴である、画面構成要素の検索及び抽出を行ってその結果を表示させるためのボタンである。
【0062】
次に、図11に、検索タブ401の選択に応じて表示される、キーワードを用いた画面構成要素の検索及び抽出を指示するための画面の表示例を示す。
GUI編集画面300において検索タブ401が選択されると、PC40は、GUI編集画面300内に、その検索タブ401と対応する表示部として、検索表示部410を表示する。なお、この状態でも、コピータブ301,ボックスタブ302,文書送信タブ303は表示されており、ユーザは、これらのタブを選択することにより、図10に示したような編集内容表示部を表示させることができる。
【0063】
一方、検索表示部410には、キーワード入力部411,キーワードリスト表示部412,検索実行ボタン413を設けている。
キーワード入力部411は、検索に使用するキーワードの入力を受け付ける部分であり、キーワードをテキスト入力可能である。また、検索タブ401が選択された時点でGUI編集画面300において編集対象の画面構成要素が選択されていれば、その画面構成要素と対応付けられているキーワードが初期値として表示される。従って、ユーザが対応するキーワードを把握していない場合でも、編集中の画面構成要素と関連する画面構成要素を検索するためのキーワードを容易に指定することができる。
【0064】
また、キーワードリスト表示部412は、検索タブ401が選択された時点でGUI編集画面300において編集対象のGUI画面が選択されていれば、その画面について、そうでなければアプリのトップ画面について、画面内に配置可能な画面構成要素の少なくとも1つと対応するキーワードをリストとして表示する領域である。そして、このリストに含まれるキーワードのうちいずれかをクリックすることにより、クリックしたキーワードをキーワード入力部411に入力することができる。従って、ユーザが的確なキーワードを把握していない場合でも、編集中の画面に配置可能な画面構成要素と関連する画面構成要素を検索するためのキーワードを容易に指定することができる。
【0065】
また、検索実行ボタン413は、検索開始の指示を受け付けるためのボタンである。そして、これが押下された場合、PC40は、編集対象として読み込んであるデータセットに含まれる全ての画面定義データを検索し、キーワード入力部411に入力されたキーワードと対応付けられている画面構成要素を抽出して、その結果を画面に表示する。
なお、編集内容表示部310で関連要素検索ボタン370が押下された場合には、以上の検索表示部410の表示は行わず、直ちに、編集対象となっている画面構成要素と対応するキーワードを用いて画面構成要素の検索と抽出を行って、その結果を表示する。
【0066】
図12に、この検索結果を表示する画面の例を示す。
図11に示した検索実行ボタン413が押下された場合、検索表示部410の表示は、図12に示すような、画面構成要素の検索結果を表示する検索結果表示部420に切り替わる。編集内容表示部310で関連要素検索ボタン370が押下された場合には、編集内容表示部310の表示が検索結果表示部420に切り替わる。
【0067】
この画面には、まず、抽出リスト表示部421が含まれており、この部分には、アプリケーション毎に、検索に用いたものと同じキーワードと対応する画面構成要素のリストが表示される。各構成要素を表示する文字列としては、ユーザの使用言語と対応する名称テーブルに登録されている、名称1及び名称2の文字列を用いる。そして、これらの名称の間に「:」を挟んで表示することにより、抽出された画面構成要素が、どの画面に配置されるどの画面構成要素かをユーザが把握できるようにしている。
また、リストには、各画面構成要素と対応するチェックボックスを表示し、一括非表示ボタン422による一括非表示設定を行う画面構成要素をユーザが選択できるようにしている。
【0068】
一括非表示ボタン422は、抽出リスト表示部421で選択された画面構成要素につき、一括して非表示を設定する指示を行うためのボタンである。このボタンが押下された場合、PC40のCPUは、抽出リスト表示部421においてチェックボックスがオンになっている全ての画面構成要素につき、画面定義データ中の「表示有無」の内容を「非表示」に設定する。そして、このことにより、特定のキーワードに関連付けられるボタン等の画面構成要素が、多岐に亘る画面に配置されていたとしても、これらを容易に漏れなく非表示に設定することができる。
【0069】
メーカーがキーワードを用意する場合に、同じ機能に関連する画面構成要素には同じキーワードを対応付けると考えられるため、このことは、特定の機能に関連するボタン等を容易に漏れなく非表示に設定することができることを意味する。そして、GUI上でボタンを非表示にすることににより、特定の機能の利用を禁止しようとする場合、このように、特定の機能に関連するボタン等を容易に漏れなく非表示に設定できることは、非常に有用である。
【0070】
特に、関連要素検索ボタン370による検索では、ワンタッチで、編集中の画面構成要素と同じキーワードが対応付けられた画面構成要素を検索することができるため、編集中の画面構成要素と同時に編集したい画面構成要素を効率的に抽出することができる。
なお、検索結果表示部420には、一括非表示ボタン422以外に、抽出リスト表示部421で選択された画面構成要素につき一括して表示を設定したり、抽出リスト表示部421における全てのチェックボックスを一括してオン又はオフにしたりするためのボタンを設けてもよい。
【0071】
次に、PC40のCPUが以上説明してきた画面構成要素の抽出に関する機能を実現するために実行する処理について説明する。ここで説明する処理は全て、PC40のCPUが、UIカスタマイズツール200の機能を実現するためのアプリケーションプログラムを実行することにより行うものである。
【0072】
まず、図13に、図11に示した検索表示部410の表示処理のフローチャートを示す。この処理は、図10に示した検索タブ401が選択された場合に実行するものである。
この場合、PC40のCPUは、まずステップS11で、検索タブ401が選択された時点で表示されていた編集内容表示部310において編集対象の画面構成要素が選択されているか否か判断する。そして、これが選択されていない場合、キーワードリスト表示部412に表示させるキーワードリストの表示に必要なデータを収集すべく、ステップS12に進む。
【0073】
そしてここでは、その編集内容表示部310において編集対象の画面が選択されているか否か判断する。そして、選択されていれば、ステップS13に進み、選択されている画面の画面定義データを参照対象とする。参照されていなければ、ステップS14に進み、選択されているアプリケーションの最上位画面の画面定義データを取得して参照対象とする。
【0074】
いずれの場合も、その後ステップS15に進み、編集作業中のユーザの表示言語IDと対応する、図6及び図7に示したようなキーワードテーブルを取得する。なお、表示言語IDは、UIカスタマイズツール200における画面の表示に使用する言語を示すIDであり、ユーザ情報に含まれる使用言語の情報や、ユーザが行った使用言語の設定に従って決定することができる。
【0075】
ステップS15の後は、ステップS16乃至S19の画面定義データ走査ループを、ステップS13又はS14で参照対象とした画面定義データに含まれる画面構成要素を1つずつ参照しながら、全ての画面構成要素を参照するまで繰り返す。すなわち、参照対象とした画面定義データテーブルに登録されている各画面構成要素について順次、画面定義データテーブルからその画面構成要素と対応するキーワードIDを取得し(S17)、ここで取得したキーワードIDをキーにステップS15で取得したキーワードテーブルから対応するキーワード文字列を取得して保持する(S18)処理を行う。
【0076】
その後、ステップS20に進んでGUI編集画面300に図11に示した検索表示部410の枠を表示する。この「枠」は、検索表示部410のうちキーワードリスト表示部412以外の、キーワードの内容に関わらず固定的な表示を行う部分である。そして、ステップS21で、ステップS18で保持したキーワード文字列のリストを、キーワードリスト表示部412に表示して、処理を終了する。
【0077】
一方、ステップS11で編集対象の画面構成要素が選択されていた場合、検索表示部410のキーワード入力部に表示させるキーワードの初期値とすべきキーワード文字列を取得すべく、ステップS22に進む。
そしてこの場合、ステップS22で、ステップS15の場合と同様に編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得し、ステップS23で適当な画面定義データから編集対象として選択されている画面構成要素のキーワードIDを取得する。その後、ステップS24で、ステップS18の場合と同様、キーワードIDと対応するキーワード文字列をキーワードテーブルから取得して保持する。
【0078】
そして、ステップS25で、ステップS20の場合と同様、検索表示部410の枠を表示し、ステップS26で、キーワード入力部411の初期値として、ステップS24で保持したキーワード文字列を表示し、処理を終了する。この場合、キーワードリスト表示部412には何も表示しなくてよい。
【0079】
以上の処理により、PC40は、関連要素検索ボタン370の押下に応じてGUI編集画面300に検索表示部410を表示させ、検索に用いるキーワードの入力を受け付ける状態に移行することができる。
またこのとき、編集内容表示部310において編集対象のGUI画面が選択されていれば、その画面に配置し得る画面構成要素の少なくとも1つと対応するキーワードを、検索に用いるキーワードの候補としてキーワードリスト表示部412に表示させることができる。また、編集内容表示部310において編集対象の画面構成要素が選択されていれば、その画面構成要素と対応するキーワードを、検索に用いるキーワードの候補としてキーワード入力部411に表示させることができる。さらに、キーワードとして、編集作業に使用している言語のキーワードを表示させることができる。
【0080】
なお、図13に示した処理は、ステップS11でYESの場合にはキーワードリストを表示する処理を実行しないようになっているが、この場合にも、編集対象として選択されている画面の画面定義データテーブルを参照対象として画面定義データ走査ループの処理を実行し、キーワードリストを表示するようにしてもよい。また、ステップS11でYESの場合には、検索表示部410を表示せずに、ステップS24で保持したキーワード文字列を用いて直ちに次に説明する検索処理を行って検索結果表示部420を表示するようにすることも考えられる。
【0081】
次に、図14及び図15に、図12に示した検索結果表示部420の表示処理のフローチャートを示す。この処理は、図11に示した検索実行ボタン413が押下された場合又は図10に示した関連要素検索ボタン370が押下された場合に実行するものである。
この場合、PC40のCPUは、まずステップS31で、検索に用いるキーワードを保持すると共に、ステップS32で、図13のステップS15の場合と同様、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。検索に用いるキーワードは、検索実行ボタン413が押下された場合には、キーワード入力部411に入力されていたキーワードであり、関連要素検索ボタン370が押下された場合には、押下時点で編集対象として選択されていた画面構成要素と対応するキーワードである。後者の場合、図13のステップS23及びS24と同様な処理で、検索に用いるキーワードを取得することができる。
【0082】
ステップS32の後は、ステップS33乃至S41で、入れ子式の3つのループ処理を行う。一番外側のループは、UIカスタマイズツール200により編集中のGUIを使用する各アプリを順次参照対象としてステップS34乃至S40の処理を実行するアプリケーション走査ループである。ここで参照対象とすべきアプリは、図3に示したアプリケーションのリストにより決定できる。
【0083】
次のループは、ステップS33で参照対象としたアプリが使用するGUIを示す各画面定義データを順次参照対象としてステップS35乃至S39の処理を実行する画面一覧走査ループである。ここで参照対象とすべき画面定義データは、図3に示した画面一覧データに従って決定できる。
【0084】
そして、最も内側のループは、ステップS34で参照対象とした画面定義データに登録されている各画面構成要素を順次参照対象としてステップS36乃至S38の処理を実行する画面定義データ走査ループである。
そして、画面定義データ走査ループでは、まずステップS36で、参照中の画面構成要素と対応するキーワード文字列を取得する。この取得は、参照中の画面定義データから、参照中の画面構成要素のキーワードIDを取得し、ステップS32で取得したキーワードテーブルからこのキーワードIDと対応するキーワード文字列を取得して行うことができる。
【0085】
次のステップS37では、ステップS36で取得したキーワード文字列を、ステップS31で保持した検索に用いるキーワードと比較する。そして、これが一致していれば、参照中の画面構成要素は、検索により抽出すべき画面構成要素であると判断できるため、ステップS38に進み、参照中の画面構成要素につき、アプリケーション識別子及び画面構成要素識別子を保持する。
そして、以上の3つの入れ子式のループ処理を全て終了すると、ステップS38で保持したデータに基づき、画面構成要素の抽出結果を示す検索結果表示部420の表示を行うべく、ステップS42に進んで図15に示す部分の処理を行う。
【0086】
そしてここでは、まずステップS42で検索結果表示部420の枠を表示する。この「枠」は、検索結果表示部420のうち抽出リスト表示部421以外の、抽出された画面構成要素の内容に関わらず固定的な表示を行う部分である。
そして、ステップS43で、編集作業中のユーザの表示言語IDと対応する名称テーブルを取得する。その後、ステップS38で識別子を保持した全てのアプリケーション、すなわち検索により抽出された画面構成要素が1つでも属するアプリケーションを参照するまで、その各アプリケーションを順次参照してステップS44乃至S50の検索結果走査ループAの処理を行う。なお、同じアプリについて複数回アプリケーション識別子が保持されていたとしても、ここで参照対象とするのは1回のみである。
【0087】
この検索結果走査ループAでは、まずステップS45で、アプリケーション識別子と編集作業中のユーザの表示言語IDとに基づいて、参照中のアプリケーションの名称を示す文字列を図示しないテーブルから取得し、これを抽出リスト表示部421に表示する。その後、ステップS38でデータを保持した画面構成要素のうち、参照中のアプリケーションで用いる画面構成要素に関する表示を行うべく、これらの画面構成要素を順次参照してステップS46乃至S49の検索結果走査ループBの処理を行う。
【0088】
この検索結果走査ループBでは、ステップS47で、画面構成要素識別子と編集作業中のユーザの表示言語IDとに基づいて、参照中の画面構成要素の名称を示す文字列を名称テーブルから取得し、必要に応じてこれを加工して抽出リスト表示部421に表示する。そして、ステップS48で、表示した画面構成要素と対応するチェックボックスを表示する。ここでは、ステップS48の加工として、名称テーブルに登録されている名称1の文字列と名称2の文字列とを、「:」を挟んで連結する処理を行うようにしている。
そして、以上の検索結果走査ループA,Bが終了すると、図12及び図13に示した処理は終了する。
【0089】
以上の処理により、PC40は、検索実行ボタン413又は関連要素検索ボタン370の押下に応じて、ユーザにより指定されたキーワードと同じキーワードが対応付けられた画面構成要素のリストを、図10に示した検索結果表示部420に表示することができる。このことによる効果は、図12の説明で述べた通りである。
なお、ステップS37でのキーワードの比較について、完全一致の場合だけでなく、部分一致であっても、キーワードが一致したと判断するようにしてもよい。
【0090】
〔第2の実施形態:図16乃至図28〕
次に、この発明の画面編集装置の第2の実施形態について説明する。
この実施形態が第1の実施形態と異なる点は、主に、画面構成要素と対応するキーワードとして互いに上位/下位の関係を有する複数のキーワードを設定できるようにした点と、画面構成要素を検索する範囲を指定できるようにした点である。また、この第2の実施形態の画面編集装置と、その画面編集装置で編集した操作画面を表示させる画像処理装置は、キーワードが複数になったことに伴い、取り扱うデータの形式に差はあるものの、ハードウェア構成及び基本的な機能構成は、第1の実施形態の場合と同様である。
そこで、第2の実施形態については、第1の実施形態と異なる点を中心に説明する。また、第1の実施形態と実質的に同じ構成要素には、同じ符号を用いる。
【0091】
まず、図16乃至図21を用いて、上位/下位の関係を有する複数のキーワードの用途について説明する。
図16は、画像処理装置10がドキュメントボックスアプリで使用する画面のうち、印字画面より下位の画面の遷移例を示す図である。図17乃至図21は、図16に示した各画面の表示例を示す図である。
【0092】
図17に示す印字画面610は、ドキュメントボックスアプリにより蓄積文書の印刷を行う際に、蓄積文書に付加して印刷する書誌情報やスタンプ等の内容を設定するための画面のうち、最上位の画面である。そして、この画面において、この画面に配置された画面構成要素である、機密管理ナンバリング,スタンプ印字,ユーザスタンプ印字,日付印字,ページ印字のボタンを押下することにより、それぞれの印字内容についてのより詳細な設定を行うための下位の画面に移行することができる。
【0093】
図16は、このような印字画面610をスタートとする画面遷移の一部を示す図であり、この図では、四角の中に画面の名称を示し、その画面において、矢印の脇に示したボタンが押下された場合に、矢印の先の画面に移行することを示している。例えば、図16の遷移例では、印字画面610において日付印字ボタン611を押下した場合には、表示が図18に示す日付印字画面620に移行することを示している。
【0094】
この日付印字画面620は、文書に付加する日付の書式や位置等を設定するための画面であり、画面上のボタンを押下することにより、項目毎に詳細な設定を行うためのさらに下位の画面に移行することができる。例えば、図16に示した通り、書式の変更ボタン621を押下すると、日付の書式を設定するための図19に示す日付の書式画面630に移行し、印字色ボタン622を押下すると、日付の印字色を設定するための図20に示す印字色変更画面640に移行し、変更ボタン623を押下すると、日付の印字位置を設定するための図21に示す印字位置画面650に移行する。
【0095】
そして、例えば印字色変更画面640には、設定可能な印字色と対応するイエロー,レッド,シアン,マゼンタ,グリーン,ブルー,ブラックの7つのボタンが配置され、これらを押下することにより、日付の印字色を設定することができる。
また、日付の印字を全ページに行うか、先頭ページのみ行うかの設定は、日付印字画面620において、全ページボタン624と先頭ページのみボタン625により行うことができる。
【0096】
ここで、図22に、以上の図17乃至図21に示した画面に設けたボタン相互の関係をベン図として示す。
この図において、最も外側の集合610aは、図17乃至図21に示した画面の中で最上位の印字画面610に関係する画面構成要素の集合を示す。また、その内側に記載した5つの楕円がそれぞれ、印字画面610に配置した機密管理ナンバリング,スタンプ印字,ユーザスタンプ印字,日付印字,ページ印字のボタン及び、そのボタンの押下に応じて表示される下位の画面に関係する画面構成要素の集合を示す。ただし、スペースの都合上、日付印字ボタン611に関する集合620aのみ、集合内の要素を図示している。
【0097】
集合620aの要素としては、まず、下位の画面へ移行するための、書式の変更ボタン621,印字色ボタン622,変更ボタン623と対応する集合630a,640a,650aがある。そして、これらの集合の要素は、ボタンの押下に応じて移行する画面に配置される画面構成要素である。また、集合620aの要素には、印字ページに関する設定を行うための全ページボタン624及び先頭ページのみボタン625と対応する要素624a,625aもある。
【0098】
すなわち、各画面と対応する集合には、その画面への移行を指示するためのボタンと、その画面上に配置されるボタンとが含まれる。また、画面単位でなく、機能単位でボタン群が1つの集合を構成すると考えることもでき、ここでは、全ページボタン624及び先頭ページのみボタン625のように、1つの画面内に、特定の機能に関する設定を行うためのボタン群が配置される場合、それらも独自の集合を構成すると考えている。
また、図面を簡単にするため、図22には、画面の移行やパラメータの値の設定を行うためのボタンのみを示したが、単なるメッセージや、OK,戻る等のボタンといった他の画面構成要素についても、配置される画面と対応する集合の要素であると考えることができる。
【0099】
ところで、第1の実施形態では、各画面構成要素について、1つのキーワードを対応付けていた。しかし、この手法では、例えば、あるボタンにそのボタンにより設定するパラメータの値に応じたキーワードを対応付けてしまうと、そのパラメータの値が共通するボタンは容易に検索できるものの、ボタンにより設定するパラメータの項目が共通するボタンの検索は困難であるといった事態が生じる。
【0100】
例えば、色数を指定するボタンにつき、設定するパラメータの値に着目して、「自動カラー選択」,「フルカラー」,「2色」,「単色」といったキーワードを対応付けてしまうと、これらのボタンと対応するキーワードは全て別々のものになってしまうため、「色数を指定するボタン」のような、設定するパラメータの項目という括りでは検索を行うことができない。
そこで、この第2の実施形態では、図22に示したような画面構成要素相互の関係を利用して、各画面構成要素に、広い括りから狭い括りまで、互いに上位/下位の関係を有する複数のキーワードを対応付けるようにしている。
【0101】
図22の例では、印字機能に関連する集合610aに属する画面構成要素には、最上位の第1レベルのキーワードとして「印字」を対応付け、その中で、日付印字機能に関連する集合620aに属する画面構成要素には、次の第2レベルのキーワードとして「日付印字」を対応付けることが考えられる。また、同様に、印字色の設定に関連する集合640aに属する画面構成要素には、次の第3のレベルのキーワードとして「印字色」を対応付け、さらに、印字色変更画面640に配置される各画面構成要素には、「イエロー」,「レッド」等、特定の画面構成要素を示す最下位の第4のレベルのキーワードを対応付けることが考えられる。
【0102】
このような規則に従って対応付けるキーワードを定めると、例えば印字色変更画面640中のレッドボタン641については、上位から順に、「印字」,「日付印字」,「印字色」,「レッド」の4つのキーワードが対応付けられることになる。
また、日付印字画面620に配置される印字色ボタン622について同様な規則でキーワードを対応付けると、上位から順に、「印字」,「日付印字」,「印字色」の3つのキーワードが対応付けられる。第4レベルのキーワードは特に必要ないため、何も用意しなくてよい。しかし、印字色変更画面640内の画面構成要素と区別するため、第3レベルと同じ「印字色」のキーワードを対応付けることも考えられる。このように、対応付け可能な全てのレベルのキーワードを対応付けることは必須ではない。
【0103】
また、図22では日付印字機能についてのみ内容を詳しく示したが、例えばスタンプ印字機能に関する画面にも印字色の設定を行うための画面があれば、その画面を表示させるためのボタンや、その画面に配置されるボタンについても、第3レベルのキーワードとして日付印字機能の場合と同様な「印字色」のキーワードを対応付けるとよい。このようにしておけば、第3レベルのキーワード「印字色」で画面構成要素の検索を行うことにより、上位の機能の違いを気にせず、印字色の設定に関連する画面構成要素を抽出することができる。
【0104】
また、図22に示した印字機能以外の機能に関する画面に配置する画面構成要素についても、同様に階層的なキーワードを定めることができるが、この場合にも、下位のキーワードについて、他の機能と共通のものを用いることにより、機能横断的な抽出を可能とすることができる。
なお、このように定めたキーワードは、第1の実施形態の場合と同様、画面定義データ中に記述しておけばよい。また、画面定義データ中への記述はキーワードIDとして行い、言語毎にキーワードテーブルを用意してキーワードIDをキーワード文字列に変換できるようにするとよいことも、第1の実施形態の場合と同様である。
【0105】
図23に、第2の実施形態における画面定義データの例を示す。
この図には、画面定義データを、XML(Extensible Markup Language)形式で記述した例を示している。
そして、図に示した中で最上位のwindow要素1つがGUI1画面分のデータを示す。window要素の属性については、id属性の値は、GUI画面の識別情報を、function属性の値は、そのGUI画面がどのアプリで使用される画面であるかを、shape属性の値は、GUI画面の背景として使用する画像データのファイル名を示す。
【0106】
また、window要素の子要素であるitem要素1つが、その画面に配置可能な画面構成要素1つ分のデータを示す。そして、item要素の属性の値が、図4に示した画面定義データテーブルにおける各設定項目の内容を示し、id属性が画面構成要素の「識別子」を、type属性が「種別」を、x属性及びy属性が「座標」を、w属性及びh属性が「サイズ」を、shape属性が「形状」を、font属性が「フォントサイズ」を、visible属性が「表示有無」を、それぞれ示す。visible属性については、「true」が「表示」を、「false」が「非表示」を示す。
【0107】
また、2番目のitem要素が有するcustomize属性の値は、visible属性の値を「false」に設定可能であるか否か、すなわち画面構成要素を非表示できるか否かを示し、「false」は、これが不可であることを示す。一部の画面構成要素については、非表示にしてしまうとGUIの動作に不都合が生じることがあるため、このような画面構成要素を常に「表示」にしておけるように、このcustomize属性を設けている。図の例では、2番目のitem要素はOKボタンを示すものであり、これを非表示にしてしまうと、設定内容を確定できなくなってしまい、GUIの動作に不都合が生じると考えられるため、このvisible属性の値を「false」に設定している。
【0108】
また、キーワードIDは、item要素の子要素であるkeyword要素の属性として記述している。図23に示した例では、4つのレベルのキーワードを設定可能であり、それぞれのレベルのキーワードのIDを、kw1,kw2,kw3,kw4の属性値として記述できる。あるレベルのキーワードを設定しない場合には、単に対応する属性値を記述しなければよい。
【0109】
図24には、キーワードテーブルの例を示す。
このキーワードテーブルも、画面定義データと同様、XML形式で記述することができる。そしてここでは、図中で最上位のmessage_list要素1つが、1つのキーワードテーブルの内容を示し、language属性の値が、このテーブルがどの言語のキーワード文字列を記述したものであるかを示す。また、message_list要素の子要素であるmessage要素1つが、1つのキーワードに関するデータを示す。すなわち、message要素のid属性の値がキーワードIDを、string属性の値がこれと対応するキーワード文字列を、それぞれ示す。
【0110】
なお、キーワードテーブルには、キーワードIDがどのレベルのキーワードを示すものかを記述する必要はない。また、同じキーワードIDが、複数の異なるレベルのキーワードを示すために使われていても、全く問題ない。
また、図示は省略するが、名称テーブルも、キーワードテーブルと同様にXML形式で記述することができる。例えば、message要素のid属性の値が画面構成要素IDを、string属性の値がこれと対応する名称の文字列を、それぞれ示すようにすればよい。図8,図9に示したように名称を複数登録する場合には、string1属性,string2属性等として、これらを記載できるようにすればよい。
【0111】
次に、図25に、第2の実施形態における検索表示部の表示例を示す。
第2の実施形態においても、GUI編集画面300において検索タブ401が選択された場合にPC40が検索表示部の表示を行うことは第1の実施形態と同様であるが、その内容は、図25に示したようなものとしている。
すなわち、検索表示部410′には、検索開始の指示を受け付けるための検索実行ボタン413の他には、検索範囲設定部430,各レベルのキーワード選択部441〜444,検索条件設定部451を設けている。
【0112】
このうち、検索範囲設定部430は、画面構成要素の検索を行う際の検索範囲の指定を受け付ける部分であり、アプリ毎にチェックボックスを設け、そのオン/オフにより、各アプリで使用するGUIのデータを検索範囲に含めるか否かを設定できるようにしている。どのアプリについてチェックボックスを設けるかは、例えば、編集対象としてPC40に読み込んである画面定義データにつき、window要素のfunction属性の値をサーチして決定することができる。
【0113】
キーワード選択部441〜444は、検索に使用する第1〜第4レベル(項目1〜項目4)のキーワードの選択を受け付ける部分であり、項目4(第4レベル)について選択を受け付けるキーワード選択部444について示しているように、プルダウンメニュー445により、キーワードの選択を受け付けるものである。プルダウンメニューに選択肢としてどのようなキーワードを表示するかについては、その表示処理の説明において後述する。
【0114】
検索条件設定部451は、検索の際にどのレベルのキーワードを考慮するかの設定を受け付ける部分である。検索条件設定部451はテキストボックスであり、ユーザが適宜に論理式を入力することができる。図では、項目1乃至項目4の全てのキーワードについてAND検索を行う設定がなされた例を示している。また、テキストボックスではなく、例えば、アンド検索に使用するキーワードの項目の選択をチェックボックス等により受け付ける形式とすることも考えられる。
【0115】
そして、このような検索表示部410′において、ユーザにより検索範囲,キーワード及び検索条件の設定がなされた後、検索実行ボタン413が押下された場合、PC40のCPUは、編集対象として読み込んである全ての画面データを検索し、指定された条件に一致する画面構成要素を抽出して、第1の実施形態で図12を用いて説明したような検索結果表示部420に表示する。この画面については、第1の実施形態の場合と同じ形式のものを用いることができる。
【0116】
次に、PC40のCPUが以上説明してきた画面構成要素の抽出に関する機能を実現するために実行する処理について説明する。ここで説明する処理も全て、PC40のCPUが、UIカスタマイズツール200の機能を実現するためのアプリケーションプログラムを実行することにより行うものである。
まず、図26に、検索表示部410′におけるプルダウンメニューの表示処理のフローチャートを示す。この処理は、図25に示した検索表示部410′においてプルダウンメニューを開くボタンが押下された場合に実行するものである。
【0117】
この処理においては、まずステップS61で、どの項目のキーワード選択部においてプルダウンメニューを開くボタンが押下されたかを判断する。そして、これが項目1〜4のいずれであるかに応じて、ステップS62〜S65のいずれかに進み、検索項目及び参照項目を設定する。
【0118】
具体的には、項目1のキーワード選択部441においてボタンが押下された場合には、ステップS62で検索条件を「なし」に設定すると共に、参照項目を「項目1」に設定する。項目2のキーワード選択部442においてボタンが押下された場合には、ステップS63で検索条件を「項目1」に設定すると共に、参照項目を「項目2」に設定する。項目3のボタンが押下された場合には、ステップS64で検索条件を「項目1&項目2」に設定すると共に、参照項目を「項目3」に設定する。項目4のボタンが押下された場合には、ステップS65で検索条件を「項目1&項目2&項目3」に設定すると共に、参照項目を「項目4」に設定する。すなわち、ボタンが押下されたキーワード選択部と対応する項目を参照項目に、それより上位の項目を検索条件に設定する。
【0119】
そして、ステップS62〜S65の後は、ステップS66乃至S71で、入れ子式の2つのループ処理を行う。
外側のループは、UIカスタマイズツール200により編集中のGUIのデータに含まれる全ての画面定義データを順次参照対象としてステップS67乃至S70の処理を実行する画面一覧走査ループである。
【0120】
内側のループは、ステップS66で参照対象とした画面定義データに含まれる各画面構成要素を順次参照対象としてステップS68及びS69の処理を実行する画面定義データ走査ループである。
この画面定義データ走査ループでは、まずステップS68で、参照中の画面構成要素に関する検索項目の全てのキーワードIDが、現在その項目について選択されているキーワードのキーワードIDと一致するか否か判断する。この検索項目は、ステップS62〜S65で設定した項目であり、また、各項目について選択されているキーワードのキーワードIDは、プルダウンメニューによりキーワード文字列が選択された際に、キーワード列と対応付けて記憶しておけばよい。また、検索項目が「なし」の場合、ステップS68の判断は常にYESとし、検索項目についてキーワードが未選択の場合は、その項目についてはキーワードIDが常に一致しているとする。
【0121】
そして、ステップS68でYESの場合、ステップS69に進み、参照中の画面構成要素に関する参照項目のキーワードIDを保持し、ステップS70に進む。NOの場合は、そのままステップS70に進む。
これらの2つの入れ子式のループ処理を全て完了すると、UIカスタマイズツール200によりGUIに配置可能な画面構成要素のうち、ボタンが押下された項目より上位の項目について現在選択されているものと同じキーワードが設定されている全ての画面構成要素につき、ボタンが押下された項目のキーワードIDを保持することができる。
【0122】
これらの処理の後、次のステップS72では、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。表示言語IDについては、図13のステップS15の場合と同様に把握できる。そしてその後、ステップS73乃至S75のキーワードID走査ループを、ステップS69で保持した全種類のキーワードIDを順次参照しながら繰り返す。すなわち、ステップS72で取得した文字列変換テーブルから参照中のキーワードIDと対応するキーワードIDを取得して保持する。なお、ステップS69では同じキーワードIDが複数回保持される場合もあるが、ステップS73で参照対象とするのは、1種類につき1回のみである。
【0123】
そして、このキーワードID走査ループの処理により、プルダウンメニューに選択肢として表示すべきキーワード文字列のリストを作成できるため、次のステップS76で、そのリストに従って、ボタンが押下された項目のキーワードの選択を受け付けるプルダウンメニューを表示して、処理を終了する。
【0124】
以上の処理により、上位から順に検索に使用するキーワードを選択していく場合に、既に選択したキーワードに関連する下位のキーワードを容易に選択できるようなプルダウンメニューを自動的に作成でき、検索に使用する複数のキーワードを効率よく選択可能とすることができる。特に、全キーワードについてアンド検索を行う場合には、段階的に検索対象を絞り込めるようなキーワードの選択が可能となる。
【0125】
次に、図27及び図28に、図25に示した検索表示部410′において検索実行が指示された場合に実行する検索結果の表示処理のフローチャートを示す。この処理は、図25に示した検索実行ボタン413が押下された場合に実行するものであり、検索結果の表示形式は、第1の実施形態で図12を用いて説明したものと同じである。
【0126】
この場合、PC40のCPUは、まずステップS81で、検索表示部410′において受け付けた、検索対象のアプリ、検索に用いる各項目のキーワード及び検索条件の指定内容を保持すると共に、ステップS82で、編集作業中のユーザの表示言語IDと対応するキーワードテーブルを取得する。表示言語IDについては、図13のステップS15の場合と同様に把握できる。
その後、ステップS83〜S91で、入れ子式の3つのループ処理を行う。一番外側のループは、ステップS81で保持した検索対象の各アプリを順次参照対象としてステップS84乃至S90の処理を実行するアプリ走査ループである。
【0127】
次のループは、ステップS83で参照対象としたアプリが使用する各画面定義データを順次参照対象としてステップS85乃至S89の処理を実行する画面一覧走査ループである。ここで参照対象とすべき画面定義データは、図3に示した画面一覧データにより決定できる。
そして、最も内側のループは、ステップS84で参照対象とした画面定義データに含まれる各画面構成要素を順次参照対象としてステップS86乃至S88の処理を実行する画面定義データ走査ループである。
【0128】
そして、画面定義データ走査ループでは、まずステップS86で、参照中の画面構成要素と対応付けられている各項目のキーワードを取得する。この取得は、参照中の画面定義データから、参照中の画面構成要素と対応するキーワードIDを取得し、ステップS82で取得したキーワードテーブルからこのキーワードIDと対応するキーワード文字列を取得して行うことができる。
【0129】
次のステップS87では、ステップS86で取得したキーワードを、ステップS81で保持した検索に用いるキーワードと項目毎に比較する。そして、ステップS81で保持した検索条件が示す項目について、これらが一致していれば、参照中の画面構成要素は、検索により抽出すべき画面構成要素であると判断できる。そこでこの場合、ステップS88に進み、参照中の画面構成要素につき、どのアプリが使用する画面に含まれるかを示すアプリケーション識別子(window要素のfunction属性)、および画面構成要素自身の識別子である画面構成要素識別子(item要素のid属性)を保持する。
【0130】
そして、以上の3つの入れ子式のループ処理を全て終了すると、ステップS88で保持したデータに基づき、画面構成要素の抽出結果を示す検索結果表示部420の表示を行うべく、ステップS92に進んで図28に示す部分の処理を行う。
そしてここでは、まずステップS92で検索結果表示部420の枠を表示する。この「枠」は、検索結果表示部420のうち抽出リスト表示部421以外の、抽出された画面構成要素の内容に関わらず固定的な表示を行う部分である。
その後、ステップS93で、編集作業中のユーザの表示言語IDと対応する名称リストを取得する。
【0131】
次に、ステップS94〜S100で、入れ子式の2つのループ処理を行う。外側のループは、ステップS88で識別子を保持した全てのアプリを順次参照対象としてステップS95乃至S99の処理を実行する検索結果走査ループAである。なお、同じアプリについて複数回アプリケーション識別子が保持されていたとしても、ここで参照対象とするのは1回のみである。
そして、ステップS95では、参照中のアプリの名称文字列を、アプリケーション識別子と編集作業中のユーザの表示言語IDとに基づいて図示しないテーブルから取得し、検索結果表示部420のうち抽出リスト表示部421に表示する。
【0132】
その後、ステップS96乃至S99の検索結果走査ループBで、ステップS88で識別子を保持した画面構成要素のうち、対応するアプリケーション識別子が参照中のアプリと一致するものを順次参照対象としてステップS97及びS98に示す処理を実行する。すなわち、ステップS97で、参照中の画面構成要素の名称を示す文字列を、画面構成要素識別子と、ステップS93で取得した文字列テーブルとに基づいて取得し、必要に応じてこれを加工して、抽出した画面構成要素を表す文字列として抽出リスト表示部421に表示する。また、ステップS98で、その表示した画面構成要素と対応するチェックボックスを抽出リスト表示部421に表示する。
そして、ステップS94〜S100のループ処理が全て終了すると、図28の処理は終了する。
【0133】
以上の処理により、PC40は、検索実行ボタン413の押下に応じて、ユーザにより指定された複数のキーワード及び検索条件に従い、指定されたキーワードと同じキーワードが対応付けられた画面構成要素のリストを表示することができる。画面構成要素がどのアプリが使用する画面に配置されるものかに応じて、画面構成要素を分類して表示することができる。
この実施形態においては、このように、各画面構成要素に、上位/下位の関係を有する複数のキーワードを設定できるようにしているため、体系付けられたキーワードによる検索が可能となり、目的の画面構成要素の詳細な絞り込みを容易に行うことができる。
【0134】
〔変形例:図29〕
以上で実施形態の説明を終了するが、この発明において、装置の構成、具体的な処理内容、表示する画面の内容や用途、データの形式等が、以上説明してきた実施形態において具体的に説明したものに限られないことは、もちろんである。
例えば、画面構成要素の検索結果を、図12に示した検索結果表示部に代えて、図11に示した編集内容表示部310の脇に表示させるようにしてもよい。
【0135】
図29に、この構成を採用した場合の、検索結果表示画面の例を示す。
この例では、画面構成要素の検索結果を、GUI画面に対する編集操作を受け付ける編集内容表示部310の脇に、抽出リスト380として表示している。このリストの書式及びリストの表示に必要な処理は、上述の各実施形態で述べた抽出リスト表示部421の場合と同様でよい。図27の例では、表示スペースの都合上、図8に示した「名称2」のみで、抽出された画面構成要素の表示を行っているが、「名称1」も用いた表示を行うことももちろん可能である。
【0136】
また、抽出リスト380の画面構成要素はマウスのクリック等により選択可能であり、PC40は、カーソル381により選択された画面構成要素を示す。またこのとき、抽出リスト380において選択された画面構成要素を、編集内容表示部310において編集操作を受け付ける画面構成要素として選択し、その画面構成要素をユーザが特定できるように強調する表示を行う。例えば、符号Aで示すように、選択された画面構成要素を枠線で囲う表示を行う。
また、抽出リスト380において選択された画面構成要素が現在表示中のGUI画面に表示されていないものであったり、現在タブにより選択されているアプリと異なるアプリで使用されるものであったりした場合には、GUI画面やタブの選択も、抽出リスト380において選択された画面構成要素を含むものに切り換える。
【0137】
このような表示を行うようにすれば、キーワード検索により抽出された画面構成要素がどんな画面に配置されるどのような画面構成要素かをユーザが容易に認識できる上、単にリストから画面構成要素を選択するだけで、直ちに編集内容表示部310において抽出された画面構成要素に関する編集操作を行うことができるため、効率的な編集操作が可能となる。
【0138】
なお、選択された画面構成要素を強調する表示としては、枠囲いの他、点滅させる、色を変える、濃度を変える、ハッチングを付す等、種々のものが考えられる。また、抽出リスト表示部421においていずれかの画面構成要素を示す文字列がクリックされた場合に、その画面構成要素が選択された状態の編集内容表示部310及び抽出リスト380の表示に移行するようにしてもよい。
【0139】
また、抽出リスト380において選択された画面構成要素だけでなく、抽出された画面構成要素のうち、選択された画面構成要素と同じ画面に配置される画面構成要素も、同様に強調して表示してもよい。あるいは、抽出リスト380における画面構成要素と無関係に、編集内容表示部310へGUI画面のプレビューを表示させる場合に、その画面に表示される画面構成要素のうち、キーワード検索により抽出された画面構成要素を強調して表示するようにしてもよい。
【0140】
また、抽出リスト380の表示につき、抽出した画面構成要素がどのGUI画面に配置されるものであるかがわかるように、アプリ毎だけでなく、GUI画面毎に分けてリストを表示するようにしてもよい。第2の実施形態のように、各画面構成要素に系統的に複数のキーワードを設定している場合には、画面構成要素の名称に代えて、またはこれに加えて、抽出結果をキーワードそのものを用いて表示したり、さらに、抽出結果を上位のキーワードについてソートして表示し、かつ上位から下位まで、複数のキーワードを並べて表示することによっても、画面構成要素がどの画面に属するものかを分かり易くすることができる。画面構成要素の種別を、キーワードと合わせて表示するようにしてもよい。
【0141】
また、キーワードにつき、各言語のキーワード文字列を直接画面定義データ内に記述することは妨げられない。逆に、キーワードIDを画面定義データ内に記述せず、これとは別のテーブルに記載することも考えられる。この場合、例えば、画面構成要素の識別子と、キーワードID又はキーワード文字列とを対応付けるテーブルを別途用意すればよい。
【0142】
また、この発明を、画像処理装置以外の装置で用いるGUIの編集を行う画面編集装置に適用してもよいことはもちろんである。例えば、この発明は、ネットワーク家電,自動販売機,医療機器,電源装置,空調システム,ガス・水道・電気等の計量システム,自動車,航空機,汎用コンピュータ等の任意の電子装置について、その装置の備える表示器に表示させる操作画面を編集する装置として、実現できる。
また、画面に表示させる操作部の構成も、ボタンに限られない。
【0143】
また、この発明の記録媒体は、コンピュータにハードウェアを制御させて上述したような画面編集装置として機能させるためのプログラムを記録した記録媒体である。このような記録媒体からこのプログラムをRAMに読み出させてCPUに実行させることにより、上述した実施形態や変形例と同様の効果を得ることができる。また、このようなプログラムを、記録媒体の配布によらず、ダウンロード等により提供することも可能である。
また、以上述べてきた各実施形態の構成及び変形例は、矛盾しない範囲で適宜組み合わせて適用することも可能である。
【産業上の利用可能性】
【0144】
以上説明してきたように、この発明の画面編集装置又は画面編集方法によれば、表示器に表示させる画面を編集する場合に、ユーザが編集すべき箇所を効率よく発見できるようにし、編集操作の効率を改善することができる。
従って、この発明を適用することにより、表示器に表示させる画面を容易にカスタマイズ可能な編集環境を提供することができる。
【図面の簡単な説明】
【0145】
【図1】この発明の第1の実施形態である画面編集装置により編集した画面データに基づいて画面を表示する装置の例である画像処理装置のハードウェア構成を示すブロック図である。
【図2】図1に示した画像処理装置及びPCの機能のうち、GUIの表示及びカスタマイズに関する機能の構成を示す、機能ブロック図である。
【図3】図1に示した画像処理装置が使用するGUIの内容を規定するデータセットの構成を示す図である。
【図4】図3に示した画面定義データの内容をより詳細に示す図である。
【図5】図4に示した画面定義データに従って表示されるGUI画面の例を示す図である。
【0146】
【図6】この発明の実施形態である画面編集装置が使用するキーワードテーブルの例を示す図である。
【図7】その別の例を示す図である。
【図8】この発明の実施形態である画面編集装置が使用する名称テーブルの例を示す図である。
【図9】その別の例を示す図である。
【図10】図2に示したPCのUIカスタマイズツールがGUI画面の編集操作を受け付けるためのGUI編集画面の表示例を示す図である。
【0147】
【図11】UIカスタマイズツールがキーワードを用いた画面構成要素の検索及び抽出の指示を受け付けるための画面の表示例である。
【図12】同じくキーワードを用いた画面構成要素の検索結果を表示する画面の表示例を示す図である。
【図13】図2に示したPCのCPUが実行する、図11に示した検索表示部の表示処理のフローチャートである。
【図14】同じく図12に示した検索結果表示部の表示処理のフローチャートである。
【図15】その続きのフローチャートである。
【0148】
【図16】画像処理装置がドキュメントボックスアプリで使用する画面のうち、印字画面より下位の画面の遷移例を示す図である。
【図17】図16に示した印字画面の内容を示す図である。
【図18】図16に示した日付印字画面の内容を示す図である。
【図19】図16に示した書式画面の内容を示す図である。
【図20】図16に示した印字色変更画面の内容を示す図である。
【0149】
【図21】図16に示した印字位置画面の内容を示す図である。
【図22】図17乃至図21に示した画面に設けたボタン相互の関係を示す図である。
【図23】この発明の第2の実施形態で用いる画面定義データの例を示す図である。
【図24】同じくキーワードテーブルの例を示す図である。
【図25】この発明の画面編集装置の第2の実施形態であるPCが表示する検索表示部の例を示す図である。
【0150】
【図26】そのPCのCPUが実行する、検索表示部におけるプルダウンメニューの表示処理のフローチャートである。
【図27】同じく検索表示部において検索実行が指示された場合に実行する検索結果の表示処理のフローチャートである。
【図28】その続きのフローチャートである。
【図29】この発明の変形例において画面編集装置であるPCが画面構成要素の検索結果を表示する画面の例を示す図である。
【符号の説明】
【0151】
10:画像処理装置、11:CPU、12:ROM、13:RAM、14:NVRAM、
15:パネルI/F、16:エンジンI/F、17:通信I/F、18:操作パネル、
19:エンジン部、20:システムバス、30:ネットワーク、40:PC、110:制御部、111:通信手段、112:画面定義データ管理手段、113:画面生成手段、114:個人認証管理手段、120:記憶部、121:画面定義データ記憶手段、122:認証データ記憶手段、200:UIカスタマイズツール、201:通信手段、202:画面定義データ入出力手段、203:画面構成要素抽出手段、210:カスタマイズ手段、300:GUI編集画面、310,310′:編集内容表示部、370:関連要素検索ボタン、410:検索表示部、411:キーワード入力部,412:キーワードリスト表示部,413:検索実行ボタン、420:検索結果表示部、421:抽出リスト表示部、422:一括非表示ボタン
【特許請求の範囲】
【請求項1】
表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置であって、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、
編集対象の画面構成要素の選択を受け付ける選択受付手段と、
該選択受付手段により選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手段と、
キーワードの入力を受け付けるキーワード受付手段と、
該キーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する抽出手段とを有することを特徴とする画面編集装置。
【請求項2】
請求項1に記載の画面編集装置であって、
前記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段を有し、
前記受付手段が、前記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段を有することを特徴とする画面編集装置。
【請求項3】
請求項1又は2に記載の画面編集装置であって、
前記キーワード記憶手段が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段であり、
前記抽出手段は、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能であることを特徴とする画面編集装置。
【請求項4】
請求項1又は2に記載の画面編集装置であって、
前記編集対象として選択されている画面構成要素と対応するキーワードを用いて、そのキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する第2の抽出手段を設けたことを特徴とする画面編集装置。
【請求項5】
請求項1乃至4のいずれか一項に記載の画面編集装置であって、
前記抽出手段が抽出した画面構成要素のうち、ユーザが選択した任意の数の画面構成要素につき、一括して前記表示設定を行う手段を有することを特徴とする画面編集装置。
【請求項6】
請求項1乃至4のいずれか一項に記載の画面編集装置であって、
前記抽出手段に、抽出した画面構成要素を、前記操作画面のプレビュー中で強調して表示する手段を設けたことを特徴とする画面編集装置。
【請求項7】
表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法であって、
コンピュータが、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手順と、
編集対象の画面構成要素の選択を受け付ける選択受付手順と、
該選択受付手順で選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手順と、
キーワードの入力を受け付けるキーワード受付手順と、
該キーワード受付手順で受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手順とを実行することを特徴とする画面編集方法。
【請求項8】
請求項7に記載の画面編集方法であって、
前記コンピュータが、
前記キーワード記憶手順で記憶したキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手順を実行し、
前記受付手順は、前記表示手順で表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手順であることを特徴とする画面編集方法。
【請求項9】
請求項7又は8に記載の画面編集方法であって、
前記キーワード記憶手順が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手順であり、
前記抽出手順が、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能な手順であることを特徴とする画面編集方法。
【請求項10】
コンピュータを、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置として機能させるためのプログラムであって、
前記コンピュータを、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、
編集対象の画面構成要素の選択を受け付ける選択受付手段と、
該選択受付手段により選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手段と、
キーワードの入力を受け付けるキーワード受付手段と、
該キーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する抽出手段として機能させるためのプログラムを含むプログラム。
【請求項11】
請求項10に記載のプログラムであって、
前記コンピュータを、
前記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段として機能させるためのプログラムを含み、
前記受付手段が、前記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段であることを特徴とするプログラム。
【請求項12】
請求項10又は11に記載のプログラムであって、
前記キーワード記憶手段が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段であり、
前記抽出手段は、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能であることを特徴とするプログラム。
【請求項1】
表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置であって、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、
編集対象の画面構成要素の選択を受け付ける選択受付手段と、
該選択受付手段により選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手段と、
キーワードの入力を受け付けるキーワード受付手段と、
該キーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する抽出手段とを有することを特徴とする画面編集装置。
【請求項2】
請求項1に記載の画面編集装置であって、
前記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段を有し、
前記受付手段が、前記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段を有することを特徴とする画面編集装置。
【請求項3】
請求項1又は2に記載の画面編集装置であって、
前記キーワード記憶手段が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段であり、
前記抽出手段は、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能であることを特徴とする画面編集装置。
【請求項4】
請求項1又は2に記載の画面編集装置であって、
前記編集対象として選択されている画面構成要素と対応するキーワードを用いて、そのキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する第2の抽出手段を設けたことを特徴とする画面編集装置。
【請求項5】
請求項1乃至4のいずれか一項に記載の画面編集装置であって、
前記抽出手段が抽出した画面構成要素のうち、ユーザが選択した任意の数の画面構成要素につき、一括して前記表示設定を行う手段を有することを特徴とする画面編集装置。
【請求項6】
請求項1乃至4のいずれか一項に記載の画面編集装置であって、
前記抽出手段に、抽出した画面構成要素を、前記操作画面のプレビュー中で強調して表示する手段を設けたことを特徴とする画面編集装置。
【請求項7】
表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集方法であって、
コンピュータが、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手順と、
編集対象の画面構成要素の選択を受け付ける選択受付手順と、
該選択受付手順で選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手順と、
キーワードの入力を受け付けるキーワード受付手順と、
該キーワード受付手順で受け付けたキーワードと対応する画面構成要素を抽出し、上記表示設定を行う画面構成要素の候補として表示する抽出手順とを実行することを特徴とする画面編集方法。
【請求項8】
請求項7に記載の画面編集方法であって、
前記コンピュータが、
前記キーワード記憶手順で記憶したキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手順を実行し、
前記受付手順は、前記表示手順で表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手順であることを特徴とする画面編集方法。
【請求項9】
請求項7又は8に記載の画面編集方法であって、
前記キーワード記憶手順が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手順であり、
前記抽出手順が、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能な手順であることを特徴とする画面編集方法。
【請求項10】
コンピュータを、表示器に表示させる操作画面の内容を編集し、編集結果を保存する画面編集装置として機能させるためのプログラムであって、
前記コンピュータを、
前記操作画面に配置可能な各画面構成要素について、その画面構成要素と対応する1以上のキーワードを記憶するキーワード記憶手段と、
編集対象の画面構成要素の選択を受け付ける選択受付手段と、
該選択受付手段により選択された画面構成要素について前記操作画面に表示させるか否かを定める表示設定を行う手段と、
キーワードの入力を受け付けるキーワード受付手段と、
該キーワード受付手段が受け付けたキーワードと対応する画面構成要素を抽出し、前記表示設定を行う画面構成要素の候補として表示する抽出手段として機能させるためのプログラムを含むプログラム。
【請求項11】
請求項10に記載のプログラムであって、
前記コンピュータを、
前記キーワード記憶手段が記憶しているキーワードのうち、編集中の操作画面に配置可能な画面構成要素と対応するものの一覧を表示する表示手段として機能させるためのプログラムを含み、
前記受付手段が、前記表示手段に表示された一覧の中から画面構成要素の抽出に使用するキーワードの選択を受け付ける手段であることを特徴とするプログラム。
【請求項12】
請求項10又は11に記載のプログラムであって、
前記キーワード記憶手段が、前記画面構成要素と対応するキーワードとして、互いに上位/下位の関係を有する複数のキーワードを記憶する手段であり、
前記抽出手段は、その複数のキーワードのうち、1又は複数の任意のレベルのキーワードを用いて前記画面構成要素の抽出を行うことが可能であることを特徴とするプログラム。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図10】
【図29】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図10】
【図29】
【公開番号】特開2009−48397(P2009−48397A)
【公開日】平成21年3月5日(2009.3.5)
【国際特許分類】
【出願番号】特願2007−213465(P2007−213465)
【出願日】平成19年8月20日(2007.8.20)
【出願人】(000006747)株式会社リコー (37,907)
【Fターム(参考)】
【公開日】平成21年3月5日(2009.3.5)
【国際特許分類】
【出願日】平成19年8月20日(2007.8.20)
【出願人】(000006747)株式会社リコー (37,907)
【Fターム(参考)】
[ Back to top ]