情報処理装置及び情報処理プログラム
【課題】紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けるようにした情報処理装置を提供する。
【解決手段】情報処理装置の表示手段は、電子データを表示し、電子データ付加手段は、前記表示手段によって表示された電子データに対して、他の電子データを付加し、関連付手段は、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける。
【解決手段】情報処理装置の表示手段は、電子データを表示し、電子データ付加手段は、前記表示手段によって表示された電子データに対して、他の電子データを付加し、関連付手段は、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及び情報処理プログラムに関する。
【背景技術】
【０００２】
電子会議システムの１つの典型的な構成例として、大型の共有ディスプレイと、個人端末がネットワークを介して繋がれているシステムがある。会議中に各参加者は、個人端末で会議メモを取ることがしばしばあるが、このための１つの手段として、プレゼンテーションと同期して、個人端末画面にメモやアノテーションを書いたりする方法が存在する。
【０００３】
これに関連する技術として、例えば、特許文献１には、会議等においてパソコン等を操作する人のみならず、会議に参加する全ての人が、共有している画面に対し自由に文字等を記入することができ、会議等の進行を効率化する薄型ディスプレイを用いた集合型電子コラボレーションシステムを提供することを課題とし、パソコン等の映像信号、又はパソコン等が接続されていなければ白背景の映像信号、をペイント機能を有する簡易アプリケーションのユーザインタフェースと共に薄型ディスプレイに表示し、会議等の参加者がこの薄型ディスプレイにペン型の入力装置を用いて文字等を自由に記入することにより、会議等の参加者により共同作業を行うことを可能とし、共同作業によって作成した画面を静止画データとしてプリンタに印刷、又はＰＣカードへ保存できる構成が開示されている。
【０００４】
また、例えば、特許文献２には、表示されたファイル上での位置を考えずに、オブジェクトをファイル全体と関係付けて表示でき、より多くのオブジェクトを短時間でファイルに関係付けて表示することを課題とし、参加者が共通に見るための十分な大きさの共通表示部を有する１台の共通情報処理装置と、各参加者が手元で情報の作成、表示を専用に行う個人表示部を有する複数台の個人情報処理装置とを、データ通信路にてネットワーク状に接続している電子会議支援システムにおいて、共通表示部又は個人表示部に表示されたファイルに対してコメント、参考資料等をオブジェクトとして関係付ける際に、即座にファイルの特定の位置にオブジェクトを埋め込むのではなく、前段階としてファイル上の不特定の位置にオブジェクトを表示して関係付けを示すことが開示されている。
【０００５】
また、例えば、特許文献３には、会議又は打ち合わせ時における文字や画像の手書き情報を電子的に読み取って補正し、補正した手書き情報を含めて資料を作成して関係者に配信できるようにすることを課題とし、情報処理装置は、配信先情報、フォーム、入力受付手段、補正手段、変換手段、データ取り込み手段、資料作成手段、配信手段を有し、文字又は画像を含む手書き情報をイメージデータとして取り込む読取装置と接続可能とし、読取装置により取り込まれたイメージデータの入力を受け付け、そのイメージデータを補正して所定のデータ形式に変換し、変換したデータをフォームＤＢ（ＤａｔａＢａｓｅ）から選択したフォームに取り込み、前記変換データを取り込んだフォームに従って資料を作成し、その資料を配信先情報ＤＢから選択した配信先の端末装置にネットワークを介して配信することが開示されている。
【特許文献１】特開平１１−０７３１７４号公報
【特許文献２】特開平１０−３２２３３１号公報
【特許文献３】特開２００４−２１５１７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、紙上に描画された書き込みに関する電子データを、会議等に用いている電子データに関連付けることは困難であった。
本発明は、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けるようにした情報処理装置及び情報処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の情報処理装置は、電子データを表示する表示手段と、前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段を具備することを特徴とする。
【０００８】
請求項２の情報処理装置は、請求項１に記載する情報処理装置であって、紙上に描画される書き込みに関する電子データを前記関連付手段によっては関連付けないように制御する制御手段をさらに具備することを特徴とする。
【０００９】
請求項３の情報処理装置は、請求項１又は２に記載する情報処理装置であって、操作者を認証する認証手段と、前記認証手段によって認証された操作者毎に、前記関連付手段によって関連付けられた他のデータを記憶するデータ記憶手段をさらに具備することを特徴とする。
【００１０】
請求項４の情報処理プログラムは、コンピュータを、電子データを表示する表示手段と、前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段として機能させることを特徴とする。
【発明の効果】
【００１１】
請求項１記載の情報処理装置によれば、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けることができるようになる。
【００１２】
請求項２記載の情報処理装置によれば、関連付けるべき電子データと関連付けを行わない電子データを分けることができるようになる。
【００１３】
請求項３記載の情報処理装置によれば、個人毎に紙上に描画された書き込みに関する電子データを記憶することができるようになる。
【００１４】
請求項４記載の情報処理プログラムによれば、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けることができるようになる。
【発明を実施するための最良の形態】
【００１５】
以下、図面に基づき本発明を実現するにあたっての好適な一実施の形態の例を説明する。
図１は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、コンピュータ・プログラム、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させること、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能にほぼ一対一に対応しているが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。
【００１６】
以下、表示されている電子データに付加する他の電子データとして、主にアノテーションデータを例示して説明する。アノテーションデータとは、表示されている文書等の電子データに対して、貼り付ける注、コメント等の電子データである。アノテーションデータとしては、テキスト、フリーハンド、図形、ビットマップ、マーカー、付箋紙等の電子データがある。
また、紙上に描画された書き込みに関する電子データとして、主にストロークデータを例示して説明する。
手書きが行われる場面として、会議（複数人によって行われる会合、討論等を含む）を主に例示して説明する。会議の他に、電子ペン等を用いて手書きによる記載が行われ、その手書きによる描画データをアノテーションデータに関連付ける場合であれば適用することができる。
また、紙は、通常の紙の他に、電子ペーパー等の媒体であってもよい。その場合であっても、後述する情報画像を表示するようにしてもよいし、ペンの軌跡を表現するストロークデータを抽出できるようにすればよい。
また、操作者は、説明の文脈に応じて、会議の参加者等として説明する場合がある。また、複数人の操作者であってもよいし、第１の操作を行う操作者と第２の操作を行う操作者は、同一人である必要もない。
【００１７】
本実施の形態は、図１に示すように、個人情報端末１１０、電子ペン１２０、アドレス付きノート（紙）１３０、共有画面制御装置１４０、個人認証装置１５０、個人情報管理サーバー１６０、会議支援サーバー１７０、ユーザマネジメントサーバー１８０を有している。個人情報端末１１０、個人情報管理サーバー１６０、会議支援サーバー１７０、ユーザマネジメントサーバー１８０は、通信回線１９９を介してそれぞれ接続されている。
【００１８】
個人情報端末１１０は、表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、記憶領域１１５、通信モジュール１１６を有している。具体的には、例えば会議参加者の個人所有のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、操作者によって電子ペン１２０を用いて指示が行えるようなタッチパネルを有するタブレットＰＣ等が該当する。
【００１９】
表示管理モジュール１１１は、会議に用いられている発表用等の電子データ（会議支援サーバー１７０内の会議ＤＢ１７１が記憶している会議資料１７２等）を表示する。その電子データは、共有画面制御装置１４０の表示管理モジュール１４１によって表示されている電子データであり、複数の会議参加者が見ている電子データを個人情報端末１１０にも表示する。また、アノテーションマネジメントモジュール１１２によって電子データに付加されたアノテーションデータ、メモ・マネジメントモジュール１１３によって電子データ又はアノテーションデータに関連付けられたストロークデータ等を表示する。なお、個人情報端末１１０の操作者の操作に応じて発生するアノテーションデータ、ストロークデータは、個人情報端末１１０のみに表示する。つまり、アノテーションデータ、ストロークデータは、個人用のメモデータとしての役割を有する。
【００２０】
アノテーションマネジメントモジュール１１２は、操作者の操作に応じて、表示管理モジュール１１１によって表示されている電子データに対して、アノテーションデータを付加する。また、このアノテーションデータをその付加した日時とともに、通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１にアノテーション情報１６３として記憶する。
【００２１】
メモ・マネジメントモジュール１１３は、通信モジュール１１６を介して、電子ペン１２０の通信モジュール１２１から送信されてくるストロークデータを受け取る。そして、アドレス付きノート（紙）１３０上に描画された書き込みに関するストロークデータを、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータに関連付ける。そして、その関連付けられたストロークデータをその関連付けた日時とともに、通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１に個人メモ情報１６４として記憶する。
【００２２】
認証モジュール１１４は、個人認証装置１５０と接続されており、個人認証装置１５０からの情報を読み取り、通信回線１９９を介してユーザマネジメントサーバー１８０内のユーザマネジメントＤＢ１８１を用いて個人認証を行い、操作者を認証する。そして、操作者情報（操作者ＩＤ、ログイン日時等）を記憶領域１１５に記録する。また、個人情報管理サーバー１６０内の個人用ＤＢ１６１等とのリンクを設定する。
記憶領域１１５は、表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、通信モジュール１１６からアクセスされ、必要となるデータの記憶を行う。
通信モジュール１１６は、電子ペン１２０の通信モジュール１２１と接続されており、通信モジュール１２１から送信されてくるストロークデータを受け取り、メモ・マネジメントモジュール１１３へ渡す。
【００２３】
個人認証装置１５０は、個人情報端末１１０の認証モジュール１１４と接続されており、個人情報端末１１０の操作者の操作に応じて、個人認証情報を受け取り、認証モジュール１１４へ渡す。例えば、操作者個人を特定可能な情報を記憶しているＩＣカードの読み取り、指紋情報の読み取り、又は利用者ＩＤとパスワードの受け取り等がある。また、個人認証装置１５０は、個人情報端末１１０に内蔵されていてもよい。
【００２４】
電子ペン１２０は、通信モジュール１２１、アドレス認識モジュール１２２、記憶領域１２３、制御モジュール１２４を有している。また、電子ペン１２０は、個人情報端末１１０上でアノテーションを付加すること（スタイラスペンの機能）と、アドレス付きノート（紙）１３０にメモ書きをするための両方に使用されるようなものであってもよい。その場合、紙の上では通常のペンとして、紙に記録できる。電子ペン１２０のハードウェアの構成例については図３を用いて後述する。
通信モジュール１２１は、個人情報端末１１０の通信モジュール１１６と接続されており、アドレス認識モジュール１２２が認識したストロークデータ（アドレスデータ等からなるものである）を個人情報端末１１０へ送信する。
アドレス認識モジュール１２２は、操作者によってアドレス付きノート（紙）１３０上に描画されたときのアドレス付きノート（紙）１３０上に印刷されている情報画像を読み取って、アドレスデータを認識し、ストロークデータを生成する。
記憶領域１２３は、通信モジュール１２１、アドレス認識モジュール１２２、制御モジュール１２４からアクセスされ、必要となるデータの記憶を行う。
制御モジュール１２４は、アドレス付きノート（紙）１３０上に描画される書き込みに関するストロークデータを、アノテーションデータと個人情報端末１１０のメモ・マネジメントモジュール１１３によって関連付ける又は関連付けさせないように制御する。
【００２５】
アドレス付きノート（紙）１３０は、操作者によって電子ペン１２０を用いて書き込みが行われるメモ用等の紙であって、アドレス情報が表現されている情報画像が印刷されている。具体例については、図４を用いて後述する。
【００２６】
共有画面制御装置１４０は、表示管理モジュール１４１、記憶領域（表示記録）１４２、通信モジュール１４３を有している。具体的には、例えば会議室に設置されている大型画面を有するＰＣ等が該当する。その画面は、複数人の会議参加者が見ることができるものである。
表示管理モジュール１４１は、画面の表示制御を行い、具体的には、会議支援サーバー１７０内の会議ＤＢ１７１に記憶されている会議資料１７２を通信モジュール１４３を介して受け取り、それを表示する。そして、会議資料１７２を表示すると、その画面を一斉に個人情報端末１１０に送信し、各個人情報端末１１０に表示する。そして、何時、その会議資料１７２の何ページ目が表示されたかの情報を、通信モジュール１４３を通じて個人情報管理サーバー１６０内の個人用ＤＢ１６１の会議資料表示情報１６２として記憶させる。
【００２７】
記憶領域（表示記録）１４２は、表示管理モジュール１４１、通信モジュール１４３からアクセスされ、必要となるデータ、特に表示管理モジュール１４１が表示すべきデータの記憶を行う。
通信モジュール１４３は、会議支援サーバー１７０と接続されており、会議ＤＢ１７１に記憶されている会議資料１７２を受け取り、共有画面制御装置１４０の表示管理モジュール１４１へ渡す。
【００２８】
個人情報管理サーバー１６０は、個人用ＤＢ１６１を有している。個人用ＤＢ１６１は、会議資料表示情報１６２、アノテーション情報１６３、個人メモ情報１６４を記憶している。
会議資料表示情報１６２は、通信回線１９９を介して、会議支援サーバー１７０内の会議ＤＢ１７１に記憶されている会議資料１７２が、共有画面制御装置１４０によって実際に表示された部分（例えばページ毎）を記憶する。また、認証モジュール１１４によって認証された操作者毎に、表示データ（共有画面制御装置１４０又は個人情報端末１１０に表示された会議資料にかかる電子データ）を記憶するようにしてもよい。
アノテーション情報１６３は、個人情報端末１１０に表示したアノテーションデータを会議資料表示情報１６２に付加して記憶する。また、認証モジュール１１４によって認証された操作者毎に、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータを記憶するようにしてもよい。また、認証モジュール１１４によって認証された操作者毎に、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータを記憶するようにしてもよい。
個人メモ情報１６４は、個人情報端末１１０に表示したストロークデータをアノテーションデータ等に関連付けて記憶する。また、認証モジュール１１４によって認証された操作者毎に、メモ・マネジメントモジュール１１３によって関連付けられたストロークデータを記憶するようにしてもよい。
【００２９】
会議支援サーバー１７０は、会議ＤＢ１７１を有している。会議ＤＢ１７１は、会議資料１７２を記憶している。会議支援サーバー１７０は共有画面制御装置１４０の通信モジュール１４３と接続されている。
会議ＤＢ１７１は、共有画面制御装置１４０の表示管理モジュール１４１からアクセスされ、会議に必要なデータが例えばページ毎に共有画面制御装置１４０の表示管理モジュール１４１へ送信される。また、その共有画面制御装置１４０によって表示されている会議資料１７２は通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１に会議資料表示情報１６２として記憶される。
【００３０】
ユーザマネジメントサーバー１８０は、ユーザマネジメントＤＢ１８１を有している。
ユーザマネジメントＤＢ１８１は、通信回線１９９を介して、個人情報端末１１０の認証モジュール１１４からアクセスされ、個人情報端末１１０の操作者に関する情報（認証に必要な情報等）を記憶している。
【００３１】
次に、図２を用いて、図１に示した実施の形態での典型的な処理例（（１）〜（９））を説明する。
（１）会議参加者は、会議開始時に、個人認証を行う。つまり、個人情報端末１１０の認証モジュール１１４は、個人認証装置１５０からの情報を読み取り、個人認証を行い、利用者を特定し、利用者情報を記憶領域１１５に記録する。また、個人用ＤＢ１６１とのリンクを設定する。
（２）共有画面制御装置１４０の大画面である共有画面２４０で会議資料が表示されると、その画面情報は一斉に個人情報端末１１０に送信され、各個人情報端末１１０の表示管理モジュール１１１が個人情報端末画面２１０に表示を行う。
（３）共有画面制御装置１４０の表示管理モジュール１４１は、何時、その資料の何ページを表示したかの情報を、個人情報管理サーバー１６０の個人用ＤＢ１６１にアノテーション情報１６３として記憶させる。
（４）個人情報端末１１０では、アノテーションマネジメントモジュール１１２により、操作者の電子ペン１２０の操作によって、個人情報端末画面２１０上に書き込まれたアノテーション２１１を、表示されている会議資料に付加する。
【００３２】
（５）付加されたアノテーション２１１のデータを、個人情報管理サーバー１６０の個人用ＤＢ１６１にアノテーション情報１６３として日時とともに記憶する。
（６）電子ペン１２０を用いて、アドレス付きノート（紙）１３０上に書かれた記載を対象として、アドレス認識モジュール１２２によってストロークデータを抽出し、記憶領域１２３に記憶する。
（７）電子ペン１２０は、なんらかのタイミングで（ボタンを押す、クレードルに差すなど）、記憶領域１２３に記憶されているストロークデータを、個人情報端末１１０の通信モジュール１１６へ送信する。
（８）個人情報端末１１０のメモ・マネジメントモジュール１１３は、受け取ったストロークデータをメモ情報として処理し、日時とともに個人情報管理サーバー１６０内の個人用ＤＢ１６１に個人メモ情報１６４として記憶させる。
【００３３】
図３を用いて、電子ペン１２０のハードウェアとしての構成例を説明する。
電子ペン１２０は、アドレス付きノート（紙）１３０上に筆記を行うための筆記部３０１と、例えば書いているのか否か（指し示しているのか否か等）といった筆記部３０１での筆記動作を検知するための（例えば筆圧を検出する）動作検知モジュール３０３と、アドレス付きノート（紙）１３０上の情報画像を例えばＣＣＤなどの２次元撮像素子で撮像することで紙面上における筆記ポイント近傍の画像を撮像する画像受付モジュール３０２と、画像受付モジュール３０２から入力した情報画像を復号してアドレス付きノート（紙）１３０上での座標情報を取得しストロークデータを生成するアドレス認識モジュール１２２と、アドレス認識モジュール１２２によって生成されたストロークデータを制御ボタン３０４の動作によって記憶領域１２３へ記憶させるか否かを制御する制御モジュール１２４と、ストロークデータを記憶するメモリなどからなる記憶領域１２３と、記憶したストロークデータを外部の個人情報端末１１０へ送信する通信モジュール１２１を備えている。
【００３４】
ここで、情報画像の読み取りは、例えば、ペン型スキャナの先に光発光部を設けて当該光発光部からの発光の反射光を参照して行うことができ、或いは、自然光により行われてもよい。また、情報画像の読み取りは、例えば、光の吸収点を検出すること或いは光の点を検出することにより行うことができる。
また、筆記部３０１による筆記の有無は、筆圧検知による手法ばかりでなく、例えば、ペン先が紙に触れることによる導電率の変化を検出する手法など、他の手法により検出されてもよい。
【００３５】
また、制御モジュール１２４は、アドレス付きノート（紙）１３０上に描画される書き込みに関する電子データを、制御ボタン３０４の動作によって個人情報端末１１０のメモ・マネジメントモジュール１１３によって関連付ける又は関連付けないように制御するものである。例えば、制御ボタン３０４の動作（関連解除指示）とは、電子ペン１２０の操作者によって押され続けている場合のことをいい、そして、制御モジュール１２４は、制御ボタン３０４が押され続けている間の座標情報を、個人情報端末１１０のメモ・マネジメントモジュール１１３によっては関連付けしないように制御する。関連付けしないように制御するとは、前述のように座標情報を記憶領域１２３に記憶させないようにしてもよいし、関連付けしないことを表す符号を付した座標情報を記憶領域１２３に記憶させるようにしてもよい。
また、通信モジュール１２１としては、例えば、ＵＳＢなどの有線ケーブル、或いは、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの無線を用いることができる。
【００３６】
図４を用いて、情報画像の一例を説明する。
この例では、２種類のビットパターン画像を組み合わせて、紙面の座標情報を埋め込んだ情報画像を構成する。
例えば、２種類のビットパターン画像（右上がり斜線と右下がり斜線）を組み合わせた８×８のマトリックス（図４に示す例では、正方形）で、座標情報を表現する情報画像を構成する。紙面上には例えば約２ｍｍ間隔（８ビットパターン画像×８ビットパターン画像）で、座標情報を埋め込むことができる。
なお、図４の例では、最も上側の１行と最も左側の１列は全て同一のビットパターン画像としており、これを同期コードとして用いている。そして、残りの部分のビットパターン画像で座標情報を表現している。
【００３７】
図５は、個人用ＤＢ１６１内のデータ構造例を示す説明図である。
個人用ＤＢ１６１内は、会議資料表示情報１６２、アノテーション情報１６３、個人メモ情報１６４によって階層構造を有している。なお、ストロークデータをメモデータとも称する。つまり、例えば、図５に示すように、個人情報端末表示画面５１０の下には個人情報端末表示画面５１０に付加されたアノテーション５２０、アノテーション５３０、アノテーション５４０を有し、アノテーション５２０の下にはアノテーション５２０に関連付けられたメモ５２１、メモ５２２を有し、アノテーション５３０の下にはアノテーション５３０に関連付けられたメモ５３１〜５３３を有し、アノテーション５４０の下にはアノテーション５４０に関連付けられたメモ５４１〜５４４を有している。
【００３８】
この階層構造は、それぞれのデータの日時情報に基づいて構成している。すなわち、個人情報端末表示画面５１０が表示されている期間（図５の例では、個人情報端末表示画面５１０が表示された後、個人情報端末表示画面５５０が表示されるまでの期間）に付加されたアノテーションデータを抽出し、それを個人情報端末表示画面５１０の下の階層に付加する（図５の例では、アノテーション５２０〜５４０）。次に、アノテーションデータが付加された後、次のアノテーションデータが付加されるまでの期間（図５の例では、アノテーション５２０〜５３０）に付加されたストロークデータ（図５の例では、メモ５２１、５２２）をアノテーション５２０に関連付ける。
【００３９】
図６は、個人情報端末１１０の画面例を示す説明図である。
図６（Ａ）は、個人情報端末表示画面６１０にアノテーション６１１、アノテーション６１２が付加された状態を示している。次に会議が進行し、共有画面制御装置１４０の大画面に次の会議資料を表示する。すると、図６（Ｂ）に示すように、各個人情報端末１１０に個人情報端末表示画面６２０を表示する。ここでは、アノテーションデータは付加されていなかったとする。さらに、共有画面制御装置１４０の大画面に次の会議資料を表示すると、図６（Ｃ）に示すように、各個人情報端末１１０に個人情報端末表示画面６３０を表示する。ここでは、アノテーション６３１が付加されたとする。
【００４０】
図７は、アドレス付きノート（紙）１３０の書き込み例を示す説明図である。
図６に示したように会議が進行したとした場合に、個人情報端末１１０の操作者は、アドレス付きノート（紙）１３０に電子ペン１２０を用いて書き込みを行ったとする。その書き込みは、図７に示すように、メモ７０１〜７０７である。
【００４１】
つまり、図６、図７を用いて説明した状況は、以下のような手順によって行われたものであるとする。
（１）個人情報端末表示画面６１０を表示
（２）アノテーション６１１を記述
（３）メモ７０１を記述
（４）アノテーション６１２を記述
（５）メモ７０２を記述
（６）メモ７０３を記述
（７）個人情報端末表示画面６２０を表示
（８）メモ７０４を記述
（９）メモ７０５を記述
（１０）関連解除指示（例えば、電子ペン１２０の制御ボタン３０４を押したままメモ７０６を記述）
（１１）メモ７０６を記述
（１０）個人情報端末表示画面６３０を表示
（１１）アノテーション６３１を記述
（１２）メモ７０７を記述
これらの表示又は記述されたデータは、それぞれ日時情報とともに、個人用ＤＢ１６１内に記憶される。
【００４２】
図８は、個人用ＤＢ１６１内の具体的なデータ構造例を示す説明図である。
つまり、個人情報端末表示画面６１０が表示された後、個人情報端末表示画面６２０が表示されるまでの間に、アノテーション６１１、アノテーション６１２が記述され、そして、アノテーション６１１が記述された後、アノテーション６１２が付加されるまでの間に、メモ７０１が記述され、アノテーション６１２が記述された後、個人情報端末表示画面６２０が表示されるまでの間に、メモ７０２、メモ７０３が記述されているので、ページ８１０下にアノテーション８２０、８３０があり、アノテーション８２０下にメモ８２１があり、アノテーション８３０下にメモ８３１、８３２がある。
次に、個人情報端末表示画面６２０が表示された後、個人情報端末表示画面６３０が表示されるまでの間では、アノテーションは記述されなかったが、アドレス付きノート（紙）１３０にメモが記述されたので、ページ８４０下にアノテーションデータのダミーとしてニル８５０を置き、ニル８５０に関連付けてメモ８５１、８５２を置く。
次に、関連解除指示がなされている間に、メモ７０６が記述されたので、表示画面データのダミーとしてニル８６０を置き、ニル８６０下にアノテーションデータのダミーとしてニル８７０を置き、ニル８７０に関連付けてメモ８５３を置く。
最後に、個人情報端末表示画面６３０が表示された後に、アノテーション６３１が記述され、そして、アノテーション６３１が記述された後、メモ７０７が記述されたので、ページ８３０下にアノテーション８９０を置き、アノテーション８９０下にメモ８５４を置く。
【００４３】
なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図９に示すように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバー、電子ペンの構成となり得るコンピュータ等である。表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、表示管理モジュール１４１、アドレス認識モジュール１２２等のプログラムを実行するＣＰＵ９０１と、そのプログラムやデータを記憶するＲＡＭ９０２と、本コンピュータを起動するためのプログラム等が格納されているＲＯＭ９０３と、補助記憶装置であるＨＤ９０４（例えばハードディスクを用いることができる）と、キーボード、マウス等のデータを入力する入力装置９０６と、ＣＲＴや液晶ディスプレイ等の出力装置９０５と、通信ネットワークと接続するための通信回線インタフェース９０７（例えばネットワークインタフェースカードを用いることができる）、そして、それらをつないでデータのやりとりをするためのバス９０８により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。
【００４４】
前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図９に示すハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図９に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えばＡＳＩＣ等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図９に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、情報家電、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。
【００４５】
前記実施の形態においては、データの付加又は関連付けとして日時情報を用いたものを示したが、リンクによって付加又は関連付けを行うようにしてもよい。
なお、前記実施の形態においては、関連解除指示は制御ボタン３０４が押され続けている間であるが、個人情報端末１１０の特定の場所をクリックする等としてもよい。
【００４６】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
【図面の簡単な説明】
【００４７】
【図１】本実施の形態の構成例についての概念的なモジュール構成図である。
【図２】本実施の形態の利用形態例を示す概念的な説明図である。
【図３】電子ペンの構成例を示す説明図である。
【図４】情報画像の一例を示す説明図である。
【図５】個人用ＤＢ内のデータ構造例を示す説明図である。
【図６】個人情報端末の画面例を示す説明図である。
【図７】アドレス付きノート（紙）の書き込み例を示す説明図である。
【図８】個人用ＤＢ内の具体的なデータ構造例を示す説明図である。
【図９】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【符号の説明】
【００４８】
１１０…個人情報端末
１１１…表示管理モジュール
１１２…アノテーションマネジメントモジュール
１１３…メモ・マネジメントモジュール
１１４…認証モジュール
１１５…記憶領域
１１６…通信モジュール
１２０…電子ペン
１２１…通信モジュール
１２２…アドレス認識モジュール
１２３…記憶領域
１２４…制御モジュール
１３０…アドレス付きノート（紙）
１４０…共有画面制御装置
１４１…表示管理モジュール
１４２…記憶領域（表示記録）
１４３…通信モジュール
１５０…個人認証装置
１６０…個人情報管理サーバー
１６１…個人用ＤＢ
１６２…会議資料表示情報
１６３…アノテーション情報
１６４…個人メモ情報
１７０…会議支援サーバー
１７１…会議ＤＢ
１７２…会議資料
１８０…ユーザマネジメントサーバー
１８１…ユーザマネジメントＤＢ
１９９…通信回線
３０１…筆記部
３０２…画像受付モジュール
３０３…動作検知モジュール
３０４…制御ボタン
【技術分野】
【０００１】
本発明は、情報処理装置及び情報処理プログラムに関する。
【背景技術】
【０００２】
電子会議システムの１つの典型的な構成例として、大型の共有ディスプレイと、個人端末がネットワークを介して繋がれているシステムがある。会議中に各参加者は、個人端末で会議メモを取ることがしばしばあるが、このための１つの手段として、プレゼンテーションと同期して、個人端末画面にメモやアノテーションを書いたりする方法が存在する。
【０００３】
これに関連する技術として、例えば、特許文献１には、会議等においてパソコン等を操作する人のみならず、会議に参加する全ての人が、共有している画面に対し自由に文字等を記入することができ、会議等の進行を効率化する薄型ディスプレイを用いた集合型電子コラボレーションシステムを提供することを課題とし、パソコン等の映像信号、又はパソコン等が接続されていなければ白背景の映像信号、をペイント機能を有する簡易アプリケーションのユーザインタフェースと共に薄型ディスプレイに表示し、会議等の参加者がこの薄型ディスプレイにペン型の入力装置を用いて文字等を自由に記入することにより、会議等の参加者により共同作業を行うことを可能とし、共同作業によって作成した画面を静止画データとしてプリンタに印刷、又はＰＣカードへ保存できる構成が開示されている。
【０００４】
また、例えば、特許文献２には、表示されたファイル上での位置を考えずに、オブジェクトをファイル全体と関係付けて表示でき、より多くのオブジェクトを短時間でファイルに関係付けて表示することを課題とし、参加者が共通に見るための十分な大きさの共通表示部を有する１台の共通情報処理装置と、各参加者が手元で情報の作成、表示を専用に行う個人表示部を有する複数台の個人情報処理装置とを、データ通信路にてネットワーク状に接続している電子会議支援システムにおいて、共通表示部又は個人表示部に表示されたファイルに対してコメント、参考資料等をオブジェクトとして関係付ける際に、即座にファイルの特定の位置にオブジェクトを埋め込むのではなく、前段階としてファイル上の不特定の位置にオブジェクトを表示して関係付けを示すことが開示されている。
【０００５】
また、例えば、特許文献３には、会議又は打ち合わせ時における文字や画像の手書き情報を電子的に読み取って補正し、補正した手書き情報を含めて資料を作成して関係者に配信できるようにすることを課題とし、情報処理装置は、配信先情報、フォーム、入力受付手段、補正手段、変換手段、データ取り込み手段、資料作成手段、配信手段を有し、文字又は画像を含む手書き情報をイメージデータとして取り込む読取装置と接続可能とし、読取装置により取り込まれたイメージデータの入力を受け付け、そのイメージデータを補正して所定のデータ形式に変換し、変換したデータをフォームＤＢ（ＤａｔａＢａｓｅ）から選択したフォームに取り込み、前記変換データを取り込んだフォームに従って資料を作成し、その資料を配信先情報ＤＢから選択した配信先の端末装置にネットワークを介して配信することが開示されている。
【特許文献１】特開平１１−０７３１７４号公報
【特許文献２】特開平１０−３２２３３１号公報
【特許文献３】特開２００４−２１５１７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、紙上に描画された書き込みに関する電子データを、会議等に用いている電子データに関連付けることは困難であった。
本発明は、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けるようにした情報処理装置及び情報処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の情報処理装置は、電子データを表示する表示手段と、前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段を具備することを特徴とする。
【０００８】
請求項２の情報処理装置は、請求項１に記載する情報処理装置であって、紙上に描画される書き込みに関する電子データを前記関連付手段によっては関連付けないように制御する制御手段をさらに具備することを特徴とする。
【０００９】
請求項３の情報処理装置は、請求項１又は２に記載する情報処理装置であって、操作者を認証する認証手段と、前記認証手段によって認証された操作者毎に、前記関連付手段によって関連付けられた他のデータを記憶するデータ記憶手段をさらに具備することを特徴とする。
【００１０】
請求項４の情報処理プログラムは、コンピュータを、電子データを表示する表示手段と、前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段として機能させることを特徴とする。
【発明の効果】
【００１１】
請求項１記載の情報処理装置によれば、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けることができるようになる。
【００１２】
請求項２記載の情報処理装置によれば、関連付けるべき電子データと関連付けを行わない電子データを分けることができるようになる。
【００１３】
請求項３記載の情報処理装置によれば、個人毎に紙上に描画された書き込みに関する電子データを記憶することができるようになる。
【００１４】
請求項４記載の情報処理プログラムによれば、紙上に描画された書き込みに関する電子データを、元の電子データに付加する電子データに関連付けることができるようになる。
【発明を実施するための最良の形態】
【００１５】
以下、図面に基づき本発明を実現するにあたっての好適な一実施の形態の例を説明する。
図１は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、コンピュータ・プログラム、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させること、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能にほぼ一対一に対応しているが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。
【００１６】
以下、表示されている電子データに付加する他の電子データとして、主にアノテーションデータを例示して説明する。アノテーションデータとは、表示されている文書等の電子データに対して、貼り付ける注、コメント等の電子データである。アノテーションデータとしては、テキスト、フリーハンド、図形、ビットマップ、マーカー、付箋紙等の電子データがある。
また、紙上に描画された書き込みに関する電子データとして、主にストロークデータを例示して説明する。
手書きが行われる場面として、会議（複数人によって行われる会合、討論等を含む）を主に例示して説明する。会議の他に、電子ペン等を用いて手書きによる記載が行われ、その手書きによる描画データをアノテーションデータに関連付ける場合であれば適用することができる。
また、紙は、通常の紙の他に、電子ペーパー等の媒体であってもよい。その場合であっても、後述する情報画像を表示するようにしてもよいし、ペンの軌跡を表現するストロークデータを抽出できるようにすればよい。
また、操作者は、説明の文脈に応じて、会議の参加者等として説明する場合がある。また、複数人の操作者であってもよいし、第１の操作を行う操作者と第２の操作を行う操作者は、同一人である必要もない。
【００１７】
本実施の形態は、図１に示すように、個人情報端末１１０、電子ペン１２０、アドレス付きノート（紙）１３０、共有画面制御装置１４０、個人認証装置１５０、個人情報管理サーバー１６０、会議支援サーバー１７０、ユーザマネジメントサーバー１８０を有している。個人情報端末１１０、個人情報管理サーバー１６０、会議支援サーバー１７０、ユーザマネジメントサーバー１８０は、通信回線１９９を介してそれぞれ接続されている。
【００１８】
個人情報端末１１０は、表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、記憶領域１１５、通信モジュール１１６を有している。具体的には、例えば会議参加者の個人所有のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、操作者によって電子ペン１２０を用いて指示が行えるようなタッチパネルを有するタブレットＰＣ等が該当する。
【００１９】
表示管理モジュール１１１は、会議に用いられている発表用等の電子データ（会議支援サーバー１７０内の会議ＤＢ１７１が記憶している会議資料１７２等）を表示する。その電子データは、共有画面制御装置１４０の表示管理モジュール１４１によって表示されている電子データであり、複数の会議参加者が見ている電子データを個人情報端末１１０にも表示する。また、アノテーションマネジメントモジュール１１２によって電子データに付加されたアノテーションデータ、メモ・マネジメントモジュール１１３によって電子データ又はアノテーションデータに関連付けられたストロークデータ等を表示する。なお、個人情報端末１１０の操作者の操作に応じて発生するアノテーションデータ、ストロークデータは、個人情報端末１１０のみに表示する。つまり、アノテーションデータ、ストロークデータは、個人用のメモデータとしての役割を有する。
【００２０】
アノテーションマネジメントモジュール１１２は、操作者の操作に応じて、表示管理モジュール１１１によって表示されている電子データに対して、アノテーションデータを付加する。また、このアノテーションデータをその付加した日時とともに、通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１にアノテーション情報１６３として記憶する。
【００２１】
メモ・マネジメントモジュール１１３は、通信モジュール１１６を介して、電子ペン１２０の通信モジュール１２１から送信されてくるストロークデータを受け取る。そして、アドレス付きノート（紙）１３０上に描画された書き込みに関するストロークデータを、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータに関連付ける。そして、その関連付けられたストロークデータをその関連付けた日時とともに、通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１に個人メモ情報１６４として記憶する。
【００２２】
認証モジュール１１４は、個人認証装置１５０と接続されており、個人認証装置１５０からの情報を読み取り、通信回線１９９を介してユーザマネジメントサーバー１８０内のユーザマネジメントＤＢ１８１を用いて個人認証を行い、操作者を認証する。そして、操作者情報（操作者ＩＤ、ログイン日時等）を記憶領域１１５に記録する。また、個人情報管理サーバー１６０内の個人用ＤＢ１６１等とのリンクを設定する。
記憶領域１１５は、表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、通信モジュール１１６からアクセスされ、必要となるデータの記憶を行う。
通信モジュール１１６は、電子ペン１２０の通信モジュール１２１と接続されており、通信モジュール１２１から送信されてくるストロークデータを受け取り、メモ・マネジメントモジュール１１３へ渡す。
【００２３】
個人認証装置１５０は、個人情報端末１１０の認証モジュール１１４と接続されており、個人情報端末１１０の操作者の操作に応じて、個人認証情報を受け取り、認証モジュール１１４へ渡す。例えば、操作者個人を特定可能な情報を記憶しているＩＣカードの読み取り、指紋情報の読み取り、又は利用者ＩＤとパスワードの受け取り等がある。また、個人認証装置１５０は、個人情報端末１１０に内蔵されていてもよい。
【００２４】
電子ペン１２０は、通信モジュール１２１、アドレス認識モジュール１２２、記憶領域１２３、制御モジュール１２４を有している。また、電子ペン１２０は、個人情報端末１１０上でアノテーションを付加すること（スタイラスペンの機能）と、アドレス付きノート（紙）１３０にメモ書きをするための両方に使用されるようなものであってもよい。その場合、紙の上では通常のペンとして、紙に記録できる。電子ペン１２０のハードウェアの構成例については図３を用いて後述する。
通信モジュール１２１は、個人情報端末１１０の通信モジュール１１６と接続されており、アドレス認識モジュール１２２が認識したストロークデータ（アドレスデータ等からなるものである）を個人情報端末１１０へ送信する。
アドレス認識モジュール１２２は、操作者によってアドレス付きノート（紙）１３０上に描画されたときのアドレス付きノート（紙）１３０上に印刷されている情報画像を読み取って、アドレスデータを認識し、ストロークデータを生成する。
記憶領域１２３は、通信モジュール１２１、アドレス認識モジュール１２２、制御モジュール１２４からアクセスされ、必要となるデータの記憶を行う。
制御モジュール１２４は、アドレス付きノート（紙）１３０上に描画される書き込みに関するストロークデータを、アノテーションデータと個人情報端末１１０のメモ・マネジメントモジュール１１３によって関連付ける又は関連付けさせないように制御する。
【００２５】
アドレス付きノート（紙）１３０は、操作者によって電子ペン１２０を用いて書き込みが行われるメモ用等の紙であって、アドレス情報が表現されている情報画像が印刷されている。具体例については、図４を用いて後述する。
【００２６】
共有画面制御装置１４０は、表示管理モジュール１４１、記憶領域（表示記録）１４２、通信モジュール１４３を有している。具体的には、例えば会議室に設置されている大型画面を有するＰＣ等が該当する。その画面は、複数人の会議参加者が見ることができるものである。
表示管理モジュール１４１は、画面の表示制御を行い、具体的には、会議支援サーバー１７０内の会議ＤＢ１７１に記憶されている会議資料１７２を通信モジュール１４３を介して受け取り、それを表示する。そして、会議資料１７２を表示すると、その画面を一斉に個人情報端末１１０に送信し、各個人情報端末１１０に表示する。そして、何時、その会議資料１７２の何ページ目が表示されたかの情報を、通信モジュール１４３を通じて個人情報管理サーバー１６０内の個人用ＤＢ１６１の会議資料表示情報１６２として記憶させる。
【００２７】
記憶領域（表示記録）１４２は、表示管理モジュール１４１、通信モジュール１４３からアクセスされ、必要となるデータ、特に表示管理モジュール１４１が表示すべきデータの記憶を行う。
通信モジュール１４３は、会議支援サーバー１７０と接続されており、会議ＤＢ１７１に記憶されている会議資料１７２を受け取り、共有画面制御装置１４０の表示管理モジュール１４１へ渡す。
【００２８】
個人情報管理サーバー１６０は、個人用ＤＢ１６１を有している。個人用ＤＢ１６１は、会議資料表示情報１６２、アノテーション情報１６３、個人メモ情報１６４を記憶している。
会議資料表示情報１６２は、通信回線１９９を介して、会議支援サーバー１７０内の会議ＤＢ１７１に記憶されている会議資料１７２が、共有画面制御装置１４０によって実際に表示された部分（例えばページ毎）を記憶する。また、認証モジュール１１４によって認証された操作者毎に、表示データ（共有画面制御装置１４０又は個人情報端末１１０に表示された会議資料にかかる電子データ）を記憶するようにしてもよい。
アノテーション情報１６３は、個人情報端末１１０に表示したアノテーションデータを会議資料表示情報１６２に付加して記憶する。また、認証モジュール１１４によって認証された操作者毎に、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータを記憶するようにしてもよい。また、認証モジュール１１４によって認証された操作者毎に、アノテーションマネジメントモジュール１１２によって付加されたアノテーションデータを記憶するようにしてもよい。
個人メモ情報１６４は、個人情報端末１１０に表示したストロークデータをアノテーションデータ等に関連付けて記憶する。また、認証モジュール１１４によって認証された操作者毎に、メモ・マネジメントモジュール１１３によって関連付けられたストロークデータを記憶するようにしてもよい。
【００２９】
会議支援サーバー１７０は、会議ＤＢ１７１を有している。会議ＤＢ１７１は、会議資料１７２を記憶している。会議支援サーバー１７０は共有画面制御装置１４０の通信モジュール１４３と接続されている。
会議ＤＢ１７１は、共有画面制御装置１４０の表示管理モジュール１４１からアクセスされ、会議に必要なデータが例えばページ毎に共有画面制御装置１４０の表示管理モジュール１４１へ送信される。また、その共有画面制御装置１４０によって表示されている会議資料１７２は通信回線１９９を介して、個人情報管理サーバー１６０内の個人用ＤＢ１６１に会議資料表示情報１６２として記憶される。
【００３０】
ユーザマネジメントサーバー１８０は、ユーザマネジメントＤＢ１８１を有している。
ユーザマネジメントＤＢ１８１は、通信回線１９９を介して、個人情報端末１１０の認証モジュール１１４からアクセスされ、個人情報端末１１０の操作者に関する情報（認証に必要な情報等）を記憶している。
【００３１】
次に、図２を用いて、図１に示した実施の形態での典型的な処理例（（１）〜（９））を説明する。
（１）会議参加者は、会議開始時に、個人認証を行う。つまり、個人情報端末１１０の認証モジュール１１４は、個人認証装置１５０からの情報を読み取り、個人認証を行い、利用者を特定し、利用者情報を記憶領域１１５に記録する。また、個人用ＤＢ１６１とのリンクを設定する。
（２）共有画面制御装置１４０の大画面である共有画面２４０で会議資料が表示されると、その画面情報は一斉に個人情報端末１１０に送信され、各個人情報端末１１０の表示管理モジュール１１１が個人情報端末画面２１０に表示を行う。
（３）共有画面制御装置１４０の表示管理モジュール１４１は、何時、その資料の何ページを表示したかの情報を、個人情報管理サーバー１６０の個人用ＤＢ１６１にアノテーション情報１６３として記憶させる。
（４）個人情報端末１１０では、アノテーションマネジメントモジュール１１２により、操作者の電子ペン１２０の操作によって、個人情報端末画面２１０上に書き込まれたアノテーション２１１を、表示されている会議資料に付加する。
【００３２】
（５）付加されたアノテーション２１１のデータを、個人情報管理サーバー１６０の個人用ＤＢ１６１にアノテーション情報１６３として日時とともに記憶する。
（６）電子ペン１２０を用いて、アドレス付きノート（紙）１３０上に書かれた記載を対象として、アドレス認識モジュール１２２によってストロークデータを抽出し、記憶領域１２３に記憶する。
（７）電子ペン１２０は、なんらかのタイミングで（ボタンを押す、クレードルに差すなど）、記憶領域１２３に記憶されているストロークデータを、個人情報端末１１０の通信モジュール１１６へ送信する。
（８）個人情報端末１１０のメモ・マネジメントモジュール１１３は、受け取ったストロークデータをメモ情報として処理し、日時とともに個人情報管理サーバー１６０内の個人用ＤＢ１６１に個人メモ情報１６４として記憶させる。
【００３３】
図３を用いて、電子ペン１２０のハードウェアとしての構成例を説明する。
電子ペン１２０は、アドレス付きノート（紙）１３０上に筆記を行うための筆記部３０１と、例えば書いているのか否か（指し示しているのか否か等）といった筆記部３０１での筆記動作を検知するための（例えば筆圧を検出する）動作検知モジュール３０３と、アドレス付きノート（紙）１３０上の情報画像を例えばＣＣＤなどの２次元撮像素子で撮像することで紙面上における筆記ポイント近傍の画像を撮像する画像受付モジュール３０２と、画像受付モジュール３０２から入力した情報画像を復号してアドレス付きノート（紙）１３０上での座標情報を取得しストロークデータを生成するアドレス認識モジュール１２２と、アドレス認識モジュール１２２によって生成されたストロークデータを制御ボタン３０４の動作によって記憶領域１２３へ記憶させるか否かを制御する制御モジュール１２４と、ストロークデータを記憶するメモリなどからなる記憶領域１２３と、記憶したストロークデータを外部の個人情報端末１１０へ送信する通信モジュール１２１を備えている。
【００３４】
ここで、情報画像の読み取りは、例えば、ペン型スキャナの先に光発光部を設けて当該光発光部からの発光の反射光を参照して行うことができ、或いは、自然光により行われてもよい。また、情報画像の読み取りは、例えば、光の吸収点を検出すること或いは光の点を検出することにより行うことができる。
また、筆記部３０１による筆記の有無は、筆圧検知による手法ばかりでなく、例えば、ペン先が紙に触れることによる導電率の変化を検出する手法など、他の手法により検出されてもよい。
【００３５】
また、制御モジュール１２４は、アドレス付きノート（紙）１３０上に描画される書き込みに関する電子データを、制御ボタン３０４の動作によって個人情報端末１１０のメモ・マネジメントモジュール１１３によって関連付ける又は関連付けないように制御するものである。例えば、制御ボタン３０４の動作（関連解除指示）とは、電子ペン１２０の操作者によって押され続けている場合のことをいい、そして、制御モジュール１２４は、制御ボタン３０４が押され続けている間の座標情報を、個人情報端末１１０のメモ・マネジメントモジュール１１３によっては関連付けしないように制御する。関連付けしないように制御するとは、前述のように座標情報を記憶領域１２３に記憶させないようにしてもよいし、関連付けしないことを表す符号を付した座標情報を記憶領域１２３に記憶させるようにしてもよい。
また、通信モジュール１２１としては、例えば、ＵＳＢなどの有線ケーブル、或いは、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの無線を用いることができる。
【００３６】
図４を用いて、情報画像の一例を説明する。
この例では、２種類のビットパターン画像を組み合わせて、紙面の座標情報を埋め込んだ情報画像を構成する。
例えば、２種類のビットパターン画像（右上がり斜線と右下がり斜線）を組み合わせた８×８のマトリックス（図４に示す例では、正方形）で、座標情報を表現する情報画像を構成する。紙面上には例えば約２ｍｍ間隔（８ビットパターン画像×８ビットパターン画像）で、座標情報を埋め込むことができる。
なお、図４の例では、最も上側の１行と最も左側の１列は全て同一のビットパターン画像としており、これを同期コードとして用いている。そして、残りの部分のビットパターン画像で座標情報を表現している。
【００３７】
図５は、個人用ＤＢ１６１内のデータ構造例を示す説明図である。
個人用ＤＢ１６１内は、会議資料表示情報１６２、アノテーション情報１６３、個人メモ情報１６４によって階層構造を有している。なお、ストロークデータをメモデータとも称する。つまり、例えば、図５に示すように、個人情報端末表示画面５１０の下には個人情報端末表示画面５１０に付加されたアノテーション５２０、アノテーション５３０、アノテーション５４０を有し、アノテーション５２０の下にはアノテーション５２０に関連付けられたメモ５２１、メモ５２２を有し、アノテーション５３０の下にはアノテーション５３０に関連付けられたメモ５３１〜５３３を有し、アノテーション５４０の下にはアノテーション５４０に関連付けられたメモ５４１〜５４４を有している。
【００３８】
この階層構造は、それぞれのデータの日時情報に基づいて構成している。すなわち、個人情報端末表示画面５１０が表示されている期間（図５の例では、個人情報端末表示画面５１０が表示された後、個人情報端末表示画面５５０が表示されるまでの期間）に付加されたアノテーションデータを抽出し、それを個人情報端末表示画面５１０の下の階層に付加する（図５の例では、アノテーション５２０〜５４０）。次に、アノテーションデータが付加された後、次のアノテーションデータが付加されるまでの期間（図５の例では、アノテーション５２０〜５３０）に付加されたストロークデータ（図５の例では、メモ５２１、５２２）をアノテーション５２０に関連付ける。
【００３９】
図６は、個人情報端末１１０の画面例を示す説明図である。
図６（Ａ）は、個人情報端末表示画面６１０にアノテーション６１１、アノテーション６１２が付加された状態を示している。次に会議が進行し、共有画面制御装置１４０の大画面に次の会議資料を表示する。すると、図６（Ｂ）に示すように、各個人情報端末１１０に個人情報端末表示画面６２０を表示する。ここでは、アノテーションデータは付加されていなかったとする。さらに、共有画面制御装置１４０の大画面に次の会議資料を表示すると、図６（Ｃ）に示すように、各個人情報端末１１０に個人情報端末表示画面６３０を表示する。ここでは、アノテーション６３１が付加されたとする。
【００４０】
図７は、アドレス付きノート（紙）１３０の書き込み例を示す説明図である。
図６に示したように会議が進行したとした場合に、個人情報端末１１０の操作者は、アドレス付きノート（紙）１３０に電子ペン１２０を用いて書き込みを行ったとする。その書き込みは、図７に示すように、メモ７０１〜７０７である。
【００４１】
つまり、図６、図７を用いて説明した状況は、以下のような手順によって行われたものであるとする。
（１）個人情報端末表示画面６１０を表示
（２）アノテーション６１１を記述
（３）メモ７０１を記述
（４）アノテーション６１２を記述
（５）メモ７０２を記述
（６）メモ７０３を記述
（７）個人情報端末表示画面６２０を表示
（８）メモ７０４を記述
（９）メモ７０５を記述
（１０）関連解除指示（例えば、電子ペン１２０の制御ボタン３０４を押したままメモ７０６を記述）
（１１）メモ７０６を記述
（１０）個人情報端末表示画面６３０を表示
（１１）アノテーション６３１を記述
（１２）メモ７０７を記述
これらの表示又は記述されたデータは、それぞれ日時情報とともに、個人用ＤＢ１６１内に記憶される。
【００４２】
図８は、個人用ＤＢ１６１内の具体的なデータ構造例を示す説明図である。
つまり、個人情報端末表示画面６１０が表示された後、個人情報端末表示画面６２０が表示されるまでの間に、アノテーション６１１、アノテーション６１２が記述され、そして、アノテーション６１１が記述された後、アノテーション６１２が付加されるまでの間に、メモ７０１が記述され、アノテーション６１２が記述された後、個人情報端末表示画面６２０が表示されるまでの間に、メモ７０２、メモ７０３が記述されているので、ページ８１０下にアノテーション８２０、８３０があり、アノテーション８２０下にメモ８２１があり、アノテーション８３０下にメモ８３１、８３２がある。
次に、個人情報端末表示画面６２０が表示された後、個人情報端末表示画面６３０が表示されるまでの間では、アノテーションは記述されなかったが、アドレス付きノート（紙）１３０にメモが記述されたので、ページ８４０下にアノテーションデータのダミーとしてニル８５０を置き、ニル８５０に関連付けてメモ８５１、８５２を置く。
次に、関連解除指示がなされている間に、メモ７０６が記述されたので、表示画面データのダミーとしてニル８６０を置き、ニル８６０下にアノテーションデータのダミーとしてニル８７０を置き、ニル８７０に関連付けてメモ８５３を置く。
最後に、個人情報端末表示画面６３０が表示された後に、アノテーション６３１が記述され、そして、アノテーション６３１が記述された後、メモ７０７が記述されたので、ページ８３０下にアノテーション８９０を置き、アノテーション８９０下にメモ８５４を置く。
【００４３】
なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図９に示すように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバー、電子ペンの構成となり得るコンピュータ等である。表示管理モジュール１１１、アノテーションマネジメントモジュール１１２、メモ・マネジメントモジュール１１３、認証モジュール１１４、表示管理モジュール１４１、アドレス認識モジュール１２２等のプログラムを実行するＣＰＵ９０１と、そのプログラムやデータを記憶するＲＡＭ９０２と、本コンピュータを起動するためのプログラム等が格納されているＲＯＭ９０３と、補助記憶装置であるＨＤ９０４（例えばハードディスクを用いることができる）と、キーボード、マウス等のデータを入力する入力装置９０６と、ＣＲＴや液晶ディスプレイ等の出力装置９０５と、通信ネットワークと接続するための通信回線インタフェース９０７（例えばネットワークインタフェースカードを用いることができる）、そして、それらをつないでデータのやりとりをするためのバス９０８により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。
【００４４】
前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図９に示すハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図９に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えばＡＳＩＣ等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図９に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、情報家電、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。
【００４５】
前記実施の形態においては、データの付加又は関連付けとして日時情報を用いたものを示したが、リンクによって付加又は関連付けを行うようにしてもよい。
なお、前記実施の形態においては、関連解除指示は制御ボタン３０４が押され続けている間であるが、個人情報端末１１０の特定の場所をクリックする等としてもよい。
【００４６】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
【図面の簡単な説明】
【００４７】
【図１】本実施の形態の構成例についての概念的なモジュール構成図である。
【図２】本実施の形態の利用形態例を示す概念的な説明図である。
【図３】電子ペンの構成例を示す説明図である。
【図４】情報画像の一例を示す説明図である。
【図５】個人用ＤＢ内のデータ構造例を示す説明図である。
【図６】個人情報端末の画面例を示す説明図である。
【図７】アドレス付きノート（紙）の書き込み例を示す説明図である。
【図８】個人用ＤＢ内の具体的なデータ構造例を示す説明図である。
【図９】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【符号の説明】
【００４８】
１１０…個人情報端末
１１１…表示管理モジュール
１１２…アノテーションマネジメントモジュール
１１３…メモ・マネジメントモジュール
１１４…認証モジュール
１１５…記憶領域
１１６…通信モジュール
１２０…電子ペン
１２１…通信モジュール
１２２…アドレス認識モジュール
１２３…記憶領域
１２４…制御モジュール
１３０…アドレス付きノート（紙）
１４０…共有画面制御装置
１４１…表示管理モジュール
１４２…記憶領域（表示記録）
１４３…通信モジュール
１５０…個人認証装置
１６０…個人情報管理サーバー
１６１…個人用ＤＢ
１６２…会議資料表示情報
１６３…アノテーション情報
１６４…個人メモ情報
１７０…会議支援サーバー
１７１…会議ＤＢ
１７２…会議資料
１８０…ユーザマネジメントサーバー
１８１…ユーザマネジメントＤＢ
１９９…通信回線
３０１…筆記部
３０２…画像受付モジュール
３０３…動作検知モジュール
３０４…制御ボタン
【特許請求の範囲】
【請求項１】
電子データを表示する表示手段と、
前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、
紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段
を具備することを特徴とする情報処理装置。
【請求項２】
紙上に描画される書き込みに関する電子データを前記関連付手段によっては関連付けないように制御する制御手段
をさらに具備することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
操作者を認証する認証手段と、
前記認証手段によって認証された操作者毎に、前記関連付手段によって関連付けられた他のデータを記憶するデータ記憶手段
をさらに具備することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
コンピュータを、
電子データを表示する表示手段と、
前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、
紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段
として機能させることを特徴とする情報処理プログラム。
【請求項１】
電子データを表示する表示手段と、
前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、
紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段
を具備することを特徴とする情報処理装置。
【請求項２】
紙上に描画される書き込みに関する電子データを前記関連付手段によっては関連付けないように制御する制御手段
をさらに具備することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
操作者を認証する認証手段と、
前記認証手段によって認証された操作者毎に、前記関連付手段によって関連付けられた他のデータを記憶するデータ記憶手段
をさらに具備することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
コンピュータを、
電子データを表示する表示手段と、
前記表示手段によって表示された電子データに対して、他の電子データを付加する電子データ付加手段と、
紙上に描画された書き込みに関する電子データを、前記電子データ付加手段によって付加された他のデータに関連付ける関連付手段
として機能させることを特徴とする情報処理プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２００９−７０００７（Ｐ２００９−７０００７Ａ）
【公開日】平成２１年４月２日（２００９．４．２）
【国際特許分類】
【出願番号】特願２００７−２３６０４７（Ｐ２００７−２３６０４７）
【出願日】平成１９年９月１２日（２００７．９．１２）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２１年４月２日（２００９．４．２）
【国際特許分類】
【出願日】平成１９年９月１２日（２００７．９．１２）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]