感情極性推定装置、感情極性推定方法及び感情極性推定処理プログラム
【課題】テキスト全体または１文に書かれている言語表現の感情極性の自動推定を高精度に行う。
【解決手段】推定すべき性質を示す述語間の関係を記述した論理式を感情極性の推定に用いる論理式として保存し、上記論理式により構築されるマルコフ論理ネットワークにより、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記マルコフ論理ネットワークについて、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習処理モジュールにより学習し、得られた上記感情極性推定用論理式の重みデータを保存し、保存されたテキストデータについて、保存された感情極性推定用論理式の重みデータを用いて、１文感情極性とテキスト全体の感情極性を同時に推定する。
【解決手段】推定すべき性質を示す述語間の関係を記述した論理式を感情極性の推定に用いる論理式として保存し、上記論理式により構築されるマルコフ論理ネットワークにより、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記マルコフ論理ネットワークについて、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習処理モジュールにより学習し、得られた上記感情極性推定用論理式の重みデータを保存し、保存されたテキストデータについて、保存された感情極性推定用論理式の重みデータを用いて、１文感情極性とテキスト全体の感情極性を同時に推定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、単語などの言語表現の感情極性を自動推定する感情極性推定装置、感情極性推定方法及び感情極性推定処理プログラムに関する。
【背景技術】
【０００２】
近年、文書データにおける感情（意見や態度を含む）の判別は、様々な応用において重要になってきている。例えば、インターネット上の電子掲示板に書き込まれたある製品に関する消費者の意見が特定・判別できると、その製品に関する広範囲なサーベイが可能になる。また、すべての回答に人間を通すことなくアンケートの概要を把握することも可能になる。また、ブログなどの流行により個人の意見を容易に発信できるようになり、これらから有用な情報を抽出する技術の必要性が増している。特に、テキストからその書き手の抱いている感情の極性（ 例えば、ポジティブ“快”、もしくはネガティブ“不快”）を推定することは、商品についての意見分析や市場調査などにおいて有効であると考えられ、評判抽出や感情推定の研究が広く行われている。そのような自動特定・判別を実現するための重要なソースとして、各単語の感情極性（ ポジティブ“望ましい”、もしくはネガティブ“望ましくない”） を挙げることができる。最も単純には、ある文書においてポジティブな単語が多く出現している場合、素の文書全体もポジティブであると推測ができる。
【０００３】
従来、単語などの言語表現の感情極性を自動抽出する手法として、感情極性の系列ラベルをスピン系モデルを用いた語彙ネットワークにて表現する手法（例えば、特許文献１参照）や１文とテキスト全体の感情極性を同時に推定する方法（例えば、非特許文献１参照）が提案されている。
【０００４】
上記非特許文献１で提案されている手法では、文の感情極性が他の文の極性だけでなく、テキストの極性にも依存しているという事実に基づき、１文とテキスト全体の感情極性を同時に推定することで性能の向上を図っている。実際には系列ラベリングとして扱い、素性の構築においては隣接する文の極性とテキスト全体の極性を考慮している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−３３８３０１号公報
【非特許文献】
【０００６】
【非特許文献１】McDonald, R., Hannan, K., Neylon, T., Wells, M. and Reynar, J.: Structured Models for Fine-to-coarse Sentiment Analysis, Proceedings of the 45th Annual Meeting of the Association of Computational Linguistics, pp. 432{439 (2007).
【非特許文献２】山本和英，齋藤真実: 用例利用型による文間接続関係の同定，自然言語処理，Vol. 15, No. 3,pp. 21-51 (2008)
【非特許文献３】高村大也，乾 孝司，奥村 学: スピンモデルによる単語の感情極性抽出，情報処理学会論文誌，Vol. 47, No. 2, pp. 627-637 (2006)
【発明の概要】
【発明が解決しようとする課題】
【０００７】
テキストの感情極性推定では、テキスト全体、または文や文中の句、語に対してそれらが肯定的な表現か否定的な表現かを推定する。
【０００８】
従来、提案されている多くの感情極性推定手法では、例えば文や句などといった特定の単位での極性を対象としている。
【０００９】
上記特許文献１で提案されている感情極性の系列ラベルをスピン系モデルを用いた語彙ネットワークにて表現する手法では、１文とテキスト全体の同時推定は行っていない。
【００１０】
ところで、例えば、全体として肯定的な意見を述べているテキストでは肯定的な意見を述べている文が比較的多く出現すると考えられる。また、文の極性に関しても、隣接している２文の接続関係が逆接であれば、それらの極性は一致しないというような関係が存在すると考えられる。しかし、これらの関係は多くの場合において成立するが、必ずしも成り立つとは限らない。
【００１１】
また、非特許文献１で提案されている手法では、１文とテキスト全体の感情極性を同時に推定するようにしているが、テキストの構造を明示的な形で利用していない。
【００１２】
そこで、本発明の目的は、上述の如き従来の実情に鑑み、テキスト全体または１文に書かれている言語表現の感情極性（表現が与える印象のことであり、例えば、快・不快の感情など）の自動推定を高精度に行うことができる感情極性推定装置、感情極性推定方法及び感情極性推定処理プログラムを提供することにある。
【００１３】
本発明の更に他の目的、本発明によって得られる具体的な利点は、以下に説明される実施の形態の説明から一層明らかにされる。
【課題を解決するための手段】
【００１４】
本発明では、テキスト全体または１文に書かれている快・不快の感情（感情極性）を求めるに当たり、１文とテキスト全体の感情極性を同時に推定する時、マルコフ論理ネットワークを用いて、テキスト構造と各極性間の関係を明示的に考慮する。
【００１５】
すなわち、本発明は、感情極性推定装置であって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段と、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段と、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを保存する重みデータ保存手段と、感情極性を推定するテキストデータを保存するテキストデータ保存手段と、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとを備えることを特徴とする。
【００１６】
本発明に係る感情極性推定装置において、上記論理式データ保存手段には、感情極性推定用の論理式データとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）を示す論理式データを保存する。
【００１７】
また、本発明は、感情極性推定方法であって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、学習処理モジュールにより、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、感情極性を推定するテキストデータをテキストデータ保存手段に保存し、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定することを特徴とする。
【００１８】
さらに、本発明は、感情極性を推定するテキストデータを保存するテキストデータ保存手段に保存されたテキストデータについて感情極性を推定する感情極性推定装置に備えられるコンピュータにより実行される感情極性推定処理プログラムであって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとして、上記コンピュータを機能させることを特徴とする。
【発明の効果】
【００１９】
本発明では、テキストの構造を考慮し、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、テキストの感情極性推定処理の性能の向上させることができる。
【図面の簡単な説明】
【００２０】
【図１】本発明を適用した感情極性推定装置の構成を示すブロック図である。
【図２】上記感情極性推定装置の機能構成を示すブロック図である。
【図３】上記感情極性推定装置において学習処理モジュールにより実行される感情極性推定用論理式の重みを学習する学習処理の手順を示すフローチャートである。
【図４】上記感情極性推定装置に備えられた推定処理モジュールの機能を示すブロック図である。
【図５】上記感情極性推定装置において推定処理モジュールにより実行されるテキストデータの感情極性推定処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００２１】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、本発明は以下の例に限定されるものではなく、本発明の要旨を逸脱しない範囲で、任意に変更可能であることは言うまでもない。
【００２２】
本発明は、例えば図１に示すような構成の感情極性推定装置１００に適用される。
【００２３】
この感情極性推定装置１００は、バス１０を介して接続された中央制御部２０、記憶部３０、入力インターフェース部４０、出力インターフェース部５０、通信インターフェース部６０などからなる。
【００２４】
中央制御部２０は、ＣＰＵ（Central Processing Unit）２１、ＲＯＭ（Read Only Memory）２２、ＲＡＭ（Random Access Memory）２３などからなる。
【００２５】
記憶部３０は、ハードディスクやその他の不揮発性メモリからなる記憶装置であって、この感情極性推定装置１００により実行される感情極性推定処理プログラムＰＰＧ 、感情極性の推定に用いる論理式を示す論理式データＤＬＦ、上記論理式による感情極性の推定に用いる重み係数を示す重みデータＤＷ、上記論理式による感情極性の推定に用いる重み係数を学習により求めるための学習コーパスデータＤＣＰ、感情極性を推定するテキストデータＤＴＸなどを記憶している。
【００２６】
入力インターフェース部４０は、キーボード、マウス、マイクロフォンなど入力装置からなる。
【００２７】
出力インターフェース部５０は、ディスプレイ装置、プリンタ装置スピーカなどの出力装置からなる。
【００２８】
通信インターフェース部６０は、この感情極性推定装置１００が例えばインターネットなどのネットワークを介して外部と通信するためのモデムなどからなる。
【００２９】
上記記憶部３０には、上記入力インターフェース部４０や通信インターフェース部６０を介して、この感情極性推定装置１００により上記感情極性推定処理プログラムＰＰＧを実行するのに必要な上記論理式データＤＬＦ、上記学習コーパスデータＤＣＰ、上記テキストデータＤＴＸなどが蓄えられる。
【００３０】
この感情極性推定装置１００において、上記記憶部３０は、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データＤＬＦを保存する論理式データ保存手段として機能する。
【００３１】
また、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータＤＣＰを保存する学習コーパスデータ保存手段として機能する。
【００３２】
また、上記記憶部３０は、上記学習処理モジュール２０Ａによる学習処理によって得られた上記感情極性推定用論理式の重みデータＤＷを保存する重みデータ保存手段として機能する。
【００３３】
さらに、上記記憶部３０は、感情極性を推定するテキストデータＤＴＸを保存するテキストデータ保存手段として機能する。
【００３４】
そして、この感情極性推定装置１００の記憶部３０に記憶されている感情極性推定処理プログラムＰＰＧは、上記記憶部３０に記憶されている論理式データＤＬＦにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、上記記憶部３０に記憶されている学習コーパスデータＤＣＰを用いて、上記マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュール２０Ａと、上記記憶部３０に記憶されているテキストデータについて、上記学習処理モジュール２０Ａによる学習処理により上記記憶部３０に保存された感情極性推定用論理式の重みデータＤＷを用いて、上記記憶部３０に記憶されている論理式データＤＬＦにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュール２０Ｂとして、上記感情極性推定装置１００に備えられる中央制御部２０のＣＰＵ２１を機能させる。
【００３５】
すなわち、この感情極性推定装置１００は、その機能構成を図２に示すように、中央制御部２０のＣＰＵ２１が感情極性推定用論理式の重みＤＷを学習する学習処理を実行する学習処理モジュール２０Ａと、上記学習処理により得られた重みデータＤＷを用いて感情極性推定用論理式にしたがって、テキストデータＤＴＸについて感情極性推定処理を実行する推定処理モジュール２０Ｂとして機能する。すなわち、上記中央制御部２０のＣＰＵ２１は、ＲＯＭ２２に記憶されているブートプログラムに従って起動され、上記記憶部３０に記憶されている感情極性推定処理プログラムＰＰＧに従って、学習処理モジュール２０Ａにより、学習コーパスデータＤＣＰを用いて感情極性推定用の論理式データＤＬＦにて示される感情極性推定用論理式の重みを学習する学習処理を実行し、推定処理モジュール２０Ｂにより、上記学習処理により得られた重みデータＤＷを用いて、感情極性推定用の論理式データＤＬＦにて示される感情極性推定用論理式にしたがって、テキストデータについて感情極性推定処理を実行する。
【００３６】
この感情極性推定装置１００では、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、性能の向上を図っている。
【００３７】
すなわち、例えば、全体として肯定的な意見を述べているテキストでは肯定的な意見を述べている文が比較的多く出現すると考えられ、また、文の極性に関しても、隣接している２文の接続関係が逆接であれば、それらの極性は一致しないというような関係が存在すると考えられるが、これらの関係は多くの場合において成立するが、必ずしも成り立つとは限らないので、この感情極性推定装置１００では、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、１文とテキスト全体の感情極性を同時に推定する。
【００３８】
ここで、マルコフ論理ネットワークとは、一階述語論理とマルコフネットワーク（Markov Network）を組み合わせたものである。一階述語論理はドメインの知識を論理式という形で明示的に考慮することができるが、規則として与えられている論理式が偽となるような述語を１つでも含んでいる可能世界は充足不能と見なされるため、絶対に成立することが保証されている規則しか扱えないという問題がある。ここで可能世界とは定数のみを項とする述語(ground atom) の集合である。
【００３９】
これに対して、マルコフ論理ネットワークでは、述語論理の各論理式に重みを割り当てることで、確率的に可能世界のもっともらしさを表すことができ、論理式の違反を許容することが可能となる。通常の一階述語論理はこの重みが無限大になったものと捉えることができる。従って、マルコフ論理ネットワークでは、違反を許容する論理式と、違反を許さない論理式を同時に扱うことも可能である。
【００４０】
マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）は、一階述語論理の論理式Ｆｉとそれに対応する実数値の重みｗｉとの組の集合として定義される。可能世界ｘの確率分布は次の（１）式で与えられる。
【００４１】
【数１】
【００４２】
ここで、ｎｉ(ｘ)はｘにおいて真となる論理式Ｆｉのground formulaの数、Ｚは正規化項である。ground formulaとは、論理式Ｆｉ中の変数に定数を代入して得られる論理式のことである。この枠組みの利点は複数の関係推定問題を同時に扱えることだけでなく、推定すべき関係間の制約も扱えることである。
【００４３】
この感情極性推定装置１００では、マルコフ論理ネットワークの実装の一つであるMarkov thebeast(http://code.google.com/p/thebeast/)での呼称に倣い、データから得られる性質を示す述語をobserved predicate、推定すべき性質を示す述語をhidden predicate と呼ぶ。observed predicateは、一般的な機械学習手法における素性に対応する。また、同様にhidden predicate はラベルに対応する。また、observed predicateとhidden predicateとの関係を記述した論理式をlocal formulaと呼び、hidden predicate 間の関係を記述した論理式をglobal formulaと呼ぶ。
【００４４】
この感情極性推定装置１００では、入力としてテキストが与えられるとそのテキスト中の各文についての極性とテキストの極性を推定する。ここで、推定する極性は、文、または文章が肯定的な意見を述べている（“Ｐ”）、否定的な意見を述べている（“Ｎ”）、または、そのどちらでもない（“Ｃ”）の３種類である。
【００４５】
この感情極性推定装置１００において、使用する各述語（observed predicate，hidden predicate）を表１、表２に示す。
【００４６】
【表１】
【００４７】
【表２】
【００４８】
例えば、ｗｏｒｄ（ｓ，ｌ，ｗ）は、文ｓの位置ｌに語ｗが存在することを示し、ｓｐｏｌ（ｓ，ｐ）は文ｓの極性がｐであることを示す。文末表現は文の最後の節の自立語より後の表層である。例えば、“ＡＣアダプタは白にして欲しい。”という文では“て欲しい”が文末表現に当たる。文の接続詞の種類は「逆接」や「累加」といった前後の意味関係に基づいた接続詞の分類である。ここでは、非特許文献２に挙げられている７種類の接続関係、すなわち、「累加」、「加反」、「因果」、「並列」、「転換」、「例示」、「その他」を利用した。
【００４９】
次に、この感情極性推定装置１００において、使用した論理式について述べる。
【００５０】
先ず、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）について説明する。
【００５１】
各論理式中のｓやｌは変数を表し、ダブルクォーテーションで囲まれたものは定数を表し、変数の位置にあるアンダースコアは任意の値であることを表す。また、変数の前の“＋”はその変数を実際の定数で置き換えたものに展開することを示す。
【００５２】
例えば、ｓｐｏｌ（ｓ，＋ｐ）という述語を含む論理式は，実際にはｓｐｏｌ（ｓ，“Ｐ”），ｓｐｏｌ（ｓ，“Ｃ”），ｓｐｏｌ（ｓ，“Ｎ”）のそれぞれに置き換えられた論理式である。ここでは、簡略化のため、数式で用いられる関係（“＜”など）については，一般的な記法で記述している。
【００５３】
基本的に、テキストの極性に関する論理式（local formula）は文の極性に関するものと同様のものを利用しているため、ここでは、文の極性に関する論理式（local formula）とテキストの極性にしか用いていない論理式（local formula）について述べる。
【００５４】
文中の語と文の極性の関係は、次の（２）式にて示す。
【００５５】
【数２】
【００５６】
この（２）式は、Bag-of-Words(BOW)素性とみなすことができる。
【００５７】
また、極性を持つ語と文の極性の関係は、次の（３）式にて示す。
【００５８】
【数３】
【００５９】
この（３）式は、文中に極性を持つ語が存在していた場合、その極性が文の極性になるということを示す。
【００６０】
否定による極性の変更は、次の（４）式にて示す。
【００６１】
【数４】
【００６２】
この（４）式は、否定表現を含む文の極性についての記述である。極性を持つ語の近くに否定語が出現しているならば、文の極性はその語の極性とは異なると考えられる。
【００６３】
極性を持つ語とその他の語との共起は、次の（５）式にて示す。
【００６４】
【数５】
【００６５】
この（５）式は、極性を持つ語とその周囲の語の共起についての記述である。
【００６６】
語の共起は、次の（６）式にて示す。
【００６７】
【数６】
【００６８】
この（６）式は、文中に存在する語の共起と文の極性の関係を示す。ここでの共起に関しても上記と同様に近接している語の共起のみを考慮する。
【００６９】
文末表現は、次の（７）式にて示す。
【００７０】
【数７】
【００７１】
この（７）式は、文末表現と文の極性の関係を示す。
【００７２】
隣接する文の特徴とテキストの極性の関係は、次の（８）式、（９）式にて示す。
【００７３】
【数８】
【００７４】
【数９】
【００７５】
テキストの極性の決定には文内の情報だけではなく、文間の関係を考慮する必要がある。上記（８）式、（９）式は、隣接している２文における文末表現の遷移や各文中に含まれる極性を持つ語とテキストの極性の関係を示す。
【００７６】
次に、推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）について説明する。
【００７７】
global formulには文脈による文の極性の制約と文の極性とテキストの極性との関係を記述する。
【００７８】
接続関係による文の極性間の関係は、次の（１０）式、（１１）式にて示す。
【００７９】
【数１０】
【００８０】
【数１１】
【００８１】
隣接する文の接続関係によって、前文の極性と後文の極性の関係が異なると考えられる。例えば、逆接の関係にあれば後文の極性は前文の極性とは異なるであろうし、また、同じ話題が連続するような場合では前文の極性と後文の極性は同じになりやすい。上記（１０）式、（１１）式は、接続関係による文の極性の関係を示す。
【００８２】
これら以外の次の（１２）式にて示す接続関係と極性間の関係に関しては、データから学習する。
【００８３】
【数１２】
【００８４】
最後の文の極性とテキストの極性の関係は、次の（１３）式、（１４）式にて示す。
【００８５】
【数１３】
【００８６】
【数１４】
【００８７】
テキストの最後では著者の意見がまとめられていることが多く、従って最後の文の極性がそのテキスト全体の極性として捉えられると考えられる。上記（１３）式、（１４）式は、その関係を示している。極性が“どちらでもない”と判定されるものに関しては特に考慮しない。
【００８８】
テキストの極性と文の極性の関係は、次の（１５）式、（１６）式にて示す。
【００８９】
【数１５】
【００９０】
【数１６】
【００９１】
テキスト全体が肯定的な意見を述べているのならば、そのテキスト中には否定的な意見が出現することは少ないと考えられる。また、その逆も同様であると考えられる。
【００９２】
この感情極性推定装置１００では、感情極性推定用の論理式データＤＬＦとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）が上記記憶部３０に記憶されている。
【００９３】
そして、この感情極性推定装置１００において、学習処理モジュール２０Ａは、図３のフローチャートに示す手順に従って、感情極性推定用論理式の重みを学習する学習処理を実行する。
【００９４】
すなわち、学習処理モジュール２０Ａは、上記記憶部３０に学習コーパスデータＤＣＰとして記憶されている感情極性推定用論理式の重みを学習するデータと正解を学習コーパスから受け取るとともに（ステップＳ１）、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を構築し（ステップＳ２）、構築したマルコフ論理ネットワークを用いて、現在の重みを使ってデータからラベルすなわち文又はテキストの感情極性を推定し（ステップＳ３）、推定したラベルが正解と異なるか否かを判定する（ステップＳ４）。
【００９５】
上記学習処理モジュール２０Ａは、このステップＳ４における判定結果が「ＹＥＳ」、すなわち、推定したラベルが正解と異なる場合には、データにしたがって重みを更新して（ステップＳ５）、更新した重みを新たな重みデータとして上記記憶部３０に保存し（ステップＳ６）、上記ステップＳ２に戻って、上記記憶部３０に保存した新たな重みデータを用いマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を再構築するとともに、上記学習コーパスに学習すべきデータが残っているか否かを判定し（ステップＳ７）、このステップＳ７における判定結果が「ＹＥＳ」、すなわち、上記学習コーパスに学習すべきデータが残っている場合には、上記ステップＳ３に戻って、上記ステップＳ２において再構築したマルコフ論理ネットワークを用いて使ってデータからラベルを推定し、上記ステップＳ４において、推定したラベルが正解と異なるか否かを判定する処理を繰り返し行う。
【００９６】
そして、上記学習処理モジュール２０Ａは、上記ステップＳ７における判定結果が「ＮＯ」、すなわち、上記学習コーパスに学習すべきデータがなくなるまで、上記ステップＳ２〜ステップＳ７の処理を繰り返し行い、上記ステップＳ４における判定結果が「ＮＯ」、すなわち、上記学習コーパスから受け取ったデータから上記マルコフ論理ネットワークを用いて推定したラベルが正解と一致する重みデータＤＷを感情極性推定用論理式の重みとして上記記憶部３０に保存して学習処理を終了する。
【００９７】
また、この感情極性推定装置１００において、推定処理モジュール２０Ｂは、図４に示すように、上記学習処理モジュール２０Ａによる学習処理により得られた重みデータＤＷと、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、テキストデータＤＴＸについてラベルの推定処理を行うことにより、文の極性とテキストの極性を同時に推定した結果を出力する。
【００９８】
上記推定処理モジュール２０Ｂにより実行されるテキストデータの感情極性推定処理の詳細を図５のフローチャートに示す。
【００９９】
図５のフローチャートにおいて、iは繰り返しカウンタを示し、y，y’は推定されたラベル集合を示している。上記推定処理モジュール２０Ｂによる感情極性推定処理では、先ず、ｉ＝０，ｙ’＝０、すなわち、繰り返しカウンタの値ｉとラベル集合の値ｙ’を初期化し（ステップＳ１１）、繰り返しカウンタの値ｉをインクリメントして（ステップＳ１２）、上記学習処理モジュール２０Ａによる学習処理により得られた重みデータＤＷと、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関するlocal formul及びと文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、ラベル集合ｙを次に示す（１７）式により推定する（ステップＳ１３）。
【０１００】
【数１７】
【０１０１】
ここで、Ｇは、論理式の基礎化に使われる代入の集合であって、論理式中のどの変数にどの定数を代入するかという割り当ての集合を示している。ここで、論理式の基礎化とは、論理式中の全ての変数に定数を代入することである。solve(G,x)は、与えられたマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて集合Ｇと入力データｘからのラベルの推定を、与えられた制約条件を満たすように、目的関数を最大化させる解を探すＩＬＰ(整数線形計画法)によって行う。ここでは、目的関数は、次に示す（１８）式であり、制約条件はマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）中の論理式から作られる。
【０１０２】
【数１８】
【０１０３】
ｓ（ｙ，ｘ）は（１８）式で与えられるデータとラベルから得られるスコアである。ここでのwやｆは与えられているマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）から得る。
【０１０４】
次に、上記推定処理モジュール２０Ｂは、
ｓ（ｙ，ｘ）＞ｓ（ｙ’，ｘ）
すなわち、（１７）式で与えられるデータとラベルから得られるスコアｓ（ｙ，ｘ）が、先に求めたスコアｓ（ｙ’，ｘ）よりも大きいか否かを判定する（ステップＳ１４）。
【０１０５】
そして、上記推定処理モジュール２０Ｂは、上記ステップＳ１４における判定結果が「ＹＥＳ」、すなわち、求めたスコアｓ（ｙ，ｘ）が先に求めたスコアｓ（ｙ’，ｘ）よりも大きい場合には、ｙ’＝ｙとして（ステップＳ１５）、Ｇｉ＝Ｇｉ−１の更新処理を行い（ステップＳ１６）、また、上記ステップＳ１４における判定結果が「ＮＯ」、すなわち、求めたスコアｓ（ｙ，ｘ）が先に求めたスコアｓ（ｙ’，ｘ）よりも大きくない場合には、そのまま上記ステップＳ１６に移ってＧｉ＝Ｇｉ−１の更新処理を行う。
【０１０６】
次に、上記推定処理モジュール２０Ｂは、Ｇｉ＝Ｇｉ−１又は繰り返しの終了であるか否かを判定し（ステップＳ１７）、その判定結果が「ＮＯ」、すなわち、終了でない場合には、上記ステップＳ１２に戻って繰り返しカウンタの値ｉをインクリメントし、上記ステップＳ１７における判定結果が「ＹＥＳ」、すなわち、終了になるまで、上記ステップＳ１２〜ステップＳ１７の処理を繰り返し行い、全てのデータ（ｘ）についてラベルの推定を行い、推定したラベルを出力する（ステップＳ１８）。
【０１０７】
なお、この感情極性推定装置１００において、実際のマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）の学習処理、ラベルの推定処理には、マルコフ論理ネットワークの実装の一つであるMarkov thebeast(http://code.google.com/p/thebeast/)というツールを使用した。
【０１０８】
このような構成の感情極性推定装置１００における感情極性推定モデルの有効性を検証するため、Amazon.co.jp(http://www.amazon.co.jp)の掃除機とＭＰ３プレイヤーのカテゴリに属する製品に関するレビューのデータ用いて、次のような評価実験を行った。
【０１０９】
この評価実験において、データにはレビュー中の各文について、評価者が肯定的，或いは否定的な意見を述べていると思われる箇所にその極性がアノテーションされている。アノテーションは各レビューに対して１人の作業者が行っている。このデータは文やテキストに対してのアノテーションは行われていないため、文については文中の最後の位置にあるアノテーションの極性を文の極性として扱っている。テキストについては，評価者によってレビューに対して付与されている星の数による評価値を利用し、星１，２を否定的な意見を述べている、星４，５を肯定的な意見を述べている、星３をどちらでもないとした。実験に使用したデータに含まれるテキストの極性の割合を表３に示す。
【０１１０】
【表３】
【０１１１】
文の極性の識別モデルとテキストの極性の識別モデルとし、one-versus-the-rest分類器による３種類の極性のいずれかを推定する３値分類のモデルと、最初に極性の有無の判定を行い、極性ありと判定された事例に対して、肯定的か否定的かを推定する段階的なモデルの２種類で実験を行った。また、感情極性推定装置１００における感情極性推定モデルでは、大域的な制約の効果を見るため、局所的な制約のみによるモデルについての評価も行った。
【０１１２】
observed predicateに用いる語の極性に関しては、非特許文献３の単語感情極性対応表(http://www.lr.pi.titech.ac.jp/~takamura/pndic ja.html)を利用した。この対応表には各単語に対して極性の強さを示す値が付けられており、本実験ではこの値が０．７以上の単語を“Ｐ”、−０．７以下を“Ｎ”として扱った。単語の極性に関しては“Ｃ”（どちらでもない）は考慮していない。否定表現については助動詞“ない”のみを考慮した。単語の極性の決定に使用した閾値と語の共起に関する論理式（local formula）中のｎの値は実験で開発データセットを用いて同様の実験を行い、もっとも精度の高かった数値を使用した。マルコフ論理ネットワークの実装にはMarkov thebeast(http://code.google.com/p/thebeast/)を、ベースラインにはSVMlight(http://www.cs.cornell.edu/people/tj/svm_light/)を利用した。実験は各データに対して１０分割交差検定を行い、精度で評価した結果を表４に示す。
【０１１３】
【表４】
【０１１４】
“ＢＬ(multi)”は３値分類によるベースライン，“ＢＬ(cascade)”は２段階の推定によるベースライン、“Joint”は感情極性推定装置１００における感情極性推定モデル、“Joint(local)”は、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）のみを用いたモデルを表す。斜体はベースラインを下回ったものを表す。
【０１１５】
ベースラインに比べて、上記感情極性推定装置１００における感情極性推定モデルの方が良い結果を得ることができた。また、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）のみを用いたモデルは、掃除機では文の極性の精度では２段階モデルでのベースラインを下回っているものの、テキストの極性ではそれを上回っている。また、推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を用いたモデルの方は両方の製品において良い結果を得ることができており、文の極性とテキスト間の極性には関係があり、その関係を考慮することが性能の向上に繋がることを示している。
【０１１６】
上述の如く、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）ではラベル間の関係を記述でき、更に、その関係が満たされないことを許容できるため、“必ず満たさなければいけない”関係だけでなく、“満たした方が好ましい”関係を扱うことができ、これにより接続関係による文の極性間の関係や文とテキストの極性の傾向などをモデルに組み込むことができ、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）による文とテキストの感情極性の同時推定を行うようにした上記感情極性推定装置１００では、テキストの構造を考慮し、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、感情極性推定処理の性能の向上を図ることができる。
【０１１７】
上記感情極性推定装置１００のように、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、感情極性を推定するテキストデータをテキストデータ保存手段に保存し、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定することによって、感情極性推定処理の性能の向上を図ることができる。
【符号の説明】
【０１１８】
１０ バス、
２０ 中央制御部、
２０Ａ 学習処理モジュール、
２０Ｂ 推定処理モジュール、
２１ ＣＰＵ、
２２ ＲＯＭ、
２３ ＲＡＭ
３０ 記憶部、
４０ 入力インターフェース部、
５０ 出力インターフェース部、
６０ 通信インターフェース部、
１００ 感情極性推定装置
【技術分野】
【０００１】
本発明は、単語などの言語表現の感情極性を自動推定する感情極性推定装置、感情極性推定方法及び感情極性推定処理プログラムに関する。
【背景技術】
【０００２】
近年、文書データにおける感情（意見や態度を含む）の判別は、様々な応用において重要になってきている。例えば、インターネット上の電子掲示板に書き込まれたある製品に関する消費者の意見が特定・判別できると、その製品に関する広範囲なサーベイが可能になる。また、すべての回答に人間を通すことなくアンケートの概要を把握することも可能になる。また、ブログなどの流行により個人の意見を容易に発信できるようになり、これらから有用な情報を抽出する技術の必要性が増している。特に、テキストからその書き手の抱いている感情の極性（ 例えば、ポジティブ“快”、もしくはネガティブ“不快”）を推定することは、商品についての意見分析や市場調査などにおいて有効であると考えられ、評判抽出や感情推定の研究が広く行われている。そのような自動特定・判別を実現するための重要なソースとして、各単語の感情極性（ ポジティブ“望ましい”、もしくはネガティブ“望ましくない”） を挙げることができる。最も単純には、ある文書においてポジティブな単語が多く出現している場合、素の文書全体もポジティブであると推測ができる。
【０００３】
従来、単語などの言語表現の感情極性を自動抽出する手法として、感情極性の系列ラベルをスピン系モデルを用いた語彙ネットワークにて表現する手法（例えば、特許文献１参照）や１文とテキスト全体の感情極性を同時に推定する方法（例えば、非特許文献１参照）が提案されている。
【０００４】
上記非特許文献１で提案されている手法では、文の感情極性が他の文の極性だけでなく、テキストの極性にも依存しているという事実に基づき、１文とテキスト全体の感情極性を同時に推定することで性能の向上を図っている。実際には系列ラベリングとして扱い、素性の構築においては隣接する文の極性とテキスト全体の極性を考慮している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−３３８３０１号公報
【非特許文献】
【０００６】
【非特許文献１】McDonald, R., Hannan, K., Neylon, T., Wells, M. and Reynar, J.: Structured Models for Fine-to-coarse Sentiment Analysis, Proceedings of the 45th Annual Meeting of the Association of Computational Linguistics, pp. 432{439 (2007).
【非特許文献２】山本和英，齋藤真実: 用例利用型による文間接続関係の同定，自然言語処理，Vol. 15, No. 3,pp. 21-51 (2008)
【非特許文献３】高村大也，乾 孝司，奥村 学: スピンモデルによる単語の感情極性抽出，情報処理学会論文誌，Vol. 47, No. 2, pp. 627-637 (2006)
【発明の概要】
【発明が解決しようとする課題】
【０００７】
テキストの感情極性推定では、テキスト全体、または文や文中の句、語に対してそれらが肯定的な表現か否定的な表現かを推定する。
【０００８】
従来、提案されている多くの感情極性推定手法では、例えば文や句などといった特定の単位での極性を対象としている。
【０００９】
上記特許文献１で提案されている感情極性の系列ラベルをスピン系モデルを用いた語彙ネットワークにて表現する手法では、１文とテキスト全体の同時推定は行っていない。
【００１０】
ところで、例えば、全体として肯定的な意見を述べているテキストでは肯定的な意見を述べている文が比較的多く出現すると考えられる。また、文の極性に関しても、隣接している２文の接続関係が逆接であれば、それらの極性は一致しないというような関係が存在すると考えられる。しかし、これらの関係は多くの場合において成立するが、必ずしも成り立つとは限らない。
【００１１】
また、非特許文献１で提案されている手法では、１文とテキスト全体の感情極性を同時に推定するようにしているが、テキストの構造を明示的な形で利用していない。
【００１２】
そこで、本発明の目的は、上述の如き従来の実情に鑑み、テキスト全体または１文に書かれている言語表現の感情極性（表現が与える印象のことであり、例えば、快・不快の感情など）の自動推定を高精度に行うことができる感情極性推定装置、感情極性推定方法及び感情極性推定処理プログラムを提供することにある。
【００１３】
本発明の更に他の目的、本発明によって得られる具体的な利点は、以下に説明される実施の形態の説明から一層明らかにされる。
【課題を解決するための手段】
【００１４】
本発明では、テキスト全体または１文に書かれている快・不快の感情（感情極性）を求めるに当たり、１文とテキスト全体の感情極性を同時に推定する時、マルコフ論理ネットワークを用いて、テキスト構造と各極性間の関係を明示的に考慮する。
【００１５】
すなわち、本発明は、感情極性推定装置であって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段と、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段と、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを保存する重みデータ保存手段と、感情極性を推定するテキストデータを保存するテキストデータ保存手段と、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとを備えることを特徴とする。
【００１６】
本発明に係る感情極性推定装置において、上記論理式データ保存手段には、感情極性推定用の論理式データとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）を示す論理式データを保存する。
【００１７】
また、本発明は、感情極性推定方法であって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、学習処理モジュールにより、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、感情極性を推定するテキストデータをテキストデータ保存手段に保存し、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定することを特徴とする。
【００１８】
さらに、本発明は、感情極性を推定するテキストデータを保存するテキストデータ保存手段に保存されたテキストデータについて感情極性を推定する感情極性推定装置に備えられるコンピュータにより実行される感情極性推定処理プログラムであって、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとして、上記コンピュータを機能させることを特徴とする。
【発明の効果】
【００１９】
本発明では、テキストの構造を考慮し、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、テキストの感情極性推定処理の性能の向上させることができる。
【図面の簡単な説明】
【００２０】
【図１】本発明を適用した感情極性推定装置の構成を示すブロック図である。
【図２】上記感情極性推定装置の機能構成を示すブロック図である。
【図３】上記感情極性推定装置において学習処理モジュールにより実行される感情極性推定用論理式の重みを学習する学習処理の手順を示すフローチャートである。
【図４】上記感情極性推定装置に備えられた推定処理モジュールの機能を示すブロック図である。
【図５】上記感情極性推定装置において推定処理モジュールにより実行されるテキストデータの感情極性推定処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００２１】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、本発明は以下の例に限定されるものではなく、本発明の要旨を逸脱しない範囲で、任意に変更可能であることは言うまでもない。
【００２２】
本発明は、例えば図１に示すような構成の感情極性推定装置１００に適用される。
【００２３】
この感情極性推定装置１００は、バス１０を介して接続された中央制御部２０、記憶部３０、入力インターフェース部４０、出力インターフェース部５０、通信インターフェース部６０などからなる。
【００２４】
中央制御部２０は、ＣＰＵ（Central Processing Unit）２１、ＲＯＭ（Read Only Memory）２２、ＲＡＭ（Random Access Memory）２３などからなる。
【００２５】
記憶部３０は、ハードディスクやその他の不揮発性メモリからなる記憶装置であって、この感情極性推定装置１００により実行される感情極性推定処理プログラムＰＰＧ 、感情極性の推定に用いる論理式を示す論理式データＤＬＦ、上記論理式による感情極性の推定に用いる重み係数を示す重みデータＤＷ、上記論理式による感情極性の推定に用いる重み係数を学習により求めるための学習コーパスデータＤＣＰ、感情極性を推定するテキストデータＤＴＸなどを記憶している。
【００２６】
入力インターフェース部４０は、キーボード、マウス、マイクロフォンなど入力装置からなる。
【００２７】
出力インターフェース部５０は、ディスプレイ装置、プリンタ装置スピーカなどの出力装置からなる。
【００２８】
通信インターフェース部６０は、この感情極性推定装置１００が例えばインターネットなどのネットワークを介して外部と通信するためのモデムなどからなる。
【００２９】
上記記憶部３０には、上記入力インターフェース部４０や通信インターフェース部６０を介して、この感情極性推定装置１００により上記感情極性推定処理プログラムＰＰＧを実行するのに必要な上記論理式データＤＬＦ、上記学習コーパスデータＤＣＰ、上記テキストデータＤＴＸなどが蓄えられる。
【００３０】
この感情極性推定装置１００において、上記記憶部３０は、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データＤＬＦを保存する論理式データ保存手段として機能する。
【００３１】
また、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータＤＣＰを保存する学習コーパスデータ保存手段として機能する。
【００３２】
また、上記記憶部３０は、上記学習処理モジュール２０Ａによる学習処理によって得られた上記感情極性推定用論理式の重みデータＤＷを保存する重みデータ保存手段として機能する。
【００３３】
さらに、上記記憶部３０は、感情極性を推定するテキストデータＤＴＸを保存するテキストデータ保存手段として機能する。
【００３４】
そして、この感情極性推定装置１００の記憶部３０に記憶されている感情極性推定処理プログラムＰＰＧは、上記記憶部３０に記憶されている論理式データＤＬＦにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、上記記憶部３０に記憶されている学習コーパスデータＤＣＰを用いて、上記マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュール２０Ａと、上記記憶部３０に記憶されているテキストデータについて、上記学習処理モジュール２０Ａによる学習処理により上記記憶部３０に保存された感情極性推定用論理式の重みデータＤＷを用いて、上記記憶部３０に記憶されている論理式データＤＬＦにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュール２０Ｂとして、上記感情極性推定装置１００に備えられる中央制御部２０のＣＰＵ２１を機能させる。
【００３５】
すなわち、この感情極性推定装置１００は、その機能構成を図２に示すように、中央制御部２０のＣＰＵ２１が感情極性推定用論理式の重みＤＷを学習する学習処理を実行する学習処理モジュール２０Ａと、上記学習処理により得られた重みデータＤＷを用いて感情極性推定用論理式にしたがって、テキストデータＤＴＸについて感情極性推定処理を実行する推定処理モジュール２０Ｂとして機能する。すなわち、上記中央制御部２０のＣＰＵ２１は、ＲＯＭ２２に記憶されているブートプログラムに従って起動され、上記記憶部３０に記憶されている感情極性推定処理プログラムＰＰＧに従って、学習処理モジュール２０Ａにより、学習コーパスデータＤＣＰを用いて感情極性推定用の論理式データＤＬＦにて示される感情極性推定用論理式の重みを学習する学習処理を実行し、推定処理モジュール２０Ｂにより、上記学習処理により得られた重みデータＤＷを用いて、感情極性推定用の論理式データＤＬＦにて示される感情極性推定用論理式にしたがって、テキストデータについて感情極性推定処理を実行する。
【００３６】
この感情極性推定装置１００では、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、性能の向上を図っている。
【００３７】
すなわち、例えば、全体として肯定的な意見を述べているテキストでは肯定的な意見を述べている文が比較的多く出現すると考えられ、また、文の極性に関しても、隣接している２文の接続関係が逆接であれば、それらの極性は一致しないというような関係が存在すると考えられるが、これらの関係は多くの場合において成立するが、必ずしも成り立つとは限らないので、この感情極性推定装置１００では、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、１文とテキスト全体の感情極性を同時に推定する。
【００３８】
ここで、マルコフ論理ネットワークとは、一階述語論理とマルコフネットワーク（Markov Network）を組み合わせたものである。一階述語論理はドメインの知識を論理式という形で明示的に考慮することができるが、規則として与えられている論理式が偽となるような述語を１つでも含んでいる可能世界は充足不能と見なされるため、絶対に成立することが保証されている規則しか扱えないという問題がある。ここで可能世界とは定数のみを項とする述語(ground atom) の集合である。
【００３９】
これに対して、マルコフ論理ネットワークでは、述語論理の各論理式に重みを割り当てることで、確率的に可能世界のもっともらしさを表すことができ、論理式の違反を許容することが可能となる。通常の一階述語論理はこの重みが無限大になったものと捉えることができる。従って、マルコフ論理ネットワークでは、違反を許容する論理式と、違反を許さない論理式を同時に扱うことも可能である。
【００４０】
マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）は、一階述語論理の論理式Ｆｉとそれに対応する実数値の重みｗｉとの組の集合として定義される。可能世界ｘの確率分布は次の（１）式で与えられる。
【００４１】
【数１】
【００４２】
ここで、ｎｉ(ｘ)はｘにおいて真となる論理式Ｆｉのground formulaの数、Ｚは正規化項である。ground formulaとは、論理式Ｆｉ中の変数に定数を代入して得られる論理式のことである。この枠組みの利点は複数の関係推定問題を同時に扱えることだけでなく、推定すべき関係間の制約も扱えることである。
【００４３】
この感情極性推定装置１００では、マルコフ論理ネットワークの実装の一つであるMarkov thebeast(http://code.google.com/p/thebeast/)での呼称に倣い、データから得られる性質を示す述語をobserved predicate、推定すべき性質を示す述語をhidden predicate と呼ぶ。observed predicateは、一般的な機械学習手法における素性に対応する。また、同様にhidden predicate はラベルに対応する。また、observed predicateとhidden predicateとの関係を記述した論理式をlocal formulaと呼び、hidden predicate 間の関係を記述した論理式をglobal formulaと呼ぶ。
【００４４】
この感情極性推定装置１００では、入力としてテキストが与えられるとそのテキスト中の各文についての極性とテキストの極性を推定する。ここで、推定する極性は、文、または文章が肯定的な意見を述べている（“Ｐ”）、否定的な意見を述べている（“Ｎ”）、または、そのどちらでもない（“Ｃ”）の３種類である。
【００４５】
この感情極性推定装置１００において、使用する各述語（observed predicate，hidden predicate）を表１、表２に示す。
【００４６】
【表１】
【００４７】
【表２】
【００４８】
例えば、ｗｏｒｄ（ｓ，ｌ，ｗ）は、文ｓの位置ｌに語ｗが存在することを示し、ｓｐｏｌ（ｓ，ｐ）は文ｓの極性がｐであることを示す。文末表現は文の最後の節の自立語より後の表層である。例えば、“ＡＣアダプタは白にして欲しい。”という文では“て欲しい”が文末表現に当たる。文の接続詞の種類は「逆接」や「累加」といった前後の意味関係に基づいた接続詞の分類である。ここでは、非特許文献２に挙げられている７種類の接続関係、すなわち、「累加」、「加反」、「因果」、「並列」、「転換」、「例示」、「その他」を利用した。
【００４９】
次に、この感情極性推定装置１００において、使用した論理式について述べる。
【００５０】
先ず、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）について説明する。
【００５１】
各論理式中のｓやｌは変数を表し、ダブルクォーテーションで囲まれたものは定数を表し、変数の位置にあるアンダースコアは任意の値であることを表す。また、変数の前の“＋”はその変数を実際の定数で置き換えたものに展開することを示す。
【００５２】
例えば、ｓｐｏｌ（ｓ，＋ｐ）という述語を含む論理式は，実際にはｓｐｏｌ（ｓ，“Ｐ”），ｓｐｏｌ（ｓ，“Ｃ”），ｓｐｏｌ（ｓ，“Ｎ”）のそれぞれに置き換えられた論理式である。ここでは、簡略化のため、数式で用いられる関係（“＜”など）については，一般的な記法で記述している。
【００５３】
基本的に、テキストの極性に関する論理式（local formula）は文の極性に関するものと同様のものを利用しているため、ここでは、文の極性に関する論理式（local formula）とテキストの極性にしか用いていない論理式（local formula）について述べる。
【００５４】
文中の語と文の極性の関係は、次の（２）式にて示す。
【００５５】
【数２】
【００５６】
この（２）式は、Bag-of-Words(BOW)素性とみなすことができる。
【００５７】
また、極性を持つ語と文の極性の関係は、次の（３）式にて示す。
【００５８】
【数３】
【００５９】
この（３）式は、文中に極性を持つ語が存在していた場合、その極性が文の極性になるということを示す。
【００６０】
否定による極性の変更は、次の（４）式にて示す。
【００６１】
【数４】
【００６２】
この（４）式は、否定表現を含む文の極性についての記述である。極性を持つ語の近くに否定語が出現しているならば、文の極性はその語の極性とは異なると考えられる。
【００６３】
極性を持つ語とその他の語との共起は、次の（５）式にて示す。
【００６４】
【数５】
【００６５】
この（５）式は、極性を持つ語とその周囲の語の共起についての記述である。
【００６６】
語の共起は、次の（６）式にて示す。
【００６７】
【数６】
【００６８】
この（６）式は、文中に存在する語の共起と文の極性の関係を示す。ここでの共起に関しても上記と同様に近接している語の共起のみを考慮する。
【００６９】
文末表現は、次の（７）式にて示す。
【００７０】
【数７】
【００７１】
この（７）式は、文末表現と文の極性の関係を示す。
【００７２】
隣接する文の特徴とテキストの極性の関係は、次の（８）式、（９）式にて示す。
【００７３】
【数８】
【００７４】
【数９】
【００７５】
テキストの極性の決定には文内の情報だけではなく、文間の関係を考慮する必要がある。上記（８）式、（９）式は、隣接している２文における文末表現の遷移や各文中に含まれる極性を持つ語とテキストの極性の関係を示す。
【００７６】
次に、推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）について説明する。
【００７７】
global formulには文脈による文の極性の制約と文の極性とテキストの極性との関係を記述する。
【００７８】
接続関係による文の極性間の関係は、次の（１０）式、（１１）式にて示す。
【００７９】
【数１０】
【００８０】
【数１１】
【００８１】
隣接する文の接続関係によって、前文の極性と後文の極性の関係が異なると考えられる。例えば、逆接の関係にあれば後文の極性は前文の極性とは異なるであろうし、また、同じ話題が連続するような場合では前文の極性と後文の極性は同じになりやすい。上記（１０）式、（１１）式は、接続関係による文の極性の関係を示す。
【００８２】
これら以外の次の（１２）式にて示す接続関係と極性間の関係に関しては、データから学習する。
【００８３】
【数１２】
【００８４】
最後の文の極性とテキストの極性の関係は、次の（１３）式、（１４）式にて示す。
【００８５】
【数１３】
【００８６】
【数１４】
【００８７】
テキストの最後では著者の意見がまとめられていることが多く、従って最後の文の極性がそのテキスト全体の極性として捉えられると考えられる。上記（１３）式、（１４）式は、その関係を示している。極性が“どちらでもない”と判定されるものに関しては特に考慮しない。
【００８８】
テキストの極性と文の極性の関係は、次の（１５）式、（１６）式にて示す。
【００８９】
【数１５】
【００９０】
【数１６】
【００９１】
テキスト全体が肯定的な意見を述べているのならば、そのテキスト中には否定的な意見が出現することは少ないと考えられる。また、その逆も同様であると考えられる。
【００９２】
この感情極性推定装置１００では、感情極性推定用の論理式データＤＬＦとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）が上記記憶部３０に記憶されている。
【００９３】
そして、この感情極性推定装置１００において、学習処理モジュール２０Ａは、図３のフローチャートに示す手順に従って、感情極性推定用論理式の重みを学習する学習処理を実行する。
【００９４】
すなわち、学習処理モジュール２０Ａは、上記記憶部３０に学習コーパスデータＤＣＰとして記憶されている感情極性推定用論理式の重みを学習するデータと正解を学習コーパスから受け取るとともに（ステップＳ１）、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を構築し（ステップＳ２）、構築したマルコフ論理ネットワークを用いて、現在の重みを使ってデータからラベルすなわち文又はテキストの感情極性を推定し（ステップＳ３）、推定したラベルが正解と異なるか否かを判定する（ステップＳ４）。
【００９５】
上記学習処理モジュール２０Ａは、このステップＳ４における判定結果が「ＹＥＳ」、すなわち、推定したラベルが正解と異なる場合には、データにしたがって重みを更新して（ステップＳ５）、更新した重みを新たな重みデータとして上記記憶部３０に保存し（ステップＳ６）、上記ステップＳ２に戻って、上記記憶部３０に保存した新たな重みデータを用いマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を再構築するとともに、上記学習コーパスに学習すべきデータが残っているか否かを判定し（ステップＳ７）、このステップＳ７における判定結果が「ＹＥＳ」、すなわち、上記学習コーパスに学習すべきデータが残っている場合には、上記ステップＳ３に戻って、上記ステップＳ２において再構築したマルコフ論理ネットワークを用いて使ってデータからラベルを推定し、上記ステップＳ４において、推定したラベルが正解と異なるか否かを判定する処理を繰り返し行う。
【００９６】
そして、上記学習処理モジュール２０Ａは、上記ステップＳ７における判定結果が「ＮＯ」、すなわち、上記学習コーパスに学習すべきデータがなくなるまで、上記ステップＳ２〜ステップＳ７の処理を繰り返し行い、上記ステップＳ４における判定結果が「ＮＯ」、すなわち、上記学習コーパスから受け取ったデータから上記マルコフ論理ネットワークを用いて推定したラベルが正解と一致する重みデータＤＷを感情極性推定用論理式の重みとして上記記憶部３０に保存して学習処理を終了する。
【００９７】
また、この感情極性推定装置１００において、推定処理モジュール２０Ｂは、図４に示すように、上記学習処理モジュール２０Ａによる学習処理により得られた重みデータＤＷと、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、テキストデータＤＴＸについてラベルの推定処理を行うことにより、文の極性とテキストの極性を同時に推定した結果を出力する。
【００９８】
上記推定処理モジュール２０Ｂにより実行されるテキストデータの感情極性推定処理の詳細を図５のフローチャートに示す。
【００９９】
図５のフローチャートにおいて、iは繰り返しカウンタを示し、y，y’は推定されたラベル集合を示している。上記推定処理モジュール２０Ｂによる感情極性推定処理では、先ず、ｉ＝０，ｙ’＝０、すなわち、繰り返しカウンタの値ｉとラベル集合の値ｙ’を初期化し（ステップＳ１１）、繰り返しカウンタの値ｉをインクリメントして（ステップＳ１２）、上記学習処理モジュール２０Ａによる学習処理により得られた重みデータＤＷと、上記記憶部３０に感情極性推定用の論理式データＤＬＦとして記憶されているテキストの極性に関するlocal formul及びと文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）に基づいて、構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて、ラベル集合ｙを次に示す（１７）式により推定する（ステップＳ１３）。
【０１００】
【数１７】
【０１０１】
ここで、Ｇは、論理式の基礎化に使われる代入の集合であって、論理式中のどの変数にどの定数を代入するかという割り当ての集合を示している。ここで、論理式の基礎化とは、論理式中の全ての変数に定数を代入することである。solve(G,x)は、与えられたマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）を用いて集合Ｇと入力データｘからのラベルの推定を、与えられた制約条件を満たすように、目的関数を最大化させる解を探すＩＬＰ(整数線形計画法)によって行う。ここでは、目的関数は、次に示す（１８）式であり、制約条件はマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）中の論理式から作られる。
【０１０２】
【数１８】
【０１０３】
ｓ（ｙ，ｘ）は（１８）式で与えられるデータとラベルから得られるスコアである。ここでのwやｆは与えられているマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）から得る。
【０１０４】
次に、上記推定処理モジュール２０Ｂは、
ｓ（ｙ，ｘ）＞ｓ（ｙ’，ｘ）
すなわち、（１７）式で与えられるデータとラベルから得られるスコアｓ（ｙ，ｘ）が、先に求めたスコアｓ（ｙ’，ｘ）よりも大きいか否かを判定する（ステップＳ１４）。
【０１０５】
そして、上記推定処理モジュール２０Ｂは、上記ステップＳ１４における判定結果が「ＹＥＳ」、すなわち、求めたスコアｓ（ｙ，ｘ）が先に求めたスコアｓ（ｙ’，ｘ）よりも大きい場合には、ｙ’＝ｙとして（ステップＳ１５）、Ｇｉ＝Ｇｉ−１の更新処理を行い（ステップＳ１６）、また、上記ステップＳ１４における判定結果が「ＮＯ」、すなわち、求めたスコアｓ（ｙ，ｘ）が先に求めたスコアｓ（ｙ’，ｘ）よりも大きくない場合には、そのまま上記ステップＳ１６に移ってＧｉ＝Ｇｉ−１の更新処理を行う。
【０１０６】
次に、上記推定処理モジュール２０Ｂは、Ｇｉ＝Ｇｉ−１又は繰り返しの終了であるか否かを判定し（ステップＳ１７）、その判定結果が「ＮＯ」、すなわち、終了でない場合には、上記ステップＳ１２に戻って繰り返しカウンタの値ｉをインクリメントし、上記ステップＳ１７における判定結果が「ＹＥＳ」、すなわち、終了になるまで、上記ステップＳ１２〜ステップＳ１７の処理を繰り返し行い、全てのデータ（ｘ）についてラベルの推定を行い、推定したラベルを出力する（ステップＳ１８）。
【０１０７】
なお、この感情極性推定装置１００において、実際のマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）の学習処理、ラベルの推定処理には、マルコフ論理ネットワークの実装の一つであるMarkov thebeast(http://code.google.com/p/thebeast/)というツールを使用した。
【０１０８】
このような構成の感情極性推定装置１００における感情極性推定モデルの有効性を検証するため、Amazon.co.jp(http://www.amazon.co.jp)の掃除機とＭＰ３プレイヤーのカテゴリに属する製品に関するレビューのデータ用いて、次のような評価実験を行った。
【０１０９】
この評価実験において、データにはレビュー中の各文について、評価者が肯定的，或いは否定的な意見を述べていると思われる箇所にその極性がアノテーションされている。アノテーションは各レビューに対して１人の作業者が行っている。このデータは文やテキストに対してのアノテーションは行われていないため、文については文中の最後の位置にあるアノテーションの極性を文の極性として扱っている。テキストについては，評価者によってレビューに対して付与されている星の数による評価値を利用し、星１，２を否定的な意見を述べている、星４，５を肯定的な意見を述べている、星３をどちらでもないとした。実験に使用したデータに含まれるテキストの極性の割合を表３に示す。
【０１１０】
【表３】
【０１１１】
文の極性の識別モデルとテキストの極性の識別モデルとし、one-versus-the-rest分類器による３種類の極性のいずれかを推定する３値分類のモデルと、最初に極性の有無の判定を行い、極性ありと判定された事例に対して、肯定的か否定的かを推定する段階的なモデルの２種類で実験を行った。また、感情極性推定装置１００における感情極性推定モデルでは、大域的な制約の効果を見るため、局所的な制約のみによるモデルについての評価も行った。
【０１１２】
observed predicateに用いる語の極性に関しては、非特許文献３の単語感情極性対応表(http://www.lr.pi.titech.ac.jp/~takamura/pndic ja.html)を利用した。この対応表には各単語に対して極性の強さを示す値が付けられており、本実験ではこの値が０．７以上の単語を“Ｐ”、−０．７以下を“Ｎ”として扱った。単語の極性に関しては“Ｃ”（どちらでもない）は考慮していない。否定表現については助動詞“ない”のみを考慮した。単語の極性の決定に使用した閾値と語の共起に関する論理式（local formula）中のｎの値は実験で開発データセットを用いて同様の実験を行い、もっとも精度の高かった数値を使用した。マルコフ論理ネットワークの実装にはMarkov thebeast(http://code.google.com/p/thebeast/)を、ベースラインにはSVMlight(http://www.cs.cornell.edu/people/tj/svm_light/)を利用した。実験は各データに対して１０分割交差検定を行い、精度で評価した結果を表４に示す。
【０１１３】
【表４】
【０１１４】
“ＢＬ(multi)”は３値分類によるベースライン，“ＢＬ(cascade)”は２段階の推定によるベースライン、“Joint”は感情極性推定装置１００における感情極性推定モデル、“Joint(local)”は、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）のみを用いたモデルを表す。斜体はベースラインを下回ったものを表す。
【０１１５】
ベースラインに比べて、上記感情極性推定装置１００における感情極性推定モデルの方が良い結果を得ることができた。また、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）のみを用いたモデルは、掃除機では文の極性の精度では２段階モデルでのベースラインを下回っているものの、テキストの極性ではそれを上回っている。また、推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を用いたモデルの方は両方の製品において良い結果を得ることができており、文の極性とテキスト間の極性には関係があり、その関係を考慮することが性能の向上に繋がることを示している。
【０１１６】
上述の如く、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）ではラベル間の関係を記述でき、更に、その関係が満たされないことを許容できるため、“必ず満たさなければいけない”関係だけでなく、“満たした方が好ましい”関係を扱うことができ、これにより接続関係による文の極性間の関係や文とテキストの極性の傾向などをモデルに組み込むことができ、マルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）による文とテキストの感情極性の同時推定を行うようにした上記感情極性推定装置１００では、テキストの構造を考慮し、文とテキストの極性間の関係を制約として明示的にモデルに組み入れ、この関係が成立するようにそれぞれの極性を推定することで、感情極性推定処理の性能の向上を図ることができる。
【０１１７】
上記感情極性推定装置１００のように、データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、感情極性を推定するテキストデータをテキストデータ保存手段に保存し、上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定することによって、感情極性推定処理の性能の向上を図ることができる。
【符号の説明】
【０１１８】
１０ バス、
２０ 中央制御部、
２０Ａ 学習処理モジュール、
２０Ｂ 推定処理モジュール、
２１ ＣＰＵ、
２２ ＲＯＭ、
２３ ＲＡＭ
３０ 記憶部、
４０ 入力インターフェース部、
５０ 出力インターフェース部、
６０ 通信インターフェース部、
１００ 感情極性推定装置
【特許請求の範囲】
【請求項１】
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段と、
上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段と、
上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、
上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを保存する重みデータ保存手段と、
感情極性を推定するテキストデータを保存するテキストデータ保存手段と、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールと
を備えることを特徴とする感情極性推定装置。
【請求項２】
上記論理式データ保存手段には、感情極性推定用の論理式データとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）を示す論理式データを保存することを特徴とする請求項１記載の感情極性推定装置。
【請求項３】
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、
上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、
上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、学習処理モジュールにより、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、
上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、
感情極性を推定するテキストデータをテキストデータ保存手段に保存し、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する
ことを特徴とする感情極性推定方法。
【請求項４】
感情極性を推定するテキストデータを保存するテキストデータ保存手段に保存されたテキストデータについて感情極性を推定する感情極性推定装置に備えられるコンピュータにより実行される感情極性推定処理プログラムであって、
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとして、
上記コンピュータを機能させることを特徴とする感情極性推定処理プログラム。
【請求項１】
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段と、
上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段と、
上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、
上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを保存する重みデータ保存手段と、
感情極性を推定するテキストデータを保存するテキストデータ保存手段と、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールと
を備えることを特徴とする感情極性推定装置。
【請求項２】
上記論理式データ保存手段には、感情極性推定用の論理式データとして、テキストの極性に関する論理式（local formula）及び文の極性に関する論理式（local formula）と、文脈による文の極性の制約と文の極性とテキストの極性との関係を記述した論理式（global formula）を示す論理式データを保存することを特徴とする請求項１記載の感情極性推定装置。
【請求項３】
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを論理式データ保存手段に保存し、
上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを学習コーパスデータ保存手段に保存し、
上記学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、学習処理モジュールにより、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習し、
上記学習処理モジュールによる学習処理によって得られた上記感情極性推定用論理式の重みデータを重みデータ保存手段に保存し、
感情極性を推定するテキストデータをテキストデータ保存手段に保存し、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する
ことを特徴とする感情極性推定方法。
【請求項４】
感情極性を推定するテキストデータを保存するテキストデータ保存手段に保存されたテキストデータについて感情極性を推定する感情極性推定装置に備えられるコンピュータにより実行される感情極性推定処理プログラムであって、
データから得られる性質を示す述語（observed predicate）と推定すべき性質を示す述語（hidden predicate）の関係を記述した論理式（local formula）と、上記推定すべき性質を示す述語（hidden predicate） 間の関係を記述した論理式（global formula）を感情極性の推定に用いる論理式として示す論理式データを保存する論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習するための学習コーパスデータを保存する学習コーパスデータ保存手段に保存された学習コーパスデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）について、１文感情極性とテキスト全体の感情極性を同時に推定するための感情極性推定用論理式の重みを学習する学習処理モジュールと、
上記テキストデータ保存手段に保存されたテキストデータについて、上記学習処理モジュールによる学習処理により上記重みデータ保存手段に保存された感情極性推定用論理式の重みデータを用いて、上記論理式データ保存手段に保存されている論理式データにより示される論理式を用いて構築されるマルコフ論理ネットワーク（ＭＬＮ：Markov Logic Network）により、１文感情極性とテキスト全体の感情極性を同時に推定する感情極性推定処理を行う推定処理モジュールとして、
上記コンピュータを機能させることを特徴とする感情極性推定処理プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１１−１８０９８８（Ｐ２０１１−１８０９８８Ａ）
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願番号】特願２０１０−４６７６１（Ｐ２０１０−４６７６１）
【出願日】平成２２年３月３日（２０１０．３．３）
【出願人】（３０４０２１４１７）国立大学法人東京工業大学 (1,821)
【Ｆターム（参考）】
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願日】平成２２年３月３日（２０１０．３．３）
【出願人】（３０４０２１４１７）国立大学法人東京工業大学 (1,821)
【Ｆターム（参考）】
[ Back to top ]