制御装置、および制御方法
【課題】通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることが可能な制御装置および制御方法を提供する。
【解決手段】通信対象装置との間で通話に関する通信を行う通信部と、コンテンツデータの再生を行う再生処理部と、コンテンツデータが示す音声を通信対象装置との間で共有するか否かを判定する判定部と、判定部において共有すると判定された場合に、コンテンツデータが示す音声、または、音声および画像を通信対象装置との間で共有する処理を選択的に行う共有処理部とを備え、共有処理部は、判定部において共有すると判定されない場合には、発話音声に対応する発話音声信号を通信対象装置へ送信させ、再生しているコンテンツデータに対応するコンテンツ音声信号を通信対象装置へ送信させない制御装置が提供される。
【解決手段】通信対象装置との間で通話に関する通信を行う通信部と、コンテンツデータの再生を行う再生処理部と、コンテンツデータが示す音声を通信対象装置との間で共有するか否かを判定する判定部と、判定部において共有すると判定された場合に、コンテンツデータが示す音声、または、音声および画像を通信対象装置との間で共有する処理を選択的に行う共有処理部とを備え、共有処理部は、判定部において共有すると判定されない場合には、発話音声に対応する発話音声信号を通信対象装置へ送信させ、再生しているコンテンツデータに対応するコンテンツ音声信号を通信対象装置へ送信させない制御装置が提供される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、制御装置、および制御方法に関する。
【背景技術】
【０００２】
近年、例えばＰＣ（Personal Computer）などのように、コンテンツデータの再生を行いながら、外部装置との間でユーザ間の通話に関する通信を行うことが可能な装置の普及が進んでいる。
【０００３】
このような中、通話に関する通信を行っている複数の装置間においてコンテンツを共有する技術が開発されている。遠隔地にいる複数のユーザに対して、同じ場所で映像コンテンツを視聴しているような臨場感を与えるための技術としては、例えば、特許文献１が挙げられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−３６６８５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
通話に関する通信を行っている複数の装置間においてコンテンツを共有する従来の技術（以下、単に「従来の技術」という。）が適用された制御装置（以下、「従来の制御装置」という。）は、共有するコンテンツデータが示す画像と通話を行っているユーザの画像とを合成して、合成した画像を表示画面に表示させる。また、従来の制御装置は、上記表示画面への合成した画像の表示と共に、上記通話に係る発話音声に対して、予め設定されたユーザの画像の位置に応じた音像定位を行う。よって、従来の技術を用いることによって、通話に関する通信を行っている各装置を用いるユーザに対して、あたかも同じ場所で映像コンテンツを視聴しているような臨場感を与えることができる可能性はある。
【０００６】
ここで、複数の装置間において通話に関する通信が行われている場合、ユーザが、常に通信相手との間におけるコンテンツの共有を所望するとは限らない。例えば、ある装置においてコンテンツデータの再生が行われているときに、通話に関する通信が開始された場合には、当該装置のユーザは、自己が楽しんでいるコンテンツデータが示す音声の内容（コンテンツの一例）を、通話に関する通信を行っている通信対象の装置（以下「通信対象装置」と示す。）のユーザに知られたくないことがありうる。よって、例えば、ある装置のユーザが共有を所望していないときに、自己が楽しんでいるコンテンツデータが示す音声の内容が通信対象装置のユーザに知られた場合には、当該装置のユーザのプライバシーが侵害される恐れがある。
【０００７】
しかしながら、従来の技術では、例えば上記のようなユーザのプライバシーが侵害されうる事態を防止することについて、何らの考慮もなされていない。したがって、従来の制御装置を用いたとしても、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることの実現は、望むべくもない。
【０００８】
本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることが可能な、新規かつ改良された制御装置、および制御方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するために、本発明の第１の観点によれば、１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行う通信部と、音声、または、音声および画像を示すコンテンツデータの再生を行う再生処理部と、コンテンツデータが示す音声を上記通信対象装置との間で共有するか否かを判定する判定部と、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合に、上記コンテンツデータが示す音声、または、音声および画像を上記通信対象装置との間で共有する処理を選択的に行う共有処理部とを備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記通話に関する通信における発話音声に対応する発話音声信号を上記通信対象装置へ送信させ、上記再生処理部が再生している上記コンテンツデータが示す音声に対応するコンテンツ音声信号を上記通信対象装置へ送信させない制御装置が提供される。
【００１０】
かかる構成により、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【００１１】
また、外部音声入力装置において生成された音声信号が入力される入力部をさらに備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、上記音声信号とを加算し、加算された上記音声信号を上記通信部に送信させてもよい。
【００１２】
また、音声信号を生成する音声入力部をさらに備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、上記音声信号とを加算し、加算された上記音声信号を上記通信部に送信させてもよい。
【００１３】
また、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合は、上記通信部が受信した、上記通話に関する通信における発話音声に対応する外部発話音声信号の位相を反転させた反転外部発話音声信号を、上記音声信号にさらに加算してもよい。
【００１４】
また、上記通信部が上記撮像画像および音声による通話に関する通信を行っているときにおいて、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記共有処理部は、上記コンテンツデータが示す画像が表示される領域と、上記通信部が受信した、上記通信対象装置から送信された撮像画像が表示される領域とが分離された表示用画像を、表示画面に表示させてもよい。
【００１５】
また、上記通信部が上記撮像画像および音声による通話に関する通信を行っているときにおいて、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合には、上記共有処理部は、上記コンテンツデータが示す画像と、上記通信部が受信した、上記通信対象装置から送信された撮像画像とが仮想空間内に配置された表示用画像を、表示画面に表示させてもよい。
【００１６】
また、上記共有処理部は、上記仮想空間における、上記コンテンツデータが示す画像、上記撮像画像それぞれの位置に基づいて、上記コンテンツデータが示す音声に対応するコンテンツ音声信号と、上記通信部が受信した、上記撮像画像に対応する上記通信対象装置から送信された外部発話音声信号との音像をそれぞれ定位させてもよい。
【００１７】
また、上記通信部は、上記通信対象装置との間における上記コンテンツデータの共有を管理するコンテンツ管理サーバとさらに通信を行い、上記判定部は、上記コンテンツ管理サーバにおいて上記コンテンツデータの共有が許可された場合に、上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定してもよい。
【００１８】
上記目的を達成するために、本発明の第２の観点によれば、１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行うステップと、音声、または、音声および画像を示すコンテンツデータの再生を行うステップと、コンテンツデータが示す音声を上記通信対象装置との間で共有するか否かを判定するステップと、上記判定するステップにおいて上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合に、上記コンテンツデータが示す音声、または、音声および画像を上記通信対象装置との間で共有する処理を選択的に行うステップとを有し、上記選択的に行うステップでは、上記判定するステップにおいて上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記通話に関する通信における発話音声に対応する発話音声信号を上記通信対象装置へ送信させ、上記再生を行うステップにおいて再生されている上記コンテンツデータが示す音声に対応するコンテンツ音声信号を上記通信対象装置へ送信させない制御方法が提供される。
【００１９】
かかる方法を用いることにより、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【発明の効果】
【００２０】
本発明によれば、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施形態に係る制御装置におけるコンテンツ共有アプローチの概要を説明するための説明図である。
【図２】本発明の実施形態に係る制御装置が、コンテンツ非共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。
【図３】本発明の実施形態に係る制御装置が、コンテンツ共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。
【図４】本発明の実施形態に係る制御装置におけるコンテンツ共有アプローチに係る処理の一例を示す流れ図である。
【図５】本発明の第１の実施形態に係る制御装置の構成の一例を示すブロック図である。
【図６】本発明の実施形態に係る制御装置のハードウェア構成の一例を示す説明図である。
【図７】本発明の第２の実施形態に係る制御装置の構成の一例を示すブロック図である。
【発明を実施するための形態】
【００２２】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２３】
また、以下では、下記に示す順序で説明を行う。
１．本発明の実施形態に係るアプローチ
２．本発明の実施形態に係る制御装置
３．本発明の実施形態に係るプログラム
【００２４】
（本発明の実施形態に係るアプローチ）
本発明の実施形態に係る制御装置（以下、「制御装置１００」と示す場合がある。）の構成について説明する前に、本発明の実施形態に係るコンテンツ共有アプローチについて説明する。なお、以下に示す本発明の実施形態に係るコンテンツ共有アプローチに係る処理は、本発明の実施形態に係る制御方法に係る処理と捉えることができる。
【００２５】
また、以下では、制御装置１００が、コンテンツデータの再生に係る処理と、１、または２以上の通信対象装置との間における通話に関する通信に係る処理とを平行して行う場合を例に挙げて説明する。ここで、本発明の実施形態に係るコンテンツデータとは、音声、または、音声および画像（動画像／静止画像）を示すデータである。以下では、コンテンツデータが示す音声、または、音声および画像を総称して「コンテンツ」と示す場合がある。コンテンツデータとしては、例えば、音楽データや映像データなどが挙げられる。また、制御装置１００は、例えば、記憶部（後述する）に記憶されたコンテンツデータや、サーバなどの外部装置から受信したコンテンツデータを再生するが、制御装置１００が再生するコンテンツデータは、上記に限られない。例えば、制御装置１００は、テレビ塔などから送信させた放送波を（直接的に、または、アンテナやチューナなどを介して間接的に）受信することによってコンテンツデータを外部から取得し、当該コンテンツデータを再生することも可能である。
【００２６】
また、本発明の実施形態に係る通話に関する通信としては、例えば、音声による通話に関する通信が挙げられるが、本発明の実施形態に係る通話に関する通信は、上記に限られない。例えば、本発明の実施形態に係る通話に関する通信は、撮像画像および音声による通話（例えばビデオ通話）に関する通信であってもよい。また、本発明の実施形態に係る通話に関する通信は、静止画像および音声による通話に関する通信であってもよい。ここで、本発明の実施形態に係る撮像画像とは、撮像により得られた動画像（または、時間軸方向に連続して撮像された静止画像の集合体）である。なお、本発明の実施形態に係る制御装置１００と通信対象装置との間における撮像画像および音声による通話（例えばビデオ通話）に関する通信では、撮像画像に含まれる撮像されたユーザが他のキャラクター（いわゆるアバター）に置き換えられた画像が、撮像画像として制御装置１００と通信対象装置との間で送受信されてもよい。
【００２７】
［コンテンツ共有アプローチの概要］
例えば従来の技術を用いた場合のように、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、制御装置のユーザと、通信対象装置のユーザとは、同一のコンテンツを通話をしながら楽しむことが可能となる。つまり、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、たとえ制御装置と通信対象装置とが遠隔地にある装置であったとしても、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができる。したがって、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、ユーザの利便性の向上を図ることができる。
【００２８】
一方、上述したように、例えば制御装置のユーザがコンテンツの共有を所望していないときに自己が楽しんでいるコンテンツデータが示す音声の内容が通信対象装置のユーザに知られた場合には、制御装置のユーザのプライバシーが侵害される恐れがある。
【００２９】
そこで、本発明の実施形態に係る制御装置１００は、コンテンツデータの再生状態に基づいて、コンテンツデータが示すコンテンツの共有に係る処理（以下、「コンテンツ共有処理」と示す場合がある。）や、再生しているコンテンツデータが示すコンテンツを通信対象装置との間で共有させないための処理（以下、「コンテンツ非共有処理」と示す場合がある。）を選択的に行う。
【００３０】
より具体的には、制御装置１００は、コンテンツデータが示すコンテンツを通信対象装置との間で共有するか否かを判定する。そして、制御装置１００は、上記判定において共有すると判定された場合に、コンテンツ共有処理を選択的に行う。また、制御装置１００は、上記判定において共有すると判定されない場合には、コンテンツ非共有処理を行う。
【００３１】
図１は、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチの概要を説明するための説明図である。ここで、図１は、制御装置１００が通信対象装置と通話に関する通信を行っている場合における、制御装置１００のコンテンツデータの再生状態および各再生状態におけるコンテンツデータ再生に関する処理の概要を示している。
【００３２】
図１に示すように、制御装置１００は、通信対象装置との間で通話に関する通信を行っている場合には、例えば図１のＡ〜図１のＣに示す３つの再生状態に応じて、コンテンツデータ再生に関する処理として下記に示す（１）に示す処理〜（３）に示す処理を選択的に行う。
【００３３】
（１）コンテンツデータの再生を行わない場合における処理（図１に示すＡの状態における処理）
コンテンツデータの再生を行わない場合には、制御装置１００は、例えば、自装置が備える音声入力デバイス（後述する音声入力部）や、外部音声入力デバイス（後述する音声入力装置）が生成した音声信号（以下、「生成音声信号」と示す場合がある。）を、通信対象装置に対して送信する。
【００３４】
ここで、上記音声入力デバイスや外部音声入力デバイスは、制御装置１００のユーザ（以下、単に「ユーザ」と示す場合がある。）が、通信対象装置のユーザとの通話に用いるデバイスである。つまり、本発明の実施形態に係る生成音声信号には、通話に係るユーザの発話音声に対応する音声信号（以下、「発話音声信号」という。）が含まれうる。よって、制御装置１００は、通話に関する通信において生成音声信号を通信対象装置へ送信することによって、通信対象装置のユーザに対して、通話に係る発話音声を提示することが可能となる。
【００３５】
なお、本発明の実施形態に係る生成音声信号に含まれうる音声信号は、ユーザの発話音声に対応する発話音声信号に限られない。例えば、生成音声信号には、自装置が備える音声入力デバイス（後述する音声出力部）や、外部音声入力デバイス（後述する音声出力装置）から出力された音声に対応する音声信号（以下、「出力音声信号」と示す場合がある。）が含まれうる。より具体的には、例えば制御装置１００がコンテンツデータの再生を行っていない場合には、生成音声信号には、制御装置１００が通信対象装置から受信した、通話に関する通信対象装置のユーザの発話音声に対応する音声信号（以下、「外部発話音声信号」という。）が、出力音声信号として含まれうる。
【００３６】
ここで、制御装置１００が、外部発話音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、例えば、制御装置１００のユーザの発話音声に加えて、通信対象装置のユーザが発した発話音声が通信対象装置のユーザに聴こえてしまうことが起こりうる。
【００３７】
そこで、制御装置１００は、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号を生成音声信号に加算し、反転外部発話音声信号が加算された生成音声信号を、通信対象装置へ送信する。例えば上記のように反転外部発話音声信号が加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、通信対象装置のユーザが発した発話音声が、通信対象装置のユーザに聴こえてしまうことを防止することができる。
【００３８】
ここで、制御装置１００は、例えば、ＬＭＳ（Least Mean Square）などの適応フィルタや、加算器を備えることによって、生成音声信号に対する上記処理を行う。なお、本発明の実施形態に係る制御装置１００における生成音声信号に対する上記処理を実現するための構成は、上記に限られない。例えば、制御装置１００は、いわゆるエコーキャンセルを実現することが可能な任意の構成を備えることによって、生成音声信号に対する上記処理を実現することができる。
【００３９】
（２）再生されているコンテンツデータが示すコンテンツを共有しない場合における処理（コンテンツ非共有処理。図１に示すＢの状態における処理）
再生されているコンテンツデータが示すコンテンツを共有しない場合には、制御装置１００は、発話音声信号を通信対象装置へ送信させ、再生されているコンテンツデータが示す音声に対応する音声信号（以下「コンテンツ音声信号」と示す場合がある。）を通信対象装置へ送信させない。
【００４０】
上記のように、音声入力デバイスや外部音声入力デバイスが生成した生成音声信号には、ユーザの発話音声に対応する発話音声信号に限られず、出力音声信号が含まれうる。また、制御装置１００がコンテンツデータを再生させている場合には、出力音声信号には、コンテンツ音声信号が含まれることとなる。ここで、制御装置１００が、コンテンツ音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、例えば、制御装置１００のユーザの発話音声に加えて制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまう。よって、上記のようにコンテンツ音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、ユーザのプライバシーが侵害される恐れがある。
【００４１】
そこで、制御装置１００は、例えば、コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号を生成音声信号に加算し、反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信する。例えば上記のように反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができる。
【００４２】
ここで、制御装置１００は、例えば、ＬＭＳなどの適応フィルタや加算器を備えることによって、生成音声信号に対する上記処理を行う。なお、制御装置１００は、いわゆるエコーキャンセルを実現することが可能な任意の構成を備えることによって、生成音声信号に対する上記処理を実現することができる。
【００４３】
また、制御装置１００は、上記（１）の場合と同様に、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号をさらに生成音声信号に加算し、反転外部発話音声信号がさらに加算された生成音声信号を、通信対象装置へ送信してもよい。例えば上記のように反転外部発話音声信号がさらに加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、通信対象装置のユーザが発した発話音声が、通信対象装置のユーザに聴こえてしまうことをさらに防止することができる。
【００４４】
制御装置１００は、例えば上記のように反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信することによって、発話音声信号を通信対象装置へ送信させ、再生されているコンテンツデータに対応するコンテンツ音声信号を通信対象装置へ送信させない。したがって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【００４５】
また、制御装置１００は、通信対象装置との間において撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合には、例えば、自装置が備える撮像デバイス（後述する撮像部）や、外部撮像デバイス（後述する撮像装置）が生成した撮像画像を画像処理することによって、ユーザのプライバシーの侵害の防止を図る。より具体的には、制御装置１００は、再生しているコンテンツデータが示す画像が撮像画像に含まれるか否かを判定し、含まれている場合には、撮像画像に含まれているコンテンツデータが示す画像部分（例えば、窓などに映りこんだ画像）を画像処理する。上記画像処理としては、例えば、上記画像部分を削除する処理や、モザイク処理などが挙げられるが、上記画像処理は上記に限られない。例えば、制御装置１００は、撮像画像に含まれているコンテンツデータが示す画像部分を隠蔽可能な任意の処理を、上記画像処理として行うことができる。
【００４６】
また、制御装置１００は、例えば、制御装置１００における再生状態がコンテンツ非共有状態であることを、ユーザに視覚的に通知する。図２は、本発明の実施形態に係る制御装置１００が、コンテンツ非共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。ここで、図２は、制御装置１００と２つの通信対象装置とが、撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合における表示用画像の一例を示している。また、制御装置１００は、例えば、自装置が備える表示デバイス（後述する表示部）の表示画面に表示用画像を表示させてもよいし、外部表示デバイス（後述する表示装置）の表示画面に表示用画像を表示させてもよい（以下、同様とする。）。
【００４７】
図２に示すように、制御装置１００は、例えば、コンテンツデータが示す画像（図２のＤ）が表示される領域Ａと、制御装置１００が受信した、通信対象装置から送信された撮像画像（図２のＥ、Ｆ）が表示される領域Ｂとが分離された表示用画像を、表示画面に表示させる。図２に示すように、領域Ａと領域Ｂとが分けられた表示用画像が表示画面に表示されることによって、ユーザは、コンテンツ非共有状態であることを視覚的に把握することが可能となる。なお、制御装置１００がコンテンツ非共有状態において表示画面に表示させる表示用画像が、図２に示す例に限られないことは、言うまでもない。
【００４８】
ここで、制御装置１００は、例えば、コンテンツデータが示す画像（例えば図２のＤ）、および撮像画像（例えば図２のＥ、Ｆ）に基づいて、例えば、ＰＩＰ（Picture In Picture）やＰＯＰ（Picture On Picture）などの手法を用いて表示用画像を生成して表示させる。なお、本発明の実施形態に係る制御装置１００における表示用画像の生成方法は、上記に限られない。
【００４９】
（３）再生されているコンテンツデータが示すコンテンツを共有する場合における処理（コンテンツ共有処理。図１に示すＣの状態における処理）
再生されているコンテンツデータが示すコンテンツを共有する場合には、制御装置１００は、音声入力デバイスや外部音声入力デバイスが生成した生成音声信号を、通信対象装置へ送信する。
【００５０】
ここで、コンテンツ共有状態（図１に示すＣ）は、ユーザと通信対象装置のユーザとの間において、同一のコンテンツを共有している状態であるので、制御装置１００が再生しているコンテンツデータが示す音声を示すコンテンツ音声信号が、通信対象装置へ送信されたとしても、プライバシーの侵害となる恐れはない。よって、コンテンツ共有状態では、制御装置１００は、上記（２）に示す処理（コンテンツ非共有処理）のように、反転コンテンツ音声信号を生成音声信号に加算する処理は行わない。なお、制御装置１００は、上記（１）の場合と同様に、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号をさらに生成音声信号に加算し、反転外部発話音声信号がさらに加算された生成音声信号を、通信対象装置へ送信してもよい。
【００５１】
また、制御装置１００は、例えば、制御装置１００における再生状態がコンテンツ共有状態であることを、ユーザに視覚的に通知する。図３は、本発明の実施形態に係る制御装置１００が、コンテンツ共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。ここで、図３は、制御装置１００と２つの通信対象装置とが、撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合における表示用画像の一例を示している。
【００５２】
図３に示すように、制御装置１００は、例えば、コンテンツデータが示す画像（図３のＤ）と、制御装置１００が受信した、通信対象装置から送信された撮像画像（図３のＥ、Ｆ）とが仮想空間内に配置された表示用画像を、表示画面に表示させる。図３に示すように、仮想空間内にコンテンツデータが示す画像（図３のＤ）および撮像画像（図３のＥ、Ｆ）が配置された表示用画像が表示画面に表示されることによって、ユーザは、コンテンツ共有状態であることを視覚的に把握することが可能となる。なお、制御装置１００がコンテンツ共有状態において表示画面に表示させる表示用画像が、図３に示す例に限られないことは、言うまでもない。
【００５３】
また、制御装置１００は、仮想空間における、コンテンツデータが示す画像（図３のＤ）、撮像画像（図３のＥ、Ｆ）それぞれの位置に基づいて、自装置が備える音声入力デバイスや外部音声入力デバイスから出力させるコンテンツ音声信号および外部発話音声信号の音像を、それぞれ定位させる。ここで、制御装置１００は、例えば、予め仮想空間におけるコンテンツデータが示す画像の表示位置を規定し、予め規定された当該表示位置に対して予め設定されている音声定位パラメータを用いて、例えば、コンテンツ音声信号が示す音声に残響音などの音響効果を付加する。また、制御装置１００は、外部発話音声信号に対しても、上記コンテンツ音声信号と同様に、例えば、予め規定された表示位置それぞれに対して予め設定されている音声定位パラメータを用いて、外部発話音声信号が示す発話音声に残響音などの音響効果を付加する。
【００５４】
上記のように、自装置が備える音声入力デバイスや外部音声入力デバイスから出力させるコンテンツ音声信号および外部発話音声信号の音像をそれぞれ定位させることによって、制御装置１００は、ユーザに対して、通信対象装置のユーザとの間におけるコンテンツのより高い共有感を与えることが可能となる。なお、本発明の実施形態に係る制御装置１００における音像定位の方法は、上記に限られず、コンテンツ音声信号および外部発話音声信号の音像をそれぞれ定位させるための任意の方法を用いることができる。
【００５５】
また、通信対象装置が、例えば本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行う構成である場合（すなわち、通信対象装置が、他の制御装置１００である場合）には、通信対象装置は、例えば制御装置１００と同様に、例えば図３に示すような表示用画像を表示画面に表示させ、音像を定位させる。よって、上記の場合には、制御装置１００のユーザおよび通信対象装置のユーザ双方が、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚を得ることとなるので、通話に関する通信を行っている通信システム全体におけるユーザの利便性の向上が図られる。
【００５６】
上述したように、制御装置１００は、コンテンツデータの再生を行わない場合には、例えば上記（１）に示す処理を行う。また、制御装置１００は、コンテンツデータの再生を行っている場合、または、これからコンテンツデータの再生を行う場合には、コンテンツデータが示すコンテンツを通信対象装置との間で共有するか否かの判定結果に基づいて、例えば上記（２）に示す処理（コンテンツ非共有処理）、または上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。
【００５７】
ここで、コンテンツデータが示すコンテンツを通信対象装置との間で共有すると判定された場合（すなわち、コンテンツ共有状態の場合）には、制御装置１００は、通話に係る発話音声信号とコンテンツ音声信号とを通信対象装置へ送信させる。よって、たとえ制御装置１００と通信対象装置とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができるので、制御装置１００は、ユーザの利便性の向上を図ることができる。
【００５８】
また、コンテンツデータが示すコンテンツを通信対象装置との間で共有すると判定されない場合（すなわち、コンテンツ非共有状態の場合）には、制御装置１００は、発話音声信号を通信対象装置へ送信させ、コンテンツ音声信号を通信対象装置へ送信させない。よって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【００５９】
したがって、制御装置１００は、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【００６０】
［コンテンツ共有アプローチに係る処理の具体例］
次に、上述した本発明の実施形態に係るコンテンツ共有アプローチを実現するための処理の一例について説明する。図４は、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチに係る処理の一例を示す流れ図である。
【００６１】
制御装置１００は、通信対象装置との間における通話に関する通信が開始されたか否かを判定する（Ｓ１００）。ステップＳ１００において通信対象装置との間で通話に関する通信が開始されたと判定されない場合には、制御装置１００は、通話に関する通信が開始されたと判定されるまで処理を進めない。
【００６２】
また、ステップＳ１００において通信対象装置との間で通話に関する通信が開始されたと判定された場合には、制御装置１００は、通信対象装置との間でコンテンツ共有を行うか否かを判定する（Ｓ１０２）。
【００６３】
ここで、制御装置１００は、例えば、コンテンツ共有のオン／オフを規定するハードウェアスイッチや、リモートコントローラなどの外部操作装置から送信される外部操作信号に基づいてコンテンツ共有のオン／オフを規定するソフトウェアスイッチの状態に基づいて、ステップＳ１０２の判定を行う。なお、本発明の実施形態に係る制御装置１００におけるステップＳ１０２の処理は、上記に限られない。
【００６４】
例えば、制御装置１００は、撮像画像に基づいてユーザの所定の動作を検出し、検出結果に基づいて通信対象装置との間でコンテンツ共有を行うかを判定してもよい。上記の場合、制御装置１００は、例えば、自装置が備える撮像デバイスや外部撮像デバイスが生成した撮像画像を画像処理することによって、撮像画像に含まれるユーザの所定の動作（例えば、コンテンツ共有のオン／オフを示す手の形状や周期動作など）を検出する。そして、制御装置１００は、例えば、コンテンツ共有のオン動作が検出された場合には、通信対象装置との間でコンテンツ共有を行うと判定する。ここで、制御装置１００は、コンテンツ共有のオン動作が検出された場合には、例えばコンテンツ共有のオフ動作が検出されるまでコンテンツ共有を行うと判定するが、制御装置１００における処理は、上記に限られない。例えば、制御装置１００は、後述するステップＳ１１４においてエラーを通知した場合には、再度コンテンツ共有のオン動作が検出されるまで、コンテンツ共有を行うと判定しなくてもよい。
【００６５】
［１］コンテンツ共有を行うと判定されない場合
ステップＳ１０２において通信対象装置との間でコンテンツ共有を行うと判定されない場合には、制御装置１００は、コンテンツデータの再生を行っているか否かを判定する（Ｓ１０４）。
【００６６】
ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合には、制御装置１００は、後述するステップＳ１０８の処理を行う。ここで、ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合には、制御装置１００は、通信対象装置との間において、通話に関する通信に係る処理を行う。つまり、ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合における制御装置１００の処理は、上記（１）に示す処理に該当する。
【００６７】
また、ステップＳ１０４においてコンテンツデータの再生を行っていると判定された場合には、制御装置１００は、コンテンツ非共有処理を行う（Ｓ１０６）。ここで、制御装置１００は、ステップＳ１０６において、上記（２）に示す処理を行う。つまり、ステップＳ１０６の処理が行われることによって、例えば、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、制御装置１００は、ユーザのプライバシーの侵害を防止することができる。
【００６８】
ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合、または、ステップＳ１０６の処理を行っている場合には、制御装置１００は、通信対象装置との間における通話に関する通信を終了するか否かを判定する（Ｓ１０８）。ここで、制御装置１００は、例えば、リモートコントローラなどの外部操作装置から送信される外部操作信号や、自装置が備える操作部（後述する）から伝達されるユーザ操作に応じた操作信号が通話に関する通信の終了を示す場合に、通話に関する通信を終了すると判定する。なお、ステップＳ１０８の処理は、上記に限られない。例えば、制御装置１００は、撮像画像を画像処理することによって、撮像画像に含まれるユーザの所定の動作（例えば、通話に関する通信の終了を示す手の形状や周期動作など）が検出された場合に、通話に関する通信を終了すると判定することもできる。
【００６９】
ステップＳ１０８において通信対象装置との間における通話に関する通信を終了すると判定されない場合には、制御装置１００は、ステップＳ１０２からの処理を繰り返す。
【００７０】
また、ステップＳ１０８において通信対象装置との間における通話に関する通信を終了すると判定された場合には、制御装置１００は、例えばセッションの切断を行うことなどにより通信対象装置との間における通話に関する通信を終了し（Ｓ１１０）、コンテンツ共有アプローチに係る処理を終了する。なお、図４に示すコンテンツ共有アプローチに係る処理は、一度終了すれば再度行われないという類の処理ではなく、制御装置１００は、一旦処理が終了しても図４に示すコンテンツ共有アプローチに係る処理を繰り返すことが可能である。
【００７１】
［２］コンテンツ共有を行うと判定された場合
ステップＳ１０２において通信対象装置との間でコンテンツ共有を行うと判定された場合には、制御装置１００は、通信対象装置との間でコンテンツ共有が可能か否かを判定する（Ｓ１１２）。ここで、制御装置１００は、例えば、通信対象装置と通信を行い、通信対象装置においてもコンテンツ共有を行うと判定された場合に、通信対象装置との間でコンテンツ共有が可能であると判定するが、ステップＳ１１２の処理は、上記に限られない。
【００７２】
例えば、制御装置１００は、コンテンツデータのライセンス管理などを行うコンテンツ管理サーバと通信を行い、ユーザが共有を所望するコンテンツに対応するコンテンツデータがコンテンツ管理サーバにおいて認証された場合（コンテンツデータの共有が許可された場合）に、通信対象装置との間でコンテンツ共有が可能であると判定してもよい。つまり、本発明の実施形態に係るコンテンツ管理サーバは、制御装置１００と通信対象装置との間におけるコンテンツデータの共有を管理する役目を果たす。
【００７３】
上記のように、コンテンツ管理サーバにおいて認証された場合に通信対象装置との間でコンテンツの共有が行われることによって、たとえユーザおよび通信対象装置のユーザの双方がコンテンツの共有を所望したとしても、制御装置１００と通信対象装置との間では、コンテンツの共有がされない。したがって、上記のように、コンテンツ管理サーバにおいて認証された場合に通信対象装置との間でコンテンツの共有が行われることによって、共有の対象となるコンテンツデータのライセンス管理が実現される。
【００７４】
ステップＳ１１２において通信対象装置との間でコンテンツ共有が可能であると判定されない場合には、制御装置１００は、ユーザにエラーを通知する（Ｓ１１４）。そして、制御装置１００は、ステップＳ１０４からの処理を行う。ここで、制御装置１００は、例えばエラー表示画面を表示画面に表示させることによって、視覚的にユーザにエラーを通知するが、ステップＳ１１４の処理は、上記に限られない。例えば、制御装置１００は、音声出力デバイスや音声出力装置からエラーを示す音声を出力させることによって、聴覚的にユーザにエラーを通知することもできる。
【００７５】
また、ステップＳ１１２において通信対象装置との間でコンテンツ共有が可能であると判定された場合には、制御装置１００は、コンテンツ共有処理を行う（Ｓ１１６）。ここで、制御装置１００は、ステップＳ１１６において、上記（３）に示す処理を行う。つまり、ステップＳ１１６の処理が行われることによって、たとえ制御装置１００と通信対象装置とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることが可能となる。よって、制御装置１００は、ユーザの利便性の向上を図ることができる。
【００７６】
ステップＳ１１６の処理が行われると、制御装置１００は、コンテンツ共有を終了するか否かを判定する（Ｓ１１８）。ここで、制御装置１００は、例えばステップＳ１０２と同様に、ハードウェアスイッチやソフトウェアスイッチの状態、撮像画像から検出されたユーザの所定の動作などに基づいて、ステップＳ１１８の判定を行う。
【００７７】
ステップＳ１１８においてコンテンツ共有を終了すると判定されない場合には、制御装置１００は、ステップＳ１１６からの処理を繰り返す。また、ステップＳ１１８においてコンテンツ共有を終了すると判定された場合には、制御装置１００は、ステップＳ１０４からの処理を繰り返す。
【００７８】
制御装置１００は、例えば図４に示す処理を行うことによって、上記（１）に示す処理〜（３）に示す処理を選択的に行い、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現する。したがって、制御装置１００は、例えば図４に示す処理を行うことによって、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。なお、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチに係る処理が、図４に示す処理に限られないことは、言うまでもない。
【００７９】
（本発明の実施形態に係る制御装置）
次に、上述した本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行うことが可能な、本発明の実施形態に係る制御装置１００の構成の一例について説明する。
【００８０】
［第１の実施形態］
図５は、本発明の第１の実施形態に係る制御装置１００の構成の一例を示すブロック図である。
【００８１】
ここで、図５では、表示画面への画像（静止画像または動画像）の表示、表示画面の表示方向を撮像することによる撮像画像の生成、および音声による通話を実現するための音声入力・音声出力を行う表示システム２００と、ネットワーク５００で接続された通信対象装置３００、…およびコンテンツ管理サーバ４００とを併せて示している。ここで、上記「ネットワーク５００で接続されている」とは、一の装置と他の装置とがネットワーク５００を介して通信を行っていること、または通信可能な状態にあることをいう。また、ネットワーク５００としては、例えば、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）などの有線ネットワーク、基地局を介した無線ＷＡＮ（ＷＷＡＮ；Wireless Wide Area Network）などの無線ネットワーク、あるいは、ＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）などの通信プロトコルを用いたインターネットなどが挙げられる。なお、制御装置１００、通信対象装置３００、…、およびコンテンツ管理サーバ４００は、ネットワーク５００を介して通信を行うことに限られず、例えば、直接的に通信を行ってもよい。また、通信対象装置３００、…それぞれは、制御装置１００と同様の機能を有する装置（すなわち、他の制御装置１００）であってもよい。以下では、制御装置１００と通話に関する通信を行う１、または２以上の通信対象装置を、総称して「通信対象装置３００」と示す場合がある。
【００８２】
例えば図５に示す構成により、制御装置１００と表示システム２００とを用いるユーザは、例えばビデオ通話のような撮像画像および音声による通話を、通信対象装置３００のユーザとの間で行うことができる。なお、図５の表示システム２００を、例えば、マイクやスピーカなどから構成される、音声による通話を実現するための音声入力・音声出力を行う音声入出力システム（図示せず）に置き換えてもよい。上記の場合には、制御装置１００と音声入出力システム（図示せず）とを用いるユーザは、音声による通話を通信対象装置３００のユーザとの間で行うこととなる。
【００８３】
また、図５では、表示システム２００が、表示を行う表示装置６００と、撮像を行う撮像装置７００と、音声を出力する音声出力装置８００と、音声を入力する音声入力装置９００とからなる例を示しているが、本発明の実施形態に係る表示システム２００の構成は、上記に限られない。例えば、表示システム２００は、表示装置６００、撮像装置７００、音声出力装置８００が一体となった装置（例えば撮像機能および音声出力機能を有する表示装置）であってもよい。また、表示システム２００は、例えば、表示機能、撮像機能、音声出力機能、および音声入力機能を有する、１つの装置であってもよい。
【００８４】
ここで、表示システム２００が表示画面の表示方向を撮像した撮像画像を生成することによって、当該表示画面を見ているユーザを撮像した撮像画像が得られる。したがって、表示システム２００が生成した撮像画像を処理することによって、制御装置１００は、例えば、図４に示すステップＳ１０２、Ｓ１０８、Ｓ１１８の処理において撮像画像に基づきユーザの所定の動作を検出する場合における画像処理などをより容易に行うことが可能となる。
【００８５】
図５を参照すると、制御装置１００は、記憶部１０２と、通信部１０４と、入力部１０６と、制御部１０８とを備える。
【００８６】
また、制御装置１００は、例えば、ＲＯＭ（Read Only Memory；図示せず）や、ＲＡＭ（Random Access Memory；図示せず）、ユーザが操作可能な操作部（図示せず）などを備えてもよい。制御装置１００は、例えば、データの伝送路としてのバス（bus）により各構成要素間を接続する。
【００８７】
ここで、ＲＯＭ（図示せず）は、例えば制御部１０８が使用するプログラムや演算パラメータなどの制御用データを記憶する。ＲＡＭ（図示せず）は、例えば制御部１０８により実行されるプログラムなどを一時的に記憶する。また、操作部（図示せず）としては、例えば、ボタンや、方向キー、あるいは、これらの組み合わせなどが挙げられる。なお、制御装置１００は、制御装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）と接続されてもよい。
【００８８】
〔制御装置１００のハードウェア構成例〕
図６は、本発明の実施形態に係る制御装置１００のハードウェア構成の一例を示す説明図である。図６を参照すると、制御装置１００は、例えば、ＭＰＵ１５０と、ＲＯＭ１５２と、ＲＡＭ１５４と、記録媒体１５６と、入出力インタフェース１５８と、操作入力デバイス１６０と、表示デバイス１６２と、通信インタフェース１６４とを備える。また、制御装置１００は、例えば、データの伝送路としてのバス１６６で各構成要素間を接続する。
【００８９】
ＭＰＵ１５０は、ＭＰＵ（Micro Processing Unit）や、エンコーダやデコーダなどの画像処理を実現するための回路、適応フィルタや加算器など音声処理を実現するための回路など、各種機能を実現するための複数の回路が集積された集積回路などで構成され、制御装置１００全体を制御する制御部（図示せず）として機能する。また、ＭＰＵ１５０は、制御装置１００において、再生処理部１１０、判定部１１２、および共有処理部１１４としての役目を果たす。
【００９０】
ＲＯＭ１５２は、ＭＰＵ１５０が使用するプログラムや演算パラメータなどの制御用データなどを記憶する。ＲＡＭ１５４は、例えば、ＭＰＵ１５０により実行されるプログラムなどを一時的に記憶する。
【００９１】
記録媒体１５６は、記憶部１０２として機能し、例えば、コンテンツデータや、音声定位パラメータが記録された音声定位データ、アプリケーションなどを記憶する。ここで、記録媒体１５６としては、例えば、ハードディスクなどの磁気記録媒体や、ＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory）、フラッシュメモリ（flash memory）、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリ（nonvolatile memory）が挙げられる。また、制御装置１００は、制御装置１００から着脱可能な記録媒体１５６を備えることもできる。
【００９２】
入出力インタフェース１５８は、例えば、操作入力デバイス１６０や、表示デバイス１６２を接続する。また、入出力インタフェース１５８は、入力部１０６としての役目を果たすこともできる。操作入力デバイス１６０は、操作部（図示せず）として機能し、また、表示デバイス１６２は、表示部（後述する）として機能する。ここで、入出力インタフェース１５８としては、例えば、音声入力端子や、音声出力端子、ＵＳＢ（Universal Serial Bus）端子、ＤＶＩ（Digital Visual Interface）端子、ＨＤＭＩ（High-Definition Multimedia Interface）端子、各種処理回路などが挙げられる。また、操作入力デバイス１６０は、例えば、制御装置１００上に備えられ、制御装置１００の内部で入出力インタフェース１５８と接続される。操作入力デバイス１６０としては、例えば、ボタン、方向キー、ジョグダイヤルなどの回転型セレクター、あるいは、これらの組み合わせなどが挙げられる。また、表示デバイス１６２は、例えば、制御装置１００上に備えられ、制御装置１００の内部で入出力インタフェース１５８と接続される。表示デバイス１６２としては、例えば、液晶ディスプレイ（Liquid Crystal Display；ＬＣＤ）や有機ＥＬディスプレイ（organic ElectroLuminescence display。または、ＯＬＥＤディスプレイ（Organic Light Emitting Diode display）ともよばれる。）などが挙げられる。なお、入出力インタフェース１５８が、制御装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）や、表示デバイス（例えば、表示装置６００などの外部表示デバイス）、撮像デバイス（例えば、撮像装置７００など）などの外部デバイスと接続することもできることは、言うまでもない。また、表示デバイス１６２は、例えばタッチスクリーンなど、表示とユーザ操作とが可能なデバイスであってもよい。
【００９３】
通信インタフェース１６４は、制御装置１００が備える通信手段であり、ネットワーク５００を介して（あるいは、直接的に）、例えば、表示システム２００や、通信対象装置３００、コンテンツ管理サーバ４００、コンテンツデータを記憶するサーバ（図示せず）などの外部装置と無線／有線で通信を行うための通信部１０４として機能する。ここで、通信インタフェース１６４としては、例えば、通信アンテナおよびＲＦ回路（無線通信）や、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）、ＩＥＥＥ８０２．１１ｂポートおよび送受信回路（無線通信）、あるいはＬＡＮ端子および送受信回路（有線通信）などが挙げられる。
【００９４】
制御装置１００は、例えば図６に示す構成によって、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行う。なお、本発明の実施形態に係る制御装置１００のハードウェア構成は、図６に示す構成に限られない。
【００９５】
例えば、制御装置１００は、例えば、撮像部（後述する）の役目を果たす、レンズ／撮像素子と信号処理回路とから構成される撮像デバイスを備えていてもよい。上記の場合には、制御装置１００は、自装置が生成した撮像画像を処理し、また、通信対象装置３００との間において撮像画像および音声による通話（例えばビデオ通話）に関する通信を行うことができる。ここで、レンズ／撮像素子は、例えば、光学系のレンズと、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子を複数用いたイメージセンサとで構成される。信号処理回路は、例えば、ＡＧＣ（Automatic Gain Control）回路やＡＤＣ（Analog to Digital Converter）を備え、撮像素子により生成されたアナログ信号をデジタル信号（画像データ）に変換し、各種信号処理を行う。信号処理回路が行う信号処理としては、例えば、Ｗｈｉｔｅ Ｂａｌａｎｃｅ補正処理、補間処理、色調補正処理、ガンマ補正処理、ＹＣｂＣｒ変換処理、エッジ強調処理、およびコーディング処理などが挙げられる。
【００９６】
また、制御装置１００は、例えば、音声入力部（後述する）の役目を果たす、マイクロフォンや増幅器（アンプ）を備えてもよい。上記の場合には、制御装置１００は、例えば、自装置において生成した生成音声信号を用いて、通信対象装置３００との間で通話に関する通信を行うことができる。
【００９７】
また、制御装置１００は、例えば、音声出力部（後述する）の役目を果たす、ＤＳＰ（Digital Signal Processor）と、増幅器（アンプ）やスピーカなどから構成される音声出力デバイスとを備えてもよい。上記の場合には、制御装置１００は、例えば、再生しているコンテンツデータが示す音声や、通信対象装置３００との間における通話に関する発話音声などの、様々な音声の出力を行うことが可能となる。
【００９８】
さらに、制御装置１００は、例えば、図６に示す操作デバイス１６０や表示デバイス１６２を備えない構成であってもよい。
【００９９】
再度図５を参照して、本発明の第１の実施形態に係る制御装置１００の構成について説明する。記憶部１０２は、制御装置１００が備える記憶手段である。ここで、記憶部１０２としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。
【０１００】
また、記憶部１０２は、例えば、コンテンツデータや、音声定位データ、アプリケーションなどを記憶する。図５では、コンテンツデータ１４０、…が記憶部１０２に記憶されている例を示している。
【０１０１】
通信部１０４は、制御装置１００が備える通信手段であり、ネットワーク５００を介して（あるいは、直接的に）、表示システム２００や通信対象装置３００、コンテンツ管理サーバ４００などの外部装置と無線／有線で通信を行う。制御装置１００は、通信部１０４を備えることによって、１または２以上の通信対象装置３００との間で通信を行い、通話に関する通信（音声による通話、または、撮像画像および音声による通話に関する通信）を行うことができる。また、通信部１０４は、例えば、制御部１０８により通信が制御される。
【０１０２】
ここで、通信部１０４としては、例えば、通信アンテナおよびＲＦ回路や、ＬＡＮ端子および送受信回路などが挙げられるが、通信部１０４は、上記に限られない。例えば、通信部１０４は、ネットワーク５００を介して外部装置と通信可能な任意の構成をとることができる。
【０１０３】
入力部１０６は、例えば、撮像装置７００が撮像により生成した撮像画像や、音声入力装置９００が生成した音声信号（生成音声信号）を受信する。そして、入力部１０６は、受信した（入力された）撮像画像や音声信号を、制御部１０８へ伝達する。ここで、入力部１０６としては、例えば、音声入力端子や、音声出力端子、ＵＳＢ端子、ＤＶＩ端子、ＨＤＭＩ端子、各種処理回路などが挙げられるが、入力部１０６は、上記に限られない。例えば、入力部１０６は、外部装置から撮像画像や音声信号を有線または無線で受信することが可能な任意の構成をとることができる。
【０１０４】
制御部１０８は、例えば、ＭＰＵや、エンコーダやデコーダなどの画像処理を実現するための回路、適応フィルタや加算器など音声処理を実現するための回路などで構成され、制御装置１００全体を制御する役目を果たす。また、制御部１０８は、再生処理部１１０と、判定部１１２と、共有処理部１１４とを備え、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を主導的に行う役目を果たす。また、制御部１０８は、通信対象装置３００などの外部装置との通信を制御する通信制御部（図示せず）を備えていてもよい。
【０１０５】
再生処理部１１０は、例えば、記憶部１０２に記憶しているコンテンツデータや、通信部１０４が受信した、通信対象装置３００やサーバ（図示せず）などの外部装置から送信されたコンテンツデータを再生する。
【０１０６】
判定部１１２は、判定部１１２は、制御装置１００における再生状態を判定し、判定結果を共有処理部１１４へ伝達する役目を果たす。
【０１０７】
より具体的には、例えば、通信対象装置３００との間において通話に関する通信が行われているときに再生処理部１１０においてコンテンツデータの再生が行わない場合には、判定部１１２は、上記（２）に示す処理（コンテンツ非共有処理）および上記（３）に示す処理（コンテンツ共有処理）を行わない旨の判定結果を共有処理部１１４へ伝達する。
【０１０８】
また、例えば、通信対象装置３００との間において通話に関する通信が行われているときにおいて、再生処理部１１０においてコンテンツデータの再生が行われている場合、または、再生処理部１１０がこれからコンテンツデータの再生を行う場合には、判定部１１２は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かを判定する。ここで、判定部１１２は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かを判定する場合、例えば、通信部１０４を介してコンテンツ管理サーバ４００と通信を行い、コンテンツ管理サーバ４００からコンテンツデータの共有が許可された場合に、共有すると判定する。
【０１０９】
そして、判定部１１２は、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有するか否かの判定結果に応じて、上記（２）に示す処理（コンテンツ非共有処理）または、上記（３）に示す処理（コンテンツ共有処理）を選択的に行わせるための判定結果を、共有処理部１１４へ伝達する。
【０１１０】
ここで、例えば図４に示すコンテンツ共有アプローチに係る処理における判定部１１２の処理としては、例えば、ステップＳ１００、Ｓ１０２、Ｓ１０４、Ｓ１０８、Ｓ１１２、Ｓ１１８に示す処理が挙げられる。なお、図４に示すコンテンツ共有アプローチに係る処理における判定部１１２の処理は、上記に限られない。例えば、本発明の実施形態に係る制御装置１００では、通信制御部（図示せず）が、例えば図４に示すコンテンツ共有アプローチに係る処理におけるステップＳ１００、Ｓ１０８の処理を行ってもよい。
【０１１１】
共有処理部１１４は、判定部１１２から伝達される判定結果に基づいて、上記（２）に示す処理（コンテンツ非共有処理）または、上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。より具体的には、共有処理部１１４は、判定部１１２においてコンテンツデータが示す音声を通信対象装置３００との間で共有すると判定されない場合には、上記（２）に示す処理（コンテンツ非共有処理）を行う。また、共有処理部１１４は、判定部１１２においてコンテンツデータが示す音声を通信対象装置３００との間で共有すると判定された場合には、上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。
【０１１２】
ここで、例えば図４に示すコンテンツ共有アプローチに係る処理における共有処理部１１４の処理としては、例えば、ステップＳ１０６、Ｓ１１４、Ｓ１１６に示す処理が挙げられる。
【０１１３】
制御部１０８は、例えば再生処理部１１０、判定部１１２、および共有処理部１１４を備えることによって、コンテンツ共有アプローチに係る処理を主導的に行うことができる。なお、制御部１０８の構成が、図５に示す構成に限られないことはいうまでもない。
【０１１４】
第１の実施形態に係る制御装置１００は、例えば図５に示す構成によって、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現することができる。したがって、制御装置１００は、例えば図５に示す構成によって、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。なお、本発明の第１の実施形態に係る制御装置１００の構成が、図５に示す構成に限られないことは、言うまでもない。
【０１１５】
［第２の実施形態］
図７は、本発明の第２の実施形態に係る制御装置１００の構成の一例を示すブロック図である。ここで、図７では、図５と同様に、ネットワーク５００で接続された通信対象装置３００、…、およびコンテンツ管理サーバ４００を併せて示している。
【０１１６】
図７に示す第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と基本的に同様の構成を有するが、図５に示す第１の実施形態に係る制御装置１００と比較すると、第２の実施形態に係る制御装置１００は、入力部１０６を備えず、また、音声入力部１２０と、撮像部１２２と、表示部１２４と、音声出力部１２６とをさらに備えている。
【０１１７】
音声入力部１２０は、制御装置１００が備える音声信号生成手段である。音声入力部１２０としては、例えばマイクロフォンが挙げられる。なお、音声入力部１２０は、制御装置１００から着脱可能であってもよい。
【０１１８】
撮像部１２２は、制御装置１００が備える撮像手段であり、表示部１２４が表示する表示画面の表示方向を撮像して、撮像画像を生成する。なお、第２の実施形態に係る制御装置１００が、撮像画像および音声による通話に関する通信を行う機能を有さない場合には、制御装置１００は、撮像部１２２を備えない構成であってもよい。ここで、撮像部１２２としては、例えば、レンズ／撮像素子と信号処理回路とから構成される撮像デバイスが挙げられる。
【０１１９】
表示部１２４は、制御装置１００が備える表示手段であり、表示画面に様々な情報や画像を表示する。表示部１２４の表示画面に表示される画面としては、例えば、コンテンツデータが示す画像を表示するコンテンツ表示画面や、通話に係る撮像画像が表示される画面、所望する動作を制御装置１００に対して行わせるための操作画面などが挙げられる。なお、上記通話に係る撮像画像が表示される画面において、撮像画像は、コンテンツが示す画像と並列に表示されてもよく、または、コンテンツが示す画像に重畳して表示されてもよい。また、表示部１２４としては、例えば、液晶ディスプレイや有機ＥＬディスプレイなどが挙げられる。
【０１２０】
音声出力部１２６は、制御装置１００が備える音声出力手段であり、例えば再生されているコンテンツデータが示す音声や、通話に係る発話音声、制御装置１００におけるシステム音声など、様々な音声を出力する。ここで、音声出力部１２６としては、例えば、ＤＳＰと、増幅器（アンプ）やスピーカなどから構成される音声出力デバイスとが挙げられる。
【０１２１】
第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と基本的に同様の構成を有する。よって、第２の実施形態に係る制御装置１００は、図７に示す構成によって、第１の実施形態に係る制御装置１００と同様に、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現することができる。したがって、制御装置１００は、例えば図７に示す構成によって、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。なお、本発明の第２の実施形態に係る制御装置１００の構成は、図７に示す構成に限られない。例えば第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と同様に、入力部１０６を備えていてもよい。
【０１２２】
以上のように、本発明の実施形態に係る制御装置１００は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かの判定結果に基づいて、上記（２）に示す処理（コンテンツ非共有処理）、または上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。ここで、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有すると判定された場合（すなわち、コンテンツ共有状態の場合）には、制御装置１００は、通話に係る発話音声信号とコンテンツ音声信号とを通信対象装置３００へ送信させる。よって、たとえ制御装置１００と通信対象装置３００とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができるので、制御装置１００は、ユーザの利便性の向上を図ることができる。また、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有すると判定されない場合（すなわち、コンテンツ非共有状態の場合）には、制御装置１００は、発話音声信号を通信対象装置３００へ送信させ、コンテンツ音声信号を通信対象装置３００へ送信させない。よって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置３００のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【０１２３】
したがって、制御装置１００は、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。
【０１２４】
以上、本発明の実施形態として制御装置１００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、ゲーム機、セットトップボックスなど、様々な機器に適用することができる。
【０１２５】
また、本発明の実施形態として表示システム２００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置など、様々な機器に適用することができる。なお、本発明の実施形態に係る表示システム２００は、表示を行う機器と、撮像を行う機器と、音声信号を生成する機器と、音声を出力する機器との組合せであってもよい。
【０１２６】
また、本発明の実施形態として、通信対象装置３００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、ゲーム機、セットトップボックスなど、様々な機器に適用することができる。
【０１２７】
また、本発明の実施形態として、コンテンツ管理サーバ４００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータなど、様々な機器に適用することができる。
【０１２８】
（本発明の実施形態に係るプログラム）
コンピュータを、本発明の実施形態に係る制御装置として機能させるためのプログラム（例えば図４に示すような、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現するためのプログラム）によって、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【０１２９】
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【０１３０】
例えば、本発明の実施形態に係る制御装置１００は、図５、図７に示す再生処理部１１０、判定部１１２、および共有処理部１１４を個別に備える（例えば、それぞれを個別の処理回路で実現する）ことができる。
【０１３１】
また、上記では、コンピュータを、本発明の実施形態に係る制御装置として機能させるためのプログラム（コンピュータプログラム）が提供されることを示したが、本発明の実施形態は、さらに、上記プログラムを記憶させた記憶媒体も併せて提供することができる。
【０１３２】
上述した構成は、本発明の実施形態の一例を示すものであり、当然に、本発明の技術的範囲に属するものである。
【符号の説明】
【０１３３】
１００ 制御装置
１０２ 記憶部
１０４ 通信部
１０６ 入力部
１０８ 制御部
１１０ 再生処理部
１１２ 判定部
１１４ 共有処理部
１２０ 音声入力部
１２２ 撮像部
１２４ 表示部
１２６ 音声出力部
２００ 表示システム
３００ 通信対象装置
４００ コンテンツ管理サーバ
５００ ネットワーク
６００ 表示装置
７００ 撮像装置
８００ 音声出力装置
９００ 音声入力装置
【技術分野】
【０００１】
本発明は、制御装置、および制御方法に関する。
【背景技術】
【０００２】
近年、例えばＰＣ（Personal Computer）などのように、コンテンツデータの再生を行いながら、外部装置との間でユーザ間の通話に関する通信を行うことが可能な装置の普及が進んでいる。
【０００３】
このような中、通話に関する通信を行っている複数の装置間においてコンテンツを共有する技術が開発されている。遠隔地にいる複数のユーザに対して、同じ場所で映像コンテンツを視聴しているような臨場感を与えるための技術としては、例えば、特許文献１が挙げられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−３６６８５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
通話に関する通信を行っている複数の装置間においてコンテンツを共有する従来の技術（以下、単に「従来の技術」という。）が適用された制御装置（以下、「従来の制御装置」という。）は、共有するコンテンツデータが示す画像と通話を行っているユーザの画像とを合成して、合成した画像を表示画面に表示させる。また、従来の制御装置は、上記表示画面への合成した画像の表示と共に、上記通話に係る発話音声に対して、予め設定されたユーザの画像の位置に応じた音像定位を行う。よって、従来の技術を用いることによって、通話に関する通信を行っている各装置を用いるユーザに対して、あたかも同じ場所で映像コンテンツを視聴しているような臨場感を与えることができる可能性はある。
【０００６】
ここで、複数の装置間において通話に関する通信が行われている場合、ユーザが、常に通信相手との間におけるコンテンツの共有を所望するとは限らない。例えば、ある装置においてコンテンツデータの再生が行われているときに、通話に関する通信が開始された場合には、当該装置のユーザは、自己が楽しんでいるコンテンツデータが示す音声の内容（コンテンツの一例）を、通話に関する通信を行っている通信対象の装置（以下「通信対象装置」と示す。）のユーザに知られたくないことがありうる。よって、例えば、ある装置のユーザが共有を所望していないときに、自己が楽しんでいるコンテンツデータが示す音声の内容が通信対象装置のユーザに知られた場合には、当該装置のユーザのプライバシーが侵害される恐れがある。
【０００７】
しかしながら、従来の技術では、例えば上記のようなユーザのプライバシーが侵害されうる事態を防止することについて、何らの考慮もなされていない。したがって、従来の制御装置を用いたとしても、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることの実現は、望むべくもない。
【０００８】
本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることが可能な、新規かつ改良された制御装置、および制御方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するために、本発明の第１の観点によれば、１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行う通信部と、音声、または、音声および画像を示すコンテンツデータの再生を行う再生処理部と、コンテンツデータが示す音声を上記通信対象装置との間で共有するか否かを判定する判定部と、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合に、上記コンテンツデータが示す音声、または、音声および画像を上記通信対象装置との間で共有する処理を選択的に行う共有処理部とを備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記通話に関する通信における発話音声に対応する発話音声信号を上記通信対象装置へ送信させ、上記再生処理部が再生している上記コンテンツデータが示す音声に対応するコンテンツ音声信号を上記通信対象装置へ送信させない制御装置が提供される。
【００１０】
かかる構成により、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【００１１】
また、外部音声入力装置において生成された音声信号が入力される入力部をさらに備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、上記音声信号とを加算し、加算された上記音声信号を上記通信部に送信させてもよい。
【００１２】
また、音声信号を生成する音声入力部をさらに備え、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、上記音声信号とを加算し、加算された上記音声信号を上記通信部に送信させてもよい。
【００１３】
また、上記共有処理部は、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合は、上記通信部が受信した、上記通話に関する通信における発話音声に対応する外部発話音声信号の位相を反転させた反転外部発話音声信号を、上記音声信号にさらに加算してもよい。
【００１４】
また、上記通信部が上記撮像画像および音声による通話に関する通信を行っているときにおいて、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記共有処理部は、上記コンテンツデータが示す画像が表示される領域と、上記通信部が受信した、上記通信対象装置から送信された撮像画像が表示される領域とが分離された表示用画像を、表示画面に表示させてもよい。
【００１５】
また、上記通信部が上記撮像画像および音声による通話に関する通信を行っているときにおいて、上記判定部において上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合には、上記共有処理部は、上記コンテンツデータが示す画像と、上記通信部が受信した、上記通信対象装置から送信された撮像画像とが仮想空間内に配置された表示用画像を、表示画面に表示させてもよい。
【００１６】
また、上記共有処理部は、上記仮想空間における、上記コンテンツデータが示す画像、上記撮像画像それぞれの位置に基づいて、上記コンテンツデータが示す音声に対応するコンテンツ音声信号と、上記通信部が受信した、上記撮像画像に対応する上記通信対象装置から送信された外部発話音声信号との音像をそれぞれ定位させてもよい。
【００１７】
また、上記通信部は、上記通信対象装置との間における上記コンテンツデータの共有を管理するコンテンツ管理サーバとさらに通信を行い、上記判定部は、上記コンテンツ管理サーバにおいて上記コンテンツデータの共有が許可された場合に、上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定してもよい。
【００１８】
上記目的を達成するために、本発明の第２の観点によれば、１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行うステップと、音声、または、音声および画像を示すコンテンツデータの再生を行うステップと、コンテンツデータが示す音声を上記通信対象装置との間で共有するか否かを判定するステップと、上記判定するステップにおいて上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定された場合に、上記コンテンツデータが示す音声、または、音声および画像を上記通信対象装置との間で共有する処理を選択的に行うステップとを有し、上記選択的に行うステップでは、上記判定するステップにおいて上記コンテンツデータが示す音声を上記通信対象装置との間で共有すると判定されない場合には、上記通話に関する通信における発話音声に対応する発話音声信号を上記通信対象装置へ送信させ、上記再生を行うステップにおいて再生されている上記コンテンツデータが示す音声に対応するコンテンツ音声信号を上記通信対象装置へ送信させない制御方法が提供される。
【００１９】
かかる方法を用いることにより、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【発明の効果】
【００２０】
本発明によれば、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施形態に係る制御装置におけるコンテンツ共有アプローチの概要を説明するための説明図である。
【図２】本発明の実施形態に係る制御装置が、コンテンツ非共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。
【図３】本発明の実施形態に係る制御装置が、コンテンツ共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。
【図４】本発明の実施形態に係る制御装置におけるコンテンツ共有アプローチに係る処理の一例を示す流れ図である。
【図５】本発明の第１の実施形態に係る制御装置の構成の一例を示すブロック図である。
【図６】本発明の実施形態に係る制御装置のハードウェア構成の一例を示す説明図である。
【図７】本発明の第２の実施形態に係る制御装置の構成の一例を示すブロック図である。
【発明を実施するための形態】
【００２２】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２３】
また、以下では、下記に示す順序で説明を行う。
１．本発明の実施形態に係るアプローチ
２．本発明の実施形態に係る制御装置
３．本発明の実施形態に係るプログラム
【００２４】
（本発明の実施形態に係るアプローチ）
本発明の実施形態に係る制御装置（以下、「制御装置１００」と示す場合がある。）の構成について説明する前に、本発明の実施形態に係るコンテンツ共有アプローチについて説明する。なお、以下に示す本発明の実施形態に係るコンテンツ共有アプローチに係る処理は、本発明の実施形態に係る制御方法に係る処理と捉えることができる。
【００２５】
また、以下では、制御装置１００が、コンテンツデータの再生に係る処理と、１、または２以上の通信対象装置との間における通話に関する通信に係る処理とを平行して行う場合を例に挙げて説明する。ここで、本発明の実施形態に係るコンテンツデータとは、音声、または、音声および画像（動画像／静止画像）を示すデータである。以下では、コンテンツデータが示す音声、または、音声および画像を総称して「コンテンツ」と示す場合がある。コンテンツデータとしては、例えば、音楽データや映像データなどが挙げられる。また、制御装置１００は、例えば、記憶部（後述する）に記憶されたコンテンツデータや、サーバなどの外部装置から受信したコンテンツデータを再生するが、制御装置１００が再生するコンテンツデータは、上記に限られない。例えば、制御装置１００は、テレビ塔などから送信させた放送波を（直接的に、または、アンテナやチューナなどを介して間接的に）受信することによってコンテンツデータを外部から取得し、当該コンテンツデータを再生することも可能である。
【００２６】
また、本発明の実施形態に係る通話に関する通信としては、例えば、音声による通話に関する通信が挙げられるが、本発明の実施形態に係る通話に関する通信は、上記に限られない。例えば、本発明の実施形態に係る通話に関する通信は、撮像画像および音声による通話（例えばビデオ通話）に関する通信であってもよい。また、本発明の実施形態に係る通話に関する通信は、静止画像および音声による通話に関する通信であってもよい。ここで、本発明の実施形態に係る撮像画像とは、撮像により得られた動画像（または、時間軸方向に連続して撮像された静止画像の集合体）である。なお、本発明の実施形態に係る制御装置１００と通信対象装置との間における撮像画像および音声による通話（例えばビデオ通話）に関する通信では、撮像画像に含まれる撮像されたユーザが他のキャラクター（いわゆるアバター）に置き換えられた画像が、撮像画像として制御装置１００と通信対象装置との間で送受信されてもよい。
【００２７】
［コンテンツ共有アプローチの概要］
例えば従来の技術を用いた場合のように、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、制御装置のユーザと、通信対象装置のユーザとは、同一のコンテンツを通話をしながら楽しむことが可能となる。つまり、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、たとえ制御装置と通信対象装置とが遠隔地にある装置であったとしても、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができる。したがって、制御装置と通信対象装置との間において同一のコンテンツが共有されることによって、ユーザの利便性の向上を図ることができる。
【００２８】
一方、上述したように、例えば制御装置のユーザがコンテンツの共有を所望していないときに自己が楽しんでいるコンテンツデータが示す音声の内容が通信対象装置のユーザに知られた場合には、制御装置のユーザのプライバシーが侵害される恐れがある。
【００２９】
そこで、本発明の実施形態に係る制御装置１００は、コンテンツデータの再生状態に基づいて、コンテンツデータが示すコンテンツの共有に係る処理（以下、「コンテンツ共有処理」と示す場合がある。）や、再生しているコンテンツデータが示すコンテンツを通信対象装置との間で共有させないための処理（以下、「コンテンツ非共有処理」と示す場合がある。）を選択的に行う。
【００３０】
より具体的には、制御装置１００は、コンテンツデータが示すコンテンツを通信対象装置との間で共有するか否かを判定する。そして、制御装置１００は、上記判定において共有すると判定された場合に、コンテンツ共有処理を選択的に行う。また、制御装置１００は、上記判定において共有すると判定されない場合には、コンテンツ非共有処理を行う。
【００３１】
図１は、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチの概要を説明するための説明図である。ここで、図１は、制御装置１００が通信対象装置と通話に関する通信を行っている場合における、制御装置１００のコンテンツデータの再生状態および各再生状態におけるコンテンツデータ再生に関する処理の概要を示している。
【００３２】
図１に示すように、制御装置１００は、通信対象装置との間で通話に関する通信を行っている場合には、例えば図１のＡ〜図１のＣに示す３つの再生状態に応じて、コンテンツデータ再生に関する処理として下記に示す（１）に示す処理〜（３）に示す処理を選択的に行う。
【００３３】
（１）コンテンツデータの再生を行わない場合における処理（図１に示すＡの状態における処理）
コンテンツデータの再生を行わない場合には、制御装置１００は、例えば、自装置が備える音声入力デバイス（後述する音声入力部）や、外部音声入力デバイス（後述する音声入力装置）が生成した音声信号（以下、「生成音声信号」と示す場合がある。）を、通信対象装置に対して送信する。
【００３４】
ここで、上記音声入力デバイスや外部音声入力デバイスは、制御装置１００のユーザ（以下、単に「ユーザ」と示す場合がある。）が、通信対象装置のユーザとの通話に用いるデバイスである。つまり、本発明の実施形態に係る生成音声信号には、通話に係るユーザの発話音声に対応する音声信号（以下、「発話音声信号」という。）が含まれうる。よって、制御装置１００は、通話に関する通信において生成音声信号を通信対象装置へ送信することによって、通信対象装置のユーザに対して、通話に係る発話音声を提示することが可能となる。
【００３５】
なお、本発明の実施形態に係る生成音声信号に含まれうる音声信号は、ユーザの発話音声に対応する発話音声信号に限られない。例えば、生成音声信号には、自装置が備える音声入力デバイス（後述する音声出力部）や、外部音声入力デバイス（後述する音声出力装置）から出力された音声に対応する音声信号（以下、「出力音声信号」と示す場合がある。）が含まれうる。より具体的には、例えば制御装置１００がコンテンツデータの再生を行っていない場合には、生成音声信号には、制御装置１００が通信対象装置から受信した、通話に関する通信対象装置のユーザの発話音声に対応する音声信号（以下、「外部発話音声信号」という。）が、出力音声信号として含まれうる。
【００３６】
ここで、制御装置１００が、外部発話音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、例えば、制御装置１００のユーザの発話音声に加えて、通信対象装置のユーザが発した発話音声が通信対象装置のユーザに聴こえてしまうことが起こりうる。
【００３７】
そこで、制御装置１００は、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号を生成音声信号に加算し、反転外部発話音声信号が加算された生成音声信号を、通信対象装置へ送信する。例えば上記のように反転外部発話音声信号が加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、通信対象装置のユーザが発した発話音声が、通信対象装置のユーザに聴こえてしまうことを防止することができる。
【００３８】
ここで、制御装置１００は、例えば、ＬＭＳ（Least Mean Square）などの適応フィルタや、加算器を備えることによって、生成音声信号に対する上記処理を行う。なお、本発明の実施形態に係る制御装置１００における生成音声信号に対する上記処理を実現するための構成は、上記に限られない。例えば、制御装置１００は、いわゆるエコーキャンセルを実現することが可能な任意の構成を備えることによって、生成音声信号に対する上記処理を実現することができる。
【００３９】
（２）再生されているコンテンツデータが示すコンテンツを共有しない場合における処理（コンテンツ非共有処理。図１に示すＢの状態における処理）
再生されているコンテンツデータが示すコンテンツを共有しない場合には、制御装置１００は、発話音声信号を通信対象装置へ送信させ、再生されているコンテンツデータが示す音声に対応する音声信号（以下「コンテンツ音声信号」と示す場合がある。）を通信対象装置へ送信させない。
【００４０】
上記のように、音声入力デバイスや外部音声入力デバイスが生成した生成音声信号には、ユーザの発話音声に対応する発話音声信号に限られず、出力音声信号が含まれうる。また、制御装置１００がコンテンツデータを再生させている場合には、出力音声信号には、コンテンツ音声信号が含まれることとなる。ここで、制御装置１００が、コンテンツ音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、例えば、制御装置１００のユーザの発話音声に加えて制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまう。よって、上記のようにコンテンツ音声信号が含まれている生成音声信号を通信対象装置へ送信した場合には、ユーザのプライバシーが侵害される恐れがある。
【００４１】
そこで、制御装置１００は、例えば、コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号を生成音声信号に加算し、反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信する。例えば上記のように反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができる。
【００４２】
ここで、制御装置１００は、例えば、ＬＭＳなどの適応フィルタや加算器を備えることによって、生成音声信号に対する上記処理を行う。なお、制御装置１００は、いわゆるエコーキャンセルを実現することが可能な任意の構成を備えることによって、生成音声信号に対する上記処理を実現することができる。
【００４３】
また、制御装置１００は、上記（１）の場合と同様に、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号をさらに生成音声信号に加算し、反転外部発話音声信号がさらに加算された生成音声信号を、通信対象装置へ送信してもよい。例えば上記のように反転外部発話音声信号がさらに加算された生成音声信号を通信対象装置へ送信することによって、制御装置１００は、通信対象装置のユーザが発した発話音声が、通信対象装置のユーザに聴こえてしまうことをさらに防止することができる。
【００４４】
制御装置１００は、例えば上記のように反転コンテンツ音声信号が加算された生成音声信号を通信対象装置へ送信することによって、発話音声信号を通信対象装置へ送信させ、再生されているコンテンツデータに対応するコンテンツ音声信号を通信対象装置へ送信させない。したがって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【００４５】
また、制御装置１００は、通信対象装置との間において撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合には、例えば、自装置が備える撮像デバイス（後述する撮像部）や、外部撮像デバイス（後述する撮像装置）が生成した撮像画像を画像処理することによって、ユーザのプライバシーの侵害の防止を図る。より具体的には、制御装置１００は、再生しているコンテンツデータが示す画像が撮像画像に含まれるか否かを判定し、含まれている場合には、撮像画像に含まれているコンテンツデータが示す画像部分（例えば、窓などに映りこんだ画像）を画像処理する。上記画像処理としては、例えば、上記画像部分を削除する処理や、モザイク処理などが挙げられるが、上記画像処理は上記に限られない。例えば、制御装置１００は、撮像画像に含まれているコンテンツデータが示す画像部分を隠蔽可能な任意の処理を、上記画像処理として行うことができる。
【００４６】
また、制御装置１００は、例えば、制御装置１００における再生状態がコンテンツ非共有状態であることを、ユーザに視覚的に通知する。図２は、本発明の実施形態に係る制御装置１００が、コンテンツ非共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。ここで、図２は、制御装置１００と２つの通信対象装置とが、撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合における表示用画像の一例を示している。また、制御装置１００は、例えば、自装置が備える表示デバイス（後述する表示部）の表示画面に表示用画像を表示させてもよいし、外部表示デバイス（後述する表示装置）の表示画面に表示用画像を表示させてもよい（以下、同様とする。）。
【００４７】
図２に示すように、制御装置１００は、例えば、コンテンツデータが示す画像（図２のＤ）が表示される領域Ａと、制御装置１００が受信した、通信対象装置から送信された撮像画像（図２のＥ、Ｆ）が表示される領域Ｂとが分離された表示用画像を、表示画面に表示させる。図２に示すように、領域Ａと領域Ｂとが分けられた表示用画像が表示画面に表示されることによって、ユーザは、コンテンツ非共有状態であることを視覚的に把握することが可能となる。なお、制御装置１００がコンテンツ非共有状態において表示画面に表示させる表示用画像が、図２に示す例に限られないことは、言うまでもない。
【００４８】
ここで、制御装置１００は、例えば、コンテンツデータが示す画像（例えば図２のＤ）、および撮像画像（例えば図２のＥ、Ｆ）に基づいて、例えば、ＰＩＰ（Picture In Picture）やＰＯＰ（Picture On Picture）などの手法を用いて表示用画像を生成して表示させる。なお、本発明の実施形態に係る制御装置１００における表示用画像の生成方法は、上記に限られない。
【００４９】
（３）再生されているコンテンツデータが示すコンテンツを共有する場合における処理（コンテンツ共有処理。図１に示すＣの状態における処理）
再生されているコンテンツデータが示すコンテンツを共有する場合には、制御装置１００は、音声入力デバイスや外部音声入力デバイスが生成した生成音声信号を、通信対象装置へ送信する。
【００５０】
ここで、コンテンツ共有状態（図１に示すＣ）は、ユーザと通信対象装置のユーザとの間において、同一のコンテンツを共有している状態であるので、制御装置１００が再生しているコンテンツデータが示す音声を示すコンテンツ音声信号が、通信対象装置へ送信されたとしても、プライバシーの侵害となる恐れはない。よって、コンテンツ共有状態では、制御装置１００は、上記（２）に示す処理（コンテンツ非共有処理）のように、反転コンテンツ音声信号を生成音声信号に加算する処理は行わない。なお、制御装置１００は、上記（１）の場合と同様に、例えば、外部発話音声信号の位相を反転させた反転外部発話音声信号をさらに生成音声信号に加算し、反転外部発話音声信号がさらに加算された生成音声信号を、通信対象装置へ送信してもよい。
【００５１】
また、制御装置１００は、例えば、制御装置１００における再生状態がコンテンツ共有状態であることを、ユーザに視覚的に通知する。図３は、本発明の実施形態に係る制御装置１００が、コンテンツ共有状態において表示画面に表示させる表示用画像の一例を示す説明図である。ここで、図３は、制御装置１００と２つの通信対象装置とが、撮像画像および音声による通話（例えばビデオ通話）に関する通信を行っている場合における表示用画像の一例を示している。
【００５２】
図３に示すように、制御装置１００は、例えば、コンテンツデータが示す画像（図３のＤ）と、制御装置１００が受信した、通信対象装置から送信された撮像画像（図３のＥ、Ｆ）とが仮想空間内に配置された表示用画像を、表示画面に表示させる。図３に示すように、仮想空間内にコンテンツデータが示す画像（図３のＤ）および撮像画像（図３のＥ、Ｆ）が配置された表示用画像が表示画面に表示されることによって、ユーザは、コンテンツ共有状態であることを視覚的に把握することが可能となる。なお、制御装置１００がコンテンツ共有状態において表示画面に表示させる表示用画像が、図３に示す例に限られないことは、言うまでもない。
【００５３】
また、制御装置１００は、仮想空間における、コンテンツデータが示す画像（図３のＤ）、撮像画像（図３のＥ、Ｆ）それぞれの位置に基づいて、自装置が備える音声入力デバイスや外部音声入力デバイスから出力させるコンテンツ音声信号および外部発話音声信号の音像を、それぞれ定位させる。ここで、制御装置１００は、例えば、予め仮想空間におけるコンテンツデータが示す画像の表示位置を規定し、予め規定された当該表示位置に対して予め設定されている音声定位パラメータを用いて、例えば、コンテンツ音声信号が示す音声に残響音などの音響効果を付加する。また、制御装置１００は、外部発話音声信号に対しても、上記コンテンツ音声信号と同様に、例えば、予め規定された表示位置それぞれに対して予め設定されている音声定位パラメータを用いて、外部発話音声信号が示す発話音声に残響音などの音響効果を付加する。
【００５４】
上記のように、自装置が備える音声入力デバイスや外部音声入力デバイスから出力させるコンテンツ音声信号および外部発話音声信号の音像をそれぞれ定位させることによって、制御装置１００は、ユーザに対して、通信対象装置のユーザとの間におけるコンテンツのより高い共有感を与えることが可能となる。なお、本発明の実施形態に係る制御装置１００における音像定位の方法は、上記に限られず、コンテンツ音声信号および外部発話音声信号の音像をそれぞれ定位させるための任意の方法を用いることができる。
【００５５】
また、通信対象装置が、例えば本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行う構成である場合（すなわち、通信対象装置が、他の制御装置１００である場合）には、通信対象装置は、例えば制御装置１００と同様に、例えば図３に示すような表示用画像を表示画面に表示させ、音像を定位させる。よって、上記の場合には、制御装置１００のユーザおよび通信対象装置のユーザ双方が、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚を得ることとなるので、通話に関する通信を行っている通信システム全体におけるユーザの利便性の向上が図られる。
【００５６】
上述したように、制御装置１００は、コンテンツデータの再生を行わない場合には、例えば上記（１）に示す処理を行う。また、制御装置１００は、コンテンツデータの再生を行っている場合、または、これからコンテンツデータの再生を行う場合には、コンテンツデータが示すコンテンツを通信対象装置との間で共有するか否かの判定結果に基づいて、例えば上記（２）に示す処理（コンテンツ非共有処理）、または上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。
【００５７】
ここで、コンテンツデータが示すコンテンツを通信対象装置との間で共有すると判定された場合（すなわち、コンテンツ共有状態の場合）には、制御装置１００は、通話に係る発話音声信号とコンテンツ音声信号とを通信対象装置へ送信させる。よって、たとえ制御装置１００と通信対象装置とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができるので、制御装置１００は、ユーザの利便性の向上を図ることができる。
【００５８】
また、コンテンツデータが示すコンテンツを通信対象装置との間で共有すると判定されない場合（すなわち、コンテンツ非共有状態の場合）には、制御装置１００は、発話音声信号を通信対象装置へ送信させ、コンテンツ音声信号を通信対象装置へ送信させない。よって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【００５９】
したがって、制御装置１００は、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【００６０】
［コンテンツ共有アプローチに係る処理の具体例］
次に、上述した本発明の実施形態に係るコンテンツ共有アプローチを実現するための処理の一例について説明する。図４は、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチに係る処理の一例を示す流れ図である。
【００６１】
制御装置１００は、通信対象装置との間における通話に関する通信が開始されたか否かを判定する（Ｓ１００）。ステップＳ１００において通信対象装置との間で通話に関する通信が開始されたと判定されない場合には、制御装置１００は、通話に関する通信が開始されたと判定されるまで処理を進めない。
【００６２】
また、ステップＳ１００において通信対象装置との間で通話に関する通信が開始されたと判定された場合には、制御装置１００は、通信対象装置との間でコンテンツ共有を行うか否かを判定する（Ｓ１０２）。
【００６３】
ここで、制御装置１００は、例えば、コンテンツ共有のオン／オフを規定するハードウェアスイッチや、リモートコントローラなどの外部操作装置から送信される外部操作信号に基づいてコンテンツ共有のオン／オフを規定するソフトウェアスイッチの状態に基づいて、ステップＳ１０２の判定を行う。なお、本発明の実施形態に係る制御装置１００におけるステップＳ１０２の処理は、上記に限られない。
【００６４】
例えば、制御装置１００は、撮像画像に基づいてユーザの所定の動作を検出し、検出結果に基づいて通信対象装置との間でコンテンツ共有を行うかを判定してもよい。上記の場合、制御装置１００は、例えば、自装置が備える撮像デバイスや外部撮像デバイスが生成した撮像画像を画像処理することによって、撮像画像に含まれるユーザの所定の動作（例えば、コンテンツ共有のオン／オフを示す手の形状や周期動作など）を検出する。そして、制御装置１００は、例えば、コンテンツ共有のオン動作が検出された場合には、通信対象装置との間でコンテンツ共有を行うと判定する。ここで、制御装置１００は、コンテンツ共有のオン動作が検出された場合には、例えばコンテンツ共有のオフ動作が検出されるまでコンテンツ共有を行うと判定するが、制御装置１００における処理は、上記に限られない。例えば、制御装置１００は、後述するステップＳ１１４においてエラーを通知した場合には、再度コンテンツ共有のオン動作が検出されるまで、コンテンツ共有を行うと判定しなくてもよい。
【００６５】
［１］コンテンツ共有を行うと判定されない場合
ステップＳ１０２において通信対象装置との間でコンテンツ共有を行うと判定されない場合には、制御装置１００は、コンテンツデータの再生を行っているか否かを判定する（Ｓ１０４）。
【００６６】
ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合には、制御装置１００は、後述するステップＳ１０８の処理を行う。ここで、ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合には、制御装置１００は、通信対象装置との間において、通話に関する通信に係る処理を行う。つまり、ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合における制御装置１００の処理は、上記（１）に示す処理に該当する。
【００６７】
また、ステップＳ１０４においてコンテンツデータの再生を行っていると判定された場合には、制御装置１００は、コンテンツ非共有処理を行う（Ｓ１０６）。ここで、制御装置１００は、ステップＳ１０６において、上記（２）に示す処理を行う。つまり、ステップＳ１０６の処理が行われることによって、例えば、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置のユーザに聴こえてしまうことを防止することができるので、制御装置１００は、ユーザのプライバシーの侵害を防止することができる。
【００６８】
ステップＳ１０４においてコンテンツデータの再生を行っていると判定されない場合、または、ステップＳ１０６の処理を行っている場合には、制御装置１００は、通信対象装置との間における通話に関する通信を終了するか否かを判定する（Ｓ１０８）。ここで、制御装置１００は、例えば、リモートコントローラなどの外部操作装置から送信される外部操作信号や、自装置が備える操作部（後述する）から伝達されるユーザ操作に応じた操作信号が通話に関する通信の終了を示す場合に、通話に関する通信を終了すると判定する。なお、ステップＳ１０８の処理は、上記に限られない。例えば、制御装置１００は、撮像画像を画像処理することによって、撮像画像に含まれるユーザの所定の動作（例えば、通話に関する通信の終了を示す手の形状や周期動作など）が検出された場合に、通話に関する通信を終了すると判定することもできる。
【００６９】
ステップＳ１０８において通信対象装置との間における通話に関する通信を終了すると判定されない場合には、制御装置１００は、ステップＳ１０２からの処理を繰り返す。
【００７０】
また、ステップＳ１０８において通信対象装置との間における通話に関する通信を終了すると判定された場合には、制御装置１００は、例えばセッションの切断を行うことなどにより通信対象装置との間における通話に関する通信を終了し（Ｓ１１０）、コンテンツ共有アプローチに係る処理を終了する。なお、図４に示すコンテンツ共有アプローチに係る処理は、一度終了すれば再度行われないという類の処理ではなく、制御装置１００は、一旦処理が終了しても図４に示すコンテンツ共有アプローチに係る処理を繰り返すことが可能である。
【００７１】
［２］コンテンツ共有を行うと判定された場合
ステップＳ１０２において通信対象装置との間でコンテンツ共有を行うと判定された場合には、制御装置１００は、通信対象装置との間でコンテンツ共有が可能か否かを判定する（Ｓ１１２）。ここで、制御装置１００は、例えば、通信対象装置と通信を行い、通信対象装置においてもコンテンツ共有を行うと判定された場合に、通信対象装置との間でコンテンツ共有が可能であると判定するが、ステップＳ１１２の処理は、上記に限られない。
【００７２】
例えば、制御装置１００は、コンテンツデータのライセンス管理などを行うコンテンツ管理サーバと通信を行い、ユーザが共有を所望するコンテンツに対応するコンテンツデータがコンテンツ管理サーバにおいて認証された場合（コンテンツデータの共有が許可された場合）に、通信対象装置との間でコンテンツ共有が可能であると判定してもよい。つまり、本発明の実施形態に係るコンテンツ管理サーバは、制御装置１００と通信対象装置との間におけるコンテンツデータの共有を管理する役目を果たす。
【００７３】
上記のように、コンテンツ管理サーバにおいて認証された場合に通信対象装置との間でコンテンツの共有が行われることによって、たとえユーザおよび通信対象装置のユーザの双方がコンテンツの共有を所望したとしても、制御装置１００と通信対象装置との間では、コンテンツの共有がされない。したがって、上記のように、コンテンツ管理サーバにおいて認証された場合に通信対象装置との間でコンテンツの共有が行われることによって、共有の対象となるコンテンツデータのライセンス管理が実現される。
【００７４】
ステップＳ１１２において通信対象装置との間でコンテンツ共有が可能であると判定されない場合には、制御装置１００は、ユーザにエラーを通知する（Ｓ１１４）。そして、制御装置１００は、ステップＳ１０４からの処理を行う。ここで、制御装置１００は、例えばエラー表示画面を表示画面に表示させることによって、視覚的にユーザにエラーを通知するが、ステップＳ１１４の処理は、上記に限られない。例えば、制御装置１００は、音声出力デバイスや音声出力装置からエラーを示す音声を出力させることによって、聴覚的にユーザにエラーを通知することもできる。
【００７５】
また、ステップＳ１１２において通信対象装置との間でコンテンツ共有が可能であると判定された場合には、制御装置１００は、コンテンツ共有処理を行う（Ｓ１１６）。ここで、制御装置１００は、ステップＳ１１６において、上記（３）に示す処理を行う。つまり、ステップＳ１１６の処理が行われることによって、たとえ制御装置１００と通信対象装置とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることが可能となる。よって、制御装置１００は、ユーザの利便性の向上を図ることができる。
【００７６】
ステップＳ１１６の処理が行われると、制御装置１００は、コンテンツ共有を終了するか否かを判定する（Ｓ１１８）。ここで、制御装置１００は、例えばステップＳ１０２と同様に、ハードウェアスイッチやソフトウェアスイッチの状態、撮像画像から検出されたユーザの所定の動作などに基づいて、ステップＳ１１８の判定を行う。
【００７７】
ステップＳ１１８においてコンテンツ共有を終了すると判定されない場合には、制御装置１００は、ステップＳ１１６からの処理を繰り返す。また、ステップＳ１１８においてコンテンツ共有を終了すると判定された場合には、制御装置１００は、ステップＳ１０４からの処理を繰り返す。
【００７８】
制御装置１００は、例えば図４に示す処理を行うことによって、上記（１）に示す処理〜（３）に示す処理を選択的に行い、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現する。したがって、制御装置１００は、例えば図４に示す処理を行うことによって、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。なお、本発明の実施形態に係る制御装置１００におけるコンテンツ共有アプローチに係る処理が、図４に示す処理に限られないことは、言うまでもない。
【００７９】
（本発明の実施形態に係る制御装置）
次に、上述した本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行うことが可能な、本発明の実施形態に係る制御装置１００の構成の一例について説明する。
【００８０】
［第１の実施形態］
図５は、本発明の第１の実施形態に係る制御装置１００の構成の一例を示すブロック図である。
【００８１】
ここで、図５では、表示画面への画像（静止画像または動画像）の表示、表示画面の表示方向を撮像することによる撮像画像の生成、および音声による通話を実現するための音声入力・音声出力を行う表示システム２００と、ネットワーク５００で接続された通信対象装置３００、…およびコンテンツ管理サーバ４００とを併せて示している。ここで、上記「ネットワーク５００で接続されている」とは、一の装置と他の装置とがネットワーク５００を介して通信を行っていること、または通信可能な状態にあることをいう。また、ネットワーク５００としては、例えば、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）などの有線ネットワーク、基地局を介した無線ＷＡＮ（ＷＷＡＮ；Wireless Wide Area Network）などの無線ネットワーク、あるいは、ＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）などの通信プロトコルを用いたインターネットなどが挙げられる。なお、制御装置１００、通信対象装置３００、…、およびコンテンツ管理サーバ４００は、ネットワーク５００を介して通信を行うことに限られず、例えば、直接的に通信を行ってもよい。また、通信対象装置３００、…それぞれは、制御装置１００と同様の機能を有する装置（すなわち、他の制御装置１００）であってもよい。以下では、制御装置１００と通話に関する通信を行う１、または２以上の通信対象装置を、総称して「通信対象装置３００」と示す場合がある。
【００８２】
例えば図５に示す構成により、制御装置１００と表示システム２００とを用いるユーザは、例えばビデオ通話のような撮像画像および音声による通話を、通信対象装置３００のユーザとの間で行うことができる。なお、図５の表示システム２００を、例えば、マイクやスピーカなどから構成される、音声による通話を実現するための音声入力・音声出力を行う音声入出力システム（図示せず）に置き換えてもよい。上記の場合には、制御装置１００と音声入出力システム（図示せず）とを用いるユーザは、音声による通話を通信対象装置３００のユーザとの間で行うこととなる。
【００８３】
また、図５では、表示システム２００が、表示を行う表示装置６００と、撮像を行う撮像装置７００と、音声を出力する音声出力装置８００と、音声を入力する音声入力装置９００とからなる例を示しているが、本発明の実施形態に係る表示システム２００の構成は、上記に限られない。例えば、表示システム２００は、表示装置６００、撮像装置７００、音声出力装置８００が一体となった装置（例えば撮像機能および音声出力機能を有する表示装置）であってもよい。また、表示システム２００は、例えば、表示機能、撮像機能、音声出力機能、および音声入力機能を有する、１つの装置であってもよい。
【００８４】
ここで、表示システム２００が表示画面の表示方向を撮像した撮像画像を生成することによって、当該表示画面を見ているユーザを撮像した撮像画像が得られる。したがって、表示システム２００が生成した撮像画像を処理することによって、制御装置１００は、例えば、図４に示すステップＳ１０２、Ｓ１０８、Ｓ１１８の処理において撮像画像に基づきユーザの所定の動作を検出する場合における画像処理などをより容易に行うことが可能となる。
【００８５】
図５を参照すると、制御装置１００は、記憶部１０２と、通信部１０４と、入力部１０６と、制御部１０８とを備える。
【００８６】
また、制御装置１００は、例えば、ＲＯＭ（Read Only Memory；図示せず）や、ＲＡＭ（Random Access Memory；図示せず）、ユーザが操作可能な操作部（図示せず）などを備えてもよい。制御装置１００は、例えば、データの伝送路としてのバス（bus）により各構成要素間を接続する。
【００８７】
ここで、ＲＯＭ（図示せず）は、例えば制御部１０８が使用するプログラムや演算パラメータなどの制御用データを記憶する。ＲＡＭ（図示せず）は、例えば制御部１０８により実行されるプログラムなどを一時的に記憶する。また、操作部（図示せず）としては、例えば、ボタンや、方向キー、あるいは、これらの組み合わせなどが挙げられる。なお、制御装置１００は、制御装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）と接続されてもよい。
【００８８】
〔制御装置１００のハードウェア構成例〕
図６は、本発明の実施形態に係る制御装置１００のハードウェア構成の一例を示す説明図である。図６を参照すると、制御装置１００は、例えば、ＭＰＵ１５０と、ＲＯＭ１５２と、ＲＡＭ１５４と、記録媒体１５６と、入出力インタフェース１５８と、操作入力デバイス１６０と、表示デバイス１６２と、通信インタフェース１６４とを備える。また、制御装置１００は、例えば、データの伝送路としてのバス１６６で各構成要素間を接続する。
【００８９】
ＭＰＵ１５０は、ＭＰＵ（Micro Processing Unit）や、エンコーダやデコーダなどの画像処理を実現するための回路、適応フィルタや加算器など音声処理を実現するための回路など、各種機能を実現するための複数の回路が集積された集積回路などで構成され、制御装置１００全体を制御する制御部（図示せず）として機能する。また、ＭＰＵ１５０は、制御装置１００において、再生処理部１１０、判定部１１２、および共有処理部１１４としての役目を果たす。
【００９０】
ＲＯＭ１５２は、ＭＰＵ１５０が使用するプログラムや演算パラメータなどの制御用データなどを記憶する。ＲＡＭ１５４は、例えば、ＭＰＵ１５０により実行されるプログラムなどを一時的に記憶する。
【００９１】
記録媒体１５６は、記憶部１０２として機能し、例えば、コンテンツデータや、音声定位パラメータが記録された音声定位データ、アプリケーションなどを記憶する。ここで、記録媒体１５６としては、例えば、ハードディスクなどの磁気記録媒体や、ＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory）、フラッシュメモリ（flash memory）、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリ（nonvolatile memory）が挙げられる。また、制御装置１００は、制御装置１００から着脱可能な記録媒体１５６を備えることもできる。
【００９２】
入出力インタフェース１５８は、例えば、操作入力デバイス１６０や、表示デバイス１６２を接続する。また、入出力インタフェース１５８は、入力部１０６としての役目を果たすこともできる。操作入力デバイス１６０は、操作部（図示せず）として機能し、また、表示デバイス１６２は、表示部（後述する）として機能する。ここで、入出力インタフェース１５８としては、例えば、音声入力端子や、音声出力端子、ＵＳＢ（Universal Serial Bus）端子、ＤＶＩ（Digital Visual Interface）端子、ＨＤＭＩ（High-Definition Multimedia Interface）端子、各種処理回路などが挙げられる。また、操作入力デバイス１６０は、例えば、制御装置１００上に備えられ、制御装置１００の内部で入出力インタフェース１５８と接続される。操作入力デバイス１６０としては、例えば、ボタン、方向キー、ジョグダイヤルなどの回転型セレクター、あるいは、これらの組み合わせなどが挙げられる。また、表示デバイス１６２は、例えば、制御装置１００上に備えられ、制御装置１００の内部で入出力インタフェース１５８と接続される。表示デバイス１６２としては、例えば、液晶ディスプレイ（Liquid Crystal Display；ＬＣＤ）や有機ＥＬディスプレイ（organic ElectroLuminescence display。または、ＯＬＥＤディスプレイ（Organic Light Emitting Diode display）ともよばれる。）などが挙げられる。なお、入出力インタフェース１５８が、制御装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）や、表示デバイス（例えば、表示装置６００などの外部表示デバイス）、撮像デバイス（例えば、撮像装置７００など）などの外部デバイスと接続することもできることは、言うまでもない。また、表示デバイス１６２は、例えばタッチスクリーンなど、表示とユーザ操作とが可能なデバイスであってもよい。
【００９３】
通信インタフェース１６４は、制御装置１００が備える通信手段であり、ネットワーク５００を介して（あるいは、直接的に）、例えば、表示システム２００や、通信対象装置３００、コンテンツ管理サーバ４００、コンテンツデータを記憶するサーバ（図示せず）などの外部装置と無線／有線で通信を行うための通信部１０４として機能する。ここで、通信インタフェース１６４としては、例えば、通信アンテナおよびＲＦ回路（無線通信）や、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）、ＩＥＥＥ８０２．１１ｂポートおよび送受信回路（無線通信）、あるいはＬＡＮ端子および送受信回路（有線通信）などが挙げられる。
【００９４】
制御装置１００は、例えば図６に示す構成によって、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を行う。なお、本発明の実施形態に係る制御装置１００のハードウェア構成は、図６に示す構成に限られない。
【００９５】
例えば、制御装置１００は、例えば、撮像部（後述する）の役目を果たす、レンズ／撮像素子と信号処理回路とから構成される撮像デバイスを備えていてもよい。上記の場合には、制御装置１００は、自装置が生成した撮像画像を処理し、また、通信対象装置３００との間において撮像画像および音声による通話（例えばビデオ通話）に関する通信を行うことができる。ここで、レンズ／撮像素子は、例えば、光学系のレンズと、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子を複数用いたイメージセンサとで構成される。信号処理回路は、例えば、ＡＧＣ（Automatic Gain Control）回路やＡＤＣ（Analog to Digital Converter）を備え、撮像素子により生成されたアナログ信号をデジタル信号（画像データ）に変換し、各種信号処理を行う。信号処理回路が行う信号処理としては、例えば、Ｗｈｉｔｅ Ｂａｌａｎｃｅ補正処理、補間処理、色調補正処理、ガンマ補正処理、ＹＣｂＣｒ変換処理、エッジ強調処理、およびコーディング処理などが挙げられる。
【００９６】
また、制御装置１００は、例えば、音声入力部（後述する）の役目を果たす、マイクロフォンや増幅器（アンプ）を備えてもよい。上記の場合には、制御装置１００は、例えば、自装置において生成した生成音声信号を用いて、通信対象装置３００との間で通話に関する通信を行うことができる。
【００９７】
また、制御装置１００は、例えば、音声出力部（後述する）の役目を果たす、ＤＳＰ（Digital Signal Processor）と、増幅器（アンプ）やスピーカなどから構成される音声出力デバイスとを備えてもよい。上記の場合には、制御装置１００は、例えば、再生しているコンテンツデータが示す音声や、通信対象装置３００との間における通話に関する発話音声などの、様々な音声の出力を行うことが可能となる。
【００９８】
さらに、制御装置１００は、例えば、図６に示す操作デバイス１６０や表示デバイス１６２を備えない構成であってもよい。
【００９９】
再度図５を参照して、本発明の第１の実施形態に係る制御装置１００の構成について説明する。記憶部１０２は、制御装置１００が備える記憶手段である。ここで、記憶部１０２としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。
【０１００】
また、記憶部１０２は、例えば、コンテンツデータや、音声定位データ、アプリケーションなどを記憶する。図５では、コンテンツデータ１４０、…が記憶部１０２に記憶されている例を示している。
【０１０１】
通信部１０４は、制御装置１００が備える通信手段であり、ネットワーク５００を介して（あるいは、直接的に）、表示システム２００や通信対象装置３００、コンテンツ管理サーバ４００などの外部装置と無線／有線で通信を行う。制御装置１００は、通信部１０４を備えることによって、１または２以上の通信対象装置３００との間で通信を行い、通話に関する通信（音声による通話、または、撮像画像および音声による通話に関する通信）を行うことができる。また、通信部１０４は、例えば、制御部１０８により通信が制御される。
【０１０２】
ここで、通信部１０４としては、例えば、通信アンテナおよびＲＦ回路や、ＬＡＮ端子および送受信回路などが挙げられるが、通信部１０４は、上記に限られない。例えば、通信部１０４は、ネットワーク５００を介して外部装置と通信可能な任意の構成をとることができる。
【０１０３】
入力部１０６は、例えば、撮像装置７００が撮像により生成した撮像画像や、音声入力装置９００が生成した音声信号（生成音声信号）を受信する。そして、入力部１０６は、受信した（入力された）撮像画像や音声信号を、制御部１０８へ伝達する。ここで、入力部１０６としては、例えば、音声入力端子や、音声出力端子、ＵＳＢ端子、ＤＶＩ端子、ＨＤＭＩ端子、各種処理回路などが挙げられるが、入力部１０６は、上記に限られない。例えば、入力部１０６は、外部装置から撮像画像や音声信号を有線または無線で受信することが可能な任意の構成をとることができる。
【０１０４】
制御部１０８は、例えば、ＭＰＵや、エンコーダやデコーダなどの画像処理を実現するための回路、適応フィルタや加算器など音声処理を実現するための回路などで構成され、制御装置１００全体を制御する役目を果たす。また、制御部１０８は、再生処理部１１０と、判定部１１２と、共有処理部１１４とを備え、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を主導的に行う役目を果たす。また、制御部１０８は、通信対象装置３００などの外部装置との通信を制御する通信制御部（図示せず）を備えていてもよい。
【０１０５】
再生処理部１１０は、例えば、記憶部１０２に記憶しているコンテンツデータや、通信部１０４が受信した、通信対象装置３００やサーバ（図示せず）などの外部装置から送信されたコンテンツデータを再生する。
【０１０６】
判定部１１２は、判定部１１２は、制御装置１００における再生状態を判定し、判定結果を共有処理部１１４へ伝達する役目を果たす。
【０１０７】
より具体的には、例えば、通信対象装置３００との間において通話に関する通信が行われているときに再生処理部１１０においてコンテンツデータの再生が行わない場合には、判定部１１２は、上記（２）に示す処理（コンテンツ非共有処理）および上記（３）に示す処理（コンテンツ共有処理）を行わない旨の判定結果を共有処理部１１４へ伝達する。
【０１０８】
また、例えば、通信対象装置３００との間において通話に関する通信が行われているときにおいて、再生処理部１１０においてコンテンツデータの再生が行われている場合、または、再生処理部１１０がこれからコンテンツデータの再生を行う場合には、判定部１１２は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かを判定する。ここで、判定部１１２は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かを判定する場合、例えば、通信部１０４を介してコンテンツ管理サーバ４００と通信を行い、コンテンツ管理サーバ４００からコンテンツデータの共有が許可された場合に、共有すると判定する。
【０１０９】
そして、判定部１１２は、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有するか否かの判定結果に応じて、上記（２）に示す処理（コンテンツ非共有処理）または、上記（３）に示す処理（コンテンツ共有処理）を選択的に行わせるための判定結果を、共有処理部１１４へ伝達する。
【０１１０】
ここで、例えば図４に示すコンテンツ共有アプローチに係る処理における判定部１１２の処理としては、例えば、ステップＳ１００、Ｓ１０２、Ｓ１０４、Ｓ１０８、Ｓ１１２、Ｓ１１８に示す処理が挙げられる。なお、図４に示すコンテンツ共有アプローチに係る処理における判定部１１２の処理は、上記に限られない。例えば、本発明の実施形態に係る制御装置１００では、通信制御部（図示せず）が、例えば図４に示すコンテンツ共有アプローチに係る処理におけるステップＳ１００、Ｓ１０８の処理を行ってもよい。
【０１１１】
共有処理部１１４は、判定部１１２から伝達される判定結果に基づいて、上記（２）に示す処理（コンテンツ非共有処理）または、上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。より具体的には、共有処理部１１４は、判定部１１２においてコンテンツデータが示す音声を通信対象装置３００との間で共有すると判定されない場合には、上記（２）に示す処理（コンテンツ非共有処理）を行う。また、共有処理部１１４は、判定部１１２においてコンテンツデータが示す音声を通信対象装置３００との間で共有すると判定された場合には、上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。
【０１１２】
ここで、例えば図４に示すコンテンツ共有アプローチに係る処理における共有処理部１１４の処理としては、例えば、ステップＳ１０６、Ｓ１１４、Ｓ１１６に示す処理が挙げられる。
【０１１３】
制御部１０８は、例えば再生処理部１１０、判定部１１２、および共有処理部１１４を備えることによって、コンテンツ共有アプローチに係る処理を主導的に行うことができる。なお、制御部１０８の構成が、図５に示す構成に限られないことはいうまでもない。
【０１１４】
第１の実施形態に係る制御装置１００は、例えば図５に示す構成によって、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現することができる。したがって、制御装置１００は、例えば図５に示す構成によって、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。なお、本発明の第１の実施形態に係る制御装置１００の構成が、図５に示す構成に限られないことは、言うまでもない。
【０１１５】
［第２の実施形態］
図７は、本発明の第２の実施形態に係る制御装置１００の構成の一例を示すブロック図である。ここで、図７では、図５と同様に、ネットワーク５００で接続された通信対象装置３００、…、およびコンテンツ管理サーバ４００を併せて示している。
【０１１６】
図７に示す第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と基本的に同様の構成を有するが、図５に示す第１の実施形態に係る制御装置１００と比較すると、第２の実施形態に係る制御装置１００は、入力部１０６を備えず、また、音声入力部１２０と、撮像部１２２と、表示部１２４と、音声出力部１２６とをさらに備えている。
【０１１７】
音声入力部１２０は、制御装置１００が備える音声信号生成手段である。音声入力部１２０としては、例えばマイクロフォンが挙げられる。なお、音声入力部１２０は、制御装置１００から着脱可能であってもよい。
【０１１８】
撮像部１２２は、制御装置１００が備える撮像手段であり、表示部１２４が表示する表示画面の表示方向を撮像して、撮像画像を生成する。なお、第２の実施形態に係る制御装置１００が、撮像画像および音声による通話に関する通信を行う機能を有さない場合には、制御装置１００は、撮像部１２２を備えない構成であってもよい。ここで、撮像部１２２としては、例えば、レンズ／撮像素子と信号処理回路とから構成される撮像デバイスが挙げられる。
【０１１９】
表示部１２４は、制御装置１００が備える表示手段であり、表示画面に様々な情報や画像を表示する。表示部１２４の表示画面に表示される画面としては、例えば、コンテンツデータが示す画像を表示するコンテンツ表示画面や、通話に係る撮像画像が表示される画面、所望する動作を制御装置１００に対して行わせるための操作画面などが挙げられる。なお、上記通話に係る撮像画像が表示される画面において、撮像画像は、コンテンツが示す画像と並列に表示されてもよく、または、コンテンツが示す画像に重畳して表示されてもよい。また、表示部１２４としては、例えば、液晶ディスプレイや有機ＥＬディスプレイなどが挙げられる。
【０１２０】
音声出力部１２６は、制御装置１００が備える音声出力手段であり、例えば再生されているコンテンツデータが示す音声や、通話に係る発話音声、制御装置１００におけるシステム音声など、様々な音声を出力する。ここで、音声出力部１２６としては、例えば、ＤＳＰと、増幅器（アンプ）やスピーカなどから構成される音声出力デバイスとが挙げられる。
【０１２１】
第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と基本的に同様の構成を有する。よって、第２の実施形態に係る制御装置１００は、図７に示す構成によって、第１の実施形態に係る制御装置１００と同様に、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現することができる。したがって、制御装置１００は、例えば図７に示す構成によって、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。なお、本発明の第２の実施形態に係る制御装置１００の構成は、図７に示す構成に限られない。例えば第２の実施形態に係る制御装置１００は、図５に示す第１の実施形態に係る制御装置１００と同様に、入力部１０６を備えていてもよい。
【０１２２】
以上のように、本発明の実施形態に係る制御装置１００は、コンテンツデータが示す音声を通信対象装置３００との間で共有するか否かの判定結果に基づいて、上記（２）に示す処理（コンテンツ非共有処理）、または上記（３）に示す処理（コンテンツ共有処理）を選択的に行う。ここで、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有すると判定された場合（すなわち、コンテンツ共有状態の場合）には、制御装置１００は、通話に係る発話音声信号とコンテンツ音声信号とを通信対象装置３００へ送信させる。よって、たとえ制御装置１００と通信対象装置３００とが遠隔地にある場合でも、あたかも同一の場所でコンテンツを楽しんでいるかのような感覚をユーザに与えることができるので、制御装置１００は、ユーザの利便性の向上を図ることができる。また、コンテンツデータが示すコンテンツを通信対象装置３００との間で共有すると判定されない場合（すなわち、コンテンツ非共有状態の場合）には、制御装置１００は、発話音声信号を通信対象装置３００へ送信させ、コンテンツ音声信号を通信対象装置３００へ送信させない。よって、制御装置１００は、制御装置１００において再生されているコンテンツデータが示す音声が、通信対象装置３００のユーザに聴こえてしまうことを防止することができるので、ユーザのプライバシーの侵害を防止することができる。
【０１２３】
したがって、制御装置１００は、通信対象装置３００との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置３００との間で選択的に共有させることができる。
【０１２４】
以上、本発明の実施形態として制御装置１００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、ゲーム機、セットトップボックスなど、様々な機器に適用することができる。
【０１２５】
また、本発明の実施形態として表示システム２００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置など、様々な機器に適用することができる。なお、本発明の実施形態に係る表示システム２００は、表示を行う機器と、撮像を行う機器と、音声信号を生成する機器と、音声を出力する機器との組合せであってもよい。
【０１２６】
また、本発明の実施形態として、通信対象装置３００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、ゲーム機、セットトップボックスなど、様々な機器に適用することができる。
【０１２７】
また、本発明の実施形態として、コンテンツ管理サーバ４００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータなど、様々な機器に適用することができる。
【０１２８】
（本発明の実施形態に係るプログラム）
コンピュータを、本発明の実施形態に係る制御装置として機能させるためのプログラム（例えば図４に示すような、本発明の実施形態に係るコンテンツ共有アプローチに係る処理を実現するためのプログラム）によって、通信対象装置との間で通話に関する通信を行う場合において、ユーザのプライバシーの侵害を防止しつつ、コンテンツデータが示すコンテンツを通信対象装置との間で選択的に共有させることができる。
【０１２９】
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【０１３０】
例えば、本発明の実施形態に係る制御装置１００は、図５、図７に示す再生処理部１１０、判定部１１２、および共有処理部１１４を個別に備える（例えば、それぞれを個別の処理回路で実現する）ことができる。
【０１３１】
また、上記では、コンピュータを、本発明の実施形態に係る制御装置として機能させるためのプログラム（コンピュータプログラム）が提供されることを示したが、本発明の実施形態は、さらに、上記プログラムを記憶させた記憶媒体も併せて提供することができる。
【０１３２】
上述した構成は、本発明の実施形態の一例を示すものであり、当然に、本発明の技術的範囲に属するものである。
【符号の説明】
【０１３３】
１００ 制御装置
１０２ 記憶部
１０４ 通信部
１０６ 入力部
１０８ 制御部
１１０ 再生処理部
１１２ 判定部
１１４ 共有処理部
１２０ 音声入力部
１２２ 撮像部
１２４ 表示部
１２６ 音声出力部
２００ 表示システム
３００ 通信対象装置
４００ コンテンツ管理サーバ
５００ ネットワーク
６００ 表示装置
７００ 撮像装置
８００ 音声出力装置
９００ 音声入力装置
【特許請求の範囲】
【請求項１】
１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行う通信部と、
音声、または、音声および画像を示すコンテンツデータの再生を行う再生処理部と、
コンテンツデータが示す音声を前記通信対象装置との間で共有するか否かを判定する判定部と、
前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合に、前記コンテンツデータが示す音声、または、音声および画像を前記通信対象装置との間で共有する処理を選択的に行う共有処理部と、
を備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記通話に関する通信における発話音声に対応する発話音声信号を前記通信対象装置へ送信させ、
前記再生処理部が再生している前記コンテンツデータが示す音声に対応するコンテンツ音声信号を前記通信対象装置へ送信させない、制御装置。
【請求項２】
外部音声入力装置において生成された音声信号が入力される入力部をさらに備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、前記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、前記音声信号とを加算し、
加算された前記音声信号を前記通信部に送信させる、請求項１に記載の制御装置。
【請求項３】
音声信号を生成する音声入力部をさらに備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、前記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、前記音声信号とを加算し、
加算された前記音声信号を前記通信部に送信させる、請求項１に記載の制御装置。
【請求項４】
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合は、前記通信部が受信した、前記通話に関する通信における発話音声に対応する外部発話音声信号の位相を反転させた反転外部発話音声信号を、前記音声信号にさらに加算する、請求項２、または３のいずれか１項に記載の制御装置。
【請求項５】
前記通信部が前記撮像画像および音声による通話に関する通信を行っているときにおいて、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記共有処理部は、前記コンテンツデータが示す画像が表示される領域と、前記通信部が受信した、前記通信対象装置から送信された撮像画像が表示される領域とが分離された表示用画像を、表示画面に表示させる、請求項１〜３のいずれか１項に記載の制御装置。
【請求項６】
前記通信部が前記撮像画像および音声による通話に関する通信を行っているときにおいて、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合には、
前記共有処理部は、前記コンテンツデータが示す画像と、前記通信部が受信した、前記通信対象装置から送信された撮像画像とが仮想空間内に配置された表示用画像を、表示画面に表示させる、請求項１〜３のいずれか１項に記載の制御装置。
【請求項７】
前記共有処理部は、前記仮想空間における、前記コンテンツデータが示す画像、前記撮像画像それぞれの位置に基づいて、
前記コンテンツデータが示す音声に対応するコンテンツ音声信号と、前記通信部が受信した、前記撮像画像に対応する前記通信対象装置から送信された外部発話音声信号との音像をそれぞれ定位させる、請求項６に記載の制御装置。
【請求項８】
前記通信部は、前記通信対象装置との間における前記コンテンツデータの共有を管理するコンテンツ管理サーバとさらに通信を行い、
前記判定部は、前記コンテンツ管理サーバにおいて前記コンテンツデータの共有が許可された場合に、前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定する、請求項１〜３のいずれか１項に記載の制御装置。
【請求項９】
１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行うステップと、
音声、または、音声および画像を示すコンテンツデータの再生を行うステップと、
コンテンツデータが示す音声を前記通信対象装置との間で共有するか否かを判定するステップと、
前記判定するステップにおいて前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合に、前記コンテンツデータが示す音声、または、音声および画像を前記通信対象装置との間で共有する処理を選択的に行うステップと、
を有し、
前記選択的に行うステップでは、前記判定するステップにおいて前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記通話に関する通信における発話音声に対応する発話音声信号を前記通信対象装置へ送信させ、
前記再生を行うステップにおいて再生されている前記コンテンツデータが示す音声に対応するコンテンツ音声信号を前記通信対象装置へ送信させない、制御方法。
【請求項１】
１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行う通信部と、
音声、または、音声および画像を示すコンテンツデータの再生を行う再生処理部と、
コンテンツデータが示す音声を前記通信対象装置との間で共有するか否かを判定する判定部と、
前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合に、前記コンテンツデータが示す音声、または、音声および画像を前記通信対象装置との間で共有する処理を選択的に行う共有処理部と、
を備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記通話に関する通信における発話音声に対応する発話音声信号を前記通信対象装置へ送信させ、
前記再生処理部が再生している前記コンテンツデータが示す音声に対応するコンテンツ音声信号を前記通信対象装置へ送信させない、制御装置。
【請求項２】
外部音声入力装置において生成された音声信号が入力される入力部をさらに備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、前記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、前記音声信号とを加算し、
加算された前記音声信号を前記通信部に送信させる、請求項１に記載の制御装置。
【請求項３】
音声信号を生成する音声入力部をさらに備え、
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、前記コンテンツ音声信号の位相を反転させた反転コンテンツ音声信号と、前記音声信号とを加算し、
加算された前記音声信号を前記通信部に送信させる、請求項１に記載の制御装置。
【請求項４】
前記共有処理部は、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合は、前記通信部が受信した、前記通話に関する通信における発話音声に対応する外部発話音声信号の位相を反転させた反転外部発話音声信号を、前記音声信号にさらに加算する、請求項２、または３のいずれか１項に記載の制御装置。
【請求項５】
前記通信部が前記撮像画像および音声による通話に関する通信を行っているときにおいて、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記共有処理部は、前記コンテンツデータが示す画像が表示される領域と、前記通信部が受信した、前記通信対象装置から送信された撮像画像が表示される領域とが分離された表示用画像を、表示画面に表示させる、請求項１〜３のいずれか１項に記載の制御装置。
【請求項６】
前記通信部が前記撮像画像および音声による通話に関する通信を行っているときにおいて、前記判定部において前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合には、
前記共有処理部は、前記コンテンツデータが示す画像と、前記通信部が受信した、前記通信対象装置から送信された撮像画像とが仮想空間内に配置された表示用画像を、表示画面に表示させる、請求項１〜３のいずれか１項に記載の制御装置。
【請求項７】
前記共有処理部は、前記仮想空間における、前記コンテンツデータが示す画像、前記撮像画像それぞれの位置に基づいて、
前記コンテンツデータが示す音声に対応するコンテンツ音声信号と、前記通信部が受信した、前記撮像画像に対応する前記通信対象装置から送信された外部発話音声信号との音像をそれぞれ定位させる、請求項６に記載の制御装置。
【請求項８】
前記通信部は、前記通信対象装置との間における前記コンテンツデータの共有を管理するコンテンツ管理サーバとさらに通信を行い、
前記判定部は、前記コンテンツ管理サーバにおいて前記コンテンツデータの共有が許可された場合に、前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定する、請求項１〜３のいずれか１項に記載の制御装置。
【請求項９】
１または２以上の通信対象装置との間で、音声による通話に関する通信、または、撮像により得られた動画像である撮像画像および音声による通話に関する通信を行うステップと、
音声、または、音声および画像を示すコンテンツデータの再生を行うステップと、
コンテンツデータが示す音声を前記通信対象装置との間で共有するか否かを判定するステップと、
前記判定するステップにおいて前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定された場合に、前記コンテンツデータが示す音声、または、音声および画像を前記通信対象装置との間で共有する処理を選択的に行うステップと、
を有し、
前記選択的に行うステップでは、前記判定するステップにおいて前記コンテンツデータが示す音声を前記通信対象装置との間で共有すると判定されない場合には、
前記通話に関する通信における発話音声に対応する発話音声信号を前記通信対象装置へ送信させ、
前記再生を行うステップにおいて再生されている前記コンテンツデータが示す音声に対応するコンテンツ音声信号を前記通信対象装置へ送信させない、制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１２−７５０３８（Ｐ２０１２−７５０３８Ａ）
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願番号】特願２０１０−２１９８６５（Ｐ２０１０−２１９８６５）
【出願日】平成２２年９月２９日（２０１０．９．２９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願日】平成２２年９月２９日（２０１０．９．２９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]