楽音制御装置
【課題】操作部材の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせる。
【解決手段】操作装置は、操作者によってホイール部が操作されると、その操作に応じたセンサ信号を出力する。コンピュータ装置は、操作装置から出力されたセンサ信号に基づいて、可動部のホイール部に対する相対的な位置の目標となる目標変位を生成し、ホイール部に設けられたコイルは、ホイール部と可動部との間に相互に働く力を、ホイール部及び可動部に対して非接触で付与して、目標変位へと可動部を移動させる。また、コンピュータ装置は、再生中の楽音信号において、生成した目標変位に基づく複数のループ期間と、ループ再生するよう指示する操作が検出されたタイミングに応じたループ再生開始位置とを決定し、ループ再生開始位置から各々のループ期間に含まれる楽音信号を順番に再生させる。
【解決手段】操作装置は、操作者によってホイール部が操作されると、その操作に応じたセンサ信号を出力する。コンピュータ装置は、操作装置から出力されたセンサ信号に基づいて、可動部のホイール部に対する相対的な位置の目標となる目標変位を生成し、ホイール部に設けられたコイルは、ホイール部と可動部との間に相互に働く力を、ホイール部及び可動部に対して非接触で付与して、目標変位へと可動部を移動させる。また、コンピュータ装置は、再生中の楽音信号において、生成した目標変位に基づく複数のループ期間と、ループ再生するよう指示する操作が検出されたタイミングに応じたループ再生開始位置とを決定し、ループ再生開始位置から各々のループ期間に含まれる楽音信号を順番に再生させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作に応じて音を編集する技術に関する。
【背景技術】
【０００２】
コンピュータを用いて楽音を編集する技術が知られている。例えば、特許文献１には、自動演奏中にループ演奏指示ボタンが押されると、音楽的に適切なループ演奏区間を設定して、ループ演奏を行う技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−３１７８１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、アコースティックの楽器を演奏する場合、演奏者は、楽器から発せられた音を耳で聴くのに加えて、楽器の振動によって音を感じることができる。例えば、ギターを弾く場合には、ギターの弦の振動によって音を感じることができる。一方、電子楽器を使用する場合、操作者は、鍵盤やスイッチを操作しながら音を作ったり編集したりするため、その操作によって作られる音を触覚的に感じることができない。
本発明はこのような背景に鑑みてなされたものであり、操作部材の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることを目的とする。
【課題を解決するための手段】
【０００５】
本発明は、操作者により操作される操作部材と、前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、前記操作検出手段から出力された検出信号に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と、楽音信号を再生する再生手段と、前記目標変位生成手段によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を複数決定する再生期間決定手段と、楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された各々の再生期間に含まれる楽音信号を前記再生手段に順番に再生させる再生制御手段とを備えることを特徴とする楽音制御装置を提供する。
【０００６】
また、本発明は、操作者により操作される操作部材と、前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、楽音信号を再生する再生手段と、前記操作検出手段から出力された検出信号に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を決定する再生期間決定手段と、楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された再生期間に含まれる楽音信号を前記再生手段に繰り返し再生させる再生制御手段と、前記繰り返し再生開始位置から開始される前記再生期間に含まれる楽音信号の波形に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段とを備えることを特徴とする楽音制御装置を提供する。
【０００７】
本発明の好ましい態様において、前記操作検出手段は、前記操作部材を移動させる操作が行われると、当該操作部材の移動量及び移動方向を表す検出信号を出力し、前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に基づいて、前記繰り返し再生開始位置を変更する再生開始位置変更手段を備えてもよい。
【０００８】
本発明の好ましい態様において、前記再生開始位置変更手段は、前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記再生手段によって再生されている楽音信号において、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、当該楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された前記区間に含まれるピーク位置に前記繰り返し再生開始位置を変更してもよい。
【０００９】
本発明の好ましい態様において、前記再生制御手段は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表す検出信号が前記操作検出手段から出力された場合には、前記再生期間に含まれる楽音信号を前記再生手段により逆再生させてもよい。
【００１０】
本発明の好ましい態様において、前記目標変位生成手段は、前記検出信号に応じた条件の下で仮想的に行われる物理的な運動を規定した物理モデルに基づいて前記目標変位を生成してもよい。
【発明の効果】
【００１１】
本発明によれば、操作部材の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることができる。
【図面の簡単な説明】
【００１２】
【図１】第１実施形態に係る楽音制御装置の構成を示す図である。
【図２】前記楽音制御装置の操作装置の構成を示す正面図である。
【図３】前記操作装置の構成を示す上面図である。
【図４】前記操作装置の構成を図２中の矢線ＶＡ方向から見た側面図である。
【図５】前記操作装置の構成を図２中の矢線ＶＢ方向から見た側面図である。
【図６】変位データと前記操作装置の可動部の位置との関係を示す図である。
【図７】前記楽音制御装置のコントロール装置の構成を示すブロック図である。
【図８】前記楽音制御装置のコンピュータ装置の構成を示すブロック図である。
【図９】前記楽音制御装置の機能構成を示す図である。
【図１０】前記コンピュータ装置が用いる物理モデルの一例を示す図である。
【図１１】前記コンピュータ装置のフォースフィードバック生成部の処理を示す図である。
【図１２】前記フォースフィードバック生成部のパラメータ変更の一例を示す図である。
【図１３】前記フォースフィードバック生成部のパラメータ変更の一例を示す図である。
【図１４】前記フォースフィードバック生成部が生成する振動波形の一例を示す図である。
【図１５】前記コンピュータ装置の楽音生成部の処理を示す図である。
【図１６】前記楽音生成部のループ再生処理を説明する図である。
【図１７】第２実施形態に係る楽音制御装置の機能構成を示す図である。
【図１８】第２実施形態に係る前記楽音制御装置の楽音生成部の処理を示す図である。
【図１９】第２実施形態に係る前記楽音生成部のループ再生処理を説明する図である。
【図２０】変形例に係る物理モデルの一例を示す図である。
【図２１】変形例に係るループ再生開始位置を変更する処理を説明する図である。
【発明を実施するための形態】
【００１３】
＜第１実施形態＞
［構成］
図１は、第１実施形態に係る楽音制御装置１の構成を示す図である。同図に示すように、楽音制御装置１は、操作装置１０と、コントロール装置２０と、コンピュータ装置３０とを備えている。操作装置１０とコントロール装置２０とは通信ケーブル４１を介して接続されており、コントロール装置２０とコンピュータ装置３０とは、通信ケーブル４２を介して接続されている。
【００１４】
（操作装置の構成）
次に、操作装置１０の構成について説明する。図２は操作装置１０の正面図、図３は操作装置１０の上面図、図４は操作装置１０を図２中の矢線ＶＡ方向から見た側面図、図５は操作装置１０を図２中の矢線ＶＢ方向から見た側面図である。図２に示すように、操作装置１０は、台車部１１と、ホイール部１２と、可動部１３とを備えている。
【００１５】
台車部１１は、土台１１１と、支持部材１１２と、車軸１１３ａ，１１３ｂと、車輪１１４ａ，１１４ｂと、モータ１１５とを備えている。土台１１１上には、４つのバネ１１６が設けられており、支持部材１１２は、これらのバネ１１６によって支持されている。また、支持部材１１２は、土台１１１に対して図中の矢印Ｅ方向へ移動可能に取り付けられている。この支持部材１１２は、ホイール部１２を回転可能に支持している。これにより、操作者は、ホイール部１２を図中の矢印Ｅ方向に押し下げる操作（以下、「押し下げ操作」という）を行うことができる。操作者によって押し下げ操作が行われると、支持部材１１２を支持するバネ１１６が縮んで、ホイール部１２及び支持部材１１２が図中の矢印Ｅ方向へ下がる。このとき、ホイール部１２の押し下げ量が大きくなるにつれて、土台１１１と支持部材１１２との間の距離Ｌは小さくなる。また、ホイール部１２が押し下げられた状態において操作者が押し下げ操作をやめると、バネ１１６の弾性力によってホイール部１２及び支持部材１１２が図中の矢印Ｅ方向と逆方向へ跳ね上がり、押し下げられる前の位置に戻る。支持部材１１２には、押し量センサ１４が設けられている。この押し量センサ１４は、例えば反射型の光センサであり、土台１１１に設けられた反射板１４０に対して光を照射することにより、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号を出力する。つまり、押し量センサ１４は、ホイール部１２を押し下げる操作が行われると、この操作に応じた検出信号であるセンサ信号を出力する操作検出手段である。
【００１６】
また、図３に示すように、土台１１１の両端には、図中の矢印ＣＤ方向に貫通する貫通孔が形成されており、一方の貫通孔には車軸１１３ａが通されており、他方の貫通孔には車軸１１３ｂが通されている。そして、車軸１１３ａの両端には、車輪１１４ａが取り付けられており、車軸１１３ｂの両端には、車輪１１４ｂが取り付けられている。これにより、操作者は、ホイール部１２をつかんで、操作装置１０を図中の矢印Ａ方向又はＢ方向に移動させる操作（以下、「移動操作」という）を行うことができる。操作者によってホイール部１２が図中の矢印Ａ方向に動かされると、車輪１１４ａ，１１４ｂが反時計回りに回転し、操作装置１０が図中の矢印Ａ方向へと移動する。操作者によってホイール部１２が図中の矢印Ｂ方向に動かされると、車輪１１４ａ，１１４ｂが時計回りに回転し、操作装置１０が図中の矢印Ｂ方向へと移動する。また、図２に示すように、車軸１１３ｂには、モータ１１５が接続されている。このモータ１１５は、車軸１１３ｂを介して車輪１１４ｂを回転させる。モータ１１５には、距離センサ１５が設けられている。この距離センサ１５は、例えばエンコーダであり、車輪１１４ｂの回転数を計測し、その回転数に応じた２相のパルス列をセンサ信号として出力する。この車輪１１４ｂの回転数は、操作装置１０の移動距離に対応する値であるから、距離センサ１５は操作装置１０の移動距離を計測しているといえる。また、２相のパルス列の位相関係は、車輪１１４ｂの回転方向に対応して反転する。つまり、距離センサ１５は、ホイール部１２を用いて操作装置１０を移動させる操作が行われると、操作装置１０の移動量（移動距離）及び移動方向を表す検出信号であるセンサ信号を出力する操作検出手段である。
【００１７】
ホイール部１２は、例えばプラスティックで形成された内部が中空の円筒状の部材であり、後述する軸１３１が挿入される空洞を有している。このホイール部１２は、操作者により触れられた状態で操作される操作部材である。また、ホイール部１２は、上述したように支持部材１１２によって回転可能に支持されている。これにより、操作者は、ホイール部１２を図４中の矢印Ｆ方向に回転させる操作（以下、「回転操作」という）を行うことができる。操作者によって回転操作が行われると、ホイール部１２は、回転軸を中心として図中の矢印Ｆ方向に回転する。ホイール部１２の側面には、角度センサ１６が設けられている。この角度センサ１６は、例えばエンコーダであり、基準線ｋから見たホイール部１２の回転角度を計測し、その回転角度に応じた２相のパルス列をセンサ信号として出力する。つまり、角度センサ１６は、ホイール部１２を回転する操作が行われると、その操作に応じた検出信号であるセンサ信号を出力する操作検出手段である。
【００１８】
可動部１３は、軸１３１と、分銅１３２ａ，１３２ｂと、鉄心１３３とを備えている。図２に示すように、軸１３１は、ホイール部１２の内部を貫通するように設けられており、ホイール部１２の軸受け１２２によって図中の矢印Ａ方向又はＢ方向へ移動可能に支持されている。可動部１３は、軸１３１がホイール部１２の空洞内を移動することによって、ホイール部１２に対して相対的に移動する。軸１３１の両端には、分銅１３２ａ，１３２ｂが設けられている。この分銅１３２ａ，１３２ｂは、質量体として用いられる金属製の重りである。また、分銅１３２ａには、中央位置センサ１７が設けられている。この中央位置センサ１７は、例えばフォトインタラプタであり、図中の矢印ＡＢ方向における可動部１３の中心位置を検出する。分銅１３２ｂには、位置センサ１８が設けられている。この位置センサ１８は、例えば光センサであり、図中の矢印ＡＢ方向における可動部１３の位置を計測する。ここで、中央位置センサ１７及び位置センサ１８は、ホイール部１２の回転操作に連れて可動部１３が回転してしまうと、正確な位置を計測できなくなってしまう。そこで、分銅１３２ａには、可動部１３の連れ回りを抑止するための回転抑止部材１３４が設けられている。図に示すように、回転抑止部材１３４は、一方の端が分銅１３２ａに固定されており、他方の端が支持部材１１２に形成された孔２１０に通されている。これにより、ホイール部１２が回転されても、回転抑止部材１３４によって可動部１３の回転が妨げられるため、可動部１３が連れ回らないようになる。
【００１９】
ホイール部１２の内部に位置する軸１３１の中心部には、鉄心１３３が設けられている。また、ホイール部１２の内部には、コイル１２１ａ，１２１ｂが設けられている。ここで、図２を参照して、可動部１３の駆動原理について説明する。ホイール部１２のコイル１２１ａに電流が供給されると、コイル１２１ａと鉄心１３３との間に相互に吸引力が働き、鉄心１３３がコイル１２１ａに引き付けられる。これにより、可動部１３が図中の矢印Ａ方向へと移動する。一方、コイル１２１ｂに電流が供給されると、コイル１２１ｂと鉄心１３３との間に相互に吸引力が働き、鉄心１３３がコイル１２１ｂに引き付けられる。これにより、可動部１３が図中の矢印Ｂ方向へと移動する。つまり、コイル１２１ａ，１２１ｂは、ホイール部１２と可動部１３との間に相互に働く力を、ホイール部１２及び可動部１３に対して非接触で付与して、可動部１３を移動させる力付与手段である。
【００２０】
この可動部１３の駆動制御は、後述する変位データに基づいて行われる。図６は、変位データと可動部１３の位置との関係を示す図である。ここでは、変位データが−７５０〜７５０までの値に設定されている場合を想定する。例えば、変位データの値が−７５０である場合には、可動部１３の鉄心１３３が図中の矢印Ａ方向の端位置へと移動される。一方、変位データの値が７５０である場合には、可動部１３の鉄心１３３が図中の矢印Ｂ方向の端位置へと移動される。また、図に示すように、これらの端位置の間における可動部１３の鉄心１３３の位置と変位データの値とは、線形の関係になっている。
【００２１】
（コントロール装置の構成）
次に、コントロール装置２０の構成について説明する。図７は、コントロール装置２０の構成を示すブロック図である。同図に示すように、コントロール装置２０は、制御部２１と、電源部２２と、入出力部２３と、通信部２４とを備えている。制御部２１は、コントロール装置２０の各部を制御するとともに、操作装置１０の可動部１３の駆動を制御する。電源部２２は、コントロール装置２０の各部及び操作装置１０に電力を供給する。入出力部２３は、操作装置１０と制御部２１との間の信号のやり取りを制御する。例えば、入出力部２３は、操作装置１０の押し量センサ１４，距離センサ１５，角度センサ１６から出力されたセンサ信号を受け取り、制御部２１に供給する。また、入出力部２３は、制御部２１から供給された制御信号を操作装置１０へ出力する。通信部２４は、例えばシリアル通信により、コンピュータ装置３０とデータの送受信を行う。
【００２２】
（コンピュータ装置の構成）
次に、コンピュータ装置３０の構成について説明する。図８は、コンピュータ装置３０の構成を示すブロック図である。同図に示すように、コンピュータ装置３０は、ＣＰＵ（Central Processing Unit）３１と、ＲＯＭ（Read Only Memory）３２と、ＲＡＭ（Random Access Memory）３３と、記憶部３４と、通信部３５と、操作部３６と、表示部３７と、音源部３８と、放音部３９とを備えている。ＣＰＵ３１は、ＲＯＭ３２又は記憶部３４に記憶されているプログラムを実行して各種の処理を行う。ＲＯＭ３２は、コンピュータ装置３０の起動に必要なプログラムやデータを記憶している。ＲＡＭ３３は、ＣＰＵ３１がプログラムを実行する際のワークエリアとして使用される。記憶部３４は、例えばハードディスクであり、ＣＰＵ３１によって実行されるプログラムや各種データを記憶している。この記憶部３４には、フォースフィードバック生成ソフトウェア３４ａと楽音生成ソフトウェア３４ｂとが記憶されている。通信部３５は、例えばシリアル通信により、コントロール装置２０とデータの送受信を行う。操作部３６は、例えばキーボードとマウスであり、操作者の操作を受け付けて、その操作に応じた操作信号をＣＰＵ３１に入力する。表示部３７は、例えば液晶ディスプレイであり、ＣＰＵ３１の制御に応じた画像を表示する。音源部３８は、指定された楽音を表す楽音信号を生成して出力する。放音部３９は、例えばパワードスピーカと呼ばれるアンプ内蔵型のスピーカであり、楽音信号に応じた音を放音する。なお、ここでは、楽音信号を生成して音として出すことを「再生する」という。つまり、音源部３８と放音部３９とが協働することにより、楽音信号を再生する再生手段が実現される。
【００２３】
次に、楽音制御装置１の機能構成について説明する。図９は、楽音制御装置１の機能構成を示す図である。同図に示すように、コントロール装置２０の制御部２１は、データ変換部２０１と、サーボ制御部２０２として機能する。データ変換部２０１は、操作装置１０の角度センサ１６，押し量センサ１４，距離センサ１５から出力されたセンサ信号をセンサデータに変換する。サーボ制御部２０２は、コンピュータ装置３０から送信される変位データに基づいて、操作装置１０の可動部１３の駆動をサーボ制御する。また、コンピュータ装置３０のＣＰＵ３１は、フォースフィードバック生成部３０１と、楽音生成部３０２として機能する。フォースフィードバック生成部３０１は、ＣＰＵ３１が記憶部３４に記憶されているフォースフィードバック生成ソフトウェア３４ａを実行することにより実現される。このフォースフィードバック生成部３０１は、コントロール装置２０から送信されるセンサデータと予め決められた物理モデルＭとに基づいて、操作装置１０の可動部１３のホイール部１２に対する相対的な位置の目標となる目標変位を生成する。つまり、フォースフィードバック生成部３０１は、操作装置１０から出力されたセンサ信号と物理モデルＭとに基づいて目標変位を生成する目標変位生成手段である。楽音生成部３０２は、ＣＰＵ３１が記憶部３４に記憶されている楽音生成ソフトウェア３４ｂを実行することにより実現される。この楽音生成部３０２は、フォースフィードバック生成部３０１によって生成される目標変位及びコントロール装置２０から送信されるセンサデータに基づいて、音源部３８にて生成された楽音信号を編集する。
【００２４】
ここで、フォースフィードバック生成部３０１にて用いられる物理モデルＭについて説明する。この物理モデルＭは、例えば振動数、振幅、減衰力などの条件によって変化する物理的な運動を規定するものである。図１０は、物理モデルＭの一例である粘性減衰系のバネモデルを示す図である。このバネモデルでは、仮想可動部ｍが静止している状態から乱されると、仮想バネｇの弾性力によって仮想可動部ｍが図中の左右方向に振動を開始する。そして、摩擦などの減衰力によって仮想可動部ｍの振動が徐々に小さくなっていき、やがて仮想可動部ｍが静止するようになっている。
【００２５】
［動作］
次に、上述した図９を参照して、第１実施形態に係る楽音制御装置１の動作について説明する。まず、操作者は、コンピュータ装置３０の操作部３６を操作して、楽音の再生を指示する。音源部３８は、この操作により指示された楽音を表す楽音信号Ｓｏを生成し、放音部３９に供給する。放音部３９は、音源部３８から供給された楽音信号Ｓｏに応じた音を放音する。これにより、操作者によって指示された楽音が再生される。続いて、操作者は、再生中の楽音を聞きながら、操作装置１０を操作して、再生中の楽音を編集する。ここでは、操作者が操作装置１０のホイール部１２をつかんで、ホイール部１２の押し下げながら、操作装置１０を図２中の矢印Ｂ方向へ閾値以上の加速度で移動させる操作を行った場合を想定する。この場合、押し量センサ１４は、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号Ｓｂを出力する。また、距離センサ１５は、車輪１１４ｂの回転数を計測し、計測した回転数に応じた２相のパルス列をセンサ信号Ｓｃとして出力する。なお、この例では、操作者によってホイール部１２の回転操作が行われていないため、角度センサ１６からはセンサ信号が出力されない。
【００２６】
押し量センサ１４からセンサ信号Ｓｂが出力され、距離センサ１５からセンサ信号Ｓｃが出力されると、コントロール装置２０のデータ変換部２０１は、このセンサ信号Ｓｂ，Ｓｃを入出力部２３から受け取る。続いて、データ変換部２０１は、センサ信号Ｓｂに基づいてホイール部１２の押し下げ量を特定し、特定した押し下げ量を表すセンサデータＤｂを生成する。また、データ変換部２０１は、センサ信号Ｓｃのパルス数をカウントしてホイール部１２の移動距離を特定するとともに、センサ信号Ｓｃのパルス列の位相関係に基づいて操作装置１０の移動方向を特定する。そして、データ変換部２０１は、特定した移動距離及び移動方向を表すセンサデータＤｃを生成する。続いて、データ変換部２０１は、生成したセンサデータＤｂ，Ｄｃを通信部２４によってコンピュータ装置３０に送信する。
【００２７】
コントロール装置２０からセンサデータＤｂ，Ｄｃが送信されてくると、コンピュータ装置３０のＣＰＵ３１は、このセンサデータＤｂ，Ｄｃを通信部３５によって受信する。続いて、ＣＰＵ３１は、エディットモードをオンにする操作が行われたか否かを判定し、この操作が行われた場合にはエディットモードをオンにする。ここでは、エディットモードをオンにする操作が、ホイール部１２の押し下げながら、操作装置１０を閾値以上の加速度で移動させる操作であるものとする。なお、エディットモードをオンにする操作が行われていない場合には、上述した楽音の再生が引き続き行われる。この例では、ホイール部１２の押し下げ操作を表すセンサデータＤｂと、操作装置１０の移動操作を表すセンサデータＤｃとが受信され、さらにセンサデータＤｃの表す単位時間当たりの移動距離から求められる加速度が閾値以上になるため、ＣＰＵ３１は、エディットモードをオンにする操作が行われたと判定し、エディットモードをオンにする。エディットモードがオンになると、フォースフィードバック生成部３０１及び楽音生成部３０２は以下の処理を行う。
【００２８】
まず、フォースフィードバック生成部３０１が行う処理について説明する。図１１は、フォースフィードバック生成部３０１の処理を示す図である。まず、フォースフィードバック生成部３０１は、受信したセンサデータＤｂ，Ｄｃに基づいて、物理モデルＭのパラメータを変更する（ステップＳ１１）。図１２は、センサデータＤｂに基づくパラメータの変更の一例を示す図である。図の例では、センサデータＤｂに基づいて図１０に示したバネモデルの振幅と減衰力とが変更される。具体的には、フォースフィードバック生成部３０１は、図１２（ａ）に示すように、センサデータＤｂの表すホイール部１２の押し下げ量が大きくなるほど、バネモデルの振幅を大きくする。さらに、フォースフィードバック生成部３０１は、図１２（ｂ）に示すように、センサデータＤｂの表すホイール部１２の押し下げ量が大きくなるほど、バネモデルの減衰力を小さくする。なお、フォースフィードバック生成部３０１は、ホイール部１２の押し下げ量が最大である場合には、減衰力を０にする。また、図１３は、センサデータＤｃに基づくパラメータの変更の一例を示す図である。図の例では、センサデータＤｃに基づいて図１０に示したバネモデルの振動数が変更される。具体的には、フォースフィードバック生成部３０１は、図に示すように、センサデータＤｃの表す移動距離が大きくなるほど、バネモデルの振動数を大きくする。
【００２９】
続いて、フォースフィードバック生成部３０１は、パラメータが変更された物理モデルＭを用いて仮想可動部ｍの振動を表す振動波形Ｘを生成する（図１１のステップＳ１２）。このとき生成される振動波形Ｘは、物理モデルＭのパラメータによって異なる波形になる。例えば、上述したようにバネモデルの振動数が大きくなると、図１４（ａ）に示すように、生成される振動波形Ｘの周波数が大きくなる。また、上述したようにバネモデルの振幅が大きくなると、図１４（ｂ）に示すように、生成される振動波形Ｘの振幅が大きくなる。また、上述したようにバネモデルの減衰力が小さくなると、図１４（ｃ）に示すように、生成される振動波形Ｘが０に収束するまでの時間が長くなる。なお、バネモデルの減衰力が０の場合には、振動波形Ｘは収束しない。
【００３０】
続いて、フォースフィードバック生成部３０１は、生成した振動波形Ｘを−７５０〜７５０までの値に数値化して、可動部１３の目標変位を表す変位データＤｘを生成する（図１１のステップＳ１３）。そして、フォースフィードバック生成部３０１は、生成した変位データＤｘを通信部３５によってコントロール装置２０に送信する。
【００３１】
次に、楽音生成部３０２が行う処理について説明する。図１５は、楽音生成部３０２の処理を示す図である。まず、楽音生成部３０２は、センサデータＤｂが受信された時点の楽音信号Ｓｏの再生位置をループ再生開始位置Ｐ０として決定する（ステップＳＡ２１）。ここでは、ホイール部１２を押し下げる操作が、楽音を繰り返し再生するよう指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、楽音を繰り返し再生するよう指示する操作に応じたセンサ信号が操作装置１０から出力されたタイミングに応じて、再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置であるループ再生開始位置として決定する再生開始位置決定手段である。
【００３２】
続いて、楽音生成部３０２は、フォースフィードバック生成部３０１にて生成された振動波形Ｘに基づいて、ループ再生を行うときのループ期間Ｔを複数決定する（ステップＳＡ２２）。この振動波形Ｘは、フォースフィードバック生成部３０１によって時系列に生成された目標変位を連ねた波形である。つまり、楽音生成部３０２は、フォースフィードバック生成部３０１によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの再生期間であるループ期間を複数決定する再生期間決定手段である。図１６を参照して具体的に説明すると、楽音生成部３０２は、振動波形Ｘの半周期に応じた複数のループ期間Ｔを決定する。図の例では、振動波形Ｘの半周期ｌ１に対応するループ期間Ｔ１，半周期ｌ２に対応するループ期間Ｔ２、半周期ｌ３に対応するループ期間Ｔ３，・・・が決定される。なお、図中の振動波形Ｘのように減衰振動を表す波形が用いられる場合には、決定されるループ期間Ｔが徐々に短くなっていき、やがて０となる。
【００３３】
続いて、楽音生成部３０２は、上述したステップＳＡ２１にて決定されたループ再生開始位置Ｐ０と、上述したステップＳＡ２２にて決定されたループ期間Ｔとに基づいて、ループ再生処理を行う（図１５のステップＳＡ２３）。図１６を参照して具体的に説明すると、楽音生成部３０２は、まずループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ１だけ経過したループ終了位置Ｐ１に到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ２だけ経過したループ終了位置Ｐ２に到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ３だけ経過したループ終了位置Ｐ３に到達すると、ループ再生開始位置Ｐ０に戻る。楽音生成部３０２は、このループ再生処理を、ループ期間Ｔが０になるか、操作者がホイール部１２の押し下げ操作をやめる、すなわちエディットモードがオフになるまで繰り返す。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、ループ再生が実現される。つまり、楽音生成部３０２は、ループ再生開始位置から各々のループ期間に含まれる楽音信号を順番に再生させる再生制御手段である。なお、ループ再生処理が終了した場合には、再び楽音信号Ｓｏが時間軸に沿って再生される。このとき、楽音信号Ｓｏは、例えばループ再生開始位置Ｐ０から再生されてもよいし、ループ再生が開始されてからの時間経過に応じた位置から再生されてもよい。
【００３４】
図９に示すように、コンピュータ装置３０から変位データＤｘが送信されてくると、コントロール装置２０のサーボ制御部２０２は、この変位データＤｘを通信部２４によって受信する。続いて、サーボ制御部２０２は、中央位置センサ１７の検出結果を用いて、操作装置１０の可動部１３を中心位置へと移動させる。具体的には、サーボ制御部２０２は、中央位置センサ１７によって検出された中心位置へと可動部１３を移動させる制御信号を生成し、生成した制御信号を入出力部２３から操作装置１０へ出力する。これにより、ホイール部１２のコイル１２１ａ又は１２１ｂに電流が供給されて、可動部１３が図６中の矢印ＡＢ方向における中心位置へと移動する。
【００３５】
続いて、サーボ制御部２０２は、位置センサ１８の検出結果を用いて、変位データＤｘが表す目標変位へと操作装置１０の可動部１３を移動させる。具体的には、サーボ制御部２０２は、変位データＤｘが表す目標変位へと可動部１３を移動させる制御信号Ｓｘを生成し、生成した制御信号Ｓｘを入出力部２３から操作装置１０へ出力する。例えば、変位データＤｘの値が−７５０である場合には、サーボ制御部２０２は、可動部１３の鉄心１３３を図６中の矢印Ａ方向の端位置へと移動させる制御信号Ｓｘを生成し出力する。また、変位データＤｘの値が７５０である場合には、サーボ制御部２０２は、可動部１３の鉄心１３３を図６中の矢印Ｂ方向の端位置へと移動させる制御信号Ｓｘを生成し出力する。これにより、可動部１３は、変位データＤｘが表す目標変位へと移動する。上述したように、この変位データＤｘは、物理モデルＭの仮想可動部ｍの動きに基づいて生成されている。つまり、可動部１３は、物理モデルＭの仮想可動部ｍと同じような動きをすることになる。このようにして、ホイール部１２のコイル１２１ａ又は１２１ｂによって可動部１３が駆動されると、可動部１３の質量と加速度の変化に応じた力がホイール部１２に加わり、ホイール部１２が振動する。このとき、操作者は、ホイール部１２を触っているため、このホイール部１２の振動を体で感じる。
【００３６】
また、このとき、コンピュータ装置３０の放音部３９は、楽音生成部３０２から供給された楽音信号Ｓｌに応じた音を放音する。放音部３９から放音される音と、ホイール部１２の振動とは、いずれも操作装置１０の操作に基づいて生成されている。したがって、操作者は、ホイール部１２の操作に応じて編集された音を聴きながら、編集された音に対応する振動を感じることができる。
【００３７】
＜第２実施形態＞
次に、本発明に係る第２実施形態について説明する。この第２実施形態では、フォースフィードバック生成部３０１及び楽音生成部３０２にて上述した第１実施形態とは異なる処理が行われる。なお、第２実施形態に係る楽音制御装置１の構成は、上述した第１実施形態と同じ構成であるため、その説明を省略する。
【００３８】
[動作]
図１７を参照して、第２実施形態に係る楽音制御装置１の動作について説明する。まず、操作者は、上述と同様に、コンピュータ装置３０の操作部３６を操作して、楽音の再生を指示する。これにより、操作者によって指示された楽音が再生される。続いて、操作者は、再生中の楽音を聞きながら、操作装置１０を操作して、再生中の楽音を編集する。ここでは、操作者が操作装置１０のホイール部１２をつかんで、ホイール部１２の回転させながら、ホイール部１２を押し下げる操作を行った場合を想定する。この場合、角度センサ１６は、ホイール部１２の回転角度を計測し、計測した回転角度に応じた２相のパルス列をセンサ信号Ｓａとして出力する。また、押し量センサ１４は、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号Ｓｂを出力する。なお、この例では、操作者によって操作装置１０の移動操作が行われていないため、距離センサ１５からはセンサ信号が出力されない。
【００３９】
角度センサ１６からセンサ信号Ｓａが出力され、押し量センサ１４からセンサ信号Ｓｂが出力されると、コントロール装置２０のデータ変換部２０１は、このセンサ信号Ｓａ，Ｓｂを入出力部２３から受け取る。続いて、データ変換部２０１は、センサ信号Ｓａのパルス数をカウントしてホイール部１２の回転角度を特定し、特定した回転角度を表すセンサデータＤａを生成する。また、データ変換部２０１は、センサ信号Ｓｂに基づいてホイール部１２の押し下げ量を特定し、特定した押し下げ量を表すセンサデータＤｂを生成する。続いて、データ変換部２０１は、生成したセンサデータＤａ，Ｄｂを通信部２４によってコンピュータ装置３０に送信する。
【００４０】
コントロール装置２０からセンサデータＤａ，Ｄｂが送信されてくると、コンピュータ装置３０のＣＰＵ３１は、このセンサデータＤａ，Ｄｂを通信部３５によって受信する。続いて、ＣＰＵ３１は、ホイール部１２を押し下げる操作が行われたか否かを判定し、この操作が行われた場合にはエディットモードをオンにする。この例では、ホイール部１２の押し下げ操作を表すセンサデータＤｂが受信されるため、ＣＰＵ３１は、エディットモードをオンにする。エディットモードがオンになると、フォースフィードバック生成部３０１及び楽音生成部３０２は以下の処理を行う。
【００４１】
まず、楽音生成部３０２が行う処理について説明する。図１８は、楽音生成部３０２の処理を示す図である。楽音生成部３０２は、上述した第１実施形態のステップＳＡ２１と同様に、ループ再生開始位置Ｐ０を決定する（ステップＳＢ２１）。続いて、楽音生成部３０２は、受信したセンサデータＤａの表す回転角度に基づいて、ループ期間Ｔｎを決定する（ステップＳＢ２２）。つまり、楽音生成部３０２は、操作装置１０から出力されたセンサ信号に基づいて、楽音を繰り返し再生するときの楽音の再生期間であるループ期間を決定する。例えば、楽音生成部３０２は、センサデータＤａの表す回転角度が大きいほど、ループ期間Ｔｎを長くする。続いて、楽音生成部３０２は、上述したステップＳＢ２１にて決定されたループ再生開始位置Ｐ０と、上述したステップＳＢ２２にて決定されたループ期間Ｔｎとに基づいて、ループ再生処理を行う（ステップＳＢ２３）。図１９を参照して具体的に説明すると、楽音生成部３０２は、まずループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔｎだけ経過したループ終了位置Ｐｎに到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ終了位置Ｐｎに到達するとループ再生開始位置Ｐ０に戻る。楽音生成部３０２は、このループ再生処理を、操作者がホイール部１２の押し下げ操作をやめる、すなわちエディットモードがオフになるまで繰り返す。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、ループ再生が実現される。つまり、楽音生成部３０２は、ループ再生開始位置からループ期間に含まれる楽音信号を繰り返し再生させる。
【００４２】
次に、フォースフィードバック生成部３０１が行う処理について説明する。フォースフィードバック生成部３０１は、楽音生成部３０２にて抽出されたループ楽音信号Ｓｌを取得し、取得したループ楽音信号Ｓｌの波形を振動波形Ｘとする。続いて、フォースフィードバック生成部３０１は、振動波形Ｘを−７５０〜７５０までの値に数値化し、可動部１３の目標変位を表す変位データＤｘを生成する。つまり、フォースフィードバック生成部３０１は、ループ再生開始位置から開始されるループ期間に含まれる楽音信号の波形に基づいて、可動部１３のホイール部１２に対する相対的な位置の目標となる目標変位を生成する。そして、フォースフィードバック生成部３０１は、生成した変位データＤｘを通信部３５によってコントロール装置２０に送信する。以降の動作は、上述した第１実施形態の動作と同様である。
【００４３】
以上説明した第１及び第２実施形態によれば、操作装置１０の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることができる。また、上述した構成では、可動部１３の軸１３１の両端に分銅１３２ａ，１３２ｂが設けられており、非接触で与えられる力によって左右に移動されるようになっているため、操作者の体に伝わるようなしっかりとした振動を発生させることができる。また、上述した構成では、可動部１３の鉄心１３３が端位置へと移動された場合にも、分銅１３２ａ，１３２ｂがホイール部１２に接触しないようになっているため、可動部１３の動作を正確に制御することができる。さらに、上述した構成では、例えばモータなどの駆動部を可動部１３に直接接続して可動部１３を移動させる構成と比べて、可動部１３を移動させるために必要な力が少なくて済むため、それに伴う発熱も軽減される。
【００４４】
＜変形例＞
以上が実施形態の説明であるが、この実施形態の内容は以下のように変形し得る。また、以下の各変形例を適宜組み合わせてもよい。
（変形例１）
上述した第１実施形態において、フォースフィードバック生成部３０１にて用いられる物理モデルＭは、図１０に示した粘性減衰系のバネモデルに限らない。要するに、物理モデルＭは、操作装置１０から出力されるセンサ信号に応じた条件の下で仮想的に行われる物理的な運動を規定するものであればよい。図２０（ａ）は、磁力を利用した物理モデルを示す図である。同図に示すように、この物理モデルにおいては、負極性の磁性体ｎ１，ｎ２の間に正極性の仮想可動部ｍａが配置されており、仮想可動部ｍａの磁力を変化させることで、仮想可動部ｍａが振動するようになっている。この場合、上述したステップＳ１１では、例えば仮想可動部ｍａの磁力の大きさなどが変更される。また、図２０（ｂ）は、ゴムボールモデルを示す図である。同図に示すように、このゴムボールモデルにおいては、壁面ｗ１と壁面ｗ２との間に弾性を有する仮想可動部ｍｂが配置されており、仮想可動部ｍｂが静止している状態から乱されると、自身の弾性力によって壁面ｗ１と壁面ｗ２との間を行き来するようになっている。この場合、上述したステップＳ１１では、例えば上述したセンサデータＤａに基づいて仮想可動部ｍｂの弾性力が変更され、上述したセンサデータＤｂに基づいてゴムボールモデルの減衰力が変更される。
【００４５】
（変形例２）
上述した第１実施形態では、フォースフィードバック生成部３０１にて用いられる物理モデルＭは１つだけであったが、複数の物理モデルＭが用いられてもよい。この場合、フォースフィードバック生成部３０１は、センサデータ毎に異なる物理モデルＭを選択し、選択した物理モデルＭのパラメータを対応するセンサデータに基づいて変更する。続いて、フォースフィードバック生成部３０１は、それらの物理モデルＭに基づいて複数の振動波形を生成し、生成した複数の振動波形を合成してから変位データを生成する。
【００４６】
（変形例３）
上述した第１実施形態では、単一のセンサデータによって物理モデルＭのパラメータを変更していたが、複数のセンサデータの組み合わせによって物理モデルＭのパラメータを変更してもよい。例えば、ホイール部１２の回転操作を表すセンサデータＤａと、ホイール部１２の押し下げ操作を表すセンサデータＤｂとの組み合わせによって、物理モデルＭの或るパラメータを変更してもよい。
【００４７】
（変形例４）
上述した第１実施形態では、物理モデルＭを用いて目標変位を生成する例を挙げて説明したが、物理モデルＭを用いずに目標変位を生成してもよい。この場合、コンピュータ装置３０の記憶部３４には、センサデータ毎に、そのセンサデータが採り得る値と、その値に応じた目標変位とが対応付けられたテーブルが記憶される。なお、センサデータのどの値にどのような目標変位を対応付けるかは任意である。例えば、センサデータの各値と、その値のセンサデータに基づいて上述のようにパラメータが変更されたときに物理モデルＭによって生成される目標変位とを対応付けて記憶させておいてもよい。そして、フォースフィードバック生成部３０１は、受信したセンサデータの値に対応付けて記憶された目標変位を特定し、特定した目標変位に応じた変位データをコントロール装置２０に送信する。
【００４８】
（変形例５）
上述した第１実施形態では、物理モデルＭのパラメータがセンサデータに基づいて変更されていたが、物理モデルＭのパラメータの変更に用いられるものはこれに限らない。例えば、コンピュータ装置３０の操作部３６の操作によって物理モデルＭのパラメータが変更されてもよい。あるいは、フォースフィードバック生成ソフトウェア３４ａによって物理モデルＭのパラメータが変更されてもよい。
【００４９】
（変形例６）
上述した実施形態では、ホイール部１２のコイル１２１ａ，１２１ｂと可動部１３の鉄心１３３とによって可動部１３を駆動する構成を例に挙げて説明したが、可動部１３を駆動する構成はこれに限らない。例えば、空気圧を利用して可動部１３を駆動させてもよい。要するに、操作装置１０は、ホイール部１２と可動部１３との間に相互に働く力を、ホイール部１２及び可動部１３に対して非接触で付与する力付与手段を備えていればよい。
【００５０】
（変形例７）
上述した第１実施形態において、楽音生成部３０２は、エディットモードがオンになった後に、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、リバースループ再生処理を行ってもよい。このリバースループ生成処理では、ループ期間に含まれる楽音信号を時間的に逆に逆再生させる処理が行われる。また、ここでは、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が、楽音信号を時間的に逆に再生させる逆再生を指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表すセンサ信号が操作装置１０から出力された場合には、ループ期間に含まれる楽音信号を逆再生させる。
【００５１】
上述した図１６を参照して、リバースループ再生処理について具体的に説明する。まず、楽音生成部３０２は、上述したステップＳＡ２１，ＳＡ２２の処理を行う。続いて、楽音生成部３０２は、図中のループ終了位置Ｐ１から時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、ループ終了位置Ｐ２に戻る。続いて、楽音生成部３０２は、ループ終了位置Ｐ２から時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、ループ終了位置Ｐ３に戻る。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、リバースループ再生が実現される。
なお、リバースループ再生が行われている間に、ホイール部１２を押し下げた状態で、エディットモードをオンにするための移動操作と同じ方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、上述した第１実施形態にて説明したループ再生に戻ってもよい。
【００５２】
また、上述した第２実施形態においても、楽音生成部３０２は、エディットモードがオンになった後に、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、リバースループ再生処理を行ってもよい。上述した図１９を参照して、第２実施形態に係るリバースループ再生処理について具体的に説明する。まず、楽音生成部３０２は、上述したステップＳＢ２１，ＳＢ２２の処理を行う。続いて、楽音生成部３０２は、図中のループ終了位置Ｐｎから時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、再びループ終了位置Ｐｎに戻る。続いて、楽音生成部３０２は、再びループ終了位置Ｐｎから時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、再びループ終了位置Ｐｎに戻る。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、第２実施形態に係るリバースループ再生が実現される。
【００５３】
（変形例８）
上述した実施形態において、楽音生成部３０２は、受信したセンサデータＤｂの表す押し下げ量が閾値以上である場合には、操作装置１０の移動操作を表すセンサデータＤｃが受信されると、そのセンサデータＤｃの表す移動距離及び移動方向に応じてループ再生開始位置Ｐ０を変更してもよい。ここでは、ホイール部１２を閾値以上の押し下げ量まで押し下げる操作が、ループ再生開始位置の変更を指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、ホイール部１２においてループ再生開始位置の変更を指示する操作がなされた場合に、操作装置１０から出力されたセンサ信号の表す移動量及び移動方向に基づいて、ループ再生開始位置を変更する再生開始位置変更手段である。図２１（ａ）を参照して具体的に説明すると、楽音生成部３０２は、例えば操作装置１０が図中の矢印Ａ方向へと移動された場合には、上述にて決定されたループ再生開始位置Ｐ０を、操作装置１０の移動距離に応じた分だけ時間軸方向へずらす。これにより、ループ再生開始位置Ｐ０が図中の位置Ｐ０１に変更される。また、楽音生成部３０２は、操作装置１０が図中の矢印Ｂ方向へと移動された場合には、上述にて決定されたループ再生開始位置Ｐ０を、操作装置１０の移動距離に応じた分だけ時間軸と逆方向へずらす。これにより、ループ再生開始位置Ｐ０が図中の位置Ｐ０２に変更される。
【００５４】
さらに、楽音生成部３０２は、楽音信号Ｓｏのピーク位置に基づいてループ再生開始位置Ｐ０を変更してもよい。図２１（ｂ）を参照して具体的に説明すると、まず楽音生成部３０２は、楽音信号Ｓｏに対してオンセット分析を行い、音圧レベルが閾値以上の部分となるピーク位置Ｑ０１〜Ｑ０３を検出する。続いて、楽音生成部３０２は、上述にて決定されたループ再生開始位置Ｐ０から、操作装置１０の移動方向及び移動距離に対応する位置Ｐ０１までの区間を変更区間Ｎとして特定する。続いて、楽音生成部３０２は、特定した変更区間Ｎに含まれるピーク位置Ｑ０３にループ再生開始位置Ｐ０をずらす。つまり、楽音生成部３０２は、ホイール部１２において繰り返し再生開始位置の変更を指示する操作がなされた場合に、再生されている楽音信号において、ループ再生開始位置から、操作装置１０から出力されたセンサ信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、この楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された区間に含まれるピーク位置にループ再生開始位置を変更する。これにより、エッジのある音をループ再生の開始点とすることができる。
また、楽音生成部３０２は、特定した変更区間Ｎ内に複数のピーク位置が含まれている場合には、ループ再生開始位置Ｐ０から最も近いピーク位置にループ再生開始位置Ｐ０をずらしてもよいし、或いは操作装置１０の移動時の加速度に応じたピーク位置にループ再生開始位置Ｐ０をずらしてもよい。
【００５５】
（変形例９）
上述した実施形態において、操作装置１０には、ホイール部１２の押し下げ操作を固定するロックボタンが設けられていてもよい。この場合、操作者がホイール部１２を所望の所まで押し下げてこのロックボタンを押すと、操作者が押し下げ操作をやめても、ホイール部１２が押し下げられた状態のまま固定される。これにより、操作者がホイール部１２を押し下げ続けなくても、ループ再生を継続することができる。
【００５６】
（変形例１０）
上述した第１実施形態では、センサデータＤｂ，Ｄｃに基づいて図１２及び図１３に示すように物理モデルＭのパラメータを変更する例を挙げて説明したが、どのセンサデータによって物理モデルＭのどのパラメータを変更するか、また、センサデータの値によって物理モデルＭのパラメータをどのように変更するかは任意に設定すればよい。
【００５７】
（変形例１１）
上述した実施形態において、コントロール装置２０のデータ変換部２０１，サーボ制御部２０２は、ＣＰＵが１又は複数のプログラムを実行することにより実現されてもよいし、１又は複数のハードウェアによって実現されてもよい。また、コンピュータ装置３０のフォースフィードバック生成部３０１，楽音生成部３０２は、ＣＰＵ３１と他のハードウェアとの協働によって実現されてもよいし、ＣＰＵ３１に代えて１又は複数のハードウェアによって実現されてもよい。また、ＣＰＵ３１によって行われる処理は、単一のプログラムによって実現されてもよいし、複数のプログラムによって実現されてもよい。また、ＣＰＵ３１によって実行される各プログラムは、磁気テープや磁気ディスクなどの磁気記録媒体、光ディスクなどの光記録媒体、光磁気記録媒体、半導体メモリなどの、コンピュータ装置が読み取り可能な記録媒体に記憶された状態で提供し得る。また、このプログラムを、インターネットのようなネットワーク経由でダウンロードさせることも可能である。
【符号の説明】
【００５８】
１…楽音制御装置、１０…操作装置、１１…台車部、１２…ホイール部、１２１ａ，１２１ｂ…コイル、１３…可動部、１３１…軸、１３２ａ，１３２ｂ…分銅、１３３…鉄心、１４…押し量センサ、１５…距離センサ、１６…角度センサ、１７…中央位置センサ、１８…位置センサ、２０…コントロール装置、３０…コンピュータ装置。
【技術分野】
【０００１】
本発明は、操作に応じて音を編集する技術に関する。
【背景技術】
【０００２】
コンピュータを用いて楽音を編集する技術が知られている。例えば、特許文献１には、自動演奏中にループ演奏指示ボタンが押されると、音楽的に適切なループ演奏区間を設定して、ループ演奏を行う技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−３１７８１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、アコースティックの楽器を演奏する場合、演奏者は、楽器から発せられた音を耳で聴くのに加えて、楽器の振動によって音を感じることができる。例えば、ギターを弾く場合には、ギターの弦の振動によって音を感じることができる。一方、電子楽器を使用する場合、操作者は、鍵盤やスイッチを操作しながら音を作ったり編集したりするため、その操作によって作られる音を触覚的に感じることができない。
本発明はこのような背景に鑑みてなされたものであり、操作部材の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることを目的とする。
【課題を解決するための手段】
【０００５】
本発明は、操作者により操作される操作部材と、前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、前記操作検出手段から出力された検出信号に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と、楽音信号を再生する再生手段と、前記目標変位生成手段によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を複数決定する再生期間決定手段と、楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された各々の再生期間に含まれる楽音信号を前記再生手段に順番に再生させる再生制御手段とを備えることを特徴とする楽音制御装置を提供する。
【０００６】
また、本発明は、操作者により操作される操作部材と、前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、楽音信号を再生する再生手段と、前記操作検出手段から出力された検出信号に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を決定する再生期間決定手段と、楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された再生期間に含まれる楽音信号を前記再生手段に繰り返し再生させる再生制御手段と、前記繰り返し再生開始位置から開始される前記再生期間に含まれる楽音信号の波形に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段とを備えることを特徴とする楽音制御装置を提供する。
【０００７】
本発明の好ましい態様において、前記操作検出手段は、前記操作部材を移動させる操作が行われると、当該操作部材の移動量及び移動方向を表す検出信号を出力し、前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に基づいて、前記繰り返し再生開始位置を変更する再生開始位置変更手段を備えてもよい。
【０００８】
本発明の好ましい態様において、前記再生開始位置変更手段は、前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記再生手段によって再生されている楽音信号において、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、当該楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された前記区間に含まれるピーク位置に前記繰り返し再生開始位置を変更してもよい。
【０００９】
本発明の好ましい態様において、前記再生制御手段は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表す検出信号が前記操作検出手段から出力された場合には、前記再生期間に含まれる楽音信号を前記再生手段により逆再生させてもよい。
【００１０】
本発明の好ましい態様において、前記目標変位生成手段は、前記検出信号に応じた条件の下で仮想的に行われる物理的な運動を規定した物理モデルに基づいて前記目標変位を生成してもよい。
【発明の効果】
【００１１】
本発明によれば、操作部材の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることができる。
【図面の簡単な説明】
【００１２】
【図１】第１実施形態に係る楽音制御装置の構成を示す図である。
【図２】前記楽音制御装置の操作装置の構成を示す正面図である。
【図３】前記操作装置の構成を示す上面図である。
【図４】前記操作装置の構成を図２中の矢線ＶＡ方向から見た側面図である。
【図５】前記操作装置の構成を図２中の矢線ＶＢ方向から見た側面図である。
【図６】変位データと前記操作装置の可動部の位置との関係を示す図である。
【図７】前記楽音制御装置のコントロール装置の構成を示すブロック図である。
【図８】前記楽音制御装置のコンピュータ装置の構成を示すブロック図である。
【図９】前記楽音制御装置の機能構成を示す図である。
【図１０】前記コンピュータ装置が用いる物理モデルの一例を示す図である。
【図１１】前記コンピュータ装置のフォースフィードバック生成部の処理を示す図である。
【図１２】前記フォースフィードバック生成部のパラメータ変更の一例を示す図である。
【図１３】前記フォースフィードバック生成部のパラメータ変更の一例を示す図である。
【図１４】前記フォースフィードバック生成部が生成する振動波形の一例を示す図である。
【図１５】前記コンピュータ装置の楽音生成部の処理を示す図である。
【図１６】前記楽音生成部のループ再生処理を説明する図である。
【図１７】第２実施形態に係る楽音制御装置の機能構成を示す図である。
【図１８】第２実施形態に係る前記楽音制御装置の楽音生成部の処理を示す図である。
【図１９】第２実施形態に係る前記楽音生成部のループ再生処理を説明する図である。
【図２０】変形例に係る物理モデルの一例を示す図である。
【図２１】変形例に係るループ再生開始位置を変更する処理を説明する図である。
【発明を実施するための形態】
【００１３】
＜第１実施形態＞
［構成］
図１は、第１実施形態に係る楽音制御装置１の構成を示す図である。同図に示すように、楽音制御装置１は、操作装置１０と、コントロール装置２０と、コンピュータ装置３０とを備えている。操作装置１０とコントロール装置２０とは通信ケーブル４１を介して接続されており、コントロール装置２０とコンピュータ装置３０とは、通信ケーブル４２を介して接続されている。
【００１４】
（操作装置の構成）
次に、操作装置１０の構成について説明する。図２は操作装置１０の正面図、図３は操作装置１０の上面図、図４は操作装置１０を図２中の矢線ＶＡ方向から見た側面図、図５は操作装置１０を図２中の矢線ＶＢ方向から見た側面図である。図２に示すように、操作装置１０は、台車部１１と、ホイール部１２と、可動部１３とを備えている。
【００１５】
台車部１１は、土台１１１と、支持部材１１２と、車軸１１３ａ，１１３ｂと、車輪１１４ａ，１１４ｂと、モータ１１５とを備えている。土台１１１上には、４つのバネ１１６が設けられており、支持部材１１２は、これらのバネ１１６によって支持されている。また、支持部材１１２は、土台１１１に対して図中の矢印Ｅ方向へ移動可能に取り付けられている。この支持部材１１２は、ホイール部１２を回転可能に支持している。これにより、操作者は、ホイール部１２を図中の矢印Ｅ方向に押し下げる操作（以下、「押し下げ操作」という）を行うことができる。操作者によって押し下げ操作が行われると、支持部材１１２を支持するバネ１１６が縮んで、ホイール部１２及び支持部材１１２が図中の矢印Ｅ方向へ下がる。このとき、ホイール部１２の押し下げ量が大きくなるにつれて、土台１１１と支持部材１１２との間の距離Ｌは小さくなる。また、ホイール部１２が押し下げられた状態において操作者が押し下げ操作をやめると、バネ１１６の弾性力によってホイール部１２及び支持部材１１２が図中の矢印Ｅ方向と逆方向へ跳ね上がり、押し下げられる前の位置に戻る。支持部材１１２には、押し量センサ１４が設けられている。この押し量センサ１４は、例えば反射型の光センサであり、土台１１１に設けられた反射板１４０に対して光を照射することにより、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号を出力する。つまり、押し量センサ１４は、ホイール部１２を押し下げる操作が行われると、この操作に応じた検出信号であるセンサ信号を出力する操作検出手段である。
【００１６】
また、図３に示すように、土台１１１の両端には、図中の矢印ＣＤ方向に貫通する貫通孔が形成されており、一方の貫通孔には車軸１１３ａが通されており、他方の貫通孔には車軸１１３ｂが通されている。そして、車軸１１３ａの両端には、車輪１１４ａが取り付けられており、車軸１１３ｂの両端には、車輪１１４ｂが取り付けられている。これにより、操作者は、ホイール部１２をつかんで、操作装置１０を図中の矢印Ａ方向又はＢ方向に移動させる操作（以下、「移動操作」という）を行うことができる。操作者によってホイール部１２が図中の矢印Ａ方向に動かされると、車輪１１４ａ，１１４ｂが反時計回りに回転し、操作装置１０が図中の矢印Ａ方向へと移動する。操作者によってホイール部１２が図中の矢印Ｂ方向に動かされると、車輪１１４ａ，１１４ｂが時計回りに回転し、操作装置１０が図中の矢印Ｂ方向へと移動する。また、図２に示すように、車軸１１３ｂには、モータ１１５が接続されている。このモータ１１５は、車軸１１３ｂを介して車輪１１４ｂを回転させる。モータ１１５には、距離センサ１５が設けられている。この距離センサ１５は、例えばエンコーダであり、車輪１１４ｂの回転数を計測し、その回転数に応じた２相のパルス列をセンサ信号として出力する。この車輪１１４ｂの回転数は、操作装置１０の移動距離に対応する値であるから、距離センサ１５は操作装置１０の移動距離を計測しているといえる。また、２相のパルス列の位相関係は、車輪１１４ｂの回転方向に対応して反転する。つまり、距離センサ１５は、ホイール部１２を用いて操作装置１０を移動させる操作が行われると、操作装置１０の移動量（移動距離）及び移動方向を表す検出信号であるセンサ信号を出力する操作検出手段である。
【００１７】
ホイール部１２は、例えばプラスティックで形成された内部が中空の円筒状の部材であり、後述する軸１３１が挿入される空洞を有している。このホイール部１２は、操作者により触れられた状態で操作される操作部材である。また、ホイール部１２は、上述したように支持部材１１２によって回転可能に支持されている。これにより、操作者は、ホイール部１２を図４中の矢印Ｆ方向に回転させる操作（以下、「回転操作」という）を行うことができる。操作者によって回転操作が行われると、ホイール部１２は、回転軸を中心として図中の矢印Ｆ方向に回転する。ホイール部１２の側面には、角度センサ１６が設けられている。この角度センサ１６は、例えばエンコーダであり、基準線ｋから見たホイール部１２の回転角度を計測し、その回転角度に応じた２相のパルス列をセンサ信号として出力する。つまり、角度センサ１６は、ホイール部１２を回転する操作が行われると、その操作に応じた検出信号であるセンサ信号を出力する操作検出手段である。
【００１８】
可動部１３は、軸１３１と、分銅１３２ａ，１３２ｂと、鉄心１３３とを備えている。図２に示すように、軸１３１は、ホイール部１２の内部を貫通するように設けられており、ホイール部１２の軸受け１２２によって図中の矢印Ａ方向又はＢ方向へ移動可能に支持されている。可動部１３は、軸１３１がホイール部１２の空洞内を移動することによって、ホイール部１２に対して相対的に移動する。軸１３１の両端には、分銅１３２ａ，１３２ｂが設けられている。この分銅１３２ａ，１３２ｂは、質量体として用いられる金属製の重りである。また、分銅１３２ａには、中央位置センサ１７が設けられている。この中央位置センサ１７は、例えばフォトインタラプタであり、図中の矢印ＡＢ方向における可動部１３の中心位置を検出する。分銅１３２ｂには、位置センサ１８が設けられている。この位置センサ１８は、例えば光センサであり、図中の矢印ＡＢ方向における可動部１３の位置を計測する。ここで、中央位置センサ１７及び位置センサ１８は、ホイール部１２の回転操作に連れて可動部１３が回転してしまうと、正確な位置を計測できなくなってしまう。そこで、分銅１３２ａには、可動部１３の連れ回りを抑止するための回転抑止部材１３４が設けられている。図に示すように、回転抑止部材１３４は、一方の端が分銅１３２ａに固定されており、他方の端が支持部材１１２に形成された孔２１０に通されている。これにより、ホイール部１２が回転されても、回転抑止部材１３４によって可動部１３の回転が妨げられるため、可動部１３が連れ回らないようになる。
【００１９】
ホイール部１２の内部に位置する軸１３１の中心部には、鉄心１３３が設けられている。また、ホイール部１２の内部には、コイル１２１ａ，１２１ｂが設けられている。ここで、図２を参照して、可動部１３の駆動原理について説明する。ホイール部１２のコイル１２１ａに電流が供給されると、コイル１２１ａと鉄心１３３との間に相互に吸引力が働き、鉄心１３３がコイル１２１ａに引き付けられる。これにより、可動部１３が図中の矢印Ａ方向へと移動する。一方、コイル１２１ｂに電流が供給されると、コイル１２１ｂと鉄心１３３との間に相互に吸引力が働き、鉄心１３３がコイル１２１ｂに引き付けられる。これにより、可動部１３が図中の矢印Ｂ方向へと移動する。つまり、コイル１２１ａ，１２１ｂは、ホイール部１２と可動部１３との間に相互に働く力を、ホイール部１２及び可動部１３に対して非接触で付与して、可動部１３を移動させる力付与手段である。
【００２０】
この可動部１３の駆動制御は、後述する変位データに基づいて行われる。図６は、変位データと可動部１３の位置との関係を示す図である。ここでは、変位データが−７５０〜７５０までの値に設定されている場合を想定する。例えば、変位データの値が−７５０である場合には、可動部１３の鉄心１３３が図中の矢印Ａ方向の端位置へと移動される。一方、変位データの値が７５０である場合には、可動部１３の鉄心１３３が図中の矢印Ｂ方向の端位置へと移動される。また、図に示すように、これらの端位置の間における可動部１３の鉄心１３３の位置と変位データの値とは、線形の関係になっている。
【００２１】
（コントロール装置の構成）
次に、コントロール装置２０の構成について説明する。図７は、コントロール装置２０の構成を示すブロック図である。同図に示すように、コントロール装置２０は、制御部２１と、電源部２２と、入出力部２３と、通信部２４とを備えている。制御部２１は、コントロール装置２０の各部を制御するとともに、操作装置１０の可動部１３の駆動を制御する。電源部２２は、コントロール装置２０の各部及び操作装置１０に電力を供給する。入出力部２３は、操作装置１０と制御部２１との間の信号のやり取りを制御する。例えば、入出力部２３は、操作装置１０の押し量センサ１４，距離センサ１５，角度センサ１６から出力されたセンサ信号を受け取り、制御部２１に供給する。また、入出力部２３は、制御部２１から供給された制御信号を操作装置１０へ出力する。通信部２４は、例えばシリアル通信により、コンピュータ装置３０とデータの送受信を行う。
【００２２】
（コンピュータ装置の構成）
次に、コンピュータ装置３０の構成について説明する。図８は、コンピュータ装置３０の構成を示すブロック図である。同図に示すように、コンピュータ装置３０は、ＣＰＵ（Central Processing Unit）３１と、ＲＯＭ（Read Only Memory）３２と、ＲＡＭ（Random Access Memory）３３と、記憶部３４と、通信部３５と、操作部３６と、表示部３７と、音源部３８と、放音部３９とを備えている。ＣＰＵ３１は、ＲＯＭ３２又は記憶部３４に記憶されているプログラムを実行して各種の処理を行う。ＲＯＭ３２は、コンピュータ装置３０の起動に必要なプログラムやデータを記憶している。ＲＡＭ３３は、ＣＰＵ３１がプログラムを実行する際のワークエリアとして使用される。記憶部３４は、例えばハードディスクであり、ＣＰＵ３１によって実行されるプログラムや各種データを記憶している。この記憶部３４には、フォースフィードバック生成ソフトウェア３４ａと楽音生成ソフトウェア３４ｂとが記憶されている。通信部３５は、例えばシリアル通信により、コントロール装置２０とデータの送受信を行う。操作部３６は、例えばキーボードとマウスであり、操作者の操作を受け付けて、その操作に応じた操作信号をＣＰＵ３１に入力する。表示部３７は、例えば液晶ディスプレイであり、ＣＰＵ３１の制御に応じた画像を表示する。音源部３８は、指定された楽音を表す楽音信号を生成して出力する。放音部３９は、例えばパワードスピーカと呼ばれるアンプ内蔵型のスピーカであり、楽音信号に応じた音を放音する。なお、ここでは、楽音信号を生成して音として出すことを「再生する」という。つまり、音源部３８と放音部３９とが協働することにより、楽音信号を再生する再生手段が実現される。
【００２３】
次に、楽音制御装置１の機能構成について説明する。図９は、楽音制御装置１の機能構成を示す図である。同図に示すように、コントロール装置２０の制御部２１は、データ変換部２０１と、サーボ制御部２０２として機能する。データ変換部２０１は、操作装置１０の角度センサ１６，押し量センサ１４，距離センサ１５から出力されたセンサ信号をセンサデータに変換する。サーボ制御部２０２は、コンピュータ装置３０から送信される変位データに基づいて、操作装置１０の可動部１３の駆動をサーボ制御する。また、コンピュータ装置３０のＣＰＵ３１は、フォースフィードバック生成部３０１と、楽音生成部３０２として機能する。フォースフィードバック生成部３０１は、ＣＰＵ３１が記憶部３４に記憶されているフォースフィードバック生成ソフトウェア３４ａを実行することにより実現される。このフォースフィードバック生成部３０１は、コントロール装置２０から送信されるセンサデータと予め決められた物理モデルＭとに基づいて、操作装置１０の可動部１３のホイール部１２に対する相対的な位置の目標となる目標変位を生成する。つまり、フォースフィードバック生成部３０１は、操作装置１０から出力されたセンサ信号と物理モデルＭとに基づいて目標変位を生成する目標変位生成手段である。楽音生成部３０２は、ＣＰＵ３１が記憶部３４に記憶されている楽音生成ソフトウェア３４ｂを実行することにより実現される。この楽音生成部３０２は、フォースフィードバック生成部３０１によって生成される目標変位及びコントロール装置２０から送信されるセンサデータに基づいて、音源部３８にて生成された楽音信号を編集する。
【００２４】
ここで、フォースフィードバック生成部３０１にて用いられる物理モデルＭについて説明する。この物理モデルＭは、例えば振動数、振幅、減衰力などの条件によって変化する物理的な運動を規定するものである。図１０は、物理モデルＭの一例である粘性減衰系のバネモデルを示す図である。このバネモデルでは、仮想可動部ｍが静止している状態から乱されると、仮想バネｇの弾性力によって仮想可動部ｍが図中の左右方向に振動を開始する。そして、摩擦などの減衰力によって仮想可動部ｍの振動が徐々に小さくなっていき、やがて仮想可動部ｍが静止するようになっている。
【００２５】
［動作］
次に、上述した図９を参照して、第１実施形態に係る楽音制御装置１の動作について説明する。まず、操作者は、コンピュータ装置３０の操作部３６を操作して、楽音の再生を指示する。音源部３８は、この操作により指示された楽音を表す楽音信号Ｓｏを生成し、放音部３９に供給する。放音部３９は、音源部３８から供給された楽音信号Ｓｏに応じた音を放音する。これにより、操作者によって指示された楽音が再生される。続いて、操作者は、再生中の楽音を聞きながら、操作装置１０を操作して、再生中の楽音を編集する。ここでは、操作者が操作装置１０のホイール部１２をつかんで、ホイール部１２の押し下げながら、操作装置１０を図２中の矢印Ｂ方向へ閾値以上の加速度で移動させる操作を行った場合を想定する。この場合、押し量センサ１４は、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号Ｓｂを出力する。また、距離センサ１５は、車輪１１４ｂの回転数を計測し、計測した回転数に応じた２相のパルス列をセンサ信号Ｓｃとして出力する。なお、この例では、操作者によってホイール部１２の回転操作が行われていないため、角度センサ１６からはセンサ信号が出力されない。
【００２６】
押し量センサ１４からセンサ信号Ｓｂが出力され、距離センサ１５からセンサ信号Ｓｃが出力されると、コントロール装置２０のデータ変換部２０１は、このセンサ信号Ｓｂ，Ｓｃを入出力部２３から受け取る。続いて、データ変換部２０１は、センサ信号Ｓｂに基づいてホイール部１２の押し下げ量を特定し、特定した押し下げ量を表すセンサデータＤｂを生成する。また、データ変換部２０１は、センサ信号Ｓｃのパルス数をカウントしてホイール部１２の移動距離を特定するとともに、センサ信号Ｓｃのパルス列の位相関係に基づいて操作装置１０の移動方向を特定する。そして、データ変換部２０１は、特定した移動距離及び移動方向を表すセンサデータＤｃを生成する。続いて、データ変換部２０１は、生成したセンサデータＤｂ，Ｄｃを通信部２４によってコンピュータ装置３０に送信する。
【００２７】
コントロール装置２０からセンサデータＤｂ，Ｄｃが送信されてくると、コンピュータ装置３０のＣＰＵ３１は、このセンサデータＤｂ，Ｄｃを通信部３５によって受信する。続いて、ＣＰＵ３１は、エディットモードをオンにする操作が行われたか否かを判定し、この操作が行われた場合にはエディットモードをオンにする。ここでは、エディットモードをオンにする操作が、ホイール部１２の押し下げながら、操作装置１０を閾値以上の加速度で移動させる操作であるものとする。なお、エディットモードをオンにする操作が行われていない場合には、上述した楽音の再生が引き続き行われる。この例では、ホイール部１２の押し下げ操作を表すセンサデータＤｂと、操作装置１０の移動操作を表すセンサデータＤｃとが受信され、さらにセンサデータＤｃの表す単位時間当たりの移動距離から求められる加速度が閾値以上になるため、ＣＰＵ３１は、エディットモードをオンにする操作が行われたと判定し、エディットモードをオンにする。エディットモードがオンになると、フォースフィードバック生成部３０１及び楽音生成部３０２は以下の処理を行う。
【００２８】
まず、フォースフィードバック生成部３０１が行う処理について説明する。図１１は、フォースフィードバック生成部３０１の処理を示す図である。まず、フォースフィードバック生成部３０１は、受信したセンサデータＤｂ，Ｄｃに基づいて、物理モデルＭのパラメータを変更する（ステップＳ１１）。図１２は、センサデータＤｂに基づくパラメータの変更の一例を示す図である。図の例では、センサデータＤｂに基づいて図１０に示したバネモデルの振幅と減衰力とが変更される。具体的には、フォースフィードバック生成部３０１は、図１２（ａ）に示すように、センサデータＤｂの表すホイール部１２の押し下げ量が大きくなるほど、バネモデルの振幅を大きくする。さらに、フォースフィードバック生成部３０１は、図１２（ｂ）に示すように、センサデータＤｂの表すホイール部１２の押し下げ量が大きくなるほど、バネモデルの減衰力を小さくする。なお、フォースフィードバック生成部３０１は、ホイール部１２の押し下げ量が最大である場合には、減衰力を０にする。また、図１３は、センサデータＤｃに基づくパラメータの変更の一例を示す図である。図の例では、センサデータＤｃに基づいて図１０に示したバネモデルの振動数が変更される。具体的には、フォースフィードバック生成部３０１は、図に示すように、センサデータＤｃの表す移動距離が大きくなるほど、バネモデルの振動数を大きくする。
【００２９】
続いて、フォースフィードバック生成部３０１は、パラメータが変更された物理モデルＭを用いて仮想可動部ｍの振動を表す振動波形Ｘを生成する（図１１のステップＳ１２）。このとき生成される振動波形Ｘは、物理モデルＭのパラメータによって異なる波形になる。例えば、上述したようにバネモデルの振動数が大きくなると、図１４（ａ）に示すように、生成される振動波形Ｘの周波数が大きくなる。また、上述したようにバネモデルの振幅が大きくなると、図１４（ｂ）に示すように、生成される振動波形Ｘの振幅が大きくなる。また、上述したようにバネモデルの減衰力が小さくなると、図１４（ｃ）に示すように、生成される振動波形Ｘが０に収束するまでの時間が長くなる。なお、バネモデルの減衰力が０の場合には、振動波形Ｘは収束しない。
【００３０】
続いて、フォースフィードバック生成部３０１は、生成した振動波形Ｘを−７５０〜７５０までの値に数値化して、可動部１３の目標変位を表す変位データＤｘを生成する（図１１のステップＳ１３）。そして、フォースフィードバック生成部３０１は、生成した変位データＤｘを通信部３５によってコントロール装置２０に送信する。
【００３１】
次に、楽音生成部３０２が行う処理について説明する。図１５は、楽音生成部３０２の処理を示す図である。まず、楽音生成部３０２は、センサデータＤｂが受信された時点の楽音信号Ｓｏの再生位置をループ再生開始位置Ｐ０として決定する（ステップＳＡ２１）。ここでは、ホイール部１２を押し下げる操作が、楽音を繰り返し再生するよう指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、楽音を繰り返し再生するよう指示する操作に応じたセンサ信号が操作装置１０から出力されたタイミングに応じて、再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置であるループ再生開始位置として決定する再生開始位置決定手段である。
【００３２】
続いて、楽音生成部３０２は、フォースフィードバック生成部３０１にて生成された振動波形Ｘに基づいて、ループ再生を行うときのループ期間Ｔを複数決定する（ステップＳＡ２２）。この振動波形Ｘは、フォースフィードバック生成部３０１によって時系列に生成された目標変位を連ねた波形である。つまり、楽音生成部３０２は、フォースフィードバック生成部３０１によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの再生期間であるループ期間を複数決定する再生期間決定手段である。図１６を参照して具体的に説明すると、楽音生成部３０２は、振動波形Ｘの半周期に応じた複数のループ期間Ｔを決定する。図の例では、振動波形Ｘの半周期ｌ１に対応するループ期間Ｔ１，半周期ｌ２に対応するループ期間Ｔ２、半周期ｌ３に対応するループ期間Ｔ３，・・・が決定される。なお、図中の振動波形Ｘのように減衰振動を表す波形が用いられる場合には、決定されるループ期間Ｔが徐々に短くなっていき、やがて０となる。
【００３３】
続いて、楽音生成部３０２は、上述したステップＳＡ２１にて決定されたループ再生開始位置Ｐ０と、上述したステップＳＡ２２にて決定されたループ期間Ｔとに基づいて、ループ再生処理を行う（図１５のステップＳＡ２３）。図１６を参照して具体的に説明すると、楽音生成部３０２は、まずループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ１だけ経過したループ終了位置Ｐ１に到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ２だけ経過したループ終了位置Ｐ２に到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔ３だけ経過したループ終了位置Ｐ３に到達すると、ループ再生開始位置Ｐ０に戻る。楽音生成部３０２は、このループ再生処理を、ループ期間Ｔが０になるか、操作者がホイール部１２の押し下げ操作をやめる、すなわちエディットモードがオフになるまで繰り返す。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、ループ再生が実現される。つまり、楽音生成部３０２は、ループ再生開始位置から各々のループ期間に含まれる楽音信号を順番に再生させる再生制御手段である。なお、ループ再生処理が終了した場合には、再び楽音信号Ｓｏが時間軸に沿って再生される。このとき、楽音信号Ｓｏは、例えばループ再生開始位置Ｐ０から再生されてもよいし、ループ再生が開始されてからの時間経過に応じた位置から再生されてもよい。
【００３４】
図９に示すように、コンピュータ装置３０から変位データＤｘが送信されてくると、コントロール装置２０のサーボ制御部２０２は、この変位データＤｘを通信部２４によって受信する。続いて、サーボ制御部２０２は、中央位置センサ１７の検出結果を用いて、操作装置１０の可動部１３を中心位置へと移動させる。具体的には、サーボ制御部２０２は、中央位置センサ１７によって検出された中心位置へと可動部１３を移動させる制御信号を生成し、生成した制御信号を入出力部２３から操作装置１０へ出力する。これにより、ホイール部１２のコイル１２１ａ又は１２１ｂに電流が供給されて、可動部１３が図６中の矢印ＡＢ方向における中心位置へと移動する。
【００３５】
続いて、サーボ制御部２０２は、位置センサ１８の検出結果を用いて、変位データＤｘが表す目標変位へと操作装置１０の可動部１３を移動させる。具体的には、サーボ制御部２０２は、変位データＤｘが表す目標変位へと可動部１３を移動させる制御信号Ｓｘを生成し、生成した制御信号Ｓｘを入出力部２３から操作装置１０へ出力する。例えば、変位データＤｘの値が−７５０である場合には、サーボ制御部２０２は、可動部１３の鉄心１３３を図６中の矢印Ａ方向の端位置へと移動させる制御信号Ｓｘを生成し出力する。また、変位データＤｘの値が７５０である場合には、サーボ制御部２０２は、可動部１３の鉄心１３３を図６中の矢印Ｂ方向の端位置へと移動させる制御信号Ｓｘを生成し出力する。これにより、可動部１３は、変位データＤｘが表す目標変位へと移動する。上述したように、この変位データＤｘは、物理モデルＭの仮想可動部ｍの動きに基づいて生成されている。つまり、可動部１３は、物理モデルＭの仮想可動部ｍと同じような動きをすることになる。このようにして、ホイール部１２のコイル１２１ａ又は１２１ｂによって可動部１３が駆動されると、可動部１３の質量と加速度の変化に応じた力がホイール部１２に加わり、ホイール部１２が振動する。このとき、操作者は、ホイール部１２を触っているため、このホイール部１２の振動を体で感じる。
【００３６】
また、このとき、コンピュータ装置３０の放音部３９は、楽音生成部３０２から供給された楽音信号Ｓｌに応じた音を放音する。放音部３９から放音される音と、ホイール部１２の振動とは、いずれも操作装置１０の操作に基づいて生成されている。したがって、操作者は、ホイール部１２の操作に応じて編集された音を聴きながら、編集された音に対応する振動を感じることができる。
【００３７】
＜第２実施形態＞
次に、本発明に係る第２実施形態について説明する。この第２実施形態では、フォースフィードバック生成部３０１及び楽音生成部３０２にて上述した第１実施形態とは異なる処理が行われる。なお、第２実施形態に係る楽音制御装置１の構成は、上述した第１実施形態と同じ構成であるため、その説明を省略する。
【００３８】
[動作]
図１７を参照して、第２実施形態に係る楽音制御装置１の動作について説明する。まず、操作者は、上述と同様に、コンピュータ装置３０の操作部３６を操作して、楽音の再生を指示する。これにより、操作者によって指示された楽音が再生される。続いて、操作者は、再生中の楽音を聞きながら、操作装置１０を操作して、再生中の楽音を編集する。ここでは、操作者が操作装置１０のホイール部１２をつかんで、ホイール部１２の回転させながら、ホイール部１２を押し下げる操作を行った場合を想定する。この場合、角度センサ１６は、ホイール部１２の回転角度を計測し、計測した回転角度に応じた２相のパルス列をセンサ信号Ｓａとして出力する。また、押し量センサ１４は、ホイール部１２の押し下げ量を計測し、計測した押し下げ量に応じたセンサ信号Ｓｂを出力する。なお、この例では、操作者によって操作装置１０の移動操作が行われていないため、距離センサ１５からはセンサ信号が出力されない。
【００３９】
角度センサ１６からセンサ信号Ｓａが出力され、押し量センサ１４からセンサ信号Ｓｂが出力されると、コントロール装置２０のデータ変換部２０１は、このセンサ信号Ｓａ，Ｓｂを入出力部２３から受け取る。続いて、データ変換部２０１は、センサ信号Ｓａのパルス数をカウントしてホイール部１２の回転角度を特定し、特定した回転角度を表すセンサデータＤａを生成する。また、データ変換部２０１は、センサ信号Ｓｂに基づいてホイール部１２の押し下げ量を特定し、特定した押し下げ量を表すセンサデータＤｂを生成する。続いて、データ変換部２０１は、生成したセンサデータＤａ，Ｄｂを通信部２４によってコンピュータ装置３０に送信する。
【００４０】
コントロール装置２０からセンサデータＤａ，Ｄｂが送信されてくると、コンピュータ装置３０のＣＰＵ３１は、このセンサデータＤａ，Ｄｂを通信部３５によって受信する。続いて、ＣＰＵ３１は、ホイール部１２を押し下げる操作が行われたか否かを判定し、この操作が行われた場合にはエディットモードをオンにする。この例では、ホイール部１２の押し下げ操作を表すセンサデータＤｂが受信されるため、ＣＰＵ３１は、エディットモードをオンにする。エディットモードがオンになると、フォースフィードバック生成部３０１及び楽音生成部３０２は以下の処理を行う。
【００４１】
まず、楽音生成部３０２が行う処理について説明する。図１８は、楽音生成部３０２の処理を示す図である。楽音生成部３０２は、上述した第１実施形態のステップＳＡ２１と同様に、ループ再生開始位置Ｐ０を決定する（ステップＳＢ２１）。続いて、楽音生成部３０２は、受信したセンサデータＤａの表す回転角度に基づいて、ループ期間Ｔｎを決定する（ステップＳＢ２２）。つまり、楽音生成部３０２は、操作装置１０から出力されたセンサ信号に基づいて、楽音を繰り返し再生するときの楽音の再生期間であるループ期間を決定する。例えば、楽音生成部３０２は、センサデータＤａの表す回転角度が大きいほど、ループ期間Ｔｎを長くする。続いて、楽音生成部３０２は、上述したステップＳＢ２１にて決定されたループ再生開始位置Ｐ０と、上述したステップＳＢ２２にて決定されたループ期間Ｔｎとに基づいて、ループ再生処理を行う（ステップＳＢ２３）。図１９を参照して具体的に説明すると、楽音生成部３０２は、まずループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ再生開始位置Ｐ０からループ期間Ｔｎだけ経過したループ終了位置Ｐｎに到達すると、ループ再生開始位置Ｐ０に戻る。続いて、楽音生成部３０２は、再びループ再生開始位置Ｐ０から時間軸に沿って楽音信号を抽出していき、ループ終了位置Ｐｎに到達するとループ再生開始位置Ｐ０に戻る。楽音生成部３０２は、このループ再生処理を、操作者がホイール部１２の押し下げ操作をやめる、すなわちエディットモードがオフになるまで繰り返す。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、ループ再生が実現される。つまり、楽音生成部３０２は、ループ再生開始位置からループ期間に含まれる楽音信号を繰り返し再生させる。
【００４２】
次に、フォースフィードバック生成部３０１が行う処理について説明する。フォースフィードバック生成部３０１は、楽音生成部３０２にて抽出されたループ楽音信号Ｓｌを取得し、取得したループ楽音信号Ｓｌの波形を振動波形Ｘとする。続いて、フォースフィードバック生成部３０１は、振動波形Ｘを−７５０〜７５０までの値に数値化し、可動部１３の目標変位を表す変位データＤｘを生成する。つまり、フォースフィードバック生成部３０１は、ループ再生開始位置から開始されるループ期間に含まれる楽音信号の波形に基づいて、可動部１３のホイール部１２に対する相対的な位置の目標となる目標変位を生成する。そして、フォースフィードバック生成部３０１は、生成した変位データＤｘを通信部３５によってコントロール装置２０に送信する。以降の動作は、上述した第１実施形態の動作と同様である。
【００４３】
以上説明した第１及び第２実施形態によれば、操作装置１０の操作に応じて音を編集するとともに、編集された音に応じた力を操作者に感じさせることができる。また、上述した構成では、可動部１３の軸１３１の両端に分銅１３２ａ，１３２ｂが設けられており、非接触で与えられる力によって左右に移動されるようになっているため、操作者の体に伝わるようなしっかりとした振動を発生させることができる。また、上述した構成では、可動部１３の鉄心１３３が端位置へと移動された場合にも、分銅１３２ａ，１３２ｂがホイール部１２に接触しないようになっているため、可動部１３の動作を正確に制御することができる。さらに、上述した構成では、例えばモータなどの駆動部を可動部１３に直接接続して可動部１３を移動させる構成と比べて、可動部１３を移動させるために必要な力が少なくて済むため、それに伴う発熱も軽減される。
【００４４】
＜変形例＞
以上が実施形態の説明であるが、この実施形態の内容は以下のように変形し得る。また、以下の各変形例を適宜組み合わせてもよい。
（変形例１）
上述した第１実施形態において、フォースフィードバック生成部３０１にて用いられる物理モデルＭは、図１０に示した粘性減衰系のバネモデルに限らない。要するに、物理モデルＭは、操作装置１０から出力されるセンサ信号に応じた条件の下で仮想的に行われる物理的な運動を規定するものであればよい。図２０（ａ）は、磁力を利用した物理モデルを示す図である。同図に示すように、この物理モデルにおいては、負極性の磁性体ｎ１，ｎ２の間に正極性の仮想可動部ｍａが配置されており、仮想可動部ｍａの磁力を変化させることで、仮想可動部ｍａが振動するようになっている。この場合、上述したステップＳ１１では、例えば仮想可動部ｍａの磁力の大きさなどが変更される。また、図２０（ｂ）は、ゴムボールモデルを示す図である。同図に示すように、このゴムボールモデルにおいては、壁面ｗ１と壁面ｗ２との間に弾性を有する仮想可動部ｍｂが配置されており、仮想可動部ｍｂが静止している状態から乱されると、自身の弾性力によって壁面ｗ１と壁面ｗ２との間を行き来するようになっている。この場合、上述したステップＳ１１では、例えば上述したセンサデータＤａに基づいて仮想可動部ｍｂの弾性力が変更され、上述したセンサデータＤｂに基づいてゴムボールモデルの減衰力が変更される。
【００４５】
（変形例２）
上述した第１実施形態では、フォースフィードバック生成部３０１にて用いられる物理モデルＭは１つだけであったが、複数の物理モデルＭが用いられてもよい。この場合、フォースフィードバック生成部３０１は、センサデータ毎に異なる物理モデルＭを選択し、選択した物理モデルＭのパラメータを対応するセンサデータに基づいて変更する。続いて、フォースフィードバック生成部３０１は、それらの物理モデルＭに基づいて複数の振動波形を生成し、生成した複数の振動波形を合成してから変位データを生成する。
【００４６】
（変形例３）
上述した第１実施形態では、単一のセンサデータによって物理モデルＭのパラメータを変更していたが、複数のセンサデータの組み合わせによって物理モデルＭのパラメータを変更してもよい。例えば、ホイール部１２の回転操作を表すセンサデータＤａと、ホイール部１２の押し下げ操作を表すセンサデータＤｂとの組み合わせによって、物理モデルＭの或るパラメータを変更してもよい。
【００４７】
（変形例４）
上述した第１実施形態では、物理モデルＭを用いて目標変位を生成する例を挙げて説明したが、物理モデルＭを用いずに目標変位を生成してもよい。この場合、コンピュータ装置３０の記憶部３４には、センサデータ毎に、そのセンサデータが採り得る値と、その値に応じた目標変位とが対応付けられたテーブルが記憶される。なお、センサデータのどの値にどのような目標変位を対応付けるかは任意である。例えば、センサデータの各値と、その値のセンサデータに基づいて上述のようにパラメータが変更されたときに物理モデルＭによって生成される目標変位とを対応付けて記憶させておいてもよい。そして、フォースフィードバック生成部３０１は、受信したセンサデータの値に対応付けて記憶された目標変位を特定し、特定した目標変位に応じた変位データをコントロール装置２０に送信する。
【００４８】
（変形例５）
上述した第１実施形態では、物理モデルＭのパラメータがセンサデータに基づいて変更されていたが、物理モデルＭのパラメータの変更に用いられるものはこれに限らない。例えば、コンピュータ装置３０の操作部３６の操作によって物理モデルＭのパラメータが変更されてもよい。あるいは、フォースフィードバック生成ソフトウェア３４ａによって物理モデルＭのパラメータが変更されてもよい。
【００４９】
（変形例６）
上述した実施形態では、ホイール部１２のコイル１２１ａ，１２１ｂと可動部１３の鉄心１３３とによって可動部１３を駆動する構成を例に挙げて説明したが、可動部１３を駆動する構成はこれに限らない。例えば、空気圧を利用して可動部１３を駆動させてもよい。要するに、操作装置１０は、ホイール部１２と可動部１３との間に相互に働く力を、ホイール部１２及び可動部１３に対して非接触で付与する力付与手段を備えていればよい。
【００５０】
（変形例７）
上述した第１実施形態において、楽音生成部３０２は、エディットモードがオンになった後に、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、リバースループ再生処理を行ってもよい。このリバースループ生成処理では、ループ期間に含まれる楽音信号を時間的に逆に逆再生させる処理が行われる。また、ここでは、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が、楽音信号を時間的に逆に再生させる逆再生を指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表すセンサ信号が操作装置１０から出力された場合には、ループ期間に含まれる楽音信号を逆再生させる。
【００５１】
上述した図１６を参照して、リバースループ再生処理について具体的に説明する。まず、楽音生成部３０２は、上述したステップＳＡ２１，ＳＡ２２の処理を行う。続いて、楽音生成部３０２は、図中のループ終了位置Ｐ１から時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、ループ終了位置Ｐ２に戻る。続いて、楽音生成部３０２は、ループ終了位置Ｐ２から時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、ループ終了位置Ｐ３に戻る。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、リバースループ再生が実現される。
なお、リバースループ再生が行われている間に、ホイール部１２を押し下げた状態で、エディットモードをオンにするための移動操作と同じ方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、上述した第１実施形態にて説明したループ再生に戻ってもよい。
【００５２】
また、上述した第２実施形態においても、楽音生成部３０２は、エディットモードがオンになった後に、エディットモードをオンにするための移動操作とは逆の方向へ閾値以上の加速度で操作装置１０を移動させる操作が行われた場合には、リバースループ再生処理を行ってもよい。上述した図１９を参照して、第２実施形態に係るリバースループ再生処理について具体的に説明する。まず、楽音生成部３０２は、上述したステップＳＢ２１，ＳＢ２２の処理を行う。続いて、楽音生成部３０２は、図中のループ終了位置Ｐｎから時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、再びループ終了位置Ｐｎに戻る。続いて、楽音生成部３０２は、再びループ終了位置Ｐｎから時間軸と逆の方向に楽音信号を抽出していき、ループ再生開始位置Ｐ０に到達すると、再びループ終了位置Ｐｎに戻る。このようにして抽出された楽音信号は、ループ楽音信号Ｓｌとして放音部３９に供給される。これにより、第２実施形態に係るリバースループ再生が実現される。
【００５３】
（変形例８）
上述した実施形態において、楽音生成部３０２は、受信したセンサデータＤｂの表す押し下げ量が閾値以上である場合には、操作装置１０の移動操作を表すセンサデータＤｃが受信されると、そのセンサデータＤｃの表す移動距離及び移動方向に応じてループ再生開始位置Ｐ０を変更してもよい。ここでは、ホイール部１２を閾値以上の押し下げ量まで押し下げる操作が、ループ再生開始位置の変更を指示する操作として扱われるようになっている。つまり、楽音生成部３０２は、ホイール部１２においてループ再生開始位置の変更を指示する操作がなされた場合に、操作装置１０から出力されたセンサ信号の表す移動量及び移動方向に基づいて、ループ再生開始位置を変更する再生開始位置変更手段である。図２１（ａ）を参照して具体的に説明すると、楽音生成部３０２は、例えば操作装置１０が図中の矢印Ａ方向へと移動された場合には、上述にて決定されたループ再生開始位置Ｐ０を、操作装置１０の移動距離に応じた分だけ時間軸方向へずらす。これにより、ループ再生開始位置Ｐ０が図中の位置Ｐ０１に変更される。また、楽音生成部３０２は、操作装置１０が図中の矢印Ｂ方向へと移動された場合には、上述にて決定されたループ再生開始位置Ｐ０を、操作装置１０の移動距離に応じた分だけ時間軸と逆方向へずらす。これにより、ループ再生開始位置Ｐ０が図中の位置Ｐ０２に変更される。
【００５４】
さらに、楽音生成部３０２は、楽音信号Ｓｏのピーク位置に基づいてループ再生開始位置Ｐ０を変更してもよい。図２１（ｂ）を参照して具体的に説明すると、まず楽音生成部３０２は、楽音信号Ｓｏに対してオンセット分析を行い、音圧レベルが閾値以上の部分となるピーク位置Ｑ０１〜Ｑ０３を検出する。続いて、楽音生成部３０２は、上述にて決定されたループ再生開始位置Ｐ０から、操作装置１０の移動方向及び移動距離に対応する位置Ｐ０１までの区間を変更区間Ｎとして特定する。続いて、楽音生成部３０２は、特定した変更区間Ｎに含まれるピーク位置Ｑ０３にループ再生開始位置Ｐ０をずらす。つまり、楽音生成部３０２は、ホイール部１２において繰り返し再生開始位置の変更を指示する操作がなされた場合に、再生されている楽音信号において、ループ再生開始位置から、操作装置１０から出力されたセンサ信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、この楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された区間に含まれるピーク位置にループ再生開始位置を変更する。これにより、エッジのある音をループ再生の開始点とすることができる。
また、楽音生成部３０２は、特定した変更区間Ｎ内に複数のピーク位置が含まれている場合には、ループ再生開始位置Ｐ０から最も近いピーク位置にループ再生開始位置Ｐ０をずらしてもよいし、或いは操作装置１０の移動時の加速度に応じたピーク位置にループ再生開始位置Ｐ０をずらしてもよい。
【００５５】
（変形例９）
上述した実施形態において、操作装置１０には、ホイール部１２の押し下げ操作を固定するロックボタンが設けられていてもよい。この場合、操作者がホイール部１２を所望の所まで押し下げてこのロックボタンを押すと、操作者が押し下げ操作をやめても、ホイール部１２が押し下げられた状態のまま固定される。これにより、操作者がホイール部１２を押し下げ続けなくても、ループ再生を継続することができる。
【００５６】
（変形例１０）
上述した第１実施形態では、センサデータＤｂ，Ｄｃに基づいて図１２及び図１３に示すように物理モデルＭのパラメータを変更する例を挙げて説明したが、どのセンサデータによって物理モデルＭのどのパラメータを変更するか、また、センサデータの値によって物理モデルＭのパラメータをどのように変更するかは任意に設定すればよい。
【００５７】
（変形例１１）
上述した実施形態において、コントロール装置２０のデータ変換部２０１，サーボ制御部２０２は、ＣＰＵが１又は複数のプログラムを実行することにより実現されてもよいし、１又は複数のハードウェアによって実現されてもよい。また、コンピュータ装置３０のフォースフィードバック生成部３０１，楽音生成部３０２は、ＣＰＵ３１と他のハードウェアとの協働によって実現されてもよいし、ＣＰＵ３１に代えて１又は複数のハードウェアによって実現されてもよい。また、ＣＰＵ３１によって行われる処理は、単一のプログラムによって実現されてもよいし、複数のプログラムによって実現されてもよい。また、ＣＰＵ３１によって実行される各プログラムは、磁気テープや磁気ディスクなどの磁気記録媒体、光ディスクなどの光記録媒体、光磁気記録媒体、半導体メモリなどの、コンピュータ装置が読み取り可能な記録媒体に記憶された状態で提供し得る。また、このプログラムを、インターネットのようなネットワーク経由でダウンロードさせることも可能である。
【符号の説明】
【００５８】
１…楽音制御装置、１０…操作装置、１１…台車部、１２…ホイール部、１２１ａ，１２１ｂ…コイル、１３…可動部、１３１…軸、１３２ａ，１３２ｂ…分銅、１３３…鉄心、１４…押し量センサ、１５…距離センサ、１６…角度センサ、１７…中央位置センサ、１８…位置センサ、２０…コントロール装置、３０…コンピュータ装置。
【特許請求の範囲】
【請求項１】
操作者により操作される操作部材と、
前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、
前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、
前記操作検出手段から出力された検出信号に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、
前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と、
楽音信号を再生する再生手段と、
前記目標変位生成手段によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を複数決定する再生期間決定手段と、
楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、
前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された各々の再生期間に含まれる楽音信号を前記再生手段に順番に再生させる再生制御手段と
を備えることを特徴とする楽音制御装置。
【請求項２】
操作者により操作される操作部材と、
前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、
前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、
楽音信号を再生する再生手段と、
前記操作検出手段から出力された検出信号に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を決定する再生期間決定手段と、
楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、
前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された再生期間に含まれる楽音信号を前記再生手段に繰り返し再生させる再生制御手段と、
前記繰り返し再生開始位置から開始される前記再生期間に含まれる楽音信号の波形に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、
前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と
を備えることを特徴とする楽音制御装置。
【請求項３】
前記操作検出手段は、前記操作部材を移動させる操作が行われると、当該操作部材の移動量及び移動方向を表す検出信号を出力し、
前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に基づいて、前記繰り返し再生開始位置を変更する再生開始位置変更手段を備える
ことを特徴とする請求項１又は２に記載の楽音制御装置。
【請求項４】
前記再生開始位置変更手段は、
前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、
前記再生手段によって再生されている楽音信号において、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、
当該楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された前記区間に含まれるピーク位置に前記繰り返し再生開始位置を変更する
ことを特徴とする請求項３に記載の楽音制御装置。
【請求項５】
前記再生制御手段は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表す検出信号が前記操作検出手段から出力された場合には、前記再生期間に含まれる楽音信号を前記再生手段により逆再生させる
ことを特徴とする請求項１〜４のいずれか１項に記載の楽音制御装置。
【請求項６】
前記目標変位生成手段は、前記検出信号に応じた条件の下で仮想的に行われる物理的な運動を規定した物理モデルに基づいて前記目標変位を生成する
ことを特徴とする請求項１に記載の楽音制御装置。
【請求項１】
操作者により操作される操作部材と、
前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、
前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、
前記操作検出手段から出力された検出信号に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、
前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と、
楽音信号を再生する再生手段と、
前記目標変位生成手段によって時系列に生成された目標変位を連ねた波形の周期に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を複数決定する再生期間決定手段と、
楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、
前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された各々の再生期間に含まれる楽音信号を前記再生手段に順番に再生させる再生制御手段と
を備えることを特徴とする楽音制御装置。
【請求項２】
操作者により操作される操作部材と、
前記操作部材が操作されると、当該操作に応じた検出信号を出力する操作検出手段と、
前記操作部材によって移動可能に支持され、当該操作部材に対して相対的に移動する可動部と、
楽音信号を再生する再生手段と、
前記操作検出手段から出力された検出信号に基づいて、楽音信号を繰り返し再生するときの当該楽音信号の再生期間を決定する再生期間決定手段と、
楽音を繰り返し再生するよう指示する操作に応じた検出信号が前記操作検出手段から出力されたタイミングに応じて、前記再生手段によって再生されている楽音信号における時間軸上の位置を、楽音の再生を開始する繰り返し再生開始位置として決定する再生開始位置決定手段と、
前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記再生期間決定手段によって決定された再生期間に含まれる楽音信号を前記再生手段に繰り返し再生させる再生制御手段と、
前記繰り返し再生開始位置から開始される前記再生期間に含まれる楽音信号の波形に基づいて、前記可動部の前記操作部材に対する相対的な位置の目標となる目標変位を生成する目標変位生成手段と、
前記操作部材と前記可動部との間に相互に働く力を、前記操作部材及び前記可動部に対して非接触で付与して、前記目標変位生成手段によって生成された目標変位へと前記可動部を移動させる力付与手段と
を備えることを特徴とする楽音制御装置。
【請求項３】
前記操作検出手段は、前記操作部材を移動させる操作が行われると、当該操作部材の移動量及び移動方向を表す検出信号を出力し、
前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に基づいて、前記繰り返し再生開始位置を変更する再生開始位置変更手段を備える
ことを特徴とする請求項１又は２に記載の楽音制御装置。
【請求項４】
前記再生開始位置変更手段は、
前記操作部材において前記繰り返し再生開始位置の変更を指示する操作がなされた場合に、
前記再生手段によって再生されている楽音信号において、前記再生開始位置決定手段によって決定された繰り返し再生開始位置から、前記操作検出手段から出力された検出信号の表す移動量及び移動方向に対応する時間軸上の位置までの区間を特定し、
当該楽音信号において音圧レベルが閾値以上となる複数のピーク位置のうち、特定された前記区間に含まれるピーク位置に前記繰り返し再生開始位置を変更する
ことを特徴とする請求項３に記載の楽音制御装置。
【請求項５】
前記再生制御手段は、楽音信号を時間的に逆に再生させる逆再生を指示する操作を表す検出信号が前記操作検出手段から出力された場合には、前記再生期間に含まれる楽音信号を前記再生手段により逆再生させる
ことを特徴とする請求項１〜４のいずれか１項に記載の楽音制御装置。
【請求項６】
前記目標変位生成手段は、前記検出信号に応じた条件の下で仮想的に行われる物理的な運動を規定した物理モデルに基づいて前記目標変位を生成する
ことを特徴とする請求項１に記載の楽音制御装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【公開番号】特開２０１０−２２４０４８（Ｐ２０１０−２２４０４８Ａ）
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願番号】特願２００９−６８８３６（Ｐ２００９−６８８３６）
【出願日】平成２１年３月１９日（２００９．３．１９）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願日】平成２１年３月１９日（２００９．３．１９）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
[ Back to top ]