情報処理システム、情報処理装置、及び情報処理方法
【課題】映像を表示する画面に対する操作から、制御対象の音声を特定し、制御することができる情報処理システム、情報処理装置、及び情報処理方法を提供すること。
【解決手段】情報処理システムは、複数のマイクロホンと、撮像装置と、音声を処理する音声処理装置と、音声処理装置に対して音声制御情報を出力する情報処理装置とを有し、情報処理装置は、映像を表示する表示部と、表示部の表示画面上の座標位置を入力する座標入力部と、座標入力部によって入力された座標位置付近に音声調整インタフェースを映像に重ねて表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、映像中の座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び音声調整インタフェースに対する座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する。
【解決手段】情報処理システムは、複数のマイクロホンと、撮像装置と、音声を処理する音声処理装置と、音声処理装置に対して音声制御情報を出力する情報処理装置とを有し、情報処理装置は、映像を表示する表示部と、表示部の表示画面上の座標位置を入力する座標入力部と、座標入力部によって入力された座標位置付近に音声調整インタフェースを映像に重ねて表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、映像中の座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び音声調整インタフェースに対する座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理システム、情報処理装置、及び情報処理方法に関し、特に、音声制御することの出来る情報処理システム、情報処理装置、及び情報処理方法に関する。
【背景技術】
【０００２】
近年、テレビ電話及びテレビ会議など、離れた拠点間をネットワークで結び、遠隔地にいる相手と映像及び音声を用いてコミュニケーションすることができるシステムが利用されるようになってきている。
【０００３】
特に、複数人でこのようなシステムを利用する場合には、次のような問題が発生することがある。例えば、音声を取得するマイクからの距離、角度、及び個人の音声の大きさはそれぞれ異なるため、特定の音声について聞き取りづらい状況が発生することがある。また、例えば、プロジェクタなどの機器から発生するファン音などの動作音、及び、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）のタイプ音など人の動作に応じて発生する動作音などが、必要以上に大きく集音されてしまうこともある。従って、複数人でコミュニケーションするシステムにおいては、音声の制御が重要となる。
【０００４】
そこで、様々な音源からの音声を、分離して取得することによって、分離取得された音声を個別に制御出来るようにする方法が提案されている。例えば、ピン・マイクロホンを個別に装着することによって、人毎に音声を取得することが出来る。また、例えば、特許文献１には、椅子に多数のマイクロホンを埋め込むことによって、ピン・マイクロホンを装着することなく、人毎に音声を分離取得することの出来る椅子が提案されている。また、例えば、特許文献２には、音声を分離取得し、着席位置に応じた放音を行う音声会議システムが提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７-３３６０１０号公報
【特許文献２】特開２００８−１７１２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、音源毎に音声を分離取得することが出来たとしても、音声の調整をする際にはどのマイクロホンでどの音源からの音声が取得されているのかを特定する必要があるが、この特定が困難であるという問題があった。
【０００７】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、映像を表示する画面に対する操作から、制御対象の音声を特定し、制御することが可能な、新規かつ改良された情報処理装置及び情報処理方法を提供することにある。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明のある観点によれば、複数のマイクロホンと、映像を撮影する撮像装置と、上記複数のマイクロホンによって取得された音声を処理する音声処理装置と、上記映像及び上記音声処理装置において処理された音声を出力し、上記音声処理装置に対して音声制御情報を出力する情報処理装置と、を有し、上記情報処理装置は、映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する、情報処理システムが提供される。
【０００９】
かかる構成によれば、複数のマイクロホンによって取得された音声は、音声処理装置において処理され、情報処理装置において出力される。情報処理装置は、表示部において映像を出力すると共に、音声出力部において、音声処理装置において処理された音声を出力する。さらに、情報処理装置は、音声処理装置に音声制御情報を出力することも出来る。このとき、情報処理装置は、ユーザが情報処理装置の表示部に表示された映像を見ながら、座標入力部を用いて音声を制御したい対象を入力すると、その座標位置に音声調整インタフェースを表示する。そして、情報処理装置は、対応情報を用いて座標位置から制御対象のマイクロホンを特定する。ユーザが音声調整インタフェースを操作したときに、情報処理装置は、その操作の情報及び特定したマイクロホンのマイク識別子に基づいて音声制御情報を作成して、音声処理装置に対して出力する。これにより、ユーザは、映像を見ながらの直感的な操作により、操作と制御したいマイクロホンとの対応を考えることなく、音声制御を実行することが出来るようになる。
【００１０】
また、音源には予め識別のための音源識別子が付与されており、上記対応情報は、上記音源識別子及び上記マイク識別子の対応関係を収集して生成された情報であってもよい。
【００１１】
また、上記複数のマイクロホンは、音声取得装置に内蔵されており、上記音声取得装置は、上記音源識別子を受信する受信器を有し、上記音声取得装置の表面には、音声取得装置を識別するための音声取得装置識別子が埋め込まれた認識コードが表示され、上記対応情報は、上記音声取得装置識別子、上記音源識別子、上記受信器に付与された受信器識別子、及び上記マイク識別子の対応関係を収集して生成された情報であり、上記制御部は、上記映像中の上記認識コードから上記音声取得装置識別子を読取り、読取られた音声取得装置識別子及び上記対応情報を用いて、上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定してもよい。
【００１２】
また、上記音声取得装置は、机の形状をしており、上記受信器は、上記音声取得装置の側面に設置され、上記受信器は、人が身につけた、音源識別子発信器から上記音源識別子を受信してもよい。
【００１３】
また、上記音声取得装置は、自らの発信器識別子を発信する発信器をさらに有し、上記発信器は、他の音声取得装置と組み合わせられた場合に、他の音声取得装置の受信器と対向するよう配置され、上記受信器は、上記音源識別子又は上記発信器識別子のいずれかを受信し、複数の上記音声取得装置の対応情報を取得し、上記複数の音声取得装置の配置を認識する対応情報作成装置をさらに有してもよい。
【００１４】
また、上記音声処理装置は、上記マイクロホンから入力された音声にマイク識別子を付与するマイク識別子付与部と、上記音声に付与されたマイク識別子と、上記音声制御情報とに基づいて、上記音声を処理する音声ミキサと、を有してもよい。
【００１５】
また、上記対応情報は、上記座標位置と上記音声取得部識別子との対応関係を予め記憶した情報であってもよい。
【００１６】
また上記課題を解決するために、本発明の別の観点によれば、複数のマイクロホンによって取得された音声、及び映像を取得し、出力する情報処理装置であって、上記映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する情報処理装置が提供される。
【００１７】
また上記課題を解決するために、本発明の別の観点によれば、映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、制御部と、を有する情報処理装置による方法であって、上記制御部が、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する、情報処理方法が提供される。
【発明の効果】
【００１８】
以上説明したように本発明によれば、映像を表示する画面に対する操作から、制御対象の音声を特定し、制御することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【図２】本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【図３】本発明の第１の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【図４】本発明の第１の実施形態に係る情報処理システムが、マイクロホンを特定するために用いるエリアについて説明するための説明図である。
【図５】マイク識別子とエリアとの対応関係から成る対応情報を示す表である。
【図６】本発明の一実施形態に係る情報処理システムにおける音声調整の動作を説明するフローチャートである。
【図７】本発明の第１の実施形態に係る情報処理システムの音声調整のマイク特定フローを示すサブフローチャートである。
【図８】本発明の第２の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【図９】音声取得装置における対応情報の一例を示す説明図である。
【図１０】音声取得装置を上部から見た概観図である。
【図１１】音声取得装置を側面から見た概観図である。
【図１２】音源識別子発信器と音声取得装置との通信について説明する説明図である。
【図１３】バッチホルダの概観構成例について説明する説明図である。
【図１４】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１５】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１６】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１７】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１８】対応情報作成装置において認識される音声取得装置の配置例を示す説明図である。
【図１９】本発明の第２の実施形態に係る情報処理システムの音声制御について説明するための説明図である。
【図２０】本発明の第２の実施形態に係る情報処理システムの音声調整のマイク特定フローを示すサブフローチャートである。
【発明を実施するための形態】
【００２０】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２１】
（概要）
まず、本発明の一実施形態に係る情報処理システムの概要を図１及び図２を用いて説明する。図１は、本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。図２は、本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【００２２】
図１は、本実施形態に係る情報処理システムにおいて、表示部１１５から入力操作を行うことによって、音声調整をする場面を示している。まず、表示部１１５は、例えばテレビ会議、テレビ電話などにおいて、相手方の映像を映し出している表示画面である。ここで表示画面は、上部にタッチパネルが積層され、座標入力装置としての機能を有するものとする。表示部１１５を見ているユーザが、参加者４０の音声が聞き取りにくいと感じた場面を想定する。ユーザは、表示部１１５において参加者４０を指差すようにタッチする。すると、情報処理装置１００は、参加者４０の音声を取得しているマイクロホンを特定し、特定したマイクロホンの音声調整をするための操作表示を、映像の上に重ねて表示する。操作表示は、ここではボリューム調整バー６０としたがこれに限られない。例えば、音量、音色、バランス、エフェクトなど、音声に対して調整できるものであればよい。
【００２３】
ここで、図２に示すように、ユーザが、操作表示６０に対してボリュームを上げる操作をする。すると、情報処理装置１００は、先ほど特定したマイクロホンに対して、ユーザ操作に従った制御を行う信号を生成し、出力する。
【００２４】
上記のように、本実施形態に係る情報処理システムは、リアルタイムの映像を映し出した画面を見ながら、例えば、現在喋っている人を画面上で確認出来、その人を指差すという直感的な操作によって、映像内の音声を制御することが出来るものである。これにより、場の流れを遮ることなく、音声の調整を実行することが可能となる。また、どのマイクロホンによってどの人の音声を取得しているかを、音声調整するユーザは気にする必要がない。
【００２５】
（第１の実施形態）
次に、上記の機能を実現するための、本発明の第１の実施形態に係る情報処理システム１００の機能構成について図３〜図５を用いて説明する。図３は、本発明の第１の実施形態に係る情報処理システム１００の機能構成を示すブロック図である。図４は、本発明の第１の実施形態に係る情報処理システムが、マイクロホンを特定するために用いるエリアについて説明するための説明図である。図５は、マイク識別子とエリアとの対応関係から成る対応情報を示す表である。
【００２６】
（情報処理システム１００の構成）
本実施形態に係る情報処理システム１００は、情報処理装置１１０、音声処理装置１２０、マイクロホン１３０、及び撮像装置１４０を主に有する。情報処理装置１１０は、撮像装置１４０が撮像した映像を表示すると共に、マイクロホン１３０によって取得された音声を出力し、ユーザが音声調整操作を入力することの出来る端末装置である。情報処理装置１１０は、ユーザによって入力された操作情報から、操作対象のマイクロホンを特定し、そのマイクロホンに対する制御情報を生成して、音声処理装置１２０に入力する。音声処理装置１２０は、情報処理装置１１０から入力された制御情報に従って、マイクロホン１３０によって取得された音声に対する制御を実行する。なお、例えば、遠隔地ＡＢ間で双方向通信する際、遠隔地Ａにいるユーザａと、遠隔地Ｂにいるユーザｂとが、双方で音声調整操作を行う場合には、ユーザａが音声調整操作するための情報処理システム１００ａと、ユーザｂが音声調整するための情報処理システム１００ｂとが遠隔地ＡＢそれぞれに備わってもよい。
【００２７】
マイクロホン１３０は、音源から音声を取得する音声取得装置である。本実施形態においては、１３０ａ〜１３０ｆの６つのマイクロホンを用いて、６つのエリア毎に音声を取得する固定マイクロホンである。マイクロホン１３０は、例えば天井、壁、机などに固定されていてよい。マイクロホン１３０は、撮像装置１４０と同じ空間に配置される。即ち、マイクロホン１３０は、撮像装置１４０によって撮像される空間の音声を取得する。このとき、マイクロホン１３０は、所望の音声を特に分離して取得することのできる音源分離マイク、指向性マイクなどであってよい。
【００２８】
撮像装置１４０は、映像を撮影するための装置である。撮像装置１４０は、映像を撮影し、ネットワークを介して情報処理装置１１０に入力する。
【００２９】
（情報処理装置１１０）
情報処理装置１１０は、記憶部１１１、通信部１１２、座標入力部１１３、制御部１１４、表示部１１５、及び、音声出力部１１６を主に有する。
【００３０】
記憶部１１１は、情報を記憶することのできる記憶装置である。例えばＨＤＤ（Hard Disk Drive）などの磁気記録媒体や、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）、フラッシュメモリ、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリが挙げられるが、上記に限られない。
【００３１】
記憶部１１１は、本実施形態においては、対応情報１０００を記憶する。対応情報１０００は、ユーザが操作する画面上の座標位置から、その位置の音声を取得するマイクロホンを特定するために用いられる情報である。例えば図５に示すマイク識別子１００２とエリア名１００４とを対応付けた情報であってよい。ここでエリアとは、ユーザが操作する画面を、それぞれのマイクロホンが音声を取得している範囲に区分したものである。エリアの一例は、図４に示す。このような対応情報１０００は、予め記憶部１１１に記憶されている。
【００３２】
通信部１１２は、有線又は無線の通信方式に対応した通信インタフェースである。本実施形態においては、通信部１１２は、撮像装置１４０からの映像を受信して制御部１１４に入力し、また、音声処理装置１２０から音声を受信し、制御部１１４に入力する。
【００３３】
座標入力部１１３は、画面上の座標位置を入力する入力装置、又は、入力装置との接続インタフェースである。例えば、タッチパネル、マウス、トラックボール、ジョイスティックなどの入力装置、又は上記の入力装置との接続インタフェースである。本実施形態においては、座標入力部１１３は、表示部１１５の上に重ねられたタッチパネルであり、表示部１１５の表示画面上の座標位置をユーザの操作に応じて入力する。タッチパネルは、ユーザが画面上をタッチすると、その位置及び変化を読み取り、情報処理装置１１０に入力する。
【００３４】
制御部１１４は、情報処理装置１１０全体の動きを制御する機能を有する。制御部１１４は、情報処理装置１１０における処理手順を記述したプログラムを読み込んで解釈し、実行することにより、情報処理装置１１０の各機能を実現する。制御部１１４は、座標入力部１１３からの入力に応じて、処理を実行してもよい。制御部１１４は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などにより構成されてよい。
【００３５】
表示部１１５は、映像を表示する機能を有するディスプレイ、又はディスプレイへの出力インタフェースである。例えば、ディスプレイの例としては、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）・プラズマディスプレイ（ＰＤＰ：Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）・電界放出ディスプレイ（ＦＥＤ：Ｆｉｅｌｄ Ｅｍｉｓｓｉｏｎ Ｄｉｓｐｌａｙ）・有機エレクトロルミネッセンスディスプレイ（有機ＥＬ、ＯＥＬＤ：Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）・ビデオプロジェクタなどが挙げられる。表示部１１５は、制御部１１４からの制御に従って、入力された画像を表示する機能を有する。
【００３６】
音声出力部１１６は、音声を出力する機能を有する装置、又は音声を出力する機能を有する装置への出力インタフェースである。例えば、音声出力部１１６は、スピーカなどの出力装置、又はスピーカへの出力インタフェースである。音声出力部１１６は、制御部１１４からの制御に従って、入力された音声を出力する。
【００３７】
（音声処理装置１２０）
音声処理装置１２０は、通信部１２１、マイク識別子付与部１２２、音声ミキサ１２３、多重化部１２４を主に有する。
【００３８】
通信部１２１は、有線又は無線の通信方式に対応した通信インタフェースである。本実施形態においては、通信部１２１は、マイクロホン１３０及び情報処理装置１１０の通信部１１２と接続され、マイクロホン１３０が取得した音声を受信し、マイク識別子付与部に入力する。また、通信部１２１は、多重化部１２４から入力された音声を情報処理装置１１０に入力するインタフェースである。さらに、通信部１２１は、情報処理装置１１０から、音声に対する制御情報を受信し、マイク識別子付与部１２２に入力する。
【００３９】
マイク識別子付与部１２２は、通信部１２１から入力された音声に対して、情報処理装置１１０から制御情報を受信した場合には、マイク識別子を付与して、音声ミキサ１２３へ入力する。ここでマイク識別子は、予め付与されたマイクロホン１３０それぞれに固有の番号である。マイク識別子付与部１２２は、通信部１２１から受信した制御情報も音声と合わせて音声ミキサ１２３へ入力する。一方、マイク識別子付与部１２２は、情報処理装置１１０から制御情報を受信していない場合には、音声に対して何の処理も実行せずに音声を音声ミキサに入力する。
【００４０】
音声ミキサ１２３は、マイク識別子付与部１２２からマイク識別子が付与された音声、及び制御情報を受信すると、制御情報に従って特定されたマイク識別子に対応する音声を、マイク識別子付与部１２２において付与されたマイク識別子を用いて判別し、特定された音声に対して制御情報に従ってミキシング処理を行い、多重化部１２４に入力する。音声ミキサ１２３は、情報処理装置１１０からの制御情報を受信していない場合には、音声に対して何の処理も実行せずに、音声を多重化部に入力する。
【００４１】
多重化部１２４は、音声ミキサ１２３においてミキシングされた音声について、音源位置及び音量を考慮した上で多重化し、通信部１２１に入力する。ここで多重化された音声は、通信部１２１を介してネットワークに送信される。
【００４２】
（情報処理システム１００の動作）
次に、図６及び図７を用いて、本実施形態に係る情報処理システム１００の動作について説明する。図６は、本実施形態に係る情報処理システム１００における音声調整の動作を説明するフローチャートである。図７は、本発明の第1の実施形態に係る情報処理システム１００のマイク特定の手順を示すフローチャートである。ここで、図７は図６のステップＳ１０４のサブフローチャートである。
【００４３】
まず、制御部１１４は、撮像装置において撮影された映像を通信部１１２を介して取得し、表示部１１５に表示させると共に、マイクロホン１３０において取得された音声を、音声処理装置１２０及び通信部１１２を介して取得し、音声出力部１１６に出力させている。そして、例えば、図４に示すように、参加者４０が喋っている声が聞こえ難い場合に、ユーザが指５０で画面上の参加者４０付近を指差すようにタッチする。すると、情報処理装置１１０の制御部１１４は、上記タッチの結果、入力された座標位置Ｘ（ｘ，ｙ）を取得する（Ｓ１０２）。次に、情報処理装置１１０の制御部１１４は、入力された座標位置Ｘ（ｘ，ｙ）に対応するマイク識別子を特定する（Ｓ１０４）。
【００４４】
次に、図６のステップＳ１０４のサブフローチャートである図７を参照しながら、マイク特定手順について説明する。まず、入力された座標位置Ｘ（ｘ，ｙ）から、制御部１１４は、対応するエリアを特定する（Ｓ２０２）。本実施形態においては、対応するエリアは、エリアＢであることがわかる。このエリア特定ステップは、例えば、情報処理装置１１０内の記憶部に、座標位置とエリアとの対応情報を持っておくことによって実現することができる。
【００４５】
そして、特定したエリアの音声を取得するマイクロホンを特定し、そのマイク識別子を取得する（Ｓ２０４）。本実施形態においては、エリアは、それぞれのマイクで音声を取得するエリアとして定義されているため、例えば図５のような対応情報１０００を予め作成し、保持しておくことによって、これを用いて、マイク識別子を特定することができる。本実施形態においては、エリアＢの音声を取得するマイクロホン１３０のマイク識別子は１３０ｂであることがわかる。
【００４６】
次に、再び図６に戻って音声調整手順について説明を続ける。ステップＳ１０４において、調整対象のマイク識別子を取得すると、制御部１１４は、特定されたマイクロホンの音声調整機能をＯＮにする（Ｓ１０６）。そして、制御部１１４は、入力された座標位置Ｘ（ｘ，ｙ）付近に音声調整インタフェースを表示する（Ｓ１０８）。
【００４７】
そして、例えば図２に示されたように、ユーザが指５０によって、音声調整インタフェース６０に対して操作をすると、制御部１１４は、その操作情報を取得する（Ｓ１１０）。
【００４８】
制御部１１４は、ステップＳ１０４において特定したマイク識別子、及び、ステップＳ１１０において取得したユーザの音声調整操作情報に基づいて、音声制御情報を生成し、出力する。出力された音声制御情報は、通信部１１２を介して音声処理装置１２０に出力される。
【００４９】
そして、音声調整の完了が検知されると（Ｓ１１４）、音声調整インタフェースの表示をＯＦＦにし、音声調整を終える。
【００５０】
（まとめ）
このように、本実施形態に係る情報処理装置１００は、映像を映した画面上の特定の位置の音声を取得しているマイクロホン１３０を、対応情報を用いることによって自動的に特定する。ユーザは、ただ音声の調整をしたい対象を指差して、音声調整操作をするだけで、従来あったどのマイクロホン１３０によって音声が取得されているかという対応付けを行う必要がなくなる。そのため、直感的な操作により、簡便に音声を調整することができるようになる。
【００５１】
（第２の実施形態）
上記の第１の実施形態では、予め設定された対応情報によって、操作画面上の位置から、その位置の音声を取得するマイクロホンを特定することを実現したものである。しかし、このようなシステムは、予めマイクロホンと、画面上のエリアとの対応情報を設定しておく必要がある。そこで、本発明の第2の実施形態は、対応情報をユーザが予め設定することなく、操作対象のマイクロホンの特定をすることができるものである。尚、以下第２の実施形態の説明においては、第１の実施形態と同様である部分については説明を省略し、相違点について主に説明する。
【００５２】
（情報処理システム２００）
まず、図８を用いて本実施形態に係る情報処理システム２００について説明する。図８は、本発明の第２の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【００５３】
情報処理システム２００は、情報処理装置２１０、音声処理装置２２０、撮像装置２４０、複数の音声取得装置２５０、及び、対応情報作成装置２６０を主に有し、ネットワーク３００によってそれぞれ接続されている。
【００５４】
情報処理システム２００は、ユーザが指定した音声を取得しているマイクロホンを特定するために、音声取得装置２５０及びバッチホルダ８００を用いて生成した情報を対応情報作成装置２６０が収集して作成した、対応情報を用いる。
【００５５】
情報処理装置２１０、音声処理装置２２０、及び撮像装置２４０については、第１の実施形態と同様であるため、説明を省略する。尚、情報処理装置２１０において記憶部を図示していないが、もちろん記憶部を有する構成であってもよい。情報処理装置２１０が、内部に対応情報を有しないことを図示したものである。情報処理装置２１０の音量調整時の動作については、後述する。
【００５６】
（対応情報作成装置２６０）
対応情報作成装置２６０は、通信部２６１、制御部２６２、及び記憶部２６３を主に有する。本実施形態においては、対応情報を作成する機能に着目しているが、対応情報作成装置２６０は、対応情報を収集することによって、音声取得装置２５０及び参加者の空間配置を認識することが可能である。
【００５７】
（音声取得装置２５０）
音声取得装置２５０は、音声を取得するためのマイクロホンが設置された装置である。本実施形態においては、音声取得装置２５０は、例えば図１０及び図１１に示した机の形状をしている。図８においては、音声取得装置２５０は、音声取得装置２５０ａと音声取得装置２５０ｂとの２つを有するものとして記載しているが、これに限られない。複数組み合わせて用いることが可能である。
【００５８】
音声取得装置２５０は、記憶部２５１、制御部２５２、通信部２５３、受信器２５４、発信器２５５、マイクロホン２３０を主に有する。尚、ここで受信器２５４及び発信器２５５については、複数有するため、それぞれを識別するために、例えば３つの受信器２５４は受信器２５４１〜２５４３の符号を振っている。以下、発信器についてまとめて説明をする際には、発信器２５５として表記する。受信器についても同様である。
【００５９】
記憶部２５１は、情報を記憶することのできる記憶装置である。例えばＨＤＤ（Hard Disk Drive）などの磁気記録媒体や、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）、フラッシュメモリ、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリが挙げられるが、上記に限られない。
【００６０】
記憶部２５１は、本実施形態においては、例えば図９において示したような対応情報２０００を記憶する。図９は、音声取得装置における対応情報の一例を示す説明図である。対応情報２０００は、それぞれの音声取得装置２５０が有する、音声取得装置識別子２００２、マイク識別子２００４、発信器識別子２００６、受信器識別子２００８の対応関係を予め記憶したものであり、それぞれの受信器２５４が、識別情報を受信したときには、受信した識別情報が受信情報２０１０に格納される。
【００６１】
制御部２５２は、音声取得装置２５０全体の動作を制御する。例えば、受信器２５４において、識別情報が受信された場合には、制御部２５２は、受信した識別情報を記憶部２５１の対応情報２００の、受信器識別子に対応する受信情報２０１０に記憶すると共に、対応情報２０００を通信部２５３を介して対応情報作成装置２６０に送信する。制御部２５２は、例えばＣＰＵなどにより構成されてよい。
【００６２】
通信部２５３は、音声取得装置２５０がネットワークと接続するための通信インタフェースである。通信部２５３は、有線のネットワークに接続するためのものであってもよいし、無線のネットワークに接続するためのものであってもよい。通信部２５３は、制御部２５２の制御に従って各種データの送受信を行う。
【００６３】
受信器２５４は、制御部２５２の制御に従って、他の音声取得装置２５０に設置された発信器２５５又は音源識別子を発信する音源識別子発信器８０１と通信し、発信器識別子又は音源識別子を受信する機能を有する。受信器２５４は、例えば赤外線を用いて通信を行う赤外線受信器であってよい。受信器２５４の物理的な設置については、後述する。
【００６４】
発信器２５５は、制御部２５２の制御に従って、発信器識別子を対向する受信器に向かって発信する。発信器２５５は、例えば赤外線を用いて通信を行う赤外線発信器であってよい。発信器２５５の通信方式は、受信器２５４の通信方式と互換性があることを前提とする。
【００６５】
マイクロホン２３０は、音声を取得するための装置である。マイクロホン２３０は、音声取得装置に設置されている。例えば、マイクロホン２３０は、音声取得装置２５０に内蔵されていてもよいし、例えば、音声取得装置２５０の側面又は上面などに設置されてもよい。マイクロホン２３０は、机の形状をした音声取得装置２５０のうち、参加者が座る位置に対応して設置されることが望ましい。
【００６６】
（物理構成）
次に、音声取得装置２５０の物理的な構成について図１０及び図１１を用いて説明する。図１０は、音声取得装置２５０ａ、及び、音声取得装置２５０ｂを上部から見た概観図である。図１１は、音声取得装置２５０ａ、及び、音声取得装置２５０ｂを側面から見た概観図である。
【００６７】
本実施形態において、音声取得装置２５０は、机の形状をしている。そして、受信器２５４及び発信器２５５が一対となって同じ側面に配置されている。尚、受信器２５４及び発信器２５５は、図においては、突出形状で示しているが、実際には、机間の隙間をなくすため、例えば、音声取得装置２５０の参加者に対向する側面に凹状に設けているものとする。受信器２５４及び発信器２５５は、本実施形態においては、音声取得装置２５０当たり、それぞれ３つずつ設置される。なお、情報上の対応関係を示す対応情報（図９）と同様に、マイク２３０のマイクの向きと机の向きとの物理的な構成（構成上の対応関係）についても関連付く。例えば、図１０に示すように、マイク２３０ａのマイクの向きは発信器２５５１ａが備わる側面と対向する向きになっている。つまり、マイク２３０ａは発信器２５５１ａが備わる側に存在する参加者等の音声を主に取得する。
【００６８】
図１０に示すように、受信器２５４と発信器２５５とは、音声取得装置２５０の各辺が接した際に、一方の音声取得装置２５０の受信器２５４と他方の音声取得装置２５０の発信器２５５とが対向するように配置されている。例えば、図９においては、机の天板の一番長い辺を合わせたときに、受信器２５４３ａと発信器２５５３ｂ、発信器２５５３ａと受信器２５４３ｂが対向し、通信可能となる。
【００６９】
また、図１０に点線で示したように、音声取得装置２５０は、マイクロホン２３０を内蔵する。マイクロホン２３０は、受信器２５４の数に対応して設けられる。本実施形態においては、マイクロホン２３０は、音声取得装置２５０当たり３つ設置される。マイクロホン２３０は、受信器２５４及び発信器２５５と対応付けられている。
【００７０】
音声取得装置２５０の天板の表面には、認識コード７００が模様として埋め込まれている。認識コード７００は、音声取得装置２５０毎の音声取得装置識別子を示すものである。全体に繰り返し埋め込まれているため、この認識コード７００を解読することによって、認識コードを映した映像から、ユーザが指示した地点の最寄の音声取得装置２５０がどの音声取得装置であるかを識別することが可能となる。なお、本実施形態に係る認識コード７００は音声取得装置識別子を示す場合を例に挙げて説明するが、かかる例に限定されず、例えば、認識コード７００は複数台のマイク２３０を一組としたマイクセットを識別する識別子の場合でも良い。例えば、図１０に示すように、マイク２３０ａ〜ｃを一組としたマイクセットを例示できる。かかる場合、音声取得装置２５０に複数台のマイクセットを備えることができる。なお、この場合、例えば、音声取得装置２５０の表面のうち、第１のマイクセットの備わる周辺部には認識コード７００ａが表示され、第２のマイクセットの備わる周辺部には認識コード７００ｂが表示される。
【００７１】
ここで、認識コード７００は、音声取得装置２５０の識別子を記憶可能なコードであり、その画像から情報を読み取ることができる。例えば、図示したＱＲコード（登録商標）、その他の２次元コード、及び１次元コードであるバーコードであってもよい。
【００７２】
次に、図１２、及び図１３を用いて、音声取得装置２５０の受信部２５４が音源識別子を受信するときの様子について説明する。図１２は、音源識別子発信器と音声取得装置との通信について説明する説明図である。図１３は、バッチホルダの概観構成例について説明する説明図である。
【００７３】
図１２に示すように、音声取得装置２５０に対して参加者１０が着席した場合を考える。音声取得装置２５０の、参加者１０が着席した側の側面に、受信器２５４２が設置されている。このとき、参加者１０は、バッチホルダ８００を身に着けており、バッチホルダ８００が有する音源識別子発信器８０１が、音源識別子を、音声取得装置２５０の受信器２５４２に発信する。図１２に示すように、参加者１０が着席した際に、バッチホルダ８００と受信器２５４２とが対向する位置にくるよう、音声取得装置２５０は設計されることが望ましい。
【００７４】
ここで、バッチホルダ８００の構成について、図１３を用いて説明する。バッチホルダ８００は、例えば参加者１０が自身を示すためのバッチ等を身に着けるためのものである。例えば、バッチホルダ８００に、音源識別子を発信するための音源識別子発信器８０１が取り付けられている。音源識別子は、音源を識別するための符号であり、例えば社員番号のように、個人に割り当てられた識別番号であってもよい。
【００７５】
以上、説明してきた通り、本実施形態に係る情報処理システム２００は、机の形状をした音声取得装置２５０を組み合わせた際に、それぞれ側面に設けられた受信器２５４及び発信器２５５間において、発信器識別子を送受信することによって、どの受信器がどの発信器と対向しているかを、把握することができるようになる。また、対応情報作成装置２６０が、予めそれぞれの音声取得装置２５０の形状などのデータを保持していると、どのような配置で音声取得装置２５０が配置されているのか、仮想空間に再現することが可能である。
【００７６】
また、例えば参加者１０に音源識別子をそれぞれ付与し、参加者が着席した箇所の受信器２５４が音源識別子を受信することができるように、参加者が身につけるバッチホルダ８００などに音源識別子発信器８０１を設けることにより、音声取得装置２５０及び、音声取得装置２５０から対応情報を受信した、対応情報作成装置２６０は、各音声取得装置２５０のどの位置にどの参加者が着席しているかを把握することができるようになる。
【００７７】
（動作例）
ここで、以上のような情報処理システム２００を用いた動作例について説明をする。例えば、音声取得装置２５０を４つ組み合わせた例について説明をする。４つの音声取得装置２５０を組み合わせると、対向する受信器２５４と発信器２５５との間で、発信器識別子の送受信が行われる。そして、受信器２５４は、発信器識別子を受信すると、制御部２５２の制御に応じて、受信した発信器識別子を記憶部２５１の対応情報の受信情報に記憶する。
【００７８】
また、そのように組み合わせられた音声取得装置２５０に、参加者が着席した場合を考える。ここでは、４名の参加者が着席するものとする。参加者が着席すると、参加者の保有するバッチホルダの音源識別子発信器から、音声取得装置２５０の受信器２５４に音源識別子が送信される。受信された音源識別子は、制御部２５２の制御に応じて、記憶部２５１の対応情報の受信情報に記憶される。
【００７９】
このようにして、収集された対応情報を図１４〜図１７にそれぞれ示す。図１４〜図１７は、音声取得装置２５０において取得された、対応情報を示す説明図である。
【００８０】
図１４は、音声取得装置２５０ａについてのものである。音声取得装置識別子２１０２、マイク識別子２１０４、発信器識別子２１０６、受信器識別子２１０８が予め記憶されており、受信情報２１１０に、それぞれ対応する受信器２５４が受信した情報が格納されている。
【００８１】
以下、それぞれ、図１５は２５０ｂ、図１６は２５０ｃ、図１７は２５０ｄについての対応情報を示す。このように収集された対応情報は、対応情報作成装置２６０へ送信される。
【００８２】
それぞれの音声取得装置２５０において収集された対応情報が、対応情報作成装置２６０において受信されると、対応情報作成装置２６０は、予め保持している、机の形状、構成、及び参加者に割り当てられた音源識別子の情報を用いて、音声取得装置２５０の配置状況、及び、参加者の着席状況を把握することが可能である。即ち、どの音源の音声をどのマイクロホンによって取得しているかを把握することが可能である。
【００８３】
即ち、対応情報作成装置２６０は、図１４〜図１７の対応情報を用いて、図１８のような配置で音声取得装置が配置されていること、参加者が着席している位置、及び、参加者が着席している位置に対応するマイクロホンを把握することも可能である。図１８は、対応情報作成装置２６０において認識される音声取得装置の配置例を示す説明図である。
【００８４】
このような状況において、撮像装置２４０が撮影した映像を見ながら、情報処理装置２１０の表示画面上から音声制御をする際の動作について、図１９及び図２０を用いて説明する。図１９は、本発明の第２の実施形態に係る情報処理システムの音声制御について説明するための説明図である。図２０は、本発明の第２の実施形態に係る情報処理システム２００の音声調整のマイク特定フローを示すサブフローチャートである。
【００８５】
音声調整の全体の流れについては、図６において説明した内容と同様であるため、説明を省略する。マイク特定フローについてのみ相違するため、図６のステップＳ１０４のサブフローチャートである図２０に示したマイク特定フローについて説明する。前提として、情報処理装置２１０は、音声取得装置２５０の配置が行われたとき、又は、参加者が着席したときなどの、対応情報が更新されたときに、対応情報作成装置２６０から対応情報を取得しているものとする。
【００８６】
図１９において、ユーザは、音声を調整したい対象を画面上において指差すようにタッチする。ここでは、参加者４０の音声を調整する場合について考える。参加者４０を指差すようにタッチすると、指差した座標位置が取得される。そして、情報処理装置２１０の制御部２１４は、座標位置入力時の画像を取得する（Ｓ３０２）。そして、制御部２１４は、取得された画像から、座標位置に最も近い認識コードを検索する（Ｓ３０４）。
【００８７】
次に、対応情報から認識コードに対応する机を特定する（Ｓ３０６）。具体的には、ステップＳ３０４において検索された認識コード７００を読取ると、各机に付与された音声取得装置識別子「２５０ｄ」を取得することが出来る。そして、特定された机の対応情報の中から、音源識別子を受信した受信器を特定する（Ｓ３０８）。図１７を参照すると、音声取得装置２５０ｄの中で、音源識別子を受信しているのは、受信器２５４２ｄであることがわかる。
【００８８】
そして、この特定された受信器２５４２ｄに対応するマイクロホンを特定する（Ｓ３１０）。ここでは、図１７を参照すると、対応するマイク識別子は２３０ｋであることがわかる。
【００８９】
このようにして、操作画面上の位置から、音声調整対象のマイクロホンを特定し、確実に所望のマイクロホンの調整を実行することが可能である。
【００９０】
このとき、例えば、特定された机（または、複数台のマイク２３０からなるマイクセット）に２名以上の参加者が座っている場合には、制御部２１４は、双方の調整インタフェースを表示させるようにしてもよい。
【００９１】
（効果の例）
以上説明したように、本発明の第２の実施形態に係る情報処理システムによると、予めユーザが対応情報を設定することなく、自動的に対応情報を収集し、マイクロホンの特定をすることが出来る。そして特定されたマイクロホンに対して、映像を見ながら音声の調整を実行することが出来るようになる。
【００９２】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されないことは言うまでもない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても当然に本発明の技術的範囲に属するものと了解される。
【００９３】
例えば、上記第1の実施形態では、固定マイクを用いたが、かかる例に限定されない。例えば、ピンマイクを用いてもよく、その場合には、参加者の着席位置に応じてピンマイクの位置が決まるため、そのエリア情報と予め対応づけておく必要がある。
【００９４】
また、例えば、本実施形態においては、表示部の上にタッチパネル式の座標入力部を積層した表示入力部を有する構成としたが、これに限られない。例えば、表示部は、スクリーンに映しだすプロジェクタに接続するインタフェースであってもよい。この場合、例えばマウスなどの入力装置を用いてもよい。
【００９５】
また、例えば、上記第２の実施形態においては、音声取得装置は、二等辺三角形形状の机であることとしたが、この形状は限定されない。受信器、送信器、及びマイクロホンが一対となり、机の参加者が座る位置に配置されるものであればよい。
【００９６】
また、例えば、上記第２の実施形態においては、音源識別子は、参加者が身につけるバッチホルダから発信されるものとしたが、かかる例に限られない。例えば、プロジェクタなどの音源となりうる装置にそれぞれ音源識別子が付与され、装置に音源識別子発信器を設けてもよい。その場合、音声取得装置の受信器の配置、又は、通信方式を工夫する必要がある。例えば、プロジェクタのファンの音がうるさい場合に、かかる音量を下げるために用いることが出来る。
【００９７】
また、例えば、上記第２の実施形態においては、受信器及び発信器は、赤外線を用いたものとしたがこれに限られない。例えば、音波を用いたドップラーセンサ、ＺｉｇＢｅｅ（登録商標）ノード等を用いて信号の送受信を行ってもよい。
【００９８】
また、例えば、上記第２の実施形態においては、認識コードは、音声取得装置の上面にのみ埋め込まれているものとしたが、これに限られない。例えば、側面や、机の脚など、表面全体に埋め込まれているものであってもよい。
【００９９】
また、例えば、上記第２の実施形態においては、情報処理装置は、対応情報に更新がある度に、対応情報を、対応情報作成装置から取得しているものとしたが、これに限られない。例えば、マイク特定処理を行う前に対応情報を取得してもよい。
【０１００】
また、上記第２の実施形態においては、認識コード７００は、音声取得装置識別子を示す場合を例に挙げて説明するが、かかる例に限定されない。例えば、認識コード７００は複数台のマイク２３０を一組としたマイクセットを識別する識別子の場合でも良い。例えば、図１０に示すように、マイク２３０ａ〜ｃを一組としたマイクセットを例示できる。かかる場合、音声取得装置２５０に複数台のマイクセットを備えることができる。なお、この場合、例えば、音声取得装置２５０の表面のうち、第１のマイクセットの備わる周辺部には認識コード７００ａが表示され、第２のマイクセットの備わる周辺部には認識コード７００ｂが表示される。また、認識コード７００は、マイクロホン１台１台のそれぞれを識別するものであってもよい。この場合には、認識コードから音声取得装置を識別し、マイクロホンと紐付けることなく、認識コードから直接マイクロホンを特定することが出来る。
【０１０１】
尚、本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。
【符号の説明】
【０１０２】
１１０ 情報処理装置
１１３ 座標入力部
１１４ 制御部
１１５ 表示部
１１６ 音声出力部
１２０ 音声処理装置
１３０ マイクロホン
１４０ 撮像装置
【技術分野】
【０００１】
本発明は、情報処理システム、情報処理装置、及び情報処理方法に関し、特に、音声制御することの出来る情報処理システム、情報処理装置、及び情報処理方法に関する。
【背景技術】
【０００２】
近年、テレビ電話及びテレビ会議など、離れた拠点間をネットワークで結び、遠隔地にいる相手と映像及び音声を用いてコミュニケーションすることができるシステムが利用されるようになってきている。
【０００３】
特に、複数人でこのようなシステムを利用する場合には、次のような問題が発生することがある。例えば、音声を取得するマイクからの距離、角度、及び個人の音声の大きさはそれぞれ異なるため、特定の音声について聞き取りづらい状況が発生することがある。また、例えば、プロジェクタなどの機器から発生するファン音などの動作音、及び、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）のタイプ音など人の動作に応じて発生する動作音などが、必要以上に大きく集音されてしまうこともある。従って、複数人でコミュニケーションするシステムにおいては、音声の制御が重要となる。
【０００４】
そこで、様々な音源からの音声を、分離して取得することによって、分離取得された音声を個別に制御出来るようにする方法が提案されている。例えば、ピン・マイクロホンを個別に装着することによって、人毎に音声を取得することが出来る。また、例えば、特許文献１には、椅子に多数のマイクロホンを埋め込むことによって、ピン・マイクロホンを装着することなく、人毎に音声を分離取得することの出来る椅子が提案されている。また、例えば、特許文献２には、音声を分離取得し、着席位置に応じた放音を行う音声会議システムが提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７-３３６０１０号公報
【特許文献２】特開２００８−１７１２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、音源毎に音声を分離取得することが出来たとしても、音声の調整をする際にはどのマイクロホンでどの音源からの音声が取得されているのかを特定する必要があるが、この特定が困難であるという問題があった。
【０００７】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、映像を表示する画面に対する操作から、制御対象の音声を特定し、制御することが可能な、新規かつ改良された情報処理装置及び情報処理方法を提供することにある。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明のある観点によれば、複数のマイクロホンと、映像を撮影する撮像装置と、上記複数のマイクロホンによって取得された音声を処理する音声処理装置と、上記映像及び上記音声処理装置において処理された音声を出力し、上記音声処理装置に対して音声制御情報を出力する情報処理装置と、を有し、上記情報処理装置は、映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する、情報処理システムが提供される。
【０００９】
かかる構成によれば、複数のマイクロホンによって取得された音声は、音声処理装置において処理され、情報処理装置において出力される。情報処理装置は、表示部において映像を出力すると共に、音声出力部において、音声処理装置において処理された音声を出力する。さらに、情報処理装置は、音声処理装置に音声制御情報を出力することも出来る。このとき、情報処理装置は、ユーザが情報処理装置の表示部に表示された映像を見ながら、座標入力部を用いて音声を制御したい対象を入力すると、その座標位置に音声調整インタフェースを表示する。そして、情報処理装置は、対応情報を用いて座標位置から制御対象のマイクロホンを特定する。ユーザが音声調整インタフェースを操作したときに、情報処理装置は、その操作の情報及び特定したマイクロホンのマイク識別子に基づいて音声制御情報を作成して、音声処理装置に対して出力する。これにより、ユーザは、映像を見ながらの直感的な操作により、操作と制御したいマイクロホンとの対応を考えることなく、音声制御を実行することが出来るようになる。
【００１０】
また、音源には予め識別のための音源識別子が付与されており、上記対応情報は、上記音源識別子及び上記マイク識別子の対応関係を収集して生成された情報であってもよい。
【００１１】
また、上記複数のマイクロホンは、音声取得装置に内蔵されており、上記音声取得装置は、上記音源識別子を受信する受信器を有し、上記音声取得装置の表面には、音声取得装置を識別するための音声取得装置識別子が埋め込まれた認識コードが表示され、上記対応情報は、上記音声取得装置識別子、上記音源識別子、上記受信器に付与された受信器識別子、及び上記マイク識別子の対応関係を収集して生成された情報であり、上記制御部は、上記映像中の上記認識コードから上記音声取得装置識別子を読取り、読取られた音声取得装置識別子及び上記対応情報を用いて、上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定してもよい。
【００１２】
また、上記音声取得装置は、机の形状をしており、上記受信器は、上記音声取得装置の側面に設置され、上記受信器は、人が身につけた、音源識別子発信器から上記音源識別子を受信してもよい。
【００１３】
また、上記音声取得装置は、自らの発信器識別子を発信する発信器をさらに有し、上記発信器は、他の音声取得装置と組み合わせられた場合に、他の音声取得装置の受信器と対向するよう配置され、上記受信器は、上記音源識別子又は上記発信器識別子のいずれかを受信し、複数の上記音声取得装置の対応情報を取得し、上記複数の音声取得装置の配置を認識する対応情報作成装置をさらに有してもよい。
【００１４】
また、上記音声処理装置は、上記マイクロホンから入力された音声にマイク識別子を付与するマイク識別子付与部と、上記音声に付与されたマイク識別子と、上記音声制御情報とに基づいて、上記音声を処理する音声ミキサと、を有してもよい。
【００１５】
また、上記対応情報は、上記座標位置と上記音声取得部識別子との対応関係を予め記憶した情報であってもよい。
【００１６】
また上記課題を解決するために、本発明の別の観点によれば、複数のマイクロホンによって取得された音声、及び映像を取得し、出力する情報処理装置であって、上記映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、を有する情報処理装置が提供される。
【００１７】
また上記課題を解決するために、本発明の別の観点によれば、映像を表示する表示部と、上記表示部の表示画面上の座標位置を入力する座標入力部と、制御部と、を有する情報処理装置による方法であって、上記制御部が、上記座標入力部によって入力された座標位置付近に音声調整インタフェースを上記映像に重ねて上記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、上記映像中の上記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び上記音声調整インタフェースに対する上記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する、情報処理方法が提供される。
【発明の効果】
【００１８】
以上説明したように本発明によれば、映像を表示する画面に対する操作から、制御対象の音声を特定し、制御することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【図２】本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【図３】本発明の第１の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【図４】本発明の第１の実施形態に係る情報処理システムが、マイクロホンを特定するために用いるエリアについて説明するための説明図である。
【図５】マイク識別子とエリアとの対応関係から成る対応情報を示す表である。
【図６】本発明の一実施形態に係る情報処理システムにおける音声調整の動作を説明するフローチャートである。
【図７】本発明の第１の実施形態に係る情報処理システムの音声調整のマイク特定フローを示すサブフローチャートである。
【図８】本発明の第２の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【図９】音声取得装置における対応情報の一例を示す説明図である。
【図１０】音声取得装置を上部から見た概観図である。
【図１１】音声取得装置を側面から見た概観図である。
【図１２】音源識別子発信器と音声取得装置との通信について説明する説明図である。
【図１３】バッチホルダの概観構成例について説明する説明図である。
【図１４】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１５】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１６】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１７】音声取得装置において取得された、対応情報の一例を示す説明図である。
【図１８】対応情報作成装置において認識される音声取得装置の配置例を示す説明図である。
【図１９】本発明の第２の実施形態に係る情報処理システムの音声制御について説明するための説明図である。
【図２０】本発明の第２の実施形態に係る情報処理システムの音声調整のマイク特定フローを示すサブフローチャートである。
【発明を実施するための形態】
【００２０】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２１】
（概要）
まず、本発明の一実施形態に係る情報処理システムの概要を図１及び図２を用いて説明する。図１は、本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。図２は、本発明の一実施形態に係る情報処理システムの音声調整画面の一例を示す説明図である。
【００２２】
図１は、本実施形態に係る情報処理システムにおいて、表示部１１５から入力操作を行うことによって、音声調整をする場面を示している。まず、表示部１１５は、例えばテレビ会議、テレビ電話などにおいて、相手方の映像を映し出している表示画面である。ここで表示画面は、上部にタッチパネルが積層され、座標入力装置としての機能を有するものとする。表示部１１５を見ているユーザが、参加者４０の音声が聞き取りにくいと感じた場面を想定する。ユーザは、表示部１１５において参加者４０を指差すようにタッチする。すると、情報処理装置１００は、参加者４０の音声を取得しているマイクロホンを特定し、特定したマイクロホンの音声調整をするための操作表示を、映像の上に重ねて表示する。操作表示は、ここではボリューム調整バー６０としたがこれに限られない。例えば、音量、音色、バランス、エフェクトなど、音声に対して調整できるものであればよい。
【００２３】
ここで、図２に示すように、ユーザが、操作表示６０に対してボリュームを上げる操作をする。すると、情報処理装置１００は、先ほど特定したマイクロホンに対して、ユーザ操作に従った制御を行う信号を生成し、出力する。
【００２４】
上記のように、本実施形態に係る情報処理システムは、リアルタイムの映像を映し出した画面を見ながら、例えば、現在喋っている人を画面上で確認出来、その人を指差すという直感的な操作によって、映像内の音声を制御することが出来るものである。これにより、場の流れを遮ることなく、音声の調整を実行することが可能となる。また、どのマイクロホンによってどの人の音声を取得しているかを、音声調整するユーザは気にする必要がない。
【００２５】
（第１の実施形態）
次に、上記の機能を実現するための、本発明の第１の実施形態に係る情報処理システム１００の機能構成について図３〜図５を用いて説明する。図３は、本発明の第１の実施形態に係る情報処理システム１００の機能構成を示すブロック図である。図４は、本発明の第１の実施形態に係る情報処理システムが、マイクロホンを特定するために用いるエリアについて説明するための説明図である。図５は、マイク識別子とエリアとの対応関係から成る対応情報を示す表である。
【００２６】
（情報処理システム１００の構成）
本実施形態に係る情報処理システム１００は、情報処理装置１１０、音声処理装置１２０、マイクロホン１３０、及び撮像装置１４０を主に有する。情報処理装置１１０は、撮像装置１４０が撮像した映像を表示すると共に、マイクロホン１３０によって取得された音声を出力し、ユーザが音声調整操作を入力することの出来る端末装置である。情報処理装置１１０は、ユーザによって入力された操作情報から、操作対象のマイクロホンを特定し、そのマイクロホンに対する制御情報を生成して、音声処理装置１２０に入力する。音声処理装置１２０は、情報処理装置１１０から入力された制御情報に従って、マイクロホン１３０によって取得された音声に対する制御を実行する。なお、例えば、遠隔地ＡＢ間で双方向通信する際、遠隔地Ａにいるユーザａと、遠隔地Ｂにいるユーザｂとが、双方で音声調整操作を行う場合には、ユーザａが音声調整操作するための情報処理システム１００ａと、ユーザｂが音声調整するための情報処理システム１００ｂとが遠隔地ＡＢそれぞれに備わってもよい。
【００２７】
マイクロホン１３０は、音源から音声を取得する音声取得装置である。本実施形態においては、１３０ａ〜１３０ｆの６つのマイクロホンを用いて、６つのエリア毎に音声を取得する固定マイクロホンである。マイクロホン１３０は、例えば天井、壁、机などに固定されていてよい。マイクロホン１３０は、撮像装置１４０と同じ空間に配置される。即ち、マイクロホン１３０は、撮像装置１４０によって撮像される空間の音声を取得する。このとき、マイクロホン１３０は、所望の音声を特に分離して取得することのできる音源分離マイク、指向性マイクなどであってよい。
【００２８】
撮像装置１４０は、映像を撮影するための装置である。撮像装置１４０は、映像を撮影し、ネットワークを介して情報処理装置１１０に入力する。
【００２９】
（情報処理装置１１０）
情報処理装置１１０は、記憶部１１１、通信部１１２、座標入力部１１３、制御部１１４、表示部１１５、及び、音声出力部１１６を主に有する。
【００３０】
記憶部１１１は、情報を記憶することのできる記憶装置である。例えばＨＤＤ（Hard Disk Drive）などの磁気記録媒体や、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）、フラッシュメモリ、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリが挙げられるが、上記に限られない。
【００３１】
記憶部１１１は、本実施形態においては、対応情報１０００を記憶する。対応情報１０００は、ユーザが操作する画面上の座標位置から、その位置の音声を取得するマイクロホンを特定するために用いられる情報である。例えば図５に示すマイク識別子１００２とエリア名１００４とを対応付けた情報であってよい。ここでエリアとは、ユーザが操作する画面を、それぞれのマイクロホンが音声を取得している範囲に区分したものである。エリアの一例は、図４に示す。このような対応情報１０００は、予め記憶部１１１に記憶されている。
【００３２】
通信部１１２は、有線又は無線の通信方式に対応した通信インタフェースである。本実施形態においては、通信部１１２は、撮像装置１４０からの映像を受信して制御部１１４に入力し、また、音声処理装置１２０から音声を受信し、制御部１１４に入力する。
【００３３】
座標入力部１１３は、画面上の座標位置を入力する入力装置、又は、入力装置との接続インタフェースである。例えば、タッチパネル、マウス、トラックボール、ジョイスティックなどの入力装置、又は上記の入力装置との接続インタフェースである。本実施形態においては、座標入力部１１３は、表示部１１５の上に重ねられたタッチパネルであり、表示部１１５の表示画面上の座標位置をユーザの操作に応じて入力する。タッチパネルは、ユーザが画面上をタッチすると、その位置及び変化を読み取り、情報処理装置１１０に入力する。
【００３４】
制御部１１４は、情報処理装置１１０全体の動きを制御する機能を有する。制御部１１４は、情報処理装置１１０における処理手順を記述したプログラムを読み込んで解釈し、実行することにより、情報処理装置１１０の各機能を実現する。制御部１１４は、座標入力部１１３からの入力に応じて、処理を実行してもよい。制御部１１４は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などにより構成されてよい。
【００３５】
表示部１１５は、映像を表示する機能を有するディスプレイ、又はディスプレイへの出力インタフェースである。例えば、ディスプレイの例としては、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）・プラズマディスプレイ（ＰＤＰ：Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）・電界放出ディスプレイ（ＦＥＤ：Ｆｉｅｌｄ Ｅｍｉｓｓｉｏｎ Ｄｉｓｐｌａｙ）・有機エレクトロルミネッセンスディスプレイ（有機ＥＬ、ＯＥＬＤ：Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）・ビデオプロジェクタなどが挙げられる。表示部１１５は、制御部１１４からの制御に従って、入力された画像を表示する機能を有する。
【００３６】
音声出力部１１６は、音声を出力する機能を有する装置、又は音声を出力する機能を有する装置への出力インタフェースである。例えば、音声出力部１１６は、スピーカなどの出力装置、又はスピーカへの出力インタフェースである。音声出力部１１６は、制御部１１４からの制御に従って、入力された音声を出力する。
【００３７】
（音声処理装置１２０）
音声処理装置１２０は、通信部１２１、マイク識別子付与部１２２、音声ミキサ１２３、多重化部１２４を主に有する。
【００３８】
通信部１２１は、有線又は無線の通信方式に対応した通信インタフェースである。本実施形態においては、通信部１２１は、マイクロホン１３０及び情報処理装置１１０の通信部１１２と接続され、マイクロホン１３０が取得した音声を受信し、マイク識別子付与部に入力する。また、通信部１２１は、多重化部１２４から入力された音声を情報処理装置１１０に入力するインタフェースである。さらに、通信部１２１は、情報処理装置１１０から、音声に対する制御情報を受信し、マイク識別子付与部１２２に入力する。
【００３９】
マイク識別子付与部１２２は、通信部１２１から入力された音声に対して、情報処理装置１１０から制御情報を受信した場合には、マイク識別子を付与して、音声ミキサ１２３へ入力する。ここでマイク識別子は、予め付与されたマイクロホン１３０それぞれに固有の番号である。マイク識別子付与部１２２は、通信部１２１から受信した制御情報も音声と合わせて音声ミキサ１２３へ入力する。一方、マイク識別子付与部１２２は、情報処理装置１１０から制御情報を受信していない場合には、音声に対して何の処理も実行せずに音声を音声ミキサに入力する。
【００４０】
音声ミキサ１２３は、マイク識別子付与部１２２からマイク識別子が付与された音声、及び制御情報を受信すると、制御情報に従って特定されたマイク識別子に対応する音声を、マイク識別子付与部１２２において付与されたマイク識別子を用いて判別し、特定された音声に対して制御情報に従ってミキシング処理を行い、多重化部１２４に入力する。音声ミキサ１２３は、情報処理装置１１０からの制御情報を受信していない場合には、音声に対して何の処理も実行せずに、音声を多重化部に入力する。
【００４１】
多重化部１２４は、音声ミキサ１２３においてミキシングされた音声について、音源位置及び音量を考慮した上で多重化し、通信部１２１に入力する。ここで多重化された音声は、通信部１２１を介してネットワークに送信される。
【００４２】
（情報処理システム１００の動作）
次に、図６及び図７を用いて、本実施形態に係る情報処理システム１００の動作について説明する。図６は、本実施形態に係る情報処理システム１００における音声調整の動作を説明するフローチャートである。図７は、本発明の第1の実施形態に係る情報処理システム１００のマイク特定の手順を示すフローチャートである。ここで、図７は図６のステップＳ１０４のサブフローチャートである。
【００４３】
まず、制御部１１４は、撮像装置において撮影された映像を通信部１１２を介して取得し、表示部１１５に表示させると共に、マイクロホン１３０において取得された音声を、音声処理装置１２０及び通信部１１２を介して取得し、音声出力部１１６に出力させている。そして、例えば、図４に示すように、参加者４０が喋っている声が聞こえ難い場合に、ユーザが指５０で画面上の参加者４０付近を指差すようにタッチする。すると、情報処理装置１１０の制御部１１４は、上記タッチの結果、入力された座標位置Ｘ（ｘ，ｙ）を取得する（Ｓ１０２）。次に、情報処理装置１１０の制御部１１４は、入力された座標位置Ｘ（ｘ，ｙ）に対応するマイク識別子を特定する（Ｓ１０４）。
【００４４】
次に、図６のステップＳ１０４のサブフローチャートである図７を参照しながら、マイク特定手順について説明する。まず、入力された座標位置Ｘ（ｘ，ｙ）から、制御部１１４は、対応するエリアを特定する（Ｓ２０２）。本実施形態においては、対応するエリアは、エリアＢであることがわかる。このエリア特定ステップは、例えば、情報処理装置１１０内の記憶部に、座標位置とエリアとの対応情報を持っておくことによって実現することができる。
【００４５】
そして、特定したエリアの音声を取得するマイクロホンを特定し、そのマイク識別子を取得する（Ｓ２０４）。本実施形態においては、エリアは、それぞれのマイクで音声を取得するエリアとして定義されているため、例えば図５のような対応情報１０００を予め作成し、保持しておくことによって、これを用いて、マイク識別子を特定することができる。本実施形態においては、エリアＢの音声を取得するマイクロホン１３０のマイク識別子は１３０ｂであることがわかる。
【００４６】
次に、再び図６に戻って音声調整手順について説明を続ける。ステップＳ１０４において、調整対象のマイク識別子を取得すると、制御部１１４は、特定されたマイクロホンの音声調整機能をＯＮにする（Ｓ１０６）。そして、制御部１１４は、入力された座標位置Ｘ（ｘ，ｙ）付近に音声調整インタフェースを表示する（Ｓ１０８）。
【００４７】
そして、例えば図２に示されたように、ユーザが指５０によって、音声調整インタフェース６０に対して操作をすると、制御部１１４は、その操作情報を取得する（Ｓ１１０）。
【００４８】
制御部１１４は、ステップＳ１０４において特定したマイク識別子、及び、ステップＳ１１０において取得したユーザの音声調整操作情報に基づいて、音声制御情報を生成し、出力する。出力された音声制御情報は、通信部１１２を介して音声処理装置１２０に出力される。
【００４９】
そして、音声調整の完了が検知されると（Ｓ１１４）、音声調整インタフェースの表示をＯＦＦにし、音声調整を終える。
【００５０】
（まとめ）
このように、本実施形態に係る情報処理装置１００は、映像を映した画面上の特定の位置の音声を取得しているマイクロホン１３０を、対応情報を用いることによって自動的に特定する。ユーザは、ただ音声の調整をしたい対象を指差して、音声調整操作をするだけで、従来あったどのマイクロホン１３０によって音声が取得されているかという対応付けを行う必要がなくなる。そのため、直感的な操作により、簡便に音声を調整することができるようになる。
【００５１】
（第２の実施形態）
上記の第１の実施形態では、予め設定された対応情報によって、操作画面上の位置から、その位置の音声を取得するマイクロホンを特定することを実現したものである。しかし、このようなシステムは、予めマイクロホンと、画面上のエリアとの対応情報を設定しておく必要がある。そこで、本発明の第2の実施形態は、対応情報をユーザが予め設定することなく、操作対象のマイクロホンの特定をすることができるものである。尚、以下第２の実施形態の説明においては、第１の実施形態と同様である部分については説明を省略し、相違点について主に説明する。
【００５２】
（情報処理システム２００）
まず、図８を用いて本実施形態に係る情報処理システム２００について説明する。図８は、本発明の第２の実施形態に係る情報処理システムの機能構成を示すブロック図である。
【００５３】
情報処理システム２００は、情報処理装置２１０、音声処理装置２２０、撮像装置２４０、複数の音声取得装置２５０、及び、対応情報作成装置２６０を主に有し、ネットワーク３００によってそれぞれ接続されている。
【００５４】
情報処理システム２００は、ユーザが指定した音声を取得しているマイクロホンを特定するために、音声取得装置２５０及びバッチホルダ８００を用いて生成した情報を対応情報作成装置２６０が収集して作成した、対応情報を用いる。
【００５５】
情報処理装置２１０、音声処理装置２２０、及び撮像装置２４０については、第１の実施形態と同様であるため、説明を省略する。尚、情報処理装置２１０において記憶部を図示していないが、もちろん記憶部を有する構成であってもよい。情報処理装置２１０が、内部に対応情報を有しないことを図示したものである。情報処理装置２１０の音量調整時の動作については、後述する。
【００５６】
（対応情報作成装置２６０）
対応情報作成装置２６０は、通信部２６１、制御部２６２、及び記憶部２６３を主に有する。本実施形態においては、対応情報を作成する機能に着目しているが、対応情報作成装置２６０は、対応情報を収集することによって、音声取得装置２５０及び参加者の空間配置を認識することが可能である。
【００５７】
（音声取得装置２５０）
音声取得装置２５０は、音声を取得するためのマイクロホンが設置された装置である。本実施形態においては、音声取得装置２５０は、例えば図１０及び図１１に示した机の形状をしている。図８においては、音声取得装置２５０は、音声取得装置２５０ａと音声取得装置２５０ｂとの２つを有するものとして記載しているが、これに限られない。複数組み合わせて用いることが可能である。
【００５８】
音声取得装置２５０は、記憶部２５１、制御部２５２、通信部２５３、受信器２５４、発信器２５５、マイクロホン２３０を主に有する。尚、ここで受信器２５４及び発信器２５５については、複数有するため、それぞれを識別するために、例えば３つの受信器２５４は受信器２５４１〜２５４３の符号を振っている。以下、発信器についてまとめて説明をする際には、発信器２５５として表記する。受信器についても同様である。
【００５９】
記憶部２５１は、情報を記憶することのできる記憶装置である。例えばＨＤＤ（Hard Disk Drive）などの磁気記録媒体や、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）、フラッシュメモリ、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ（Phase change Random Access Memory）などの不揮発性メモリが挙げられるが、上記に限られない。
【００６０】
記憶部２５１は、本実施形態においては、例えば図９において示したような対応情報２０００を記憶する。図９は、音声取得装置における対応情報の一例を示す説明図である。対応情報２０００は、それぞれの音声取得装置２５０が有する、音声取得装置識別子２００２、マイク識別子２００４、発信器識別子２００６、受信器識別子２００８の対応関係を予め記憶したものであり、それぞれの受信器２５４が、識別情報を受信したときには、受信した識別情報が受信情報２０１０に格納される。
【００６１】
制御部２５２は、音声取得装置２５０全体の動作を制御する。例えば、受信器２５４において、識別情報が受信された場合には、制御部２５２は、受信した識別情報を記憶部２５１の対応情報２００の、受信器識別子に対応する受信情報２０１０に記憶すると共に、対応情報２０００を通信部２５３を介して対応情報作成装置２６０に送信する。制御部２５２は、例えばＣＰＵなどにより構成されてよい。
【００６２】
通信部２５３は、音声取得装置２５０がネットワークと接続するための通信インタフェースである。通信部２５３は、有線のネットワークに接続するためのものであってもよいし、無線のネットワークに接続するためのものであってもよい。通信部２５３は、制御部２５２の制御に従って各種データの送受信を行う。
【００６３】
受信器２５４は、制御部２５２の制御に従って、他の音声取得装置２５０に設置された発信器２５５又は音源識別子を発信する音源識別子発信器８０１と通信し、発信器識別子又は音源識別子を受信する機能を有する。受信器２５４は、例えば赤外線を用いて通信を行う赤外線受信器であってよい。受信器２５４の物理的な設置については、後述する。
【００６４】
発信器２５５は、制御部２５２の制御に従って、発信器識別子を対向する受信器に向かって発信する。発信器２５５は、例えば赤外線を用いて通信を行う赤外線発信器であってよい。発信器２５５の通信方式は、受信器２５４の通信方式と互換性があることを前提とする。
【００６５】
マイクロホン２３０は、音声を取得するための装置である。マイクロホン２３０は、音声取得装置に設置されている。例えば、マイクロホン２３０は、音声取得装置２５０に内蔵されていてもよいし、例えば、音声取得装置２５０の側面又は上面などに設置されてもよい。マイクロホン２３０は、机の形状をした音声取得装置２５０のうち、参加者が座る位置に対応して設置されることが望ましい。
【００６６】
（物理構成）
次に、音声取得装置２５０の物理的な構成について図１０及び図１１を用いて説明する。図１０は、音声取得装置２５０ａ、及び、音声取得装置２５０ｂを上部から見た概観図である。図１１は、音声取得装置２５０ａ、及び、音声取得装置２５０ｂを側面から見た概観図である。
【００６７】
本実施形態において、音声取得装置２５０は、机の形状をしている。そして、受信器２５４及び発信器２５５が一対となって同じ側面に配置されている。尚、受信器２５４及び発信器２５５は、図においては、突出形状で示しているが、実際には、机間の隙間をなくすため、例えば、音声取得装置２５０の参加者に対向する側面に凹状に設けているものとする。受信器２５４及び発信器２５５は、本実施形態においては、音声取得装置２５０当たり、それぞれ３つずつ設置される。なお、情報上の対応関係を示す対応情報（図９）と同様に、マイク２３０のマイクの向きと机の向きとの物理的な構成（構成上の対応関係）についても関連付く。例えば、図１０に示すように、マイク２３０ａのマイクの向きは発信器２５５１ａが備わる側面と対向する向きになっている。つまり、マイク２３０ａは発信器２５５１ａが備わる側に存在する参加者等の音声を主に取得する。
【００６８】
図１０に示すように、受信器２５４と発信器２５５とは、音声取得装置２５０の各辺が接した際に、一方の音声取得装置２５０の受信器２５４と他方の音声取得装置２５０の発信器２５５とが対向するように配置されている。例えば、図９においては、机の天板の一番長い辺を合わせたときに、受信器２５４３ａと発信器２５５３ｂ、発信器２５５３ａと受信器２５４３ｂが対向し、通信可能となる。
【００６９】
また、図１０に点線で示したように、音声取得装置２５０は、マイクロホン２３０を内蔵する。マイクロホン２３０は、受信器２５４の数に対応して設けられる。本実施形態においては、マイクロホン２３０は、音声取得装置２５０当たり３つ設置される。マイクロホン２３０は、受信器２５４及び発信器２５５と対応付けられている。
【００７０】
音声取得装置２５０の天板の表面には、認識コード７００が模様として埋め込まれている。認識コード７００は、音声取得装置２５０毎の音声取得装置識別子を示すものである。全体に繰り返し埋め込まれているため、この認識コード７００を解読することによって、認識コードを映した映像から、ユーザが指示した地点の最寄の音声取得装置２５０がどの音声取得装置であるかを識別することが可能となる。なお、本実施形態に係る認識コード７００は音声取得装置識別子を示す場合を例に挙げて説明するが、かかる例に限定されず、例えば、認識コード７００は複数台のマイク２３０を一組としたマイクセットを識別する識別子の場合でも良い。例えば、図１０に示すように、マイク２３０ａ〜ｃを一組としたマイクセットを例示できる。かかる場合、音声取得装置２５０に複数台のマイクセットを備えることができる。なお、この場合、例えば、音声取得装置２５０の表面のうち、第１のマイクセットの備わる周辺部には認識コード７００ａが表示され、第２のマイクセットの備わる周辺部には認識コード７００ｂが表示される。
【００７１】
ここで、認識コード７００は、音声取得装置２５０の識別子を記憶可能なコードであり、その画像から情報を読み取ることができる。例えば、図示したＱＲコード（登録商標）、その他の２次元コード、及び１次元コードであるバーコードであってもよい。
【００７２】
次に、図１２、及び図１３を用いて、音声取得装置２５０の受信部２５４が音源識別子を受信するときの様子について説明する。図１２は、音源識別子発信器と音声取得装置との通信について説明する説明図である。図１３は、バッチホルダの概観構成例について説明する説明図である。
【００７３】
図１２に示すように、音声取得装置２５０に対して参加者１０が着席した場合を考える。音声取得装置２５０の、参加者１０が着席した側の側面に、受信器２５４２が設置されている。このとき、参加者１０は、バッチホルダ８００を身に着けており、バッチホルダ８００が有する音源識別子発信器８０１が、音源識別子を、音声取得装置２５０の受信器２５４２に発信する。図１２に示すように、参加者１０が着席した際に、バッチホルダ８００と受信器２５４２とが対向する位置にくるよう、音声取得装置２５０は設計されることが望ましい。
【００７４】
ここで、バッチホルダ８００の構成について、図１３を用いて説明する。バッチホルダ８００は、例えば参加者１０が自身を示すためのバッチ等を身に着けるためのものである。例えば、バッチホルダ８００に、音源識別子を発信するための音源識別子発信器８０１が取り付けられている。音源識別子は、音源を識別するための符号であり、例えば社員番号のように、個人に割り当てられた識別番号であってもよい。
【００７５】
以上、説明してきた通り、本実施形態に係る情報処理システム２００は、机の形状をした音声取得装置２５０を組み合わせた際に、それぞれ側面に設けられた受信器２５４及び発信器２５５間において、発信器識別子を送受信することによって、どの受信器がどの発信器と対向しているかを、把握することができるようになる。また、対応情報作成装置２６０が、予めそれぞれの音声取得装置２５０の形状などのデータを保持していると、どのような配置で音声取得装置２５０が配置されているのか、仮想空間に再現することが可能である。
【００７６】
また、例えば参加者１０に音源識別子をそれぞれ付与し、参加者が着席した箇所の受信器２５４が音源識別子を受信することができるように、参加者が身につけるバッチホルダ８００などに音源識別子発信器８０１を設けることにより、音声取得装置２５０及び、音声取得装置２５０から対応情報を受信した、対応情報作成装置２６０は、各音声取得装置２５０のどの位置にどの参加者が着席しているかを把握することができるようになる。
【００７７】
（動作例）
ここで、以上のような情報処理システム２００を用いた動作例について説明をする。例えば、音声取得装置２５０を４つ組み合わせた例について説明をする。４つの音声取得装置２５０を組み合わせると、対向する受信器２５４と発信器２５５との間で、発信器識別子の送受信が行われる。そして、受信器２５４は、発信器識別子を受信すると、制御部２５２の制御に応じて、受信した発信器識別子を記憶部２５１の対応情報の受信情報に記憶する。
【００７８】
また、そのように組み合わせられた音声取得装置２５０に、参加者が着席した場合を考える。ここでは、４名の参加者が着席するものとする。参加者が着席すると、参加者の保有するバッチホルダの音源識別子発信器から、音声取得装置２５０の受信器２５４に音源識別子が送信される。受信された音源識別子は、制御部２５２の制御に応じて、記憶部２５１の対応情報の受信情報に記憶される。
【００７９】
このようにして、収集された対応情報を図１４〜図１７にそれぞれ示す。図１４〜図１７は、音声取得装置２５０において取得された、対応情報を示す説明図である。
【００８０】
図１４は、音声取得装置２５０ａについてのものである。音声取得装置識別子２１０２、マイク識別子２１０４、発信器識別子２１０６、受信器識別子２１０８が予め記憶されており、受信情報２１１０に、それぞれ対応する受信器２５４が受信した情報が格納されている。
【００８１】
以下、それぞれ、図１５は２５０ｂ、図１６は２５０ｃ、図１７は２５０ｄについての対応情報を示す。このように収集された対応情報は、対応情報作成装置２６０へ送信される。
【００８２】
それぞれの音声取得装置２５０において収集された対応情報が、対応情報作成装置２６０において受信されると、対応情報作成装置２６０は、予め保持している、机の形状、構成、及び参加者に割り当てられた音源識別子の情報を用いて、音声取得装置２５０の配置状況、及び、参加者の着席状況を把握することが可能である。即ち、どの音源の音声をどのマイクロホンによって取得しているかを把握することが可能である。
【００８３】
即ち、対応情報作成装置２６０は、図１４〜図１７の対応情報を用いて、図１８のような配置で音声取得装置が配置されていること、参加者が着席している位置、及び、参加者が着席している位置に対応するマイクロホンを把握することも可能である。図１８は、対応情報作成装置２６０において認識される音声取得装置の配置例を示す説明図である。
【００８４】
このような状況において、撮像装置２４０が撮影した映像を見ながら、情報処理装置２１０の表示画面上から音声制御をする際の動作について、図１９及び図２０を用いて説明する。図１９は、本発明の第２の実施形態に係る情報処理システムの音声制御について説明するための説明図である。図２０は、本発明の第２の実施形態に係る情報処理システム２００の音声調整のマイク特定フローを示すサブフローチャートである。
【００８５】
音声調整の全体の流れについては、図６において説明した内容と同様であるため、説明を省略する。マイク特定フローについてのみ相違するため、図６のステップＳ１０４のサブフローチャートである図２０に示したマイク特定フローについて説明する。前提として、情報処理装置２１０は、音声取得装置２５０の配置が行われたとき、又は、参加者が着席したときなどの、対応情報が更新されたときに、対応情報作成装置２６０から対応情報を取得しているものとする。
【００８６】
図１９において、ユーザは、音声を調整したい対象を画面上において指差すようにタッチする。ここでは、参加者４０の音声を調整する場合について考える。参加者４０を指差すようにタッチすると、指差した座標位置が取得される。そして、情報処理装置２１０の制御部２１４は、座標位置入力時の画像を取得する（Ｓ３０２）。そして、制御部２１４は、取得された画像から、座標位置に最も近い認識コードを検索する（Ｓ３０４）。
【００８７】
次に、対応情報から認識コードに対応する机を特定する（Ｓ３０６）。具体的には、ステップＳ３０４において検索された認識コード７００を読取ると、各机に付与された音声取得装置識別子「２５０ｄ」を取得することが出来る。そして、特定された机の対応情報の中から、音源識別子を受信した受信器を特定する（Ｓ３０８）。図１７を参照すると、音声取得装置２５０ｄの中で、音源識別子を受信しているのは、受信器２５４２ｄであることがわかる。
【００８８】
そして、この特定された受信器２５４２ｄに対応するマイクロホンを特定する（Ｓ３１０）。ここでは、図１７を参照すると、対応するマイク識別子は２３０ｋであることがわかる。
【００８９】
このようにして、操作画面上の位置から、音声調整対象のマイクロホンを特定し、確実に所望のマイクロホンの調整を実行することが可能である。
【００９０】
このとき、例えば、特定された机（または、複数台のマイク２３０からなるマイクセット）に２名以上の参加者が座っている場合には、制御部２１４は、双方の調整インタフェースを表示させるようにしてもよい。
【００９１】
（効果の例）
以上説明したように、本発明の第２の実施形態に係る情報処理システムによると、予めユーザが対応情報を設定することなく、自動的に対応情報を収集し、マイクロホンの特定をすることが出来る。そして特定されたマイクロホンに対して、映像を見ながら音声の調整を実行することが出来るようになる。
【００９２】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されないことは言うまでもない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても当然に本発明の技術的範囲に属するものと了解される。
【００９３】
例えば、上記第1の実施形態では、固定マイクを用いたが、かかる例に限定されない。例えば、ピンマイクを用いてもよく、その場合には、参加者の着席位置に応じてピンマイクの位置が決まるため、そのエリア情報と予め対応づけておく必要がある。
【００９４】
また、例えば、本実施形態においては、表示部の上にタッチパネル式の座標入力部を積層した表示入力部を有する構成としたが、これに限られない。例えば、表示部は、スクリーンに映しだすプロジェクタに接続するインタフェースであってもよい。この場合、例えばマウスなどの入力装置を用いてもよい。
【００９５】
また、例えば、上記第２の実施形態においては、音声取得装置は、二等辺三角形形状の机であることとしたが、この形状は限定されない。受信器、送信器、及びマイクロホンが一対となり、机の参加者が座る位置に配置されるものであればよい。
【００９６】
また、例えば、上記第２の実施形態においては、音源識別子は、参加者が身につけるバッチホルダから発信されるものとしたが、かかる例に限られない。例えば、プロジェクタなどの音源となりうる装置にそれぞれ音源識別子が付与され、装置に音源識別子発信器を設けてもよい。その場合、音声取得装置の受信器の配置、又は、通信方式を工夫する必要がある。例えば、プロジェクタのファンの音がうるさい場合に、かかる音量を下げるために用いることが出来る。
【００９７】
また、例えば、上記第２の実施形態においては、受信器及び発信器は、赤外線を用いたものとしたがこれに限られない。例えば、音波を用いたドップラーセンサ、ＺｉｇＢｅｅ（登録商標）ノード等を用いて信号の送受信を行ってもよい。
【００９８】
また、例えば、上記第２の実施形態においては、認識コードは、音声取得装置の上面にのみ埋め込まれているものとしたが、これに限られない。例えば、側面や、机の脚など、表面全体に埋め込まれているものであってもよい。
【００９９】
また、例えば、上記第２の実施形態においては、情報処理装置は、対応情報に更新がある度に、対応情報を、対応情報作成装置から取得しているものとしたが、これに限られない。例えば、マイク特定処理を行う前に対応情報を取得してもよい。
【０１００】
また、上記第２の実施形態においては、認識コード７００は、音声取得装置識別子を示す場合を例に挙げて説明するが、かかる例に限定されない。例えば、認識コード７００は複数台のマイク２３０を一組としたマイクセットを識別する識別子の場合でも良い。例えば、図１０に示すように、マイク２３０ａ〜ｃを一組としたマイクセットを例示できる。かかる場合、音声取得装置２５０に複数台のマイクセットを備えることができる。なお、この場合、例えば、音声取得装置２５０の表面のうち、第１のマイクセットの備わる周辺部には認識コード７００ａが表示され、第２のマイクセットの備わる周辺部には認識コード７００ｂが表示される。また、認識コード７００は、マイクロホン１台１台のそれぞれを識別するものであってもよい。この場合には、認識コードから音声取得装置を識別し、マイクロホンと紐付けることなく、認識コードから直接マイクロホンを特定することが出来る。
【０１０１】
尚、本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。
【符号の説明】
【０１０２】
１１０ 情報処理装置
１１３ 座標入力部
１１４ 制御部
１１５ 表示部
１１６ 音声出力部
１２０ 音声処理装置
１３０ マイクロホン
１４０ 撮像装置
【特許請求の範囲】
【請求項１】
複数のマイクロホンと、
映像を撮影する撮像装置と、
前記複数のマイクロホンによって取得された音声を処理する音声処理装置と、
前記映像及び前記音声処理装置において処理された音声を出力し、前記音声処理装置に対して音声制御情報を出力する情報処理装置と、
を備え、
前記情報処理装置は、
映像を表示する表示部と、
前記表示部の表示画面上の座標位置を入力する座標入力部と、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、当該特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、
を有する、情報処理システム。
【請求項２】
音源には予め識別のための音源識別子が付与されており、
前記対応情報は、前記音源識別子及び前記マイク識別子の対応関係を収集して生成された情報である、請求項１に記載の情報処理システム。
【請求項３】
前記複数のマイクロホンは、音声取得装置に備わっており、
前記音声取得装置は、
前記音源識別子を受信する受信器を有し、
前記音声取得装置の表面には、音声取得装置を識別するための音声取得装置識別子が埋め込まれた認識コードが表示され、
前記対応情報は、前記音声取得装置識別子、前記音源識別子、前記受信器に付与された受信器識別子、及び前記マイク識別子の対応関係を収集して生成された情報であり、
前記制御部は、
前記映像中の前記認識コードから前記音声取得装置識別子を読取り、読取られた音声取得装置識別子及び前記対応情報を用いて、前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定する、請求項２に記載の情報処理システム。
【請求項４】
前記音声取得装置は、机の形状をしており、
前記受信器は、前記音声取得装置の側面に設置され、
前記受信器は、人が身につけた、音源識別子発信器から前記音源識別子を受信する、
請求項３に記載の情報処理システム。
【請求項５】
前記音声取得装置は、自らの発信器識別子を発信する発信器をさらに有し、
前記発信器は、他の音声取得装置と組み合わせられた場合に、他の音声取得装置の受信器と対向するよう配置され、
前記受信器は、前記音源識別子又は前記発信器識別子のいずれかを受信し、
複数の前記音声取得装置の対応情報を取得し、前記複数の音声取得装置の配置を認識する対応情報作成装置をさらに備える、請求項４に記載の情報処理システム。
【請求項６】
前記音声処理装置は、
前記マイクロホンから入力された音声にマイク識別子を付与するマイク識別子付与部と、
前記音声に付与されたマイク識別子と、前記音声制御情報とに基づいて、前記音声を処理する音声ミキサと、
を有する、請求項１〜４のいずれか１項に記載の情報処理システム。
【請求項７】
前記対応情報は、前記座標位置と前記音声取得部識別子との対応関係を予め記憶した情報である、請求項１に記載の情報処理システム。
【請求項８】
複数のマイクロホンによって取得された音声、及び映像を取得し、出力する情報処理装置であって、
前記映像を表示する表示部と、
前記表示部の表示画面上の座標位置を入力する座標入力部と、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、
を備える情報処理装置。
【請求項９】
映像を表示する表示部と、前記表示部の表示画面上の座標位置を入力する座標入力部と、制御部と、を備える情報処理装置による方法であって、
前記制御部が、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する、情報処理方法。
【請求項１】
複数のマイクロホンと、
映像を撮影する撮像装置と、
前記複数のマイクロホンによって取得された音声を処理する音声処理装置と、
前記映像及び前記音声処理装置において処理された音声を出力し、前記音声処理装置に対して音声制御情報を出力する情報処理装置と、
を備え、
前記情報処理装置は、
映像を表示する表示部と、
前記表示部の表示画面上の座標位置を入力する座標入力部と、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、当該特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、
を有する、情報処理システム。
【請求項２】
音源には予め識別のための音源識別子が付与されており、
前記対応情報は、前記音源識別子及び前記マイク識別子の対応関係を収集して生成された情報である、請求項１に記載の情報処理システム。
【請求項３】
前記複数のマイクロホンは、音声取得装置に備わっており、
前記音声取得装置は、
前記音源識別子を受信する受信器を有し、
前記音声取得装置の表面には、音声取得装置を識別するための音声取得装置識別子が埋め込まれた認識コードが表示され、
前記対応情報は、前記音声取得装置識別子、前記音源識別子、前記受信器に付与された受信器識別子、及び前記マイク識別子の対応関係を収集して生成された情報であり、
前記制御部は、
前記映像中の前記認識コードから前記音声取得装置識別子を読取り、読取られた音声取得装置識別子及び前記対応情報を用いて、前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定する、請求項２に記載の情報処理システム。
【請求項４】
前記音声取得装置は、机の形状をしており、
前記受信器は、前記音声取得装置の側面に設置され、
前記受信器は、人が身につけた、音源識別子発信器から前記音源識別子を受信する、
請求項３に記載の情報処理システム。
【請求項５】
前記音声取得装置は、自らの発信器識別子を発信する発信器をさらに有し、
前記発信器は、他の音声取得装置と組み合わせられた場合に、他の音声取得装置の受信器と対向するよう配置され、
前記受信器は、前記音源識別子又は前記発信器識別子のいずれかを受信し、
複数の前記音声取得装置の対応情報を取得し、前記複数の音声取得装置の配置を認識する対応情報作成装置をさらに備える、請求項４に記載の情報処理システム。
【請求項６】
前記音声処理装置は、
前記マイクロホンから入力された音声にマイク識別子を付与するマイク識別子付与部と、
前記音声に付与されたマイク識別子と、前記音声制御情報とに基づいて、前記音声を処理する音声ミキサと、
を有する、請求項１〜４のいずれか１項に記載の情報処理システム。
【請求項７】
前記対応情報は、前記座標位置と前記音声取得部識別子との対応関係を予め記憶した情報である、請求項１に記載の情報処理システム。
【請求項８】
複数のマイクロホンによって取得された音声、及び映像を取得し、出力する情報処理装置であって、
前記映像を表示する表示部と、
前記表示部の表示画面上の座標位置を入力する座標入力部と、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する制御部と、
を備える情報処理装置。
【請求項９】
映像を表示する表示部と、前記表示部の表示画面上の座標位置を入力する座標入力部と、制御部と、を備える情報処理装置による方法であって、
前記制御部が、
前記座標入力部によって入力された座標位置付近に音声調整インタフェースを前記映像に重ねて前記表示部に表示させ、内部又は外部の記憶部に記憶された対応情報に基づいて、前記映像中の前記座標位置に対応する位置の音声を取得するマイクロホンのマイク識別子を特定し、特定されたマイク識別子及び前記音声調整インタフェースに対する前記座標入力部からの入力に応じた音声処理情報を含む音声制御情報を出力する、情報処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１１−３５５２４（Ｐ２０１１−３５５２４Ａ）
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願番号】特願２００９−１７７７１８（Ｐ２００９−１７７７１８）
【出願日】平成２１年７月３０日（２００９．７．３０）
【出願人】（００００００２９５）沖電気工業株式会社 (6,645)
【Ｆターム（参考）】
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願日】平成２１年７月３０日（２００９．７．３０）
【出願人】（００００００２９５）沖電気工業株式会社 (6,645)
【Ｆターム（参考）】
[ Back to top ]