画像通信装置、画像通信方法、プログラム、および画像通信システム
【課題】プライバシーを保護しつつ遠隔コミュニケーションを支援するための画像通信装置、画像通信方法、プログラム、および画像通信システムを提供する。
【解決手段】第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置。
【解決手段】第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像通信装置、画像通信方法、プログラム、および画像通信システムに関する。
【背景技術】
【０００２】
近年、ブロードバンドやクラウド環境の普及、および、情報通信技術の発達に伴うコミュニケーションツールの発達により、場所や時間に制約されないワーキングスタイル（働き方）が広がりつつある。これにより、集団での協働（ｃｏｌｌａｂｏｒａｔｉｏｎ）作業の主な形態も、一般的な一極集中・同一空間型から、遠隔分散協働型へ移り変わっていくことが予測される。この実現のために、音声通話、ＦＡＸ、電子メール、インスタントメッセンジャー、およびＶｏＩＰなどを統合したユニファイドコミュニケーション（登録商標）技術・システムが注目を集めている。
【０００３】
ユニファイドコミュニケーションシステムが伝達するリッチな情報としては、映像や音情報が重要な位置を占め、例えば従来のＴＶ会議システムを基礎とするツールが多くのユニファイドコミュニケーションシステムの位置機能として搭載される。
【０００４】
ところで、いわゆるＴＶ会議システムは、議題が決まった上での話し合いなど、意図的、かつ、正式・公式的なフォーマル・コミュニケーションを主に想定したコミュニケーションツールである。これに対し、近年、チームでの協働作業を円滑に進めるためには組織の一体感や人間関係の醸成が重要であること、また、組織の一体感や人間関係の醸成を高めるためには非計画的で偶然性を持ったインフォーマル・コミュニケーションが大切であることが指摘されている。
【０００５】
このようなインフォーマル・コミュニケーションを支援するためのユニファイドコミュニケーションシステムのツールとしては、ＴＶ会議のように「誰が何時から何時までＡ会議室で」というような計画的な形態ではなく、非計画的なオフィスの日常風景を共有すること、すなわち、オフィス内の環境的な映像と音情報を常に遠隔オフィス間で相互通信、提示しあうものが考えられる。
【０００６】
なお、上述したユニファイドコミュニケーションシステムに関し、例えば特許文献１には、撮像装置によって撮像した映像をそのまま送受信するのでなく、動きの小さな映像部分を送信しないことにより、背景画像が送信されないようにする技術が開示されている。また、特許文献２には、一部の映像領域については正当なアクセス権限を有することが確認された者にのみ提供されるようにする技術が開示されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平５−９１４０７号公報
【特許文献２】特開２００１−１８６５０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、上記のインフォーマル・コミュニケーションを支援するためのユニファイドコミュニケーションシステムは、重大なプライバシー問題を有する。以下、この点について説明する。
【０００９】
非計画的に常時撮影されるオフィス内映像は、配信先の遠隔オフィス側から一方的に閲覧することが可能となる。同一空間であれば、視界内で自分を凝視している人物がいれば、見られている側の人間はその人物の存在に気付くであろう。しかし、例えば部屋の隅に設置された撮像装置が撮像したオフィス内映像が遠隔オフィスに配信される場合、オフィス内映像に含まれる人間は、自分が今見られているのか、誰が見ているのかを判別することは困難である。このため、プライバシー問題につながる密かな一方的遠隔閲覧行為が発生しかねない。
【００１０】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、プライバシーを保護しつつ遠隔コミュニケーションを支援するための、新規かつ改良された画像通信装置、画像通信方法、プログラム、および画像通信システムを提供することにある。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明のある観点によれば、第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置が提供される。
【００１２】
前記第２の表示装置の利用者情報は、前記第２の表示装置側の第２の撮像装置により取得された前記第２の表示装置の利用者の顔画像を含む第２の撮像画像であってもよい。
【００１３】
前記画像通信装置は、前記第１の撮像画像に含まれる顔画像域、および前記第２の撮像画像に含まれる顔画像の詳細度の差分を小さくする画像処理を行う画像処理部をさらに備え、前記制御部は、前記画像処理部による前記画像処理後の第１の撮像画像を前記第２の表示装置に向けて送信し、前記画像処理後の第２の撮像画像を前記第１の表示装置に向けて送信してもよい。
【００１４】
前記第１の表示装置は、人物特定情報と表示装置とが関連付けられたデータベースにおいて、前記第１の撮像画像に含まれる顔画像から取得される人物特定情報に関連付けられている表示装置であってもよい。
【００１５】
前記制御部は、前記第２の表示装置に向けて送信する前記第１の撮像画像に含まれる顔画像の詳細度が閾値を上回った場合に、当該顔画像から取得される人物特定情報に関連付けられている第１の表示装置に向けて前記第２の表示装置の利用者情報を送信してもよい。
【００１６】
前記制御部は、前記第２の撮像画像に前記第２の表示装置の利用者の顔画像が含まれない場合、前記第２の表示装置の利用者情報を前記第１の表示装置に向けて送信しなくてもよい。
【００１７】
前記画像処理は、複数の撮像画像の顔画像領域のうちで、最も詳細度の低い顔画像領域の詳細度に他の顔画像領域の詳細度を揃える処理であってもよい。
【００１８】
前記画像処理部は、さらに、複数の撮像画像のうちで、最もフレームレートが低い撮像画像のフレームレートに他の撮像画像のフレームレートを揃えてもよい。
【００１９】
前記画像処理部は、前記第１の撮像画像に複数の顔画像が含まれる場合、複数の顔画像の各々と前記第２の顔画像の詳細度との差分が小さくなるように前記第２の撮像画像を複数の顔画像の各々について画像処理し、前記制御部は、前記複数の顔画像の各々について画像処理された第２の撮像画像の各々を、前記複数の顔画像領域の各々から取得される人物特定情報に前記データベースにおいて関連付けられている第１の表示装置に送信してもよい。
【００２０】
前記第１の表示装置を視認可能な位置は前記第１の撮像装置の撮像範囲に含まれ、前記第２の表示装置を視認可能な位置は前記第２の撮像装置の撮像範囲に含まれてもよい。
【００２１】
また、上記課題を解決するために、本発明の別の観点によれば、第１の撮像装置から第１の撮像画像を取得するステップと、前記第１の撮像画像を第２の表示装置に向けて送信するステップと、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信するステップと、を含む画像通信方法が提供される。
【００２２】
また、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、として機能させるためのプログラムが提供される。
【００２３】
また、上記課題を解決するために、本発明の別の観点によれば、第１の撮像装置、前記第１の撮像装置側に設けられる第１の表示装置、前記第１の撮像装置から第１の撮像画像を取得する画像通信装置、および第２の表示装置を備える画像通信システムであって、前記画像通信装置は、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部を有する、画像通信システムが提供される。
【発明の効果】
【００２４】
以上説明したように本発明によれば、プライバシーを保護しつつ遠隔コミュニケーションを支援することが可能である。
【図面の簡単な説明】
【００２５】
【図１】本発明の実施形態による画像通信システムの構成を示した説明図である。
【図２】画像通信システムの詳細な構成を示した説明図である。
【図３】閲覧者側装置の表示部の視野角と撮像部の画角の関係を示した平面図である。
【図４】被閲覧者側表示装置の表示画面の具体例を示した説明図である。
【図５】画像調整処理の具体例を示した説明図である。
【図６】本実施形態による画像通信システムの動作を示すシーケンス図である。
【図７】画像処理通信装置による画像調整処理に関する動作を示したフローチャートである。
【図８】拠点Ｂの撮像画像の具体例を示した説明図である。
【図９】被閲覧者側表示装置の表示画面の変形例を示した説明図である。
【発明を実施するための形態】
【００２６】
以下に添付図面を参照しながら、本発明の実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２７】
また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。例えば、実質的に同一の機能構成を有する複数の構成を、必要に応じて被閲覧者側表示装置２００Ａおよび２００Ｂのように区別する。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。例えば、被閲覧者側表示装置２００Ａおよび２００Ｂを特に区別する必要が無い場合には、単に被閲覧者側表示装置２００と称する。
【００２８】
＜１．画像通信システムの基本構成＞
まず、図１を参照し、本実施形態による画像通信システムの基本構成を説明する。
【００２９】
図１は、本発明の実施形態による画像通信システムの構成を示した説明図である。図１に示したように、本発明の実施形態による画像通信システムは、閲覧者側装置１００と、被閲覧者側表示装置２００と、被閲覧者側撮像装置３００と、画像処理通信装置４００と、を備える。なお、図１には、複数の遠隔空間として拠点Ａおよび拠点Ｂを示しており、拠点Ａに閲覧者側装置１００が存在し、拠点Ｂに被閲覧者側表示装置２００および被閲覧者側撮像装置３００が存在する。
【００３０】
被閲覧者側撮像装置３００（第１の撮像装置））は、拠点Ｂを撮像し、拠点Ｂの撮像画像を取得する。そして、被閲覧者側撮像装置３００によって取得された拠点Ｂの撮像画像は、例えば拠点Ａからの要求に応じ、画像処理通信装置４００を介して閲覧者側装置１００に送信される。なお、拠点Ｂの撮像画像は、遠隔空間で閲覧され得る画像であるので、以下では、拠点Ｂの撮像画像に含まれる人物（被写体）を「被閲覧者」と称する。
【００３１】
閲覧者側装置１００は、図１に示したように、撮像部１０１、表示部１０３および入力部１０４を有する。撮像部１０１（第２の撮像装置）は、閲覧者側装置１００の利用者を撮像する。表示部１０３（第２の表示部）は、画像処理通信装置４００を介して被閲覧者側撮像装置３００から受信される拠点Ｂの撮像画像を表示する。入力部１０４は、被閲覧者側撮像装置３００を制御するための操作入力を受け付ける。例えば、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を有する場合、入力部１０４への操作入力によりズーム処理や画角変更処理を指定することが可能である。なお、閲覧者側装置１００の利用者は、閲覧者側装置１００の表示部１０３を見るという行為により拠点Ｂの撮像画像を閲覧できるので、以下では、拠点Ａに存在する閲覧者側装置１００の利用者を「閲覧者」と称する。
【００３２】
画像処理通信装置４００は、拠点Ｂの撮像画像の閲覧者が存在する場合、閲覧者情報（利用者情報）として、例えば閲覧者の撮像画像を被閲覧者側表示装置２００に送信する。そして、被閲覧者側表示装置２００（第１の表示装置）は、画像処理通信装置４００から受信した閲覧者画像を表示する。このように、本実施形態によれば、被閲覧者側に閲覧者情報を通知するので、被閲覧者は、自分が今見られているのか、誰が見ているのかを判別することが可能となる。これにより、プライバシー問題につながる密かな一方的遠隔閲覧行為を抑止することができる。さらに、本実施形態による画像処理通信装置４００は、閲覧者画像または拠点Ｂの撮像画像の情報量を必要に応じて調整することにより、上記問題を抑止すると共に、閲覧者および被閲覧者が同一空間に存在する場合のような自然な感覚のコミュニケーションを実現することが可能である。この点については詳細に後述する。
【００３３】
なお、図１においては、１人の閲覧者が１台の閲覧者側装置１００を所有し、１人の被閲覧者が１台の被閲覧者側表示装置２００を所有する利用形態を示しているが、１台の装置を複数の利用者が共有する利用形態にも本実施形態は適用可能である。
【００３４】
また、図１においては、閲覧者側装置１００により撮像される閲覧者が１人である例を示しているが、閲覧者側装置１００により撮像される閲覧者、すなわち、拠点Ａに存在する人物は複数名であってもよい。
【００３５】
同様に、図１においては、被閲覧者側撮像装置３００により撮像される被閲覧者が１人である例を示しているが、被閲覧者側撮像装置３００により撮像される被閲覧者、すなわち、拠点Ｂに存在する人物は複数名であってもよい。特に、被閲覧者側撮像装置３００は拠点Ｂの俯瞰的な画像を撮像するため、複数の被写体（被閲覧者）が画角内に存在する可能性が高いが、本実施形態によれば、各被閲覧者が個別に有する被閲覧者側表示装置２００に閲覧者情報を通知することが可能である。
【００３６】
上記のように、本発明は拠点Ａの閲覧者および拠点Ｂの被閲覧者がそれぞれ複数名である利用形態にも適用可能であるが、以下では、最も簡易的な、閲覧者が１人であり、被閲覧者が１人である利用形態に重きを置いて説明する。
【００３７】
＜２．画像通信システムの詳細な構成＞
以上、図１を参照し、本実施形態による画像通信システムの基本構成を説明した。続いて、画像通信システムを構成する閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００について順次詳細に説明する。
【００３８】
［２−１．閲覧者側装置］
図２は、画像通信システムの詳細な構成を示した説明図である。画像通信システムを構成する閲覧者側装置１００は、図２に示したように、撮像部１０１、顔検出部１０２、表示部１０３、入力部１０４および制御部１０５を備える。なお、図２においては撮像部１０１、顔検出部１０２、表示部１０３、入力部１０４および制御部１０５の各構成が１つの閲覧者側装置１００に実装される例を示しているが、これら各構成は複数の装置に分散的に実装されてもよい。
【００３９】
撮像部１０１は、撮像範囲に含まれる閲覧者を撮像して閲覧者画像を取得し、閲覧者画像を顔検出部１０２に出力する。なお、撮像部１０１は、デジタルカメラやＷｅｂカメラのように、撮像光学系および撮像素子を含む一般的な撮像装置であってもよい。
【００４０】
顔検出部１０２は、撮像部１０１によって取得された閲覧者画像から閲覧者の顔領域を検出し、閲覧者の顔領域を示す顔領域情報および閲覧者画像を制御部１０５に出力する。この顔領域情報は、例えば、閲覧者画像内の顔領域と顔以外の領域とが２値で表現されたデータであり、閲覧者画像における顔領域の位置、大きさおよび形状を示す。顔領域の検出のための画像処理方法としては、肌色情報を用いた方法や、顔の部品に注目する方法など、既存の複数の方法が存在し、本実施形態においては、これらの方法のいずれを利用してもよい。なお、閲覧者側装置１００では人物特定、すなわち、閲覧者と顔画像データベースとの照合機能は必須でないので、顔検出部１０２は、閲覧者の顔の特徴を認識する機能は備えていなくてもよい。
【００４１】
表示部１０３は、被閲覧者側撮像装置３００の撮像部３０１によって取得された拠点Ｂの撮像画像を表示する。なお、拠点Ｂの撮像画像は、画像処理通信装置４００の制御部４０１および閲覧者側装置１００の制御部１０５を介して入力される。表示部１０３は、液晶ディスプレイや有機ＥＬディスプレイのような一般的な表示装置であってもよい。ただし、表示部１０３は、表示部１０３を視認可能な位置が撮像部１０１の撮像範囲に含まれるような位置に配置されることが望ましい。以下、この点について図３を参照して具体的に説明する。
【００４２】
図３は、表示部１０３の視野角と撮像部１０１の画角の関係を示した平面図である。なお、図３においては、表示部１０３の視野角（表示部１０３を視認可能な範囲）を破線で、撮像部１０１の画角（撮像範囲）を一点鎖線で示している。本実施形態の効果実現のためには、閲覧者の閲覧行為が生じたことを精度良く検出することが重要である。このため、図３に示したように、閲覧者が表示部１０３を閲覧する場合には閲覧者の顔が基本的に撮像部１０１の画角に収まることが望ましい。
【００４３】
さらに、表示部１０３の視野角が撮像部１０１の画角内に収まるように表示部１０３および撮像部１０１を配置すれば、閲覧者が表示部１０３、すなわち拠点Ｂの撮像画像を見る際に、閲覧者の顔を含む閲覧者画像が必ず得られ、閲覧者画像から顔領域を検出することが可能となる。なお、このような配置関係は、液晶ディスプレイの上部のフレームにＷｅｂカメラが埋め込まれている、一般的なＷｅｂカメラ内蔵液晶ディスプレイを用いることによっても実現される。なお、被閲覧者側装置３００の撮像部３０１および被閲覧者側装置２００の表示部２０１も同様に、表示部２０１を視認可能な位置が撮像部３０１の撮像範囲に含まれるような位置に配置されることが望ましい
【００４４】
入力部１０４は、被閲覧者側撮像装置３００を制御するための操作入力を受け付ける。例えば、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を有する場合、入力部１０４への操作入力によりズーム処理や画角変更処理を指定することが可能である。また、閲覧者は、入力部１０４への操作入力により拠点Ｂの撮像画像の送信を要求することが可能である。なお、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を持たない場合、または、閲覧者にズーム等の操作欲求がないと考えられる場合には、ズーム処理や画角変更処理を指定するための入力部１０４は不要である。
【００４５】
制御部１０５は、閲覧者側装置１００の動作全般を制御する。例えば、制御部１０５は、顔検出部１０２から入力される閲覧者画像および顔領域情報を画像処理通信装置４００に送信する。また、制御部１０５は、画像処理通信装置４００から受信される拠点Ｂの撮像画像を表示部１０３に出力する。また、制御部１０５は、入力部１０４から入力される指示情報を画像処理通信装置４００に送信する。
【００４６】
［２−２．被閲覧者側表示装置］
被閲覧者側表示装置２００は、図２に示したように、表示部２０１、および制御部２０２を備える。なお、被閲覧者側表示装置２００は、スマートフォン、携帯電話、携帯型ゲーム機、携帯型映像処理装置などの情報端末であってもよい。
【００４７】
表示部２０１は、閲覧者側装置１００によって取得された閲覧者画像を表示する。この閲覧者画像は、画像処理通信装置４００の制御部４０１および被閲覧者側表示装置２００の制御部２０２を介して入力される。以下、図４を参照し、表示部２０１に表示される閲覧者画像についてより具体的に説明する。
【００４８】
図４は、表示部２０１に表示される閲覧者画像の具体例を示した説明図である。図４に示したように、表示部２０１は、コンテンツ表示エリア２１０および閲覧者画像表示エリア２２０を含む。
【００４９】
コンテンツ表示エリア２１０には、被閲覧者側表示装置２００の通常の用途のためのコンテンツが表示される。図４には、コンテンツの一例としてカレンダーを示しているが、コンテンツは、写真、動画、ゲーム、または各種操作画面などであってもよい。
【００５０】
また、閲覧者画像表示エリア２２０には、閲覧者画像２２２が表示される。この閲覧者画像は、詳細については後述するように、閲覧者側装置１００の表示部１０３に表示される拠点Ｂの撮像画像に含まれる被閲覧者の顔領域と同等の情報量を有する。
【００５１】
このような構成により、被閲覧者側表示装置２００が本実施形態の用途のためだけの端末でなく、汎用的に使用される情報端末である場合、コンテンツ表示エリア２１０に本来の用途のためのコンテンツを表示しつつ、閲覧者画像を閲覧者画像表示エリア２２０に表示することができる。
【００５２】
なお、表示部２０１は、閲覧者側装置１００の表示部１０３と同様に、液晶ディスプレイや有機ＥＬディスプレイのような一般的な表示装置であってもよい。
【００５３】
制御部２０２は、被閲覧者側表示装置２００の動作全般を制御する。例えば、制御部２０２は、画像処理通信装置４００から受信される閲覧者画像を表示部２０１に出力する。
【００５４】
［２−３．被閲覧者側撮像装置］
被閲覧者側撮像装置３００は、図２に示したように、撮像部３０１、顔検出部３０２、顔認識部３０３、および制御部３０４を備える。なお、図２においては被閲覧者側撮像装置３００と被閲覧者側表示装置２００を別個の装置として記載されているが、被閲覧者側撮像装置３００の機能と被閲覧者側表示装置２００の機能は同一装置に実装されてもよい。さらに、図２においては撮像部３０１、顔検出部３０２、顔認識部３０３、および制御部３０４の各構成が１つの被閲覧者側撮像装置３００に実装される例を示しているが、これら各構成は複数の装置に分散的に実装されてもよい。
【００５５】
撮像部３０１は、撮像範囲に含まれる被写体を撮像して拠点Ｂの撮像画像を取得し、拠点Ｂの撮像画像を顔検出部３０２に出力する。なお、撮像部３０１は、デジタルカメラやＷｅｂカメラのように、撮像光学系および撮像素子を含む一般的な撮像装置であってもよい。
【００５６】
顔検出部３０２は、撮像部３０１によって取得された拠点Ｂの撮像画像から被閲覧者の顔領域を検出し、被閲覧者の顔画像の特徴情報を取得する。そして、顔検出部３０２は、被閲覧者の顔領域を示す顔領域情報、顔画像の特徴情報、および拠点Ｂの撮像画像を顔認識部３０３に出力する。
【００５７】
なお、顔画像の特徴情報は、顔の各部分の相対位置、大きさ、および形状などに基づく特徴量・パターンのデータである。特徴量としては、Ｈａａｒウェーブレット特徴量などの既存の多様な特徴量が存在するが、本実施形態においては、これらのいずれの特徴量を利用してもよい。
【００５８】
顔認識部３０３は、顔検出部３０２で得られた顔画像の特徴情報から、被閲覧者の人物特定を行い、拠点Ｂの撮像画像、顔領域情報および人物特定情報を制御部３０４に出力する。なお、人物特定のための顔画像の特徴情報は事前に登録済み、すなわち、照合のための顔画像データベースが事前に用意されていてもよい。また、顔認識および人物特定に用いるアルゴリズム、データ処理の方法は特に限定されない。
【００５９】
制御部３０４は、被閲覧者側撮像装置３００の動作全般を制御する。例えば、制御部３０４は、顔認識部３０３から入力される拠点Ｂの撮像画像、顔領域情報および人物特定情報を画像処理通信装置４００に送信する。また、制御部３０４は、閲覧者側装置１００の入力部１０４から、画像処理通信装置４００の制御部４０１を介して操作指示情報を受信し、指示に応じたズーム処理や画角変更処理を実行する。
【００６０】
［２−４．画像処理通信装置］
画像処理通信装置４００は、図２に示したように、制御部４０１、記憶部４０２および画像処理部４０３を備える。
【００６１】
制御部４０１は、画像処理通信装置４００の動作全般を制御する。例えば、制御部４０１は、閲覧者側装置１００から拠点Ａの閲覧者画像および顔領域情報を受信し、記憶部４０２に出力する。また、制御部４０１は、被閲覧者側撮像装置３００から拠点Ｂの撮像画像、顔領域情報および人物特定情報を受信し、記憶部４０２に出力する。
【００６２】
また、制御部４０１は、閲覧者側装置１００から受信された閲覧者画像の顔領域情報と、被閲覧者側撮像装置３００から受信された被閲覧者の顔領域情報とを比較し、画像処理部４０３に、記憶部４０２を介して、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を指示する。この画像調整処理の詳細については図５を参照して後述する。
【００６３】
また、制御部４０１は、記憶部４０２から入力される画像調整処理後の閲覧者画像を、被閲覧者の人物特定情報に基づいて被閲覧者が個人所有する被閲覧者側表示装置２００に送信する。また、制御部４０１は、記憶部４０２から入力される拠点Ｂの撮像画像を閲覧者側装置１００に送信する。
【００６４】
記憶部４０２は、制御部４０１から入力された閲覧者画像、閲覧者の顔領域情報、拠点Ｂの撮像画像、被閲覧者の顔領域情報、および被閲覧者の人物特定情報を記憶する。また、記憶部４０２は、制御部４０１から入力された画像調整処理の指示および閲覧者画像を画像処理部４０３に出力する。また、記憶部４０２は、画像処理部４０３から出力された画像調整処理後の閲覧者画像または拠点Ｂの撮像画像の少なくともいずれかを制御部４０１に出力する。
【００６５】
画像処理部４０３は、記憶部４０２から入力された画像調整処理の指示に従い、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う。なお、本明細書における情報量は、画像ファイルのデータ量でなく、画像を見る人間にとっての情報の詳細度を示し、本明細書における情報量には例えば画素数が該当する。ここで、情報量が画素数である場合に画像調整処理についてより詳細に説明する。
【００６６】
（画像調整処理の意義）
同一空間での直接目視の場合、第１の人物と、第２の人物は、ほぼ同じ縮尺率で相手の姿を認識し合う。すなわち、第１の人物が得る第２の人物の情報量と、第２の人物が得る第１の人物の情報量は同等である。
【００６７】
しかし、遠隔空間同士のコミュニケーションでは、第１の人物が得る第２の人物の情報量と、第２の人物が得る第１の人物の情報量は異なることが予想される。例えば、拠点Ａの閲覧者画像の顔領域の画素数が２００であり、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の画素数が１００である場合、閲覧者の顔領域は被閲覧者の顔領域の約２倍の情報量を有する。このとき、画像処理通信装置４００が閲覧者画像をそのままの情報量で被閲覧者側表示装置２００に送信すると、被閲覧者により得られる閲覧者の顔領域の情報量は、閲覧者が得る被閲覧者の顔領域の情報量の２倍になってしまう。
【００６８】
そこで、本実施形態においては、遠隔空間同士のコミュニケーションでもこの自然な感覚を再現するために、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う。
【００６９】
（画像調整処理の対象）
具体的には、画像処理部４０３は、閲覧者画像または拠点Ｂの撮像画像の少なくともいずれかを処理することにより、双方に含まれる顔領域の情報量の差分を小さくする。例えば、画像処理部４０３は、閲覧者画像と拠点Ｂの撮像画像のうちで、顔領域の情報量が多い方の画像の情報量を他方の情報量に揃えるための画像処理を行う。
【００７０】
ここで、想定する利用形態では撮像部１０１が表示部１０３の近傍に配置されるので、それに伴い閲覧者が撮像部１０１の近くに位置し、結果、閲覧者の顔領域が大きくなる可能性が高い。一方、拠点Ｂの撮像部３０１は俯瞰的な画像を撮像するので、被閲覧者は撮像部３０１から離れて位置し、結果、被閲覧者の顔領域が閲覧者と比較して小さくなる可能性が高い。
【００７１】
このため、多くのケースでは、画像処理部４０３は、閲覧者の顔領域の情報量を被閲覧者の顔領域の情報量に揃える画像処理を行うと考えられる。ただし、画像処理部４０３は、閲覧者画像に含まれる閲覧者の顔領域の情報量が拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の情報量より少ない場合、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の情報量を閲覧者の顔領域の情報量に揃える画像処理を行ってもよい。この場合、画像処理部４０３は、拠点Ｂの撮像画像内の被閲覧者の顔領域の情報量のみを落としてもよいし、拠点Ｂの撮像画像全体の情報量を落としてもよい。
【００７２】
変形例として、画像処理部４０３は、閲覧者の顔領域の情報量および被閲覧者の顔領域の情報量に関係なく、閲覧者画像および拠点Ｂの撮像画像の双方を処理することにより、閲覧者の顔領域の情報量および被閲覧者の顔領域の情報量を同一の情報量に揃えてもよい。
【００７３】
（画像調整処理の方法）
また、画像処理部４０３は、ニアレストネイバー法やバイキュービック法などの既存の方式を用いて閲覧者画像または拠点Ｂの撮像画像の解像度を変換することにより、双方の画像の顔領域の情報量を揃える。
【００７４】
例えば、閲覧者の顔領域の画素数が拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の画素数の４倍であった場合、画像処理部４０３は、図５に示したように、閲覧者画像の画素数を４分の１に落とす処理を行う。これは、画像の情報量が４分の１に落とされたことと等価である。
【００７５】
なお、双方の顔領域の情報量を完全一致させる必要は無く、画像調整処理後の双方の顔領域の情報量は所定の範囲内の差分を有してもよい。また、上記では情報量の変換方法として解像度変換処理を説明したが、応用例として、ぼかし処理のように画像をにじませることによって情報量を落とすことも可能である。さらに、画像処理部４０３は、情報量の公平性の観点から、閲覧者画像および拠点Ｂの撮像画像のうちで、フレームレートが低い方の画像のフレームレートに他方のフレームレートを変換してもよい。
【００７６】
＜３．画像通信システムの動作＞
以上、本実施形態による画像通信システムの構成を説明した。続いて、本実施形態による画像通信システムの動作を説明する。
【００７７】
（全体フロー）
図６は、本実施形態による画像通信システムの動作を示すシーケンス図である。図６に示したように、被閲覧者側撮像装置３００の撮像部３０１が拠点Ｂの撮像を開始する（Ｓ１１０）。なお、撮像部３０１は、拠点Ｂの俯瞰的な風景を撮像するライブカメラの役割を担うので、基本的には常時撮像を行う利用形態が想定される。
【００７８】
続いて、被閲覧者側撮像装置３００の顔検出部３０２は、撮像部３０１によって取得された拠点Ｂの撮像画像から被閲覧者の顔領域を検出し、被閲覧者の顔画像の特徴情報を取得する。そして、顔検出部３０２は、被閲覧者の顔領域を示す顔領域情報、顔画像の特徴情報、および拠点Ｂの撮像画像を顔認識部３０３に出力する（Ｓ１１２）。
【００７９】
ここで、顔領域が検出されなかった場合、すなわち、撮像部３０１の画角内に被写体となる被閲覧者が存在しないか、被閲覧者は存在するが顔は映っていない場合、顔検出部３０２は、顔領域が検出されなかった旨の情報を領域情報の代わりに出力してもよい。この点について補足すると、本実施形態が解決しようとするプライバシー問題において最も考慮すべき被写体部位は顔であると考えられる。このため、被閲覧者は存在するが顔は映っていないと考えられる場合、例えば、撮像部３０１に対して被閲覧者が後ろ向きに移っている場合などは一方的閲覧行為の問題外として扱うことが適切である。遠隔でない同一空間内の閲覧行為でも、背後から見られた場合には被閲覧者は気付かないので、遠隔空間のコミュニケーションで特有の一方的閲覧行為の問題とは性質が異なるためである。
【００８０】
そして、被閲覧者側撮像装置３００の顔認識部３０３は、顔検出部３０２で得られた顔画像の特徴情報から、被閲覧者の人物特定を行い、拠点Ｂの撮像画像、顔領域情報および人物特定情報を制御部３０４に出力する（Ｓ１１４）。次いで、被閲覧者側撮像装置３００の制御部３０４が、拠点Ｂの撮像画像、顔領域情報および人物特定情報の画像処理通信装置４００への送信を開始する（Ｓ１１６）。
【００８１】
一方、閲覧者側装置１００の撮像部１０１は、撮像範囲に含まれる閲覧者の撮像を開始して、閲覧者画像を取得する（Ｓ１１８）。そして、閲覧者側装置１００の顔検出部１０２は、撮像部１０１によって取得された閲覧者画像から閲覧者の顔領域を検出し、閲覧者の顔領域を示す顔領域情報および閲覧者画像を制御部１０５に出力する（Ｓ１２０）。
【００８２】
ここで、顔領域が検出されなかった場合、すなわち、表示部１０３の閲覧者が存在しない、または、閲覧者が画面方向を見ていない場合、顔検出部１０２は、顔領域が検出されなかった旨の情報を領域情報の代わりに出力してもよい。なお、顔検出部１０２が上記のように明示的に顔領域が検出されなかった旨の情報を出力しなくても、制御部１０５は、顔領域情報が顔でない画像範囲を示す１値のみからなることにより顔領域が検出されなかったことを認識することが可能である。
【００８３】
その後、閲覧者側装置１００の制御部１０５が、拠点Ｂの撮像画像の要求と共に、閲覧者画像および顔領域情報の画像処理通信装置４００への送信を開始する（Ｓ１２２）。
【００８４】
画像処理通信装置４００は、閲覧者側装置１００から受信された各種データ、および、被閲覧者側撮像装置３００から受信された各種データに基づき、画像調整処理を開始する（Ｓ１３０）。この画像調整処理の動作フローについては図７を参照して後述する。
【００８５】
その後、画像処理通信装置４００は、被閲覧者側表示装置２００への閲覧者画像の送信を開始し（Ｓ１４６）、閲覧者側装置１００への拠点Ｂの撮像画像の送信を開始する（Ｓ１４８）。これにより、被閲覧者側表示装置２００の表示部２０１が閲覧者画像を表示し（Ｓ１５０）、閲覧者側装置１００の表示部１０３が拠点Ｂの撮像画像を表示することが可能となる（Ｓ１５２）。なお、閲覧者の一方的閲覧行為を防ぐために、拠点Ｂの撮像画像の送信開始タイミングと閲覧者画像の送信開始タイミングは同期していることが望ましい。
【００８６】
（画像調整処理の動作フロー）
図７は、画像処理通信装置４００による画像調整処理に関する動作を示したフローチャートである。図７に示したように、まず、画像処理通信装置４００の制御部４０１が、閲覧者側装置１００から拠点Ａの閲覧者画像および顔領域情報を受信し、被閲覧者側撮像装置３００から拠点Ｂの撮像画像、顔領域情報および人物特定情報を受信する（Ｓ１３１）。
【００８７】
続いて、制御部４０１は、閲覧者画像から顔領域が検出されたか否かを閲覧者の顔領域情報に基づいて判断する（Ｓ１３２）。ここで、顔領域が検出されたと判断される場合はＳ１３３の処理に進み、顔領域が検出されなかったと判断される場合はＳ１３８の処理に進む。
【００８８】
同様に、制御部４０１は、拠点Ｂの撮像画像から顔領域が検出されたか否かを被閲覧者の顔領域情報に基づいて判断する（Ｓ１３３）。ここで、顔領域が検出されたと判断される場合はＳ１３４の処理に進み、顔領域が検出されなかったと判断される場合はＳ１３８の処理に進む。
【００８９】
そして、閲覧者画像および拠点Ｂの撮像画像から顔領域が検出されたと判断される場合、制御部４０１は、閲覧者の顔領域と被閲覧者の顔領域を比較し、画像処理部４０３に、記憶部４０２を介して、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を指示する（Ｓ１３４）。
【００９０】
続いて、記憶部４０２は、拠点Ａの閲覧者画像、閲覧者の顔領域情報、拠点Ｂの撮像画像、被閲覧者の顔領域情報および人物特定情報を記憶し、閲覧者側装置１００への拠点Ｂの撮像画像の送信が完了するまでこれらデータを保持する（Ｓ１３５）。
【００９１】
そして、画像処理部４０３は、制御部４０１からの画像調整処理の指示に従い、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う（Ｓ１３６）。
【００９２】
その後、制御部４０１は、被閲覧者側表示装置２００へ画像調整処理後の閲覧者画像を送信する（Ｓ１４６）。ここで、拠点Ｂの各被閲覧者は特定の被閲覧者側表示装置２００を所有しており、被閲覧者と被閲覧者側表示装置２００は、データベースにおいて事前に１対１に関連付けられているものとする。なお、関連付けの方法は特に限定されない。また、１人の被閲覧者が複数の被閲覧者側表示装置２００を所有し、１人の被閲覧者に対して複数の被閲覧者側表示装置２００が関連付けられていてもよい。制御部４０１は、このデータベースを用い、被閲覧者側撮像装置３００から受信された人物特定情報に対応する被閲覧者側表示装置２００を特定し、特定した被閲覧者側表示装置２００に画像調整処理後の閲覧者画像を送信する。
【００９３】
また、制御部４０１は、閲覧者側装置１００へ拠点Ｂの撮像画像を送信する（Ｓ１４８）。これにより、閲覧者が拠点Ｂの撮像画像を閲覧する場合に被閲覧者側表示装置２００の表示部２０１に閲覧者画像を表示することが可能となる。なお、閲覧者の一方的閲覧行為を防ぐために、拠点Ｂの撮像画像の送信開始タイミングと閲覧者画像の送信開始タイミングは同期していることが望ましい。
【００９４】
＜４．変形例＞
（変形例１）
なお、上記のフローによれば、閲覧者画像から顔領域が検出されなかった場合、すなわち、拠点Ｂの撮像画像の閲覧行為がないと考えられる場合でも、拠点Ｂの撮像画像が閲覧者側装置１００に送信される。これは、本実施形態による画像通信システムがインフォーマルな遠隔コミュニケーションを支援するシステムであり、基本的に、閲覧行為があるか否かに関わらず常時遠隔拠点の画像を流し続けることがシステムの目的に対して効果的であるという考えによる仕様である。しかし、消費電力の節約や、通信データ量の削減の観点を重視する場合、閲覧者の顔領域が検出された場合にのみ拠点Ｂの撮像画像を閲覧者側装置１００に送信するように画像処理通信装置４００を設計してもよい。
【００９５】
（変形例２）
また、閲覧者が複数名存在する場合、制御部４０１は、各閲覧者の画像調整処理後の閲覧者画像を被閲覧者側表示装置２００に送信してもよい。この場合、被閲覧者側表示装置２００は、各閲覧者画像を重ならないように表示部２０１に表示する。
【００９６】
また、拠点Ｂの撮像画像に複数の被閲覧者が含まれる場合、制御部４０１は、各被閲覧者の被閲覧者側表示装置２００に画像調整処理後の閲覧者画像を送信してもよい。以下、この点について図８を参照してより具体的に説明する。
【００９７】
図８は、拠点Ｂの撮像画像の具体例を示した説明図である。図８に示した拠点Ｂの撮像画像は、被閲覧者側表示装置２００Ａを有する人物Ａ、および被閲覧者側表示装置２００Ｂを有する人物Ｂを含む。ここで、人物Ａの顔領域の画素数が２００であり、人物Ｂの顔領域の画素数が５０であったとする。この場合、画像処理通信装置４００の画像処理部は、被閲覧者側表示装置２００Ａへの送信のために、顔領域の画素数が２００である閲覧者画像を作成すると共に、被閲覧者側表示装置２００Ｂへの送信のために、顔領域の画素数が５０である閲覧者画像を作成する。そして、制御部４０１が、顔領域の画素数が２００である閲覧者画像を人物Ａの被閲覧者側表示装置２００Ａに送信し、顔領域の画素数が５０である閲覧者画像を人物Ｂの被閲覧者側表示装置２００Ｂに送信する。
【００９８】
このように、本実施形態は、拠点Ａの閲覧者、および拠点Ｂの閲覧者が複数名である場合にも支障なく動作する。これは、遠隔コミュニケーション支援システムの中でも、特に、複数の遠隔拠点に複数のメンバが分散するオフィス・トゥ・オフィスのテレワーク環境を想定したシステムにおいて重要な動作条件を満たしているといえる。
【００９９】
（変形例３）
また、図４においては、被閲覧者の被閲覧者側表示装置２００に通知する閲覧者情報の一例として閲覧者画像を説明したが、閲覧者情報として他の情報を被閲覧者側表示装置２００に通知してもよい。例えば、閲覧者側装置１００または画像処理通信装置４００が閲覧者の人物特定機能を有する場合、画像処理通信装置４００は、閲覧者情報として閲覧者の氏名を被閲覧者側表示装置２００に通知してもよい。また、画像処理通信装置４００は、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の詳細度を示す情報を合わせて被閲覧者側表示装置２００に通知してもよい。
【０１００】
かかる構成により、被閲覧者側表示装置２００の表示部２０１は、閲覧者画像に代えて、図９に示すように、閲覧者の氏名２２２、および被閲覧者の注目度（顔領域の詳細度に対応）を示すインジケーター２２４を表示することが可能となる。
【０１０１】
（変形例４）
また、上記では、被閲覧者を含む拠点Ｂの撮像画像を閲覧者が閲覧している場合に閲覧者情報を被閲覧者の被閲覧者側表示装置２００に通知する例を説明したが、本実施形態はかかる例に限定されない。例えば、拠点Ｂの撮像画像に人物画像が含まれていても、当該人物画像の情報量が少ない場合（人物画像が小さい場合）、閲覧者は当該人物画像を意図して見ているわけでない、すなわち、その人物は被閲覧者でないと捉えられる。そこで、画像処理通信装置４００は、拠点Ｂの撮像画像に含まれる人物画像（あるいは、顔領域）の情報量が閾値を下回る場合には当該人物の被閲覧者側表示装置２００に閲覧者情報を通知せず、情報量が閾値を上回る場合に当該人物の被閲覧者側表示装置２００に閲覧者情報を通知してもよい。
【０１０２】
＜５．結び／補足＞
以上説明したように、本実施形態によれば、「誰」が、「どのような情報量」で被閲覧者を見ているかという閲覧者情報を被閲覧者に通知する。これにより、遠隔分散協働環境におけるインフォーマルな状況情報の共有を目的とする、互いの拠点空間映像を相互に常時送受信するような環境において、必然的に発生するプライバシー問題、すなわち、密かな一方的遠隔閲覧行為を抑止することが可能である。また、本実施形態は、閲覧者と被閲覧者が同一空間にいる場合と同様の「公平で直観的な見る・見られる関係」の構築を遠隔状況下でも可能にするという点でも有用である。
【０１０３】
なお、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【０１０４】
例えば、上記では、拠点Ａに閲覧者側装置１００が配置され、拠点Ｂに被閲覧者側表示装置２００および被閲覧者側撮像装置３００が配置される例を説明したが、これら装置に代えて、拠点Ａの閲覧者および拠点Ｂの被閲覧者が、閲覧者側装置１００に顔認識部３０３の機能が付加された携帯可能な画像処理端末を有してもよい。これにより、閲覧者と被閲覧者が自由に移動する利用形態にも本実施形態を適用することが可能となる。また、閲覧者と被閲覧者が同一の画像処理端末を有するので、拠点Ａの閲覧者が被閲覧者の立場になること、および、拠点Ｂの被閲覧者が閲覧者の立場になることが容易に可能となり、情報のやりとりの双方向性への対応が実現される。これは、上述した閲覧者と被閲覧者が複数名である場合への対応の容易さと併せ、本実施形態のシステムの「スケーラビリティ」、すなわち拡張性の高さを示すものである。
【０１０５】
ここで、上記の画像処理端末としては、撮像部、表示部、顔検出部、顔認識部を一装置内にコンパクトに備えていることが多いスマートフォンが好適である。ただし、この場合、被閲覧者の画像処理端末が非計画的に被閲覧者を画角内に捉えていることが望まれるので、空間の状況情報を安定的に提供し合うためには、空間を常時俯瞰的に撮像する被閲覧者側撮像装置３００が画像処理端末と併せて両拠点に存在することが運用上望ましい。
【０１０６】
また、画像通信システムの処理における各ステップは、必ずしもシーケンス図またはフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、画像通信システムの処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【０１０７】
また、閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。
【符号の説明】
【０１０８】
１００ 閲覧者側装置
１０１ 撮像部
１０２ 顔検出部
１０３ 表示部
１０４ 入力部
１０５ 制御部
２００ 被閲覧者側表示装置
２０１ 表示部
２０２ 制御部
３００ 被閲覧者側撮像装置
３０１ 撮像部
３０２ 顔検出部
３０３ 顔認識部
３０４ 制御部
４００ 画像処理通信装置
４０１ 制御部
４０２ 記憶部
４０３ 画像処理部
【技術分野】
【０００１】
本発明は、画像通信装置、画像通信方法、プログラム、および画像通信システムに関する。
【背景技術】
【０００２】
近年、ブロードバンドやクラウド環境の普及、および、情報通信技術の発達に伴うコミュニケーションツールの発達により、場所や時間に制約されないワーキングスタイル（働き方）が広がりつつある。これにより、集団での協働（ｃｏｌｌａｂｏｒａｔｉｏｎ）作業の主な形態も、一般的な一極集中・同一空間型から、遠隔分散協働型へ移り変わっていくことが予測される。この実現のために、音声通話、ＦＡＸ、電子メール、インスタントメッセンジャー、およびＶｏＩＰなどを統合したユニファイドコミュニケーション（登録商標）技術・システムが注目を集めている。
【０００３】
ユニファイドコミュニケーションシステムが伝達するリッチな情報としては、映像や音情報が重要な位置を占め、例えば従来のＴＶ会議システムを基礎とするツールが多くのユニファイドコミュニケーションシステムの位置機能として搭載される。
【０００４】
ところで、いわゆるＴＶ会議システムは、議題が決まった上での話し合いなど、意図的、かつ、正式・公式的なフォーマル・コミュニケーションを主に想定したコミュニケーションツールである。これに対し、近年、チームでの協働作業を円滑に進めるためには組織の一体感や人間関係の醸成が重要であること、また、組織の一体感や人間関係の醸成を高めるためには非計画的で偶然性を持ったインフォーマル・コミュニケーションが大切であることが指摘されている。
【０００５】
このようなインフォーマル・コミュニケーションを支援するためのユニファイドコミュニケーションシステムのツールとしては、ＴＶ会議のように「誰が何時から何時までＡ会議室で」というような計画的な形態ではなく、非計画的なオフィスの日常風景を共有すること、すなわち、オフィス内の環境的な映像と音情報を常に遠隔オフィス間で相互通信、提示しあうものが考えられる。
【０００６】
なお、上述したユニファイドコミュニケーションシステムに関し、例えば特許文献１には、撮像装置によって撮像した映像をそのまま送受信するのでなく、動きの小さな映像部分を送信しないことにより、背景画像が送信されないようにする技術が開示されている。また、特許文献２には、一部の映像領域については正当なアクセス権限を有することが確認された者にのみ提供されるようにする技術が開示されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平５−９１４０７号公報
【特許文献２】特開２００１−１８６５０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、上記のインフォーマル・コミュニケーションを支援するためのユニファイドコミュニケーションシステムは、重大なプライバシー問題を有する。以下、この点について説明する。
【０００９】
非計画的に常時撮影されるオフィス内映像は、配信先の遠隔オフィス側から一方的に閲覧することが可能となる。同一空間であれば、視界内で自分を凝視している人物がいれば、見られている側の人間はその人物の存在に気付くであろう。しかし、例えば部屋の隅に設置された撮像装置が撮像したオフィス内映像が遠隔オフィスに配信される場合、オフィス内映像に含まれる人間は、自分が今見られているのか、誰が見ているのかを判別することは困難である。このため、プライバシー問題につながる密かな一方的遠隔閲覧行為が発生しかねない。
【００１０】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、プライバシーを保護しつつ遠隔コミュニケーションを支援するための、新規かつ改良された画像通信装置、画像通信方法、プログラム、および画像通信システムを提供することにある。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明のある観点によれば、第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置が提供される。
【００１２】
前記第２の表示装置の利用者情報は、前記第２の表示装置側の第２の撮像装置により取得された前記第２の表示装置の利用者の顔画像を含む第２の撮像画像であってもよい。
【００１３】
前記画像通信装置は、前記第１の撮像画像に含まれる顔画像域、および前記第２の撮像画像に含まれる顔画像の詳細度の差分を小さくする画像処理を行う画像処理部をさらに備え、前記制御部は、前記画像処理部による前記画像処理後の第１の撮像画像を前記第２の表示装置に向けて送信し、前記画像処理後の第２の撮像画像を前記第１の表示装置に向けて送信してもよい。
【００１４】
前記第１の表示装置は、人物特定情報と表示装置とが関連付けられたデータベースにおいて、前記第１の撮像画像に含まれる顔画像から取得される人物特定情報に関連付けられている表示装置であってもよい。
【００１５】
前記制御部は、前記第２の表示装置に向けて送信する前記第１の撮像画像に含まれる顔画像の詳細度が閾値を上回った場合に、当該顔画像から取得される人物特定情報に関連付けられている第１の表示装置に向けて前記第２の表示装置の利用者情報を送信してもよい。
【００１６】
前記制御部は、前記第２の撮像画像に前記第２の表示装置の利用者の顔画像が含まれない場合、前記第２の表示装置の利用者情報を前記第１の表示装置に向けて送信しなくてもよい。
【００１７】
前記画像処理は、複数の撮像画像の顔画像領域のうちで、最も詳細度の低い顔画像領域の詳細度に他の顔画像領域の詳細度を揃える処理であってもよい。
【００１８】
前記画像処理部は、さらに、複数の撮像画像のうちで、最もフレームレートが低い撮像画像のフレームレートに他の撮像画像のフレームレートを揃えてもよい。
【００１９】
前記画像処理部は、前記第１の撮像画像に複数の顔画像が含まれる場合、複数の顔画像の各々と前記第２の顔画像の詳細度との差分が小さくなるように前記第２の撮像画像を複数の顔画像の各々について画像処理し、前記制御部は、前記複数の顔画像の各々について画像処理された第２の撮像画像の各々を、前記複数の顔画像領域の各々から取得される人物特定情報に前記データベースにおいて関連付けられている第１の表示装置に送信してもよい。
【００２０】
前記第１の表示装置を視認可能な位置は前記第１の撮像装置の撮像範囲に含まれ、前記第２の表示装置を視認可能な位置は前記第２の撮像装置の撮像範囲に含まれてもよい。
【００２１】
また、上記課題を解決するために、本発明の別の観点によれば、第１の撮像装置から第１の撮像画像を取得するステップと、前記第１の撮像画像を第２の表示装置に向けて送信するステップと、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信するステップと、を含む画像通信方法が提供される。
【００２２】
また、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、として機能させるためのプログラムが提供される。
【００２３】
また、上記課題を解決するために、本発明の別の観点によれば、第１の撮像装置、前記第１の撮像装置側に設けられる第１の表示装置、前記第１の撮像装置から第１の撮像画像を取得する画像通信装置、および第２の表示装置を備える画像通信システムであって、前記画像通信装置は、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部を有する、画像通信システムが提供される。
【発明の効果】
【００２４】
以上説明したように本発明によれば、プライバシーを保護しつつ遠隔コミュニケーションを支援することが可能である。
【図面の簡単な説明】
【００２５】
【図１】本発明の実施形態による画像通信システムの構成を示した説明図である。
【図２】画像通信システムの詳細な構成を示した説明図である。
【図３】閲覧者側装置の表示部の視野角と撮像部の画角の関係を示した平面図である。
【図４】被閲覧者側表示装置の表示画面の具体例を示した説明図である。
【図５】画像調整処理の具体例を示した説明図である。
【図６】本実施形態による画像通信システムの動作を示すシーケンス図である。
【図７】画像処理通信装置による画像調整処理に関する動作を示したフローチャートである。
【図８】拠点Ｂの撮像画像の具体例を示した説明図である。
【図９】被閲覧者側表示装置の表示画面の変形例を示した説明図である。
【発明を実施するための形態】
【００２６】
以下に添付図面を参照しながら、本発明の実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２７】
また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。例えば、実質的に同一の機能構成を有する複数の構成を、必要に応じて被閲覧者側表示装置２００Ａおよび２００Ｂのように区別する。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。例えば、被閲覧者側表示装置２００Ａおよび２００Ｂを特に区別する必要が無い場合には、単に被閲覧者側表示装置２００と称する。
【００２８】
＜１．画像通信システムの基本構成＞
まず、図１を参照し、本実施形態による画像通信システムの基本構成を説明する。
【００２９】
図１は、本発明の実施形態による画像通信システムの構成を示した説明図である。図１に示したように、本発明の実施形態による画像通信システムは、閲覧者側装置１００と、被閲覧者側表示装置２００と、被閲覧者側撮像装置３００と、画像処理通信装置４００と、を備える。なお、図１には、複数の遠隔空間として拠点Ａおよび拠点Ｂを示しており、拠点Ａに閲覧者側装置１００が存在し、拠点Ｂに被閲覧者側表示装置２００および被閲覧者側撮像装置３００が存在する。
【００３０】
被閲覧者側撮像装置３００（第１の撮像装置））は、拠点Ｂを撮像し、拠点Ｂの撮像画像を取得する。そして、被閲覧者側撮像装置３００によって取得された拠点Ｂの撮像画像は、例えば拠点Ａからの要求に応じ、画像処理通信装置４００を介して閲覧者側装置１００に送信される。なお、拠点Ｂの撮像画像は、遠隔空間で閲覧され得る画像であるので、以下では、拠点Ｂの撮像画像に含まれる人物（被写体）を「被閲覧者」と称する。
【００３１】
閲覧者側装置１００は、図１に示したように、撮像部１０１、表示部１０３および入力部１０４を有する。撮像部１０１（第２の撮像装置）は、閲覧者側装置１００の利用者を撮像する。表示部１０３（第２の表示部）は、画像処理通信装置４００を介して被閲覧者側撮像装置３００から受信される拠点Ｂの撮像画像を表示する。入力部１０４は、被閲覧者側撮像装置３００を制御するための操作入力を受け付ける。例えば、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を有する場合、入力部１０４への操作入力によりズーム処理や画角変更処理を指定することが可能である。なお、閲覧者側装置１００の利用者は、閲覧者側装置１００の表示部１０３を見るという行為により拠点Ｂの撮像画像を閲覧できるので、以下では、拠点Ａに存在する閲覧者側装置１００の利用者を「閲覧者」と称する。
【００３２】
画像処理通信装置４００は、拠点Ｂの撮像画像の閲覧者が存在する場合、閲覧者情報（利用者情報）として、例えば閲覧者の撮像画像を被閲覧者側表示装置２００に送信する。そして、被閲覧者側表示装置２００（第１の表示装置）は、画像処理通信装置４００から受信した閲覧者画像を表示する。このように、本実施形態によれば、被閲覧者側に閲覧者情報を通知するので、被閲覧者は、自分が今見られているのか、誰が見ているのかを判別することが可能となる。これにより、プライバシー問題につながる密かな一方的遠隔閲覧行為を抑止することができる。さらに、本実施形態による画像処理通信装置４００は、閲覧者画像または拠点Ｂの撮像画像の情報量を必要に応じて調整することにより、上記問題を抑止すると共に、閲覧者および被閲覧者が同一空間に存在する場合のような自然な感覚のコミュニケーションを実現することが可能である。この点については詳細に後述する。
【００３３】
なお、図１においては、１人の閲覧者が１台の閲覧者側装置１００を所有し、１人の被閲覧者が１台の被閲覧者側表示装置２００を所有する利用形態を示しているが、１台の装置を複数の利用者が共有する利用形態にも本実施形態は適用可能である。
【００３４】
また、図１においては、閲覧者側装置１００により撮像される閲覧者が１人である例を示しているが、閲覧者側装置１００により撮像される閲覧者、すなわち、拠点Ａに存在する人物は複数名であってもよい。
【００３５】
同様に、図１においては、被閲覧者側撮像装置３００により撮像される被閲覧者が１人である例を示しているが、被閲覧者側撮像装置３００により撮像される被閲覧者、すなわち、拠点Ｂに存在する人物は複数名であってもよい。特に、被閲覧者側撮像装置３００は拠点Ｂの俯瞰的な画像を撮像するため、複数の被写体（被閲覧者）が画角内に存在する可能性が高いが、本実施形態によれば、各被閲覧者が個別に有する被閲覧者側表示装置２００に閲覧者情報を通知することが可能である。
【００３６】
上記のように、本発明は拠点Ａの閲覧者および拠点Ｂの被閲覧者がそれぞれ複数名である利用形態にも適用可能であるが、以下では、最も簡易的な、閲覧者が１人であり、被閲覧者が１人である利用形態に重きを置いて説明する。
【００３７】
＜２．画像通信システムの詳細な構成＞
以上、図１を参照し、本実施形態による画像通信システムの基本構成を説明した。続いて、画像通信システムを構成する閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００について順次詳細に説明する。
【００３８】
［２−１．閲覧者側装置］
図２は、画像通信システムの詳細な構成を示した説明図である。画像通信システムを構成する閲覧者側装置１００は、図２に示したように、撮像部１０１、顔検出部１０２、表示部１０３、入力部１０４および制御部１０５を備える。なお、図２においては撮像部１０１、顔検出部１０２、表示部１０３、入力部１０４および制御部１０５の各構成が１つの閲覧者側装置１００に実装される例を示しているが、これら各構成は複数の装置に分散的に実装されてもよい。
【００３９】
撮像部１０１は、撮像範囲に含まれる閲覧者を撮像して閲覧者画像を取得し、閲覧者画像を顔検出部１０２に出力する。なお、撮像部１０１は、デジタルカメラやＷｅｂカメラのように、撮像光学系および撮像素子を含む一般的な撮像装置であってもよい。
【００４０】
顔検出部１０２は、撮像部１０１によって取得された閲覧者画像から閲覧者の顔領域を検出し、閲覧者の顔領域を示す顔領域情報および閲覧者画像を制御部１０５に出力する。この顔領域情報は、例えば、閲覧者画像内の顔領域と顔以外の領域とが２値で表現されたデータであり、閲覧者画像における顔領域の位置、大きさおよび形状を示す。顔領域の検出のための画像処理方法としては、肌色情報を用いた方法や、顔の部品に注目する方法など、既存の複数の方法が存在し、本実施形態においては、これらの方法のいずれを利用してもよい。なお、閲覧者側装置１００では人物特定、すなわち、閲覧者と顔画像データベースとの照合機能は必須でないので、顔検出部１０２は、閲覧者の顔の特徴を認識する機能は備えていなくてもよい。
【００４１】
表示部１０３は、被閲覧者側撮像装置３００の撮像部３０１によって取得された拠点Ｂの撮像画像を表示する。なお、拠点Ｂの撮像画像は、画像処理通信装置４００の制御部４０１および閲覧者側装置１００の制御部１０５を介して入力される。表示部１０３は、液晶ディスプレイや有機ＥＬディスプレイのような一般的な表示装置であってもよい。ただし、表示部１０３は、表示部１０３を視認可能な位置が撮像部１０１の撮像範囲に含まれるような位置に配置されることが望ましい。以下、この点について図３を参照して具体的に説明する。
【００４２】
図３は、表示部１０３の視野角と撮像部１０１の画角の関係を示した平面図である。なお、図３においては、表示部１０３の視野角（表示部１０３を視認可能な範囲）を破線で、撮像部１０１の画角（撮像範囲）を一点鎖線で示している。本実施形態の効果実現のためには、閲覧者の閲覧行為が生じたことを精度良く検出することが重要である。このため、図３に示したように、閲覧者が表示部１０３を閲覧する場合には閲覧者の顔が基本的に撮像部１０１の画角に収まることが望ましい。
【００４３】
さらに、表示部１０３の視野角が撮像部１０１の画角内に収まるように表示部１０３および撮像部１０１を配置すれば、閲覧者が表示部１０３、すなわち拠点Ｂの撮像画像を見る際に、閲覧者の顔を含む閲覧者画像が必ず得られ、閲覧者画像から顔領域を検出することが可能となる。なお、このような配置関係は、液晶ディスプレイの上部のフレームにＷｅｂカメラが埋め込まれている、一般的なＷｅｂカメラ内蔵液晶ディスプレイを用いることによっても実現される。なお、被閲覧者側装置３００の撮像部３０１および被閲覧者側装置２００の表示部２０１も同様に、表示部２０１を視認可能な位置が撮像部３０１の撮像範囲に含まれるような位置に配置されることが望ましい
【００４４】
入力部１０４は、被閲覧者側撮像装置３００を制御するための操作入力を受け付ける。例えば、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を有する場合、入力部１０４への操作入力によりズーム処理や画角変更処理を指定することが可能である。また、閲覧者は、入力部１０４への操作入力により拠点Ｂの撮像画像の送信を要求することが可能である。なお、被閲覧者側撮像装置３００が光学ズーム機能や画角変更機能等を持たない場合、または、閲覧者にズーム等の操作欲求がないと考えられる場合には、ズーム処理や画角変更処理を指定するための入力部１０４は不要である。
【００４５】
制御部１０５は、閲覧者側装置１００の動作全般を制御する。例えば、制御部１０５は、顔検出部１０２から入力される閲覧者画像および顔領域情報を画像処理通信装置４００に送信する。また、制御部１０５は、画像処理通信装置４００から受信される拠点Ｂの撮像画像を表示部１０３に出力する。また、制御部１０５は、入力部１０４から入力される指示情報を画像処理通信装置４００に送信する。
【００４６】
［２−２．被閲覧者側表示装置］
被閲覧者側表示装置２００は、図２に示したように、表示部２０１、および制御部２０２を備える。なお、被閲覧者側表示装置２００は、スマートフォン、携帯電話、携帯型ゲーム機、携帯型映像処理装置などの情報端末であってもよい。
【００４７】
表示部２０１は、閲覧者側装置１００によって取得された閲覧者画像を表示する。この閲覧者画像は、画像処理通信装置４００の制御部４０１および被閲覧者側表示装置２００の制御部２０２を介して入力される。以下、図４を参照し、表示部２０１に表示される閲覧者画像についてより具体的に説明する。
【００４８】
図４は、表示部２０１に表示される閲覧者画像の具体例を示した説明図である。図４に示したように、表示部２０１は、コンテンツ表示エリア２１０および閲覧者画像表示エリア２２０を含む。
【００４９】
コンテンツ表示エリア２１０には、被閲覧者側表示装置２００の通常の用途のためのコンテンツが表示される。図４には、コンテンツの一例としてカレンダーを示しているが、コンテンツは、写真、動画、ゲーム、または各種操作画面などであってもよい。
【００５０】
また、閲覧者画像表示エリア２２０には、閲覧者画像２２２が表示される。この閲覧者画像は、詳細については後述するように、閲覧者側装置１００の表示部１０３に表示される拠点Ｂの撮像画像に含まれる被閲覧者の顔領域と同等の情報量を有する。
【００５１】
このような構成により、被閲覧者側表示装置２００が本実施形態の用途のためだけの端末でなく、汎用的に使用される情報端末である場合、コンテンツ表示エリア２１０に本来の用途のためのコンテンツを表示しつつ、閲覧者画像を閲覧者画像表示エリア２２０に表示することができる。
【００５２】
なお、表示部２０１は、閲覧者側装置１００の表示部１０３と同様に、液晶ディスプレイや有機ＥＬディスプレイのような一般的な表示装置であってもよい。
【００５３】
制御部２０２は、被閲覧者側表示装置２００の動作全般を制御する。例えば、制御部２０２は、画像処理通信装置４００から受信される閲覧者画像を表示部２０１に出力する。
【００５４】
［２−３．被閲覧者側撮像装置］
被閲覧者側撮像装置３００は、図２に示したように、撮像部３０１、顔検出部３０２、顔認識部３０３、および制御部３０４を備える。なお、図２においては被閲覧者側撮像装置３００と被閲覧者側表示装置２００を別個の装置として記載されているが、被閲覧者側撮像装置３００の機能と被閲覧者側表示装置２００の機能は同一装置に実装されてもよい。さらに、図２においては撮像部３０１、顔検出部３０２、顔認識部３０３、および制御部３０４の各構成が１つの被閲覧者側撮像装置３００に実装される例を示しているが、これら各構成は複数の装置に分散的に実装されてもよい。
【００５５】
撮像部３０１は、撮像範囲に含まれる被写体を撮像して拠点Ｂの撮像画像を取得し、拠点Ｂの撮像画像を顔検出部３０２に出力する。なお、撮像部３０１は、デジタルカメラやＷｅｂカメラのように、撮像光学系および撮像素子を含む一般的な撮像装置であってもよい。
【００５６】
顔検出部３０２は、撮像部３０１によって取得された拠点Ｂの撮像画像から被閲覧者の顔領域を検出し、被閲覧者の顔画像の特徴情報を取得する。そして、顔検出部３０２は、被閲覧者の顔領域を示す顔領域情報、顔画像の特徴情報、および拠点Ｂの撮像画像を顔認識部３０３に出力する。
【００５７】
なお、顔画像の特徴情報は、顔の各部分の相対位置、大きさ、および形状などに基づく特徴量・パターンのデータである。特徴量としては、Ｈａａｒウェーブレット特徴量などの既存の多様な特徴量が存在するが、本実施形態においては、これらのいずれの特徴量を利用してもよい。
【００５８】
顔認識部３０３は、顔検出部３０２で得られた顔画像の特徴情報から、被閲覧者の人物特定を行い、拠点Ｂの撮像画像、顔領域情報および人物特定情報を制御部３０４に出力する。なお、人物特定のための顔画像の特徴情報は事前に登録済み、すなわち、照合のための顔画像データベースが事前に用意されていてもよい。また、顔認識および人物特定に用いるアルゴリズム、データ処理の方法は特に限定されない。
【００５９】
制御部３０４は、被閲覧者側撮像装置３００の動作全般を制御する。例えば、制御部３０４は、顔認識部３０３から入力される拠点Ｂの撮像画像、顔領域情報および人物特定情報を画像処理通信装置４００に送信する。また、制御部３０４は、閲覧者側装置１００の入力部１０４から、画像処理通信装置４００の制御部４０１を介して操作指示情報を受信し、指示に応じたズーム処理や画角変更処理を実行する。
【００６０】
［２−４．画像処理通信装置］
画像処理通信装置４００は、図２に示したように、制御部４０１、記憶部４０２および画像処理部４０３を備える。
【００６１】
制御部４０１は、画像処理通信装置４００の動作全般を制御する。例えば、制御部４０１は、閲覧者側装置１００から拠点Ａの閲覧者画像および顔領域情報を受信し、記憶部４０２に出力する。また、制御部４０１は、被閲覧者側撮像装置３００から拠点Ｂの撮像画像、顔領域情報および人物特定情報を受信し、記憶部４０２に出力する。
【００６２】
また、制御部４０１は、閲覧者側装置１００から受信された閲覧者画像の顔領域情報と、被閲覧者側撮像装置３００から受信された被閲覧者の顔領域情報とを比較し、画像処理部４０３に、記憶部４０２を介して、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を指示する。この画像調整処理の詳細については図５を参照して後述する。
【００６３】
また、制御部４０１は、記憶部４０２から入力される画像調整処理後の閲覧者画像を、被閲覧者の人物特定情報に基づいて被閲覧者が個人所有する被閲覧者側表示装置２００に送信する。また、制御部４０１は、記憶部４０２から入力される拠点Ｂの撮像画像を閲覧者側装置１００に送信する。
【００６４】
記憶部４０２は、制御部４０１から入力された閲覧者画像、閲覧者の顔領域情報、拠点Ｂの撮像画像、被閲覧者の顔領域情報、および被閲覧者の人物特定情報を記憶する。また、記憶部４０２は、制御部４０１から入力された画像調整処理の指示および閲覧者画像を画像処理部４０３に出力する。また、記憶部４０２は、画像処理部４０３から出力された画像調整処理後の閲覧者画像または拠点Ｂの撮像画像の少なくともいずれかを制御部４０１に出力する。
【００６５】
画像処理部４０３は、記憶部４０２から入力された画像調整処理の指示に従い、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う。なお、本明細書における情報量は、画像ファイルのデータ量でなく、画像を見る人間にとっての情報の詳細度を示し、本明細書における情報量には例えば画素数が該当する。ここで、情報量が画素数である場合に画像調整処理についてより詳細に説明する。
【００６６】
（画像調整処理の意義）
同一空間での直接目視の場合、第１の人物と、第２の人物は、ほぼ同じ縮尺率で相手の姿を認識し合う。すなわち、第１の人物が得る第２の人物の情報量と、第２の人物が得る第１の人物の情報量は同等である。
【００６７】
しかし、遠隔空間同士のコミュニケーションでは、第１の人物が得る第２の人物の情報量と、第２の人物が得る第１の人物の情報量は異なることが予想される。例えば、拠点Ａの閲覧者画像の顔領域の画素数が２００であり、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の画素数が１００である場合、閲覧者の顔領域は被閲覧者の顔領域の約２倍の情報量を有する。このとき、画像処理通信装置４００が閲覧者画像をそのままの情報量で被閲覧者側表示装置２００に送信すると、被閲覧者により得られる閲覧者の顔領域の情報量は、閲覧者が得る被閲覧者の顔領域の情報量の２倍になってしまう。
【００６８】
そこで、本実施形態においては、遠隔空間同士のコミュニケーションでもこの自然な感覚を再現するために、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う。
【００６９】
（画像調整処理の対象）
具体的には、画像処理部４０３は、閲覧者画像または拠点Ｂの撮像画像の少なくともいずれかを処理することにより、双方に含まれる顔領域の情報量の差分を小さくする。例えば、画像処理部４０３は、閲覧者画像と拠点Ｂの撮像画像のうちで、顔領域の情報量が多い方の画像の情報量を他方の情報量に揃えるための画像処理を行う。
【００７０】
ここで、想定する利用形態では撮像部１０１が表示部１０３の近傍に配置されるので、それに伴い閲覧者が撮像部１０１の近くに位置し、結果、閲覧者の顔領域が大きくなる可能性が高い。一方、拠点Ｂの撮像部３０１は俯瞰的な画像を撮像するので、被閲覧者は撮像部３０１から離れて位置し、結果、被閲覧者の顔領域が閲覧者と比較して小さくなる可能性が高い。
【００７１】
このため、多くのケースでは、画像処理部４０３は、閲覧者の顔領域の情報量を被閲覧者の顔領域の情報量に揃える画像処理を行うと考えられる。ただし、画像処理部４０３は、閲覧者画像に含まれる閲覧者の顔領域の情報量が拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の情報量より少ない場合、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の情報量を閲覧者の顔領域の情報量に揃える画像処理を行ってもよい。この場合、画像処理部４０３は、拠点Ｂの撮像画像内の被閲覧者の顔領域の情報量のみを落としてもよいし、拠点Ｂの撮像画像全体の情報量を落としてもよい。
【００７２】
変形例として、画像処理部４０３は、閲覧者の顔領域の情報量および被閲覧者の顔領域の情報量に関係なく、閲覧者画像および拠点Ｂの撮像画像の双方を処理することにより、閲覧者の顔領域の情報量および被閲覧者の顔領域の情報量を同一の情報量に揃えてもよい。
【００７３】
（画像調整処理の方法）
また、画像処理部４０３は、ニアレストネイバー法やバイキュービック法などの既存の方式を用いて閲覧者画像または拠点Ｂの撮像画像の解像度を変換することにより、双方の画像の顔領域の情報量を揃える。
【００７４】
例えば、閲覧者の顔領域の画素数が拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の画素数の４倍であった場合、画像処理部４０３は、図５に示したように、閲覧者画像の画素数を４分の１に落とす処理を行う。これは、画像の情報量が４分の１に落とされたことと等価である。
【００７５】
なお、双方の顔領域の情報量を完全一致させる必要は無く、画像調整処理後の双方の顔領域の情報量は所定の範囲内の差分を有してもよい。また、上記では情報量の変換方法として解像度変換処理を説明したが、応用例として、ぼかし処理のように画像をにじませることによって情報量を落とすことも可能である。さらに、画像処理部４０３は、情報量の公平性の観点から、閲覧者画像および拠点Ｂの撮像画像のうちで、フレームレートが低い方の画像のフレームレートに他方のフレームレートを変換してもよい。
【００７６】
＜３．画像通信システムの動作＞
以上、本実施形態による画像通信システムの構成を説明した。続いて、本実施形態による画像通信システムの動作を説明する。
【００７７】
（全体フロー）
図６は、本実施形態による画像通信システムの動作を示すシーケンス図である。図６に示したように、被閲覧者側撮像装置３００の撮像部３０１が拠点Ｂの撮像を開始する（Ｓ１１０）。なお、撮像部３０１は、拠点Ｂの俯瞰的な風景を撮像するライブカメラの役割を担うので、基本的には常時撮像を行う利用形態が想定される。
【００７８】
続いて、被閲覧者側撮像装置３００の顔検出部３０２は、撮像部３０１によって取得された拠点Ｂの撮像画像から被閲覧者の顔領域を検出し、被閲覧者の顔画像の特徴情報を取得する。そして、顔検出部３０２は、被閲覧者の顔領域を示す顔領域情報、顔画像の特徴情報、および拠点Ｂの撮像画像を顔認識部３０３に出力する（Ｓ１１２）。
【００７９】
ここで、顔領域が検出されなかった場合、すなわち、撮像部３０１の画角内に被写体となる被閲覧者が存在しないか、被閲覧者は存在するが顔は映っていない場合、顔検出部３０２は、顔領域が検出されなかった旨の情報を領域情報の代わりに出力してもよい。この点について補足すると、本実施形態が解決しようとするプライバシー問題において最も考慮すべき被写体部位は顔であると考えられる。このため、被閲覧者は存在するが顔は映っていないと考えられる場合、例えば、撮像部３０１に対して被閲覧者が後ろ向きに移っている場合などは一方的閲覧行為の問題外として扱うことが適切である。遠隔でない同一空間内の閲覧行為でも、背後から見られた場合には被閲覧者は気付かないので、遠隔空間のコミュニケーションで特有の一方的閲覧行為の問題とは性質が異なるためである。
【００８０】
そして、被閲覧者側撮像装置３００の顔認識部３０３は、顔検出部３０２で得られた顔画像の特徴情報から、被閲覧者の人物特定を行い、拠点Ｂの撮像画像、顔領域情報および人物特定情報を制御部３０４に出力する（Ｓ１１４）。次いで、被閲覧者側撮像装置３００の制御部３０４が、拠点Ｂの撮像画像、顔領域情報および人物特定情報の画像処理通信装置４００への送信を開始する（Ｓ１１６）。
【００８１】
一方、閲覧者側装置１００の撮像部１０１は、撮像範囲に含まれる閲覧者の撮像を開始して、閲覧者画像を取得する（Ｓ１１８）。そして、閲覧者側装置１００の顔検出部１０２は、撮像部１０１によって取得された閲覧者画像から閲覧者の顔領域を検出し、閲覧者の顔領域を示す顔領域情報および閲覧者画像を制御部１０５に出力する（Ｓ１２０）。
【００８２】
ここで、顔領域が検出されなかった場合、すなわち、表示部１０３の閲覧者が存在しない、または、閲覧者が画面方向を見ていない場合、顔検出部１０２は、顔領域が検出されなかった旨の情報を領域情報の代わりに出力してもよい。なお、顔検出部１０２が上記のように明示的に顔領域が検出されなかった旨の情報を出力しなくても、制御部１０５は、顔領域情報が顔でない画像範囲を示す１値のみからなることにより顔領域が検出されなかったことを認識することが可能である。
【００８３】
その後、閲覧者側装置１００の制御部１０５が、拠点Ｂの撮像画像の要求と共に、閲覧者画像および顔領域情報の画像処理通信装置４００への送信を開始する（Ｓ１２２）。
【００８４】
画像処理通信装置４００は、閲覧者側装置１００から受信された各種データ、および、被閲覧者側撮像装置３００から受信された各種データに基づき、画像調整処理を開始する（Ｓ１３０）。この画像調整処理の動作フローについては図７を参照して後述する。
【００８５】
その後、画像処理通信装置４００は、被閲覧者側表示装置２００への閲覧者画像の送信を開始し（Ｓ１４６）、閲覧者側装置１００への拠点Ｂの撮像画像の送信を開始する（Ｓ１４８）。これにより、被閲覧者側表示装置２００の表示部２０１が閲覧者画像を表示し（Ｓ１５０）、閲覧者側装置１００の表示部１０３が拠点Ｂの撮像画像を表示することが可能となる（Ｓ１５２）。なお、閲覧者の一方的閲覧行為を防ぐために、拠点Ｂの撮像画像の送信開始タイミングと閲覧者画像の送信開始タイミングは同期していることが望ましい。
【００８６】
（画像調整処理の動作フロー）
図７は、画像処理通信装置４００による画像調整処理に関する動作を示したフローチャートである。図７に示したように、まず、画像処理通信装置４００の制御部４０１が、閲覧者側装置１００から拠点Ａの閲覧者画像および顔領域情報を受信し、被閲覧者側撮像装置３００から拠点Ｂの撮像画像、顔領域情報および人物特定情報を受信する（Ｓ１３１）。
【００８７】
続いて、制御部４０１は、閲覧者画像から顔領域が検出されたか否かを閲覧者の顔領域情報に基づいて判断する（Ｓ１３２）。ここで、顔領域が検出されたと判断される場合はＳ１３３の処理に進み、顔領域が検出されなかったと判断される場合はＳ１３８の処理に進む。
【００８８】
同様に、制御部４０１は、拠点Ｂの撮像画像から顔領域が検出されたか否かを被閲覧者の顔領域情報に基づいて判断する（Ｓ１３３）。ここで、顔領域が検出されたと判断される場合はＳ１３４の処理に進み、顔領域が検出されなかったと判断される場合はＳ１３８の処理に進む。
【００８９】
そして、閲覧者画像および拠点Ｂの撮像画像から顔領域が検出されたと判断される場合、制御部４０１は、閲覧者の顔領域と被閲覧者の顔領域を比較し、画像処理部４０３に、記憶部４０２を介して、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を指示する（Ｓ１３４）。
【００９０】
続いて、記憶部４０２は、拠点Ａの閲覧者画像、閲覧者の顔領域情報、拠点Ｂの撮像画像、被閲覧者の顔領域情報および人物特定情報を記憶し、閲覧者側装置１００への拠点Ｂの撮像画像の送信が完了するまでこれらデータを保持する（Ｓ１３５）。
【００９１】
そして、画像処理部４０３は、制御部４０１からの画像調整処理の指示に従い、閲覧者画像の顔領域の情報量と、被閲覧者の顔領域の情報量の差分を小さくする画像調整処理を行う（Ｓ１３６）。
【００９２】
その後、制御部４０１は、被閲覧者側表示装置２００へ画像調整処理後の閲覧者画像を送信する（Ｓ１４６）。ここで、拠点Ｂの各被閲覧者は特定の被閲覧者側表示装置２００を所有しており、被閲覧者と被閲覧者側表示装置２００は、データベースにおいて事前に１対１に関連付けられているものとする。なお、関連付けの方法は特に限定されない。また、１人の被閲覧者が複数の被閲覧者側表示装置２００を所有し、１人の被閲覧者に対して複数の被閲覧者側表示装置２００が関連付けられていてもよい。制御部４０１は、このデータベースを用い、被閲覧者側撮像装置３００から受信された人物特定情報に対応する被閲覧者側表示装置２００を特定し、特定した被閲覧者側表示装置２００に画像調整処理後の閲覧者画像を送信する。
【００９３】
また、制御部４０１は、閲覧者側装置１００へ拠点Ｂの撮像画像を送信する（Ｓ１４８）。これにより、閲覧者が拠点Ｂの撮像画像を閲覧する場合に被閲覧者側表示装置２００の表示部２０１に閲覧者画像を表示することが可能となる。なお、閲覧者の一方的閲覧行為を防ぐために、拠点Ｂの撮像画像の送信開始タイミングと閲覧者画像の送信開始タイミングは同期していることが望ましい。
【００９４】
＜４．変形例＞
（変形例１）
なお、上記のフローによれば、閲覧者画像から顔領域が検出されなかった場合、すなわち、拠点Ｂの撮像画像の閲覧行為がないと考えられる場合でも、拠点Ｂの撮像画像が閲覧者側装置１００に送信される。これは、本実施形態による画像通信システムがインフォーマルな遠隔コミュニケーションを支援するシステムであり、基本的に、閲覧行為があるか否かに関わらず常時遠隔拠点の画像を流し続けることがシステムの目的に対して効果的であるという考えによる仕様である。しかし、消費電力の節約や、通信データ量の削減の観点を重視する場合、閲覧者の顔領域が検出された場合にのみ拠点Ｂの撮像画像を閲覧者側装置１００に送信するように画像処理通信装置４００を設計してもよい。
【００９５】
（変形例２）
また、閲覧者が複数名存在する場合、制御部４０１は、各閲覧者の画像調整処理後の閲覧者画像を被閲覧者側表示装置２００に送信してもよい。この場合、被閲覧者側表示装置２００は、各閲覧者画像を重ならないように表示部２０１に表示する。
【００９６】
また、拠点Ｂの撮像画像に複数の被閲覧者が含まれる場合、制御部４０１は、各被閲覧者の被閲覧者側表示装置２００に画像調整処理後の閲覧者画像を送信してもよい。以下、この点について図８を参照してより具体的に説明する。
【００９７】
図８は、拠点Ｂの撮像画像の具体例を示した説明図である。図８に示した拠点Ｂの撮像画像は、被閲覧者側表示装置２００Ａを有する人物Ａ、および被閲覧者側表示装置２００Ｂを有する人物Ｂを含む。ここで、人物Ａの顔領域の画素数が２００であり、人物Ｂの顔領域の画素数が５０であったとする。この場合、画像処理通信装置４００の画像処理部は、被閲覧者側表示装置２００Ａへの送信のために、顔領域の画素数が２００である閲覧者画像を作成すると共に、被閲覧者側表示装置２００Ｂへの送信のために、顔領域の画素数が５０である閲覧者画像を作成する。そして、制御部４０１が、顔領域の画素数が２００である閲覧者画像を人物Ａの被閲覧者側表示装置２００Ａに送信し、顔領域の画素数が５０である閲覧者画像を人物Ｂの被閲覧者側表示装置２００Ｂに送信する。
【００９８】
このように、本実施形態は、拠点Ａの閲覧者、および拠点Ｂの閲覧者が複数名である場合にも支障なく動作する。これは、遠隔コミュニケーション支援システムの中でも、特に、複数の遠隔拠点に複数のメンバが分散するオフィス・トゥ・オフィスのテレワーク環境を想定したシステムにおいて重要な動作条件を満たしているといえる。
【００９９】
（変形例３）
また、図４においては、被閲覧者の被閲覧者側表示装置２００に通知する閲覧者情報の一例として閲覧者画像を説明したが、閲覧者情報として他の情報を被閲覧者側表示装置２００に通知してもよい。例えば、閲覧者側装置１００または画像処理通信装置４００が閲覧者の人物特定機能を有する場合、画像処理通信装置４００は、閲覧者情報として閲覧者の氏名を被閲覧者側表示装置２００に通知してもよい。また、画像処理通信装置４００は、拠点Ｂの撮像画像に含まれる被閲覧者の顔領域の詳細度を示す情報を合わせて被閲覧者側表示装置２００に通知してもよい。
【０１００】
かかる構成により、被閲覧者側表示装置２００の表示部２０１は、閲覧者画像に代えて、図９に示すように、閲覧者の氏名２２２、および被閲覧者の注目度（顔領域の詳細度に対応）を示すインジケーター２２４を表示することが可能となる。
【０１０１】
（変形例４）
また、上記では、被閲覧者を含む拠点Ｂの撮像画像を閲覧者が閲覧している場合に閲覧者情報を被閲覧者の被閲覧者側表示装置２００に通知する例を説明したが、本実施形態はかかる例に限定されない。例えば、拠点Ｂの撮像画像に人物画像が含まれていても、当該人物画像の情報量が少ない場合（人物画像が小さい場合）、閲覧者は当該人物画像を意図して見ているわけでない、すなわち、その人物は被閲覧者でないと捉えられる。そこで、画像処理通信装置４００は、拠点Ｂの撮像画像に含まれる人物画像（あるいは、顔領域）の情報量が閾値を下回る場合には当該人物の被閲覧者側表示装置２００に閲覧者情報を通知せず、情報量が閾値を上回る場合に当該人物の被閲覧者側表示装置２００に閲覧者情報を通知してもよい。
【０１０２】
＜５．結び／補足＞
以上説明したように、本実施形態によれば、「誰」が、「どのような情報量」で被閲覧者を見ているかという閲覧者情報を被閲覧者に通知する。これにより、遠隔分散協働環境におけるインフォーマルな状況情報の共有を目的とする、互いの拠点空間映像を相互に常時送受信するような環境において、必然的に発生するプライバシー問題、すなわち、密かな一方的遠隔閲覧行為を抑止することが可能である。また、本実施形態は、閲覧者と被閲覧者が同一空間にいる場合と同様の「公平で直観的な見る・見られる関係」の構築を遠隔状況下でも可能にするという点でも有用である。
【０１０３】
なお、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【０１０４】
例えば、上記では、拠点Ａに閲覧者側装置１００が配置され、拠点Ｂに被閲覧者側表示装置２００および被閲覧者側撮像装置３００が配置される例を説明したが、これら装置に代えて、拠点Ａの閲覧者および拠点Ｂの被閲覧者が、閲覧者側装置１００に顔認識部３０３の機能が付加された携帯可能な画像処理端末を有してもよい。これにより、閲覧者と被閲覧者が自由に移動する利用形態にも本実施形態を適用することが可能となる。また、閲覧者と被閲覧者が同一の画像処理端末を有するので、拠点Ａの閲覧者が被閲覧者の立場になること、および、拠点Ｂの被閲覧者が閲覧者の立場になることが容易に可能となり、情報のやりとりの双方向性への対応が実現される。これは、上述した閲覧者と被閲覧者が複数名である場合への対応の容易さと併せ、本実施形態のシステムの「スケーラビリティ」、すなわち拡張性の高さを示すものである。
【０１０５】
ここで、上記の画像処理端末としては、撮像部、表示部、顔検出部、顔認識部を一装置内にコンパクトに備えていることが多いスマートフォンが好適である。ただし、この場合、被閲覧者の画像処理端末が非計画的に被閲覧者を画角内に捉えていることが望まれるので、空間の状況情報を安定的に提供し合うためには、空間を常時俯瞰的に撮像する被閲覧者側撮像装置３００が画像処理端末と併せて両拠点に存在することが運用上望ましい。
【０１０６】
また、画像通信システムの処理における各ステップは、必ずしもシーケンス図またはフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、画像通信システムの処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【０１０７】
また、閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した閲覧者側装置１００、被閲覧者側表示装置２００、被閲覧者側撮像装置３００、および画像処理通信装置４００の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。
【符号の説明】
【０１０８】
１００ 閲覧者側装置
１０１ 撮像部
１０２ 顔検出部
１０３ 表示部
１０４ 入力部
１０５ 制御部
２００ 被閲覧者側表示装置
２０１ 表示部
２０２ 制御部
３００ 被閲覧者側撮像装置
３０１ 撮像部
３０２ 顔検出部
３０３ 顔認識部
３０４ 制御部
４００ 画像処理通信装置
４０１ 制御部
４０２ 記憶部
４０３ 画像処理部
【特許請求の範囲】
【請求項１】
第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置。
【請求項２】
前記第２の表示装置の利用者情報は、前記第２の表示装置側の第２の撮像装置により取得された前記第２の表示装置の利用者の顔画像を含む第２の撮像画像である、請求項１に記載の画像通信装置。
【請求項３】
前記画像通信装置は、
前記第１の撮像画像に含まれる顔画像域、および前記第２の撮像画像に含まれる顔画像の詳細度の差分を小さくする画像処理を行う画像処理部をさらに備え、
前記制御部は、
前記画像処理部による前記画像処理後の第１の撮像画像を前記第２の表示装置に向けて送信し、前記画像処理後の第２の撮像画像を前記第１の表示装置に向けて送信する、請求項２に記載の画像通信装置。
【請求項４】
前記第１の表示装置は、人物特定情報と表示装置とが関連付けられたデータベースにおいて、前記第１の撮像画像に含まれる顔画像から取得される人物特定情報に関連付けられている表示装置である、請求項１〜３のいずれか一項に記載の画像通信装置。
【請求項５】
前記制御部は、前記第２の表示装置に向けて送信する前記第１の撮像画像に含まれる顔画像の詳細度が閾値を上回った場合に、当該顔画像から取得される人物特定情報に関連付けられている第１の表示装置に向けて前記第２の表示装置の利用者情報を送信する、請求項１〜４のいずれか一項に記載の画像通信装置。
【請求項６】
前記制御部は、前記第２の撮像画像に前記第２の表示装置の利用者の顔画像が含まれない場合、前記第２の表示装置の利用者情報を前記第１の表示装置に向けて送信しない、請求項２〜５のいずれか一項に記載の画像通信装置。
【請求項７】
前記画像処理は、複数の撮像画像の顔画像領域のうちで、最も詳細度の低い顔画像領域の詳細度に他の顔画像領域の詳細度を揃える処理である、請求項３〜６のいずれか一項に記載の画像通信装置。
【請求項８】
前記画像処理部は、さらに、複数の撮像画像のうちで、最もフレームレートが低い撮像画像のフレームレートに他の撮像画像のフレームレートを揃える、請求項７に記載の画像通信装置。
【請求項９】
前記画像処理部は、前記第１の撮像画像に複数の顔画像が含まれる場合、複数の顔画像の各々と前記第２の顔画像の詳細度との差分が小さくなるように前記第２の撮像画像を複数の顔画像の各々について画像処理し、
前記制御部は、前記複数の顔画像の各々について画像処理された第２の撮像画像の各々を、前記複数の顔画像領域の各々から取得される人物特定情報に前記データベースにおいて関連付けられている第１の表示装置に送信する、請求項４または５に記載の画像通信装置。
【請求項１０】
前記第１の表示装置を視認可能な位置は前記第１の撮像装置の撮像範囲に含まれ、
前記第２の表示装置を視認可能な位置は前記第２の撮像装置の撮像範囲に含まれる、請求項２〜９のいずれか一項に記載の画像通信装置。
【請求項１１】
第１の撮像装置から第１の撮像画像を取得するステップと、
前記第１の撮像画像を第２の表示装置に向けて送信するステップと、
前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信するステップと、
を含む、画像通信方法。
【請求項１２】
コンピュータを、
第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、
として機能させるための、プログラム。
【請求項１３】
第１の撮像装置、前記第１の撮像装置側に設けられる第１の表示装置、前記第１の撮像装置から第１の撮像画像を取得する画像通信装置、および第２の表示装置を備える画像通信システムであって、
前記画像通信装置は、
前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部を有する、画像通信システム。
【請求項１】
第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合に、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、を備える、画像通信装置。
【請求項２】
前記第２の表示装置の利用者情報は、前記第２の表示装置側の第２の撮像装置により取得された前記第２の表示装置の利用者の顔画像を含む第２の撮像画像である、請求項１に記載の画像通信装置。
【請求項３】
前記画像通信装置は、
前記第１の撮像画像に含まれる顔画像域、および前記第２の撮像画像に含まれる顔画像の詳細度の差分を小さくする画像処理を行う画像処理部をさらに備え、
前記制御部は、
前記画像処理部による前記画像処理後の第１の撮像画像を前記第２の表示装置に向けて送信し、前記画像処理後の第２の撮像画像を前記第１の表示装置に向けて送信する、請求項２に記載の画像通信装置。
【請求項４】
前記第１の表示装置は、人物特定情報と表示装置とが関連付けられたデータベースにおいて、前記第１の撮像画像に含まれる顔画像から取得される人物特定情報に関連付けられている表示装置である、請求項１〜３のいずれか一項に記載の画像通信装置。
【請求項５】
前記制御部は、前記第２の表示装置に向けて送信する前記第１の撮像画像に含まれる顔画像の詳細度が閾値を上回った場合に、当該顔画像から取得される人物特定情報に関連付けられている第１の表示装置に向けて前記第２の表示装置の利用者情報を送信する、請求項１〜４のいずれか一項に記載の画像通信装置。
【請求項６】
前記制御部は、前記第２の撮像画像に前記第２の表示装置の利用者の顔画像が含まれない場合、前記第２の表示装置の利用者情報を前記第１の表示装置に向けて送信しない、請求項２〜５のいずれか一項に記載の画像通信装置。
【請求項７】
前記画像処理は、複数の撮像画像の顔画像領域のうちで、最も詳細度の低い顔画像領域の詳細度に他の顔画像領域の詳細度を揃える処理である、請求項３〜６のいずれか一項に記載の画像通信装置。
【請求項８】
前記画像処理部は、さらに、複数の撮像画像のうちで、最もフレームレートが低い撮像画像のフレームレートに他の撮像画像のフレームレートを揃える、請求項７に記載の画像通信装置。
【請求項９】
前記画像処理部は、前記第１の撮像画像に複数の顔画像が含まれる場合、複数の顔画像の各々と前記第２の顔画像の詳細度との差分が小さくなるように前記第２の撮像画像を複数の顔画像の各々について画像処理し、
前記制御部は、前記複数の顔画像の各々について画像処理された第２の撮像画像の各々を、前記複数の顔画像領域の各々から取得される人物特定情報に前記データベースにおいて関連付けられている第１の表示装置に送信する、請求項４または５に記載の画像通信装置。
【請求項１０】
前記第１の表示装置を視認可能な位置は前記第１の撮像装置の撮像範囲に含まれ、
前記第２の表示装置を視認可能な位置は前記第２の撮像装置の撮像範囲に含まれる、請求項２〜９のいずれか一項に記載の画像通信装置。
【請求項１１】
第１の撮像装置から第１の撮像画像を取得するステップと、
前記第１の撮像画像を第２の表示装置に向けて送信するステップと、
前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信するステップと、
を含む、画像通信方法。
【請求項１２】
コンピュータを、
第１の撮像装置から第１の撮像画像を取得し、前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部、
として機能させるための、プログラム。
【請求項１３】
第１の撮像装置、前記第１の撮像装置側に設けられる第１の表示装置、前記第１の撮像装置から第１の撮像画像を取得する画像通信装置、および第２の表示装置を備える画像通信システムであって、
前記画像通信装置は、
前記第１の撮像画像を第２の表示装置に向けて送信する場合、前記第２の表示装置の利用者情報を前記第１の撮像装置側の第１の表示装置に向けて送信する制御部を有する、画像通信システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１３−７４５９８（Ｐ２０１３−７４５９８Ａ）
【公開日】平成２５年４月２２日（２０１３．４．２２）
【国際特許分類】
【出願番号】特願２０１１−２１４３１２（Ｐ２０１１−２１４３１２）
【出願日】平成２３年９月２９日（２０１１．９．２９）
【国等の委託研究の成果に係る記載事項】（出願人による申告）国等の委託研究の成果に係る特許出願（独立行政法人情報通信研究機構「高度通信・放送研究開発委託研究／革新的な三次元映像技術による超臨場感コミュニケーション技術の研究開発 課題オ 超臨場感コミュニケーションシステム」、産業技術力強化法第１９条の適用を受ける特許出願）
【出願人】（００００００２９５）沖電気工業株式会社 (6,645)
【Ｆターム（参考）】
【公開日】平成２５年４月２２日（２０１３．４．２２）
【国際特許分類】
【出願日】平成２３年９月２９日（２０１１．９．２９）
【国等の委託研究の成果に係る記載事項】（出願人による申告）国等の委託研究の成果に係る特許出願（独立行政法人情報通信研究機構「高度通信・放送研究開発委託研究／革新的な三次元映像技術による超臨場感コミュニケーション技術の研究開発 課題オ 超臨場感コミュニケーションシステム」、産業技術力強化法第１９条の適用を受ける特許出願）
【出願人】（００００００２９５）沖電気工業株式会社 (6,645)
【Ｆターム（参考）】
[ Back to top ]