【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、仮想空間共有方法およびこの方法を実施する装置に関し、特に、利用者が自分の意志で自由に移動することができる３次元仮想空間を表現すると共に、当該仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網を介して接続し、利用者の音声と利用者の仮想空間内の位置情報と視線の向き情報とを他の端末に分配することにより、複数の利用者が同一の仮想空間を遠隔地において共有し、仮想空間内に利用者が集合して会話することができる小グループを複数構成する仮想空間共有方法およびこの方法を実施する装置に関する。

【０００２】

【従来の技術】従来例を図６を参照して説明する。 図６
は仮想空間共有装置を構成する情報処理伝送装置端末音声ａないしｃと音声ミキサ部Ｍの間を通信網Ｎを介して接続する接続関係を示す図である。 全端末ａないしｃはコンピュータグラフィック機能を有する情報処理伝送装置端末として構成され、共通の仮想空間Ｓをそれぞれ表示する。 各端末利用者は自身の意志に基づいて対応する分身ａないしｃを自由に仮想空間Ｓ内において移動させることができる。 各端末の仮想空間Ｓ内には他の利用者の分身も表示する。 仮想空間Ｓに座標軸を設定し、分身の位置情報と視線の向き情報を各端末のマウス、キーボードその他の入力装置を介して入力して他の端末に伝送し、分身をその顔の向きを考慮して仮想空間内の該当位置に移動させる。 そして、視線の向き情報についても、
位置情報と同様に、仮想空間に設定した座標上の向きをマウス、キーボードその他の入力装置を介して入力伝送することができる。 図６において、複数の端末ａないしｃ間において音声を相互に伝送する場合、音声ミキサ装置Ｍを使用するが、この様な技術は音声会議サービス或はＮＴＴのダイヤルＱ ²サービスの如き種々の電話サービスに広く採用されている。 音声ミキサ部Ｍを中心にして各端末ａないしｃを通信網Ｎを介してスター接続し、
各端末ａないしｃは自身の音声を音声ミキサ部Ｍに送信し、音声ミキサ部Ｍは各端末ａないしｃから受信した音声をミキシングして各端末ａないしｃに分配する。 一般に、音声ミキサ部Ｍは複数の音声ミキサより成り、複数の音声会話を個々の音声ミキサにより同時並列的に実施することができる。

【０００３】ここで、この発明の先行例を図７および図８を参照して説明するに、仮想空間Ｓには、端末ａ、
ｂ、ｃ、ｄ、ｅ、ｆおよびｇの利用者それぞれに対応する７人の分身が存在する。 ７人の分身ａないしｇは、仮想空間Ｓが提供する各種のサービスを受けている場合、
これら７人の分身の発生する音は、音声ミキサ部Ｍ内において図７に示される如く通話路接続切り換え部１６により双方向接続されている。 この接続により、各分身ａ
ないしｇは他の分身の発生する咳その他の音および空間内にバックグラウンドミュージックが流れていればこの音を聞くことができる。 この様にして、各分身ａないしｇは他の分身の存在を現実の世界と同様に感じ取ることができる。 ７人の利用者それぞれの端末ａ、ｂ、ｃ、
ｄ、ｅ、ｆおよびｇは同一の仮想空間内におり、端末ａ
および端末ｂに対応する２人の利用者は相互に接近して共通する音声ミキサＡに接続し、端末ｃと端末ｄと端末ｅに対応する３人の利用者は相互に接近して共通する音声ミキサＢに接続し、それぞれ独立に会話している。 通話路接続切り換え部１６は、端末ａ、ｂ、ｃ、ｄ、ｅ、
ｆおよびｇの全てについて、これらから伝送される音声を音声ミキサＣに対して片方向通話路接続する構成を有している。 片方向通話路接続されて伝送された全ての端末ａないしｇの発生する音および音声をミキシングした音は、誰とも会話していない利用者に対応する端末ｆおよび端末ｇに伝送される。

【０００４】この様にして、端末ｆおよび端末ｇに対応する利用者は、同一仮想空間にいる利用者全員の音および音声を環境音として聞くことができる。 一方、通話路接続切り換え部１６は、端末ａおよび端末ｂから伝送される音声を音声ミキサＡに双方向通話路接続すると共に、更に音声ミキサＣから伝送されるミキシング音は損失挿入部１９Ａを介し音圧レベルを低下して音声ミキサＡに片方向通話路接続する。 結局、端末ａおよび端末ｂ
に対応する利用者は電話の様に双方向の会話をしながら、上述のミキシング音の音圧レベルを低下せしめた音を環境音として聴取することができる。 端末ｃと端末ｄ
と端末ｅについても、同様に接続することにより、双方向の会話をしながら上述のミキシング音の音圧レベルを低下せしめた音を環境音として聴取することができる（以上の先行例の詳細は当該特許出願人の出願に係わる特願平６−３２５８５８号明細書参照）。

【０００５】

【発明が解決しようとする課題】以上の通りの仮想空間共有装置において、例えば端末ｆの利用者は、端末のマウス、キーボードその他の入力装置を操作して分身ｆの位置情報と視線の向き情報を仮想空間共有装置および他の端末に伝送して、分身ｆを端末ａの分身ａおよび端末ｂの分身ｂに接近せしめ、端末ａおよび端末ｂに共通する音声ミキサＡに端末ｆを接続することにより、端末ａ、ｂに端末ｆを会話の仲間入りさせることができる。
仮想空間共有装置は、この様に、利用者間の距離の遠近および／或は視線の一致度に応じて利用者の音声を音声ミキサに接続し、或は他の音声ミキサに接続変えしたりして利用者を仮想空間内において移動させるのであるが、これに際して、利用者同志が接近して会話が成立しているか否かを判定し、或は何れの利用者同志が接近して共通する音声ミキサに接続しているのかを判定することが行なわれる。 この判定の仕方および判定の結果は、
音声に寸断を生ずることなしに自動的に音声がつながり、現実に近い環境を仮想空間内に実現する上において重要な意味を持つ。

【０００６】この発明は、この判定を利用者間の距離および／或は視線の一致度に着目して実施するものであり、利用者間の距離の遠近および／或は視線の一致度に応じて利用者の音声を音声ミキサに接続し、或は他の音声ミキサに接続変えしたりすることにより利用者は仮想空間内を移動しながら、会話したい相手に近寄るだけで音声に寸断を生ずることなしに自動的に音声がつながり、現実に近い環境を仮想空間内に実現することができる仮想空間共有方法およびこの方法を実施する装置を提供するものである。

【０００７】

【課題を解決するための手段】利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有方法において、利用者の分身の仮想空間における分身間の距離が或る閾値より小さい場合に両者の音声を同一の音声ミキサに接続する仮想空間共有方法を構成した。

【０００８】そして、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有方法において、利用者の分身の仮想空間における分身間の視野の重なりを検出して両者の音声を同一の音声ミキサに接続する仮想空間共有方法を構成した。

【０００９】また、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有方法において、利用者の分身の仮想空間における分身間の距離が或る閾値より小さく、利用者の分身の仮想空間における分身間の視野の重なりを検出した場合に両者の音声を同一の音声ミキサに接続する仮想空間共有方法を構成した。

【００１０】ここで、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有装置１
０において、利用者の分身の仮想空間における位置座標に基づいて分身間の距離を計算する距離判定部１５を具備し、距離判定部１５の計算結果を入力して第１の利用者の分身と第２の利用者の分身との間の仮想空間における距離が或る閾値より小さい場合に第１の利用者の音声と第２の利用者の音声を同一の音声ミキサに接続する指示を音声ミキサ部１８に与えるミキシング対象決定部１
７を具備する仮想空間共有装置を構成した。

【００１１】そして、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有装置において、利用者の分身の仮想空間における視線の向き情報に基づいて利用者間の視野の重なりｗの有無を計算する視野一致度判定部１６を具備し、視野一致度判定部１
６の計算結果を入力して第１の利用者と第２の利用者の視野の重なりを検出して第１の利用者の音声と第２の利用者の音声を同一の音声ミキサに接続する指示を音声ミキサ部１８に与えるミキシング対象決定部１７を具備する仮想空間共有装置を構成した。

【００１２】また、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有装置において、利用者の分身の仮想空間における位置座標に基づいて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づいて利用者間の視野の重なりを計算する視野一致度判定部１６を具備し、距離判定部１５の計算結果を入力して第１の利用者の分身と第２の利用者の分身との間の仮想空間における距離が或る閾値より小さいか、或は視野一致度判定部１６の計算結果を入力して第１の利用者と第２の利用者の何れかが他方の視野に存在する場合に、第１の利用者の音声と第２の利用者の音声を同一の音声ミキサに接続する指示を音声ミキサ部１８に与えるミキシング対象決定部１７を具備する仮想空間共有装置を構成した。

【００１３】更に、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有装置において、利用者の分身の仮想空間における位置座標に基づいて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づいて利用者間の視野の重なりを計算する視野一致度判定部１６を具備し、距離判定部１５から供給される距離ｄ
_BAと重なりｗの値の積を演算処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内にあることを意味する値１となる条件を満足すると共に、分身ａおよび分身ｂの少なくとも一方が相手の視野に存在することを意味するθ ₁
＝１或はθ ₂ ＝１となる条件を満足する利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示する演算処理するミキシング対象決定部１７を具備する仮想空間共有装置を構成した。

【００１４】そして、利用者が自分の意志で自由に移動することができる３次元仮想空間Ｓを表現すると共に仮想空間内に他の利用者の分身をも表現することができる端末を複数台通信網Ｎを介して接続し、利用者の音声と利用者の仮想空間内の分身の位置情報と視線の向き情報とを他の端末に分配し、複数の音声ミキサおよび複数の音声ミキサを音声回線に接続する音声スイッチＳＷより成る音声ミキサ部１８を使用して複数の利用者が同一の仮想空間を遠隔地において共有する仮想空間共有装置において、利用者の分身の仮想空間における位置座標に基づいて分身間の距離を計算する距離判定部１５を具備し、利用者の分身の仮想空間における視線の向き情報に基づいて利用者間の視野の重なりを計算する視野一致度判定部１６を具備し、距離判定部１５から供給される距離ｄ _BAと視野一致度判定部１６から供給される重なりｗ
の値の積を演算処理する回路を有して、分身ａと分身ｂ
とが閾値Ｌ内にあることを意味する値１となる条件を満足すると共に、分身ａおよび分身ｂが両者共に相手の視野に存在することを意味するθ ₁ ＝１およびθ ₂ ＝１となる条件を満足する利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示するミキシング対象決定部１７を具備する仮想空間共有装置を構成した。

【００１５】

【発明の実施の形態】この発明の実施の形態を図１を参照して説明する。 図１の実施例は集中接続方法を採用しているが、分散接続方法を採用しても原理は同一である。 簡単のために、仮想空間共有装置は３台の端末を収容するものとして説明する。 仮想空間共有装置１０と利用者端末との間は、高度情報通信システムＩＮＳ６４、
回線３４、回線３５、回線３６を介して音声、位置情報および視線の向き情報の送受信を行なっている。 先ず、
回線３４、回線３５、回線３６を介して受信したデータはそれぞれ回線インタフェース部１１、回線インタフェース部１２、回線インタフェース部１３に入力される。
これら回線インタフェース部は、受信したデータを解析し、これが音声であれば、内部バス１９、内部バス２
３、内部バス２７を介して音声ミキサ部１８へ転送する。 これら回線インタフェース部は受信したデータが位置情報と視線の向き情報であれば、内部バス２１、内部バス２５、内部バス２９を介して位置情報と視線の向き情報を位置情報分配部１４、距離判定部１５、視野一致度判定部１６へ転送する。

【００１６】位置情報分配部１４は内部バス２１から入力した位置情報と視線の向き情報をコピーして内部バス２６、内部バス３０を介して回線インタフェース部１
２、回線インタフェース部１３へ転送する。 そして、位置情報分配部１４は内部バス２５から入力した位置情報と視線の向き情報をコピーして内部バス２２、内部バス３０を介して回線インタフェース部１１、回線インタフェース部１３へ転送する。 また、位置情報分配部１４は内部バス２９から受けた位置情報と視線の向き情報をコピーして内部バス２２、内部バス２６を介して回線インタフェース部１１、回線インタフェース部１２へ転送する。

【００１７】ここで、距離判定部１５および視野一致度判定部１６を図２および図３を参照して簡単に説明する。 上述した通り、仮想空間Ｓに座標軸を設定し、分身の位置座標情報と視線の向き情報を各端末のマウス、キーボードその他の入力装置を介して入力して仮想空間共有装置に伝送し、他の端末にも伝送する。 この様にして分身をその顔の向きを考慮して仮想空間内の該当位置に移動させる。 視線の向き情報についても、位置座標情報と同様に、仮想空間に設定した座標上の向きをマウス、
キーボードその他の入力装置を介して入力伝送する。 端末ａの分身の位置座標を（Ａ _x 、Ａ _y ）とし、端末ｂの分身の位置座標を（Ｂ _x 、Ｂ _y ）とする。 端末ａの分身の視線の向き情報を（ａ _x 、ａ _y ）、端末ｂの分身の視線の向き情報を（ｂ _x 、ｂ _y ）とする。 なお、視線の向き情報は単位ベクトルとする。

【００１８】分身ａと分身ｂとの間の距離の計算は、内部バス２１、内部バス２５、内部バス２９を介して距離計算部１５ ₁に入力した位置座標（Ａ _x 、Ａ _y ）および（Ｂ _x 、Ｂ _y ）に基づいて、 ｄ _BA ＝√｛（Ｂ _x −Ａ _x ） ² ＋（Ｂ _y −Ａ _y ） ² ｝ （１） により求めることができる。 この距離ｄ _BAは比較部１５
₂において予め決められた閾値Ｌと比較され、０＜ｄ _BA
≦Ｌであるならｄ _BAに値１を与え、ｄ _BA ＜Ｌならｄ _BAに値０を与え、値０或は値１を内部バス３１を介してミキシング対象決定部１７へ転送する。 ミキシング対象決定部１７は距離ｄ _BAが値１である場合、これを演算処理して視線の向きに無関係に両利用者の音声をミキシングする指示を内部バス３１を介して音声ミキサ部１８に与える。

【００１９】この様に、ミキシング対象決定部１７は、
距離ｄ _BAが値１である場合これを演算処理して視線の向きに無関係に両利用者の音声をミキシングする指示を内部バス３１を介して音声ミキサ部１８に与える演算処理回路であるものをこの発明の実施例とすることができる。 次に、視野一致度判定部１６は、内部バス２１、内部バス２５、内部バス２９を介して分身の存在方向計算部１６ ₁および分身の存在方向計算部１６ ₂に入力した位置座標（Ａ _x 、Ａ _y ）および（Ｂ _x 、Ｂ _y ）、視線の向き情報（ａ _x 、ａ _y ）および（ｂ _x 、ｂ _y ）、距離計算部１５
₁の計算結果である距離ｄ _BAに基づいて、利用者間の視野の重なりｗの有無を計算する。

【００２０】COSθ ₁は、ベクトルａとベクトルＡＢとの間の内積を計算することにより求めることができる。 ベクトルａ・ベクトルＡＢ＝｜ベクトルａ｜・｜ベクトルＡＢ｜COSθ ₁ ＝ａ _x （Ｂ _x −Ａ _x ）＋ａ _y （Ｂ _y −Ａ _y ） ここで、｜ベクトルａ｜は単位ベクトル＝１であり、｜
ベクトルＡＢ｜はＡＢの距離√｛（Ｂ _x −Ａ _x ） ² ＋（Ｂ _y
−Ａ _y ） ² ｝である。 従って、分身ａから視た分身ｂの存在方向θ ₁は、 COSθ ₁ ＝｛ａ _x （Ｂ _x −Ａ _x ）＋ａ _y （Ｂ _y −Ａ _y ）｝／√｛（Ｂ _x −Ａ _x ） ² ＋（Ｂ _y −Ａ _y ） ² ｝ （２） である。

【００２１】分身の存在方向計算部１６ ₁により計算された存在方向θ ₁は比較部１６ ₂において予め決められた閾値αと比較され、０＜θ ₁ ≦αであるならθ ₁に値１を与え、α＜θ ₁ならθ ₁に値０を与え、値０或は値１を論理演算部１６ ₅に入力する。 同様にして、分身ｂ
から視た分身ａの存在方向θ ₂は、 COSθ ₂ ＝｛ｂ _x （Ａ _x −Ｂ _x ）＋ｂ _y （Ａ _y −Ｂ _y ）｝／√｛（Ｂ _x −Ａ _x ） ² ＋（Ｂ _y −Ａ _y ） ² ｝ （３） により求めることができる。 分身の存在方向計算部１６
₃により計算された存在方向θ ₂は比較部１６ ₄において予め決められた視野の閾値αと比較され、０＜θ ₂ ≦
αであるならθ ₂に値１を与え、α＜θ ₂ならθ ₂に値０を与え、値０或は値１を論理演算部１６ ₅に入力する。

【００２２】（１） 分身ａおよび分身ｂの何れも相手の視野αの外に存在して認識されないことを示すθ ₁ ＝
０およびθ ₂ ＝０の場合、論理演算部１６ ₅は利用者間の視野の重なりｗとして値０を出力する。 （２） 分身ａおよび分身ｂの内の何れか一方が相手の視野に存在することを示すθ ₁およびθ ₂の何れか一方が１の場合、論理演算部１６ ₅は視野の重なりｗとして値１を出力する。

【００２３】（３） 分身ａおよび分身ｂは何れも相手の視野に存在することを示すθ ₁およびθ ₂が共に１の場合、論理演算部１６ ₅は視野の重なりｗとして値１を出力する。 利用者の視野の重なりｗの出力は、内部バス３２を介してミキシング対象決定部１７へ転送される。

【００２４】ミキシング対象決定部１７は、分身ａおよび分身ｂの少なくとも一方が相手の視野に存在することを意味する上述の（２）および（３）の場合、重なりｗ
の値１を演算処理して利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示する演算処理回路であるものをこの発明の他の実施例とすることができる。 ミキシング対象決定部１７は、距離ｄ _BAが値１である場合これを演算処理して視線の向きに無関係に分身ａおよび分身ｂの両利用者の音声をミキシングする指示を音声ミキサ部１８に与え、或は重なりｗの値１を演算処理して分身ａおよび分身ｂの両利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示する演算処理回路であるものを更に他の実施例とすることができる。

【００２５】ミキシング対象決定部１７は、距離判定部１５から供給される距離ｄ _BAと重なりｗの値の積を演算処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内にあることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂの少なくとも一方が相手の視野に存在することを意味するθ ₁ ＝１或はθ ₂ ＝１となる条件を満足する利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示する演算処理回路であるものをこの発明の実施例とすることができる。

【００２６】ミキシング対象決定部１７は、距離判定部１５から供給される距離ｄ _BAと重なりｗの値の積を演算処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内にあることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂが両者共に相手の視野に存在することを意味するθ ₁ ＝１およびθ ₂ ＝１となる条件を満足する利用者を同じ音声ミキサに接続する様に音声ミキサ部１８に指示する演算処理回路であるものをこの発明の他の実施例とすることができる。 この場合、θ ₁ ＝１およびθ ₂ ＝１となる条件を満足するか否かを判定するに、論理演算部１６ ₅には、比較部１６ ₁の比較結果と比較部１６ ₂の比較結果を積算する積算回路を具備する。

【００２７】以上の通りのミキシング対象決定部１７の指示に従って音声ミキサ部１８は、内部バス２３および内部バス２７から入力した音声の内の、回線インタフェース部１１が収容する利用者の音声と同一音声ミキサに接続する音声を選択してミキシングし、内部バス２０を介して回線インタフェース部１１へ転送する。 そして内部バス１９および内部バス２７から入力した音声の内の、回線インタフェース部１２が収容する利用者の音声と同一音声ミキサに接続する音声を選択してミキシングし、内部バス２４を介して回線インタフェース部１２へ転送する。 また、内部バス１９および内部バス２３から入力した音声の内の、回線インタフェース部１３が収容する利用者の音声と同一音声ミキサに接続する音声を選択してミキシングし、内部バス２８を介して回線インタフェース部１３へ転送する。

【００２８】回線インタフェース部１１、回線インタフェース部１２、回線インタフェース部１３は、それぞれ、内部バス２２、内部バス２６、内部バス３０から入力した位置情報と視線の向き情報と、内部バス２０、内部バス２４、内部バス２８から入力した音声を回線３
４、回線３５、回線３６へ送出する。 図４および図５は仮想空間Ｓ内における分身ａないし分身ｃ間の位置関係、分身相互の視野の重なりを説明する図である。

【００２９】図４（ａ）は、分身ａと分身ｂとが仮想空間Ｓ内において予め決められている距離の閾値より離れているところを示す図である。 この場合、分身ａと分身ｂの音声はミキシングしない。 図４（ｂ）は、分身ａと分身ｂとが距離の閾値以内に接近しているところを示す図である。 この様に、分身ａと分身ｂとの間の距離が閾値以内である場合、視線の向きに無関係に分身ａと分身ｂの音声をミキシングする。

【００３０】図４（ｃ）は、分身ａと分身ｂとの間の距離が閾値より小さく、分身ａおよび分身ｂの両者が相手の視野内にあるところを示す図である。 この様に、距離および分身の視線の向きを考慮し、両者間の距離が閾値より小さく、両者が相手の視野内にある場合、分身ａと分身ｂの音声をミキシングする。 そして、視野のみが一致している場合も、分身ａと分身ｂの音声をミキシングする。

【００３１】ここで、図４（ｄ）は、分身ｂは分身ａの視野にあるが、分身ａは分身ｂの視野にはない場合を示し、両者の視野が一致していないので分身ａと分身ｂの音声はミキシングしない。 以下の例は、分身ａと分身ｂ
が同一の音声ミキサに既に接続されている場合に、分身ｃが接近する例を示す図である。

【００３２】図４（ｅ）は、分身ｃと分身ａとの間の距離が閾値より小さい場合は、分身ｃの視線の向きに無関係に分身ｃの音声を分身ａの音声ミキサおよび分身ｂの音声ミキサに追加する例を示す。 図５（ｆ）は、分身ｂ
の視野は分身ｃの視野と一致していて分身ｃを認識することができるので、分身ｃを分身ａおよび分身ｂの音声ミキサに追加する。

【００３３】図５（ｇ）は、分身ｃは、分身ａの視野および分身ｂの視野の何れとも一致しておらず、分身ａおよび分身ｂの何れによっても認識されないが、分身ｃと分身ａとの間の距離が閾値より小さい場合は、分身ｃの音声を分身ａおよび分身ｂの音声ミキサに追加する。 図５（ｈ）は、分身ｃは分身ａの視野内にあるが、分身ｂ
の視野内にはない場合を示し、図４（ｅ）の場合に等しいので、分身ｃの視線の向きに無関係に分身ｃの音声を分身ａの音声ミキサと分身ｂの音声ミキサに追加する。

【００３４】以上の通り、この発明は、複数の利用者が共有する３次元仮想空間を対象にしており、仮想空間共有装置が音声ミキサ機能を有する。 各利用者は自分の意志で自由に仮想空間内を移動するので、利用者自身と他の利用者との間の位置関係、顔の向きは常時変化する。
この位置情報および視線の向き情報を利用して利用者間の距離の遠近、視線の一致度に応じて利用者の音声を音声ミキサに接続したり他の音声ミキサに接続変えしたりすることにより、利用者は仮想空間内を移動しながら会話したい相手に近寄るだけで音声の中断を生ずることなしに自動的に音声がつながり、現実に近い環境を仮想空間内に実現することができる。

【００３５】

【発明の効果】以上の通りであって、この発明によれば、仮想空間共有方法およびこの方法を実施する装置において、他の装置から受信する利用者の音声をミキシングするに際して、音声と共に受信する各利用者の分身の位置情報と視線の向き情報を利用して使用者間の距離の遠近、視野の一致度に応じて利用者の音声を音声ミキサに接続し、或は別の音声ミキサに接続変えすることにより、利用者は仮想空間内を移動しながら会話したい相手に近寄るだけで自動的に音声がつながり、現実に近い環境を仮想空間内に実現することができる。

【図面の簡単な説明】

【図１】実施の形態を説明する図。

【図２】視野一致を説明する図。

【図３】距離判定部および視野一致度判定部を説明する図。

【図４】仮想空間内における分身間の位置関係を説明する図。

【図５】仮想空間内における分身間の位置関係を説明する図。

【図６】従来例を説明する図。

【図７】先行例の音声ミキサ部を説明する図。

【図８】先行例における分身間の位置関係を説明する図。

【符号の説明】

１０ 仮想空間共有装置 １１、１２、１３ 回線インタフェース部 １４ 位置情報分配部 １５ 距離判定部 １６ 視野一致度判定部 １７ ミキシング対象決定部 １８ 音声ミキサ部 １９、２３、２７ 音声受信用内部バス ２０、２４、２８ 音声送信用内部バス ２１、２５、２９ 位置情報受信用内部バス ２２、２６、３０ 位置情報送信用内部バス ３１ 距離計算結果転送用内部バス ３２ 視野一致度計算結果転送用内部バス ３３ 音声ミキサ指示用内部バス ３４、３５、３６ 通信回線