Top > Search of Japanese Patents > OUT-OF-HEAD SOUND IMAGE LOCALIZATION DEVICE > Specification

Specification :(In Japanese)頭外音像定位装置

Country (In Japanese)日本国特許庁(JP)
Gazette (In Japanese)特許公報(B2)
Patent Number P4691662
Publication number P2007-214815A
Date of registration Mar 4, 2011
Date of issue Jun 1, 2011
Date of publication of application Aug 23, 2007
Title of the invention, or title of the device (In Japanese)頭外音像定位装置
IPC (International Patent Classification) H04S   1/00        (2006.01)
H04S   5/02        (2006.01)
H04S   7/00        (2006.01)
FI (File Index) H04S 1/00 L
H04S 5/02 D
H04S 7/00 F
Number of claims or invention 6
Total pages 11
Application Number P2006-031651
Date of filing Feb 8, 2006
Date of request for substantive examination Jan 19, 2009
Patentee, or owner of utility model right (In Japanese)【識別番号】304021288
【氏名又は名称】国立大学法人長岡技術科学大学
Inventor, or creator of device (In Japanese)【氏名】島田 正治
【氏名】穂刈 治英
【氏名】工藤 彰洋
【氏名】久保 星哉
Representative (In Japanese)【識別番号】100077779、【弁理士】、【氏名又は名称】牧 哲郎
【識別番号】100078260、【弁理士】、【氏名又は名称】牧 レイ子
【識別番号】100086450、【弁理士】、【氏名又は名称】菊谷 公男
Examiner (In Japanese)【審査官】菊池 充
Document or reference (In Japanese)特開平07-123498(JP,A)
特開平09-065498(JP,A)
特開平11-127500(JP,A)
Field of search H04S 1/00- 7/00
Scope of claims (In Japanese)【請求項1】
方位角±Φを有する前方の2チャネルステレオ実音源位置L、Rの左右に角度差θ(スイング角度)を有する移動音源位置A、Bを設定して両耳の受聴点までの経路の伝達関数Ha(ω)、Hb(ω)を移動音源位置毎に求め、ステレオヘッドホンの各チャネルの音源信号s(t)に対し、
フレームの前後がオーバラップする波形切り出し関数w1(t)を掛けて逐次フレームを切り出し、音源信号s(t)を複数のフレーム信号sn(t)に分割する切り出し手段と、
フレーム信号sn(t)に対し、交互に伝達関数Ha(ω)、Hb(ω)を畳み込んで移動音源位置A、Bの位置情報を含んだフレーム信号sa(t)、sb(t)を生成する畳み込み手段と、
フレーム信号sa(t)、sb(t)に対し、波形合成関数w2を掛けて得られるフレーム信号sa´(t)、sb´(t)を交互にオーバラップ加算して、波形の不連続を平滑化するとともに、ステレオ実音源位置L、Rに設置した音源が移動音源位置A、B間を一定の周期T(スイッチング時間)で往復運動する移動情報を含んだ合成信号s´(t)を生成する加算手段と、
を備え、
これより受聴者の両耳に音像提示角度φ、スイング角度θ、スイッチング時間Tなるスイング音像を提示して音像を頭外に定位させることを特徴とする頭外音像定位装置。
【請求項2】
前記フレーム信号sn(t)に対し、畳み込む伝達関数Ha(ω)、Hb(ω)の順序を左右のチャネルで逆にしてスイング音像を左右に伸縮させることを特徴とする請求項1記載の頭外音像定位装置。
【請求項3】
前記フレーム信号sn(t)に対し、畳み込む伝達関数Ha(ω)、Hb(ω)の順序を左右のチャネルで同じにしてスイング音像を左右に揺動させることを特徴とする請求項1記載の頭外音像定位装置。
【請求項4】
前記波形切り出し関数w1(t)と波形合成関数w2(t)がそれぞれフェードイン/フェードアウト関数またはモディファイド・ハミング窓のいずれかであることを特徴とする請求項1記載の頭外音像定位装置。
【請求項5】
前記スイング角度θが3~10度であることを特徴とする請求項1記載の頭外音像定位装置。
【請求項6】
前記スイッチング時間Tが200m秒以上であることを特徴とする請求項1記載の頭外音像定位装置。
Detailed description of the invention (In Japanese)【技術分野】
【0001】
本発明は、ステレオヘッドホン受聴時に頭外に音源の方位を知覚できるようにする頭外音像定位技術に関する。
【背景技術】
【0002】
頭外音像定位は、ヘッドホン装着時の外耳道の音響伝播特性をデジタルフィルタで補正して受聴者に提示することにより、頭の外に開放感のある音像を再現するものである。
空間音響特性の付与は、図13に示すように、頭外音像定位伝達関数SLTF(Sound Localization Transfer Function)を音源信号S(ω)と複素乗算して行う。
図の添字L、Rはそれぞれ左耳、右耳のものであることを示している。
SLTFは、自由空間におけるスピーカ3から外耳道入口のマイクロホン2までの空間音響伝達関数SSTF(Spacial Sound Transfer Function)を求め、これをスピーカ3の伝達関数LSTF(Loud Speaker Transfer Function)で割ってスピーカ3の特性を補償したものをさらに受聴者8のヘッドホン4からマイクロホン2までの外耳道伝達関数ECTF(Ear Canal Transfer Function)で割って得られる。すなわちSLTF=SSTF/(LSTF・ECTF)となる。
このSLTFを音源信号S(ω)と複素乗算し、ヘッドホン4を介して受聴者8に提示することにより、頭外音像定位が実現する。
【0003】
しかしながら、受聴者が音源位置を知覚するのに必要な両耳間の到達時間差、レベル差、周波数特性などの両耳特性や単耳特性は、頭部、胴体、耳介などの微妙な違いで変化することが知られている。
そのため人間の頭部、胴体、耳介には個人差があり、ダミーヘッドを用いて測定した汎用の伝達関数では本来は前方に知覚されるべき音像が後方に知覚される、いわゆる前後誤判定が生じ、音像定位は不正確になるか、もしくは最悪の場合、音像は頭の中に定位してしまう。
【発明の開示】
【発明が解決しようとする課題】
【0004】
解決しようとする問題点は以上のような点であり、本発明は、汎用の伝達関数を用いながら不特定多数の受聴者に良好な定位感が得られるステレオヘッドホンの頭外音像定位装置を提供することを目的になされたものである。
【課題を解決するための手段】
【0005】
そのため本発明は、方位角±Φを有する前方の2チャネルステレオ実音源位置L、Rの左右に角度差θ(スイング角度)を有する移動音源位置A、Bを設定して両耳の受聴点までの経路の伝達関数Ha(ω)、Hb(ω)を移動音源位置毎に求め、ステレオヘッドホンの各チャネルの音源信号s(t)に対し、フレームの前後がオーバラップする波形切り出し関数w1(t)を掛けて逐次フレームを切り出し、音源信号s(t)を複数のフレーム信号sn(t)に分割する切り出し手段と、フレーム信号sn(t)に対し、交互に伝達関数Ha(ω)、Hb(ω)を畳み込んで移動音源位置A、Bの位置情報を含んだフレーム信号sa(t)、sb(t)を生成する畳み込み手段と、フレーム信号sa(t)、sb(t)に対し、波形合成関数w2を掛けて得られるフレーム信号sa´(t)、sb´(t)を交互にオーバラップ加算して、波形の不連続を平滑化するとともに、ステレオ実音源位置L、Rに設置した音源が移動音源位置A、B間を一定の周期T(スイッチング時間)で往復運動する移動情報を含んだ合成信号s´(t)を生成する加算手段とを備え、これより受聴者の両耳に音像提示角度φ、スイング角度θ、スイッチング時間Tなるスイング音像を提示して音像を頭外に定位させることを最も主要な特徴とする。
【発明の効果】
【0006】
本発明は、人間を含む動物は一般的に移動音源の知覚に対して敏感であるという性質を利用して、ステレオヘッドホンの各チャネルの音源信号s(t)に移動音源位置A、Bの伝達関数Ha(ω)、Hb(ω)を交互に畳み込んで音像を移動するので、汎用の伝達関数を用いた高精度な頭外音像定位を実現できる。
また、オーバラップ区間の波形を合成してオーバラップ加算時の波形の不連続を平滑化するので、伝達関数を切り替える際に生じる振幅変動による違和感をなくし、より自然な信号波形の音像を提示できる。
【発明を実施するための最良の形態】
【0007】
以下、本発明の実施の形態について説明する。
【0008】
図1に、本発明を実施した頭外音像定位装置の構成図を示す。
図には、図を複雑にしないためステレオヘッドホンシステムの片方のチャネル系列のみを示している。
頭外音像定位装置は、パソコン1の入力側に測定系のマイクロホン2を接続し、出力側に測定系のスピーカ3と再生系のヘッドホン4をスイッチ5により切換え可能に接続する。
マイクロホン2は、A/D変換器21、アンチエリアシングフィルタとしてのローパスフィルタ22、アンプ23を介してパソコン1に接続する。
スピーカ3は、セレクタ31、アンプ32を介してスイッチ5に接続する。
ヘッドホン4は、アンプ41を介してスイッチ5に接続する。
スイッチ5は、D/A変換器51、スムージングフィルタとしてのローパスフィルタ52を介してパソコン1に接続する。
【0009】
測定は測定室6内に人間の頭部、胴体、耳介形状を模したダミーヘッド7を設置して行い、ダミーヘッド7の両耳の外耳道入口部分にマイクロホン2をセットし、ダミーヘッド7を中心にした前方の円弧上に等しい角度間隔でスピーカ3を配置する。
そしてセレクタ31を切換えて測定音を出力するスピーカ3の位置を移動し、スピーカ3の測定音をダミーヘッド7の耳に挿入したマイクロホン2で収音して所定の測定角度間隔で順番にインパルス応答を測定する。
測定角度間隔を実際のスピーカ3の配置間隔より狭い、例えば1度間隔にする場合は、到来時間差を考慮した線形補間法を用いてインパルス応答を計算で求める。
スピーカ3は、円形の枠に等しい角度間隔で取り付けてもよい。
その場合、枠を水平方向に回転して測定角度間隔を実際のスピーカ3の配置間隔より狭い、例えば1度間隔にすることもできる。
【0010】
測定はダミーヘッド7の両耳について行い、図2に示すように、左側のスピーカ3Lと左耳との間のインパルス応答h1L(t)、左側のスピーカ3Lと右耳との間のインパルス応答h2L(t)、右側のスピーカ3Rと右耳との間のインパルス応答h1R(t)、右側のスピーカ3Rと左耳との間のインパルス応答h2R(t)をそれぞれ測定する。
【0011】
図3に、パソコン1内で処理する測定系のブロック図を示す。
測定系は、信号発生部11、インパルス応答計算部12、メモリ保存部13で構成し、測定室6内におけるスピーカ3とマイクロホン2の間のインパルス応答を測定して音源から受聴点までの経路の伝達関数を求める。
【0012】
信号発生部11は、M系列信号(Maximum Length Sequence)や時間伸張パルス(Time Stretched Pulse)などのインパルス応答測定用の入力信号x(t)を生成し、スピーカ3に出力する。
入力信号x(t)はスピーカ3により音として出力され、ダミーヘッド7の耳に挿入したマイクロホン2により収音される。
マイクロホン2で収音した音はデジタル信号に変換され、インパルス応答がh(t)の線形システムにx(t)を入力したときの出力信号y(t)として入力信号x(t)と共にインパルス応答計算部12に入力される。
インパルス応答計算部12は、入力信号x(t)のフーリエ変換X(ω)と出力信号y(t)のフーリエ変換Y(ω)からインパルス応答h(t)のフーリエ変換である伝達関数H(ω)=Y(ω)/X(ω)を算出する。
測定はスピーカ3の位置を移動して行い、異なる音源位置のインパルス応答h(t)を所定の測定角度間隔で順番に取得し、それより異なる音源位置の伝達関数H(ω)を順番に算出する。
メモリ保存部13は、インパルス応答計算部12が算出した異なる音源位置の伝達関数H(ω)を順番にメモリに保存する。
【0013】
図2と図4に示すように、音源信号SL(t)と実音源3Lの位置から受聴者の両耳までの伝達関数のインパルス応答h1L(t)、h2L(t)を畳み込んだ信号と、音源信号SR(t)と実音源3Rの位置から受聴者の両耳までの伝達関数のインパルス応答h1R(t)、h2R(t)を畳み込んだ信号を両耳毎にそれぞれ加算することによって得られる2チャネルの仮想音源SiL(t)とSiR(t)を、ヘッドホン4を用いて提示することで、受聴者は合成されたステレオ音像Si(t)を知覚する。
このとき、音源信号SL(t)とSR(t)にレベル差と時間差を付加することで、合成されたステレオ音像の提示角度φを制御できる。
音像スイング法は、図4に示すように、仮想音源SiL(t)とSiR(t)をスイング角度θだけ変位した位置A、B間で一定のスイッチング時間Tで往復運動させることで、合成されたステレオ音像Si(t)を左右方向に変位させることにより、受聴者8の頭外に定位させるものである。
図4において、円弧ABの中心角θをスイング角度とし、3~10度の範囲に設定する。
また、受聴者8の頭部中心からステレオ実音源位置L、Rまでの距離?を約1.5m、スイッチング時間Tを200m秒以上に設定する。
音像提示角度φは、各チャネルの音源信号s(t)に時間差とレベル差を付加することにより設定する。
【0014】
スイング音像の提示方法には、図5に示すように、ステレオ実音源位置L、Rに設定した仮想音源SiL(t)、SiR(t)を逆方向に移動音源位置A、B間を往復させるコンパンド法と、図6に示すように、仮想音源SiL(t)、SiR(t)を同方向に移動音源位置A、B間を往復させるツイスト法がある。
コンパンド法は、左右のステレオ実音源位置L、Rに設定した仮想音源SiL(t)、SiR(t)が提示する音像の位置を左右に伸縮して受聴者8の前方の頭外に音像を定位させる。
ツイスト法は、左右のステレオ実音源位置L、Rに設定した仮想音源SiL(t)、SiR(t)が提示する音像の位置を左右に揺動して受聴者8の前方の頭外に音像を定位させる。
【0015】
図7に、パソコン1内で処理する再生系のブロック図を示す。
再生系は、第1音像生成部14、第2音像生成部15、第3音像生成部16、第4音像生成部17、第1音像合成部18、第2音像合成部19で構成し、左右のステレオ信号を入力して両耳のスイング音像を生成し、ヘッドホン4の左右のチャネルに出力する。
スイング音像は、左右のチャネルに対しメモリ保存部13に保存した異なる音源位置の伝達関数H(ω)の中から移動音源位置A、Bの伝達関数Ha(ω)、Hb(ω)を抽出し、それを交互に音源信号と複素乗算して得られる。
【0016】
第1音像生成部14は、左側のステレオ信号とインパルス応答h1L(t)を畳み込み乗算して左耳用のスイング音像s1L(t)を生成する。
第2音像生成部15は、左側のステレオ信号とインパルス応答h2L(t)を畳み込み乗算して右耳用のスイング音像s2L(t)を生成する。
第3音像生成部16は、右側のステレオ信号とインパルス応答h2R(t)を畳み込み乗算して左耳用のスイング音像s2R(t)を生成する。
第4音像生成部17は、右側のステレオ信号とインパルス応答h1R(t)を畳み込み乗算して右耳用のスイング音像s1R(t)を生成する。
第1音像合成部18は、スイング音像s1L(t)、s2R(t)を加算してヘッドホン4の左チャネル出力信号を生成する。
第2音像合成部19は、スイング音像s1R(t)、s2L(t)を加算してヘッドホン4の右チャネル出力信号を生成する。
【0017】
図8に、音像生成部の処理フローを示す。
まず、音源信号s(t)にフレーム間で前後がオーバラップする波形切り出し関数w1(t)を掛けて逐次フレームを切り出し、音源信号s(t)を複数のフレーム信号sn(t)=s(t)・w1(t)に分割する(ステップ101)。
これにより音源信号の長さをインパルス応答と同程度の長さに分割し、畳み込み演算の処理効率を高める。
次に、高速フーリエ変換(FFT)によりフレーム信号sn(t)のフーリエ変換Sn(ω)=F{sn(t)}を求める(ステップ102)。
次に、周波数領域のフレーム信号Sn(ω)と移動音源位置A、Bの伝達関数Ha(ω)、Hb(ω)を交互に複素乗算してA位置フレーム信号Sa(ω)=Sn(ω)・Ha(ω)とB位置フレーム信号Sb(ω)=Sn(ω)・Hb(ω)を生成する(ステップ103)。
これにより異なる音源位置A、Bで測定・算出された伝達関数が畳み込まれ、フレーム信号は空間の位置情報を含んだ音源信号となる。
【0018】
コンパンド法の場合、ステレオの各チャネルのフレーム信号Sn(ω)に対し、複素乗算する伝達関数Ha(ω)、Hb(ω)の順序を左右逆にする。
ツイスト法の場合、ステレオの各チャネルのフレーム信号Sn(ω)に対し、複素乗算する伝達関数Ha(ω)、Hb(ω)の順序を左右同じにする。
【0019】
次に、逆高速フーリエ変換(IFFT)によりA位置フレーム信号Sa(ω)とB位置フレーム信号Sb(ω)の逆フーリエ変換sa(t)=F-1{Sa(ω)}、sb(t)=F-1{Sb(ω)}を求め、音源信号を時間領域に戻す(ステップ104)。
次に、A位置フレーム信号sa(t)とB位置フレーム信号sb(t)に波形合成関数w2(t)を掛けてフレームの前後の波形を合成し、波形合成A位置フレーム信号sa´(t)=sa(t)・w2(t)と波形合成B位置フレーム信号sb´(t)=sb(t)・w2(t)を生成する。これによりオーバラップ区間の振幅を調整し、オーバラップ加算時の振幅変動を抑えてフレームのつなぎを滑らかにする。次に、波形合成A位置フレーム信号sa´(t)と波形合成B位置フレーム信号sb´(t)を交互にオーバラップ加算して結合し、合成信号s´(t)=sa´(t1)+sb´(t2)+・・・を生成する(ステップ105)。
これにより異なる音源位置A、Bの位置情報を含んだフレーム信号が交互に接続され、合成信号は空間の移動情報を含んだ音源信号となる。
【0020】
波形切り出し関数w1(t)と波形合成関数w2(t)は、フェードイン/フェードアウト関数を用いる場合とモディファイド・ハミング窓を用いる場合がある。
切り出し区間Lとフレームシフト量Mの間に、L=(4・M)の倍数という関係が成り立つならば、モディファイド・ハミング窓を用いて、波形の切り出し・合成を行うことで、滑らかに波形を合成することができる。モディファイド・ハミング窓は、オーバラップ区間のパワー和が一定になるように一方の振幅と他方の振幅を両方同時に小さくして信号波形を平滑化し、音像が滑らかに移動するようにする。
また、フェードイン/フェードアウト関数を用いることでも、滑らかに波形の合成を行うことができる。フェードイン/フェードアウト関数は、図9に示すように、フレーム信号をaからbに切り替えるとき、もしくはbからaに切り替えるとき、信号a、bのオーバラップ区間をクロスフェード領域とし、クロスフェード領域においてフェードアウトする信号aには直線状に傾斜して下降するフェードアウト関数wa(t)を乗算し、フェードインする信号bには直線状に傾斜して上昇するフェードイン関数wb(t)を乗算する。
これによりオーバラップ区間のパワー和が一定になるように一方の振幅を単調減少、他方の振幅を単調増加させて信号波形を平滑化し、音像が滑らかに移動するようにする。
【実施例1】
【0021】
以下、本発明の実施例(評価結果)について説明する。
図10に、音像提示角度φと前後誤判定率の関係を示す。
図10は、汎用の伝達関数を用いると定位精度が悪化する被験者に対し、本発明の頭外音像定位装置を適用した場合の評価結果を示し、左右0度から20度の音像提示角度φを横軸に、音像定位知覚の前後誤判定率を縦軸に配置している。
これより音像提示角度が0度の場合、従前の技術では前後誤判定率が60%であったものが本発明のコンパンド法とツイスト法では10~30%に減少していることが分かる。
また、音像提示角度が10度の場合、従前の技術では前後誤判定率が25%であったものが本発明のコンパンド法とツイスト法では10~20%に減少している。
このときの値は、後述のスイッチング時間T、スイング角度θ、伝達関数に合致しない被験者のすべての平均値で表している。
以上により、音像提示角度が0度における前後誤判定率が最も悪く、音像提示角度が正面を離れるほど、前後誤判定率が低下することが分かる。これは理論的・実験的にも正面方向の定位精度が悪いことを実証している。
以下、正面定位に議論を絞って最適なスイング角度θ、スイッチング時間Tを求める。
【0022】
図11に、スイング角度θと前後誤判定率の関係を示す。
図11は、汎用の伝達関数に合致しない被験者(Aグループ)とほぼ合致する被験者(Bグループ)に対し、本発明の頭外音像定位装置を適用した場合のツイスト法の評価結果を示し、音像提示角度φが0度でスイッチング時間Tを200m秒~1秒までとし、スイング角度θを横軸に、音像定位知覚の前後誤判定率を縦軸に配置している。
これよりスイング角度θが最適な値の範囲は3~10度であることが分かる。
なお、コンパンド法については記述を省略するが、ツイスト法と同様な評価結果を得ている。
【0023】
図12に、スイッチング時間Tと前後誤判定率の関係を示す。
図12は、汎用の伝達関数に合致しない被験者(Aグループ)とほぼ合致する被験者(Bグループ)に対し、本発明の頭外音像定位装置を適用した場合のツイスト法の評価結果を示し、音像提示角度φが0度でスイング角度θを4度、8度とし、スイッチング時間Tを横軸に、音像定位知覚の前後誤判定率を縦軸に配置している。
これよりスイッチング時間Tが最適な値の範囲は200m秒以上であることが分かる。
同様に、コンパンド法については記述を省略するが、ツイスト法と同様な評価結果を得ている。
【図面の簡単な説明】
【0024】
【図1】本発明を実施した頭外音像定位装置の構成図である。
【図2】インパルス応答の測定方法の概念図である。
【図3】パソコン1内で処理する測定系のブロック図である。
【図4】本発明を実施した頭外音像定位装置の音像提示方法の概念図である。
【図5】コンパンド法による音像提示方法の概念図である。
【図6】ツイスト法による音像提示方法の概念図である。
【図7】パソコン1内で処理する再生系のブロック図である。
【図8】音像生成部の処理フローである。
【図9】フェードイン/フェードアウト処理の概念図である。
【図10】音像提示角度と前後誤判定率の関係を表すグラフである。
【図11】スイング角度θと前後誤判定率の関係を表すグラフである。
【図12】スイッチング時間Tと前後誤判定率の関係を表すグラフである。
【図13】頭外音像定位伝達関数の測定方法の概念図である。
【符号の説明】
【0025】
1 パソコン
11 信号発生部
12 インパルス応答計算部
13 メモリ保存部
14 第1音像生成部
15 第2音像生成部
16 第3音像生成部
17 第4音像生成部
18 第1音像合成部
19 第2音像合成部
2 マイクロホン
21 A/D変換器
22 ローパスフィルタ
23 アンプ
3 スピーカ
31 セレクタ
32 アンプ
4 ヘッドホン
41 アンプ
5 スイッチ
51 D/A変換器
52 ローパスフィルタ
6 測定室
7 ダミーヘッド
8 受聴者
Drawing
(In Japanese)【図1】
0
(In Japanese)【図2】
1
(In Japanese)【図3】
2
(In Japanese)【図4】
3
(In Japanese)【図5】
4
(In Japanese)【図6】
5
(In Japanese)【図7】
6
(In Japanese)【図8】
7
(In Japanese)【図9】
8
(In Japanese)【図10】
9
(In Japanese)【図11】
10
(In Japanese)【図12】
11
(In Japanese)【図13】
12