Amazon Music の空間オーディオには極力オーディオエフェクトをかけないほうがいいという話
まえがき
スマホやタブレットにおける Amazon Music の空間オーディオ (Dolby Atmos / 360 Reality Audio) や、U-NEXT の Dolby Atmos / Dolby Audio (2022/3/12追記: U-NEXT はアップデートにて、この問題が起こらないようになっていた→ 詳細) はアプリの仕様により、一部のオーディオエフェクトをかけると音が変になってしまう危険性がある。さらに最近流行りのバイノーラル音声等に関しても同じことが言える。
ただ、その危険性を解説するには様々な専門用語が出てきてしまい、分かりやすく伝えることが難しい。そこで、この記事では技術的な詳細はあえて省き、専門用語を別の例えで置き換えることで、できる限りわかり易く説明したいと思う。
無理やり例えて説明しているため、詳しい方からすると説明が苦しいところも存在するかもしれない。しかし、この記事はオーディオ技術に精通している方を対象に、事態を正確に理解してもらうための記事ではなく、多くの音楽好きの方に注意喚起を行うことを目的としているため、そのあたりは大目に見ていただきたい。
Amazon Music の空間オーディオにかけないほうがいいオーディオエフェクト (一例)
通常のイコライザー (ただし Android の Dolby 系のイコライザーは除く) や、音をハイレゾ化 (アップサンプリング) する機能 (Xperia の DSEE 系や、Galaxy の UHQアップスケーラーなど) などはかけても問題はない。
問題があるのは、以下に示すような疑似サラウンド系や、コンサートホールなどの響きを再現する系のエフェクトである。これらのエフェクトは、イヤホンやヘッドホン (有線 / 無線問わず) で聴く場合も、内蔵スピーカーで聴く場合も、外部スピーカーで聴く場合も、いずれの場合においてもオフにしたほうが良い。
ぱっと思いつくものだけを列挙したが、これに限らず、類似の機能はすべてオフにすることを推奨する。
Apple
- ステレオを空間化 (Spatialize Stereo)
Dolby
- Dolby Atmos
- Dolby Audio
- Dolby Processing
- Dolby Sound
- Dolby Surround
- Dolby Digital Plus
- Dolby Mobile
※ 機種によって表記がまちまちだが、とにかく「ドルビーなんちゃら」の設定は、Amazon Music の空間オーディオには適用しないほうがいい。
※ Huawei、OPPO / OnePlus、Lenovo / motorola / NEC、Xiaomi 等の一部の端末では内蔵スピーカー使用時に Dolby Atmos をオフにできないものもあるが、その場合は諦めるしかない。
DTS
- DTS:X Premium
- DTS:X Ultra
- DTS:X 3D Surround
- DTS Headphone:X
- DTS Sound
- DTS Envelo
Auro
- Auro-3D
THX
- THX Spatial Audio
ASUS (ZenFone / ROG Phone)
- AudioWizard (DTS、Dirac)
LG
- LG 3Dサウンド
Nokia / HMD Global
- OZO Playback
OPPO
- リアルサウンドテクノロジー (Dirac)
Samsung (Galaxy)
- コンサートホール
SHARP (AQUOS)
- サラウンドプラス
Sony (Xperia)
- 360 Spatial Sound
- 360 Upmix (360 Reality Audio Upmix)
- サラウンド(VPT)
- S-Force Front Surround
Amazon Music の空間オーディオに上記のオーディオエフェクトをかけないほうがいい理由
ここからは、Dolby Atmos や 360 Reality Audio をコーヒーに、通常のステレオ音声 (専門用語で言うと Lo/Ro: Left only / Right only) を水に例えて説明する。つまり、音の聴こえ方 = 飲み物の味となる。
Amazon Music のアプリがやっていること
スマホやタブレット版の Amazon Music では、Amazon Music アプリがコーヒーの材料 (音源) を調達し、アプリ内部でコーヒーを作るところ (デコード等の処理) まで行う。一方 Apple Music は、アプリ側ではコーヒーの材料の調達のみを行い、コーヒーを作るのはスマホやタブレット本体に任せる。
それぞれの方式のメリットをまとめると以下のようになる。この2方式は対になるものなので、一方のメリットは、反転するともう片方のデメリットとなる。
Amazon Music: アプリ内処理
- スマホがコーヒーの淹れ方を知らなくても、コーヒーを飲むことができる
Apple Music: 端末側で処理
- コーヒーを作る設備をアプリに組み込まなくていい
- スマホやタブレットへの負荷が低い
- 消費電力が少ない
- コーヒーの淹れ方や味付けを工夫する余地をスマホやタブレットに与えられる場合もある (例: 内蔵スピーカーの特性に合った処理を行うことができる、イヤホンやヘッドホンでヘッドトラッキングを行うことができる、360 Reality Audio の「個人最適化」ができる、など)
先程 Android 版 U-NEXT の Dolby Atmos や Dolby Audioも注意が必要だと述べたが、これもアプリ側で処理を行っているためである。 (→ 2022/3/12追記: アップデートにて、デコーダーがある機種では端末側で処理、ない機種ではアプリ側で処理を行うよう改善されていた。)
Amazon Music の空間オーディオにかけないほうがいいオーディオエフェクトとは
では先程列挙したエフェクトは何なのかと言うと、水 (通常のステレオ音声) が来ても、インスタントコーヒー (アップミックスや残響音のエミュレーションなどを行うもの) を用意しておけば、ちゃんと淹れたコーヒー (Dolby Atmos や 360 Reality Audio でミキシングされた音声) には敵わないものの、一応コーヒーは飲める、というものである。
つまり、Amazon Music の空間オーディオに対し、スマホ側の Dolby Atmos 等のエフェクトを適用するというのは、すでに出来上がったコーヒーにインスタントコーヒーの粉を入れる、というものである。これでは味 (音の聴こえ方) が変になるのは当然と言えるだろう。
なぜこのようなことが起こるのか
Apple Music のような方式の場合、コーヒーは自分で淹れているので、そこにさらにインスタントコーヒーの粉を入れるようなことはしない。一方、Amazon Music の場合、提供されたコーヒーは自分で淹れたものではないので、出てきた飲み物が何かよくわからずにインスタントコーヒーの粉を入れてしまう、といった状況である。
「いや、コーヒーかどうかなんて見た目や味で分かるし、そこにインスタントコーヒーの粉をブチ込むバカなんていねーだろ」
たしかにそれはそうである。少なくともホームシアターではそんなことは起こり得ない (5.1ch → 5.1.4ch アップミックスのように、コーヒーだと分かった上で、そこに砂糖やミルクを入れたり、コーヒーフロートにしたりすることはあるが)。
しかし、これにはスマホやタブレットならではの特殊な事情が絡んでくる。以降、飲み物の色を、音源のトラック数 (チャンネル数やオブジェクト数) に例えて説明する。
スマホやタブレットはホームシアターに接続されることはまれで、基本的にはイヤホン、ヘッドホン、内蔵スピーカーで聴かれるため、最終的にはどの飲み物も透明 (ステレオ) な液体 (音源) にする処理が必要がある。
そのため、スマホやタブレットにおいて空間オーディオを楽しむためには、コーヒーの味 (Dolby Atmos や 360 Reality Audio の聴こえ方) を保ったまま透明化する (ステレオに落とし込む) 必要がある。この透明化の処理は、「バーチャライズ」や「バイノーラルレンダリング」などと呼ばれる。
余談
Amazon Music の空間オーディオには関係がないが、コーヒーを透明にする方法としては、上記以外にも、淹れたコーヒーのコーヒー成分をどうにか濾し取って、見た目も味もただの水 (普通のステレオ音声) にしてしまう「ダウンミックス」という処理もある。ただ、やはりコーヒーから生成した水は、元から水として提供されているものと同一になるわけではない。
なお、逆に Apple Music で空間オーディオを聴く場合、iPhone や iPad で本体側の「空間オーディオ」をオフにしたり、Android 端末で本体側の「Dolby Atmos」をオフにしたりすると、このダウンミックスが行われてしまうため、Apple Music の空間オーディオではこれらの機能はオン必須となる。ステレオで聴きたい場合は、Apple Music の設定の Dolby Atmos の方をオフにするべきである。
これは Amazon Music でも Apple Music でも行わなければならない処理なのだが、Amazon Music の場合はアプリ内でブラックボックス的にその処理を行っているため、スマホやタブレットからしたら透明なのでただの水 (ステレオ音声) にしか見えない。味はコーヒーかもしれないが、機械には味 (聴こえ方) までは分からない。
だからこそ、出来上がったコーヒー (を透明化したもの) にインスタントコーヒーの粉を入れるような真似ができてしまうのである。
iPhone や iPad で Amazon Music の空間オーディオを再生すると、フォーマット情報が「ドルビーアトモス」などではなく「ステレオ」という表記で、右下のトグルが「空間オーディオ」でなく「ステレオを空間化」となっているのも、そのせいである (実はそれ以外にももう一つ理由があるのだが、ここでは省く)。
Amazon Music の空間オーディオは、iPhone や iPad からすると空間オーディオではない (お前は何を言っているんだ) ため、AirPods シリーズのダイナミックヘッドトラッキングを使用するためには、「ステレオを空間化」を使用する必要がある。しかし、これでは音が変になってしまうのである。
なお、バイノーラル音声に関してもこれと同様で、あれはステレオヘッドホン / イヤホン向けに調整された、透明の味付きドリンクのようなものである。これに対しても、やはり上記の理由で水と勘違いしてインスタントコーヒーの粉を入れることができてしまうのだが、そんなことをすると味がおかしくなってしまうのは明白だ。
おわりに: アプリ内処理は悪なのか?
こうして見ると、「Amazon Music も端末側で処理するようにしておけばよかったのに」と思えてくる。しかし、アプリ側で処理する場合は、スマホやタブレット本体の対応状況を気にすることなく (結果的には上記の理由で気にしなければいけなくなってしまったが)、幅広い人に空間オーディオを楽しんでもらうことができる。
そもそも、360 Reality Audio のコーデックとして採用されている MPEG-H 3D Audio のデコーダーを搭載していることが確認できている機種は、今の所 Xperia や Walkman の一部機種ぐらいだ。
また、Amazon Music では、スマホやタブレットに Dolby Atmos を提供する際は、Apple Music で使用されるフォーマット (E-AC-3 JOC) に比べ、低ビットレートで配信でき、更にデコード時の負荷も低いという特徴を持つ新しいフォーマット (AC-4 IMS) が用いられている。このフォーマットは最近の Android 端末では対応機種が増えてきている (詳細は上記の記事にて) ものの、iPhone や iPad はまだ対応していない。
E-AC-3 JOC と AC-4 IMS についての詳細:
こうしたまだ十分に普及していない新しいフォーマットを採用することができるのは、アプリ内処理の強みである。
さらに、端末側の処理の強みとして「アプリ内処理よりも負荷が少なく、消費電力も低い」と書いたが、動画再生ならまだしも、音楽再生でそこまで顕著に差が出るかと言われれば、正直微妙なところではある (ゲーム中など負荷が高い状態だと音が一瞬飛ぶこともなくはないが)。
では、Amazon Music はどうすればよかったのか。答えは単純で、端末側の処理とアプリ側の処理のハイブリッドにすればいい。つまり、本体が対応しているものはデコードを本体に任せ、非対応なものだけをアプリ側でデコードする。ただこれだけで済んだ話である。
確かに、それだと例えば Dolby Atmos には非対応なものの DTS:X Ultra には対応している機種等で、Amazon Music の Dolby Atmos の音源を聴いた場合には、依然として上記のような問題は起こりうる。
しかし、少なくとも、「Amazon Music の Dolby Atmos を Dolby Atmos 対応の Android 端末で聴く場合は、本体側の Dolby Atmos をオフにしてください」という、一見意味不明な注意喚起を行わなくても良くなる。ハイブリッドにすることで、「Dolby と DTS が喧嘩しちゃうので、DTS の方はオフにしてくださいね」とかで済む。
個人的に Amazon Music の空間オーディオの問題点は、アプリ内処理のみであるということよりも、そのことによる注意点をきちんとユーザーに周知徹底していないことにあると考える。こういった重要な情報は、きちんと公開していただけるよう願いたいところだ。
