AliExpressがサイレントなWebAudioフィンガープリンティングでBluetoothマルチポイント接続を妨害
要約
AliExpressのウェブページが、ユーザーに気づかれずにWebAudio APIを使用してフィンガープリンティングを行い、Bluetoothヘッドホンのマルチポイント接続を妨害する問題が発見されました。この手法は、音声や動画要素を使わずにバックグラウンドでオーディオコンテキストをアクティブにし、ブラウザやOSにオーディオパスを維持させ、デバイスの切り替えを阻害します。uBlock Originなどの広告ブロッカーで特定のスクリプトをブロックすることで、この問題を回避できることが示されています。
全文翻訳
最近、私のBluetoothヘッドフォンで奇妙な問題が発生しました。ヘッドフォンはマルチポイントBluetoothオーディオに対応しており、PCとスマートフォンの両方に同時に接続できます。通常、PCがオーディオ再生の優先権を持ち、PCで何も再生されていない場合にスマートフォンからオーディオを再生できます。
普段はスマートフォンで音楽を聴いていますが、PCから通知音やYouTubeが再生される場合、これは問題なく機能します。しかし、FirefoxまたはChromeでAliExpressのページを開くと(他のブラウザは未テスト)、状況が変わります。
AliExpressのホームページを読み込んでしばらくすると、スマートフォンのオーディオ再生が停止します。AliExpressのタブを閉じるとすぐに問題は解決します。タブやFirefox、Windowsのミュート機能を使っても効果はなく、ページ上には表示されている動画、音楽、その他のメディアは何も再生されていません。
これは調査する価値があるほど疑わしい状況でした。
隠されたメディアの捜索
最初に考えたのは、自動再生される製品ビデオや広告でした。そこで、通常の容疑者をチェックしました。
<audio>および<video>要素HTMLMediaElement.play()への呼び出し- アクティブなメディアセッションメタデータ
- メディアリクエスト
- メディアを含む埋め込みフレーム
これらのどれも有用な情報は示しませんでした。オーディオまたはビデオ要素はなく、メディア再生の呼び出しもなく、navigator.mediaSession.playbackState は none のままでした。
手がかりは、問題がすぐに始まらなかったことでした。ページが数秒間アイドル状態になった後に現れたのです。ページを読み込む前にインストゥルメント化し、従来のメディア要素だけを探すのではなく、Web Audio APIに注目しました。
基本的なアイデアは、AudioContext コンストラクタをラップし、ページがオーディオ処理コンテキストを作成するたびに記録することでした。
const OriginalAudioContext = window.AudioContext;
window.AudioContext = class extends OriginalAudioContext {
constructor(...args) {
super(...args);
console.log("AudioContext created", {
state: this.state,
stack: new Error().stack
});
}
};
また、AudioNode.prototype.connect() もラップして、コンテキストのオーディオデスティネーションに何が接続されているかを確認できるようにしました。
それがついに発見につながりました。2つの隠されたオーディオコンテキストです!
AliExpressのホームページのアイドル状態でのキャプチャ中に、ページは2つの AudioContext オブジェクトを作成しました。両方とも running 状態に入り、両方ともノードを AudioContext.destination に接続しました。
同時に、まだ以下の状態でした。
- オーディオまたはビデオ要素はゼロ
- メディアの
play()呼び出しはゼロ - アクティブなメディアセッションなし
- 可聴音なし
コンストラクタのスタックトレースは、2つのスクリプトを指していました。
https://assets.aliexpress-media.com/g/AWSC/uab/1.140.0/collina.js
https://assets.aliexpress-media.com/g/AWSC/fireyejs/1.231.67/fireyejs.js
最初のコンテキストは collina.js によって作成され、2番目は fireyejs.js から来ました。どちらも AWSC ディレクトリの下にあり、Alibabaのブラウザセキュリティおよび不正利用対策ツールのようです。
これらのスクリプトは非常に難読化されていますが、AIがオーディオコードの動作を理解するのに十分な名前と操作が残っています。
オーディオコードの動作
両方のスクリプトは、次のようなWebAudioグラフを構築します。
ソートゥースオシレータ
->
AnalyserNode
->ScriptProcessorNode
-> ゲインがゼロに設定されたGainNode
->AudioContext.destination
オシレータは既知の波形を生成します。アナライザーは、ブラウザのオーディオ実装を通過した後の結果を測定し、スクリプトはその周波数データを読み取ります。
ゲインはゼロに設定されているため、ユーザーは何も聞くべきではありません。しかし、グラフは依然としてシステムオーディオデスティネーションに接続されています。デスティネーションに接続すると、最終的な音量がゼロであっても、ブラウザはグラフを積極的に処理します。
これは自動再生ビデオとは大きく異なります。ブラウザの通常のタブミュートコントロールが停止できるメディア要素はありません。ページ側から見ると、ライブオーディオ処理を実行していることになります。
私の場合は、それがFirefoxまたはWindowsがBluetoothオーディオパスをアクティブに保つのに十分であり、マルチポイントヘッドフォンが電話にクリーンに切り替わるのを妨げたようです。
編集 - この問題に関するFirefoxのバグチケットが開かれているようです: https://bugzilla.mozilla.org/show_bug.cgi?id=1863193#c9
これはフィンガープリンティングのように見える
WebAudioテストは、これらのスクリプトにおける唯一の測定ではありません。バンドルの検査により、以下のクエリまたは測定を行うコードが見つかりました。
- キャンバスレンダリングと
toDataURL() - WebGLレンダラー情報、拡張機能、シェーダー精度
- オーディオオシレータとアナライザーの出力
- 画面とビューポートの寸法
- デバイスピクセル比
- ハードウェア並列数とデバイスメモリ
- インストールされているブラウザプラグイン
- サポートされているオーディオおよびビデオフォーマット
- WebRTCの動作
- ブラウザパフォーマンスタイミング
- マウス、タッチ、フォーカス、スクロールイベント
- デバイスのモーションとオリエンテーション
- ブラウザ自動化に一般的に関連付けられるプロパティ
さらに、結果のシリアライズと暗号化、Alibabaのテレメトリサービスへのリクエストの送信、fetch() または sendBeacon() を使用したデータ送信のコードもあります。
これはかなり包括的なブラウザおよびデバイスのフィンガープリントです。
オーディオフィンガープリンティングは、ブラウザのバージョン、オペレーティングシステム、オーディオライブラリ、およびハードウェアのわずかな違いが、同じ生成信号からわずかに異なる結果を生み出す可能性があるため機能します。それ自体でデバイスを一意に識別するのに十分ではないかもしれませんが、キャンバス、WebGL、ハードウェア、タイミング、およびインタラクションデータと組み合わせると、はるかに有用になります。
編集 - Firefoxの開発者であるtomrittervgが、WebAudioでフィンガープリントされているものについてさらに詳しく調査しています: https://ritter.vg/blog-webaudio_alibaba.html
AliExpressが結果のデータをサーバーに到達させた後、どのように利用しているかはわかりません。永続的なデバイス識別子として使用されている可能性がありますが、不正行為やボット検出スコアへの入力の1つである可能性もあります。
AliExpressがこれを望む理由
AliExpressは、通常の買い物客と自動化されたまたは疑わしいクライアントを区別するだけでなく、ユーザーの閲覧習慣を追跡するための多くの理由を持っています。このサイトは、アカウントの乗っ取り、偽のアカウント、スクレイピング、自動購入、支払い詐欺、レビュー操作、クーポンや新規顧客プロモーションの悪用などに対処する必要があります。また、ほとんどの大企業と同様に、ユーザー行動の大規模なデータセットを利用して、製品やサービスをより良くマーケティングしています。
Cookieは、クリア、コピー、または置き換えられる可能性があるため、この目的には特に信頼性が高くありません。多くの独立したブラウザ測定から作成されたフィンガープリントは、一貫して操作するのが困難です。
インタラクションデータは、ブラウザが人間によって制御されているか自動化によって制御されているかを判断するのに役立ちます。AliExpressの観点からは、これにより不正行為が減少し、信頼できる顧客が数ページごとにCAPTCHAを表示されることなく通過できるようになります。AliExpressがAI生成CAPTCHAを躊躇しないということは言うまでもありません。
個人的には、ショッピングホームページが私のグラフィックス、オーディオ、WebRTC、ハードウェア、モーションAPIなどをサイレントに実行して私の行動を追跡することを望んでいません。特に、私の音楽をブロックするという迷惑な効果がある場合。 おそらく、AliExpressが私の音楽をブロックしていなければ、私はサイトが何をしているのかを調べることはなかったでしょう。
uBlock Originでのブロック
特定された2つのスクリプトファミリーをブロックしてテストしました。両方のリクエストをブロックすると、AliExpressのホームページは引き続きレンダリングされ、コントロールキャプチャ中に AudioContext オブジェクトやデスティネーション接続は表示されませんでした。
Firefoxでは、Raymond Hillによる公式のuBlock Origin拡張機能を使用しています。スクリプトをブロックするには、uBlockダッシュボードを開き、[My filters] を選択し、以下を追加します。
! AliExpress AWSC fingerprinting scripts
||assets.aliexpress-media.com/g/AWSC/uab/*/collina.js$script,domain=aliexpress.com
||assets.aliexpress-media.com/g/AWSC/fireyejs/*/fireyejs.js$script,domain=aliexpress.com
[Apply changes] をクリックし、既存のAliExpressタブをすべて閉じ、サイトを再度開きます。ブロックされたスクリプトは、既に作成されたオーディオコンテキストをシャットダウンしないため、既存のタブを閉じる必要があります。
これらのルールは意図的に狭く設定されています。これらは、観察された2つのスクリプトファミリーのみを、AliExpressによって要求された場合にのみブロックします。これが将来機能しなくなるとしても驚きません。その時はその時です。
これらのスクリプトは不正防止システムに関連しているように見えるため、ブロックすると、追加のCAPTCHAやログインまたはチェックアウト時の問題が発生する可能性があります。今のところ、ホームページと通常の製品閲覧は引き続き機能しますが、AliExpressが正当なログインまたは支払いを拒否した場合は、一時的にルールを無効にすることをお勧めします。
なぜ私がそれをブロックするのか
不正防止のユースケースは理解できますが、この実装には現実世界の問題があります。
デリケートな操作を実行する前に、一般的なショッピングホームページで実行されます。広範なデバイスおよび行動測定を収集し、その実装は検査が困難になるように意図されており、ページがライブオーディオ処理グラフを開始したことを示す目に見える兆候はありません。
また、非常に現実的なハードウェアへの影響も生じました。サイレントなフィンガープリンティングテストは、Bluetoothマルチポイントスイッチングに干渉することができましたが、ブラウザのミュートコントロールは何も効果がありませんでした!
隠された分析またはセキュリティ機能が、外部ハードウェアの動作方法を変更するほど強力にオーディオパスを所有できる場合、それをブロックすることは合理的なトレードオフのように思えます。
また、AliExpressがフィンガープリントをどれくらいの期間保存しているか、または他のAlibabaプロパティ全体で使用されているかどうかも証明できません。クライアントコードは、広範なフィンガープリントのような測定が収集および送信されることを証明していますが、サーバー側の保持とIDのリンクはブラウザからは見えません。インターネット上の誰かがあなたの最善の利益を心に留めていると本当に信頼できますか?
TL;DR
AliExpressのホームページは、高度に難読化されたAlibabaセキュリティスクリプトから2つの実行中のWebAudioグラフをサイレントに作成します。グラフは、より大きなブラウザフィンガープリントの一部として波形を生成および分析し、次にゼロゲインノードを介してシステムオーディオデスティネーションに接続し、ユーザーが何も聞けないようにします。
私のセットアップでは、これはPCのBluetoothオーディオパスをアクティブに保ち、マルチポイントヘッドフォンが電話に切り替わるのを防ぐようです。タブをミュートしても、ミュートできる従来のメディア要素がないため、問題は解決しません。
上記の2つのuBlock Originルールで collina.js および fireyejs.js をブロックすると、隠されたオーディオコンテキストの作成が防止され、AliExpressを閲覧中に音楽を中断されることなく楽しく聴くことができます。
編集 - Hacker Newsで素晴らしい議論がありましたので、チェックする価値があります: https://news.ycombinator.com/item?id=49372583