Windowsを解き明かす:RADVをWin32に移植する
Cracking Windows Open: Porting RADV to Win32 (collabora.com)
要約
Collaboraは、LinuxでAMD GPUの主要なオープンソースVulkanドライバーとなっているRADVをWindowsに移植するプロジェクトを進めています。この取り組みは、Windows 10のWDDM2インターフェースの逆エンジニアリングに基づいており、オープンソースドライバーの利点(コードベースの共有、デバッグの容易さ、コミュニティ貢献)をWindowsにもたらすことを目指しています。現在、Counter-Strike 2などのゲームが動作するまでになりましたが、カーネルモードドライバーとの通信やプレゼンテーションの最適化など、まだ課題が残っています。
全文翻訳
RADVをWin32に移植する:Windowsを解析する
RADVは、AMD GPU向けのオープンソースMesa Vulkanドライバーです。長年にわたり、Linuxグラフィックススタックの礎となってきました。現在では、Linux上のAMDハードウェアにおける事実上のVulkanドライバーとなっています。AMDは、その代わりにPAL(Platform Abstraction Library)ベースの代替ドライバーを廃止し、Mesaを中心としたオープンソースへの取り組みを統合しました。
しかし、Windowsでは、AMDユーザーは依然としてプロプライエタリドライバーのみで対応しています。しかし、パニックになる必要はありません。解決策があります。RADVをWindowsに移植し、Linuxでその実力を証明した同じオープンソースVulkan実装をWindowsユーザーにもたらすのです。これは非常に可能性の低い提案であるため、光速よりも速く到達できるかもしれません(ネタバレ:実際にはもう少し遅くなります)。
Windows上のオープンソースVulkanドライバーは、多くの可能性を開きます。プラットフォーム間でコードベースを共有できること、デバッグや実験が容易になること、修正のターンアラウンドが速くなること、そしてコミュニティ(例:ゲーム開発者)がオペレーティングシステムに関係なく、全員に利益をもたらす問題の報告や改善への貢献ができるようになることです。
最初(ファースト)の三角形から...
この取り組みは、Faith Ekstrand氏が最初にWindows上でのRADV実行の実現可能性を探求し、XDC 2024でその結果を発表した際に築かれた基盤に直接基づいています。彼女の講演をぜひご覧いただくことを強くお勧めしますが、ここでは簡単な要約を示します。
彼女の講演の中心的なテーマは、Windows 10以降、WDDM2インターフェースが、それ以前のものよりもサードパーティ製ドライバーにとってずっと優れた基盤を提供しているということです。これは、ユーザーモードドライバー(UMD)がオペレーティングシステムおよびカーネルモードドライバー(KMD)とどのように相互作用するかについての明確なモデルを定義しています。
しかし、もちろん大きな落とし穴があります。多くのD3DKMT呼び出しは、プライベートドライバーデータを渡すことができます。これは、ドライバー次第で内容が完全に決まる、不透明でベンダー固有のブロブです。これは、UMDとKMDが密接に結合したままであり、このインターフェースが完全に文書化されていないことを意味します。
この問題を回避するために、Faith氏はwddm2-pdd-reというツールを作成し、いくつかのD3D12アプリケーションのWDDM2呼び出しとプライベートデータのコンテンツを記録しました。このアプローチを使用して、彼女はアダプター情報のクエリ、バッファの割り当て、キューの作成、コマンドの送信など、プライベートインターフェースを十分にリバースエンジニアリングし、RADVがプロプライエタリカーネルドライバーに作業を送信できるようにしました。そして最終的には、画面に回転する3Dモデルをその栄光のすべてで表示することさえできました。
...最初の(ファースト)ゲームへ
Faith氏の作業がこれを実行可能であることを確立した場所から、このプロジェクトは糸を引き継ぎました。目標は、それをより柔軟に(ハードコードされた値を減らすことで異なるハードウェアをサポート)、よりポータブルに(WSLから解放され、ネイティブWindowsサポート)、そしてはるかに安定させる(deqp-vkテストで2分後にクラッシュしなくなる)ことでした。
コマンドストリーム処理と同期を改善し、スパースバインディング、テッセレーションおよびタスクシェーダー、GPUプロパティの動的なクエリなどをサポートしました。まだ互換性はありません(成功率は劇的に増加しましたが)、しかし本当のハイライトは、RADVで最初のゲームを実行できるようになったことです:Counter-Strike 2です。 -vulkan引数でレンダラーを切り替えることで、誰でも試すことができます。
[画像: RADV上で実行されているCounterStrike 2]
...暗闇を抜けて
あらゆるポートおよび/またはリバースエンジニアリングプロジェクトと同様に、いくつかの課題がありました。
-
新世代は過敏すぎる:私たちはGen 11ハードウェア(RX 7900 XT)で実験していましたが、Faithは第10世代GPU(RX 7800 XT)を使用していました。これらの2世代間のアーキテクチャ変更により、しばらくの間Faithの結果を再現できませんでした。主な問題は、ハードコードされた色にサーフェスをクリアするよりも複雑なことをしようとすると、ハングしてしまうことでした。残念ながら、Windowsでこのようなハングをデバッグするツールがないため、プロプライエタリドライバーとの不一致を可能な限り減らすためにツールを改善することを余儀なくされました。リバースエンジニアリングユーティリティを、公式Vulkanドライバーで実行される任意のアプリケーションを分析できる完全なWDDM2ロギングレイヤーにアップグレードし、コマンドストリーム、レジスタ、およびシェーダーコードをダンプするサポートを追加しました。
-
コンパイラが協力的でない:Mesaは主にGCCおよびClangに対して開発されており、そのコードベースは、MSVCでコンパイルした場合に当てはまらない多くの仮定に依存しています。例えば、MSVCはenumの扱い方について他のコンパイラと合意していません。値を符号付きと解釈し、32ビット値に制限する可能性があり、これは非常に驚くべき動作につながる可能性があります。
-
不透明なブロブが好きだと聞きました:では、不透明なAPI呼び出しの中に不透明なデータを入れてみましょう -
D3DKMTEscapeです。WDDM2には、ベンダー固有のフックをそのメソッドを通じて行う可能性があります。その内容全体はベンダー次第です。定義された構造はなく、唯一の制限は、既存の「標準化された」呼び出しを複製しないことでした。幸いなことに、これらはマルチGPUレンダリングなどの高度な機能に焦点を当てているように見えるため、現時点では安全に無視できるようです。
...そしてその先へ
これを本番環境で利用可能にするための最大の未解決の問題は、プロプライエタリカーネルドライバーとのインターフェースです。独自のKMDを開発することは実際的な選択肢ではないため、AMDのものと通信する必要があります。現在、これを行うには、プライベートデータ構造のリバースエンジニアリングされた知識に依存していますが、これは本質的に脆弱です。さらに悪いことに、UMDとKMDは、互換性の保証がないペアとして一緒に配布されるため、これらの構造はドライバーバージョン間で予告なく変更される可能性があります。
RADVがWindows上で真に安定して保守可能になるためには、以下のいずれかが必要です。
- プロプライエタリカーネルモードドライバーへの安定した文書化されたインターフェース、または
- プライベートデータチャネルを介してKMDとの通信を仲介するシムライブラリ。これにより、基盤となるブロブが進化しても、安定した表面を構築できます。
プレゼンテーションにもかなりの作業が残っています。Jesse Natalie氏がWindowsのWSI(Dozenドライバーのコンテキストで)でいくつかの作業を行いましたが、RADVは現在、プレゼンテーションのために遅いCPUパスのみをサポートしています。DXGIスワップチェーンを使用してパフォーマンスを向上させるには、さらに作業が必要ですが、これにはD3D12から画像をインポートできる必要があります(さらに不透明なメタデータ、やった!)。ゼロコピーのスワップを実現するには、さらに多くの作業が必要になります。これはグラフィックスパイプラインの頂点です。最後のステップを達成するには、AMD、そしておそらくMicrosoftの直接的な関与も必要になるでしょう(画像共有に関連するいくつかの制限があるため)。オープンソースプロジェクト向けのこのようなQOL(Quality of Life)改善の前例があるため、希望はあります!
この作業が、Windows上でのオープンVulkanドライバーの価値を示し、全員がその安定した基盤に向けて取り組む意欲を高めることを願っています。興味のある方は、この作業は現在このブランチにあります。
また、ValveがWindowsへのオープンドライバー導入というこの段階の私たちの作業をスポンサーしてくれたことに感謝します。