HN 日本語サマリー

← 一覧へ戻る
プログラミング

依存関係はVCSから直接取得すべき

Dependencies should be fetched directly from VCS (arp242.net)

38 pointsby mrngm30 コメント

要約

Go言語の依存関係管理は、URLでVCSから直接コードを取得するため、セキュリティ面で優れていると著者は主張します。一方、RubyGemsのようなパッケージシステムは、パッケージを公開するステップがあり、ソースコードとの不一致や悪意のあるコードの混入リスクが高いと指摘しています。依存関係の監査の容易さについても比較し、VCSからの直接取得モデルを推奨しています。

全文翻訳

依存関係は直接VCSから取得すべき

私はこの1ヶ月、新しい職場でRubyを書いています。過去10年近くGoを書いてきた後なので、気分転換になって楽しいです。以前もRubyを書いていましたが、どちらが「優れている」とはっきり言えません。RubyはGoとほとんどすべての点で異なり、どちらもそれぞれの方法で物事を成し遂げるのに非常に効果的だと感じています。

Goが明らかに優れていると感じる側面の一つは、依存関係管理、特にそのセキュリティ面です。Goは悪意のある依存関係に対して魔法のように無敵というわけではありませんが、それに抵抗する力ははるかに強いです。これは主に、「パッケージを公開する」というステップがないためです。


Goでは、依存関係はURL、例えば github.com/user/pkg で識別されます。Goは使用されているVCS(この場合はgit)を特定し、go.mod ファイルで指定されたタグまたはコミットを取得します。go.mod ファイルは、依存関係の仕様と「ロックファイル」の両方の役割を果たします。これは正確なバージョンをリストアップしており、~>1.1 のような指定はありません。直接的および間接的な依存関係の両方を含み、完全な依存関係ツリーをリストアップします(go コマンドが go.mod に書き込みます)。

sum.golang.org 上の既知のハッシュと、すべてのファイルのハッシュが照合され、タグが置き換えられるのを防ぎます。また、プロキシを使用してリポジトリがLeft-padされるのを防ぎます。

Go Modulesにはセキュリティ機能を含む他の側面もありますが、この記事の目的のために省略します。関連する部分は「依存関係はURLで識別され、コードはVCSから直接取得され、直接的および間接的な依存関係の両方に対してこれを行います」ということです。

依存関係の監査と更新は簡単です。私は git log -p old..new (通常はフォージのWeb UI経由)を実行し、すべてのコミットを読み、go.mod ファイルを更新します。私は多くの依存関係を持っておらず、持っているものもあまり変更されません。通常はかなり速いです。ここでは注意深い詳細なレビューを行う必要はありません。疑わしいものを見るだけで十分です。グロビングライブラリでの exec.Command(..) や http.Post(..) のようなものは目立つでしょう。何かを隠すのは難しいです。

私はこれを長年、すべての依存関係に対して行ってきました。ソロ開発者としてです。簡単です。一部のプロジェクトははるかに大きな依存関係ツリーを持っていますが、これは時間のかかる作業になりますが、難しくも混乱するものでもありません。依然として簡単ですが、少し時間がかかるだけです。


Rubyでは事情が異なります。なぜなら、「パッケージを公開する」ステップがあるからです。.gem アーカイブを作成し、それを rubygems.org にアップロードします。そこには何でも入れることができます。.gem の内容がソースリポジトリに対応している保証はありません。それを監査するには、以下のようなことを行う必要があります。

curl -s https://rubygems.org/downloads/example-2.7.5.gem >old.gem
curl -s https://rubygems.org/downloads/example-2.8.2.gem >new.gem

mkdir old new
tar xf old.gem -C old
tar xf new.gem -C new

(cd old && tar xf data.tar.gz)
(cd new && tar xf data.tar.gz)

diff -urN old new

これは機能すると思いますが、簡単とは程遠いです。個々のコミットは失われ、一般的に監査がより困難になります。場合によっては差分が小さいため問題ありません。他の場合では差分が大きく、コミットにアクセスできないのは面倒です。また、自分が何を監査し、何を監査しなかったのかについて混乱する可能性も十分にあります。このような監査を行う人の数は、それが非常に面倒な作業であるため、非常に少ないと思います。

これはRubyに限ったことではありません。多くの(ほとんどの?)パッケージシステムはこうなっています。


私が目にした「サイドチャネル攻撃」のほとんどは、おそらく「パッケージ公開攻撃」と呼ぶ方がより正確でしょう。それらは「パッケージを公開する」ステップに何かを注入することに依存しています。それがRubyGemsであれ、npm、PyPI、.tar.gz FTPダウンロードであれ、あるいは他のものであれ、それは比較的小さな詳細です。実際のソースリポジトリが侵害されることはまれです。なぜなら、それはあまりにも見通しが良すぎるからです。効果を発揮するには、少なくとも少しはエクスプロイトを隠す必要があります。

最近のnpmの侵害はすべて、npmアカウントへのアクセス権を取得し、公開されたパッケージに何かを注入することに依存していました。xzはソースリポジトリにエクスプロイトコードを含んでいましたが、それは不活性で、バイナリテストファイルに隠されており、変更された.tar.gz リリースでのみアクティブ化されました。2018年には、event-stream が flatmap-stream への依存関係を追加しましたが、これは公開されたnpmパッケージ上の index.min.js に悪意のあるコードを含んでいました。

これは第二の問題を浮き彫りにします。つまり、「コンパイル済み」リソースを含むパッケージです。TypeScriptが生成するJavaScriptは完全に読めないわけではありませんが、元のTypeScriptよりも確かに読みにくく、監査しにくいです。ましてや、ミニファイされたファイルやバイナリブロブについては言うまでもありません。これはRubyではそれほど大きな問題ではありませんが、npmでははるかに大きな問題です。


先週、RubyGemsはクールダウンオプションを追加し、「最も重要なgemに対するAI支援の脆弱性スキャン」を行いました。短期的な措置としては悪いことではありませんが、より適切な解決策は、パッケージ公開モデル全体を再考することだと感じています。それは必要な透明性を欠いています。AIツールがそれを魔法のように修正してくれるわけではありません。

20年前に私がRubyGemsに似たものを作成したかもしれません。SourceForgeで.tar.gz ファイルを配布するのが、当時の一般的な方法でした。多くのプロジェクトは公開されているVCSリポジトリを持っていませんでしたし、持っていないプロジェクトもありました。一般的に、当時はそれはかなりうまく機能していました。私は誰かを責めているわけではありません。私も同じことをしたでしょう。RubyGemsは単に異なる世界のために設計されています。

RubyGemsやnpmがGoのやり方をすべての点で完全にコピーする必要があるとは言っていませんし、これらすべてが完全に完璧だとも言っていません。しかし、私の知る限り、これはこれまでに見つけられた中で最良のものです。Go Modulesの他の側面(例えば最小バージョン選択)はそれほど重要ではありません。

これを完全に変更することが困難で、潜在的に混乱を招く可能性があることは理解しています。しかし、この終わりのない乗っ取られたパッケージのストリームに対処することもまた困難で混乱を招きます。ですから…

Bundlerの特定のケースでは、すでにいくらかのサポートがあります。以下のようにできます。

gem 'rails', git: 'https://github.com/rails/rails.git', tag: 'v8.1.2'

これにより、Rails gemはgitから取得されますが、依存関係は引き続き rubygems.org から取得されます。Bundlerをすべてgitで使用するように cajole する方法があるかもしれませんが、それは uphill battle であり、誤って rubygems.org を使用しやすいです。

これは単なる思考実験ですが、以下のようなものは既存のGemfileを壊すことなく、大いに役立つでしょう。

# rubygems.org からの取得を一切許可しない。
gem() の動作を変更し、git を使用するようにする。
must 'use-git'

gem 'github.com/rails/rails', 'v8.1.2'

# 間接的な依存関係("bundle install" などによって自動的に書き込まれ、更新される)
indirect do
    gem 'github.com/rails/actionview', 'v8.1.2'
    gem 'github.com/fxn/zeitwerk',     'v2.8.2'
    # ... など...
end

Gemfile.lock はハッシュ(go.sum に似ています)に使用できますが、それ以外はそれほど有用ではありません。

ここには解決すべき多くの詳細があり、それらをうまく解決するのが簡単だとは主張しませんが、合理的な道筋があるように思えます。どうでしょうか?


あるいは、まったく別の何かかもしれません。私にはわかりません。重要な点は次のとおりです。私は責任ある開発者として、依存関係を確実に監査したいのですが、RubyGems はそれを非常に困難にしています。 他のパッケージマネージャーも同様ですが(私はそれらには関心がありません)。