HN 日本語サマリー

← 一覧へ戻る
プログラミング

Codexのロギングバグにより、ローカルSSDにTB単位のデータが書き込まれる可能性

Codex logging bug may write TBs to local SSDs (github.com)

37 pointsby vantareed17 コメント

要約

OpenAIのCodexが、ローカルのSQLiteフィードバックログデータベースに大量のデータを書き込むバグが報告されました。これにより、年間約640TBものデータが書き込まれる可能性があり、一般的な消費者向けSSDの保証された書き込み耐久性を1年未満で使い果たす恐れがあります。この問題は、ログレベルのデフォルト設定がTRACEになっていることや、不要な依存関係ログ、OpenTelemetryミラーイベント、生ペイロードの永続化が原因であると考えられており、ログ設定の見直しやグローバルなDBサイズ/書き込み上限の追加が解決策として提案されています。

全文翻訳

Codex SQLiteフィードバックログは年間約640TBを書き込み、SSDの寿命を急速に消費する可能性 #28224

更新日: 2026年6月23日: 以下の3つのPRがマージされ、ログの85%(私のCodexからのフィードバック)を回避できる見込みです。そのため、このイシューをクローズします。

修正してくれた @jif-oai に感謝します。

@beskay による簡単な回避策 #28224 (comment)
  1. Codexを終了します。
  2. 以下のコマンドを実行します。
sqlite3 ~/.codex/logs_2.sqlite "CREATE TRIGGER IF NOT EXISTS
  block_log_inserts BEFORE INSERT ON logs BEGIN SELECT RAISE(IGNORE);
  END;"

以下は元のイシューです

イシュー

CodexはローカルのSQLiteフィードバックログデータベースに継続的に大量のデータを書き込んでいます。

  • ~/.codex/logs_2.sqlite
  • ~/.codex/logs_2.sqlite-wal
  • ~/.codex/logs_2.sqlite-shm

私のマシンでは、約21日間の稼働後に、メインSSDに約37TBの書き込みがありました。プロセス/ファイルレベルのチェックによると、Codex SQLiteログが主な継続的な書き込み元です。

これは年間約640TBに相当します。1TBのSSDでは、年間約640回のフルドライブ書き込みに相当します。一部のコンシューマー向けSSDは、約600TBW(テラバイト書き込み)の定格ですが、これは1年足らずでドライブの定格書き込み耐限度をほぼ使い果たす可能性があります。

証拠1

後のスナップショットでは、書き込み増幅(write amplification)がより容易に確認できます。

メトリック値
現在の logs_2.sqlite ファイルサイズ1.2 GiB
現在保持されている行数506,149
割り当てられた総行ID5,543,677,486

したがって、データベースは現在約0.5M行しか保持していませんが、SQLiteのAUTOINCREMENTカウンターは既に5.5B IDを超えています。

これは、保持されている行数と履歴として挿入された行IDの間に約10,000倍の差があることを意味します。現在の約1.2GiBのデータベースサイズを大まかなベースラインとして使用しても、WAL、インデックス、プルーニング、チェックポイント、ページ書き換え、およびファイルシステム/デバイスレベルの書き込み増幅を考慮する前に、10TB以上の履歴ログの書き換えが発生していることを示唆しています。

証拠2

logs_2.sqlite で現在保持されている行数:

メトリック値
保持されている行数681,774
推定される保持ログコンテンツ1,035.6 MiB

レベル分布:

レベル推定MiBバイトの割合
TRACE732.570.7%
INFO266.525.7%
DEBUG30.63.0%
WARN5.90.6%

最大のターゲット+レベルのペア:

ターゲットレベル推定MiB
codex_api::endpoint::responses_websocketTRACE527.4
codex_otel.log_onlyINFO141.2
codex_otel.trace_safeINFO121.2
logTRACE97.4
codex_client::transportTRACE60.1
codex_core::stream_events_utilsDEBUG27.5
codex_api::sse::responsesTRACE19.1

上位のソースは、ほとんどがグローバルなTRACE ログ、ミラーリングされたテレメトリログ、および生のWebSocket/SSEペイロードのロギングです。TRACEだけで、保持されているログバイトの約70.7%を占めています。codex_otel.log_only + codex_otel.trace_safe がさらに25.3%を追加します。これらのカテゴリをフィルタリングすることで、フィードバックログを完全に無効にすることなく、このサンプルで保持されているログバイトの約96%を削除できるはずです。

最も頻繁なTRACE ソースからのサニタイズされた例:target=log

これらは高頻度の保持サンプルです。生のWebSocket/SSEペイロード本体は、プライベートな会話内容を含む可能性があるため、意図的に含んでいません。

128,764x TRACE log: inotify event: ... mask: OPEN, name: Some("ld.so.cache")
 37,982x TRACE log: inotify event: ... mask: OPEN, name: Some("locale.alias")
 23,843x TRACE log: inotify event: ... mask: OPEN, name: Some("passwd")
  3,639x TRACE log: <tokio-tungstenite checkout>/src/compat.rs:131 AllowStd.with_context
  3,505x TRACE log: <tokio-tungstenite checkout>/src/lib.rs:245 WebSocketStream.with_context
  3,362x TRACE log: <tokio-tungstenite checkout>/src/compat.rs:154 Read.read
  3,356x TRACE log: <tokio-tungstenite checkout>/src/compat.rs:157 Read.with_context read -> poll_read
  3,230x TRACE log: <tokio-tungstenite checkout>/src/lib.rs:294 Stream.poll_next
  3,227x TRACE log: <tokio-tungstenite checkout>/src/lib.rs:304 Stream.with_context poll_next -> read()
  3,213x TRACE log: inotify event: ... mask: OPEN, name: Some("nsswitch.conf")
  2,001x TRACE log: WouldBlock
  1,217x TRACE log: Masked: false
  1,169x TRACE log: Opcode: Data(Text)
  1,169x TRACE log: First: 11000001

頻繁な INFO ソースからのサニタイズされた例

支配的な INFO ソースは、ほとんどが繰り返し発生するOpenTelemetryミラーイベントです。IDは削除されています。

843x INFO codex_client::custom_ca:
  using system root certificates because no CA override environment variable was selected ...

334x INFO codex_otel.trace_safe:
  session_loop{thread_id=<redacted>}:submission_dispatch{otel.name="op.dispatch.user_input" submission.id=<redacted> codex.op="user_input"}:turn{otel.name="session_task.turn" thread.id=<redacted> ...}

333x INFO codex_otel.log_only:
  session_loop{thread_id=<redacted>}:submission_dispatch{otel.name="op.dispatch.user_input" submission.id=<redacted> codex.op="user_input"}:turn{otel.name="session_task.turn" thread.id=<redacted> ...}

332x INFO codex_otel.log_only:
  session_loop{thread_id=<redacted>}:submission_dispatch{otel.name="op.dispatch.user_input_with_turn_context" submission.id=<redacted> codex.op="user_input_with_turn_context"}:turn{otel.name="session_task.turn" thread.id=<redacted> ...}

332x INFO codex_otel.trace_safe:
  session_loop{thread_id=<redacted>}:submission_dispatch{otel.name="op.dispatch.user_input_with_turn_context" submission.id=<redacted> codex.op="user_input_with_turn_context"}:turn{otel.name="session_task.turn" thread.id=<redacted> ...}

書き込み増幅

保持されているDBサイズは、実際の書き込み量を隠しています。15秒間のサンプルでは:

メトリック前後
保持されている行数681,774681,774
最大行ID5,003,347,0155,003,383,226

約36,211行が15秒間に挿入されましたが、保持されている行数はフラットなままでした。これは、継続的な挿入と削除(insert-and-prune)による書き込み増幅を示唆しています。行は挿入され、インデックスが作成され、WALに書き込まれ、その後削除されます。

考えられる原因

SQLiteフィードバックログシンクは、グローバルなTRACE デフォルトでインストールされています。

Targets::new().with_default(Level::TRACE)

これにより、依存関係/内部ログや大きな生のプロトコルペイロードを含むすべてのターゲットがデフォルトでTRACE レベルで永続化されます。

提案される修正

フィードバックログは有効にしたままにしつつ、デフォルトで永続化されるものを絞り込みます。

  1. SQLiteフィードバックログシンクにグローバルなTRACE を使用しない。
  2. 低価値の依存関係ノイズ、特に target=log、hyper_util、tokio-tungstenite の内部ログ、inotify スパム、および低レベルのOpenTelemetry SDKログの閾値を下げるか、削除する。
  3. デフォルトで生のWebSocket/SSEペイロード全体を永続化することを避ける。代わりに、イベントの種類、期間、成功/エラー、トークン使用量、ペイロードバイト長などの概要を保存する。
  4. 明示的にフィードバックデバッグに有用でない限り、ミラーリングされた codex_otel.log_only / codex_otel.trace_safe イベントの永続化を避ける。
  5. グローバルなログDBサイズ/書き込みキャップを追加する。多くのスレッド/プロセスが存在する場合、スレッドごとのキャップだけでは不十分です。

sqlite_logs_enabled = false のようなオプションの脱出ハッチ(escape hatch)は依然として有用ですが、主な修正はデフォルトのフィルタリングを改善することです。

関連するイシューとディスカッション