
Apache Spark 4.2.0 - 高 - リモート - ファイル読み取り - History zip が仕込まれたシンボリックリンクを追跡
abraxaslabs.tech · github.com/abraxas · @abraxas_null · [email protected] · spark-history-zip-symlink
解説記事: https://abraxaslabs.tech/research/spark-history-zip-symlink
クラス: ファイル読み取り 到達範囲: リモート
Apache Spark 4.2.0 (32f72996) - Apache Software Foundation
CVE-2025-54920 により History Server の Jackson はロックダウンされ、sparkEventFromJson は SparkListenerEvent のサブクラスのみを構築するようになった。しかし、ローリング zipEventLogFiles は依然としてすべての listStatus 子要素を FileSystem.open 経由でダンプする。LocalFileSystem は POSIX シンボリックリンクを辿る。eventlog_v2_* に仕込まれた子要素は、認証不要の GET /api/v1/applications/{id}/logs によって zip に詰め込まれる。zip メンバーの本体は SHS-UID のターゲットである。エントリ名はシンボリックリンクのベース名となる。
これは Jackson RCE の再申請ではない。Jackson は閉じられたままである。これはホスト RCE でもない。機密性と可用性への影響はない。
| ID | CVE 未割当 |
| クラス | ファイル読み取り (CVE-2025-54920 の被害モデルに残されたローリング zip の残骸) |
| 到達範囲 | リモート (History ログディレクトリへの書き込み権限と、zip の認証不要 GET) |
| CWE | CWE-59, CWE-22 |
| CVSS | High: 7.5 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:U/C:H/I:N/A:N |
| 製品 | Apache Spark |
| 影響を受けるバージョン | 4.2.0 タグ v4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) |
| 認証 | PR:L = spark.history.fs.logDirectory への書き込み (54920 と同じ被害者)。History UI の ACL はデフォルトで無効。 |
| ライセンス | GNU Affero GPL v3.0 |
| ラボ | 127.0.0.1:18980 のみ |
spark.history.fs.logDirectory (デフォルトは file:/tmp/spark-events) に書き込める者は、History Server が zip 化するローリングディレクトリを仕込むことができる。ローリングライターはデフォルトで有効である。History UI の ACL はデフォルトで無効である。SHS プロセスの UID が混乱した代理 (confused deputy) となる。
| 権限 | 手法 / シンク | ラボで実証済みか推測か |
|---|---|---|
| 機密性: SHS の UID が開けるホストファイルの読み取り | 有効な appstatus_* と events_* JSON(SparkListenerLogStart / SparkListenerApplicationStart)に加え、ログディレクトリ外を指すシンボリックリンクの子要素を持つ eventlog_v2_<id>/ を設置する。スキャンを待つ。未認証の GET /api/v1/applications/{id}/logs(OneApplicationResource.getEventLogs -> FsHistoryProvider.writeEventLogs -> RollingEventLogFilesFileReader.zipEventLogFiles -> FileSystem.open) | ラボで実証済み。zip メンバー eventlog_v2_app-2026-0001/planted-secret の本体は SPARK-HISTORY-ZIP-SYMLINK-WITNESS。events メンバーには証拠がない。エントリ名はシンボリックリンクのベース名のままで、ターゲットパスではない。 |
機密性: 攻撃者が open できない(660)別テナントのイベントログ | 同じ zip、シンボリックリンクのターゲットは別アプリのログ | 推測。同じ FileSystem.open。未検証。 |
機密性: keytab、spark-env.sh、SHS が読める場合の /etc/passwd | 同じ zip | 推測。オラクルは専用の /secret/host-secret であり、これらのファイルではない。 |
| SHS またはホストファイルの完全性 | zip は HTTP ボディに読み込まれる | クローズ。ラボで証拠なし。 |
| SHS またはホストファイルの可用性 | zip はターゲットを削除も切り詰めもしない | クローズ。ラボで証拠なし。 |
| ホスト RCE / Jackson ガジェット構築 | JsonProtocol.sparkEventFromJson | クローズ。SparkListenerEvent が必要。このラボでは無害な Event JSON のみを設置。 |
エントリ名内の ../ による zip slip | Path.getName() | クローズ。POSIX のファイル名に / は含められない。エントリは eventlog_v2_<id>/<basename>。 |
resolveLogPath のパス文字列エスケープ | new Path(logDir, attempt.logPath) | クローズ。Path オブジェクトは設定されたログディレクトリ配下に留まる。エスケープは inode によるもの。 |
| コンパクションの書き換え / クリーナーによるターゲットの削除 | spark.history.fs.eventLog.rolling.maxFilesToRetain のデフォルトは Integer.MAX_VALUE、クリーナーのデフォルトはオフ | クローズ。シンボリックリンクに対するローカルの fs.delete はリンクを unlink するのであり、ターゲットではない。 |
| 未認証のジョブ投入 / ML モデルの読み込み | SECURITY.md FAQ / docs/ml-security.md | クローズ。設計上、この残存問題ではない。 |
master や 4.3 RC ではなく、apache/spark v4.2.0(32f7299601108917fb01920a54e084595b7b3bf8)に固定した。28 回の調査。Jackson History RCE はこの版ではクローズされている(JsonProtocol.scala:965-972)。それでも History Server は攻撃者が書き込めるログディレクトリを指しており、これは CVE-2025-54920 と同じ被害者モデルである。
zipEventLogFiles はイベントファイルだけでなく、すべての files を zip 化する:
override def zipEventLogFiles(zipStream: ZipOutputStream): Unit = {
val dirEntryName = rootPath.getName + "/"
zipStream.putNextEntry(new ZipEntry(dirEntryName))
files.foreach { file =>
addFileAsZipEntry(zipStream, file.getPath, dirEntryName + file.getPath.getName)
}
}
addFileAsZipEntry は fileSystem.open の後に transferTo を実行します。LocalFileSystem は POSIX シンボリックリンクを辿ります。getLogDirInfo は「シンボリックリンクを適切に処理する」とコメントした上で、表示名のために未解決の Path の親をたどります。
すでに記録されている誤った道筋:SPARK-52381 を History の話の全体として扱うこと;証拠を events_* に仕込むこと(ラボはそれを失敗させる);zip エントリがターゲットパスを保持することを期待すること;resolveLogPath のプレフィックス結合をエスケープとみなすこと;このピンで HiveConnection Event クラスを試すこと。
python3 spark-history-zip-symlink-Abraxas-Labs.py
または
cd lab
./run.sh
EventLogFileReaders.scala のローリング zip ダンプのガジェットであり、完全な History Server でも公式の spark:4.2.0 イメージでもありません。Jackson を介して Event JSON をパースすることはありません。ループバック 127.0.0.1:18980。Compose プロジェクト spark-history-zip-symlink。ローリングディレクトリには有効な appstatus_* + events_*(witness なし)に加えて、planted-secret -> /secret/host-secret が含まれています。
SUCCESS SPARK-HISTORY-ZIP-SYMLINK SPARK-HISTORY-ZIP-SYMLINK-WITNESS
events_* / appstatus_* の子要素のみをパックし、すべての listStatus 名をパックしないこと。no-follow(O_NOFOLLOW / Hadoop の no-symlink オプション)で開き、realpath が spark.history.fs.logDirectory の外にある子要素を拒否すること。表示名のヘルパーは realpath チェックではない。
32f7299601108917fb01920a54e084595b7b3bf8)EventLogFileReaders.scala (addFileAsZipEntry ~48-56, zipEventLogFiles ~267-272)FsHistoryProvider.scala (writeEventLogs ~831-856, resolveLogPath ~866-896)OneApplicationResource.scala (GET .../logs ~128-165)JsonProtocol.scala (sparkEventFromJson ~965-972, Jackson ロック)GNU Affero GPL v3.0。LICENSE を参照。ループバックラボ専用。保証なし。