
Apache Spark 4.2.0 — высокий уровень — удалённо — чтение файла — History zip следует по подложенной символической ссылке
abraxaslabs.tech · github.com/abraxas · @abraxas_null · [email protected] · spark-history-zip-symlink
Разбор: https://abraxaslabs.tech/research/spark-history-zip-symlink
Класс: чтение файлов Доступ: удалённый
Apache Spark 4.2.0 (32f72996) — Apache Software Foundation
CVE-2025-54920 закрыл Jackson в History Server, так что sparkEventFromJson теперь создаёт только подклассы SparkListenerEvent. При этом механизм zipEventLogFiles по-прежнему выгружает каждого потомка из listStatus через FileSystem.open. LocalFileSystem следует по POSIX-симлинку. Подложенный потомок в eventlog_v2_* упаковывается в неаутентифицированный GET /api/v1/applications/{id}/logs. Тело элемента zip — это цель SHS-UID. Имя записи — basename симлинка.
Это не повторная заявка на Jackson RCE. Jackson остаётся закрытым. Это не RCE на хосте. Целостность и доступность не затронуты.
| ID | CVE пока нет |
| Класс | чтение файлов (остаток от модели жертвы CVE-2025-54920 в rolling zip) |
| Доступ | удалённый (запись в каталог логов History плюс неаутентифицированный GET zip) |
| CWE | CWE-59, CWE-22 |
| CVSS | High: 7.5 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:U/C:H/I:N/A:N |
| Продукт | Apache Spark |
| Затронуто | тег 4.2.0 v4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) |
| Аутентификация | PR:L = запись в spark.history.fs.logDirectory (та же жертва, что и в 54920). ACL History UI по умолчанию отключены. |
| Лицензия | GNU Affero GPL v3.0 |
| Лаборатория | только 127.0.0.1:18980 |
Тот, кто может писать в spark.history.fs.logDirectory (по умолчанию file:/tmp/spark-events), может подложить rolling-каталог, который History Server заархивирует в zip. Rolling-писатели по умолчанию включены. ACL History UI по умолчанию отключены. UID процесса SHS становится запутанным заместителем.
| Привилегия | Метод / точка сброса | Доказано в лаборатории или выведено |
|---|---|---|
| Конфиденциальность: чтение файла хоста, который может открыть UID SHS | Разместить eventlog_v2_<id>/ с валидными appstatus_* и events_* JSON (SparkListenerLogStart / SparkListenerApplicationStart), а также дочерний симлинк, цель которого находится вне каталога логов. Дождаться сканирования. Неаутентифицированный GET /api/v1/applications/{id}/logs (OneApplicationResource.getEventLogs -> FsHistoryProvider.writeEventLogs -> RollingEventLogFilesFileReader.zipEventLogFiles -> FileSystem.open) | Доказано в лаборатории. Тело члена zip eventlog_v2_app-2026-0001/planted-secret — SPARK-HISTORY-ZIP-SYMLINK-WITNESS. У члена events свидетеля нет. Имя записи остаётся базовым именем симлинка, а не путём цели. |
Конфиденциальность: журнал событий соседнего арендатора, который атакующий не может open (660) | Тот же zip, цель симлинка — журнал другого приложения | Выведено. Тот же FileSystem.open. Не проверялось. |
Конфиденциальность: keytab, spark-env.sh, /etc/passwd, если SHS может их прочитать | Тот же zip | Выведено. Оракулом служит специальный /secret/host-secret, а не эти файлы. |
| Целостность файлов SHS или хоста | zip читается в тело HTTP-ответа | Закрыто. В лаборатории не доказано. |
| Доступность файлов SHS или хоста | zip не удаляет и не усекает цель | Закрыто. В лаборатории не доказано. |
| RCE на хосте / конструирование Jackson-гаджета | JsonProtocol.sparkEventFromJson | Закрыто. Требуется SparkListenerEvent. В этой лаборатории размещается только безвредный Event JSON. |
Zip slip с ../ в имени записи | Path.getName() | Закрыто. Имя файла POSIX не может содержать /. Запись — eventlog_v2_<id>/<basename>. |
Выход за пределы пути в resolveLogPath | new Path(logDir, attempt.logPath) | Закрыто. Объект Path остаётся внутри настроенного каталога логов. Выход происходит через inode. |
| Перезапись при компакции / удаление цели очистителем | spark.history.fs.eventLog.rolling.maxFilesToRetain по умолчанию Integer.MAX_VALUE; очиститель по умолчанию выключен | Закрыто. Локальный fs.delete симлинка удаляет ссылку, а не цель. |
| Неаутентифицированная отправка заданий / загрузка ML-модели | SECURITY.md FAQ / docs/ml-security.md | Закрыто. По замыслу, это не данная недоделка. |
Я зафиксировал apache/spark v4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8), а не master или 4.3 RC. Двадцать восемь поисков. Jackson History RCE закрыт на этой ревизии (JsonProtocol.scala:965-972). History Server по-прежнему указывал на каталог логов, доступный для записи атакующему, что соответствует той же модели жертвы, что и CVE-2025-54920.
zipEventLogFiles архивирует все files, а не только файлы событий:
override def zipEventLogFiles(zipStream: ZipOutputStream): Unit = {
val dirEntryName = rootPath.getName + "/"
zipStream.putNextEntry(new ZipEntry(dirEntryName))
files.foreach { file =>
addFileAsZipEntry(zipStream, file.getPath, dirEntryName + file.getPath.getName)
}
}
addFileAsZipEntry — это fileSystem.open, затем transferTo. LocalFileSystem следует POSIX-симлинкам. В комментарии getLogDirInfo сказано "handles symbolic links properly", после чего для отображаемого имени выполняется обход неразрешённых родительских путей Path.
Уже зафиксированные неверные ходы: трактовка SPARK-52381 как всей истории History; размещение свидетеля в events_* (лаборатория это не проходит); ожидание, что zip-запись будет содержать целевой путь; трактовка префиксного соединения в resolveLogPath как выхода; попытка использовать класс события HiveConnection на этой версии.
python3 spark-history-zip-symlink-Abraxas-Labs.py
или
cd lab
./run.sh
Гаджет дампа скользящего zip-файла EventLogFileReaders.scala, а не полноценный History Server и не официальный образ spark:4.2.0. Он не разбирает Event JSON через Jackson. Loopback 127.0.0.1:18980. Проект Compose spark-history-zip-symlink. Каталог скользящих файлов содержит валидные appstatus_* + events_* (без witness) плюс planted-secret -> /secret/host-secret.
SUCCESS SPARK-HISTORY-ZIP-SYMLINK SPARK-HISTORY-ZIP-SYMLINK-WITNESS
Упаковывайте только дочерние элементы events_* / appstatus_*, а не все имена listStatus. Открывайте с запретом следования по ссылкам (O_NOFOLLOW / опции Hadoop без символических ссылок) и отклоняйте дочерний элемент, чей realpath находится вне spark.history.fs.logDirectory. Вспомогательная функция для отображаемого имени — это не проверка realpath.