Apache Spark 4.2.0 - Alto - Remoto - Scrittura di file - Connect archivia hash-fragment dest
abraxaslabs.tech · github.com/abraxas · @abraxas_null · [email protected] · spark-connect-archive-fragment
Write-up: https://abraxaslabs.tech/research/spark-connect-archive-fragment
Classe: Scrittura di file Portata: Remota
Apache Spark 4.2.0 (32f72996) - Apache Software Foundation
I nomi AddArtifacts di Spark Connect nella forma archives/<file>#<fragment> vengono suddivisi sul carattere cancelletto / hash. I byte dello zip passano attraverso concatenatePaths. Il frammento no. SparkContext.addFile(..., isArchive=true) esegue poi new File(root, uri.getFragment), deleteRecursively(dest) e unpack sul driver. Gli executor costruiscono la stessa dest. SPARK-33530 documentava #name come nome di directory sotto SparkFiles. Un frammento ../<outside> è la dest.
Connect archives/<file>#../<path> estrae e applica deleteRecursively al di fuori della directory SparkFiles della sessione con l'UID di Spark.
| ID | nessuna CVE al momento |
| Classe | Scrittura di file |
| Portata | Remota (client Spark Connect; AddArtifacts con archive=True) |
| CWE | CWE-22 |
| CVSS | Alta: 8.1 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:U/C:N/I:H/A:H |
| Prodotto | Apache Spark |
| Affetto | 4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) dest del frammento hash di Connect archives/ |
| Auth | Client Connect. Connect predefinito non ha PSK (spark.connect.authenticate.token non impostato). PR:L se PSK / ACL di rete; PR:N su Connect aperto predefinito. |
| Licenza | GNU Affero GPL v3.0 |
| Lab | solo 127.0.0.1 |
Ho fissato il tag v4.2.0 peel 32f72996 (2026-07-11, v4.2.0-rc6). Il lab è un gadget Java della suddivisione hash di StagedArtifact fissata, ArtifactUtils.concatenatePaths, new File(root, fragment), deleteRecursively e estrazione zip contenuta nella dest. HTTP su loopback su 127.0.0.1:18930. PySpark ufficiale copia già un frammento URI nel nome dell'archivio.
Questo non è RCE. I membri dello zip che escono dalla dest vengono rifiutati (classe Hadoop FileUtil.unZip / HADOOP-13649). Ciò che resta è la dest stessa.
| Metodo | Sink | Privilegio |
|---|---|---|
Connessione AddArtifacts nome archives/<file>#../<outside> | SparkContext.addFile dest new File(root, uri.getFragment) poi Utils.unpack (SparkContext.scala:1891-1900) | Integrità (dimostrata in laboratorio): scrive i membri dell'archivio come UID Spark al di fuori degli SparkFiles di sessione. Dest di laboratorio canonica /lab/oracle/SPARK-CONNECT-ARCHIVE-FRAGMENT-WITNESS, uid 1000, dest-outside=yes. |
| Stessa dest, prima dell'unpack | Utils.deleteRecursively(dest) (SparkContext.scala:1899) | Disponibilità (dimostrata in laboratorio): canary di dest sparito. Lab deleteRecursively=yes; canary.txt sotto dest non è sopravvissuto. Il sibling /lab/oracle/canary-keep.txt è stato conservato. |
| Stessa primitiva su ogni executor che recupera l'archivio | Executor dest new File(root, sourceURI.getFragment) poi deleteRecursively + unpack (Executor.scala:1468-1477) | Integrità / disponibilità (inferita): stessa costruzione di dest sugli executor. Il laboratorio è il gadget lato driver. |
Nome dell'artefatto files/../../... o archives/../../... | ArtifactUtils.concatenatePaths (ArtifactUtils.scala:26-39) | Chiuso (dimostrato in laboratorio): INVALID_ARTIFACT_PATH. |
Frammento assoluto Unix /abs | new File(root, "/abs") | Chiuso su Unix (dimostrato in laboratorio): il parent non viene ignorato; dest si unisce sotto root. Dest di laboratorio /lab/root/lab/oracle/abs-..., outside=false, canary abs conservato. |
Aggiunta jars/ / classes/ nella propria sessione | URLClassLoader di sessione | Chiuso come residuo: il caricamento di JAR nella propria sessione è by design. Non è questa la scoperta. |
| Caricamento jar cross-session | Isolamento Connect spark.sql.artifact.isolation.enabled=true | Chiuso: le sessioni isolate leggono addedJars(sessionUUID). |
Dimostrato in laboratorio vs inferito: dest con frammento hash al di fuori degli SparkFiles, canary di dest cancellato, canary sibling conservato, concatenazione dei nomi files/ e archives/ rifiutata, frammento assoluto Unix che si unisce sotto root, uid 1000, unpack zip contenuto in dest: laboratorio. Recupero dello stesso dest da parte degli executor: inferito (stesso costruttore). Sovrascrittura di una classe caricata successivamente sul classpath del driver: catena inferita, non dimostrata, non gonfiata a RCE.
Richiede: un client Connect in grado di eseguire AddArtifacts con archive=True. Il PySpark ufficiale spark.addArtifact(..., archive=True) inserisce già un frammento URI non vuoto nel nome (python/pyspark/sql/connect/client/artifact.py:223-236). Connect predefinito non ha PSK.
| Superficie | Laboratorio |
|---|---|
Nome artefatto .. / assoluto tramite concatenatePaths | files-concat=rejected INVALID_ARTIFACT_PATH |
Nome archives/ con walk archives/../../... | stesso INVALID_ARTIFACT_PATH |
Unix new File(root, "/abs") | dest sotto root; canary oracle abs conservato |
| Zip-slip di un membro zip sotto un dest contenuto | il gadget rifiuta i membri che escono da dest (classe HADOOP-13649). Non è questo il residuo. |
Concatenazione del percorso files/ (senza split su hash) | il frammento non viene preso; il nome resta concatenatePaths |
| Isolamento jar cross-session | attivo per impostazione predefinita per Connect |
| SQL / Python non autenticato su Connect aperto | invio job by design (SECURITY.md FAQ). Non è questo il residuo. |
| Invio job / caricamento modello ML | by design |
StagedArtifact divide solo i nomi che iniziano con archives più il File.separator del server, e solo su #:
val splits = name.split("#")
if (splits.length == 2) {
(splits(0), Some(splits(1)))
}
splits(0) viene preparato tramite concatenatePaths. splits(1) viene mantenuto come fragment. ArtifactManager collega quel frammento all'URI del file-server della sessione e chiama SparkContext.addArchive. Dest è new File(root, uri.getFragment). SPARK-33530 verifica sc.addArchive(s"${jarFile.getAbsolutePath}#foo") come nome di directory sotto SparkFiles.
La prima passata di Hunt ha sostenuto che un frammento assoluto Unix ignora root (ignoramento del genitore in java.io.File per i figli assoluti). Su Unix, new File(root, "/abs") rimuove la barra iniziale e unisce sotto root. Il genitore viene ignorato solo su Windows. Il percorso High su questo pin è #../.
cd lab
./run.sh
Scopri gli strumenti più utilizzati dalla nostra community.
Nessun dato di popolarità ancora.