
Apache Spark 4.2.0 - उच्च - रिमोट - फ़ाइल पढ़ना - History zip रखे गए symlink का अनुसरण करता है
abraxaslabs.tech · github.com/abraxas · @abraxas_null · [email protected] · spark-history-zip-symlink
राइट-अप: https://abraxaslabs.tech/research/spark-history-zip-symlink
वर्ग: फ़ाइल पठन पहुँच: रिमोट
Apache Spark 4.2.0 (32f72996) - Apache Software Foundation
CVE-2025-54920 ने History Server Jackson को लॉक कर दिया ताकि sparkEventFromJson केवल SparkListenerEvent उपवर्गों का निर्माण करे। रोलिंग zipEventLogFiles अभी भी FileSystem.open के माध्यम से प्रत्येक listStatus चाइल्ड को डंप करता है। LocalFileSystem एक POSIX सिमलिंक का अनुसरण करता है। eventlog_v2_* में रखा गया एक चाइल्ड अन-ऑथ GET /api/v1/applications/{id}/logs में पैक किया जाता है। ज़िप सदस्य का बॉडी SHS-UID लक्ष्य होता है। एंट्री का नाम सिमलिंक का बेसनेम होता है।
यह Jackson RCE का पुनः-फाइलिंग नहीं है। Jackson बंद ही रहता है। यह होस्ट RCE नहीं है। अखंडता और उपलब्धता पर कोई प्रभाव नहीं।
| ID | अभी तक कोई CVE नहीं |
| वर्ग | फ़ाइल पठन (CVE-2025-54920 विक्टिम मॉडल का रोलिंग ज़िप अवशेष) |
| पहुँच | रिमोट (History लॉग डिर की लेखकता के साथ-साथ ज़िप का अन-ऑथ GET) |
| CWE | CWE-59, CWE-22 |
| CVSS | उच्च: 7.5 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:U/C:H/I:N/A:N |
| उत्पाद | Apache Spark |
| प्रभावित | 4.2.0 टैग v4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) |
| प्रमाणीकरण | PR:L = spark.history.fs.logDirectory में लिखने की क्षमता (54920 के समान विक्टिम)। History UI ACL डिफ़ॉल्ट रूप से बंद। |
| लाइसेंस | GNU Affero GPL v3.0 |
| लैब | केवल 127.0.0.1:18980 |
जो कोई भी spark.history.fs.logDirectory (डिफ़ॉल्ट file:/tmp/spark-events) में लिख सकता है, वह एक रोलिंग डिर रख सकता है जिसे History Server ज़िप करेगा। रोलिंग राइटर डिफ़ॉल्ट रूप से चालू रहते हैं। History UI ACL डिफ़ॉल्ट रूप से बंद रहते हैं। SHS प्रक्रिया का UID ही भ्रमित डिप्टी (confused deputy) है।
| विशेषाधिकार | विधि / सिंक | प्रयोगशाला-प्रमाणित या अनुमानित |
|---|---|---|
| गोपनीयता: SHS UID द्वारा खोली जा सकने वाली होस्ट फ़ाइल पढ़ना | eventlog_v2_<id>/ को वैध appstatus_* तथा events_* JSON (SparkListenerLogStart / SparkListenerApplicationStart) के साथ रखें, साथ ही एक सिमलिंक चाइल्ड जिसका लक्ष्य लॉग डिर से बाहर हो। स्कैन की प्रतीक्षा करें। अन-ऑथ GET /api/v1/applications/{id}/logs (OneApplicationResource.getEventLogs -> FsHistoryProvider.writeEventLogs -> RollingEventLogFilesFileReader.zipEventLogFiles -> FileSystem.open) | प्रयोगशाला-प्रमाणित। ज़िप सदस्य eventlog_v2_app-2026-0001/planted-secret का बॉडी SPARK-HISTORY-ZIP-SYMLINK-WITNESS है। इवेंट्स सदस्य में कोई साक्षी नहीं है। एंट्री नाम सिमलिंक बेसनेम ही रहता है, लक्ष्य पथ नहीं। |
गोपनीयता: सहोदर टेनेंट इवेंट लॉग जिसे हमलावर open नहीं कर सकता (660) | वही ज़िप, सिमलिंक लक्ष्य किसी अन्य ऐप का लॉग है | अनुमानित। वही FileSystem.open। परीक्षण नहीं किया गया। |
गोपनीयता: keytab, spark-env.sh, /etc/passwd यदि SHS उन्हें पढ़ सकता है | वही ज़िप | अनुमानित। ओरेकल एक समर्पित /secret/host-secret है, वे फ़ाइलें नहीं। |
| SHS या होस्ट फ़ाइलों की अखंडता | ज़िप को HTTP बॉडी में पढ़ा जाता है | बंद। प्रयोगशाला-प्रमाणित कोई नहीं। |
| SHS या होस्ट फ़ाइलों की उपलब्धता | ज़िप लक्ष्य को हटाता या छोटा नहीं करता | बंद। प्रयोगशाला-प्रमाणित कोई नहीं। |
| होस्ट RCE / Jackson गैजेट निर्माण | JsonProtocol.sparkEventFromJson | बंद। SparkListenerEvent आवश्यक। यह प्रयोगशाला केवल सौम्य Event JSON रखती है। |
एंट्री नाम में ../ का ज़िप स्लिप | Path.getName() | बंद। POSIX फ़ाइलनाम में / नहीं हो सकता। एंट्री eventlog_v2_<id>/<basename> है। |
resolveLogPath का पथ-स्ट्रिंग एस्केप | new Path(logDir, attempt.logPath) | बंद। Path ऑब्जेक्ट कॉन्फ़िगर किए गए लॉग डिर के अंतर्गत ही रहता है। एस्केप inode है। |
| लक्ष्य का कम्पैक्शन रीराइट / क्लीनर डिलीट | spark.history.fs.eventLog.rolling.maxFilesToRetain डिफ़ॉल्ट Integer.MAX_VALUE; क्लीनर डिफ़ॉल्ट बंद | बंद। सिमलिंक का स्थानीय fs.delete लिंक को अनलिंक करता है, लक्ष्य को नहीं। |
| अन-ऑथ जॉब सबमिट / ML मॉडल लोड | SECURITY.md FAQ / docs/ml-security.md | बंद। डिज़ाइन के अनुसार, यह अवशेष नहीं। |
मैंने master या 4.3 RC के बजाय apache/spark v4.2.0 (32f7299601108917fb01920a54e084595b7b3bf8) को पिन किया। अट्ठाईस खोजें। इस पील पर Jackson History RCE बंद है (JsonProtocol.scala:965-972)। History Server अभी भी हमलावर-लेखन-योग्य लॉग डिर की ओर इंगित था, जो CVE-2025-54920 के समान ही विक्टिम मॉडल है।
zipEventLogFiles सभी files को ज़िप करता है, केवल इवेंट फ़ाइलों को नहीं:
override def zipEventLogFiles(zipStream: ZipOutputStream): Unit = {
val dirEntryName = rootPath.getName + "/"
zipStream.putNextEntry(new ZipEntry(dirEntryName))
files.foreach { file =>
addFileAsZipEntry(zipStream, file.getPath, dirEntryName + file.getPath.getName)
}
}
addFileAsZipEntry fileSystem.open फिर transferTo है। LocalFileSystem POSIX symlinks का पालन करता है। getLogDirInfo टिप्पणी करता है "handles symbolic links properly" और फिर display name के लिए unresolved Path parents को walk करता है।
पहले से दर्ज गलत मोड़: SPARK-52381 को पूरी History कहानी मानना; events_* में witness लगाना (lab उसमें विफल होता है); zip entry से target path ले जाने की अपेक्षा करना; resolveLogPath prefix-join को escape मानना; इस pin पर HiveConnection Event class आज़माना।
python3 spark-history-zip-symlink-Abraxas-Labs.py
या
cd lab
./run.sh
EventLogFileReaders.scala का रोलिंग ज़िप डंप गैजेट, पूर्ण History Server नहीं और आधिकारिक spark:4.2.0 इमेज भी नहीं। यह Jackson के माध्यम से Event JSON को पार्स नहीं करता। लूपबैक 127.0.0.1:18980। Compose प्रोजेक्ट spark-history-zip-symlink। रोलिंग डायरेक्टरी में वैध appstatus_* + events_* (बिना witness) के साथ-साथ planted-secret -> /secret/host-secret रखा गया है।
SUCCESS SPARK-HISTORY-ZIP-SYMLINK SPARK-HISTORY-ZIP-SYMLINK-WITNESS
केवल events_* / appstatus_* चाइल्ड्स को पैक करें, हर listStatus नाम को नहीं। no-follow (O_NOFOLLOW / Hadoop no-symlink विकल्प) के साथ खोलें और ऐसे चाइल्ड को अस्वीकार करें जिसका realpath spark.history.fs.logDirectory के बाहर हो। एक display-name हेल्पर realpath जाँच नहीं है।