Skip to content
KitploitKITPLOIT
工具漏洞利用博客
Log in
提交
工具漏洞利用博客
提交

黑客、渗透测试和网络安全工具,武装您的安全武器库!

Kitploit 是一个黑客、网络安全和渗透测试工具的目录。发现最新的项目更新,查找漏洞、分析系统、自动化测试并加强你的安全。

订阅源联系隐私© 2026 Kitploit

工具目录

分类

查看所有分类
Loading categories
spark-connect-copy-local — Apache Spark 4.2.0 - 高危 - 远程 - 文件写入 - Connect 会话 SET copyFromLocalToFs.allowDestLocal | Kitploit
工具/GitHubGitHub/abraxas/spark-connect-copy-local
漏洞分析漏洞利用Web应用程序漏洞利用配置审计安全虚拟化渗透测试云安全红队
GitHubabraxas/spark-connect-copy-local

spark-connect-copy-local

Apache Spark 4.2.0 - 高危 - 远程 - 文件写入 - Connect 会话 SET copyFromLocalToFs.allowDestLocal

查看仓库
1318天前尚未审核

最受欢迎

查看全部 →

发现我们社区最常用的工具。

探索所有工具

浏览我们的工具集合

查看所有工具 →
分享

Abraxas Labs - spark-connect-copy-local

abraxaslabs.tech  ·  github.com/abraxas  ·  @abraxas_null  ·  [email protected]  ·  spark-connect-copy-local

技术分析文章:https://abraxaslabs.tech/research/spark-connect-copy-local

spark-connect-copy-local

类别: 文件写入(SPARK-58531 的遗留问题;仅在 4.3.0 上为静态配置) 可达性: 远程

Apache Spark 4.2.0(32f72996) - Apache Software Foundation

spark.sql.artifact.copyFromLocalToFs.allowDestLocal 在此版本上仍为 buildConf(可由会话设置)。SPARK-58531 在 4.3.0 中将其移至 StaticSQLConf。Connect 会话可以 SET 这个仅用于测试的本地目标开关,随后 copyFromLocalToFs / AddArtifacts 的 forward_to_fs/<abs> 会以 Spark UID 覆盖 driver 本地路径。

Connect 会话 SET 后 forward_to_fs 写入 driver 本地文件。目标必须是 LocalFileSystem。并非 RCE。

ID暂无 CVE(SPARK-58531 的遗留问题)
类别文件写入(SPARK-58531 的遗留问题;仅在 4.3.0 上为静态配置)
可达性远程(Spark Connect Config + AddArtifacts)
CWECWE-22、CWE-732
CVSS高危:8.1 CVSS:3.1/AV:N/AC:L/PR:L/UI:N/S:U/C:N/I:H/A:H
产品Apache Spark(ASF)
受影响版本Apache Spark 4.2.0(32f7299601108917fb01920a54e084595b7b3bf8)。4.3.0 为静态配置。
认证能够执行 ConfigRequest.SET 和 AddArtifacts 的 Connect 客户端。默认 Connect 无 PSK。
许可证GNU Affero GPL v3.0
实验环境仅 127.0.0.1:18920

攻击者能做什么

能够访问 gRPC 的 Spark Connect 客户端(默认绑定端口 15002,除非运维人员设置了 spark.connect.authenticate.token,否则无 PSK)可以关闭 driver 启动时设置的仅用于测试的开关,然后以 Spark UID 覆盖 driver 上选定的本地路径。

方法汇聚点权限
gRPC Config SET spark.sql.artifact.copyFromLocalToFs.allowDestLocal=true(或 SQL SET)SparkConnectConfigHandler.handleSet -> RuntimeConfig.set -> SQLConf.setConfString完整性(会话配置,实验已验证): 翻转每会话的本地目标开关。本身不写入文件。不影响其他会话。实验:SET 返回 HTTP 200,modifiable=True。
gRPC AddArtifacts 名称 forward_to_fs + 绝对目标路径,CRC 校验通过ArtifactManager.uploadArtifactToFs -> LocalFileSystem.copyFromLocalFile(delSrc=false, overwrite=true)完整性(文件覆盖,实验已验证): 以 Spark UID 写入/覆盖 artifactRootDirectory/<sessionUUID>/ 之外的 driver 本地路径。实验:目标 /oracle/SPARK-CONNECT-COPY-LOCAL-WITNESS,uid 185,内容 WITNESS。
同样的 AddArtifacts 指向 HDFS/S3/ABFS 目标文档化的 copyFromLocalToFs完整性(集群文件系统,设计如此): 不属于此遗留问题。非 LocalFileSystem 的目标从不检查该测试开关。

实验验证与推断: 会话 SET buildConf 键,随后以 uid 185 向 LocalFileSystem 目标写入 artifact 沙箱之外的路径,属于实验验证。以 Spark UID 覆盖进程可写的路径(driver 工作目录、全局可写的投放目录、运维人员稍后执行的已可执行脚本)属于推断。无 RIP 控制。不要将文件写入夸大为 RCE。

要求: Spark Connect 正在监听。客户端能够 SET 会话 SQL conf 并 AddArtifacts。目标必须是 Hadoop LocalFileSystem。默认 Connect 没有 PSK;如果运维设置了 token,则遗留路径仍然需要该共享 Bearer。这是对本地目标控制的绕过,而不是对 PSK 的绕过。

保持关闭的相邻攻击面

攻击面实验
不带 SET 的复制400 _LEGACY_ERROR_TEMP_3161,目标不存在
SET 旧的静态 spark.connect.copyFromLocalToFs.allowDestLocal400 CANNOT_MODIFY_STATIC_CONFIG
工件名 .. / 绝对暂存路径(ArtifactUtils.concatenatePaths)INVALID_ARTIFACT_PATH
非 forward_to_fs 工件保持在 artifactRootDirectory/<sessionUUID>/ 下
不带该标志的 HDFS/云目标有文档记录的 API,而非此遗留路径
开放 Connect 上的未认证 SQL / Python UDF / Scala UdfPacket厂商 FAQ 作业提交;DROP
SPARK-52122 ML DefaultParamsReader此固定版本上的 allowlist + safeMLClassLoader

无 shell。无堆转储。无 Connect PSK 跳过。目标仍必须是 LocalFileSystem。写入以 Spark UID 身份进行,而非 root。

我是如何发现的

uploadArtifactToFs 会拒绝 LocalFileSystem 目标,除非测试标志开启,并附有明确注释:否则用户会覆盖驱动程序上的任意文件:

if (fs.isInstanceOf[LocalFileSystem]) {
  val allowDestLocalConf =
    session.sessionState.conf.getConf(SQLConf.ARTIFACT_COPY_FROM_LOCAL_TO_FS_ALLOW_DEST_LOCAL)
      .getOrElse(
        session.conf.get("spark.connect.copyFromLocalToFs.allowDestLocal").contains("true"))
  if (!allowDestLocalConf) {
    throw new SparkUnsupportedOperationException("_LEGACY_ERROR_TEMP_3161")
  }
}
fs.copyFromLocalFile(false, true, new FSPath(localPath.toString), destFSPath)

3.5 的密钥是静态的,默认值为 false。4.0 的替代方案是可选的 buildConf:

val ARTIFACT_COPY_FROM_LOCAL_TO_FS_ALLOW_DEST_LOCAL =
  buildConf("spark.sql.artifact.copyFromLocalToFs.allowDestLocal")
    .internal()
    ...
    .booleanConf
    .createOptional

buildConf 不会调用 registerStaticConfigKey。isModifiable 为 containsConfigKey && !isStaticConfigKey。RuntimeConfig.set 只拒绝静态键。内部配置仍可设置。执行 SET 后,getConf(ARTIFACT_...) 返回 Some(true),并且会跳过回退到静态旧配置的 getOrElse。

SPARK-58531 / PR 57730 “Convert spark.sql.artifact.copyFromLocalToFs.allowDestLocal to a static conf” 已于 2026-08-05 解决,修复版本为 4.3.0。JIRA 指出:该配置“控制调用方是否可以写入 driver 本地文件系统上的任意路径,因此它应由启动 driver 的人设置。”4.2.0 被列为受影响版本。此固定版本仍包含该运行时配置。

已记录的弯路:将 Connect SQL 视为发现(FAQ);对旧的静态键执行 SET(CANNOT_MODIFY_STATIC_CONFIG);声称 Unix 绝对目标路径会忽略父路径(它会在根目录下拼接);将文件写入夸大为 RCE;因为 JIRA 已解决就固定到 4.3.0 RC。

实验环境

cd lab
./run.sh

回环 127.0.0.1:18920。session-conf 门控的 Gadget 与 LocalFileSystem 目标复制(pin v4.2.0 32f72996)。服务器 UID 185。无 SET 的对照:400 _LEGACY_ERROR_TEMP_3161,目标不存在。对静态旧键的 SET 对照:CANNOT_MODIFY_STATIC_CONFIG。对 buildConf 键的会话 SET 然后复制:目标 /oracle/SPARK-CONNECT-COPY-LOCAL-WITNESS 位于 /opt/spark/work/artifacts/<sessionUUID>/ 之外,uid 185,内容 WITNESS。

health pin=v4.2.0 commit=32f7299601108917fb01920a54e084595b7b3bf8
server uid=185 artifact_root=/opt/spark/work/artifacts/<sessionUUID>
control-no-set status=400 condition=_LEGACY_ERROR_TEMP_3161
control-no-set dest-absent=yes
control-static-set status=400 error_class=CANNOT_MODIFY_STATIC_CONFIG
session-set status=200 modifiable=True
copy-after-set status=200 dest=/oracle/SPARK-CONNECT-COPY-LOCAL-WITNESS
oracle dest=/oracle/SPARK-CONNECT-COPY-LOCAL-WITNESS uid=185 outside-sandbox=yes content=SPARK-CONNECT-COPY-LOCAL-WITNESS
SUCCESS SPARK-CONNECT-COPY-LOCAL SPARK-CONNECT-COPY-LOCAL-WITNESS

修复方案

将 spark.sql.artifact.copyFromLocalToFs.allowDestLocal 移至 StaticSQLConf,使会话无法通过 SET 修改它。这就是 4.3.0 上的 SPARK-58531 / PR 57730。在运维人员能够运行 4.3.0 之前:不要在未配置令牌和网络 ACL 的情况下暴露 Connect,也不要仅仅因为驱动程序启动时未设置该测试标志就认为它处于关闭状态。

参考资料

下载工具