#1進化的LLMジェイルブレイクおよびガードレールフレームワーク。遺伝的変異、マルコフ選択、オンライン敵対的トレーニングにより、再利用可能な戦略プールを成長させ、安全性評価を行う。

RLベースのプロンプトインジェクションレッドチーミング向けのオープンフレームワーク。共有トレーナー、カリキュラム学習、およびAgentDojo、InjecAgent、PIArenaなどのベンチマークを備えています。


敵対的画像摂動ツール。SAMセグメンテーションとCLIPモデルを使用して、セキュリティ研究のためにAIベースの詐欺画像分類器を回避する。

スパイキングニューラルネットワークに対する時間的トリガーバックドア攻撃であるT-Backdoorを実装した研究コード。空間的摂動を用いず、rate、latency、jitterトリガーを利用する。

Defense framework that keeps audio-language models frozen and adds a mid-layer risk gate with late-layer safety adapters to block audio jailbreaks at…

Benchmark suite and code for detecting AI alignment failures, with 44 benchmarks across ten failure types and a zero-shot RLCD detector evaluated on…

バイナリ、ソース、スクリプト向けの0-dayマルウェア検出(イマイチじゃないやつ)

DNS Proxy that is simple and fast with not so simple features. Focused on routed DNS forwarding, filtering and parental control.

finance domain specific red-teaming benchmark evaluation rubric

オブジェクト検出器に対するバックドア攻撃を、破損、拡散再構成、DBSCANコンセンサス投票によって無効化するブラックボックス入力段階浄化防御。

Webエージェント向けのプロンプトインジェクション検出のベンチマーク。

LLMエージェントに対するプロンプトインジェクションや長期的な脅威を、アクションが実行される前に検知・ブロックするために、安全性重視のシャドウメモリを維持する防御フレームワーク。


ツール利用型LLMエージェントに対する制御トークン連鎖思考抑制とパーサー寛容性攻撃の実験

MLflowの登録済みモデルをREST API経由でポイズニングし、悪意のあるpickleを埋め込んでモデル読み込み時にRCEを引き起こす概念実証。

CVE-2024-37054の概念実証および研究リポジトリ。MLflow PyFuncモデル読み込みにおける安全でないデシリアライズ脆弱性であり、リモートコード実行につながる可能性があります。