Trust & Safety ツール - デジタル上の被害と戦うために協力するためのツール
このリポジトリはもともと Meta の ThreatExchange API をサポートするコードとして始まりましたが、時が経つにつれてシグナル交換やコンテンツモデレーション全般をサポートする多数のプロジェクトを含むまでに成長しました。以下にサブプロジェクトの一覧を示します。
PDQ は写真ハッシュアルゴリズムであり、写真を 256 ビットの署名に変換し、その署名を使って他の写真とのマッチングを行うことができます。
TMK+PDQF (略して TMK) は動画ハッシュアルゴリズムであり、動画を 256KB の署名に変換し、その署名を使って他の動画とのマッチングを行うことができます。
Video PDQ (略して vPDQ) はシンプルな動画ハッシュアルゴリズムであり、共有される類似フレームの量に基づいて 2 つの動画が一致するかどうかを判定します。これは PDQ に限らず、他の画像アルゴリズムにも容易に適用できます。
HMA は AWS 向けのすぐにデプロイ可能なコンテンツモデレーションプロジェクトであり、多くのサブモジュールを含んでいます。スキャン対象として既知のコンテンツのリストを維持することができ、そのリストは自分でキュレーションすることも、他のハッシュ交換プログラムに接続してリストを共有・受信することもできます。詳細はウィキを参照してください。
このプロジェクトの第 2 バージョンである「Open Media Match」は現在構築中であり、クラウドに依存しない Docker ベースのデプロイを採用しています。
threatexchange という名前で pypi 上で公開されている Python ライブラリ/CLI ツールであり、コンテンツスキャンとシグナル交換の実装を提供します。Meta の ThreatExchange API からハッシュをダウンロードする処理、PDQ を用いた画像のスキャンなどのリファレンス実装を Python で提供しています。また、他のハッシュ交換や他の手法と連携するように容易に拡張することもでき、それらは必ずしもこのリポジトリのメンテナーによって書かれたものではありません。
api-reference-examples フォルダには、API を使用するためのさまざまな言語による実装例が含まれています。これらの実装は完成度がさまざまであり、ThreatExchange API で利用可能なすべてのエンドポイントを実装しているとは限りません。ThreatExchange API と UI、データ形式、ベストプラクティスの詳細については、ThreatExchange ドキュメントを参照してください。
ThreatExchange は、セキュリティ脅威情報のクエリ、公開、共有を行うための Facebook Platform 上の RESTful API 群です。マルウェア、フィッシングページ、その他の脅威に関する詳細を、コミュニティの特定のメンバーまたは ThreatExchange コミュニティ全体と交換するための軽量な手段です。
ThreatExchange とベストプラクティスの詳細については、ThreatExchange ドキュメントを参照してください。
一括ダウンロードまたは増分更新のいずれかをサポートするタグ駆動型のワークロードについては、現在推奨されるベストプラクティスは Java リファレンス設計です。
また、ホストされている ThreatExchange UI を使用してデータセットを探索することもできます。
ThreatExchange へのアクセスをリクエストするには、https://developers.facebook.com/products/threat-exchange/ から申請を提出してください。
コントリビューションを歓迎します!開始方法の詳細については CONTRIBUTING を、また行動規範もご覧ください。
このリポジトリ内のすべてのプロジェクトは BSD ライセンスの下にあります - ./LICENSE を参照してください。ただし、デモンストレーション目的で含まれている一部のファイルには例外があり、それらの代替ライセンスはファイル自体の先頭に記載されています。
2021年12月9日時点での例外の完全なリストは以下のとおりです: