pgEdge Anonymizer — это инструмент командной строки для анонимизации персонально идентифицируемой информации (PII) в базах данных PostgreSQL. Инструмент заменяет конфиденциальные данные реалистичными фиктивными значениями, которые можно использовать для разработки и тестирования, сохраняя согласованность данных и ссылочную целостность.

Возможности

• Более 100 встроенных шаблонов для распространенных типов PII в 19 странах
• Согласованная замена — один и тот же ввод дает одинаковый вывод в рамках одного запуска
• Учет внешних ключей — автоматическая обработка связей CASCADE
• Поддержка больших баз данных — эффективная пакетная обработка с серверными курсорами
• Сохранение формата — сохранение исходного форматирования данных, где это возможно
• Одна транзакция — все изменения фиксируются атомарно или откатываются
• Расширяемость — определение пользовательских шаблонов с использованием форматов даты, числа или маски

Быстрый старт

Anonymizer позволяет создать экспериментальный набор данных, сохраняющий структуру и целостность базы данных Postgres, всего за три шага:

1. Создайте конфигурационный файл, определяющий шаблоны замены для ваших столбцов.
2. Соберите и запустите pgedge-anonymizer, чтобы преобразовать ваши столбцы.
3. Просмотрите результаты.

Перед запуском pgedge-anonymizer необходимо создать конфигурационный файл с именем pgedge-anonymizer.yaml; файл должен содержать:

• раздел database с данными подключения к вашей базе данных.
• раздел columns, перечисляющий полностью определенные столбцы, которые вы хотите анонимизировать (в формате schema_name.table_name.column_name).
• свойства patterns для каждого столбца, задающие форму, которую примет заменяющее содержимое.

Например:

После создания конфигурационного файла запустите анонимайзер:

Просмотрите список изменений по мере работы pgedge-anonymizer; отображается статистика:

Заметки для разработчиков

Предварительные требования

• Go 1.24 или новее
• PostgreSQL (для интеграционных тестов)
• Python 3.12+ (для документации)

Используйте следующую команду для сборки pgedge-anonymizer:

Используйте следующую команду для запуска набора тестов Anonymizer:

Используйте следующую команду для запуска Go Linter:

Используйте следующую команду для форматирования кода:

Поддержка

• GitHub Issues
• Полная документация доступна на веб-сайте pgEdge.

Лицензия

Этот проект лицензирован под лицензией PostgreSQL.