
Uma ferramenta de anonimização para substituir PII e dados semelhantes em bancos de dados de dev/test copiados da produção.
Documentação:
O pgEdge Anonymizer é uma ferramenta de linha de comando para anonimizar informações de identificação pessoal (PII) em bancos de dados PostgreSQL. A ferramenta substitui dados sensíveis por valores falsos realistas que você pode usar para desenvolvimento e testes, mantendo a consistência dos dados e a integridade referencial.
O Anonymizer permite criar um conjunto de dados experimental que preserva a forma e a integridade de um banco de dados Postgres em apenas três etapas:
pgedge-anonymizer para converter suas colunas.Antes de executar o pgedge-anonymizer, você precisa criar um arquivo de configuração chamado pgedge-anonymizer.yaml; o arquivo deve conter:
database, com os detalhes de conexão do seu banco de dados.columns, listando as colunas totalmente qualificadas que você deseja anonimizar (no formato schema_name.table_name.column_name).patterns para cada coluna que especifica a forma que o conteúdo de substituição terá.Por exemplo:
database:
host: localhost
port: 5432
database: myapp
user: anonymizer
columns:
- column: public.users.email
pattern: EMAIL
- column: public.users.phone
pattern: US_PHONE
- column: public.users.ssn
pattern: US_SSN
Depois de criar um arquivo de configuração, execute o anonimizador:
pgedge-anonymizer run
Revise a lista de alterações à medida que o pgedge-anonymizer é executado, exibindo estatísticas:
Processing public.users.email (est. 50000 rows)...
10000 rows processed
20000 rows processed
30000 rows processed
40000 rows processed
50000 rows processed
Completed: 50000 rows, 48234 values anonymized
=== Anonymization Statistics ===
Total columns processed: 1
Total rows processed: 50000
Total values anonymized: 48234
Total duration: 2.34s
Throughput: 21367 rows/sec
Pré-requisitos
Use o seguinte comando para compilar o pgedge-anonymizer:
make build # Build binary
Use o seguinte comando para executar a suíte de testes do Anonymizer:
make test
Use o seguinte comando para executar o Go Linter:
make lint
Use o seguinte comando para formatar o código:
make fmt
Este projeto está licenciado sob a PostgreSQL License.