professional-services

Raccolta di esempi di soluzioni Google Cloud e utilità operative per il monitoraggio degli audit log, la de-identificazione DLP, la gestione delle chiavi di crittografia e i pattern IAM.

La cartella tools contiene utility pronte all'uso che possono semplificare l'utilizzo di Google Cloud Platform.* agent-eval - Una guida CLI passo-passo all'uso del Vertex AI Generative AI Evaluation Service per gli agenti ADK. Gestisce l'intero ciclo di valutazione: configura GCP, prepara metriche e dataset, raccoglie le tracce (UserSim multi-turn + DIY single-turn), valuta con client.evals.evaluate() di Vertex e genera un report HTML autonomo con diagnosi redatta da Gemini. Mostra metriche deterministiche (token, costi, latenza, cache hit, reasoning ratio) insieme alle metriche LLM-as-judge, così vedi qualità del codice e costi di runtime sulla stessa pagina.

• Agile Machine Learning API - Un'applicazione web che offre la possibilità di addestrare e distribuire modelli ML su Google Cloud Machine Learning Engine e visualizzare i risultati delle previsioni tramite semplici richieste POST con LIME.
• Airflow DAG Metadata Generator - Usa i modelli generativi di Google per analizzare i DAG di Airflow e arricchirli con valori generati per description, tags e doc_md.
• Airflow States Collector - Uno strumento che crea e carica un DAG di Airflow nella cartella GCS dei DAG. Il DAG raccoglie in modo incrementale gli stati delle attività di Airflow e li salva in BQ. Genera inoltre automaticamente una dashboard LookerStudio che interroga la vista BQ.
• Airpiler - Uno script Python per convertire i file JIL di Autosys nel formato dag-factory da eseguire in Cloud Composer (ambiente Airflow gestito).
• Ansible Module for Anthos on Bare Metal - Modulo Ansible per l'installazione di Anthos su Bare Metal
• Anthos Bare Metal Installer - Un playbook ansible che può essere utilizzato per installare Anthos Bare Metal.
• Apache Beam Client Throttling - Una libreria che può essere utilizzata per limitare il numero di richieste da una pipeline Apache Beam a un servizio esterno. Mette in coda le richieste per non sovraccaricare il servizio esterno e attiva la limitazione lato client quando il servizio inizia a rifiutare richieste a causa di errori di quota esaurita.
• API Key Rotation Checker - Uno strumento che verifica le API key nella tua organizzazione GCP e le confronta con un periodo di rotazione personalizzabile. Ruotare regolarmente le API key è una best practice consigliata da Google e standard nel settore.
• AssetInventory - Importa le risorse di Cloud Asset Inventory in BigQuery.
• BigQuery Discount Per-Project Attribution - Uno strumento che automatizza la generazione di una tabella BigQuery basata sui dati di fatturazione esportati esistenti, attribuendo sia gli addebiti CUD che SUD su base per-progetto.
• BigQuery Policy Tag Utility - Classe di utilità per etichettare gli schemi delle tabelle BQ con i Policy Tag della tassonomia Data Catalog. Crea viste autorizzate BQ utilizzando i Policy Tag. Utilità di supporto per provisionare BigQuery Dataset, tassonomia Data Catalog e Policy Tag.
• BigQuery Query Plan Exporter - Utilità da riga di comando per esportare i piani di query BigQuery in un intervallo di date.
• BigQuery Query Plan Visualizer - Un'applicazione web che offre la possibilità di visualizzare le fasi di esecuzione dei piani di query BigQuery per facilitare l'ottimizzazione delle query.
• BigQuery z/OS Mainframe Connector - Un'utilità utilizzata per caricare i dataset COBOL MVS in BigQuery ed eseguire job di query e caricamento dal mainframe IBM z/OS.
• Boolean Organization Policy Enforcer - Uno strumento per individuare i progetti che non impostano un criterio organizzativo booleano allo stato previsto e, successivamente, impostare il criterio al valore atteso.
• Capacity Planner CLI - Uno strumento autonomo per estrarre i valori di picco dell'utilizzo delle risorse e i relativi timestamp per un dato progetto GCP, intervallo di tempo e fuso orario.
• Capacity Planner Sheets Extension - Un'estensione di Google Sheets per estrarre i valori di picco dell'utilizzo delle risorse e i relativi timestamp per un dato progetto GCP, intervallo di tempo e fuso orario.
• CloudConnect - Un pacchetto che automatizza la configurazione di tunnel VPN duali tra AWS e GCP.
• Cloudera Parcel GCS Connector - Questo script ti aiuta a creare una parcel Cloudera che include il connettore Google Cloud Storage. La parcel può essere distribuita su un cluster gestito da Cloudera. Questo script ti aiuta a creare una parcel Cloudera che include il connettore Google Cloud Storage. La parcel può essere distribuita su un cluster gestito da Cloudera.
• Cloud AI Vision Utilities - Questo è un pacchetto Python installabile che fornisce strumenti di supporto per Cloud AI Vision. Attualmente ci sono alcuni script per generare un file CSV di dataset AutoML Vision da immagini grezze o file di annotazione delle immagini in formato PASCAL VOC.
• Cloud Composer Backup and Recovery - Uno strumento da riga di comando per applicare operazioni di backup e ripristino su ambienti Cloud Composer Airflow.
• Cloud Composer DAG Validation - Un processo automatizzato per eseguire validazioni e test sui DAG in Composer.
• Cloud Composer Migration Complexity Assessment - Un DAG Airflow che utilizza diversi strumenti per analizzare un ambiente Cloud Composer 1, determinare una stima del lavoro e accelerare la conversione dei DAG di Airflow 1 in DAG di Airflow 2.
• Cloud Composer Migration Terraform Generator - Analizza un ambiente Cloud Composer 1 / Airflow 1 esistente e genera Terraform. Configura il nuovo ambiente Cloud Composer 2 per soddisfare le esigenze dei tuoi workload.
• ComfyUI Custom Nodes for VertexAI - Una raccolta di nodi personalizzati per ComfyUI che ti consente di utilizzare i modelli VertexAI nei workflow ComfyUI.
• CUD Prioritized Attribution - Uno strumento che consente ai clienti GCP che hanno acquistato sconti per impegno d'uso (CUD) di dare priorità a uno specifico ambito (ad es. progetto o cartella) per attribuire prima i CUD, prima di lasciare che eventuali sconti non consumati vengano distribuiti ad altre parti dell'organizzazione.
• Custom Module for Security Health Analytics Library - Una libreria di moduli personalizzati per SCC Security Health Analytics. Include strumenti per generare facilmente moduli personalizzati e provisionarli sulla tua organizzazione. Questa libreria aiuta l'organizzazione a rilevare le deviazioni di configurazione e conformità.
• Custom Organization Policy Library - Una libreria di vincoli ed esempi di criteri organizzativi personalizzati. Include strumenti per generare facilmente criteri da provisionare in tutta l'organizzazione utilizzando Google Cloud (gcloud) o Terraform.
• Custom Role Analyzer - Questo strumento fornisce informazioni utili sui ruoli personalizzati sia a livello di organizzazione che di progetto, per individuare i ruoli predefiniti da cui è costruito il ruolo personalizzato.
• Custom Role Manager - Gestisce ruoli personalizzati a livello di organizzazione o progetto combinando ruoli predefiniti e includendo e rimuovendo autorizzazioni con caratteri jolly. Può essere eseguito come Cloud Function o generare risorse Terraform.
• Dataproc Event Driven Spark Recommendations - Usa Google Cloud Functions per analizzare i cluster Cloud Dataproc e consigliare le best practice per i job Apache Spark. Registra inoltre le configurazioni dei cluster per riferimento futuro.
• Dataproc Scheduled Cluster Sizing - Usa Google Cloud Scheduler e Google Cloud Functions per pianificare il ridimensionamento di un cluster Dataproc. Modifica il numero di worker primari e secondari.
• DataStream Deployment Automation - Script Python per automatizzare la distribuzione di Google Cloud DataStream. Questo script crea i profili di connessione, crea lo stream e avvia lo stream.
• DLP to Data Catalog - Ispeziona le tue tabelle usando Data Loss Prevention per i dati PII e taggali automaticamente su Data Catalog usando Python.
• DNS Sync - Sincronizza una zona Cloud DNS con le risorse GCE. Le istanze e i bilanciatori di carico vengono aggiunti alla zona Cloud DNS quando vengono avviati, in base agli eventi di log compute_engine_activity inviati da una sottoscrizione push pub/sub. Può sincronizzare più progetti in un'unica zona Cloud DNS.
• DynamoDB to Bigtable Migration - Lo strumento di migrazione da DynamoDB a Bigtable è una soluzione potente progettata per semplificare il trasferimento dei dati da DynamoDB a Cloud Bigtable. Questo strumento automatizza la traduzione dello schema, garantendo che la struttura dei dati venga mappata su Bigtable. Offre inoltre opzioni per accelerare e scalare in modo efficiente il trasferimento dei dati usando Dataflow, riducendo al minimo i tempi di inattività e massimizzando le prestazioni.
• Firewall Enforcer - Osserva e rimuove automaticamente le regole firewall illegali in tutta l'organizzazione. Le regole firewall vengono monitorate da un feed Cloud Asset Inventory, che attiva una Cloud Function che ispeziona la regola firewall e la elimina se non supera un test.
• GCE Disk Encryption Converter - Uno strumento che converte i dischi collegati a un'istanza VM GCE da chiavi gestite da Google a una chiave gestita dal cliente archiviata in Cloud KMS.
• GCE switch disk-type - Uno strumento che cambia il tipo dei dischi collegati a un'istanza GCE.
• GCE Quota Sync - Uno strumento che recupera l'utilizzo delle quote delle risorse dall'API GCE e lo sincronizza su Stackdriver come metrica personalizzata, dove può essere utilizzato per definire avvisi automatizzati.
• GCE Usage Log - Raccoglie gli eventi delle istanze GCE in un dataset BigQuery, mostrando vCPU, RAM e Persistent Disk, segmentati per progetto, zona ed etichette.
• GCP Architecture Visualizer - Uno strumento che prende l'output CSV da una scansione Forseti Inventory e disegna un diagramma ad albero gerarchico dinamico di org -> cartelle -> progetti -> gcp_resources utilizzando la libreria JavaScript D3.js.
• GCP AWS HA VPN Connection terraform - Script Terraform per configurare una VPN HA tra GCP e AWS.
• GCP Azure HA VPN Connection Terraform - Codice Terraform per configurare una VPN HA tra GCP e Microsoft Azure.
• GCP Organization Hierarchy Viewer - Un'utilità CLI per visualizzare la gerarchia della tua organizzazione nel terminale.
• GCPViz - uno strumento di visualizzazione che prende input da Cloud Asset Inventory, crea relazioni tra le risorse e genera un output compatibile con graphviz.
• GCS Bucket Mover - Uno strumento per spostare il bucket dell'utente, inclusi oggetti, metadati e ACL, da un progetto a un altro.
• GCS to BigQuery - Uno strumento che recupera i metadati degli oggetti da tutti i bucket Google Cloud Storage e li esporta in un formato che può essere importato in BigQuery per ulteriori analisi.
• GCS Usage Recommender - Uno strumento che genera analisi a livello di bucket e modelli di accesso in tutti i progetti per un progetto GCP, per generare raccomandazioni sulla gestione del ciclo di vita degli oggetti.
• GCVE2BQ - Uno strumento per esportazioni pianificate dei dati di utilizzo di VM, datastore ed ESXi da vCenter a BigQuery per casi d'uso di fatturazione e reporting.
• Gemini Computer Use Evaluation Pipeline - Un framework leggero per il benchmarking degli agenti browser con valutazione multimodale visiva e basata sui log.
• GenAI-Powered Code Modification Cloud Function - Una Google Cloud Function distribuibile che, basata sull'API Vertex AI Gemini, automatizza la modifica del codice. Legge i file da GitHub, li elabora con un LLM per generare nuove versioni e salva le modifiche nei repository.
• GKE AutoPSC Controller - Controller Google Kubernetes Engine per configurare PSC ServiceAttachment per le Forwarding Rules gestite da Gateway API.
• Global DNS -> Zonal DNS Project Bulk Migration - Uno script shell per la migrazione bulk di progetti da gDNS a zDNS.
• GKE Billing Export - Esportazione di fatturazione granulare di Google Kubernetes Engine.
• GKE GPU Driver Version - Uno strumento per trovare la versione del driver GPU supportata per una data versione del cluster GKE e tipo di GPU.
• gmon - Un'interfaccia a riga di comando (CLI) per Cloud Monitoring scritta in Python.
• Google Cloud Support Slackbot - Applicazione Slack che recupera le informazioni sui ticket di supporto Google Cloud tramite l'API Cloud Support e le invia a Slack
• GSuite Exporter Cloud Function - Uno script che distribuisce una Cloud Function e un job Cloud Scheduler che esegue automaticamente lo strumento GSuite Exporter a intervalli regolari.
• GSuite Exporter - Un pacchetto Python che automatizza la sincronizzazione dei report sulle attività delle API Admin SDK verso una destinazione GCP. Il modulo prende le voci dall'API Admin SDK scelta, le converte nel formato appropriato per la destinazione e le esporta verso una destinazione (ad es. Stackdriver Logging).
• Hive to BigQuery - Un framework Python per migrare le tabelle Hive a BigQuery usando Cloud SQL per tenere traccia dello stato di avanzamento della migrazione.
• IAM Permissions Copier - Questo strumento ti consente di copiare le autorizzazioni IAM GCP supportate dagli utenti non gestiti agli utenti Cloud Identity gestiti.
• IAM Recommender at Scale - Un pacchetto Python che automatizza l'applicazione delle raccomandazioni IAM.
• Instance Mapper - Mappa i diversi tipi di istanze VM IaaS di EC2 e Azure Compute sui tipi di istanza Google Cloud Platform utilizzando un metodo personalizzabile basato su punteggi. Supporta anche le istanze di database.
• IPAM Autopilot - Uno strumento semplice per gestire gli intervalli di indirizzi IP per le subnet GCP.
• K8S-2-GSM - Un'app Go containerizzata per migrare i segreti Kubernetes a Google Secrets Manager (per sfruttare CSI secret driver). LabelMaker - Uno strumento che legge le coppie chiave:valore da un file JSON ed etichetta l'istanza in esecuzione e tutti i dischi collegati di conseguenza.
• Logbucket Global to Regional - Utilità per cambiare la destinazione del sink _Default verso bucket di log regionali
• Machine Learning Auto Exploratory Data Analysis and Feature Recommendation - Uno strumento per eseguire un'EDA automatica e completa, sulla base della quale vengono formulate raccomandazioni sulle feature e viene generato un report di sintesi.
• Maven Archetype Dataflow - Un archetype Maven che avvia un progetto Dataflow con plugin comuni preconfigurati per aiutare a mantenere un'elevata qualità del codice.
• Netblock Monitor - Un progetto Apps Script che fornisce automaticamente notifiche via email quando vengono apportate modifiche agli intervalli IP di Google.
• OpenAPI to Cloud Armor converter - Uno strumento semplice per generare criteri Cloud Armor dalle specifiche OpenAPI.
• Permission Discrepancy Finder - Uno strumento per individuare i principal a cui mancano le autorizzazioni su una risorsa all'interno di un progetto e, successivamente, concede loro le autorizzazioni mancanti.
• Pubsub2Inbox - Uno strumento generico basato su Cloud Function che riceve input dai messaggi Pub/Sub e li trasforma in email, webhook o oggetti GCS.
• Quota Manager - Un modulo Python per aggiornare programmaticamente le quote dei servizi GCP come bigquery.googleapis.com.
• Quota Monitoring and Alerting - Una dashboard Data Studio facile da distribuire con funzionalità di avviso, che mostra l'utilizzo e i limiti di quota in un'organizzazione o cartella.
• RAG Application Using Vector Search - Serve principalmente a dimostrare le capacità dei servizi backend sottostanti e come architettura di riferimento per le implementazioni dei clienti. Questo strumento distribuisce un sistema backend per la generazione aumentata da recupero (RAG) su Google Cloud, completamente gestito da Infrastructure as Code (IaC) tramite Terraform. Consente di interrogare documenti privati con Large Language Models (LLMs), potenziati dal contesto di Vertex AI RAG Engine e Vector Search. Sebbene sia inclusa una semplice interfaccia Streamlit, serve principalmente a dimostrare le capacità dei servizi backend sottostanti.
• Ranger Hive Assessment for BigQuery/BigLake IAM migration - Uno strumento che valuta quali regole di autorizzazione Ranger possono essere migrate o meno a BigQuery/BigLake IAM.
• Reddit Comment Streaming - Usa PRAW, TextBlob e le API Python di Google per raccogliere e analizzare i commenti di Reddit. Invia i commenti a un topic Google Pub/Sub.
• Secret Manager Helper - Una libreria Java per sostituire facilmente le stringhe segnaposto con i payload dei segreti di Secret Manager.
• Service Account Provider - Uno strumento per scambiare i token JWT di GitLab CI con token di accesso GCP IAM, al fine di consentire ai job GitLab CI di accedere alle API Google Cloud
• Site Verification Group Sync - Uno strumento per assegnare le autorizzazioni di "proprietario verificato" (per creare bucket GCS con DNS personalizzato) in base all'appartenenza a un Google Group.
• SLO Generator - Un pacchetto Python che automatizza il calcolo degli Service Level Objective, degli Error Budget e dei Burn Rate su GCP ed esporta i risultati del calcolo verso gli exporter disponibili (ad es. PubSub, BigQuery, Stackdriver Monitoring), utilizzando criteri scritti in formato JSON.
• Snowflake_to_BQ - Uno script shell per trasferire tabelle (schema e dati) da Snowflake a BigQuery.
• SPIFFE GCP Proxy - Uno strumento per facilitare l'integrazione dei workload on-premise supportati da SPIFFE con le API GCP utilizzando Workload Identity Federation
• STS Job Manager - Uno strumento di migrazione di bucket su scala petabyte che utilizza Storage Transfer Service
• Vector Search Load Testing Framework - Questo framework fornisce una soluzione semplificata per i test di carico distribuiti degli endpoint Vertex AI Vector Search su Google Kubernetes Engine (GKE) utilizzando Locust. Consente di simulare workload simili a quelli di produzione per confrontare efficacemente le prestazioni, analizzare la scalabilità e validare le configurazioni di distribuzione.
• [Vertex AI Endpoint Tester] (tools/vertex-ai-endpoint-load-tester) - Questa utilità aiuta a testare in modo metodico diversi Vertex AI Endpoint in base alle loro dimensioni, così da poter decidere la dimensione giusta per distribuire un modello ML su Vertex AI, dato un JSON di richiesta di esempio e alcune indicazioni sulle query previste al secondo.
• Vertex AI Endpoint Tester - Questa utilità aiuta a testare in modo metodico diversi Vertex AI Endpoint in base alle loro dimensioni, così da poter decidere la dimensione giusta per distribuire un modello ML su Vertex AI, dato un JSON di richiesta di esempio e alcune indicazioni sulle query previste al secondo.
• VM Migrator - Questa utilità automatizza la migrazione delle istanze di Virtual Machine all'interno di GCP. Puoi migrare le VM da una zona a un'altra zona/regione nello stesso progetto o in progetti diversi, mantenendo tutte le proprietà originali della VM come dischi, interfacce di rete, IP, metadati, tag di rete e molto altro.
• VPC Flow Logs Analysis - Un sink di log configurabile
  • report BigQuery che mostra il traffico attribuito ai progetti nelle Shared VPC.
• VPC Flow Logs Enforcer - Una Cloud Function che abilita automaticamente i VPC Flow Logs quando viene creata o modificata una subnet in qualsiasi progetto sotto una particolare cartella o più cartelle.
• VPC Flow Logs Top Talkers - Un sink di log configurabile + vista BigQuery per generare report aggregati del traffico mensili/giornalieri per subnet o host, con etichettatura configurabile di intervalli IP e porte.
• Webhook Ingestion Data Pipeline - Un'app distribuibile per accettare e acquisire dati webhook non autenticati in BigQuery.
• XSD to BigQuery Schema Generator - Uno strumento da riga di comando per convertire uno schema XSD che rappresenta contenuti XML profondamente annidati e ripetuti in uno schema di tabella compatibile con BigQuery rappresentato in JSON.
• Numeric Family Recommender - Oracle - Il Numeric Family Recommender è uno script di database che consiglia il miglior tipo di dato numerico per il tipo di dato NUMBER quando si migra da database legacy come Oracle a piattaforme Google Cloud come BigQuery, AlloyDB, Cloud SQL for PostgreSQL e Google Cloud Storage.
• Cloud Composer Stress Testing - Una raccolta di strumenti progettati per testare, valutare e simulare workload all'interno di Composer. Ottima per test di integrazione e per sperimentare diverse configurazioni ambientali.
• Cloud Composer Environment Rotator - Ruota le risorse Airflow da un vecchio ambiente Composer a un nuovo ambiente Composer con tempi di inattività minimi. Ideale per aggiornamenti ambientali non in-place, downgrade delle versioni dell'ambiente o migrazioni verso regioni diverse.
• Gradio and Generative AI Example - Il codice di esempio consente agli sviluppatori di creare rapidamente applicazioni PoC di IA generativa con Gradio e agenti Gen AI.
• Memorystore Cluster Ops Framework - Questo è un framework che fornisce gli strumenti per applicare operazioni a livello di cluster che abilitano funzionalità come backup del cluster, migrazione e validazione, ecc. Il framework può essere esteso per altri casi d'uso secondo necessità. Il framework utilizza RIOT per colmare le attuali lacune di prodotto con i Memorystore Cluster
• ML Project Generator - Un'utilità per creare un template di progetto ML di livello production con i migliori strumenti di produttività installati, come auto-formattazione, controlli delle licenze, linting, ecc.
• Policy Tags Engine - Lo strumento consente agli sviluppatori di applicare automaticamente la sicurezza a livello di colonna di BigQuery (Policy Tags) sulla base di file di metadati caricati in un bucket Google Cloud Storage (GCS).
• Gemini CLI Health Dashboard - Lo strumento consente agli sviluppatori di creare una dashboard personalizzata per monitorare lo stato di salute della Gemini CLI in termini di tasso di successo rispetto a quello di errore.## Contributing

Vedi le istruzioni per i contributi per iniziare a contribuire.

Contact

Domande, problemi e commenti vanno indirizzati a [email protected].