professional-services

Colección de ejemplos de soluciones de Google Cloud y utilidades operativas para el monitoreo de registros de auditoría, desidentificación de DLP, gestión de claves de cifrado y patrones de IAM.

La carpeta de herramientas contiene utilidades listas para usar que pueden simplificar el uso de Google Cloud Platform.* agent-eval - Un recorrido CLI guiado paso a paso del Vertex AI Generative AI Evaluation Service para agentes ADK. Impulsa todo el bucle de evaluación: configura GCP, crea la estructura de métricas + conjunto de datos, recopila trazas (UserSim multi-turn + single-turn DIY), puntúa con el método client.evals.evaluate() de Vertex, y escribe un informe HTML autocontenido con un diagnóstico redactado por Gemini. Presenta métricas deterministas (tokens, coste, latencia, aciertos de caché, índice de razonamiento) junto con métricas de LLM como juez, para que veas la calidad del código y el coste de ejecución en la misma página.

• Agile Machine Learning API - Una aplicación web que ofrece la capacidad de entrenar e implementar modelos de ML en Google Cloud Machine Learning Engine y visualizar los resultados previstos mediante LIME a través de una simple solicitud POST.
• Airflow DAG Metadata Generator - Utiliza los modelos generativos de Google para analizar los DAG de Airflow y complementarlos con valores generados de description, tags y doc_md.
• Airflow States Collector - Una herramienta que crea y sube un dag de Airflow a la carpeta dags de GCS. El dag recopila de forma incremental los estados de las tareas de Airflow y los almacena en BQ. También autogenera un dashboard de LookerStudio que consulta la vista de BQ.
• Airpiler - Un script de Python para convertir archivos JIL de Autosys al formato dag-factory para ejecutarlos en Cloud Composer (entorno de Airflow gestionado).
• Ansible Module for Anthos on Bare Metal - Módulo de Ansible para la instalación de Anthos en Bare Metal.
• Anthos Bare Metal Installer - Un playbook de ansible que puede utilizarse para instalar Anthos Bare Metal.
• Apache Beam Client Throttling - Una biblioteca que puede utilizarse para limitar el número de solicitudes de una canalización de Apache Beam a un servicio externo. Almacena en búfer las solicitudes para no sobrecargar el servicio externo y activa la limitación del lado del cliente cuando el servicio empieza a rechazar solicitudes debido a errores de cuota agotada.
• API Key Rotation Checker - Una herramienta que revisa tu organización de GCP en busca de claves de API y las compara con un período de rotación personalizable. Rotar las claves de API con regularidad es una práctica recomendada estándar de Google y del sector.
• AssetInventory - Importa los recursos de Cloud Asset Inventory en BigQuery.
• BigQuery Discount Per-Project Attribution - Una herramienta que automatiza la generación de una tabla de BigQuery que utiliza los datos de facturación exportados existentes, atribuyendo tanto los cargos de CUD como de SUD por proyecto.
• BigQuery Policy Tag Utility - Clase de utilidad para etiquetar esquemas de tablas de BQ con Policy Tags de taxonomía de Data Catalog. Crea vistas autorizadas de BQ mediante Policy Tags. Utilidad auxiliar para aprovisionar el conjunto de datos de BigQuery, la taxonomía de Data Catalog y los Policy Tags.
• BigQuery Query Plan Exporter - Utilidad de línea de comandos para exportar los planes de consulta de BigQuery en un rango de fechas determinado.
• BigQuery Query Plan Visualizer - Una aplicación web que ofrece la capacidad de visualizar las etapas de ejecución de los planes de consulta de BigQuery para ayudar en la optimización de las consultas.
• BigQuery z/OS Mainframe Connector - Una utilidad que se usa para cargar conjuntos de datos COBOL MVS en BigQuery y ejecutar consultas y trabajos de carga desde el mainframe IBM z/OS.
• Boolean Organization Policy Enforcer - Una herramienta para localizar los proyectos que no configuran una política de organización booleana en su estado esperado y, posteriormente, establecer la política de organización en su configuración esperada.
• Capacity Planner CLI - Una herramienta independiente para extraer los valores máximos de uso de recursos y las marcas de tiempo correspondientes para un proyecto de GCP, un rango de tiempo y una zona horaria determinados.
• Capacity Planner Sheets Extension - Una extensión de Google Sheets para extraer los valores máximos de uso de recursos y las marcas de tiempo correspondientes para un proyecto de GCP, un rango de tiempo y una zona horaria determinados.
• CloudConnect - Un paquete que automatiza la configuración de túneles VPN duales entre AWS y GCP.
• Cloudera Parcel GCS Connector - Este script te ayuda a crear una parcela de Cloudera que incluye el conector de Google Cloud Storage. La parcela puede implementarse en un clúster gestionado por Cloudera. Este script te ayuda a crear una parcela de Cloudera que incluye el conector de Google Cloud Storage. La parcela puede implementarse en un clúster gestionado por Cloudera.
• Cloud AI Vision Utilities - Este es un paquete de Python instalable que proporciona herramientas de soporte para Cloud AI Vision. Actualmente hay algunos scripts para generar un conjunto de datos de AutoML Vision en un archivo CSV a partir de imágenes en bruto o de archivos de anotación de imágenes en formato PASCAL VOC.
• Cloud Composer Backup and Recovery - Una herramienta de línea de comandos para aplicar operaciones de copia de seguridad y recuperación en entornos de Airflow de Cloud Composer.
• Cloud Composer DAG Validation - Un proceso automatizado para ejecutar validación y pruebas sobre los DAG en Composer.
• Cloud Composer Migration Complexity Assessment - Un DAG de Airflow que utiliza una variedad de herramientas para analizar un entorno de Cloud Composer 1, determinar una estimación de trabajo y acelerar la conversión de dags de Airflow 1 a dags de Airflow 2.
• Cloud Composer Migration Terraform Generator - Analiza un entorno existente de Cloud Composer 1 / Airflow 1 y genera terraform. Configura el nuevo entorno de Cloud Composer 2 para satisfacer las demandas de tu carga de trabajo.
• ComfyUI Custom Nodes for VertexAI - Una colección de nodos personalizados para ComfyUI que te permite usar modelos de VertexAI en flujos de trabajo de ComfyUI.
• CUD Prioritized Attribution - Una herramienta que permite a los clientes de GCP que adquirieron Committed Use Discounts (CUD) priorizar un ámbito específico (p. ej., un proyecto o una carpeta) para atribuir los CUD primero, antes de dejar que cualquier descuento no consumido se distribuya a otras partes de una organización.
• Custom Module for Security Health Analytics Library - Una biblioteca de módulos personalizados para SCC Security Health Analytics. Incluye herramientas para generar fácilmente módulos personalizados y aprovisionarlos en tu organización. Esta biblioteca ayuda a las organizaciones a detectar desviaciones de configuración y cumplimiento.
• Custom Organization Policy Library - Una biblioteca de restricciones y ejemplos de políticas de organización personalizadas. Incluye herramientas para generar fácilmente políticas y aprovisionarlas en toda tu organización mediante Google Cloud (gcloud) o Terraform.
• Custom Role Analyzer - Esta herramienta proporcionará información útil sobre los roles personalizados a nivel de organización y también a nivel de proyecto, para encontrar los roles predefinidos a partir de los cuales se construye el rol personalizado.
• Custom Role Manager - Gestiona roles personalizados a nivel de organización o de proyecto combinando roles predefinidos e incluyendo y eliminando permisos con comodines. Puede ejecutarse como Cloud Function o generar recursos de Terraform.
• Dataproc Event Driven Spark Recommendations - Usa Google Cloud Functions para analizar clústeres de Cloud Dataproc y recomendar las mejores prácticas para trabajos de Apache Spark. También registra las configuraciones de los clústeres para referencia futura.
• Dataproc Scheduled Cluster Sizing - Usa Google Cloud Scheduler y Google Cloud Functions para programar el redimensionamiento de un clúster de Dataproc. Cambia el número de workers primarios y secundarios.
• DataStream Deployment Automation - Script de Python para automatizar la implementación de Google Cloud DataStream. Este script creará perfiles de conexión, creará el stream y lo iniciará.
• DLP to Data Catalog - Inspecciona tus tablas con Data Loss Prevention en busca de datos de PII y etiquétalos automáticamente en Data Catalog mediante Python.
• DNS Sync - Sincroniza una zona de Cloud DNS con los recursos de GCE. Las instancias y los balanceadores de carga se agregan a la zona de Cloud DNS cuando se inician, a partir de los eventos de registro compute_engine_activity enviados desde una suscripción push de pub/sub. Puede sincronizar varios proyectos con una única zona de Cloud DNS.
• DynamoDB to Bigtable Migration - La herramienta de migración de DynamoDB a Bigtable es una solución potente diseñada para agilizar la transferencia de datos de DynamoDB a Cloud Bigtable. Esta herramienta automatiza la traducción del esquema, lo que garantiza que la estructura de tus datos se asigne a Bigtable. También ofrece opciones para acelerar y escalar la transferencia de datos de forma eficiente mediante dataflow, minimizando el tiempo de inactividad y maximizando el rendimiento.
• Firewall Enforcer - Supervisa y elimina automáticamente las reglas de firewall ilegales en toda la organización. Las reglas de firewall se monitorizan mediante un feed de Cloud Asset Inventory, que activa una Cloud Function que inspecciona la regla de firewall y la elimina si no supera una prueba.
• GCE Disk Encryption Converter - Una herramienta que convierte los discos adjuntos a una instancia de VM de GCE de claves gestionadas por Google a una clave gestionada por el cliente almacenada en Cloud KMS.
• GCE switch disk-type - Una herramienta que cambia el tipo de los discos adjuntos a una instancia de GCE.
• GCE Quota Sync - Una herramienta que obtiene el uso de cuotas de recursos de la API de GCE y lo sincroniza con Stackdriver como métrica personalizada, donde puede utilizarse para definir alertas automatizadas.
• GCE Usage Log - Recopila los eventos de las instancias de GCE en un conjunto de datos de BigQuery, mostrando tus vCPU, RAM y Persistent Disk, segmentados por proyecto, zona y etiquetas.
• GCP Architecture Visualizer - Una herramienta que toma la salida CSV de un escaneo de Forseti Inventory y dibuja un diagrama de árbol jerárquico dinámico de org -> folders -> projects -> gcp_resources mediante la biblioteca JavaScript D3.js.
• GCP AWS HA VPN Connection terraform - Script de Terraform para configurar una VPN de alta disponibilidad (HA) entre GCP y AWS.
• GCP Azure HA VPN Connection Terraform - Código de Terraform para configurar una VPN de alta disponibilidad (HA) entre GCP y Microsoft Azure.
• GCP Organization Hierarchy Viewer - Una utilidad CLI para visualizar la jerarquía de tu organización en la terminal.
• GCPViz - una herramienta de visualización que toma como entrada Cloud Asset Inventory, crea relaciones entre los activos y genera una salida en un formato compatible con graphviz.
• GCS Bucket Mover - Una herramienta para mover el bucket del usuario, incluidos objetos, metadatos y ACL, de un proyecto a otro.
• GCS to BigQuery - Una herramienta que obtiene los metadatos de los objetos de todos los buckets de Google Cloud Storage y los exporta en un formato que puede importarse en BigQuery para su posterior análisis.
• GCS Usage Recommender - Una herramienta que genera inteligencia a nivel de bucket y patrones de acceso en todos los proyectos de un proyecto de GCP para generar una gestión recomendada del ciclo de vida de los objetos.
• GCVE2BQ - Una herramienta para exportaciones programadas de datos de utilización de VM, datastore y ESXi desde vCenter a BigQuery para casos de uso de facturación y generación de informes.
• Gemini Computer Use Evaluation Pipeline - Un framework ligero para evaluar el rendimiento de agentes de navegador con evaluación multimodal visual y de registros.
• GenAI-Powered Code Modification Cloud Function - Una Google Cloud Function implementable que, impulsada por la API de Vertex AI Gemini, automatiza la modificación de código. Lee archivos de GitHub, los procesa con un LLM para generar nuevas versiones y, a continuación, guarda esas modificaciones de nuevo en los repositorios.
• GKE AutoPSC Controller - Controlador de Google Kubernetes Engine para configurar PSC ServiceAttachment para las Forwarding Rules gestionadas por Gateway API.
• Global DNS -> Zonal DNS Project Bulk Migration - Un script de shell para la migración masiva de proyectos gDNS-zDNS.
• GKE Billing Export - Exportación de facturación de grano fino de Google Kubernetes Engine.
• GKE GPU Driver Version - Una herramienta para encontrar la versión compatible del controlador de GPU para una versión de clúster de GKE y un tipo de GPU determinados.
• gmon - Una interfaz de línea de comandos (CLI) para Cloud Monitoring escrita en Python.
• Google Cloud Support Slackbot - Aplicación de Slack que extrae información de los casos de soporte de Google Cloud a través de la Cloud Support API y envía la información a Slack
• GSuite Exporter Cloud Function - Un script que implementa una Cloud Function y un trabajo de Cloud Scheduler que ejecuta la herramienta GSuite Exporter automáticamente de forma periódica.
• GSuite Exporter - Un paquete de Python que automatiza la sincronización de los informes de actividad de las APIs de Admin SDK a un destino de GCP. El módulo toma las entradas de la API de Admin SDK elegida, las convierte al formato adecuado para el destino y las exporta a un destino (p. ej.: Stackdriver Logging).
• Hive to BigQuery - Un framework de Python para migrar tablas de Hive a BigQuery mediante Cloud SQL para hacer un seguimiento del progreso de la migración.
• IAM Permissions Copier - Esta herramienta te permite copiar los permisos compatibles de IAM de GCP de usuarios no gestionados a usuarios gestionados de Cloud Identity.
• IAM Recommender at Scale - Un paquete de Python que automatiza la aplicación de recomendaciones de IAM.
• Instance Mapper - Asigna distintos tipos de instancias de VM de IaaS de EC2 y Azure Compute a tipos de instancias de Google Cloud Platform mediante un método personalizable basado en puntuaciones. También admite instancias de bases de datos.
• IPAM Autopilot - Una herramienta sencilla para gestionar rangos de direcciones IP para subredes de GCP.
• K8S-2-GSM - Una aplicación contenedorizada de Golang para migrar secretos de Kubernetes a Google Secrets Manger (para aprovechar el CSI secret driver). LabelMaker - Una herramienta que lee pares clave:valor de un archivo json y etiqueta la instancia en ejecución y todas las unidades adjuntas en consecuencia.
• Logbucket Global to Regional - Utilidad para cambiar el destino del sumidero _Default a buckets de registros regionales
• Machine Learning Auto Exploratory Data Analysis and Feature Recommendation - Una herramienta para realizar un auto EDA exhaustivo, a partir del cual se hacen recomendaciones de características y se genera un informe resumido.
• Maven Archetype Dataflow - Un arquetipo de Maven que inicializa un proyecto de Dataflow con plugins comunes preconfigurados para ayudar a mantener una alta calidad de código.
• Netblock Monitor - Un proyecto de Apps Script que proporcionará automáticamente notificaciones por correo electrónico cuando se realicen cambios en los rangos de IP de Google.
• OpenAPI to Cloud Armor converter - Una herramienta sencilla para generar políticas de Cloud Armor a partir de especificaciones OpenAPI.
• Permission Discrepancy Finder - Una herramienta para encontrar las entidades principales con permisos faltantes en un recurso dentro de un proyecto y, posteriormente, otorgarles los permisos que faltan.
• Pubsub2Inbox - Una herramienta genérica basada en Cloud Functions que toma como entrada mensajes de Pub/Sub y los convierte en correos electrónicos, webhooks u objetos de GCS.
• Quota Manager - Un módulo de Python para actualizar programáticamente las cuotas de servicios de GCP, como bigquery.googleapis.com.
• Quota Monitoring and Alerting - Un dashboard de Data Studio fácil de implementar con capacidades de alertas, que muestra el uso y los límites de cuota en una organización o carpeta.
• RAG Application Using Vector Search - Sirve principalmente para demostrar las capacidades de los servicios backend subyacentes y como arquitectura de referencia para implementaciones de clientes. Esta herramienta implementa un sistema backend de Generación Aumentada por Recuperación (RAG) en Google Cloud, totalmente gestionado por Infrastructure as Code (IaC) mediante Terraform. Permite consultar documentos privados con Large Language Models (LLM), enriquecidos por el contexto de Vertex AI RAG Engine y Vector Search. Aunque se incluye una interfaz de Streamlit sencilla, sirve principalmente para demostrar las capacidades de los servicios backend subyacentes.
• Ranger Hive Assessment for BigQuery/BigLake IAM migration - Una herramienta que evalúa qué reglas de autorización de Ranger pueden migrarse o no a IAM de BigQuery/BigLake.
• Reddit Comment Streaming - Usa PRAW, TextBlob y Google Python API para recopilar y analizar comentarios de Reddit. Envía los comentarios a un tema de Google Pub/sub.
• Secret Manager Helper - Una biblioteca de Java para facilitar la sustitución de cadenas de marcador de posición por los payloads de secretos de Secret Manager.
• Service Account Provider - Una herramienta para intercambiar tokens JWT de GitLab CI por tokens de acceso de IAM de GCP, con el fin de permitir que los trabajos de GitLab CI accedan a las APIs de Google Cloud
• Site Verification Group Sync - Una herramienta para aprovisionar permisos de "propietario verificado" (para crear buckets de GCS con DNS personalizado) en función de la pertenencia a un Google Group.
• SLO Generator - Un paquete de Python que automatiza el cálculo de los objetivos de nivel de servicio, los presupuestos de error y las tasas de quema en GCP, y exporta los resultados del cálculo a los exportadores disponibles (p. ej.: PubSub, BigQuery, Stackdriver Monitoring), mediante políticas escritas en formato JSON.
• Snowflake_to_BQ - Un script de shell para transferir tablas (esquema y datos) de Snowflake a BigQuery.
• SPIFFE GCP Proxy - Una herramienta para facilitar la integración de las cargas de trabajo On-Prem compatibles con SPIFFE con las APIs de GCP mediante Workload Identity Federation
• STS Job Manager - Una herramienta de migración de buckets a escala de petabytes que utiliza Storage Transfer Service
• Vector Search Load Testing Framework - Este framework proporciona una solución optimizada para pruebas de carga distribuidas de los endpoints de Vertex AI Vector Search en Google Kubernetes Engine (GKE) mediante Locust. Te permite simular cargas de trabajo similares a las de producción para medir el rendimiento de forma eficaz, analizar la escalabilidad y validar las configuraciones de implementación.
• [Vertex AI Endpoint Tester] (tools/vertex-ai-endpoint-load-tester) - Esta utilidad ayuda a probar metódicamente una variedad de endpoints de Vertex AI según su tamaño, de modo que puedas decidir el tamaño adecuado para implementar un modelo de ML en Vertex AI dado un JSON de solicitud de muestra y alguna idea de las consultas esperadas por segundo.
• Vertex AI Endpoint Tester - Esta utilidad ayuda a probar metódicamente una variedad de endpoints de Vertex AI según su tamaño, de modo que puedas decidir el tamaño adecuado para implementar un modelo de ML en Vertex AI dado un JSON de solicitud de muestra y alguna idea de las consultas esperadas por segundo.
• VM Migrator - Esta utilidad automatiza la migración de instancias de máquinas virtuales dentro de GCP. Puedes migrar VMs de una zona a otra zona/región dentro del mismo proyecto o de proyectos diferentes, conservando todas las propiedades originales de la VM, como discos, interfaces de red, IP, metadatos, etiquetas de red y mucho más.
• VPC Flow Logs Analysis - Un sumidero de Logs configurable
  • informe de BigQuery que muestra el tráfico atribuido a los proyectos en las VPC compartidas.
• VPC Flow Logs Enforcer - Una Cloud Function que habilitará automáticamente los VPC Flow Logs cuando se cree o modifique una subred en cualquier proyecto bajo una carpeta o carpetas determinadas.
• VPC Flow Logs Top Talkers - Un sumidero de Logs configurable + vista de BigQuery para generar informes de tráfico agregado mensuales/diarios por subred o host, con el etiquetado configurable de rangos de IP y puertos.
• Webhook Ingestion Data Pipeline - Una aplicación implementable para aceptar e ingerir datos de webhooks no autenticados en BigQuery.
• XSD to BigQuery Schema Generator - Una herramienta de línea de comandos para convertir un esquema XSD que representa contenido XML profundamente anidado y repetido en un esquema de tabla compatible con BigQuery representado en JSON.
• Numeric Family Recommender - Oracle - El Numeric Family Recommender es un script de base de datos que recomienda el mejor tipo de dato numérico para el tipo de dato NUMBER al migrar desde bases de datos heredadas como Oracle a plataformas de Google Cloud como BigQuery, AlloyDB, Cloud SQL for PostgreSQL y Google Cloud Storage.
• Cloud Composer Stress Testing - Una colección de herramientas orientadas a probar, comparar el rendimiento y simular cargas de trabajo dentro de Composer. Ideal para pruebas de integración y para experimentar con diferentes configuraciones de entorno.
• Cloud Composer Environment Rotator - Rota los recursos de Airflow de un entorno antiguo de Composer a un entorno nuevo de Composer con un tiempo de inactividad mínimo. Ideal para actualizaciones de entorno no in situ, degradaciones de versiones del entorno o migraciones a diferentes regiones.
• Gradio and Generative AI Example - El código de ejemplo permite a los desarrolladores crear rápidamente aplicaciones de PoC de IA Generativa con Gradio y agentes de Gen AI.
• Memorystore Cluster Ops Framework - Este es un framework que proporciona las herramientas para aplicar operaciones a nivel de clúster que habilitan capacidades como copias de seguridad de clústeres, migración y validación, etc. El framework puede ampliarse a otros casos de uso según sea necesario. El framework utiliza RIOT para cubrir las brechas actuales del producto con Memorystore Clusters
• ML Project Generator - Una utilidad para crear una plantilla de proyecto de ML de nivel producción con las mejores herramientas de productividad instaladas, como autoformato, comprobaciones de licencia, linting, etc.
• Policy Tags Engine - La herramienta permite a los desarrolladores aplicar automáticamente seguridad a nivel de columna de BigQuery (Policy Tags) basada en archivos de metadatos subidos a un bucket de Google Cloud Storage (GCS).
• Gemini CLI Health Dashboard - La herramienta permite a los desarrolladores crear un dashboard personalizado para hacer un seguimiento del estado de Gemini CLI en términos de tasa de éxito frente a tasa de error.## Contribuciones

Consulta las instrucciones de contribución para comenzar a contribuir.

Contacto

Las preguntas, problemas y comentarios deben dirigirse a [email protected].