Ir al contenido

Gobierno

Gobierno reúne la trazabilidad, los costos, los riesgos y los reportes del workspace. Tiene cuatro pestañas: Resumen, Incidentes, Reportes y Auditoría. Todos los roles las pueden ver.

Las métricas cuentan solo conversaciones reales por los canales: no incluyen las pruebas del Estudio ni las evaluaciones.

Filtros: período («7 días», «30 días», «90 días»), ambiente («Producción», «Borrador» o ambos), canal y agente.

Indicadores

Indicador Qué mide
Conversaciones Conversaciones en el período y mensajes respondidos.
Costo del período Gasto en modelos. Debajo: el avance del presupuesto del mes («62 % de US$ 50») o el costo por mensaje.
Satisfacción Porcentaje de respuestas valoradas como útiles sobre el total de valoraciones de los usuarios. Ámbar debajo de 80 %, rojo debajo de 60 %.
Incidentes de guardrails Cuántas veces actuaron las protecciones, con los dos tipos más frecuentes.

Gráficos

  • Actividad: conversaciones, mensajes o costo por día.
  • Calidad del servicio: latencia promedio, errores o incidentes por día.

Por agente: conversaciones, mensajes, errores, costo y latencia promedio de cada agente, con su versión en producción.

Desglose (desplegable): por canal, por modelo (tokens y costo; «Frenados antes del modelo» son mensajes que un guardrail frenó y no consumieron tokens), por tipo de incidente, y derivaciones y valoraciones.

Cada incidente es una protección que actuó: un dato personal enmascarado, un intento de manipular al agente, un tema bloqueado, una fuga en la respuesta. Ver Guardrails.

  • Incidentes por día y Datos personales protegidos (los tipos de dato más enmascarados).
  • Registro de incidentes, del más reciente al más antiguo. Se filtra por tipo («Datos personales», «Prompt injection», «Fuga en respuesta», «Tema bloqueado») y por agente.
Columna Qué muestra
Cuándo Fecha y hora.
Tipo El tipo, con «Alta» si es de severidad alta (prompt injection, fuga en respuesta).
Qué se hizo «Enmascarado», «Bloqueado» o «Registrado».
Detalle Tipos de dato («DNI · Email ×2»), puntaje y patrones detectados, el tema, el largo o el gasto. Nunca el dato.
Agente y canal Dónde ocurrió.
Ver traza Abre la conversación en esa respuesta.

«Cómo protege Sherlock» abre un resumen de las protecciones activas.

El reporte mensual de gobierno resume el mes para el cliente, en un documento A4 listo para imprimir o guardar como PDF.

  1. En la pestaña Reportes, elegí el mes (los últimos 12). El mes en curso se actualiza hasta hoy.
  2. Hacé clic en «Imprimir o guardar PDF». Se abre el reporte en una pestaña nueva.
  3. En el diálogo de impresión, elegí «Guardar como PDF».

El reporte cuenta solo producción y tiene:

Sección Contenido
Portada Mes, workspace, cliente, período, agentes en producción y presupuesto.
1. Resumen ejecutivo Un párrafo con lo central del mes, puntos de atención (presupuesto, errores, intentos de manipulación, fugas, derivaciones pendientes, satisfacción baja) y ocho cifras clave.
2. Uso y costos Conversaciones y costo por día, costo frente al presupuesto, por canal y por modelo.
3. Protecciones e incidentes Incidentes por tipo.
4. Derivaciones y satisfacción Derivaciones, pendientes y valoraciones.
5. Agentes Cada agente con su versión, evaluación, publicaciones, conversaciones y costo.
6. Cambios relevantes del mes Publicaciones, vueltas atrás, agentes, conocimiento y canales, desde la auditoría.
7. Consultas más frecuentes Las preguntas más repetidas, con los datos personales enmascarados.

Para compartirlo, enviá el PDF. Las personas del cliente con rol Observador también pueden generarlo desde su consola.

Cada publicación, cambio de configuración, acceso y respuesta de operador queda registrado, con quién lo hizo y cuándo.

  • Buscar por persona, acción, resumen o IP, y filtrar por categoría: «Acceso y usuarios», «Agentes», «Versiones y evaluaciones», «Conocimiento», «Canales y API keys», «Conversaciones», «Herramientas», «Modelos», «Workspace e instancia».
  • Cada fila muestra cuándo, quién, la acción, un resumen y sobre qué. Al desplegarla: el código de la acción, la entidad, el workspace, la IP y los detalles.
  • «Exportar CSV» descarga los registros cargados y filtrados, listos para abrir en Excel.

Ejemplos de lo que se registra: «Inicio de sesión», «Borrador editado», «Versión publicada» (con «sin evaluación» y el motivo si fue una excepción), «Rollback de versión», «Documentos subidos», «Fragmento revisado», «Canal creado», «API key creada», «Respuesta de operador», «Miembro agregado».

La búsqueda y la exportación trabajan sobre los registros cargados: usá «Cargar más» para incluir registros anteriores. Los administradores tienen además una auditoría global de toda la instancia en Administración.