Corrige un término sin respaldo donde lo encontraste
Cuando un término marcado como alucinación es correcto, agrégalo a la lista de permitidos desde la misma vista. El cambio se aplica en toda tu instancia.
Gobernanza
y revierte los cambios.
La gobernanza registra cada respuesta, cada ejecución de un agente y cada cambio de configuración. Cuando algo no se ve bien, puedes ver por qué y corregirlo.
Respuestas
Cada respuesta, con su puntuación
Cada pregunta y respuesta se guarda con sus puntuaciones de confianza y cobertura. Ves el mínimo, el promedio y el máximo, así que las respuestas débiles detrás de una queja saltan a la vista.
Confianza semántica
console › governance › semantic insights
Cómo leer las tarjetas
Qué te dice cada puntuación
Qué mide cada tarjeta en el rango de fechas que elijas y qué significa un valor alto o bajo.
Confianza semánticaQué tan bien coincide cada respuesta con las fuentes de las que salió, como mínimo, promedio y máximo. Tus niveles de advertencia y de confianza mínima pueden usar esta puntuación, así que un promedio que baja te avisa a tiempo.
Ejecuciones de agentes
Cada ejecución de un agente, registrada
Para cada agente: cuántas veces se ejecutó, sus tiempos de respuesta promedio y máximo, los guardrails que se activaron y los subagentes que llamó. Encuentra rápido un agente lento y abre cualquier ejecución paso a paso.
Ejecuciones en el tiempo
console › governance › agent details
Configuración
Cada cambio de configuración, reversible
Cada cambio en tu configuración queda registrado con el usuario que lo hizo y aparece en una línea de tiempo. Puedes revertir cualquier ajuste desde el registro de cambios.
Cada cambio, con su autor
console › governance › configuration insights
Qué se registra
Detecta a tiempo los cambios de calidad
La calidad suele bajar poco a poco: una fuente se desactualiza, las preguntas cambian, se actualiza un modelo. Estas mediciones lo muestran primero.
La calidad de las respuestas, como distribución
Confianza, cobertura, longitud de la respuesta y cuántas fuentes usó una respuesta, cada una con su mínimo, promedio y máximo, para que veas todo el rango de resultados.
Calidad por tema, en el tiempo
Cobertura y confianza de cada tema, para que detectes cuándo empeora un tipo de pregunta.
Qué fuentes responden de verdad
La confianza y la cobertura de tu base de conocimientos, los documentos y URL más usados y las calificaciones de los usuarios. Úsalos para ajustar la búsqueda y decidir qué contenido mantener al día.
Los términos que aparecen una y otra vez sin respaldo
Los términos que aparecen en las respuestas sin respaldo en tus fuentes, en orden, para que actúes a tiempo. Si un término es correcto, agrégalo a la lista de permitidos desde la misma vista.
Tokens, latencia y costo
Tokens de entrada y generados, costo por llamada, velocidad y tokens en el tiempo, con una comparación de costos entre modelos. Tu equipo de finanzas tiene los datos de costo junto a los de calidad.
Quién lo usa y cuánto
Mira quién lo usa y cuánto, en la misma consola que las respuestas.
Cerrar el ciclo
Cada una de estas funciones te permite corregir en el mismo lugar donde viste el problema.
Resuelve una duda sobre modelos con evidencia
Selecciona modelos, escribe una pregunta y compara las respuestas lado a lado, con el costo en tokens y la velocidad registrados. Tu elección de modelo queda respaldada por resultados que puedes compartir.
Revierte una configuración
Abre el registro de cambios, mira quién cambió cada ajuste y reviértelo desde la misma pantalla.
Registro de auditoría completo
Cada pregunta, respuesta, puntuación y cambio de configuración queda registrado con fecha, hora y autor. Expórtalo a S3, Splunk o Datadog.
Preguntas de los equipos de riesgo y seguridad
Lo que preguntan sobre el registro quienes revisan el riesgo de modelos, la seguridad y las finanzas.
¿Podemos guardar los registros en nuestros propios sistemas?
Sí. El registro corporativo envía la actividad de Seek y Curate a un endpoint que tú administras, así que el registro queda junto a tus otros datos de seguridad, con tu propia política de retención.
¿Qué podemos revisar después de un incidente?
La pregunta y la respuesta con sus puntuaciones y fuentes, reproducidas tal como aparecieron en ese momento. Qué agente se ejecutó y qué subagentes llamó. Y qué usuario cambió qué ajuste, y cuándo.
Empieza hoy a crear con NeuralSeek.
Regístrate en línea y empieza con una prueba de dos semanas, o habla con un experto de NeuralSeek sobre cómo usar NeuralSeek en tu propia nube.