Correggi un termine senza riscontro dove l'hai trovato
Quando un termine segnalato come allucinazione è corretto, aggiungilo alla lista dei termini consentiti dalla stessa vista. La modifica vale per tutta la tua istanza.
Governance
e annulla le modifiche.
La governance registra ogni risposta, ogni esecuzione di un agente e ogni modifica alle impostazioni. Quando qualcosa non torna, vedi il perché e lo correggi.
Risposte
Ogni risposta, con il suo punteggio
NeuralSeek conserva ogni domanda e risposta con i punteggi di confidenza e copertura. Vedi minimo, media e massimo, così le risposte deboli dietro un reclamo saltano all'occhio.
Confidenza semantica
console › governance › semantic insights
Leggi i riquadri
Cosa ti dice ogni punteggio
Cosa misura ogni riquadro nelle date che scegli, e cosa significa un valore alto o basso.
Confidenza semanticaQuanto ogni risposta corrisponde alle fonti da cui proviene, come valore minimo, medio e massimo. Le tue soglie di avviso e di confidenza minima possono usare questo punteggio, così una media in calo ti avvisa per tempo.
Esecuzioni degli agenti
Ogni esecuzione di un agente, registrata
Per ogni agente: quante volte è stato eseguito, i tempi di risposta medi e di picco, i guardrail che sono scattati e gli agenti figli che ha chiamato. Trovi subito un agente lento e apri qualsiasi esecuzione passo per passo.
Esecuzioni nel tempo
console › governance › agent details
Impostazioni
Ogni modifica alle impostazioni, reversibile
NeuralSeek registra ogni modifica alla configurazione con l'utente che l'ha fatta e la mostra su una timeline. Puoi annullare qualsiasi impostazione dal registro delle modifiche.
Ogni modifica, con il suo autore
console › governance › configuration insights
Cosa viene registrato
Individua presto i cambi di qualità
Di solito la qualità cala piano: una fonte diventa obsoleta, le domande cambiano, un modello viene aggiornato. Queste misure lo mostrano per prime.
La qualità delle risposte, come distribuzione
Confidenza, copertura, lunghezza della risposta e numero di fonti usate, ognuna con minimo, media e massimo, così vedi l'intera gamma dei risultati.
Qualità per argomento, nel tempo
Copertura e confidenza per ogni argomento, così noti quando un tipo di domanda peggiora.
Quali fonti rispondono davvero
Confidenza e copertura della tua knowledge base, i documenti e gli URL più usati e le valutazioni degli utenti. Usali per regolare la ricerca e decidere quali contenuti tenere aggiornati.
I termini che tornano senza riscontro
I termini che compaiono nelle risposte senza riscontro nelle tue fonti, in ordine, così intervieni per tempo. Se un termine è corretto, aggiungilo alla lista dei termini consentiti dalla stessa vista.
Token, latenza e costi
Token in ingresso e generati, costo per chiamata, velocità e token nel tempo, con un confronto dei costi tra modelli. Il tuo team finance ha i dati sui costi accanto a quelli sulla qualità.
Chi lo usa, e quanto
Vedi chi lo usa e quanto, nella stessa console delle risposte.
Chiudere il cerchio
Ognuna di queste funzioni ti permette di correggere nello stesso punto in cui hai visto il problema.
Risolvi un dubbio sui modelli con i dati
Seleziona i modelli, scrivi una domanda e confronta le risposte affiancate, con costo in token e velocità registrati. La tua scelta del modello si basa su risultati che puoi condividere.
Ripristina una configurazione
Apri il registro delle modifiche, vedi chi ha cambiato quale impostazione e annullala dalla stessa schermata.
Registro di audit completo
NeuralSeek registra ogni domanda, risposta, punteggio e modifica delle impostazioni, con data, ora e autore. Puoi esportare il registro in S3, Splunk o Datadog.
Domande dai team di rischio e sicurezza
Cosa chiedono sul registro i revisori del rischio dei modelli, della sicurezza e della finanza.
Possiamo conservare i log nei nostri sistemi?
Sì. Corporate Logging invia l'attività di Seek e Curate a un endpoint che gestisci tu, così il registro sta accanto agli altri tuoi dati di sicurezza, con la tua politica di conservazione.
Cosa possiamo ricostruire dopo un incidente?
La domanda e la risposta con punteggi e fonti, riprodotte come apparivano in quel momento. Quale agente è stato eseguito e quali agenti figli ha chiamato. E quale utente ha cambiato quale impostazione, e quando.
Inizia oggi a creare con NeuralSeek.
Registrati online e inizia con una prova di due settimane, oppure parla con un nostro esperto per usare NeuralSeek nel tuo cloud.