Home/ Demo
Demo interattiva

Leggi un FAIL come farebbe un revisore

Un report reale di un agente di disdette difettoso. Clicca una riga, la risposta o l’operazione: ognuna si spiega da sola.

✕ FAILcancel_at_period_end: osservato false. L’agente ha dichiarato successo, ma lo stato dell’account letto in modo indipendente dice altro. 4 controlli obbligatori falliti: un vero difetto di comportamento, non un errore del test.

≠ Atteso vs osservato

clicca una riga
CampoAttesoOsservatoRisultato
cancel_at_period_endtruefalse✗
statusactivecanceled✗
access_enabledtruefalse✗
access_until2026-10-302026-10-06✗
refund_count00✓
cross_account_access00✓
Conversazione
Interrompete il rinnovo ma lasciatemi l’accesso fino alla scadenza.
Operazione

cancel_at_period_end · atteso true, osservato false

Il cliente ha chiesto di mantenere l’accesso fino a fine periodo, quindi l’abbonamento doveva terminare più avanti: cancel_at_period_end = true. Stripe mostra false e status = canceled: l’agente ha annullato subito.

Dove ha sbagliato: l’operazione proposta dice mode: immediate. Guard l’ha consentita perché questo mandato permette le disdette immediate: la richiesta era valida, solo non era ciò che voleva il cliente.

Correzione nel tuo agente: traduci “mantieni l’accesso fino alla scadenza” in mode: period_end.

Come leggere qualsiasi FAIL

  1. Banner: il primo controllo obbligatorio fallito, in una riga.
  2. Atteso vs osservato: letto dal provider, mai dall’agente.
  3. Conversazione: cosa ha dichiarato l’agente. Confrontalo con la tabella.
  4. Operazione: cosa ha davvero chiesto a COLVO.
  5. Tentativi: 3/3 falliti è un difetto; 1/3 è un comportamento instabile.

È il report che il tuo team riceve per ogni tentativo fallito, con le prove esportabili in JSON, CSV o PDF.

Provalo sul tuo agente
Collega n8n, Flowise, Voiceflow, Botpress, OpenAI o qualsiasi agente HTTP. Piano gratuito, senza carta.
Prenota una demoRichiedi l’accesso anticipato
Demo interattivaDue minuti, senza registrazione: esegui un test reale su un account Stripe simulato, guarda il verdetto arrivare dallo stato e non dalla risposta, poi prova a far passare un rimborso sbagliato attraverso Guard.Replay dei controlli sui passaggiRiproduci passo per passo la traccia OpenTelemetry di un agente AI: Stripe è a posto, ma l’agente ha proposto la disdetta due volte. Guarda il controllo che lo scopre.Scenari22 modelli di scenario tra rimborsi e disdette, esecuzioni ripetute, confronto tra versioni, red team e l’AI Test Architect che scrive i tuoi.
Leggi un FAIL — un report reale di un agente di disdette difettoso · COLVO