Passa al contenuto principale

Watchbot - Test di Non Regressione per i Flussi Bot in ConvyAI

Panoramica​

Watchbot è lo strumento di testing automatizzato di ConvyAI per i flussi conversazionali. Ti consente di salvare script di conversazione e rieseguirli periodicamente per verificare che le modifiche ai flussi non abbiano interrotto il comportamento atteso. Uno script che fallisce indica che il flusso è cambiato in modo da non produrre più l'output atteso.

Vai su Tools → Watchbot.

Crea uno script di test​

  1. Esegui un flusso nel pannello di debug.
  2. Nel pannello di debug, individua la sezione Watchbot Scripts.
  3. Inserisci un nome per lo script e salvalo.

Lo script registra la sequenza esatta di input e gli output testuali attesi da quella conversazione.

Gestisci gli script​

La pagina Watchbot elenca tutti gli script salvati.

Clicca su un pannello script per espanderlo e visualizzare:

  • Il contenuto dello script - i passaggi della conversazione registrata.
  • Le esecuzioni precedenti - la cronologia dei run precedenti con stato pass/fail.

Sul lato destro del pannello puoi:

  • Visualizzare e modificare le variabili dello script.
  • Eliminare lo script.
  • Eseguire lo script in tempo reale.
  • Modificare lo script se ha fallito.

Interpretare i risultati​

Uno script che fallisce è contrassegnato da un'icona pollice verso rosso. Per gli script di tipo single, clicca sull'icona per aprire il modal dei dettagli.

Il modal dei dettagli mostra:

  • La conversazione completa eseguita durante il test.
  • Il punto in cui l'output ha divergito dal risultato atteso.

Dal modal dei dettagli puoi:

  • Ripristinare lo script allo stato precedente.
  • Modificare lo script per adattarlo al comportamento del flusso aggiornato.
note

Uno script Watchbot si aspetta esattamente lo stesso output testuale prodotto durante la registrazione del test iniziale. Qualsiasi cambiamento nell'output testuale del flusso - anche una piccola modifica nel testo - causerà il fallimento dello script.

Argomenti correlati​