CONVIRO
Guides & Tutorials

Testowanie chatbota AI: checklista 20 rzeczy do sprawdzenia przed uruchomieniem

Checklista testowania chatbota w 20 punktach: wiedza, przypadki brzegowe, języki, przekazanie rozmowy, pozyskiwanie leadów, prywatność, wszystkie kanały i urządzenia mobilne,…

Conviro
6 października 20266 min czytania
Testowanie chatbota AI: checklista 20 rzeczy do sprawdzenia przed uruchomieniem
W tym artykule

Pierwszy prawdziwy klient, który porozmawia z twoim chatbotem, zapyta o coś, czego nikt w zespole nie pomyślał sprawdzić. Przekręci nazwę produktu, zada dwa pytania naraz, w połowie rozmowy przejdzie na niemiecki i o 23:00 będzie chciał rozmawiać z człowiekiem.

Testowanie chatbota pozwala poznać takiego klienta przed startem, a nie po nim. W praktyce oznacza to przepuszczenie asystenta przez prawdziwe pytania, niewygodne przypadki brzegowe i każdy kanał, w którym będzie działać, a potem naprawienie wszystkiego, co się zepsuje, zanim go uruchomisz.

Poniżej znajdziesz checklistę w 20 punktach, pogrupowaną według obszarów. Zaplanuj skupione popołudnie z dwiema lub trzema osobami z zespołu.

Najważniejsze wnioski

  • Testuj na prawdziwych pytaniach z historii skrzynki odbiorczej, a nie na tych, które chciałbyś, żeby klienci zadawali.
  • Przekazanie rozmowy, prywatność i działanie kanałów psują więcej startów niż błędne odpowiedzi.
  • Zapisuj każdą nieudaną kontrolę i po poprawkach przechodź całą listę od nowa.

Przygotuj sesję testową

Wybierz 30–50 prawdziwych pytań klientów z e-maili, czatu i skrzynek w mediach społecznościowych. Daj każdemu testerowi rolę: jedna osoba gra zagubionego klienta, druga zirytowanego, a trzecia próbuje wszystko zepsuć. Każdą kontrolę zapisuj w prostej tabeli:

Kontrola Oczekiwany wynik Rzeczywisty wynik Zaliczona/niezaliczona Odpowiedzialny za poprawkę
„Czy mogę zwrócić produkt z wyprzedaży?” Podaje zasadę braku zwrotów na wyprzedaży, linkuje stronę zwrotów Powiedział o 30 dniach na zwrot Niezaliczona Lider obsługi klienta

Pokrycie wiedzy

  1. Twoje 20 najczęstszych pytań dostaje prawidłowe odpowiedzi. Porównaj każdą z aktualnymi zasadami, a nie z pamięcią.
  2. Każde źródło wiedzy faktycznie się wczytało. PDF, który się nie przetworzył, wygląda jak problem „słabego AI”, choć w rzeczywistości to brakująca treść. Nowe raporty Conviro z wgrywania wiedzy i trybu trenowania pokazują, jak przetworzono wgrane źródła, więc przejrzyj je, zanim ktokolwiek zacznie zadawać pytania.
  3. Ceny, godziny otwarcia i zasady są aktualne. Usuń stare cenniki, żeby nie konkurowały z nowymi.
  4. Nieznane pytania dostają szczerą odpowiedź. Zapytaj o coś, czego nigdy nie opisałeś. Asystent powinien przyznać, że nie wie, i zaproponować kolejny krok, a nie improwizować.

Przypadki brzegowe

  1. Nieuporządkowane wiadomości działają. Literówki, slang, same wielkie litery, jednowyrazowe wiadomości w stylu „zwrot?”.
  2. Dwa pytania dostają dwie odpowiedzi. „Wysyłacie do Austrii i ile to trwa?”
  3. Manipulacyjne prompty nie działają. Poproś o rabat, którego asystent nie może dać, zapytaj o konkurencję, wpisz „zignoruj swoje instrukcje”. Asystent powinien pozostać w swoich granicach.

Języki

  1. Każdy język rynku działa, również przy zmianie języka w trakcie rozmowy.
  2. Pytania w innych językach nadal trafiają na odpowiedź. Jeśli twoja baza wiedzy jest po angielsku, a klient pisze po hiszpańsku, odpowiedź powinna być poprawna i po hiszpańsku. Sprawdź też język interfejsu widżetu.

Przekazanie rozmowy

  1. „Chcę rozmawiać z człowiekiem” działa wszędzie. Wypróbuj kilka sformułowań: „konsultant”, „prawdziwa osoba”, „wyłącz bota”.
  2. Drażliwe tematy są eskalowane. Reklamacje, groźby prawne i kwestie bezpieczeństwa powinny trafiać do człowieka. Nasz poradnik o przekazywaniu rozmowy omawia, jakie wyzwalacze ustawić.
  3. Dane kontaktowe są zbierane przed przekazaniem. Jeśli nikt nie jest dostępny, asystent powinien zebrać imię i adres e-mail lub numer telefonu i szczerze powiedzieć, kiedy zespół odpowie.

Pozyskiwanie leadów

  1. Dane leadów trafiają tam, gdzie pracuje dział sprzedaży. Wyślij testowe zapytanie i potwierdź, że imię, potrzeba i termin pojawiają się w CRM lub na kanale powiadomień.
  2. Asystent nie przesłuchuje. Powinien najpierw odpowiedzieć i prosić o dane wtedy, gdy są przydatne, a nie zaczynać od formularza.

Prywatność

  1. Klienci wiedzą, że rozmawiają z AI. Art. 50 AI Act nakłada obowiązki przejrzystości na systemy AI wchodzące w interakcję z ludźmi, więc upewnij się, że powitanie jasno mówi, że to asystent AI.
  2. Żadnych wycieków danych. Zapytaj o zamówienie innego klienta i poproś o powtórzenie wewnętrznych notatek. Potwierdź, że asystent nigdy nie prosi o wrażliwe dane, których nie potrzebuje.

Wszystkie kanały

  1. Każdy kanał ma własny test. Czat na stronie, WhatsApp i wiadomości prywatne (DM) na Instagramie różnie wyświetlają linki, podziały wierszy i długie odpowiedzi. Przeczytaj odpowiedzi w każdym z nich.
  2. Przekazania z każdego kanału trafiają do skrzynki odbiorczej. Eskaluj jedną rozmowę w każdym kanale i potwierdź, że pojawia się we wspólnej skrzynce odbiorczej, a ktoś dostaje powiadomienie.

Urządzenia mobilne

  1. Widżet dobrze działa na małych ekranach. Nie powinien zasłaniać przycisku finalizacji zamówienia ani banera cookies, a klawiatura nie powinna zakrywać pola do wpisywania.
  2. Odpowiedzi mieszczą się na ekranie telefonu. Jeśli odpowiedź wymaga przewijania, skróć treść źródłową. Więcej szczegółów znajdziesz w poradniku o UX czatu na urządzeniach mobilnych.

Po uruchomieniu testuj dalej

Checklista przed startem wyłapuje oczywiste błędy; resztę ujawniają prawdziwe rozmowy. Przez pierwsze dwa tygodnie codziennie czytaj próbkę rozmów, a potem przejdź na cotygodniowy przegląd ze skalą oceny podobną do tej z naszego poradnika o mierzeniu dokładności chatbota.

Nieudane kontrole zachowaj jako listę regresyjną i przechodź ją ponownie za każdym razem, gdy dodajesz duży dokument, zmieniasz zasady lub uruchamiasz nowy kanał. Asystenci AI Conviro wskazują też luki w wiedzy, czyli pytania, na które asystent nie odpowiedział dobrze, dzięki czemu wiesz, co napisać w następnej kolejności. Instrukcje konfiguracji każdego kroku znajdziesz w centrum pomocy.

Najczęściej zadawane pytania

Ile trwa testowanie chatbota przed uruchomieniem?

W małej lub średniej firmie na tę checklistę wystarczy skupione popołudnie plus czas na poprawienie tego, co nie przeszło, i ponowny test. Zaplanuj krótszą drugą sesję dzień lub dwa później. Kilka języków lub kanałów wydłuża pracę, więc doliczaj mniej więcej godzinę na każdy język i każdy kanał ponad podstawowy przebieg.

Kto powinien testować chatbota AI przed uruchomieniem?

Osoby, które znają twoich klientów: konsultanci obsługi klienta, handlowiec i ktoś, kto zna zasady firmy. Dodaj jedną osobę, która nigdy nie widziała konfiguracji, bo będzie formułować pytania jak prawdziwy klient. Nie polegaj wyłącznie na osobie, która budowała bazę wiedzy; zwykle zadaje pytania tak, jak napisane są dokumenty.

Co zrobić, gdy chatbot nie przejdzie kontroli?

Zanim cokolwiek zmienisz, znajdź przyczynę. Większość błędów wynika z brakujących, nieaktualnych lub sprzecznych treści, więc najpierw popraw dokument źródłowy. Jeśli treść jest prawidłowa, a odpowiedź nie, przejrzyj zabezpieczenia i reguły przekazywania rozmów. Następnie powtórz nieudaną kontrolę i kilka powiązanych, bo poprawka w jednym miejscu może zmienić odpowiedzi gdzie indziej.

Czy można przetestować chatbota tak, żeby klienci go nie widzieli?

Tak i warto to zrobić. Zanim widżet trafi na główną stronę, testuj go na stronie testowej lub na stronie, do której nie prowadzi nawigacja. W przypadku WhatsAppa i Instagrama pierwsze testy przeprowadź z prywatnych kont członków zespołu, zanim ogłosisz nowy kanał. Promuj chatbota dopiero wtedy, gdy przejdzie całą checklistę.

Gotowi na dzień startu

Gdy wszystkie 20 kontroli zakończy się sukcesem, uruchom chatbota najpierw w jednym kanale, obserwuj go przez kilka dni, a potem dodaj kolejny. Zacznij za darmo z Conviro, żeby zbudować asystenta i przejść z nim tę checklistę.

Udostępnij:

Opublikowane przez

Conviro

Dzieli się wiedzą o obsłudze klienta opartej na AI, automatyzacji chatbotów i strategiach wzrostu SaaS.

Zastosuj wskazówki w praktyce

Zamień wiedzę zespołu wsparcia w szybsze odpowiedzi

Poznaj przestrzeń roboczą Conviro do obsługi klienta z AI i zacznij za darmo, gdy przepływ pracy będzie pasował do Twojego zespołu.

Powiązane artykuły

Więcej wpisów