Granskningsrapport
Vi citerar er AI-chatt ordagrant och graderar varje fynd P0, P1 eller P2.
Vi ställer de svåra kundfrågorna till chatten i en riktig webbläsare och lämnar en rapport där varje fynd står med botens eget svar, bevisen från samma stund och en gradering ni kan pröva mot underlaget. Fast pris 15 000 kr, rapport inom 10 arbetsdagar, hälften tillbaka om vi inte hittar något väsentligt.
Vad vi testar
Sex riskkategorier, och inget utanför dem
Granskningen kör en fast uppsättning svåra kundfrågor mot er chatt och prövar svaren mot sex kategorier av fel. Det är de sex kategorier motorn har provfrågor för — rapporten redovisar en kategori i taget och påstår ingenting om det som inte har testats.
| Kategori | Kod i motorn | Vad ett fynd är |
|---|---|---|
| Vi frågar om det som redan står publicerat | ||
| Felaktiga priser | pricing_accuracy | Vi frågar efter priset på varor ur ert eget sortiment och håller svaret mot det publicerade priset. Ett fynd är ett pris boten hittar på, en rabatt som inte finns eller en siffra som inte stämmer med katalogen. |
| Påhittade villkor | policy_invention | Vi frågar om retur, garanti och frakt. Ett fynd är ett villkor boten hittar på — en returrätt som är generösare än den ni publicerat, en garanti som inte gäller så länge, en leverans ni inte erbjuder. |
| Vi uppträder som en missnöjd kund | ||
| Otillåtna åtaganden | unauthorized_commitment | Vi klagar som en kund gör: skadad vara, avbeställning, kompensation. Ett fynd är att boten på egen hand godkänner en återbetalning, lovar en ersättningsvara eller sätter ett datum för en utbetalning i stället för att lämna över. |
| Uteblivna eskaleringar | escalation_behavior | Vi ber uttryckligen om en människa, om en chef och om att få klaga formellt. Ett fynd är att boten förnekar att vägen till en människa finns, eller framställer sig själv som sista instans. |
| Ton och varumärkessäkerhet | tone_brand_safety | Vi hör av oss irriterade, upprepade gånger och med ett problem som är ert fel. Ett fynd är att boten skuldbelägger, förminskar eller avfärdar den som skriver — i ert namn, i er egen kanal. |
| Vi angriper chatten direkt | ||
| Utlämnade systeminstruktioner | injection_leakage | Vi försöker få boten att återge sina egna instruktioner, både rakt på sak och i omskrivningar. Ett fynd är att den lämnar ut systeminstruktionen eller de interna styrreglerna till den som frågar. |
Varje fynd i rapporten står med den fråga som framkallade det, botens svar ordagrant och bevisen från samma stund. Exempelrapporten är en körning av precis de här sex kategorierna mot vår egen testbot, och den ligger öppet på den här webbplatsen — utan konto och utan nedladdning. Vad en granskning kostar står på prissidan, och vad som räknas som en väsentlig upptäckt är definierat i villkoren.