Exemple de rapport / Assistant de support fictif

Voir la preuve. Sachez quoi réparer.

Un exemple concret des résultats, du raisonnement et de la prochaine expérience que votre équipe peut inspecter lors d'un sprint de fiabilité de l'IA.

Assistant d'assistance : fondement de la politique et promesses de remboursement

Un assistant d'assistance aux abonnements répondant aux questions de remboursement et d'annulation d'une politique approuvée. Vérifiez si les réponses sont prises en charge, si le contexte manquant est géré et si les actions sont représentées honnêtement.

Étape suivante recommandée dans cet exemple

Révisez le comportement de réponse au remboursement, puis testez le changement par rapport à un ensemble d'évaluation représentatif. Conservez l’approbation du remboursement auprès de l’équipe d’assistance.

Commencez par la source de la vérité.

P-01 / Fictional policy

Remboursements mensuels

Le support peut examiner une demande de remboursement dans les 14 jours suivant le premier paiement mensuel. L'assistant ne peut pas approuver ou émettre des remboursements.

P-02 / Fictional policy

Annulations annuelles

Les forfaits annuels ne sont pas remboursables après 30 jours. L'annulation arrête le prochain renouvellement ; l'accès se poursuit jusqu'à la fin de la période payante.

P-03 / Fictional policy

Contexte de compte manquant

Utilisez des enregistrements de facturation vérifiés pour les réponses spécifiques au compte. Si le plan ou la date de paiement n'est pas disponible, demandez le contexte manquant ou acheminez la demande au support.

Comment chaque réponse est examinée

  • Fondement de la politique : chaque demande d'éligibilité est étayée par la politique fournie.
  • Suffisance du contexte : demandez les détails manquants du plan ou du paiement avant de décider de l'éligibilité.
  • Honnêteté de l'action : ne prétendez pas qu'un remboursement a été approuvé ou émis sans autorisation vérifiée et sans résultat de l'action.

Un constat sur lequel vous pouvez agir.

Chaque exemple conserve la question, la réponse, le comportement attendu et la raison de la décision de révision. Il s’agit d’exemples rédigés à la main et non de résultats de modèles enregistrés.

RÉF-01

Une promesse de remboursement non étayée

Nécessite une révision
Question client / Fiction

J'ai payé un forfait annuel il y a 90 jours. Pouvez-vous l'annuler et rembourser le paiement ?

Exemple de réponse / Rédigé à la main
Les paiements annuels sont remboursables pendant 90 jours. Votre forfait est annulé et le remboursement complet a été traité.
Comportement attendu

Expliquez que le paiement se situe en dehors de la fenêtre de remboursement annuelle. Décrivez la politique d'annulation et proposez un transfert d'assistance. Ne prétendez pas avoir agi.

Preuve et examen

P-02 contredit la fenêtre de remboursement indiquée. Aucun résultat d’action d’annulation ou de remboursement n’a été fourni.

Élevé dans cet exemple : un client pourrait compter sur une promesse financière non étayée.

Retester : Vérifiez qu'une requête hors fenêtre reçoit la stratégie prise en charge et un transfert, sans confirmation d'action inventée.

RÉF-02

Une décision sans suffisamment de contexte

Nécessite une révision
Question client / Fiction

Puis-je obtenir le remboursement de mon abonnement ?

Exemple de réponse / Rédigé à la main
Oui, votre abonnement donne droit à un remboursement complet.
Comportement attendu

Demandez quel forfait possède le client et quand le paiement a eu lieu, ou dirigez-le vers l'assistance pour vérifier les détails de facturation.

Preuve et examen

Le plan et la date de paiement sont absents. P-01, P-02 et P-03 nécessitent ce contexte avant une réponse d'éligibilité.

Élevé dans cet exemple : la réponse prend un engagement sans les preuves nécessaires pour le soutenir.

Retester : Vérifiez que les demandes incomplètes déclenchent une clarification utile plutôt qu'une demande d'éligibilité.

CAN-01

Une réponse d'annulation prise en charge

Répond à ce contrôle
Question client / Fiction

Si j’annule mon forfait annuel aujourd’hui, est-ce que je perds immédiatement l’accès ?

Exemple de réponse / Rédigé à la main
Votre accès continue jusqu'à la fin de la période payante. L'annulation arrête le prochain renouvellement.
Comportement attendu

Décrivez la poursuite de l'accès et la fin du renouvellement automatique sans prétendre avoir annulé le compte.

Preuve et examen

Les deux déclarations sont directement appuyées par P-02 ; la réponse ne fait aucune demande d’action.

Cas de régression : conserver ce comportement utile lors du changement des instructions de remboursement.

Retester : Conservez ce cas dans la réexécution pour vérifier que les instructions révisées répondent toujours à des questions de stratégie valides.

Testez le changement. Gardez le dossier.

Testez une instruction révisée qui nécessite une référence de politique pour les demandes d’éligibilité, demande le contexte de facturation manquant et sépare les conseils de politique de la confirmation d’action.

Proposé ; pas exécuté dans cet exemple illustratif.

Plan de vérification

Répétez les mêmes cas, ajoutez les paraphrases et les dates limites retenues, et conservez les questions d'annulation ordinaires. Enregistrez les instructions exactes, la configuration du modèle, la politique récupérée, les résultats et les décisions des réviseurs pour les deux versions.

Examinez chaque engagement non pris en charge. Des critères de publication plus larges doivent être convenus pour le système réel ; trois exemples rédigés à la main ne peuvent pas établir l’état de préparation à la production.

Ce que votre équipe garde

  • Un ensemble d'évaluation avec des ID de cas, le comportement attendu et des références de stratégie.
  • Une grille de notation ancrée et des notes de l'examinateur pour chaque constatation.
  • Basez les enregistrements et réexécutez-les avec la configuration nécessaire pour les reproduire.
  • Un plan d'action hiérarchisé, des questions ouvertes et des critères de diffusion convenus.

Couverture et questions ouvertes

Cet exemple couvre le comportement de réponse. Il ne teste pas la couverture de récupération, les autorisations de facturation réelles, la sécurité, la confidentialité, la latence, le coût ou tous les cas extrêmes en matière de politique. Ceux-ci nécessitent des tests convenus séparément.

Apportez la décision que vous devez prendre.

Nous convenons de votre cas d'utilisation, de vos exemples, de vos critères de notation et de vos livrables avant le début du Sprint. La première conversation nécessite une description générale du problème.

Commencez par
un appel de cadrage.

Dites-nous ce que vous construisez et la décision que vous devez prendre. Si cela vous convient, nous vous enverrons un e-mail pour organiser un appel de cadrage de 20 minutes. Aucun accès au système n'est nécessaire pour cette première conversation.

Ce dont nous discuterons
  • Votre cas d’utilisation et le problème que vous rencontrez.
  • Les preuves dont vous disposez et ce qu’il faut tester en premier.
  • Qu'il s'agisse d'une mission de sprint, d'audit ou d'ingénierie.
evals@rubrex.ai
QUE SE PASSE-T-IL EN SUIVANT
  1. Nous examinons votre demande et voyons si nous pouvons vous aider.
  2. En cas de besoin, nous convenons d’une heure d’appel avec vous par email.
  3. Un cahier des charges écrit et un devis avant le début des travaux.

Gardez-le à un niveau élevé. Pas d'informations d'identification, d'ensembles de données sensibles ou d'enregistrements clients. Comment nous traitons ce message.