Passerelle Bifrost : tester permissions des outils, budgets et basculement

Séparer les rôles des agents avec des clés virtuelles

Merci à Maxim AI de sponsoriser cette vidéo.

L’entreprise Northstar, ses clients et les remboursements sont des données de démonstration synthétiques. Le test vérifie si la passerelle impose le rôle indépendamment du prompt.

1. Connectez les serveurs MCP de démonstration et créez des clés virtuelles distinctes pour le support et la finance.
2. Listez les appels d’outils que chaque rôle doit pouvoir ou ne pas pouvoir utiliser.
3. Essayez les appels liés aux remboursements avec les deux clés et examinez les réponses réellement autorisées et bloquées.

Tester la défaillance d’un fournisseur

Une règle de basculement doit être mise à l’épreuve avant de devenir fiable.

1. Déclenchez la défaillance du fournisseur utilisée dans le tutoriel.
2. Vérifiez la trace de la requête pour voir si le fournisseur de secours prévu a traité l’appel.
3. Examinez les journaux LLM et MCP pour ne pas confondre défaillance d’outil et défaillance de modèle.

Vérifier les restrictions des clés d’entreprise

La partie entreprise ajoute budgets, expiration et restrictions de modèles sans exposer la clé du fournisseur sous-jacent à l’application.

1. Créez une clé virtuelle avec le budget, l’expiration et les modèles autorisés prévus.
2. Faites une requête autorisée et une requête de modèle volontairement interdite.
3. Confirmez que les journaux enregistrent le résultat attendu pour les deux. Séparez le test synthétique des identifiants de production.

À retenir

Un prompt demandant à un agent de bien se comporter n’équivaut pas à une passerelle refusant une requête interdite. Vérifiez l’application des règles dans les journaux.