Construisez un harness d'évaluation d'agents IA code-first en 2026 qui score la complétion de tâches, la sélection d'outils, le coût, la latence, la sécurité et le déterminisme — avec des gates CI et un corpus de sécurité de 30 payloads.
Empêchez les couts des API LLM de s'envoler. Un guide pratique pour la limitation de debit, les budgets de tokens par utilisateur, le cache a correspondance exacte et les tableaux de bord de couts avec un proxy open-source deployable.
Tutoriel TypeScript pas à pas pour construire un harness d'évaluation d'agent IA avec gating CI. Scorez complétion de tâches, sélection d'outils, coût, latence, sécurité et déterminisme de bout en bout.
Construisez et déployez un proxy d'API LLM avec limitation de débit par clé, budgets de tokens, cache exact-match, tableaux de bord de coûts et alertes webhook en utilisant TypeScript et SQLite.