Patronus AI

Patronus AI est une startup américaine spécialisée en évaluation et test des LLMs : 'PatronusEval' pour mesurer hallucinations, biais, sécurité. 'Lynx' est leur modèle d'évaluation open-source. Spécialiste de l'évaluation LLM (vs gouvernance large). Lynx open-source — évaluation auto-hébergeable. Intégration CI/CD pour tester chaque déploiement (qualité prouvée à chaque release). Levée de fonds importante (Notable + Lightspeed). Pour ML/AI Engineers d'ETI qui déploient des LLMs (RAG, agents, copilotes) et veulent industrialiser les tests qualité (vs tester à la main), c'est l'outil. Outil très technique (pas pour Compliance Officers). Périmètre focus évaluation. Tarif sur devis (50-200 K $/an). Idéal pour équipes ML qui déploient des LLMs en production. À envisager si vous releasez régulièrement de nouveaux LLMs personnalisés.