Athina AIPlateforme collaborative de développement IA pour la création, les tests et la surveillance de fonctionnalités IA.

Athina est une plateforme collaborative de développement IA conçue pour aider les équipes à créer, tester et surveiller des fonctionnalités IA, afin d'accélérer leur mise en production. La plateforme s'adresse à divers rôles au sein d'une équipe IA, incluant data scientists, product managers, équipes QA et ingénieurs, en fournissant des outils et interfaces adaptés. Elle permet aux utilisateurs techniques d'interagir via SDKs et APIs, et aux utilisateurs non techniques d'utiliser une interface no-code pour des tâches telles que la construction de flux IA complexes. Les capacités principales comprennent la gestion et le versionnage complet des invites, prenant en charge divers modèles, y compris les modèles personnalisés, ainsi que des fonctionnalités de test et d'exécution des invites. Elle offre une évaluation exhaustive des jeux de données, avec plus de 50 métriques d'évaluation prédéfinies et la possibilité de configurer des évaluations personnalisées. La plateforme supporte également la régénération expérimentale des jeux de données en permettant aux utilisateurs de changer de modèles, d'invites ou de retrieveurs facilement. Athina intègre des équipes QA humaines pour travailler aux côtés des évaluations IA, permettant de vérifier les résultats d'évaluation et d'annoter les jeux de données. Les utilisateurs peuvent prototyper des chaînes IA puissantes et les exécuter programmatique, et les data scientists peuvent comparer les jeux de données côte à côte via une interaction SQL. Pour la production IA, Athina propose des fonctionnalités d'observabilité robustes, incluant une surveillance puissante spécifiquement conçue pour les traces LLM. Elle capture chaque étape des flux LLM, permettant la relecture et l'analyse. Les évaluations en ligne continues peuvent être configurées pour s'exécuter sur les journaux entrants, offrant une visibilité continue sur la précision. Les analyses segmentées aident les équipes à comprendre comment les performances des modèles changent avec le temps et à travers différents segments, avec la capacité de comparer les scores d'évaluation par invite, modèle, sujet ou ID client. Les points forts clés incluent la protection totale des données grâce à des contrôles d'accès granulaires et la possibilité d'un déploiement auto-hébergé au sein du VPC de l'utilisateur. Athina est également conforme SOC-2 Type 2 et supporte l'intégration avec des modèles et fournisseurs personnalisés tels qu'Azure OpenAI et AWS Bedrock.