DeepMind expérimente des évaluations en double aveugle de l'IA de pointe
Google DeepMind a indiqué le 27 août expérimenter ce qu'il présente comme la première évaluation en double aveugle d'un modèle de pointe propriétaire : des tests externes exécutés dans une enceinte cryptographique Confidential Space, de sorte que les évaluateurs ne voient pas les poids de Gemini et que Google ne voit pas les prompts des évaluateurs. Parmi les partenaires figurent l'Institut de sécurité de l'IA de Singapour, OpenMined, AVERI et MLCommons, en commençant par un modèle Gemini Flash Lite sur des benchmarks confidentiels. L'objectif est de limiter la contamination des benchmarks et de renforcer la confiance dans les tests de sécurité sensibles ; il ne s'agit ni d'une nouvelle fonction grand public de Gemini, ni d'Omni vidéo, ni de la plateforme d'échange de cryptomonnaies Gemini.
Traduit avec l'aide de l'IA.