SciUniverse testinde en iyi model laboratuvar görevlerinin yüzde 45'ini geçti

C5R Corp'un geliştirdiği SciUniverse ölçütü, yapay zeka sistemlerinin büyük ölçüde otomatik bir bilim laboratuvarını ne kadar yönetebildiğini ölçüyor. Ölçüt, 17 görev ailesine dağılmış 92 görevden oluşuyor: numune hazırlama, cihaz kontrolü, protokol uyarlama, deneyler arasında öğrenme, tesis yönetimi ve gerçek ölçümlerin yorumlanması. Görevler kimya, biyoloji ve malzeme bilimine uzanıyor. NMR verisinden yapı belirleme, hücresiz bir sistemde floresan protein üretme ve BaTiO3 tablet presleme bunlardan bazıları.

Import AI bülteninde aktarılan sonuçlara göre en yüksek başarıyı yüzde 45,3 ile Claude Fable 5.1 aldı; görev başına maliyeti 40,61 dolar oldu. OpenAI'ın Astra modeli yüzde 32,5 başarı ve 52,37 dolarla ikinci, Claude Opus 5 ise yüzde 30,5 ve 46,31 dolarla üçüncü sırada yer aldı.