A Sakana AI "AI Scientist-v2" rendszere 2025 márciusában jelentős mérföldkövet ért el - megírta az első, teljes mértékben mesterséges intelligencia által generált tudományos cikket, amely sikeresen átment a szakértői lektoráláson (peer-review) az ICLR konferencia egyik műhelyén. A kutatócsoport három AI-generált tanulmányt nyújtott be, amelyek közül egy - a "Compositional Regularization: Unexpected Obstacles in Enhancing Neural Network Generalization" című - 6,33-as átlagpontszámot ért el, meghaladva az elfogadási küszöböt, bár a publikálás előtt azt végül visszavonták.
Az AI Scientist-v2 teljesen önállóan készítette a tanulmányt, emberi beavatkozás nélkül: tudományos hipotézist alkotott, kísérleteket tervezett, kódot írt és finomított, végrehajtotta a kísérleteket, elemezte és vizualizálta az adatokat, valamint a teljes kéziratot megírta a címtől a hivatkozásokig. Ez az áttörés azt mutatja, hogy a mesterséges intelligencia képes önállóan olyan kutatást generálni, amely megfelel a szakértői lektorálás szigorú követelményeinek - nyilatkozta a Sakana AI csapata. A rendszer azonban néhány "kínos" hivatkozási hibát is vétett, például helytelenül tulajdonított egy módszert egy 2016-os tanulmánynak az eredeti 1997-es munka helyett, továbbá a műhelytanulmányok elfogadási aránya (60-70%) magasabb, mint a fő konferenciaanyagoké (20-30%), és a Sakana beismerte, hogy a generált tanulmányok egyike sem érte el a saját belső minőségi küszöbüket a fő ICLR konferencia publikációkhoz.
A kísérlet a Brit Kolumbiai Egyetem és az Oxfordi Egyetem kutatóinak együttműködésével, valamint az ICLR vezetőségének teljes támogatásával és a Brit Kolumbiai Egyetem Intézményi Felülvizsgálati Bizottságának (IRB) jóváhagyásával zajlott, és fontos kérdéseket vet fel az AI-generált tudományos publikációk átláthatóságáról, etikájáról és jövőjéről. A Sakana AI hangsúlyozta, hogy folyamatos párbeszédet kívánnak fenntartani a tudományos közösséggel e technológia fejlődéséről, megakadályozva azt a lehetséges forgatókönyvet, ahol az AI-generált kutatások egyetlen célja a lektorálási folyamat sikeres teljesítése lenne, ami jelentősen csökkentené a tudományos szakértői értékelés hitelességét.
Források:
1.

2.

3.
