Sakana AI створила систему AI-рецензування статей, що виявляє 73% ключових помилок
Sakana AI’s LLM Peer Review System Catches 73% of Core-Claim Errors
Компанія Sakana AI опублікувала дослідження Beyond Imitation про систему Multi-Layered Review (MLR), яка перевіряє наукові статті на приховані помилки у твердженнях, а не просто імітує стиль людських рецензій. За даними компанії, система на основі моделей Claude виявила 73,43% навмисно вставлених помилок у ключових твердженнях — приблизно у п'ять разів більше, ніж найкращий аналог серед протестованих систем. Вартість однієї рецензії становить близько 0,47 долара, водночас на реальних відкликаних статтях з arXiv точність виявлення помилок виявилася значно нижчою — 16,11%.
Мовою оригіналу · EN
Sakana AI's Multi-Layered Review system caught 73.43% of core-claim errors, about 5x the best baseline AI reviewer.
Читати оригінал на MarkTechPost →
Чому в стрічці: Конкретний новий AI-інструмент з вимірюваним результатом дослідження — відповідає стабільному інтересу до AI.