Andrew Ng, araştırma makaleleri için bir "Ajanik Reviewer" yayımladı. Gerçek ICLR 2025 incelemeleri üzerine eğitim aldıktan sonra neredeyse insan düzeyinde bir anlaşmaya ulaştı. Hedeflediği sorun Makale incelemesi yavaş ilerler. Her döngü yaklaşık altı ay sürer. Bir öğrenci üç yıl boyunca altı reddedildi. Fikirler değil, yineleme hızı darboğaz haline geldi. Nasıl çalışır Sistem, gerçek konferans geri bildirimlerinden öğrenir. Makalenizi okuyor, sonra ilgili çalışmaları arar. Akış basit: İddiaları ve yapıyı analiz edin Yayımlanmış araştırmalarda taban yorumları Yapılandırılmış eleştirmen tarzı geri bildirim üretin Açık literatürü olan alanlarda en iyi şekilde çalışır. Ne kadar iyi İnsan-insan inceleme korelasyonu 0.41 seviyesinde duruyor. Yapay zeka ile insan arasındaki korelasyon 0.42'ye ulaşır. Bu, bugün neredeyse bir inceleme anlaşması.
Bağlantı:
89