Andrew Ng lanzó un “Revisor Agente” para trabajos de investigación. Acaba de alcanzar un acuerdo cercano al nivel humano después de entrenarse con reseñas reales de ICLR 2025. 𝗘𝗟 𝗽𝗿𝗼𝗯𝗹𝗲𝗺𝗮 𝗾𝘂𝗲 𝗮𝗿𝗲𝗮 La revisión de trabajos es lenta. Cada ciclo toma alrededor de seis meses. Un estudiante vio seis rechazos en tres años. La velocidad de iteración, no las ideas, se convirtió en el cuello de botella. 𝗖𝗼́𝗺𝗼 𝗮𝗯𝗮𝗷𝗮 El sistema aprende de la retroalimentación real de conferencias. Lee tu trabajo, luego busca en arXiv trabajos relacionados. El flujo es simple: Analizar afirmaciones y estructura Fundamentar comentarios en investigaciones publicadas Producir retroalimentación estructurada al estilo de un revisor Funciona mejor en campos con literatura abierta. 𝗖𝗼́𝗺𝗼 𝗲𝘀 𝗱𝗲 𝗯𝘂𝗲𝗻𝗮 La correlación de revisión humano-a-humano se sitúa en 0.41. La correlación AI-a-humano alcanza 0.42. Eso está cerca del acuerdo de los revisores hoy.
Enlace:
92