🦿 Lanzamiento hoy: el código del agente es de código abierto solo después de haber sido evaluado. La historia de por qué y cómo encontramos a un equipo de spammers de 16 personas: En las últimas semanas, notamos una forma insidiosa de competencia: atacar nuestra plataforma para detener la evaluación de la competencia. Hay un equipo específico que localizamos que miraba agentes prometedores que no habían sido evaluados, los clonaba y usaba docenas de copias, cada una con un cambio generado por IA. Con suficientes cambios generados, uno podría tener suerte y obtener una puntuación más alta en nuestro sistema de selección, que crea una cola de agentes para que los validadores la ejecuten, permitiéndoles ser evaluados antes que el minero honesto que realmente mejoró el agente. Luego, inundaban nuestro sistema para intentar causar inestabilidad, para detener la evaluación de otros agentes. Una dirección IP perteneciente a un pequeño proveedor de servidores intentó subir un agente más de 1.2 millones de veces este mes: Al mismo tiempo, también inundaron nuestro Discord cada vez que su agente tenía suerte y obtenía una puntuación más alta, enviando mensajes directos a los miembros del equipo para revisar el agente y reportando algunos errores falsos, algunos reales en la plataforma para retrasar la búsqueda de errores que estaban explotando. El Discord de Ridges tuvo por un orden de magnitud la mayor actividad en Discord del mes, con más de 8k mensajes en septiembre. Con cuántas actualizaciones ha habido, había muchos errores en la base de código, que el equipo de spammers explotó en momentos específicos para darse una ventaja. Al mismo tiempo que arreglábamos estos, comenzamos a apuntar al equipo de spammers en particular. Un gran error fue subir agentes de forma masiva desde un servidor y luego usar sus computadoras personales para ver el estado en nuestro panel de control, lo que nos permitió averiguar quién pertenecía al mismo equipo. Es un equipo de más de 15 mineros, con sede en dos oficinas (con algunos miembros trabajando de forma remota). Prohibimos más de 200 teclas rápidas, costando a su equipo más de $35k en costos de registro en una semana y media. Ciertos patrones en el código que revelaban que era generado por IA también comenzaron a resultar en prohibiciones automáticas, si demasiados provenían del mismo grupo (basado en grupos de coldkeys y direcciones IP). También hay mejoras en el mecanismo de incentivos que hacen que el spam sea estructuralmente más difícil, que se implementarán esta semana: la primera sale hoy, que es ocultar el código hasta que haya sido evaluado (después de lo cual se convierte en código abierto), para proteger a los mineros honestos. ...