¿Por qué las IA pueden programar durante 1 hora pero no durante 10 horas? Una explicación simple: si hay un 10% de probabilidad de error por cada paso de 10 minutos (por decir algo), la tasa de éxito es: 1h: 53% 4h: 8% 10h: 0.002% @tobyordoxford ha probado esta teoría de 'tasa de error constante' y ha demostrado que se ajusta bien a los datos. la probabilidad de éxito disminuye exponencialmente.
La probabilidad de error de los humanos disminuye más lentamente, por lo que eventualmente ganan en horizontes más largos. Esto podría deberse a un bastión restante de ventaja humana (o simplemente porque los datos humanos se promedian sobre muchos niveles de experiencia).
Punto crucial: la tasa de error se está reduciendo a la mitad cada ~5 meses; a ese ritmo, alcanzamos sistemas que pueden realizar tareas de 10 horas en 1.5 años, y tareas de 100 horas otro 1.5 años después.
1,25M