Anthropic añadió esta información a los factores de riesgo de su declaración revisada S-1/A el lunes. Según sus estimaciones internas, la IA podría impulsar pronto una aceleración del progreso suficiente para alcanzar el umbral establecido en su Política de Escalado Responsable, aunque sigue evaluando los datos en los que se basa.
El trasfondo es la automejora recursiva: que la IA adquiera suficiente capacidad para mejorar la propia IA como para acelerar drásticamente los avances posteriores. Anthropic ya utiliza IA en investigación y desarrollo, y afirma que en ocasiones anteriores no detectó una aceleración significativa del desarrollo hasta después de que se produjera.
Anthropic afirma que no prevé poder usar Claude de forma segura para diseñar y construir sucesivos modelos de frontera sin una supervisión o comprensión humana sustancial. Para las empresas que desarrollan con IA, la declaración apunta a un posible cambio en el ritmo de desarrollo de los modelos, no a una prueba de que su creación autónoma esté lista.