LLM-urile nu sunt "compresoare neclare ale sensului", ci "rearanjoare perfecte ale structurii". Sugerează că seamănă mai mult cu sisteme de criptare dinamice, reversibile decât ca rezumatoare. Modelul nu uită; doar re-reimagine. "Înțelegerea" în aceste sisteme ar putea să nu fie compresie, ci geometrie – organizarea informațiilor în moduri care fac relațiile calculabile fără a pierde fidelitatea.

Am presupus mult timp că cogniția este despre simplificare, comprimare, reducere – luarea datelor dezordonate și reducerea lor în sens. Dar această lucrare implică faptul că transformatoarele nu "fierb" deloc; Ele efectuează rearanjări extrem de detaliate, reversibile.

La naiba, tocmai am simțit AGI