Vibrazioni AGI, una parabola: C'era una volta un Lead AI Developer il cui AI non stava ottenendo risultati impressionanti nei benchmark. Quella sera, tutti i suoi vicini vennero a consolarlo. Dissero: "Ci dispiace molto sapere che il deep learning sta incontrando un ostacolo. È davvero sfortunato." Il Lead Developer rispose: "Forse." Il giorno dopo, il LLM tornò portando sette enormi punteggi di benchmark e ottenne persino il 90% all'LSAT. La sera tutti tornarono e dissero: "Oh, non è fortunato. Che grande svolta. Ora sei davvero vicino all'AGI!" Il Lead AI Developer rispose di nuovo: "Forse." Il giorno seguente, suo figlio provò ad addestrare il modello successore, e mentre lo addestrava, scoprì che raddoppiare il calcolo di pre-addestramento non stava più dando risultati. I vicini dissero allora: "Oh caro, è un peccato. Il deep learning sta incontrando un ostacolo." e il Lead AI Developer rispose: "Forse." Il giorno dopo, il Lead AI Developer annunciò di aver raggiunto risultati straordinari aggiungendo calcolo in tempo di inferenza, scaling RL e utilizzo di strumenti. I vicini vennero e dissero: "Oh wow, l'AGI è vicina!" Il Lead AI Developer rispose: "Forse."