Абсолютно очарован тем, как берклийские рационалисты остаются твердо приверженными окончательному приоритету символического ИИ, несмотря на три десятилетия доказательств обратного.

Теорема: Максимально возможная продолжительность вычислительной сингулярности составляет 470 лет. Доказательство: Вместимость FLOPs всех компьютеров, существовавших в 1986 году, оценивается максимум в 4.5e14 (Хилберт и др. 2011). Основываясь на публичной выручке Nvidia и характеристиках GPU, эта вместимость возросла как минимум до 1e22 FLOPs на 2025 год. Эта разница подразумевает средний темп роста 55% в год с 1986 года. Теперь обратите внимание, что физическая вселенная может поддерживать максимум 10^104 FLOPs (Ллойд 2000). Следовательно, даже если мы допустим открытие путешествий быстрее света, вычислительная сингулярность — т.е. исторический период повышенной социальной и технологической непредсказуемости, вызванный быстрым ростом мировой вычислительной мощности — не может продолжаться дольше, чем (2025 - 1986) + (104-22)/log_10(1.55) ~= 470 лет. Ссылки: S. Ллойд, "Окончательные физические пределы вычислений," *arXiv preprint quant-ph/9908043*, 1999, doi:10.48550/arXiv.quant-ph/9908043. M. Хилберт и P. Лопес, "Технологическая способность мира хранить, передавать и вычислять информацию," *Наука*, т. 332, № 6025, стр. 60–65, апр. 2011, doi:10.1126/science.1200970.

Новый рекорд скорости обучения CIFAR-10: 94% за 1.99 секунды на одном A100 Предыдущий рекорд: 2.59 секунды (10 ноября 2024 года) Новый рекордсмен: Алгоритмическая поисковая система, разработанная @hivergeai Изменения: - Muon: Векторизовать NS iter и уменьшить частоту шага 'нормализация весов' 1/3