Thực sự bị cuốn hút bởi cách mà các nhà lý luận Berkeley vẫn kiên định cam kết với sự ưu việt cuối cùng của AI biểu tượng mặc dù đã có ba thập kỷ bằng chứng ngược lại.

Định lý: Thời gian tối đa có thể của sự kỳ dị tính toán là 470 năm. Chứng minh: Công suất FLOPs của tất cả các máy tính tồn tại vào năm 1986 được ước tính tối đa là 4.5e14 (Hilbert et al. 2011). Dựa trên doanh thu công khai của Nvidia và thông số kỹ thuật GPU, công suất này đã tăng lên ít nhất 1e22 FLOPs tính đến năm 2025. Sự khác biệt này ngụ ý một tỷ lệ tăng trưởng trung bình là 55% mỗi năm kể từ năm 1986. Bây giờ hãy quan sát rằng vũ trụ vật lý có thể hỗ trợ tối đa 10^104 FLOPs (Lloyd 2000). Do đó, ngay cả khi chúng ta cho phép phát hiện ra việc di chuyển nhanh hơn ánh sáng, sự kỳ dị tính toán — tức là, giai đoạn lịch sử của sự không chắc chắn xã hội và công nghệ gia tăng do sự phát triển nhanh chóng trong khả năng tính toán toàn cầu — không thể kéo dài hơn (2025 -1986) + (104-22)/log_10(1.55) ~= 470 năm. Tài liệu tham khảo: S. Lloyd, “Giới hạn vật lý tối thượng đối với tính toán,” *arXiv preprint quant-ph/9908043*, 1999, doi:10.48550/arXiv.quant-ph/9908043. M. Hilbert và P. López, “Khả năng công nghệ của thế giới để lưu trữ, truyền đạt và tính toán thông tin,” *Science*, vol. 332, no. 6025, pp. 60–65, Tháng 4. 2011, doi:10.1126/science.1200970.

Kỷ lục tốc độ đào tạo CIFAR-10 mới: 94% trong 1.99 giây trên một A100 Kỷ lục trước: 2.59 giây (10 tháng 11 năm 2024) Người giữ kỷ lục mới: Công cụ khám phá thuật toán được phát triển bởi @hivergeai Nhật ký thay đổi: - Muon: Tối ưu hóa NS iter và giảm tần suất bước 'chuẩn hóa trọng số' 1/3