Peneliti Google Temukan Bug Pembulatan yang Diam-diam Merusak Pelatihan AIHOT
Seorang peneliti Google DeepMind mengatakan versi standar algoritma pelatihan kunci di PyTorch, JAX, dan buku teks membulatkan angka menjadi nol, sehingga melemahkan sinyal yang mengajari model. Temuan ini menyebar cepat karena menyentuh hampir setiap model besar yang dibangun saat ini, termasuk milik China.




