Entraînement et post-entraînement

Entraînement distribué

Des techniques qui répartissent données, paramètres, activations ou calculs entre appareils et nœuds. Elles permettent l’entraînement de grands modèles, avec des compromis de communication, synchronisation et tolérance aux pannes.

Période de référence

2012–present

Dernière vérification

2026-07-30