FP8

Format flottant sur 8 bits pour les poids et les activations des grands modèles (variantes E4M3 et E5M2). La moitié de la VRAM du FP16 avec une perte de qualité minimale sur les poids : les modèles récents (ex. Kolibri d'Aleph Alpha) sont livrés directement en FP8. Contrairement à NVFP4 ou MXFP4, il est supporté nativement par les bibliothèques de base (cuBLAS) sans micro-scaling par bloc.