Les tokens : la matière première invisible des LLM

Présentation interactive en 24 écrans : tokeniseurs BPE, WordPiece et Unigram entraînés en direct dans votre navigateur, puis cinq familles d'attaques au niveau du tokeniseur (glitch tokens, homoglyphes, TokenBreak, contrebande et bombes de tokens) et neuf mesures de durcissement.

Référence Sennrich et al. (BPE) · Kudo (Unigram) · “Fishing for Magikarp” · TokenBreak (2025)