L’ajustement fin (fine-tuning) intervient une fois achevée la grande partie, la plus coûteuse, de l’entraînement. Un modèle apprend d’abord de façon large, à partir d’énormes quantités de matériau général, jusqu’à acquérir une compétence étendue mais peu ciblée. L’ajustement fin reprend alors ce modèle déjà capable et poursuit son entraînement sur un ensemble d’exemples plus petit et plus précis, pour l’orienter vers une tâche, un ton ou un domaine particuliers. C’est la différence entre une bonne culture générale et un court apprentissage qui vous enseigne comment on fait les choses dans un atelier bien précis.
L’intérêt est surtout économique. Entraîner un grand modèle à partir de zéro coûte extrêmement cher, si bien que presque personne ne le fait deux fois. Un seul modèle généraliste devient plutôt le point de départ de nombreuses versions spécialisées : l’une ajustée pour écrire dans le ton d’une entreprise, une autre pour répondre à des questions médicales, une autre encore pour suivre un ensemble d’instructions particulier. Le gros œuvre est fait une fois ; l’ajustement fin est le façonnage final, comparativement bon marché.
Ses limites méritent d’être connues. L’ajustement fin modifie le comportement d’un modèle, mais il ne lui donne pas de fondations entièrement nouvelles : un modèle ajusté sur des documents juridiques travaille toujours à partir de ce qu’il a absorbé lors de son entraînement initial, biais et lacunes compris. Si l’on insiste trop sur un ensemble étroit d’exemples, le modèle peut perdre une partie de ses capacités générales : il devient habile dans la nouvelle tâche tout en régressant dans tout le reste. Le façonnage est réel, mais superficiel au regard de l’apprentissage d’origine qui se trouve dessous.
Il en existe une version humaine reconnaissable. On passe des années à acquérir une idée générale du fonctionnement du monde, puis un nouvel emploi, une nouvelle ville ou une nouvelle relation vous ajuste finement, en adaptant la personne générale que vous êtes déjà à une situation précise. Le socle demeure ; la surface s’adapte. Et la même prudence s’impose : à trop se spécialiser, on peut devenir excellent dans une seule chose tout en perdant discrètement de l’amplitude partout ailleurs.
