O que é o fine-tuning?
O fine-tuning é o processo de re-treino de um modelo de IA pré-treinado num conjunto de dados mais pequeno e especializado. O objetivo é adaptar um modelo fundacional a um domínio específico (por ex. direito, medicina, finanças) ou tarefa (por ex. classificação, extração de dados, geração de relatórios).
Técnicas de fine-tuning
Fine-tuning completo — re-treino de todos os parâmetros do modelo (dispendioso, requer GPU). LoRA/QLoRA — adaptação de baixo posto, treino de um pequeno subconjunto de parâmetros (10–100x mais barato). Instruction tuning — treino com pares instrução-resposta. RLHF — aprendizagem a partir de feedback humano.
Quando fine-tuning, quando RAG?
Fine-tuning: quando quer alterar o estilo, formato ou especialização do modelo. RAG: quando precisa de dados atuais (documentos que mudam). Na empresa, ambas as abordagens são geralmente combinadas: modelo fine-tuned + RAG a partir da base de conhecimento corporativa.