Fine-tuning corrige mode collapse em LLMs, diz estudo
Estudo no arXiv mostra que mode collapse e superdispersão em LLMs são erros de amostra finita do fine-tuning supervisionado. Com mais dados de treino, a diversidade das respostas converge para a do alvo humano ou sintético.
