Português
Voltar às tecnologias de IA

Treino e pós-treino

LoRA / QLoRA

Métodos de ajuste fino eficientes que treinam pequenos adaptadores de baixo posto mantendo os pesos de base congelados. QLoRA combina adaptadores com uma base quantizada para reduzir ainda mais a memória.

Período de referência
2021 / 2023
Última revisão

Termos-chave

  • adaptadores de baixo posto (low-rank adapters)
  • modelo base congelado (frozen base model)
  • treino em 4 bits (4-bit training)
  • PEFT

Ligações no projeto

Fontes primárias

  1. LoRA
  2. QLoRA

Este é um mapa técnico selecionado, não uma afirmação de cobertura completa.