TailLoR: Protegendo Componentes Principais em Aprendizado Contínuo Eficiente em Parâmetros
Introduz um método que usa decomposição espectral para proteger direções dominantes durante fine-tuning eficiente em parâmetros, reduzindo interferência entre tarefas. O impacto prático é significativo para modelos que precisam aprender continuamente sem esquecer conhecimento anterior, com aplicações em robótica e visão computacional.
Ler artigo completo