Low-rank decomposition

Определение

Аппроксимация матрицы обновления весов произведением двух низкоранговых матриц, лежащая в основе метода LoRA для эффективного fine-tuning.