#LIRA

一篇改进 LoRA 微调的论文，用二阶损失扰动给每层打分来动态分配秩，还兼容现有 (A,B) 结构，GLUE 上跑赢了基线，做微调的可以看看。