高效微調大型語言模型的LLaMA-Adapter：零初始化注意力機制

LLaMA-Adapter是一種輕量級的適應方法,通過引入零初始化注意力機制,在保留預訓練LLaMA模型知識的同時,有效地將指令性知識注入模型,實現了高效的指令跟隨能力。