LLM理論 重みの0.05%未満をゼロ化する「Deletion Tuning」論文発表
事前学習済みLLMの重みの0.05%未満をゼロ化するだけでフルファインチューニングに匹敵する効果を得られるとする論文「The Surprising Effectiveness of Deleting Weights in LLM Post-Training」が公開されました。
LLM理論
LLM理論
LLM理論