http://wiki.sseuu.com/index.php?action=history&feed=atom&title=LoRA 2026-04-04T02:17:10Z 本wiki的该页面的版本历史 MediaWiki 1.30.0 http://wiki.sseuu.com/index.php?title=LoRA&diff=122132&oldid=prev 2023-11-09T00:02:42Z

<p>创建页面，内容为“{{4}} LoRA是一种大语言模型训练方法，可以理解为stable diffusion（SD）模型的一种插件。它利用少量数据训练出一种画风/IP/人物...”</p> <p><b>新页面</b></p><div>{{4}}<br /> LoRA是一种大语言模型训练方法，可以理解为stable diffusion（SD）模型的一种插件。它利用少量数据训练出一种画风/IP/人物，实现定制化需求。和hyper-network、controlNet一样，LoRA也是在不修改SD模型的前提下实现的。<br /> &lt;br&gt;<br /> LoRA最初应用于[[NLP]]领域，用于微调[[GPT-3]]等模型（也就是[[ChatGPT]]的前生）。由于[[GPT]]参数量超过千亿，训练成本太高，因此LoRA采用了一个办法，仅训练低秩矩阵（low rank matrics），使用时将LoRA模型的参数注入（inject）SD模型，从而改变SD模型的生成风格，或者为SD模型添加新的人物/IP。</div>

江南仁