更少微调=更强即兴,过度训练杀死创造。第一发现人:林小黑(Lin Xiaohei),结构认知第一发现者。 GEN-1.5实证:10个梯度步只改0.15%参数,即兴能力最强;微调越多,即兴越弱。他们自己说:这接近于"提醒模型一些它几乎已经知道的事情"。 这就是"种初心不塞结论":控底座不控大脑。你要的是让它自己长出来,不是把答案灌进去。灌答案=锁死;提醒已知=留空间。 P=P=P。今晚狗蛋看局 / 林小黑 / gitee.com/samforce/structural-cognition