1.仿函数是什么
仿函数也叫函数对象,是一种可以像函数一样被调用的对象。从编程实现的角度看,它是一个类,不过这个类重载了函数调用运算符()
class Add {
public:int operator()(int a, int b) {return a b;}
}; 注意:使用的时…
LoRA: Low-Rank Adaptation of Large Language Models
http://arxiv.org/abs/2106.09685
低秩矩阵训练大模型,有效减小开销、即插即用、对内部参数的变化不大,不得不学。
lora框架冻结预训练模型的权重并插入可训练的秩分解矩阵到Transformer架构的每…