EPT(Efficient Prompt Tuning)方法,旨在解决提示调优(Prompt Tuning)中效率与准确性平衡和跨任务一致性的问题 一、核心原理:分解提示与多空间投影 1. 提示分解:用低秩矩阵压缩长提示 传统问题: 长提示(如100个token)精度高但训练慢,短提示(如20个token)速度快但语义不足。 EPT方案: 将长提示分解为 短提示(P) 和 两个低秩矩阵(W1, W2),通过矩阵运算还原语义,公式为: