1. 项目概述当粒子对撞遇见实时AI在大型强子对撞机LHC每秒数千万次的质子对撞中CMS探测器会捕获海量的高维数据。第一级触发系统L1T的任务是在3.8微秒的极短时间内将事件率从40 MHz每秒4000万次削减到100 kHz每秒10万次完成超过99.75%的数据过滤。这不仅是数据量的挑战更是对计算速度和能效的极限考验。传统的基于固定物理过程的触发算法虽然对已知信号高效却像一把特制的钥匙无法打开未知新物理现象的大门。而更通用的物理对象触发又不得不设置高动量阈值来控制数据率这无疑会漏掉那些涉及低能粒子的新物理信号。于是基于机器学习的异常检测算法如CICADA成为了破局的关键。它的核心思想很巧妙用一个在“零偏置”数据即无特定物理偏向的随机碰撞事件上训练的自编码器作为“教师”学习正常碰撞事件的模式。当遇到罕见的、训练集中未见的“异常”事件时自编码器的重建误差会显著增大这个误差值就是“异常分数”。分数越高事件越可能是我们寻找的新物理信号。然而这个拥有约30万个参数的教师模型过于庞大无法直接塞进L1T系统中基于FPGA的、对延迟和资源极其敏感的硬件里。这就引出了知识蒸馏和模型量化的舞台。我们训练一个仅约1万个参数的轻量级“学生”模型让它去模仿教师模型输出的异常分数。学生模型的目标是在FPGA上实现亚微秒级200 ns的推理同时尽可能逼近教师的判断能力。这其中的核心矛盾在于如何在极致的硬件约束下不牺牲物理性能我们探索的答案是两种超越传统量化方法的新思路高粒度量化HGQ和逻辑门网络LGN。它们不是简单地给所有权重“一刀切”地降低精度而是试图更智能地“挤干”模型中的每一滴水。2. 核心思路拆解为什么是HGQ和LGN传统的模型量化比如项目中作为基线的QKeras方案通常是在层级别进行操作。例如将整个卷积层的权重和激活值统一量化为8位整数。这种方法简单有效但不够精细。想象一下给一整支军队发放统一尺码的鞋虽然管理方便但必然有人不合脚影响整体行军效率。在资源寸土寸金的FPGA上这种“粗放式”量化可能意味着仍有大量冗余的比特在空转或者为了保住性能而不得不保留较高的整体位宽导致资源消耗居高不下。2.1 HGQ为每个权重“量体裁衣”高粒度量化HGQ的核心创新在于它将量化粒度从“层”细化到了“权重”。它把网络中每一个权重和偏置的位宽bitwidth都变成了一个可以随着训练过程一起优化的可训练参数。这就像是为模型中的每一个“士兵”都配备了定制化的装备。其背后的优化逻辑是一个精心设计的损失函数总损失 任务损失如MAE β * EBOPs γ * L1(位宽参数)任务损失确保学生模型输出的异常分数与教师模型尽可能接近这是保证物理性能的根基。EBOPs有效比特操作数这是一个硬件成本的代理指标。它大致正比于网络执行推理时所需的比特级操作总数。通过最小化EBOPs训练过程被引导去寻找那些计算上更“便宜”的位宽配置。L1正则化项直接作用于位宽参数本身倾向于将它们推向更小的值甚至为零。当一个权重的位宽被学习为零时该连接实际上就被“剪枝”掉了实现了模型压缩与量化的联合优化。通过调整超参数β我们可以精确控制“性能”与“硬件效率”之间的权衡。β越大模型就越“节俭”倾向于使用更低的位宽β越小则更注重精度。这种基于梯度的、细粒度的位宽分配使得HGQ能够自动发现模型中哪些部分对精度敏感需要高比特哪些部分可以大幅压缩甚至归零从而在给定资源预算下实现性能最大化或者在给定性能要求下实现资源最小化。2.2 LGN从算术运算到逻辑运算的范式转变逻辑门网络LGN则走了另一条更为激进的路径。它试图用最基本的数字逻辑门如AND, OR, XOR来构建整个神经网络替代传统的乘加运算。一个经典的LGN神经元只接受两个二进制输入输出一个二进制结果其计算速度极快且完全不需要乘法器和累加器MAC这在硬件上是极大的优势。然而直接训练一个由离散逻辑门组成的网络是不可微的无法使用梯度下降。LGN的巧妙之处在于“可微分松弛”。在训练阶段每个逻辑门被一个平滑的、可微分的函数所替代这个函数能够模拟逻辑门的行为同时允许梯度反向传播。例如可以用一个Sigmoid函数的组合来近似XOR门。模型在这个“松弛”的、连续的状态下学习。在推理阶段也就是部署到FPGA时这些可微分的松弛函数会被“折叠”回其对应的、确定的离散逻辑门。此时网络的输入也需要是二进制的。对于CICADA中0-256范围的能量沉积值这就需要一个输入编码策略。项目中使用了对数阈值变换设定一组阈值将原始输入值x与每个阈值比较经过对数变换后得到一个介于0到1之间的值在训练时保持连续在编译部署时则根据阈值二值化。这个编码方案的设计直接影响信息保留程度和最终性能。LGN的挑战在于如何用极其有限的表达能力二进制输入、逻辑门操作去拟合一个相对复杂的回归任务预测连续的异常分数。这要求网络架构和输入编码都必须设计得非常精巧。3. 实验设计与评估框架为了公平、可复现地评估HGQ和LGN我们搭建了一套完整的实验流程全部基于公开的CMS开放数据。3.1 数据准备与任务定义背景样本使用2017年的CMS零偏置数据作为训练集。这是模型学习“正常”碰撞事件的基础。信号样本选择顶夸克对产生过程作为“异常”信号。具体使用了三种衰变末态t¯t → 2轻子 2中微子t¯t → 1轻子 1中微子 2夸克 以及t¯t → 4夸克。选择它们的原因很实际它们是开放数据集中可用的、具有物理意义的信号过程。更重要的是它们的产生截面远小于零偏置数据中的主流过程因此在零偏置背景中显得“罕见”符合异常检测的目标。训练策略学生模型采用知识蒸馏损失函数为平均绝对误差MAE目标是拟合教师模型输出的、经过量化变换的异常分数Qlog quantize(log(32 * loss))。这里对损失取对数和缩放是为了将目标值的动态范围压缩到更适合低比特表示和训练稳定的区间。同时我们采用了离群点暴露技术在训练和验证集中混入一部分已知的高异常分数信号事件t¯t → 2l 2ν的一部分让学生模型不仅学习重建“正常”也能识别“异常”的特征。3.2 性能与成本的双重评估指标评估必须从两个维度进行物理性能的好坏和硬件代价的高低。物理性能评估地球移动距离EMD用于衡量学生模型预测的异常分数分布与教师模型目标分布之间的差异。EMD值越小说明学生模仿得越像蒸馏越成功。我们分别计算在零偏置背景和不同信号样本上的EMD以全面评估其拟合能力。接收者操作特征曲线下面积ROC AUC这是异常检测任务的核心指标。它描绘了信号效率成功捕获异常事件的比例与背景误报率错误地将正常事件判为异常的比例之间的权衡关系。AUC越接近1性能越好。对于L1T系统我们尤其关注误报率极低 0.1%区域的性能因为触发系统必须在极高的数据削减率下运行。硬件成本评估 所有学生模型最终都需要在目标FPGAAMD Virtex-7 XC7VX690T上实现。我们使用Vitis HLS进行高级综合获取预布局布线阶段的资源估算报告关键指标包括查找表LUT实现组合逻辑的主要资源。触发器FF用于存储状态。数字信号处理器DSP用于实现乘法等算术运算是宝贵且耗能的资源。延迟时钟周期完成一次推理所需的周期数乘以时钟周期6.25 ns即得实际延迟。EBOPs作为LUT和DSP资源的加权综合预估EBOPs ≈ #LUTs 55 * #DSPs在布局布线前能较好地预测最终资源占用。3.3 超参数扫描与模型变体为了探索性能-资源的帕累托前沿我们进行了系统的超参数扫描对于HGQ主要调节损失函数中的β参数控制硬件成本权重在1e-5到1e-4等数量级上进行尝试生成一系列资源占用不同的模型。对于LGN探索了不同的网络架构如全连接LGN和卷积LGN以及不同的输入二进制编码方案如不同的阈值数量和取值。4. 结果分析效率与性能的突破实验结果表明HGQ和LGN方案在资源效率上带来了显著提升同时保持了与基线QKeras模型可比甚至更优的物理性能。4.1 物理性能对比从ROC曲线可以看出在关键的低误报率区域触发率1 kHz采用HGQ-mixed自适应正则化和卷积LGNCLGN的学生模型其性能曲线与基线QKeras模型高度重合甚至略有超越。这意味着在触发系统最关心的、决定数据率的操作点上新方法没有牺牲信号探测能力。EMD分析进一步揭示了学生模型的学习质量。HGQ模型在所有数据集背景和信号上的EMD都与QKeras基线相当或更低说明其通过细粒度量化依然出色地捕捉了教师模型的输出分布。全连接LGN模型LGN-LT2在背景数据上表现尚可但在信号数据上EMD较高这暴露了其简单架构和二进制输入在拟合复杂、稀疏的高异常值区域时的局限性。而卷积LGN通过引入局部感知能力有效缓解了这个问题展现了更好的潜力。4.2 硬件资源节省资源对比表格清晰地展示了新方法的巨大优势模型标签量化库延迟 (时钟周期)DSP数量FF数量LUT数量HGQ EBOPsQKeras (基线)QKeras1669750,368159,447-HGQ-1E-5HGQ17427,776111,84839,170HGQ-1E-4HGQ1116,22938,1117,570HGQ-mixedHGQ803,01924,9473,301LGN-LT2LGN3085619,977-结果解读DSP的极致削减基线QKeras模型消耗了697个DSP而HGQ-mixed和LGN-LT2模型将DSP用量降到了0。这对于FPGA资源分配是革命性的释放出的DSP可以用于其他更复杂的计算模块。LUT/FF的显著降低HGQ-mixed模型的LUT用量约为基线的15.6%FF用量约为6%。LGN-LT2的FF用量更是降至基线的1.7%。这意味着整个模型可以部署在更小、更低成本的FPGA上或者在同一块FPGA上并行部署多个实例。延迟的优化HGQ-mixed将延迟从16周期降至8周期LGN-LT2更是达到了惊人的3周期。更短的延迟意味着更快的触发决策为处理流水线中的其他任务留出了更多余量。EBOPs揭示的效率HGQ-mixed的EBOPs仅为3,301远低于基线直观反映了其硬件友好性。注意表格中的资源是“预布局布线”估算。实际在FPGA上完成布局布线后资源占用通常会有所增加但相对优劣趋势保持不变。卷积LGN模型由于合成工具链尚在完善中未能给出具体资源数据但其逻辑门数量级与全连接LGN相近预计同样极具竞争力。4.3 核心优势总结综合来看HGQ和LGN的优势路径不同HGQ在保持神经网络连续表示和梯度训练框架的前提下通过自动化、细粒度的混合精度量化实现了“精准瘦身”。它智能地识别并压缩了模型中冗余的精度特别适合对原有模型架构改动最小、但追求极致硬件效率的场景。LGN通过改变计算范式从乘加运算转向位逻辑运算实现了颠覆性的硬件效率提升和极低延迟。它更适合对延迟有极端要求、且能接受对模型架构和输入表示进行重新设计的场景。这两种方案共同证明通过算法创新我们完全有可能在严苛的实时边缘计算约束下为复杂的机器学习模型“挤”出巨大的性能提升空间。5. 实现细节与实操要点将理论方案落地到FPGA上需要经过一系列工程化步骤。这里以HGQ为例简述关键流程。5.1 HGQ模型训练与部署流水线环境搭建与模型定义在PyTorch或TensorFlow框架中集成HGQ库。HGQ通常以自定义层的形式提供需要替换原有模型中的线性层、卷积层等。定义学生模型架构轻量级CNN并使用HGQ层进行构建。同时需要定义包含EBOPs和L1正则化的自定义损失函数。量化感知训练QAT加载教师模型为训练数据生成软目标Qlog。使用包含离群点暴露的数据集训练学生模型。在训练前向传播中HGQ层会模拟量化效果如舍入操作在反向传播中通过直通估计器Straight-Through Estimator传递梯度从而同时优化权重值和它们的位宽。关键步骤是β参数的调优。建议从一个较小的β如1e-6开始观察资源下降趋势和精度损失。若精度下降过快则减小β若资源下降不足则增大β。可以尝试对数尺度上的网格搜索。模型转换与代码生成训练完成后HGQ模型中的每个权重都有一个确定的、优化后的位宽可能是0, 2, 4, 8比特等。使用hls4ml工具将训练好的Keras/TensorFlow模型转换为高层次综合HLS兼容的C代码。hls4ml会根据HGQ提供的位宽信息为每个操作生成相应位宽的定点数运算代码并插入优化指令pragmas。FPGA综合与实现在Vitis HLS环境中导入生成的C代码指定目标FPGA器件如xc7vx690tffg1927-2。进行C仿真、C/RTL协同仿真以验证功能正确性。执行综合Synthesis和实现Implementation最终生成比特流文件。在此过程中需要密切关注时序报告确保满足200ns的延迟约束并查看资源利用率报告是否与预期相符。5.2 LGN模型的关键实现考量输入编码设计这是LGN性能的瓶颈之一。简单的均匀阈值二值化会丢失大量信息。论文中采用的对数阈值变换是一个有效方案。在实践中需要分析输入数据的统计分布如能量沉积值的直方图将阈值设置在数据密集变化的区域例如[0, 2]以捕捉最主要的信息变化。可以尝试不同数量的阈值如2-bit, 3-bit编码在信息保留和模型复杂度之间取得平衡。可微分逻辑门的选择训练时使用的松弛函数需要精心设计既要能较好地近似目标逻辑门如AND, OR, XOR的真值表又要具有良好的梯度特性。常见的做法是使用Sigmoid函数的乘积或加权和来构造。架构搜索LGN的架构层数、每层的逻辑门数量、连接方式需要针对具体任务进行搜索。由于单个逻辑门功能简单网络可能需要比传统神经网络更“宽”或更深来获得足够的表达能力。可以使用神经架构搜索NAS技术或基于启发式的方法来探索高效的LGN架构。实操心得在调试HGQ模型时如果发现训练不稳定或精度骤降一个常见原因是β值设置过大导致硬件成本项在损失函数中占主导模型过早地“放弃”了重要权重的精度。建议采用热身训练策略在训练初期使用较小的β或为零让模型先专注于学习任务在训练中后期再逐步增加β引导模型进行压缩。对于LGN务必在训练结束后、部署前验证“折叠”后的纯逻辑门网络在二值化输入上的性能确保其与训练时的松弛网络性能衰减在可接受范围内。6. 常见问题与排查思路在实际部署基于HGQ或LGN的模型到FPGA触发系统时可能会遇到以下典型问题问题1HGQ模型在FPGA上综合后时序违例无法达到200ns的延迟要求。排查思路检查关键路径查看综合报告中的时序分析找到延迟最大的路径。这通常是位宽最高的那些运算如残差连接中的加法或某些层的累加操作。流水线优化在hls4ml配置或HLS代码中对高延迟的循环或函数添加流水线指令#pragma HLS PIPELINE。这能提高吞吐量但可能会轻微增加资源。降低位宽如果某一路径的位宽是瓶颈可以尝试在HGQ训练中通过增加β值或对该层单独施加更强的位宽正则化进一步降低其位宽。架构微调考虑简化学生模型的架构例如减少某个卷积层的通道数或者将两个小卷积层合并如果可能。问题2LGN模型在二值化部署后对某些信号样本的异常分数预测出现系统性偏差与教师模型差异较大。排查思路分析输入编码检查出现偏差的信号样本的输入能量分布。是否有些特征值落在了预设的阈值“边缘”或之外可能需要调整阈值位置或增加阈值数量以更精细地刻画信号的特征。检查离群点暴露确保训练集中用于离群点暴露的信号样本具有足够的多样性和代表性能够覆盖评估时信号样本的特征空间。如果评估用的信号类型与训练时暴露的差异很大模型可能无法泛化。验证逻辑门折叠确认训练阶段使用的可微分松弛函数在折叠为离散逻辑门时其输入输出映射关系是正确的。编写一个简单的测试对比同一个二值化输入下松弛网络和折叠网络的输出。增加模型容量如果偏差持续存在可能当前LGN的架构表达能力不足。尝试增加网络宽度更多逻辑门或深度观察是否改善。问题3HGQ模型资源节省显著但在极低误报率如0.01%下的信号效率相比基线有轻微下降。排查思路这不是bug而是trade-off首先要认识到量化本质上是一种有损压缩极致的资源节省可能会在性能曲线的极端区域如尾部产生轻微影响。需要评估这种下降在物理分析中是否可接受。调整损失函数权重在HGQ的损失函数中任务损失MAE通常对所有样本一视同仁。但对于异常检测高异常分数区域尾部的预测准确性更为关键。可以尝试对损失函数进行加权给高目标值Qlog的样本分配更高的权重迫使模型更关注“异常”区域的拟合。集成学习如果单个量化模型在尾部性能不足可以考虑训练多个不同β值的HGQ模型将它们以某种方式如取平均、投票集成。虽然这会增加资源但可能以较小的代价换来尾部性能的稳健提升。问题4使用hls4ml转换LGN模型时遇到困难或不支持。排查思路当前限制如论文所述hls4ml对卷积LGN的完整支持可能仍在开发中。对于全连接LGN可能需要手动将训练好的逻辑门网络结构翻译成C代码。手动实现根据LGN库如torchlogix导出的网络结构各层的逻辑门类型和连接关系用C/C编写对应的逻辑运算代码。由于只有AND、OR、NOT等基本操作代码实现相对直接。模板化代码生成可以开发一个简单的脚本根据网络描述文件自动生成对应的HLS C代码。每一层就是一个循环遍历该层的所有逻辑门根据输入索引执行相应的位操作并输出。关注社区进展积极关注hls4ml和torchlogix等开源项目的更新卷积LGN的合成支持很可能在不久的将来得到完善。这项工作最让我兴奋的一点是它不仅仅是一个针对特定问题的优化更展示了一种方法论在面对硬件的物理约束时我们可以从算法层面进行更根本的协同设计。HGQ和LGN代表了两种不同的思路——一种是在现有计算范式内进行极致优化另一种是探索全新的、硬件原生的计算范式。在实际项目中选择哪种方案取决于具体的约束优先级是延迟第一还是资源第一抑或是希望最小化改动现有流程。但无论如何这些工具都为我们打开了新的空间使得在CMS的L1T乃至未来更严苛的实时处理系统中部署更强大、更精细的机器学习算法成为了可能。下一步将卷积LGN成功合成到FPGA并探索HGQ与LGN的混合模式可能会带来新的惊喜。