不重训主干，用轻量插件把通用模型改造成工地专用
把大模型直接搬进施工现场，多数团队第一反应是“先试试看”。试过之后往往退回原点。原因不在模型不够大，而在工地这个场景太碎。
实验室里的任务是收敛的：一张图、一个主体、类别有限、样本充足。工地不是。同一张照片里钢筋、模板、脚手架挤在一起，背后还有电线、水桶、散落的安全帽。像素上，一根竖向钢筋和一截吊钩的差别可能只有边缘走向和反光；通用模型的常识在这里常帮倒忙——它见过太多“金属杆件”，未必分得清哪根是该验收的受力筋。
这类问题叫长尾。头部类别样本多，模型自然认得；尾部类别单次出现少，加起来却占了现场大半判断工作。它认识“脚手架”这个词，不等于能在逆光、遮挡、抖动的画面里把脚手架和一堆钢管分开。再加上非标——每个项目的构件命名、图纸表达都不同，同一目标物的外观差异可能比两个类别之间还大。
2026年10月30日，广联达（深交所 002410）获得国家知识产权局授权的发明专利《基于大模型的微调方法、装置、设备和可读存储介质》，专利号 CN202411210296.X。
它不是模型，而是一套“怎么把通用模型改成专用模型”的方法。要处理的问题很直白：垂类场景里通用大模型识别不准，企业又得用较低成本让模型学会特定目标的识别与判断。
这里有两个约束，缺一不可：准，和不贵。只谈准，可以堆数据、堆标注、堆算力重训；只谈不贵，可以拿通用模型硬上。专利落在中间——用工程手段把适配成本压下来，又不放掉垂类精度。建筑行业的模型需求本就分散，不可能每家都训一个基座。
据公开报道的描述，核心前提是“不重训主干大模型”。主干冻结，参数不动，改的是外挂那一层。
先做类别锁定。第一数据集里既有钢筋、模板、脚手架这类目标物，也塞进了电线、水桶、安全帽这类干扰物。干扰物不是噪音，是刻意放的——让模型学会“这不是我要找的东西”，有时比只告诉它“这是我要找的”更管用。再配合提示词把类别框死，模型不必在开放词表里自己猜。
然后插轻量插件。报道提到的三类部件如下：
| 组件 | 作用（据公开报道） |
|---|---|
| 低秩矩阵缩放因子 | 对主干输出做小幅调整，参数量远小于全量微调 |
| 可控过拟合调节器 | 小样本微调易过拟合，用它把拟合程度控制在可调范围 |
| 模块化插入层 | 模块化挂载，不同垂类可换装，不必各维护一份主干 |
低秩这条思路不新鲜，通用领域早有成熟做法。放到建筑场景，价值在改造成本：某个项目要适配新目标物，改的是插件，不是主干本身。可控过拟合调节器针对另一个问题——工地样本天然稀少，尾部类别能凑齐像样的标注集就算不错。这个量级下全量微调几乎必然过拟合，模型会把训练集的背景纹理当成判别依据，换个项目就失灵。
最后用第二数据集打磨，报道的说法是“更聚焦的特写样本”。第一数据集解决“这是什么类”，第二数据集解决“边界在哪”；前者要覆盖面，后者要精度，分开比混着训可控。
一句话概括：主干冻结保住通用能力，插件承担垂类知识，提示词框住类别，两段数据分别管召回和精度。
报道称该技术用于工地视觉识别和 BIM 自动审图两类场景的模型适配。两件事性质不同，对微调的要求也不同。
这是典型的开放环境识别，光照变化、遮挡、运动模糊、视角畸变全赶在一起。更要紧的是误检代价不对称：漏检一处临边防护可能是事故，把堆料误判成违规堆放只是多一次人工复核。垂类微调在这里做的，是把标准从“像不像”往“是不是”推——用项目自己的样本告诉模型，什么样的支撑算合格。
审图的对象是模型和图纸，不是照片，长尾问题一样在。规范条文数量庞大，每条对应的构件类型、属性组合、空间关系都不同；通用模型读得懂“防火分区”四个字，不等于能判断某个房间的分区面积是否越界。这里微调解决的是规则对齐——把条文里的判断逻辑，通过样本和提示词固化到输出上。
共同点是判断标准由项目定，不由模型定：通用能力负责理解，插件负责裁决。
设计院和施工单位都在算账：要不要自己养一个模型。通常卡在三处——标注谁来做、算力谁来出、模型谁来维护。走全量微调，三个问题都不好答。
轻量插件把前两处的量级降下来了。标注仍要做，但第一数据集要覆盖面不要海量，第二数据集要特写不要全集，工作量跟着降。主干不动，训练只跑插件，硬件要求不在一个层级。插件模块化之后，升级主干和升级垂类能力也能分开做。
门槛没有消失。数据仍然是硬的：没有项目自己的样本，插件挂上去也是空的；标注质量差，调节器也救不回来。方法降的是工程成本，不是数据成本。把话说实一点——专利解决“怎么改得便宜”，不解决“有没有东西可改”。
试错成本也在降：以前评估一个垂类模型能不能用，得投一次完整训练周期；现在可以先挂插件跑一轮，不行换套数据再试。
发明专利授权，说明这套方法通过了新颖性、创造性、实用性审查，法律上被认可。它不说明有产品已上线，也不说明这套方法在真实项目里跑出了什么效果。
转述稿里若干量化指标——算力消耗降幅、EPC 项目数量、接入项目数、企业数量与占比、平台开放时间——未获企业或官方确认，本站不予引用。技术路线可以讨论，数字要等官方口径。
意义在两层。一层是方法：把“通用模型怎么进垂类”拆成可复用的工程步骤。另一层是信号：软件厂商开始在模型适配环节做知识产权布局，说明投入被认真算过。
至于它能不能让审图快一点、让工地少一次误判，要看落地。专利是起点，不是结论。
来源：证券之星综合整理稿（2026-11-01，原文标注含AI生成内容）。本站仅采用专利名称、专利号、授权日期与技术路线描述，原文中未获官方确认的量化数据不予引用；文中对技术意义的判断为本站分析。
