ARTICLE · INTELLIGENCE

战地情报 · 详情页

来自尧图项目组的一线实战观察与深度解析

AI考专利代理:流畅满分,边界判断却集体不及格

AI考专利代理:流畅满分,边界判断却集体不及格

说实话,一开始我们做“专利撰写版驾考宝典”,压根没打算顺带研究AI写作工具。我们的目标很实际:让专利代理师资格考试的考生,像刷驾考宝典那样刷撰写实务题。直到有一天,团队有人顺手把一道真题丢给几款主流的AI写作工具,让它们分别写一份权利要求书,然后把AI的答卷送进了自家判卷系统——成绩单一出来,所有人都愣住了。

我先把产品是什么讲清楚:这是一套面向专利代理师资格考试实务科目、以及专利工程师新人入行训练的题库+专项练习+模拟考试系统。考试指导书太厚、培训课太贵、老师傅的批注又太玄,我们想做的是把“专利撰写”这件事拆成可以刷、可以判、可以反复纠错的训练单元。产品本身做到一半,我们意外发现了比产品更有意思的东西:AI写作工具能写出一篇“读起来特别对”的专利,却写不出一篇“边界上站得住”的专利。这个差别,就是它真正的死穴。

1. 起因:专利实务学习为什么需要一本“驾考宝典”

1.1 驾考宝典的模式,本质是刻意练习

先说说为什么非要做成“驾考宝典”的样子。驾考宝典这类App之所以管用,不是因为题量大,而是因为它把“开车”这件事拆成了一个个可考核、可反馈、可反复练习的行为单元:科目一刷交规,科目二练场地,科目三练综合路况,错了就进错题本,模拟考成绩会告诉你哪一类考点最薄弱。这个模式背后是心理学里经典的刻意练习理论——技能提升靠的是即时反馈、小步迭代、针对短板重复训练。

专利撰写和开车有一个共同点:它们都是“技能的掌握”,不是“知识的记忆”。你完全可以把专利法和审查指南倒背如流,但拿到一份真实的技术交底书,面前有三个想保护的核心方案、两篇讨厌的对比文件,你需要在三四个小时里画出保护范围、铺好从权退路、避开现有技术——这一步没有任何知识点可以替代。

更现实的问题是:撰写能力的提升必须靠“在做的过程中犯错、改错”,但绝大多数新人是没有反馈闭环的。新人代理人写的稿子要经过资深老师层层修改,可老师的批注往往只写“这个独权范围太大了”却不写为什么大、要怎么改。新人收到反馈后还是不知道自己错在哪一环节。驾考宝典模式解决的正是这个闭环问题:错了立刻告诉你考点是什么、正确思路是什么,然后再来一组同类题巩固。

1.2 专利代理实务考试,是最像“路考”的环节

专利代理师资格考试有三科:专利法律知识、相关法律知识、专利代理实务。前两科都是选择题,说白了就是交规理论,背就完了;真正卡住大多数人的是第三科实务。它要求考生在有限时间内,基于一份技术交底书和若干对比文件,完成权利要求书撰写、说明书撰写或审查意见答复。这本质上就是一个版权路考:给你一辆车、一个考场、一个考官(对比文件),看你敢不敢独立上路。

历年通过率最难看的就是这一科。原因不难理解:法律知识可以背,实务没法背。你把前两年的参考答案背得滚瓜烂熟,换一套新的技术方案立刻抓瞎。很多考生在培训机构花了大几千甚至上万块,听老师讲了一堆“独权要概括”“从权要层层设防”的道理,上了考场依然不知道面前这个保温杯到底该把哪个特征写进独权。

1.3 市面上的资料,要么太散,要么太玄

我们团队动手做产品之前,把市面上能买到的专利撰写学习资料翻了个遍,结果是一个很尴尬的现状:专业书籍动辄五六百页,能读下来的人凤毛麟角;培训课程高度集中在一线城市,而且学员反馈高度一致——老师讲的时候全懂,自己写的时候全忘;论坛上资深代理人分享的帖子很真诚,但都是零散经验,没有体系,更没有配套的练习题。

行业里其实早有共识:刷题对通过这个考试是有效的。驾考宝典已经证明了这个模式在驾驶场景能跑通,专利代理实务没道理不能题库化。我们花了半年多时间搭题库、写判卷规则,当时以为最大的难点是题目质量,后来才发现,真正的收获来自一次顺手做的“AI考生”实验。

2. 我们是怎么把专利撰写拆成考点和题库的

2.1 最大的观念转变:撰写是决策链,不是写作

产品设计的第一步不是收集真题,而是回答一个问题:专利撰写的“最小可训练单元”到底是什么?

大家容易误以为撰写能力=文字表达能力,所以训练方向都放在“怎么写得更规范”。但真正动笔写过专利的人都知道,起草者每写一句都在做一连串决策:这个技术特征要不要写进独立权利要求?如果写,是用具体结构写还是用功能写?是放在独权里还是放到从权里?这个用词会不会被审查员认定为不清楚?写出来的范围会不会撞上对比文件?

这些决策一环扣一环,形成一条完整的决策链。所谓撰写能力,就是这条链上每个节点的选择质量。所以我们把题库的拆分维度定为“决策节点”,而不是“文章章节”。你不会看到“请练习写说明书的技术领域段落”这种题,你看到的是“给定一个技术效果,选择最合适的上位概括方式”“判断某段从权的引用关系是否清楚”这类直接命中决策节点的题目。

2.2 四级考点体系与四类题型

题库最终按四级考点来组织:

  • 权利要求布局:独权保护范围划定、从权退路布置、并列独权的单一性判断。
  • 边界表达:上位概括、功能性限定、数值范围、零部件命名的一致性。
  • 法条红线:清楚、得到说明书支持、新颖性、创造性、必要技术特征。
  • 答复与无效:审查意见答复策略、无效理由的比对分析。

题型参照考试设计成四类:判断题、选择题、改错题、撰写题。其中撰写题权重最大,因为它覆盖的考点最多,也最接近真实工作。判断和选择题负责打磨单个决策节点,撰写题负责把这些节点串成完整链条。

这里给一个判断题示例,大家感受一下考点的颗粒度:

题目:独立权利要求中写道“所述报警装置为声光报警器”,说明书中也只公开了声光报警器这一种实现方式。判断这种写法是否清楚?是否符合得到说明书支持的要求?

答案是:清楚性没问题,但支持有风险。原因是你把独权限定到了一个具体实现:如果竞争对手用LED显示屏加蜂鸣器实现完全相同功能,只要它不用“声光报警器”这个组成结构,就不落入你的保护范围。正确做法是用功能概括,写“报警装置,用于在温度超过预设阈值时输出报警信号”,把具体实现放到从权。这种题在传统教材里很少单独拎出来,但恰恰是新人最常犯的错。

2.3 判分设计:如何量化“边界质量”

做题库容易,做判分难。尤其撰写题,不能只看“是否答到了关键词”。

我们最初用的判分逻辑是“要点匹配”:参考答案里有哪些独权特征、哪些从权分层,学生写到就算分。跑了几轮问题很大——两个考生的文本在关键词层面一模一样,可一个的独权漏了必要技术特征,另一个把非必要特征多塞了进去,关键词匹配根本区分不出来。

后来我们把判分改成“层次评分”,核心逻辑如下:

  • 先看独权有没有覆盖核心发明构思;
  • 再看独权里有没有塞入过多非必要特征;
  • 再看从权有没有形成至少两层退路;
  • 最后检查引用基础、用语一致性、是否落入对比文件范围。

每一层对应一组可操作的检查清单。这项工作做到一半的时候,我们开始认真考虑:能不能用AI自动判分,省下请人阅卷的成本?这个念头,最后直接把AI送上了考场。

3. 把AI写作工具送进考场:一场意外的路考成绩单

3.1 实验是怎么设计出来的

当时团队内部讨论自动判分方案,有人开玩笑说还不如让AI直接写一份答案,再用我们的判分系统去评,看看它自己能不能及格。这个玩笑很快变成了正式实验:我们选了3套历年实务真题,请了当时市面上能接触到的、口碑不错的几款主流AI写作工具,要求它们在和人类考生相同的考试条件下完成答题。为了对比公平,题目原文直接喂给AI,不做额外的提示词工程,只允许它自己反复修改。

人类对照组也很好凑:我们拉来了3位资深专利代理人、4位已经通过考试的新人代理人、5位备考中的考生。AI组普遍十几到二十分钟就交卷了,最快的甚至不到五分钟。我们一度觉得不公平,因为人类考生要坐一下午,后来看到分数才发现,时间长短根本不是决定因素。

3.2 成绩单:流畅性满分,边界判断集体不及格

按我们系统的百分制评分,各组平均大致如下:

评分维度资深代理人通关新人备考考生AI平均
独权保护范围合理性85655542
从权层次与退路设计88705035
对现有技术的规避82685545
清楚性与引用基础78726255
表达流畅与格式规范70585090
整体布局与得分潜力88685540

小样本测试,样本量大概二十来份答卷,不能说有多科学,但规律极其鲜明:AI在“表达流畅与格式规范”上是碾压级的90分,几乎挑不出毛病;但凡是涉及“边界判断”的维度——独权范围、从权布局、规避对比文件——全部不及格。而且有意思的是,AI最好的整体成绩也就在50出头,人类考生只要系统复习过一段时间,基本都能稳在60以上。

我们内部开玩笑说,这就像一场路考:AI考生的倒库动作行云流水,但没有一次停进车位线里。

3.3 一个具体的例子:智能保温杯

光说分数太抽象,我放一个我们测试中实际用过的案例。技术交底书里的方案很简单:

  • 保温杯本体加杯盖;
  • 杯盖上设置温度传感器,检测水温;
  • 杯底有加热模块,可以给水加热;
  • 通过手机App远程查看温度、远程启动加热;
  • 水温超过60度时自动停止加热,防止烫伤;
  • 可选方案:水温过高时语音提示。

同时给了一篇对比文件:现有保温杯的杯盖上集成温度传感器和显示屏,只能显示水温,不能加热,也不能远程控制。

任务:撰写独立权利要求和若干从属权利要求。这是AI考生交出的独权:

一种智能保温杯,其特征在于,包括:杯体、杯盖、温度传感器、加热模块、无线通信模块、控制模块;所述温度传感器设置在所述杯盖上,用于检测所述杯体内水的温度;所述无线通信模块用于与手机App通信,以接收所述手机App发送的加热指令;所述控制模块分别与温度传感器、加热模块、无线通信模块连接,用于根据所述加热指令控制所述加热模块进行加热,并在所述温度传感器检测到的温度大于60度时控制所述加热模块停止加热。

拆开看,至少有四个问题:

第一,主题名称写的是“智能保温杯”,把保护对象死死限定在“杯”。哪天竞争对手做一个带远程加热的智能奶瓶、智能锅,只要不叫保温杯就不侵权。人类代理人大概率会写“一种液体加热容器”甚至“保温容器”,先占住品类。

第二,把“手机App”写进了独权。App是外部实现方式,不该出现在产品权利要求里,而且“App通信”属于最典型的实施方案而非上位概念。正确写法是“接收外部控制指令”,把具体用什么通信方式放到从权里去。

第三,“大于60度时停止加热”要不要写进独权,取决于核心发明点在哪里。如果这个方案最值钱的是远程加热这个整体构思,60度防烫只是安全加分项,那就该放从权;如果远程加热本身已经被现有技术公开了,防烫才是真正区别于对比文件的技术特征,那才值得放独权。AI完全没有能力做“判断哪些特征是必要技术特征”这一步,它只会把所有听起来重要的东西一股脑塞进独权,结果就是这个独权又窄又不稳。

第四,整份答卷几乎没有从权层次设计。它勉强写了两个从权,内容基本是独权的复述,没有“如果通信方式被限定为蓝牙怎么办”“如果加热模块被限定到容器底部怎么办”这类递进防线。

同题人类资深代理人的写法大致是这样:

一种液体加热容器,其特征在于,包括:容器本体、加热模块、温度检测模块、控制模块;所述控制模块用于接收来自外部终端的控制指令,并根据所述控制指令控制所述加热模块工作;所述控制模块还用于获取所述温度检测模块检测到的温度,并在所述温度超过预设阈值时,控制所述加热模块停止加热。

从权2:所述温度检测模块设于容器本体的盖体上。 从权3:还包括无线通信模块,用于与外部终端建立通信连接并接收所述控制指令。 从权4:所述无线通信模块包括蓝牙模块、WiFi模块或蜂窝通信模块中的至少一种。 从权5:还包括提示模块,用于在所述温度超过预设阈值时发出提示信号。

对比之下就非常清楚:人类版本在独权层面只保留最核心的边界,把通信方式、检测位置、提示模块全部下沉到从权形成梯度;AI版本把一切特征平铺在独权里,读着挺完整,实则没有一寸保护范围是稳固的。

4. 死穴的本质:AI在优化“好读”,专利在追求“边界”

4.1 上位概括:AI最明显的短板

把几十份AI答卷看下来,最触目惊心的短板是上位概括。什么叫上位概括?就是把一个具体实现抽象成一个类别的能力。保温杯是“液体加热容器”的一种,手机App是“外部控制指令来源”的一种,声光报警器是“报警装置”的一种。专利申请里最核心的艺术,就是在独权中取合适的抽象层级——太低,保护范围太窄;太高,得不到说明书支持;而AI几乎总是落在最低那一层。

原因是结构性的。大语言模型在海量文本上训练,学习的是“哪句话更像人写的”。在真实语料里,“保温杯”的出现频率远高于“液体加热容器”,“手机App”远高于“外部控制指令来源”。模型的概率分布天然偏向最典型、最具体的那个词,而这个最典型的词,通常恰恰是最不该写进独权的那一个。写专利权利要求,本质上是“对抗流畅性”——要的不是你会怎么说,而是怎么说才能逻辑上覆盖所有可能的变体。AI做不到这件反直觉的事,不是因为它不努力,是因为它的训练目标里根本没有这个方向。

有个类比很贴切:画国境线的人不能只在界碑上刻“那座最高的山”,因为这座山可能被别人改名叫别的。正确做法是标经纬度。AI的答案永远是“那座最高的山”——读着通顺,执行起来全是漏洞。

4.2 独权与从权的层次:AI没有“退路思维”

第二个致命弱点是从权层次。专利的权利要求书在结构上很像一场谈判中的筹码排列:独权是一张铺开的大网,从权是大网里面嵌套的小网。审查员或者无效请求人如果在大网上找到一个洞,你还能退到下一层小网继续防守;如果小网也被击穿,再退到更里面。资深代理人写从权时脑子里全是作战地图:哪些特征是核心发明的必要组成部分,哪些特征是可舍弃的加分包,哪些细节值得单独设一道防线。

AI没有这个意识。它的生成逻辑是“把产品描述完整”:既然产品有杯盖、温度传感器、加热模块、无线模块、防烫逻辑、语音提醒,那就全写上。结果就是独权和从权堆在一起,所有特征一次性梭哈,孤注一掷。审查员只要在对比文件里找到独权中的任何一个技术特征,整个权利要求就崩了;如果你有层层从权,还能逐级退守,换来继续答辩的资格。AI不是不会写从权,它是不理解“退路”这个策略概念。

4.3 清楚性和引用基础:AI在细节处反复出错

第三个问题不是能力缺失,而是低级错误反复出现,我们称之为“细节失明”。

正常权利要求书里,“所述某部件”前面必须先出现“某部件”,这叫引用基础。AI经常前文没提过杯体,后文直接写“所述杯体”;同一份文件里一会儿叫“盖体”一会儿叫“杯盖”,术语前后不一致,直接导致保护范围解释出现歧义。还有一些答卷把方法特征写进产品权利要求,比如“当用户点击App上的按钮时”,这是产品权利要求里的大忌——被审查员一句“产品权利要求不应包含方法特征”就能打回来。更常见的是数值范围没有在说明书里找到依据,功能限定只有功能描述、缺少可实施的结构支撑。

这些错误单个看起来都不大,但申请文件的价值恰恰在于零缺陷。审查员没义务帮你脑补你没写清楚的边界。AI生成的句子单拎出来都通顺,可一旦放到“引用关系必须严格对应”的语境里,它那种“大概率词接大概率词”的生成方式,天然会不断制造指代混乱。

4.4 为什么这是“死穴”而不是“缺点”

有人可能会说,这些问题多给点专业提示词、多微调几轮不就能解决吗?我们测试过,效果有限。这不是prompt调优能修复的,而是目标和结构层面的错位。

大语言模型的优化目标是下一个词的预测,而你拿到的输出,本质上是“像人类文本的概率分布采样”。它追求的是“像人写的”。但专利权利要求追求的是“每个词的边界都立得住”。一个读起来最自然顺畅的句子,和一句法律上无懈可击的句子,往往是完全不同的两句话。AI选择了前者,不是因为它笨,是因为它的核心优化目标就建立在“自然性”之上。你可以微调让它多用专利术语,写出看起来更规范的格式,但只要生成逻辑还是概率分布采样,它在关键边界上就会不断滑向“最顺口的表达”,而“最顺口的表达”在边界场景里几乎一定是最模糊的那个。

这就是我所说的死穴:不是某个功能的短板,而是它从根基上就被训练成“取悦读者”,但专利申请文件需要的恰恰是“对抗读者”——每一个词都在等着被挑战、被绕过、被无效,你却要保证它们站得住。

5. 这个死穴不止属于专利

5.1 合同、技术规范、需求文档:都吃“边界”这碗饭

在专利场景发现这个规律之后,我们回头看了看日常工作中接触过的其他文档,发现AI写作工具的死穴在这里是普遍现象。

合同是最明显的。让AI起草一份采购合同,它大概率会写“供应商应在合理时间内交付并保证服务质量”,看着完全没问题,但做合同的人都知道“合理时间”是多少天?“服务质量”怎么度量?违约责任怎么计算?边界越模糊,执行时越容易扯皮。没有边界的条款等于没写。

技术规范也一样。AI会写“系统需具备高可用性”,但高可用到底是99.9%还是99.99%?故障恢复的RTO和RPO分别是多少?AI不会追问,因为追问不在它的生成目标里,它的目标是把句子补完整,让这一段看起来已经说完了。

需求文档更惨烈。AI写的“页面需要美观”“交互体验需要流畅”根本没法验收,因为“美观”和“流畅”都没有可测量的边界。正确的写法必须落到具体指标:首屏加载时间、控件间距、字号对比度、边界异常处理。这些文件的核心价值全都在“数字和范围”里,AI却只会给你一个“看着专业”的模糊描述。

5.2 AI写作工具的真正定位:从“替你写”变成“陪你改”

发现这个规律之后,我们调整了AI在工作流中的角色,现在用得顺手多了。我们让AI负责四类事情:

  • 说明书技术部分的初稿,这属于描述性内容,对边界要求相对低;
  • 为上位概括提供候选词,比如“除了手机App,还能怎么表达外部控制来源”;
  • 术语一致性检查,专门帮我挑出前后命名不一致的地方;
  • 把审查意见里的绕口写法翻译成正常人能理解的话。

但有两件事我们坚持不交给AI:决定独权里放哪个特征,以及判断某个数值范围或限定措辞要不要写进独权。团队内部有句口号:AI负责素材与检查,人负责决策与划线。这句话现在写在我们产品首页上。

5.3 给所有重度使用AI写作工具的人三条建议

如果你所在的领域也涉及合同、规范、需求、法律文书这类“边界敏感型文本”,以下三条来自我们实测的建议可以直接用:

  • 拿到AI生成的文稿,先问一句:这份文件将来是被人读,还是被人执行、审查、打官司?如果是后者,边界检查的优先级要高于流畅度检查。
  • 把AI输出当成多位合作者里的第一位,而不是最后一稿。当成一个话很多、写得快、但永远不担责的实习生,让它在前面铺路,但绝不让它独立签发。
  • 用“反向质问法”审查关键措辞:对AI生成的每个重要限定词,追问一句“竞争对手能不能绕过这个词?”如果回答不上来,就自己动手改成更严密的表达。

我见过太多同事用AI写完文档看都不看直接交出去,结果被法务或审查员追着问定义边界,反而花了三倍时间返工。AI提速的部分确实快,但边界决策的部分,一分钟都省不了。

6. 回到产品本身:我们踩过的坑和想明白的事

6.1 用AI做判卷点评,结果被AI“坑”了一回

在开发过程中,我们还做了一次反向实验:用AI给考生的撰写题做自动点评。第一版功能上线后,学员反馈“点评很客气,但完全没用”。看几条典型的AI点评你就明白了:“你的独立权利要求概括不够,建议进一步上位”——问题是它没说清楚到底是哪个特征需要上位、该上位成什么词、上位之后会不会撞上对比文件。

后来我们想明白了,这跟AI考生答题失败是同一个病根:AI能够感知到“这里有边界问题”,因为它见过大量类似文本模式;但它无法定位问题、更无法划出正确边界。它会做诊断式的套话,但不会做手术式的修改。这个反向验证反而让我们更确信主结论:AI在边界敏感任务里,只能当“感觉哪里不对”的预警器,当不了“把线画准”的执行者。

6.2 题库只能守住“熟练度”,守不住“判断力”

产品上线跑了一阵子之后,我们也认清了自己的边界。题库能解决的是把考生从50分拉到80分,考试套路、常见陷阱、独权从权的规范结构,这些都可以通过刷题快速掌握。但80分到90分以上,靠题库已经不够,必须回到真实世界里去浸泡:读审查意见、读无效决定、读法院判例,看那些边界争议到底在争什么。

这跟驾考宝典的局限一模一样:它能保证你科目二不挂,但练不出你在山路上开车的判断力。所以我们在题库之外增加了案例库,专门收录真实的审查意见和无效决定,还整理了一批AI翻车案作为反面教材——用AI的错误答案当教学材料,效果居然出奇地好,因为“错得典型”也是稀缺资源。

6.3 后续我们想做的事

接下来还有几个方向在推进。一是把AI的失败案例进一步结构化,变成新的考点入库;二是做“边界提醒”功能,在考生完成撰写后自动标出哪些地方存在概括不足、引用错误或特征冗余的风险——这活儿AI当预警器是真的合格,它能把可疑位置圈出来,剩下的人类自己判断;三是想把这个题库开放给更多同行,让更多的真实案例进来自我迭代。

最后说一点个人体会。做这个项目的过程中,我最大的感受是:AI写作工具的到来,并没有把需要高水平写作的人淘汰掉,反而把“边界感”这个词的分量放大了。以前一篇写得又顺又规范的专利,在很多外行眼里就是好专利;现在AI能批量生产这种“顺”,大家才开始认真审视那些真正决定价值的东西——你的保护范围划在哪里,遇到挑战往哪条路退,每个词到底立不立得住。

工具负责把话说漂亮,人负责把界划明白。这句话,我建议所有靠文字吃饭的同行都收藏一下。

RELATED READING

延伸阅读

更多一线实战笔记与深度复盘,助您持续精进