182-1095-8705
最新公告:NOTICE
8月1日起,国家知识产权局停征和调整部分专利收费,详情参阅资讯中心公告

知产战略

当前位置:商标申请 > 知产战略 >

通过Dropout论文和专利的对比,探讨AI算法相关专利的写作技巧

发明专利申请 商标申请 咨询电话 18210958705 QQ 2101183472 发布时间:2021-03-26 11:17:58


AI算法相关专利的写作技巧

1956年,人工智能概念被首次提出,近年来,AI相关论文数和专利申请量均呈现爆炸式的增长,其中AI相关专利的增长率显著高于论文数的增长率。
 
几个代表性的分支有例如AI机器学习和基础算法、智能搜索和智能推荐、语音识别、自然语言处理、自动驾驶及计算机视觉和图像识别。其中AI机器学习和基础算法类往往涉及算法方面,由于全球的专利法对于算法相关发明都有着特殊的规定,因而这方面的技术在学术论文和专利申请的撰写方面有诸多不同。
 
论文可以是完全纯理论的,如数学公式、算法等。而专利权,简称“专利”,则是国家或地区给予专利权人对特定的发明创造在一定期限内的排他的保护权。专利法对专利的主题和撰写形式有着特殊的规定。
 
通过对AI核心算法之一的Dropout技术的论文和专利进行对比,探讨AI算法相关专利的写作方法。
 
Dropout是由深度学习教父Geoffrey Hinton提出的一种深度卷积神经网络技术。Geoffrey Hinton由于其对机器学习领域的杰出贡献,获得了2018年度的图灵奖。
 
在机器学习的模型中,如果模型的参数太多,而训练样本又太少,训练出来的模型很容易产生过拟合的现象,Hinton提出的Dropout可以比较有效地缓解过拟合的发生,在一定程度上达到正则化的效果。
 
Dropout的开山之作发表于2012年7月3日,题为《Improving neural networks by preventing co-adaptation of feature detectors》,而对应的美国专利为US 9,406,017 B2,其最早的临时申请的申请日为2012年12月24日,授权公告日为2016年8月2日。该专利没有进入中国。
 
论文的公开发表日与专利的申请日
 
对于同一个发明,如果既发表论文又申请专利,该如何决定二者的递交/发表/申请日呢?通常来说,专利的申请日应当在论文公开发表日之前,因为专利要获得授权必须具有新颖性,即在申请日前没有相同的现有技术被公开,否则可能会因为时间安排不当而导致自己的论文破坏自己的专利的新颖性。
 
但该专利的申请日在论文的公开发表日之后,为什么仍然被授权了呢?这是因为各国对于专利申请都设置了“不丧失新颖性的宽限期” ,即在专利的申请日之前的一段时间内符合一定条件的公开不破坏专利的新颖性,只不过各国对于 “一段时间”的长短和“一定条件”的规定各有不同。
 
中国专利法二十四条规定,在专利的申请日前六个月内,由申请人(发明人)就相同发明创造在规定的学术会议或者技术会议上首次发表的,该专利申请不丧失新颖性。而美国则允许申请人在首次公开该发明内容的1年之内保留专利申请权。
 
AI算法专利的专利保护客体适格性审查
 
除了公开/申请的时间安排要适当之外,对于人工智能算法类专利申请而言,在各国专利审查中要面对的最大挑战是专利客体适格性的审查,因为这些算法或计算机程序往往体现为数学模型或计算方法,在多数国家都不是专利保护的客体。
 
中国专利法中涉及的相关条款有专利法第25条第1款第(二)项和第2条第2款。专利法第25条第1款第(二)项规定,智力活动的规则和方法不应被授予专利权。并且在专利审查指南里规定算法或数学计算规则不属于专利法保护客体。专利法第2条第2款规定,专利法所称的发明是指对产品、方法或者其改进所提出的新的技术方案。如果人工智能算法专利申请中仅仅记载了一种算法,不包含任何技术特征,则这样的专利申请既有可能因为落入了第25条第1款第(二)项所规定的情况而不属于专利法保护客体,也有可能因为不属于技术方案而不属于专利法保护客体。
 
美国专利法中涉及专利客体适格性审查的主要是101条款。美国专利法第101条规定:“无论是发明或发现任何新的和有用的过程、机器、产品或物质组成,或任何新的和有用的改进,符合本标题的条件和要求,都可以获得专利权。”但属于“司法例外”的自然法则、物理现象、与抽象概念不可以获得专利权。
 
在2014年Alice vs. CLS Bank案后,美国审查指南规定了判断适格专利客体时的两步法,即,步骤1:权利要求是过程、机器、产品或物质组成?步骤2A:确定权利要求是否指向司法例外。步骤2B:判断权利要求中是否有额外要素(additional elements),足以使整体方案明显多于(significantly more)司法例外。
 
然而该两步法在审查员的实际分析遇到了很多困难,特别是涉及人工智能及机器学习算法的发明,相当一部分该领域的专利申请都因为客体问题被驳回。在这样的背景下,美国2019年初发布了新修改的审查指南。
 
首先评估权利要求是否引用了司法例外的情况(2019年指南中列举的抽象概念、自然法则或自然现象)。若权利要求没有引用任何的“司法例外”,则符合专利客体要求。如果引用了“司法例外”,请转到Prong2步骤。在Prong2步骤,评估权利要求是否记载了将“司法例外”整合到实际应用的其他元素。若所述例外被整合到实际应用中,则该权利要求是适格的专利客体。若“司法例外”没有整合到实际应用中,权利要求将指向到“司法例外”,转到步骤2B进行进一步分析。
 
AI算法相关专利的写作技巧
 
通过检索该专利在USPTO的审查历史,发现这个专利在审查阶段并没有被指出过客体问题,而仅仅是在第一次审查意见通知书中被指出了创造性问题,申请人通过一次修改和答复,即被授权。这说明美国审查员认为权利要求是通过了专利客体适格性审查的。试着按照USPTO的修改前的审查指南来对本专利进行一下专利客体适格性判断。
 
首先,在步骤1中确定权利要求是一种过程。然后进行到步骤2A,由于权利要求中包括训练神经网络,属于抽象概念,那么在审查时会判定权利要求指向司法例外。接下来关键的是步骤2B能否得出权利要求中是否有额外要素足以使整体方案明显多于司法例外。
 
由于在步骤2B的判断中涉及对发明构思(inventive concept)的判断,因此往往需要通过结合说明书来进行此步骤。我们发现权利要求1中的特征检测器(feature detector)可以被认为是处理“节点”,一个或多个处理节点可以被实施为处理器。进一步,权利要求中的禁用(disabling)的步骤是通过在传统神经网络中引入了新元素,即开关(switch)和随机数发生器实现的。并且说明书还记载了本发明可以用于图像分类、对象识别和语音识别等实际应用,通过本发明的新的结构和流程可以在提高对测试数据的预测准确率的同时减少提高效率和减少时间。通过这些内容,可以得知该权利要求与仅由计算机实现的抽象概念相比满足了“明显多于”的要求。
 
AI算法专利的写作技巧
 
通过以上分析可以看出,对于算法或计算规则相关的发明创造,只要撰写得当,是可以申请专利获得授权的。撰写AI算法相关专利申请时考虑以下几个方面:
 
1,记载实现算法的硬件环境,例如添加处理器、存储器等硬件部件。
 
本案例,专利在说明书文字部分和附图都明确记载了整个系统包括处理器和存储器。本案例的论文仅仅说明了算法的原理和用不同的样本数据和测试数据的实验结果,完全没有提到硬件环境。虽然中国专利法和审查指南对于硬件环境没有硬性要求,写成虚拟的软件模块只要符合审查指南第二部分第九章的要求也具备授权可能性。然而如果要去其他国家和地区申请专利,则必须要考虑这个问题。比如美国专利实践就倾向于保护有形的产品,由虚拟模块构成的产品往往会被认为得不到说明书的支持,因此,如果专利申请想要在美国获得授权,最好描述算法实现的硬件环境。此外,中国的专利审查指南在2017年4月1日修改之后,也允许处理器+存储器的形式。
 
2,将算法转化成流程步骤,并在系统结构中增加算法的执行部件。
 
本案例,创新点在于使得某些节点的激活值以一定的概率p停止工作。对于论文来说,原理部分写到这里就够了,本论文中并没有记载具体的实现流程或部件,而是把重点放在了使用各种样本集和测试集的实验结果上。但是对于专利来说,所关注的是这样的构思如何具体实现的,因此在申请文件中必须写明具体的实现流程或部件。
 
本专利中,说明书在系统结构的描述中写明了本发明是通过增加了一个开关(switch)和一个随机数发生器实现的。开关可以按照学习的或预配置的概率选择性地禁用神经网络中的特征检测器。随机数发生器连接到开关并且为开关提供使开关禁用特征检测器的随机数。而开关和随机数发生器这样的部件在论文是完全没有出现过的,是为了符合专利申请的要求创造出来的。
 
说明书在还按照训练神经网络的算法流程,撰写了方法步骤,包括禁用特征检测器、处理训练实例、正则化权重、处理测试集,参见图2和说明书相关文字记载。合适的方法流程步骤对于理解AI算法的发明构思和符合专利撰写和审查要求是必需的。
 
3,将算法与实际应用场景结合。
 
美国新修改的审查指南在专利客体适格性判定的步骤2A中的Prong2步骤明确规定,如果权利要求记载了将“司法例外”整合到实际应用的其他元素,则该权利要求是适格的专利客体。中国的审查指南虽未明确规定,但是在第二部分第九章也规定了,如果涉及计算机程序的发明专利申请的解决方案执行计算机程序的目的是解决技术问题,在计算机上运行计算机程序从而对外部或内部对象进行控制或处理所反映的是遵循自然规律的技术手段,并且由此获得符合自然规律的技术效果,则这种解决方案属于专利法第二条第二款所说的技术方案,属于专利保护的客体。所说的对外部对象的控制或处理包括对某种外部运行过程或外部运行装置进行控制,对外部数据进行处理或者交换等;所说的对内部对象的控制或处理包括对计算机系统内部性能的改进,对计算机系统内部资源的管理,对数据传输的改进等。这些规定也暗含了计算机软件应当与具体的应用场景(内部对象或外部对象)结合。实践中,审查员在考虑客体适格性时,实际应用场景是非常重要的一个考量因素。
 
本案例,由于论文通常要求作者详述实验结果,因此在论文中已经记载了应用在语音识别和图像识别方面的成果。在专利申请中应当将这些实际应用记载在其中,同时还应当写明技术效果。虽然专利申请不需要像论文那样写明具体的参数和具体的实验结果,但是一个概述的技术效果,对于专利客体适格性的评估有着非常重要的影响,尤其是结合实际应用场景的效果。
 
例,专利说明书中记载本发明可以提高对语音识别或图像识别的测试集的识别性能,并且还提高了效率和减少了时间。这些技术效果的记载可能是本专利被认为是适格的专利客体的重要依据。
 
在最近这次AI技术起飞之前或之初,国际科技企业,谷歌、微软、IBM等已经布局了很多AI相关专利,有的甚至是特别基础的AI算法专利,例如本案例涉及的Dropout算法。我国的高校科研院所和企业在发表学术论文的同时,也要注意进行相应的专利布局,特别要注重高价值和基础技术专利在全球的布局,使我国在全球AI技术革命中占得一席之地。
 

(乐知网- 领先的一站式知识产权服务平台,聚焦 发明专利申请,商标申请 业务)


关键词: 发明专利申请 怎么申请专利 如何申请专利