1.一种细分领域增强的隐式篇章关系识别方法,其特征在于,应用于隐式篇章关系识别模型,所述隐式篇章关系识别模型包括基础编码模块、多个细分领域编码模块、综合领域编码及分类模块、细分领域训练模块和综合领域训练模块;
所述方法包括:
基础编码模块通过预训练语言模型学习输入实例的多层语义表示,然后提取预训练语言模型中预设层数的Transformer层的输出作为输入实例的多层语义表示;
各个细分领域编码模块以输入实例的多层语义表示为输入,计算得到各个细分领域的多层语义表示,其中,每个细分领域编码模块包括多个适配层,且适配层的数量与输入实例多层语义表示的层数一致,每个适配层以对应的输入实例的语义表示以及上一个适配层的输出为输入,计算得到对应的适配层输出;
综合领域编码及分类模块在各个细分领域的多层语义表示的基础上,学习输入实例在综合领域的多层语义表示,然后基于分类层进行隐式篇章关系识别;
细分领域训练模块基于多个细分领域的显式篇章关系数据,分别对相应细分领域编码模块进行训练,综合领域训练模块基于人工标注隐式篇章关系数据,对综合领域编码及分类模块进行训练,直至模型收敛;
细分领域编码模块的数量为
其中,
综合领域编码及分类模块包括多个交替堆叠的适配层和增强层,最后叠加一个分类层;
给定
其中,
对于第
其中,
在细分领域训练模块中,在第
细分领域训练模块满足以下表达式:
其中,
综合领域训练模块满足以下表达式:
其中,
2.根据权利要求1所述的细分领域增强的隐式篇章关系识别方法,其特征在于,基础编码模块满足以下条件式:其中,