PaddleNLP UIE Taskflow 文本信息抽取指南:零训练实现实体、关系、事件与观点抽取

原创2026-09-24 22:37:591,823 阅读
文章标签:人工智能大模型NLP深度学习机器学习预训练微调LoRA模型量化模型推理服务强化学习分布式训练Embedding本地部署

PaddleNLP UIE Taskflow 文本信息抽取指南:零训练实现实体、关系、事件与观点抽取

导读

本文以 PaddleNLP 信息抽取应用中的文本抽取 Taskflow 使用指南为核心,系统讲解如何通过 paddlenlp.Taskflow 的 information_extraction 任务,在无需任何标注数据与模型训练的前提下,用自然语言自定义抽取目标(schema),开箱即用地完成实体抽取、关系抽取、事件抽取、评论观点抽取、情感分类以及多任务跨场景抽取。读完本文,你将掌握 UIE 系列模型的选型策略、六类抽取任务的 schema 构造方法与完整调用代码、position_prob/batch_size/precision 等关键参数的作用机理,并能结合信息抽取源码理解 schema 树遍历、多阶段预测与位置概率过滤的底层实现。


1. 功能简介:什么是 UIE Taskflow 文本信息抽取

paddlenlp.Taskflow 提供纯文本的通用信息抽取与评价观点抽取能力,可抽取的信息类型包括但不限于:

  • 命名实体识别(NER):人名、地名、机构名等;
  • 关系(Relation):如电影的导演、歌曲的发行时间等;
  • 事件(Event):如某路口发生车祸、某地发生地震等;
  • 评价维度、观点词与情感倾向:如"性价比高""服务热情"等。

其核心特性是用户可以使用自然语言自定义抽取目标(schema),无需训练即可统一抽取输入文本中的对应信息,实现开箱即用,满足各类信息抽取需求。该能力依托于 PaddleNLP 信息抽取应用基于 UIE(Universal Information Extraction)统一建模思想打造的产业级方案:它以 ERNIE 3.0 轻量级模型为预训练基座,并在大量信息抽取数据上进行了二次预训练,使模型天然适配固定的 prompt 格式,因此同一套模型参数即可在不同任务、不同领域间灵活切换,无需为每种任务重新训练。

从当前仓库的源码注册表(paddlenlp/taskflow/taskflow.py)可以看到,information_extraction 任务下注册了完整的 UIE 模型族(uie-base、uie-medium、uie-mini、uie-micro、uie-nano、uie-base-en、uie-m-base、uie-m-large、uie-medical-base、uie-x-base 等),并默认使用 uie-base;模型权重会在首次调用时按 resource_files_urls(见 information_extraction.py)自动下载到本地缓存,无需人工干预。


2. 应用示例:跨行业的开箱即用

UIE 不限定行业领域和抽取目标,以下是通过 Taskflow 即可实现开箱即用的典型行业场景(示例来源见信息抽取应用 README):

  • 医疗场景:专病结构化抽取,如肿瘤大小、肝癌级别、脉管内癌栓分级;
  • 法律场景:判决书抽取,如法院、原告、被告及其委托代理人;
  • 金融场景:收入证明、招股书关键信息抽取;
  • 公安场景:事故报告要素抽取;
  • 旅游场景:宣传册、旅游手册信息抽取。

这些场景的共同特点是领域专精、文档结构复杂、标注数据稀缺。UIE 的"提示式抽取"设计使得开发者只需在 schema 中写下期望抽取的字段名,即可快速完成业务 POC 验证;后续再通过少样本微调(few-shot)进一步提升精度,实现从原型到落地的无缝衔接。


3. 文本信息抽取实战

下面按任务类型逐一讲解 schema 构造与调用方法。所有示例中 ie 为已实例化的 Taskflow('information_extraction', schema=schema) 对象;当需要更换抽取目标时,通过 set_schema 方法重置即可,无需重新创建对象。

3.1 实体抽取

实体抽取又称命名实体识别(Named Entity Recognition,NER),指识别文本中具有特定意义的实体。开放域信息抽取中,实体类别没有限制,由用户自定义,schema 构造为字符串列表 ['实体类型1', '实体类型2', ...]。

示例一:体育新闻实体抽取

抽取目标实体类型为"时间""选手""赛事名称",schema 构造如下:

['时间', '选手', '赛事名称']

调用示例:

>>> from pprint import pprint
>>> from paddlenlp import Taskflow

>>> schema = ['时间', '选手', '赛事名称'] # Define the schema for entity extraction
>>> ie = Taskflow('information_extraction', schema=schema)
>>> pprint(ie("2月8日上午北京冬奥会自由式滑雪女子大跳台决赛中中国选手谷爱凌以188.25分获得金牌!")) # Better print results using pprint
[{'时间': [{'end': 6,
          'probability': 0.9857378532924486,
          'start': 0,
          'text': '2月8日上午'}],
  '赛事名称': [{'end': 23,
            'probability': 0.8503089953268272,
            'start': 6,
            'text': '北京冬奥会自由式滑雪女子大跳台决赛'}],
  '选手': [{'end': 31,
          'probability': 0.8981548639781138,
          'start': 28,
          'text': '谷爱凌'}]}]

输出中每个实体包含 text(实体原文)、start/end(在原始文本中的字符位置区间,左闭右开)和 probability(抽取置信度)。

示例二:医疗病理文本实体抽取

抽取目标为"肿瘤的大小""肿瘤的个数""肝癌级别""脉管内癌栓分级",schema 构造如下:

['肿瘤的大小', '肿瘤的个数', '肝癌级别', '脉管内癌栓分级']

在上例中我们已经实例化了一个 Taskflow 对象,这里可以通过 set_schema 方法重置抽取目标:

>>> schema = ['肿瘤的大小', '肿瘤的个数', '肝癌级别', '脉管内癌栓分级']
>>> ie.set_schema(schema)
>>> pprint(ie("(右肝肿瘤)肝细胞性肝癌(II-III级,梁索型和假腺管型),肿瘤包膜不完整,紧邻肝被膜,侵及周围肝组织,未见脉管内癌栓(MVI分级:M0级)及卫星子灶形成。(肿物1个,大小4.2×4.0×2.8cm)。"))
[{'肝癌级别': [{'end': 20,
            'probability': 0.9243267447402701,
            'start': 13,
            'text': 'II-III级'}],
  '肿瘤的个数': [{'end': 84,
            'probability': 0.7538413804059623,
            'start': 82,
            'text': '1个'}],
  '肿瘤的大小': [{'end': 100,
            'probability': 0.8341128043459491,
            'start': 87,
            'text': '4.2×4.0×2.8cm'}],
  '脉管内癌栓分级': [{'end': 70,
              'probability': 0.9083292325934664,
              'start': 67,
              'text': 'M0级'}]}]

示例三:英文实体抽取

抽取目标实体类型为 Person 与 Organization,schema 构造如下:

['Person', 'Organization']

英文模型调用示例(指定 model='uie-base-en'):

>>> from pprint import pprint
>>> from paddlenlp import Taskflow
>>> schema = ['Person', 'Organization']
>>> ie_en = Taskflow('information_extraction', schema=schema, model='uie-base-en')
>>> pprint(ie_en('In 1997, Steve was excited to become the CEO of Apple.'))
[{'Organization': [{'end': 53,
                    'probability': 0.9985840259877357,
                    'start': 48,
                    'text': 'Apple'}],
  'Person': [{'end': 14,
              'probability': 0.999631971804547,
              'start': 9,
              'text': 'Steve'}]}]

3.2 关系抽取

关系抽取(Relation Extraction,RE)指从文本中识别实体并抽取实体之间的语义关系,输出三元组信息 <主体,谓语,客体>。此时 schema 需要采用嵌套字典形式:外层键为抽取主体(Subject),值为该主体需要抽取的关系类型(Predicate)列表。

示例一:中文竞赛领域关系抽取

以"竞赛名称"作为抽取主体,抽取"主办方""承办方""已举办次数"关系,schema 构造如下:

{
  '竞赛名称': [
    '主办方',
    '承办方',
    '已举办次数'
  ]
}

调用示例:

>>> schema = {'竞赛名称': ['主办方', '承办方', '已举办次数']} # Define the schema for relation extraction
>>> ie.set_schema(schema) # Reset schema
>>> pprint(ie('2022语言与智能技术竞赛由中国中文信息学会和中国计算机学会联合主办,百度公司、中国中文信息学会评测工作委员会和中国计算机学会自然语言处理专委会承办,已连续举办4届,成为全球最热门的中文NLP赛事之一。'))
[{'竞赛名称': [{'end': 13,
            'probability': 0.7825402622754041,
            'relations': {'主办方': [{'end': 22,
                                  'probability': 0.8421710521379353,
                                  'start': 14,
                                  'text': '中国中文信息学会'},
                                  {'end': 30,
                                  'probability': 0.7580801847701935,
                                  'start': 23,
                                  'text': '中国计算机学会'}],
                          '已举办次数': [{'end': 82,
                                    'probability': 0.4671295049136148,
                                    'start': 80,
                                    'text': '4届'}],
                          '承办方': [{'end': 39,
                                  'probability': 0.8292706618236352,
                                  'start': 35,
                                  'text': '百度公司'},
                                  {'end': 72,
                                  'probability': 0.6193477885474685,
                                  'start': 56,
                                  'text': '中国计算机学会自然语言处理专委会'},
                                  {'end': 55,
                                  'probability': 0.7000497331473241,
                                  'start': 40,
                                  'text': '中国中文信息学会评测工作委员会'}]},
            'start': 0,
            'text': '2022语言与智能技术竞赛'}]}]

可以看到,嵌套结果中主体实体通过 relations 字段挂载所有关系客体,且同一关系类型下可返回多个客体(如"主办方"同时抽出了两个机构)。

示例二:英文人物关系抽取

以 Person 为主体,抽取 Company 与 Position 关系:

{
  'Person': [
    'Company',
    'Position'
  ]
}

英文模型调用示例:

>>> schema = [{'Person': ['Company', 'Position']}]
>>> ie_en.set_schema(schema)
>>> pprint(ie_en('In 1997, Steve was excited to become the CEO of Apple.'))
[{'Person': [{'end': 14,
              'probability': 0.999631971804547,
              'relations': {'Company': [{'end': 53,
                                        'probability': 0.9960158209451642,
                                        'start': 48,
                                        'text': 'Apple'}],
                            'Position': [{'end': 44,
                                          'probability': 0.8871063806420736,
                                          'start': 41,
                                          'text': 'CEO'}]},
              'start': 9,
              'text': 'Steve'}]}]

3.3 事件抽取

事件抽取(Event Extraction,EE)指从自然语言文本中抽取预定义的事件触发词(Trigger)和事件论元(Argument),组合为对应的事件结构化信息。schema 构造为以触发词为主体的字典,其值列表为事件论元。

以"地震"事件为例,抽取"地震强度""时间""震中位置""震源深度":

{
  '地震触发词': [
    '地震强度',
    '时间',
    '震中位置',
    '震源深度'
  ]
}

触发词格式说明:触发词统一写作 触发词 或 XX触发词,其中 XX 为具体事件类型。上例事件类型是"地震",故触发词写作 地震触发词。

调用示例:

>>> schema = {'地震触发词': ['地震强度', '时间', '震中位置', '震源深度']} # Define the schema for event extraction
>>> ie.set_schema(schema) # Reset schema
>>> ie('中国地震台网正式测定:5月16日06时08分在云南临沧市凤庆县(北纬24.34度,东经99.98度)发生3.5级地震,震源深度10千米。')
[{'地震触发词': [{'text': '地震', 'start': 56, 'end': 58, 'probability': 0.9987181623528585, 'relations': {'地震强度': [{'text': '3.5级', 'start': 52, 'end': 56, 'probability': 0.9962985320905915}], '时间': [{'text': '5月16日06时08分', 'start': 11, 'end': 22, 'probability': 0.9882578028575182}], '震中位置': [{'text': '云南临沧市凤庆县(北纬24.34度,东经99.98度)', 'start': 23, 'end': 50, 'probability': 0.8551415716584501}], '震源深度': [{'text': '10千米', 'start': 63, 'end': 67, 'probability': 0.999158304648045}]}}]}]

注意:英文模型(uie-base-en)暂不支持事件抽取,如有需要可使用英文事件数据集对模型进行定制微调。

3.4 评论观点抽取

评论观点抽取用于抽取文本中包含的评价维度及其对应的观点词与情感倾向。schema 构造为以"评价维度"为主体的字典:

{
  '评价维度': [
    '观点词',
    '情感倾向[正向,负向]'
  ]
}

调用示例:

>>> schema = {'评价维度': ['观点词', '情感倾向[正向,负向]']} # Define the schema for opinion extraction
>>> ie.set_schema(schema) # Reset schema
>>> pprint(ie("店面干净,很清静,服务员服务热情,性价比很高,发现收银台有排队")) # Better print results using pprint
[{'评价维度': [{'end': 20,
            'probability': 0.9817040258681473,
            'relations': {'情感倾向[正向,负向]': [{'probability': 0.9966142505350533,
                                          'text': '正向'}],
                          '观点词': [{'end': 22,
                                  'probability': 0.957396472711558,
                                  'start': 21,
                                  'text': '高'}]},
            'start': 17,
            'text': '性价比'},
          {'end': 2,
            'probability': 0.9696849569741168,
            'relations': {'情感倾向[正向,负向]': [{'probability': 0.9982153274927796,
                                          'text': '正向'}],
                          '观点词': [{'end': 4,
                                  'probability': 0.9945318044652538,
                                  'start': 2,
                                  'text': '干净'}]},
            'start': 0,
            'text': '店面'}]}]

示例输入中包含了"性价比很高""店面干净"等评价表达,模型能够逐条拆解为 <评价维度, 观点词, 情感倾向> 结构。

英文模型 schema 构造如下(注意情感倾向选项使用英文):

{
  'Aspect': [
    'Opinion',
    'Sentiment classification [negative, positive]'
  ]
}

调用示例:

>>> schema = [{'Aspect': ['Opinion', 'Sentiment classification [negative, positive]']}]
>>> ie_en.set_schema(schema)
>>> pprint(ie_en("The teacher is very nice."))
[{'Aspect': [{'end': 11,
              'probability': 0.4301476415932193,
              'relations': {'Opinion': [{'end': 24,
                                        'probability': 0.9072940447883724,
                                        'start': 15,
                                        'text': 'very nice'}],
                            'Sentiment classification [negative, positive]': [{'probability': 0.9998571920670685,
                                                                              'text': 'positive'}]},
              'start': 4,
              'text': 'teacher'}]}]

3.5 情感分类

句子级情感倾向分类用于判断整句的情感倾向是"正向"还是"负向",schema 只需一个字符串:

'情感倾向[正向,负向]'

调用示例:

>>> schema = '情感倾向[正向,负向]' # Define the schema for sentence-level sentiment classification
>>> ie.set_schema(schema) # Reset schema
>>> ie('这个产品用起来真的很流畅,我非常喜欢')
[{'情感倾向[正向,负向]': [{'text': '正向', 'probability': 0.9988661643929895}]}]

英文模型 schema 构造如下:

'Sentiment classification [negative, positive]'

英文模型调用示例:

>>> schema = 'Sentiment classification [negative, positive]'
>>> ie_en.set_schema(schema)
>>> ie_en('I am sorry but this is the worst film I have ever seen in my life.')
[{'Sentiment classification [negative, positive]': [{'text': 'negative', 'probability': 0.9998415771287057}]}]

与 span 抽取不同,情感分类输出不含 start/end 位置信息,仅返回分类标签与概率——在源码 _auto_joiner(information_extraction.py)中会对这种"无位置"的分类结果做专门的投票聚合处理。

3.6 跨任务抽取

schema 支持实体类型与关系类型混合嵌套,从而在一次调用中同时完成多个任务。例如在法律场景同时对文本进行实体抽取和关系抽取:

[
  "法院",
  {
      "原告": "委托代理人"
  },
  {
      "被告": "委托代理人"
  }
]

调用示例:

>>> schema = ['法院', {'原告': '委托代理人'}, {'被告': '委托代理人'}]
>>> ie.set_schema(schema)
>>> pprint(ie("北京市海淀区人民法院\n民事判决书\n(199x)建初字第xxx号\n原告:张三。\n委托代理人李四,北京市 A律师事务所律师。\n被告:B公司,法定代表人王五,开发公司总经理。\n委托代理人赵六,北京市 C律师事务所律师。")) # Better print results using pprint
[{'原告': [{'end': 37,
          'probability': 0.9949814024296764,
          'relations': {'委托代理人': [{'end': 46,
                                  'probability': 0.7956844697990384,
                                  'start': 44,
                                  'text': '李四'}]},
          'start': 35,
          'text': '张三'}],
  '法院': [{'end': 10,
          'probability': 0.9221074192336651,
          'start': 0,
          'text': '北京市海淀区人民法院'}],
  '被告': [{'end': 67,
          'probability': 0.8437349536631089,
          'relations': {'委托代理人': [{'end': 92,
                                  'probability': 0.7267121388225029,
                                  'start': 90,
                                  'text': '赵六'}]},
          'start': 64,
          'text': 'B公司'}]}]

这一混合 schema 在底层被解析为一棵 schema 树:根节点下同时挂载"法院"叶子节点与"原告/被告"子树(子树上再挂"委托代理人"关系),模型按树结构逐层遍历预测,最终在结果中合并输出。


4. 模型选择:精度与速度的平衡

UIE 提供了多种尺寸的模型以满足不同精度与速度需求,官方预训练模型清单如下:

模型 结构 语言
uie-base (默认) 12-layers, 768-hidden, 12-heads 中文
uie-base-en 12-layers, 768-hidden, 12-heads 英文
uie-medical-base 12-layers, 768-hidden, 12-heads 中文
uie-medium 6-layers, 768-hidden, 12-heads 中文
uie-mini 6-layers, 384-hidden, 12-heads 中文
uie-micro 4-layers, 384-hidden, 12-heads 中文
uie-nano 4-layers, 312-hidden, 12-heads 中文
uie-m-large 24-layers, 1024-hidden, 16-heads 中、英文
uie-m-base 12-layers, 768-hidden, 12-heads 中、英文

从信息抽取应用 README 的实验数据看,uie-base 在金融、医疗、互联网三大垂类文本测试集上具备较强的零样本能力,而小模型(uie-medium/uie-mini/uie-micro/uie-nano)层数与隐层维度更小,适合对推理速度敏感的场景。uie-m-base/uie-m-large 额外支持中英文混合抽取。此外,当前仓库还注册了 uie-x-base(支持文档/图片端到端抽取)以及 uie-data-distill-gp(封闭域蒸馏后的 Global Pointer 模型,用于低延迟部署),相关模型在 taskflow.py 的 information_extraction 任务注册表中均有登记。

uie-nano 调用示例(轻量模型,推理更快):

>>> from paddlenlp import Taskflow

>>> schema = ['时间', '选手', '赛事名称']
>>> ie = Taskflow('information_extraction', schema=schema, model="uie-nano")
>>> ie("2月8日上午北京冬奥会自由式滑雪女子大跳台决赛中中国选手谷爱凌以188.25分获得金牌!")
[{'时间': [{'text': '2月8日上午', 'start': 0, 'end': 6, 'probability': 0.6513581678349247}], '选手': [{'text': '谷爱凌', 'start': 28, 'end': 31, 'probability': 0.9819330659468051}], '赛事名称': [{'text': '北京冬奥会自由式滑雪女子大跳台决赛', 'start': 6, 'end': 23, 'probability': 0.4908131110420939}]}]

uie-m-base / uie-m-large 中英文混合抽取调用示例(支持批量输入,schema 语言通过 schema_lang 指定):

>>> from pprint import pprint
>>> from paddlenlp import Taskflow

>>> schema = ['Time', 'Player', 'Competition', 'Score']
>>> ie = Taskflow('information_extraction', schema=schema, model="uie-m-base", schema_lang="en")
>>> pprint(ie(["2月8日上午北京冬奥会自由式滑雪女子大跳台决赛中中国选手谷爱凌以188.25分获得金牌!", "Rafael Nadal wins French Open Final!"]))
[{'Competition': [{'end': 23,
                  'probability': 0.9373889907291257,
                  'start': 6,
                  'text': '北京冬奥会自由式滑雪女子大跳台决赛'}],
  'Player': [{'end': 31,
              'probability': 0.6981119555336441,
              'start': 28,
              'text': '谷爱凌'}],
  'Score': [{'end': 39,
            'probability': 0.9888507878270296,
            'start': 32,
            'text': '188.25分'}],
  'Time': [{'end': 6,
            'probability': 0.9784080036931151,
            'start': 0,
            'text': '2月8日上午'}]},
 {'Competition': [{'end': 35,
                  'probability': 0.9851549932171295,
                  'start': 18,
                  'text': 'French Open Final'}],
  'Player': [{'end': 12,
              'probability': 0.9379371275888104,
              'start': 0,
              'text': 'Rafael Nadal'}]}]

5. 更多配置参数详解

Taskflow('information_extraction', ...) 支持以下关键参数:

>>> from paddlenlp import Taskflow

>>> ie = Taskflow('information_extraction',
                  schema="",
                  schema_lang="ch",
                  batch_size=16,
                  model='uie-base',
                  position_prob=0.5,
                  precision='fp32')
  • schema:定义任务抽取目标,可参考上文各任务中的调用示例进行配置。省略或为空时,任务会打印警告提示通过 set_schema() 设置抽取目标(对应源码 information_extraction.py 中的校验逻辑)。
  • schema_lang:设置 schema 的语言,默认为 ch,可选 ch 和 en。由于中英文 schema 的构造方式不同(如情感倾向选项写作 情感倾向[正向,负向] 还是 Sentiment classification [negative, positive]),因此需要显式指定语言。该参数只对 uie-x-base、uie-m-base 和 uie-m-large 模型有效。
  • batch_size:批处理大小,默认为 16,请结合机器显存/内存情况调整。在源码中该值直接作用于 paddle.io.BatchSampler(information_extraction.py),决定每次送入推理引擎的样本数。
  • model:选择任务使用的模型,默认为 uie-base,可选 uie-base、uie-medium、uie-mini、uie-micro、uie-nano、uie-medical-base、uie-base-en、uie-x-base 等(完整清单见上文模型表与任务注册表)。另外从源码注册表可以看到,当前仓库还注册了 paddlenlp/PP-UIE-0.5B、paddlenlp/PP-UIE-1.5B、paddlenlp/PP-UIE-7B、paddlenlp/PP-UIE-14B 四档基于 LLM 的 PP-UIE 模型(对应 UIELLMTask 实现,见 information_extraction.py),可在更大规模任务中选用。
  • position_prob:模型对 span 起始位置/终止位置的结果概率取值范围为 0~1,返回结果会过滤掉概率低于该阈值的结果,默认为 0.5。span 的最终概率输出为起始位置概率与终止位置概率的乘积。其底层实现位于 information_extraction.py:调用 get_bool_ids_greater_than 以该阈值为界筛出候选起止位置,再通过 get_span 组合出最终 span 集合。调低该值可召回更多低置信度实体,调高则输出更保守。
  • precision:选择模型推理精度,默认为 fp32,可选 fp16 与 fp32。fp16 推理速度更快,支持 GPU 和 NPU 硬件环境。选择 fp16 时:
    • 在 GPU 环境下,请先确保机器正确安装 NVIDIA 相关驱动和基础软件,确保 CUDA>=11.2、cuDNN>=8.1.1,初次使用需按提示安装相关依赖;
    • 其次,需要确保 GPU 设备的 CUDA 计算能力(CUDA Compute Capability)大于 7.0,典型设备包括 V100、T4、A10、A100 以及 GTX 20 系列、30 系列显卡等;
    • 从源码看,fp16 精度在 CPU 上会自动回退为 fp32(见 task.py 中的设备判断逻辑),NPU 环境下则会将静态图模型转换为混合精度后再推理,无需额外手工处理。

6. 源码级原理:schema 树与多阶段预测

理解 UIE Taskflow 的底层机制,有助于在复杂业务中设计出更高效的 schema。核心逻辑全部位于 paddlenlp/taskflow/information_extraction.py:

  1. schema 树构建:_build_tree(L1642-L1665)将用户传入的 schema 解析为一棵 SchemaTree——字符串元素成为叶子节点,字典元素则递归展开为子树。例如 {'地震触发词': ['地震强度', '时间', ...]} 会被构建为"根 → 地震触发词 → 地震强度/时间/..."的多级结构。

  2. 多阶段预测:_multi_stage_predict(L1441-L1555)按广度优先顺序遍历 schema 树。第一层节点以原始文本为输入、以节点名作为 prompt 抽取主体实体;随后将已抽出的主体文本拼接到下一层节点的 prompt 前(中文以"主体+的+关系类型"、英文以"of +主体"的形式,见 L1541-L1548),从而为关系/论元抽取提供上下文,最终把各级结果通过 relations 字段逐级挂载。

  3. 阈值过滤与结果拼装:单层预测时,模型输出起始/终止位置的概率分布,position_prob 作为下限过滤候选位置(L1340-L1346);长文本会被 _auto_splitter 自动切分,预测后再由 _auto_joiner(L1351-L1398)按切分映射把结果拼回完整原文的字符区间。

  4. 三种任务实现:除基于 UIE 抽取式模型的 UIETask 外,源码中还包含基于 LLM 生成式模型的 UIELLMTask(通过 LLM_IE_PROMPT 提示词让模型逐字输出实体,见 L124-L132)与面向蒸馏部署的 GPTask(基于 Global Pointer/GPLinker 结构),三者统一通过 Taskflow('information_extraction', model=...) 调度。

此外,tests/taskflow/test_information_extraction.py 中提供了实体抽取、关系抽取、观点抽取等任务的自动化测试用例,例如 test_relation_extraction(L68-L85)会校验输出中每个主体实体均携带 relations 字段且关系类型与 schema 一致,可作为理解输出格式与验证环境安装是否正确的参考。


7. 从开箱即用到产业落地

Taskflow 开箱即用适合需求开放且缺少数据积累的调研与 POC 阶段;当需要在真实业务场景中追求更高精度时,PaddleNLP 信息抽取应用提供了一条完整的产业落地链路(详见信息抽取应用 README 的"产业级全流程方案"):

  • 文本信息抽取全流程:基于 UIE 的小样本微调能力,使用少量标注数据即可低成本定制领域模型,示例入口见 text 目录说明;
  • 数据标注:配套 Label Studio 标注方案,实现从标注到训练数据构造的无缝衔接,文本标注指南见 label_studio_text.md;
  • 文档/多模态抽取:如需对图片、扫描件、表格做端到端抽取,可参考文档抽取 Taskflow 使用指南(对应 uie-x-base 模型);
  • 模型部署:微调后的定制模型可基于 HTTP 部署方案快速上线服务。

综上所述,PaddleNLP 的 UIE Taskflow 以"统一建模 + 提示式抽取"为核心,将实体、关系、事件、观点、情感等多元任务收敛为一次自然语言 schema 声明,配合多尺寸模型族与完善的参数调节能力,为文本信息抽取场景提供了从零样本验证到少样本定制、再到生产部署的完整解决方案。开发者可直接以本文的 schema 与调用代码为起点,在自有业务数据上快速开展抽取实验。

登录后查看全文
PaddleNLP