duee篇章级预测结果后处理

import os
import sys
import json

def read_by_lines(path):
    result = list()
    with open(path, "r", encoding="utf8") as infile:
        for line in infile:
            result.append(line.strip())
    return result

def write_by_lines(path, data):
    with open(path, "w", encoding="utf8") as outfile:
        [outfile.write(d + "\n") for d in data]

def extract_result(text, labels):
    ret, is_start, cur_type = [], False, None
    if len(text) != len(labels):
        labels = labels[:len(text)]#截断
    for i, label in enumerate(labels):
        if label != u"O":#实体
            _type = label[2:]#事件类型或角色类型
            if label.startswith(u"B-"):#以B-开头
                is_start = True
                cur_type = _type
                #这是一个实体的开始
                ret.append({"start": i, "text": [text[i]], "type": _type})
            elif _type != cur_type:#
                cur_type = _type
                is_start = True
                ret.append({"start": i, "text": [text[i]], "type": _type})#新实体
            elif is_start: #如果还在当前实体内,追加文本
                ret[-1]["text"].append(text[i])
            else:
                cur_type = None
                is_start = False
        else:#非实体
            cur_type = None
            is_start = False
    return ret

trigger_file='./ckp

  • 10
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值