中文错别字纠正评价代码

def eval_sighan2015_by_model(sighan_path):
    """
    Args:
        correct_fn:
        input_eval_path:
        output_eval_path:
        verbose:

    Returns:
        Acc, Recall, F1
    """
    TP = 0.0
    FP = 0.0
    FN = 0.0
    TN = 0.0
    total_num = 0
    start_time = time.time()
    with open(sighan_path, 'r', encoding='utf-8') as f:
        change_num = 0
        for line in f:
            src, tgt_pred, tgt = line.strip().split(" ")
            if src != tgt_pred:
                change_num += 1
            # 负样本
            if src == tgt:
                # 预测也为负
                if tgt == tgt_pred:
                    TN += 1  # 预测为正
                else:
                    FP += 1
            # 正样本
            else:
                # 预测也为正
                if tgt == tgt_pred:
                    TP += 1  # 预测为负
                else:
                    FN += 1
            total_num += 1
        spend_time = time.time() - start_time
        acc = (TP + TN) / total_num
        # precision = TP / (TP + FP) if TP > 0 else 0.0
        # 用这个p值会高很多
        precision = TP / change_num if TP > 0 else 0.0
        # 用这个指标p值会低很多
        recall = TP / (TP + FN) if TP > 0 else 0.0
        f1 = 2 * precision * recall / (precision + recall) if precision + recall != 0 else 0
        print(
            f'Sentence Level: acc:{acc:.4f}, precision:{precision:.4f}, recall:{recall:.4f}, f1:{f1:.4f}, cost time:{spend_time:.2f} s')
        return acc, precision, recall, f1

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

旺旺棒棒冰

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值