- 博客(29)
- 收藏
- 关注
原创 自己整理的一些NLP数据集【不定期更新】
我们展示了第一个自由形式的多选中文机器阅读理解数据集(C^3),包含 13,369 个文档(对话或更正式的混合体裁文本)及其相关的 19,577 个从中文收集的自由形式选择题-作为第二语言的考试。食谱的平均长度是224个字符。面向中药研究,根据中药领域模型的特点,构建了一个包括中医疾病,方剂,中药, 中药化学成分,药理作用,中药实验,化学实验方法在内的中药本体。一部分为去年的CJRC训练集,一部分为重新标注的约3000个问答对,其中民事、刑事、行政各1000个问答对,均为需要多步推理的问题类型。
2023-10-24 09:58:51
452
原创 一行代码解决报错“A value is trying to be set on a copy of a slice from a DataFrame. “
一行代码解决报错"A value is trying to be set on a copy of a slice from a DataFrame. "
2022-12-16 13:53:52
1671
1
原创 torch.load()报错no module named ‘X‘以及‘model‘ object has no attribute ‘copy‘
torch.load()报错no module named 'X'以及'model' object has no attribute 'copy' 解决方法
2022-10-11 17:54:21
2615
3
原创 持续学习
lifelong learning/Continuous Learning/Never ending Learning/Incremental Learning/灾难性遗忘(catastrophic forgetting)
2022-07-21 16:32:23
632
原创 KBQA(知识图谱问答)和QG(问题生成)的paper调研总结
前段时间做了一些KBQA和QG方面的研究,虽然没有落到实处来,但是想着还是把利用过的资源给记录分享下,方便后来者可以查阅。(一)关于kbqa的:1.GitHub - chenjun0210/QA-Survey: 北航大数据高精尖中心研究张日崇团队对问答系统的调研。包括知识图谱问答系统(KBQA)和文本问答系统(TextQA),每类系统分别对学术界和工业界进行调研。2.针对复杂问题的知识图谱问答KBQA最新进展调研-阿里云开发者社区这个是阿里做的一个复杂问题的调研(二)关于QG
2022-05-01 05:00:00
699
原创 conda 环境只有conda-meta文件,无bin文件,无法远程连接
今天在pycharm连服务器的时候,发现新搞的环境服务器上跑的好好的,连接的时候却找不到bin文件夹,没法连,后来一看,服务器上envs里这个环境下就一个conda-meta文件夹。解决方法:删了重建,创建虚拟环境的时候记得指定python版本号,不要图省事...
2022-04-13 16:59:32
3708
原创 python-RSA-加解密文件--本人亲自实现
RSA python 实现No PEM start marker "b'-----BEGIN RSA PUBLIC KEY-----'" found解决方法
2022-03-08 14:36:29
2947
6
原创 Error:field larger than field limit(131072)解决方法
import csv csv.field_size_limit(1000000000)提高大小限制即可
2022-02-28 18:15:30
1757
原创 利用python打乱xlsx表格
import pandas as pdfrom sklearn.utils import shuffle df = pd.read_excel(ori_path,sheet_name=0)df = shuffle(df)df.to_excel(ori_path, encoding='utf8', index=None)简单有效,相信我
2022-02-08 11:21:55
834
4
原创 2022年的第一场雪
2002年的第一场雪火遍大江南北的时候父母租的老房子后面还是没有后来成为''望景花园'的一望无垠的蒿草地.那一年老鼠还喜欢着大米那一年冬天我还在故乡的雪地里吃着辣条奔来跑去那一年秋天我还会跟挚友扇纸片扇到夜色中我的父亲提着40米的大刀带着笑脸而来那一年夏天我还会搬个凳子坐在房顶装观音引起过路的小伙伴连连喝彩那一年春天我还会扭下嫩柳,削薄一边,鼓起腮帮,努力鸣大概率不响的笛一晃啊二十年这一年春天...这一年夏天...这一年秋天...这一年冬天...昨天,女足
2022-02-07 18:55:41
325
原创 写在农历新年之前
.2021.对我来说,是人生中的又一段难忘经历,让我似乎又回到了青春年少,又回到了夕阳奔跑.这一年,我在闲里偷忙的学习,在夯实自己尚很浅薄的知识体系.这一年,北京的雨挺大,第一场雪也洋洋洒洒又呼啸而来.这一年,是我第二次减肥,减了50斤.这一年,我的身体状况稳定而又健康,去年困扰的顽皮小疾都随着体重慢慢隐去.这一年,一点都不心安理得的立了业.这一年,父母渐老,小病缠身,所幸阳光灿烂.这一年,和兄长共聚若干大小里外之餐.2022下一年,续夯立业之基,续保身体之健
2022-01-29 17:21:08
317
原创 from imblearn.over_sampling import SMOTE 参数介绍
ratio:用于指定重抽样的比例,如果指定字符型的值,可以是’minority’,表示对少数类别的样本进行抽样、’majority’,表示对多数类别的样本进行抽样、’not minority’表示采用欠采样方法、’all’表示采用过采样方法,默认为’auto’,等同于’all’和’not minority’;如果指定字典型的值,其中键为各个类别标签,值为类别下的样本量;random_state:用于指定随机数生成器的种子,默认为None,表示使用默认的随机数生成器;k_neighbors:指定近邻个
2022-01-25 15:23:26
5132
原创 excel指定列转csv python实现方法二:
def xls_tsv(): workbook = xlrd.open_workbook('aa.xlsx') table = workbook.sheet_by_index(0) with open('bb.tsv', 'w', encoding='utf-8', newline='') as f: write = csv.writer(f,delimiter='\t') for row_num in tqdm(range(1, table.n...
2022-01-24 17:51:48
364
原创 lambda表达式解析 python
lambda其实就是一个匿名函数,def func(x): return x+1--等价于用lambda表达:lambda x:x+1冒号前是参数,可以有多个,用逗号隔开,冒号右边的返回值。一般可以和map,filter等用,返回的是对象,要想看到具体结果记得用list承接li = [2, 18, 9, 22, 17, 24, 8, 12, 27]print(list((filter(lambda x: x % 2 == 0, li))))>>>[
2022-01-24 17:40:49
1609
原创 .sh 报错 command not found 解决方法
如果你不是在linux服务器上直接编写的.sh,而是不知道从哪复制粘贴再修改出来的.sh那就用这个方法搞定1) vim 这个.sh2) :set ff = unix3) :wq!原理:从winodws搬来的是dos格式,改成unix格式即可
2022-01-12 17:59:35
14203
原创 linux指定目录位置安装anaconda(亲自上手)
--下载 anacondawget -c https://repo.anaconda.com/archive/Anaconda3-2020.11-Linux-x86_64.sh--授权chmod 775 Anaconda3-2020.11-Linux-x86_64.sh--安装--过程中要yes--然后bashbash Anaconda3-2020.11-Linux-x86_64.sh跑到这个界面的时候系统提示确认路径,这个时候直接输入你的目标路径就好了(注意,目标路径
2022-01-11 10:13:46
3953
1
原创 python调用指定目录/上一层目录module函数
python调用指定目录/上一层目录moduleimport sysimport osBASE_DIR = os.path.dirname(os.path.dirname(os.path.abspath(__file__)))这里是调用的上层目录里的module,要指定的话就是下面sys.path.append(目录地址)sys.path.append(BASE_DIR)相当于在sys去找module的时候,指明了一条你要的路...
2022-01-05 09:50:50
1299
原创 Pandas库read_excel()使用说明及 excel转换为tsv python实现方法一:
pandas.read_excel(io,sheet_name = 0,header = 0,names = None,index_col = None,usecols = None,squeeze = False,dtype = None, ...)io:字符串,文件的路径对象。sheet_name:None、string、int、字符串列表或整数列表,默认为0。字符串用于工作表名称,整数用于零索引工作表位置,字符串列表或整数列表用于请求多个工作表,为None时获取所有工作表。值 对应.
2022-01-04 17:05:00
1163
原创 fresh for me
1.chr() ascii码-->数值与此相对ord() 数值-->ascii码print(chr(112))---pprint(ord('p'))---1122.import unicodedataunicodedata.categary(str)返回str在UNICODE里的分类类型[Cc] Other, Control[Cf] Other, Format[Cn] Other, Not Assigned (no characte...
2021-12-30 18:13:56
445
原创 pip install问题记录
2021/12/24【windows】今天windows本地装包时候遇到的问题,记录下1.Could not install packages due to an EnvironmentError: [WinError 5]解决方法:以管理员权限运行cmd,再执行一次即可成功。找的话本地找到图中路径的cmd,右键管理员身份运行即可。如果在服务器上装包遇到这种情况可以在pip install后加个--user再加包名当然,因为马虎还遇到了Could not fin...
2021-12-24 10:12:47
594
原创 医疗实体标准化之Paper:A Lightweight Neural Model for Biomedical Entity Linking笔记
刚刚踏足医疗方向,目前在研究医疗实体标化问题,相较于广义上的实体链接(entity linking),不存在实体链接一般会存在的一词多义(Entity Ambiguity)问题,确切来说,医疗标准化这块最主要的问题是多词同义(Mention Variations),即同一种病,同一种药等会有许多不同的表达方式,这就是我们要去处理的,让非结构化的数据输入进来,先找到mention,然后去KB里找到对应的entity作为输出,即标准化.举个例子,"感冒"进来,输出"上呼吸道感染". ...
2021-12-22 18:31:42
1240
原创 cmd命令备忘
仅供参考,持续更新------切换cmd根目录:直接 输入 盘符:当前路径下目录文件:dir虚拟环境搭建pip install -i https://pypi.tuna.tsinghua.edu.cn/simple virtualenvwrapper-win创建虚拟环境mkvirtualenv 环境名进入虚拟环境workon 环境名下包(国内源)pip install -i https://pypi.tuna.tsinghua.edu.cn/simple 包名下包(re.
2021-12-21 14:36:44
517
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人