 盖世英雄-CSDN博客

原创 NER实现问题

1.真的搞不懂数据集是什么形式，因为本身方向是做威胁情报分析的，第一步就是要提取和威胁情报相关的实体，因此实体标签是自己定义的，然后用brat工具对自己的数据进行了标注，可以生成.ann文件，可是生成之后要做什么就很迷茫了。有看过酱一篇很好的文章，链接如下：https://blog.csdn.net/qq_41853758/article/details/82933080首先我看了能和我的方...

2019-07-25 21:28:54 502

原创 python bug 小记录

1.File "F:\Experiments\ChineseNER-master\data_utils.py", line 293, in sort_and_pad batch_data.append(self.pad_data(sorted_data[i*batch_size : (i+1)*batch_size])) TypeError: slice indices must be integ...

2019-07-18 21:17:11 380

原创在阿里云服务器上安装jieba遇到的问题

标题1.ModuleNotFoundError: No module named ‘jieba’但是！！我明明已经pip install jieba了！然后忽然搜到了这样一中安装方法python3 -m pip install jieba，而且说明了与pip3 install jieba的不同在于后者会出现找不到模块的情况。喜形于色赶紧尝试，结果出现下面问题：Consider using ...

2019-07-18 16:23:04 548

原创 Attention is all you need源码学习3

先用structure看一下code的整体架构阿整体架构，如下图所示：我理解的这部分框架是酱的，也有可能不对辣，尽力去理解了，有问题请指出，下图所示：接下来就看看代码吧~Models.pyTransformer搭建transformer模型，文章的模型如图所示：搭建的代码继承了pytorch的nn.model，写法固定，分为两部分：1.__init__定义网络中的参数和模型框架；...

2019-07-03 16:29:17 563 1

原创 Attention is all you need源码学习2

**train.py**import argparseimport mathimport timefrom tqdm import tqdmimport torchimport torch.nn.functional as Fimport torch.optim as optimimport torch.utils.dataimport transformer.Consta...

2019-06-28 17:05:29 783 1

原创 Attention is all you need源码学习1

Process.pymain函数中有关命令行输入的代码def main(): ''' Main function ''' #1.命令行运行时需要传入的参数required=True为必须传入的 parser = argparse.ArgumentParser() parser.add_argument('-train_src', required=True...

2019-06-27 17:37:47 565

原创初识GitHub

第一次使用Git1. 注册账号https://github.com/·就正常的注册账号、邮箱、密码·选择Free-Finish·验证邮箱2. 新建仓库其实我用的是mymygit啦~但是不能重名所以这里显示的mymygitt，目前在GitHub上的操作到这里，接下来要做的是在Windows下安装Git，并与GitHub建立连接，将本地代码上传到刚刚建立的仓库3. 安装Git（Win...

2019-04-22 13:01:05 420

原创 Could not install packages due to an EnvironmentError: [WinError 5] 拒绝访问

**解决方法**：在install后加上–userpython -m pip install –user mxnet

2019-03-19 14:50:28 1050

原创 Python爬虫实现有道翻译

# -*- coding: utf-8 -*-#模拟有道翻译import urllibimport urllib2#通过抓包得到的url地址url="http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule "#完整的headersheaders={ #"Host":"fanyi.youd...

2019-03-05 11:47:08 496

原创 with open(filename,"w")as f: IOError: [Errno 22] invalid mode ('w') or filename

#这样写不用做文件关闭操作，就是一个文件写入操作 with open(filename,"w")as f: f.write(html)出现问题： File "F:/pycrawler/venv/tieba.py", line 28, in writePage with open(filename,"w")as f:IOError: [Errno 22]...

2019-03-04 21:56:46 2937

原创使用Stanford NLP时出现的问题1

Exception in thread “main” java.lang.OutOfMemoryError: Java heap space@TOC使用Stanford NLP时出现的问题Exception in thread “main” java.lang.OutOfMemoryError: Java heap space原因程序中对象引用过多导致堆空间不足，导致内存溢出解决：选择...

2019-02-28 20:35:40 744 1

weixin_43375596的博客