- 博客(27)
- 资源 (4)
- 收藏
- 关注
RSS订阅翻译 关于 NLP 中的 tokenize 总结
Tokenize关于 tokenize 的总结，翻译自Summary of TokenizeSubword tokenizationtransformers 使用混合tokenization：Word-Level 和 Character-LevelSubword tokennizaiton算法基于这样一个原则，即经常使用的词不应该被分割成更小的子词，而稀有词应该被分解成有意义的子词。对于BertTokenizer:from transformers import BertTokenizert
2022-05-03 19:32:34
1327
原创 Docker执行报错，unknown instruction {RTF1ANSIANSICPG936COCOARTF2513
Docker执行报错，unknown instruction: {\RTF1\ANSI\ANSICPG936\COCOARTF2513在跟随docker官网教程构建docker容器时出现这个错误。具体可看链接下面说解决方法，环境是Mac，在第一步构建过程中docker曾做提示，说创建的 Dockerfile不能带任何文件后缀，而我的Dockerfile是通过Mac带的文本编辑器创建，然后去掉后缀名的。执行命令docker build -t getting-started .报出如题的错误。
2021-05-13 14:28:39
4948
原创 Spring Boot加载外部Jar包
Spring Boot加载外部Jar包项目有一个需求，需要通过spring加载配置下的Jar包，将Jar包中的类注册成Spring的一个Bean以供后续使用。1、构建自己的ClassLoader。关于java自己的ClassLoader的加载方式，详情可移步此篇博客。以下是我定义的JarClassLoader，将Jar包转换为URL，通过URLClassLoader去加载。import org.slf4j.Logger;import org.slf4j.LoggerFactory;impo
2021-04-12 16:56:30
3086
原创 Cron表达式及转换工具
Cron表达式以及转换工具Cron表达式有两种语法格式：1、Seconds Minutes Hours DayofMonth Month DayofWeek Year2、Seconds Minutes Hours DayofMonth Month DayofWeek具体的表达式解析规则可参考这篇文章： cron表达式详解可根据Cron表达式转换为相应的日期描述：0 0 0 5L * ? *可表示为：每月最后1个星期五凌晨12:00下面分享一个转换工具，Cron表达式转换工具，点击链接到g
2020-09-11 11:10:11
2819
原创 记录小彩的诞生过程
记录搭建一台深度学习电脑的过程（可做一些Kaggle比赛、当然大型单机游戏也不在话下），从选配硬件内容到自己组装完成，一次点亮！nice，记录其中遇到的问题和一些装机技巧。硬件选配清单如下：硬件商品CPUintel i9 10900KF主板微星 Z490 Gaming EDGE WIFI版GPU七彩虹 RTX 2070S Ultra OC内存金士顿 16G单条*2硬盘西数 WDC 1TB 固态散热乔思伯 360 水冷机箱爱国者 药丸
2020-08-23 16:13:23
187
原创 错误: 方法不会覆盖或实现超类型的方法、:错误: 找不到符号
错误: 方法不会覆盖或实现超类型的方法、:错误: 找不到符号问题描述：如题出错原因：假设maven中有三个模块。第一个模块依赖后两个模块，在同时更改三个模块中的代码之后（指在模块一和模块三种更改某个类名称），再次打包模块一的时候出现上述错误。此时按Ctrl+单击也可以跳到相应方法。解决方法：先打包类所在模块，再打包引用类的模块。...
2020-06-08 17:18:09
3728
2
原创 配置streamsets外部库
可用来解决导入外部包时产生的streamsets REST_1003 - Failed to create directory: lib 错误第一步：查看原始配置位置第二步：到服务器查看相应文件夹下有没有 streamsets-libs-extras文件夹，没有的话创建一个，并赋予权限chown -R sdc:sdc /opt/streamsets-datacollector/strea...
2020-03-30 18:32:13
698
原创 Janus的Schema Element
1.JanusGraph Schema ElementJanusGraphSchemaElement继承自接口Namifiable（此接口的作用是说继承自该接口的元素都能通过名字唯一区分）。在JanusGraphSchemaElement的接口定义时，作者给出了这个接口的作用，那就是为JanusGraph Schema中的Element做标记，以区分这个Element是一个顶点、边、属性还是一个...
2019-12-12 16:40:26
133
原创 JanusGraph的Element
1、JanusGraphElementElement分为三种：Edge、Property、VertexElement的lifecycle： New=1、Loaded=2、AddedRelations=3、RemoveRelations=4、Modified=5、Removed=6能够操作Element状态的事件Event={REMOVED、REMOVED_RELATION、ADDED_REL...
2019-12-12 16:37:32
267
翻译 JanusGraph数据模型(存储结构）
JanusGraph Data Model以下内容来自官网。JanusGraph采用邻接表存储图，具体的是存储了顶点的邻接表集合。以顶点为key,顶点的邻接表中包含所有的边，顶点属性以及边的属性。这种存储结构，允许JanusGraph将数据存储在任何支持bigtable的存储后端中。关于bigtable与传统数据库的区别不太了解的请去查看这篇文章。由于图是完整的包含关系、属性、顶点的，在存...
2019-10-31 19:10:43
1983
原创 Linux下使用nexus为内网安装pypi代理
需要在内网上搭建python环境，但由于python大哥众多的小弟（外部依赖）也都需要一一安排好（用到哪个安装哪个），没有网络使得安装极为不便，需要把所有依赖文件全部下载然后上传到服务器，再安装，期间还会有各种坑（谁安装谁知道），所以为了方便布置python环境，安顿好众多小弟，决定在有网络的机器上为服务器搭建代理。详细步骤如下;分步指南 1.在有网络的机器上安装nexus。 ...
2019-02-26 17:20:25
1566
原创 python cx_oracle插入时数据编码问题
数据库编码问题新手入坑，第一次使用oracle数据库，还是与mysql略有不同，首先在插入数据时的SQL语法有很大不同，mysql写法：insert into tablename values (%s,%s)oracle中插入写法：insert into tablename(ITEM_ID, CONTENT) values (:ITEM_ID, :CONTENT)问题描述：mysq...
2019-02-20 20:32:45
1092
原创 使用pyplot一定要记得close
1、不关闭将会引起什么问题在一个循环中，如果我们的目的是每一个循环都做一副图出来，如果做完一副图，没有使用pyplot.close()，就会使之前做过的图出现在下一副上，看下图：我们的目的而如果你的目的是每一对train，test都做一张图，就要使用pyplot.close()每一次循环后关闭pyplot，即使在函数中也要这么做。改正后如下：详细代码如下 plt.plot(hist...
2019-01-03 16:08:16
12530
2
原创 Tensorflow运行时报错
windows下运行TensorFlow时出现 DLL加载不成功问题解决方案：大部分是跟下图这个东西有关。1、首先到电脑的 程序和功能中找到它，双击点击修复，一般修复成功，TensorFlow就能成功运行，如果不成功，点击卸载。2、卸载后到Microsoft visual C++2015下载重新安装即可。...
2018-11-27 16:39:02
459
1
原创 MM、RMM、Bi_MM
写在前面的话本文参考《Python自然语言处理实战 核心技术与算法》，一本不可多得的自然语言处理入门书籍。MM、RMM、Bi_MM都是基于规则分词的算法，通过匹配所持有的字典，进行分词。分词结果取决于字典的完整程度和匹配方式。根据SunM.S 和Benjamin K.T（1995）的研究表明，中文中90.0%左右的句子，MM和RMM分词结果重合且完全正确，9.0% 的句子两种方法分词结果不一样...
2018-10-20 17:23:24
1050
原创 pip打包安装离线文件
pip打包安装离线文件pip3 download -d 路径地址\packages-whl -r requirements.txtrequirements.txt文件内为一行一行的依赖包名称和版本号pip编译文件夹成whl格式文件编译源码：1、pycparser-2.18.tar.gz 解压到 pycparser-2.182、pip wheel --wheel-dir=e:\Chr...
2018-09-30 18:40:39
1854
原创 python之数据库连接池.md
带着问题做学问之前只是听说过数据库连接池，但是还没有真正的使用过。项目之初，只是简单的利用pymysql做数据库的一些操作，随着项目的进行发现程序进程还在，但数据库的连接已被关闭（超过一定时间后，数据库连接会自动关闭），带着这个问题，通过咨询和查找资料，于是有了本篇。数据库连接池的作用数据库连接池能在系统初始化的时候建立一定数量（具体数量由配置文件决定）的数据库连接，并维护这些连接在内存中，...
2018-09-30 18:33:10
242
翻译 使用logging初级.md
日志记录边学习边记录，参照logging官方文档，时间宝贵，开始正题：以下为logging级别，按照严重程度递增排序：DEBUG：详细信息，通常在调试时候才有意义INFO：确保事情如期进行WARNING：警告性错误，可能出现问题，但不影响程序运行。ERROR：程序已经无法执行一些功能。CRITICAL：严重错误，程序可能已无法执行。默认级别为WARNING，即仅追踪比此级别更高级别...
2018-09-19 17:37:41
160
原创 Python中Linux、windows路径导入自己的包问题
在Linux、windows中不修改路径导入自己的包踩坑多次，在site-pankage文件夹下创建myconfig.pth文件添加自己的路径也可以，此篇不讲，自行百度。（windows下好使，Linux下没试成功）。但下边的方法两边都好使，且下边这方法灵活性高。记住，要把下边语句放入执行.py文件的最上边。import syssys.path.append(r'自己包的路径')...
2018-08-14 17:30:56
2072
原创 Linux下安装搜狗输入法
Linux下安装搜狗输入法1、搜狗是对Linux支持的，首先到官网下载安装包 2、下载之后得到搜狗拼音的.deb文件，双击之后可以在下图中点击安装。 3、安装完成后首先要讲Linux的输入法设置成支持fictx（因为Linux下搜狗是基于fictx的），具体做法如下： 右键选择输入法->一直点确定直到出现下图，选择fictx。 点击确定。 4、全部做完后重启电脑，就可以...
2018-07-18 16:14:14
2133
原创 windows 10 git配置.ssh秘钥
配置.ssh首先在git操作界面使用命令：cd ~/.ssh查看是否有.ssh文件，如果没有则会显示这是因为win10安装git时没有生成.ssh文件，但不要慌。接下来我们使用如下命令来生成配置ssh需要的公匙和密匙。 ssh-keygen -t rsa -C "[email protected]" 然后一路回车就可以生成啦。连接github首先登陆GitHub，按下图...
2018-06-30 20:40:54
7272
翻译 Python-metaclass
Python中类的概念在理解什么是metaclass之前，先让我们了解一下Python中的普通类。Python对于什么是类有一个很特殊的概念。在大多数的语言中，类就是一段代码，是用来创建对象的，这对Python也一样。例如：class ObjectCreator(object): passmy_object = ObjectCreator()print(my_obje...
2018-06-28 21:01:38
118
原创 C++中的字符串输入
今天在编程的时候遇到的问题，查阅资料终得解，特来分享给大家！以备不时之需。1、常用的cin是如何确定字符串的输入完成了呢？ 答：cin使用空格、制表符和换行符来确定字符串的结束位置，这意味着cin每次只能获取字符数组输入时的一个单词，读取单词后，cin将字符串存入字符串数组中，并自动在结尾添加空字符。2、实现每次读取一行字符串的操作 答：这必须使用cin的高级特性，也就是istream...
2018-03-15 20:30:33
181
原创 ImportError: libcudnn.so.6: cannot open shared object file: No such file or directory
今天在安装TensorFlow1.4.1，安装完成后运行爆出如上错误，这是因为1.3以后的版本需要cuDNN v6.0做支持了，本机上安装的是cuDNN v8.0。看网上教程说要安装低版本的TensorFlow，作者感觉不用，就做了如下尝试。解决方法如下：1.先到英伟达的官网下载cudnn-8.0-linux-x64-v6.0的lib包。下载完后是cudnn-8.0-linux-x64
2017-12-20 21:36:29
568
原创 Tensorboard可视化中遇到的问题及解决
1、没有生成log文件这种情况下，请查看你的文件生成路径，如果路径没有问题，但就是找不到文件，这就应该看一下代码是否出了问题。2、找到log文件但加载不了1、首先应该看一下加载的路径，先确保到达的路径是正确的，不要使用如下这样的命令 tensorboard --logdir=D:\TestOfPython\TensorFlow\ 先切换到 TestOfPyth
2017-11-30 15:32:55
4074
原创 CCF认证201703-2--学生排队
问题描述 体育老师小明要将自己班上的学生按顺序排队。他首先让学生按学号从小到大的顺序排成一排，学号小的排在前面，然后进行多次调整。一次调整小明可能让一位同学出队，向前或者向后移动一段距离后再插入队列。 例如，下面给出了一组移动的例子，例子中学生的人数为8人。 0）初始队列中学生的学号依次为1, 2, 3, 4, 5, 6, 7, 8； 1）第一次调整，命令为“3号同学向后移
2017-11-06 18:25:58
189
原创 CCF认证模拟--分蛋糕
问题描述 小明今天生日，他有n块蛋糕要分给朋友们吃，这n块蛋糕（编号为1到n）的重量分别为a1,a2, …, an。小明想分给每个朋友至少重量为k的蛋糕。小明的朋友们已经排好队准备领蛋糕，对于每个朋友，小明总是先将自己手中编号最小的蛋糕分给他，当这个朋友所分得蛋糕的重量不到k时，再继续将剩下的蛋糕中编号最小的给他，直到小明的蛋糕分完或者这个朋友分到的蛋糕的总重量大于等于k。 请问当
2017-11-04 20:46:04
159
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人