- 博客(28)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Springboot整合ActiveMQ
参考博文：https://www.cnblogs.com/yufeng218/p/11509486.html
2021-05-27 16:44:41
139
原创 双亲委派机制
https://www.cnblogs.com/luckforefforts/p/13642685.html类加载器种类启动类加载器：加载系统环境变量下JAVA_HOME/lib目录下的类库。扩展类加载器：加载JAVA_HOME/lib/ext目录下的类库。应用程序类加载器（系统类加载器）：加载用户类路径Class_Path指定的类库。（我们可以在使用第三方插件时，把jar包添加到ClassPath后就是使用了这个加载器）自定义加载器：如果需要自定义加载时的规则（比如：指定类的字节流来源
2021-04-09 16:23:19
139
原创 es
一个分布式的实时文档存储，每个字段可以被索引与搜索。 一个分布式实时分析搜索引擎。 能胜任上百个服务节点的扩展，并支持 PB 级别的结构化或者非结构化数据。官网对Elasticsearch的介绍是Elasticsearch 是一个分布式、可扩展、近实时的搜索与数据分析引擎。我们通过一些核心概念来看下Elasticsearch 是如何做到分布式，可扩展和近实时搜索的。数据节点负责数据的存储和相关的操作，例如对数据进行增、删、改、查和聚合等操作，所以数据节点（data节点）对机器配置要求比较高，...
2021-04-08 17:06:40
124
原创 集合
ArrayList查询快, 增删慢; LinkList查询慢,增删快ArrayList底层是用的数组存储,而数组的查询实际上是对引用地址的访问，不需要遍历。新增时:（1）往ArrayList中添加对象，也就是调用add(element)方法，首先会确认容量是否足够，如果足够，将新加入的元素直接放入，如果直接调用的add(element)方法，会从最后一个元素的末尾开始增加新的元素，如果是调用的add(index,element)方法，则直接从下标为index的位置开始插入新的元素E，该下标靠后位置（i
2021-04-07 09:43:52
104
2
原创 HDFS总结点
参考链接:https://blog.csdn.net/qq_24140237/article/details/81206963HDFS构架原则：元数据与数据分离：文件本身的属性（即元数据）与文件所持有的数据分离主/从架构：一个HDFS集群是由一个NameNode和一定数目的DataNode组成一次写入多次读取：HDFS中的文件在任何时间只能有一个Writer。当文件被创建，接着写入数据，最后，一旦文件被关闭，就不能再修改移动计算比移动数据更划算：数据运算，越靠近数据（为了尽量减小全局带宽的消耗.
2021-04-02 10:51:09
134
1
原创 基于pytorch的多元中文分类
1. git项目参考https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch2. 语料分布不均参考:https://zhuanlan.zhihu.com/p/1913551223. 基于梯度密度的交叉熵损失函数参考:https://github.com/qingkongzhiqian/NER_loss_compare...
2021-03-17 10:54:59
99
原创 word embedding之于预训练
我们的主题是预训练，那么问题是Word Embedding这种做法能算是预训练吗？这其实就是标准的预训练过程。要理解这一点要看看学会Word Embedding后下游任务是怎么用它的。它的使用方法其实和前面讲的NNLM是一样的，句子中每个单词以Onehot形式作为输入，然后乘以学好的Word Embedding矩阵Q，就直接取出单词对应的Word Embedding了。那个Word Embedding矩阵Q其实就是网络Onehot层到embedding层映射的网络参数矩阵。所以你看到了，使用Word
2021-03-04 11:16:14
481
1
转载 模型评价
True Positive(真正, TP)：将正类预bai测为正类数.True Negative(真负 , TN)：将负类预测为负类数.False Positive(假正, FP)：将负类预测为正类数→→误报(Type I error).False Negative(假负 , FN)：将正类预测为负类数→→漏报(Type II error).准确率(accuracy),其定义是: 对于给定的测试数据集，分类器正确分类的样本数与总样本数之比。也就是损失函数是0-1损失时测试数据集上...
2021-03-03 15:01:06
110
1
原创 python命名规范
1.项目名称首字母大写+大写式驼峰，ProjectName2.模块名和包名全部小写+下划线驼峰module_name package_name3.类名称，异常首字母大写+大写式驼峰，class ClassName: ，ExceptionName4.全局变量、常量全部使用大写字母+下划线驼峰GLOBAL_VAR_NAME，CONSTANT_NAME5.方法名，函数名，其余变量，参数，实例全部小写+下划线驼峰method_name，function_name，insta..
2021-03-03 11:12:58
57
转载 PyTorch-Transformers初识
文章出处:https://baijiahao.baidu.com/s?id=1640539349483912777&wfr=spider&for=pcTransformers 理解:https://www.analyticsvidhya.com/blog/2019/06/understanding-transformers-nlp-state-of-the-art-models/?utm_source=blog&utm_medium=pytorch-transformers-..
2021-03-03 10:59:39
436
原创 pytorch 文本分类模型验证
# -*- coding: utf-8 -*-from importlib import import_moduleimport torchfrom utils import build_iteratorPAD, CLS = '[PAD]', '[CLS]'pad_size=32class TestNews(): def __init__(self): dataset = 'D:\pythonWorkSpace\\bert\example\Bert-Chines.
2021-02-26 10:26:55
314
1
原创 bert文本分类实操
1. 查看虚拟环境conda env list2. 用conda创建虚拟环境conda create --prefix=/mnt/disk1/myspace --name cyy001--clone base(上述命令list出来的)注: 若conda命令不可用, 可以创建下软连接find / -name condaln -s 源路径 /usr/bin/conda3. 激活路径source activate /mnt/disk1/myspace注:sourc...
2021-02-04 11:01:16
136
原创 pytorch学习系列一
以下记录下pytorch学习初期需要下载的资源https://developer.nvidia.com/cuda-10.0-download-archive?target_os=Windows&target_arch=x86_64&target_version=10&target_type=exelocal这个是下载cuda的https://blog.csdn.net/weixin_40392957/article/details/80207366这个是用迅雷下载cudn
2021-02-01 17:09:50
70
原创 将csv文件分割成多个文件
# -*- coding: utf-8 -*-import csvimport osimport pandas as pdhome_path = 'D:\\工作文件\\项目\\交通事故分类\\分割语料测试'data_set_path = os.path.join(home_path,'acd_simple_data.csv')# total_len = len(open(data_set_path, 'r', encoding='utf-8').readlines()) # csv文件行.
2021-01-28 16:08:09
3133
2
原创 linux端命令行连接pg客户端
./psql -h 'ip' -p 'port' 'user=usernamepassword=password dbname=dbname'
2021-01-19 11:02:42
1370
原创 scrapy + selenium实现多层网页爬取和点击获取隐藏内容
1. 安装scrapy部分不细讲了,要装vs环境的, 尝试了很多方式最后都不行, 最后还是老老实实花几个小时装下吧;2. 客户端创建scrapy项目 scrapy startproject chinaDaily3. pycharm打开项目后创建pychon package, 会自动生成一个scrapy.cfg和__init__.py4. 创建后项目结构5.修改setting.pyITEM_PIPELINES = { 'chinaDaily.pipeline...
2020-10-23 17:06:49
2552
1
原创 linux kill -9 杀不掉的进程, 杀掉后自启
运行程序发现端口号被占用, 用kill -9结束进程没一会儿就被自动拉起来了解决方式:1. lsof -i: port 查找到对应进程pid号2. cd /proc/PID号3. cat status, 找到父进程的PPID号4. kill -9 PPID号5. kill -9 PID号...
2020-09-25 14:14:58
2455
原创 mongodb E11000 duplicate key error collection: index: _id_ dup key
相同id数据入MongoDB报键值重复异常
2020-07-30 16:21:44
1296
转载 git bash 基础操作
原文：https://blog.csdn.net/benben_2015/article/details/835021531. 在指定的commitId下打tag 进入工程目录 ---> 右键进入git bash命令窗口 git log 查看提交记录 使用git checkout <commit id>，例如git checkout 92...
2019-07-10 10:41:37
140
转载 HBase概念
原文地址: https://www.cnblogs.com/JingJ/p/4521245.html 文件存储结构与进程模型如上所述，HBase是一张“稀疏的，有序的，高阶的MAP”。通常来说，MAP可以用B+树来实现。B+树对查询性能而言表现良好，但是对插入数据有些力不从心，尤其对于插入的数据需要持久化到磁盘的情况而言。我们对RowKey做了排序，为了保证查询效率，我们希望将...
2019-01-17 09:59:05
177
原创 无法加入webmeeting, 无法打开webex
用谷歌, 酷狗, IE都试过, 下载Cisco-WebEx-Extension拖拽到扩展程序中也没有作用, 最后更新了IE, 打开网页时失败, 但提示:"确保启用了TLS和SSL协议", 最后在Internet设置中修改了配置, 就可以了耽误了好久所以软件就用更新的...
2019-01-02 11:36:19
15445
转载 用@RequestBody传递包括集合等多种类型参数到后台
参考: https://blog.csdn.net/qq_34608620/article/details/80635139定义js发送的数据:$.ajax({ type: "POST", url: "${pageContext.request.contextPath}/courses", data: JSON.stringify({ ...
2018-12-14 19:02:07
2772
转载 js中接收function里ajax处理返回的值
参考:http://www.cnblogs.com/lxcmyf/p/5828639.html接收ajax返回的值时, ajax一定要设置为同步方式, 搞了好久, 竟然是这里出问题了$.ajaxSetup({ async : false //设置ajax为同步方式，异步方式的话在赋值时数据还未提取出来});var t = "";var engineerMethod = $...
2018-12-04 14:21:30
4098
转载 Java实现sftp上传一个目录下的所有文件到Linux服务器
参考来自：https://blog.csdn.net/g5628907/article/details/78281864使用JSch实现SFTP文件传输https://www.cnblogs.com/itmanxgl/p/fe5d33512609fe540eb08a76e3c4db3a.htmlJSch - Java实现的SFTP（文件上传详解篇）http://www.cnblog...
2018-11-22 19:54:24
1023
转载 前端调试出错点
前端出错点SpringBoot访问webapp:https://blog.csdn.net/hgg923/article/details/80624773
2018-10-29 10:35:52
161
原创 SpringBoot将常量配置在properties文件中
在配置文件中设置常量,天啊,每个常量配置完成后直接换行就好了, 不要加分号, 尤其是后期需要转时间格式的常量, 我配置了一个整型的, 后来将字符串转整型的时候一直报错写一个常量类, 在注释中配置properties文件的路径@Component@PropertySource("classpath:conf/constant.properties")在属性值上加上映射@Val...
2018-10-25 17:21:39
4020
原创 SpringBoot引入jsp报500错误
因为之前用freemarker在依赖中加了模板引擎,用jsp时报错,将这个依赖注释掉就好了<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-thymeleaf</artifactId> </dep...
2018-10-25 10:32:29
1340
PostgreSQL JDBC 4.2 Driver, 42.2.25
2020-12-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人