![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
个人笔记
CuriousLiu
这个作者很勤奋,什么都没留下...
展开
-
2021.1-macOS上部署redis服务,并利用python进行redis调用
2021.1-macOS上部署redis服务,并利用python进行redis调用目录1. redis安装部署2. python接口调用redis1. redis安装部署在安装brew的前提下,直接使用brew install命令安装redis$brew install redis启动redis$redis-server2. python接口调用redis安装依赖环境$sudo python3 -m pip install redis安装是否..原创 2021-01-14 23:58:11 · 275 阅读 · 0 评论 -
2020.12-elasticsearch学习-使用logstash从本地SQL类数据库中向elasticsearch导入数据
2020.12-elasticsearch学习-使用logstash从本地SQL类数据库中向elasticsearch导入数据Reference如何安装elasticsearch栈中的logstash:https://blog.csdn.net/UbuntuTouch/article/details/99655350从mariadb向elasticsearch中导入数据:https://www.cnblogs.com/mikeluwen/p/7686663.html如何安装ela..原创 2020-12-15 16:17:22 · 773 阅读 · 0 评论 -
2020.12-把txt文件导入本地mariadb数据库
2020.12-把txt文件导入本地mariadb数据库目录背景步骤背景在网上一些公开发布的数据集和语料等可能会以txt文件的格式发布,通过navicat内置的导入向导希望将txt数据直接导入到数据库中步骤1. 右键点击想导入的表,选择导入向导一项2. 支持多种数据格式的导入,在这里选择文本文件txt3. 选择数据导入的源文件4. 选择记录格式5. 选择格式选项6. 选择映射到的表7. 选择源字段和目标字段的对应关系8. 选原创 2020-12-14 13:55:19 · 1416 阅读 · 0 评论 -
2020.12-macOS安装+使用navicat连接本地MySQL数据库(127.0.0.1:3306)
2020.12-macOS连接本地数据库(127.0.0.1:3306)Referencehttps://www.macwk.com/mariadb安装:https://www.cnblogs.com/leechenxiang/p/10506995.html在本地安装mariadb数据库(macOS使用brew系列命令,如果是linux可能需要使用yum系列命令)brew install mariadb OKbrew install mariadb-server 这句话不行,在本地使原创 2020-12-14 13:30:12 · 440 阅读 · 0 评论 -
2020.12-HanLP使用记录(持续更新:分词,NER等)
2020.12-HanLP使用记录(持续更新:分词,NER等)目录背景HanLP-中文NERHanLP-中文分词背景在中文文本预处理场景中,现有多款工具,例如jieba等。但是通过个人的使用感官尝试,发现HanLP库的分词效果,NER命名实体识别提取效果准确度都更高些,汇总一些HanLP工具的使用方法。HanLP-中文NERimport hanlprecognizer = hanlp.load(hanlp.pretrained.ner.MSRA_NER_BERT_BAS原创 2020-12-14 11:34:41 · 1320 阅读 · 0 评论 -
2020.12-elasticsearch支持工具kibana安装
2020.12-elasticsearch支持工具kibana安装自注:作为一种可视化工具,如果在服务器上运行,也是可以远程进行使用的目录步骤(macOS)官网下载kibana解压到本地文件elasicsearch打开后,打开一个新terminal开始测试访问http://127.0.0.1:5601/查看kibana运行情况步骤(macOS)官网下载kibanahttps://www.elastic.co/cn/downloads/kibana解压到本地文件原创 2020-12-03 11:41:47 · 165 阅读 · 0 评论 -
2020.11-graphviz+pycallgraph Python函数调用关系可视化
2020.11-graphviz+pycallgraph Python函数调用关系可视化Reference:https://www.cnblogs.com/GO-NO-1/p/7155684.htmlhttp://www.graphviz.org/https://blog.csdn.net/qq_36408085/article/details/82952846目录步骤示例步骤1)brew install graphviz(或者http://www.graphviz.or原创 2020-11-26 14:02:36 · 320 阅读 · 0 评论 -
2020.11-python正则表达式学习
Reference:https://www.runoob.com/python/python-reg-expressions.html正则表达式是一个特殊的字符序列,能帮助检查一个字符串是否与某种模式匹配。python自1.5版本起增加了re模块,re模块使python语言拥有全部的正则表达式功能。compile函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象,该独享拥有一系列方法用于正则表达式匹配和替换。re模块也提供了与这些方法功能完全一致的函数,这些函数使用一个模式字符串作为它原创 2020-11-25 16:51:46 · 320 阅读 · 0 评论 -
2020.11-使用git管理private项目
2020.11-使用git管理private项目目录Reference:步骤1. 在github上新建一个项目,并保存url2. 本地文件夹执行git init生成初始git文件3. git与本地文件关联4. 设置git忽略本地的.DS_STORE文件5. git提交本地代码6. git push7. git pull8. git合并分支Reference:https://blog.csdn.net/qq_21219781/article/details/原创 2020-11-25 10:38:19 · 868 阅读 · 0 评论 -
2020.11-依存句法树baidu-DDParser工具使用
Reference:https://github.com/baidu/DDParserhttps://blog.csdn.net/qq_27590277/article/details/107853326目录依存句法分析简介项目介绍环境依赖安装+功能使用1. 安装2. 功能使用基础方法扩展方法依存句法分析简介依存句法分析旨在通过分析句子中词语之间的依存关系来确定句子的句法结构。其中依存句法分析标注关系集合如下图所示:于是一个实例如下图所示:通过原创 2020-11-24 14:57:12 · 3595 阅读 · 2 评论 -
模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-训练并测试过程
Reference:https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-训练并测试过程baseDir:Bert-Chinese-Text-Classification-Pytorch/./train_eval.py学习全局在import来看,从sklearn里import了me..原创 2020-11-23 09:09:37 · 2503 阅读 · 0 评论 -
模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-构建数据,数据Iter类
Reference:https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-构建数据集类baseDir:Bert-Chinese-Text-Classification-Pytorch/utils.py目录./utils.py学习./utils.py学习utils.py中主要是..原创 2020-11-20 15:45:28 · 3662 阅读 · 0 评论 -
模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-模型结构
Reference:https://github.com/649453932/Bert-Chinese-Text-Classification-Pytorch模型代码学习-CLS文本分类-Bert-Chinese-Text-Classification-Pytorch代码学习-模型结构baseDir:Bert-Chinese-Text-Classification-Pytorch/models/目录./models/bert.py学习./models/bert.py学习这里的文本分.原创 2020-11-20 11:45:03 · 3417 阅读 · 1 评论 -
2020.11-BERT预训练模型下载地址记录
Reference:https://github.com/google-research/bert目录模型结构组成(Pytorch)pytorch_model.binbert_config.jsonvocab.txt下载地址汇总补充内容模型结构组成(Pytorch)pytorch_model.binbert_config.jsonvocab.txt下载地址汇总PRETRAINED_MODEL_ARCHIVE_MAP = { 'bert-b.原创 2020-11-20 10:12:03 · 2701 阅读 · 1 评论 -
2020.11-NLTK文本预处理工具学习
Reference:https://www.jianshu.com/p/32258d3b02f6目录零、NLTK安装&模型下载一、分词二、词性标注1. 词干提取2. 单词变体还原(基础)3. 词性标注三、单词变体还原(进阶)四、去除停用词、自定义去除的characters列表、大小写转化五、文本分析1. 统计词频+折线图2. 词云(可能需要对Windows环境的依赖,有待尝试)零、NLTK安装&模型下载安装过程应该是pip instal原创 2020-11-19 17:09:07 · 465 阅读 · 0 评论