- 博客(18)
- 收藏
- 关注
原创 MEG预处理-Brainstorm
Brainstorm下载和安装去Brainstorm官网进行下载:打开网页后,点击左侧Download;在跳出来的界面中进行简单的注册,注册完成后可以进行下载解压后得到“brainstorm3”的文件夹,里面包含Brainstorm工具包的所有文件,把这个文件夹放在某个路径如"E:\matlab_tools\brainstorm3"即可同样在某个路径建立空的文件夹命名为:brainstorm_db用于工具包运行过程中自动存储生成的文件,所以这个文件中生成的数据不要手动移动删除在Matlab中,把.
2020-09-28 11:36:39
5073
11
原创 chromedriver安装与使用
1.打开chrome 输入“chrome://version/”来查看chrome版本 如图我的是74.0.3729.xxx2.访问此网站http://chromedriver.storage.googleapis.com/index.html然后选择合适版本的driver (注意下面的6指的是6以上的版本都可以使用,也不要执着于没有win64,win32对win64系统同样适用)...
2019-09-20 09:04:48
1783
原创 关键词提取
# -*- encoding:utf-8 -*-'''Interface: KPextCN(text, keyphrasenum=4, stoppath='stopword.txt')SupportFile: stopword.txtFuction: 中文关键短语提取Algorithm: TextRank'''import jsonfrom textrank4zh import...
2019-03-22 17:04:40
523
原创 实体消歧(链接到实体库)
disambiguation.py#!/usr/bin/python3import pymysqlimport jsonimport requestsfrom SimilarityEN import similaritydef findCandidates(entity): # 打开数据库连接 db = pymysql.connect(host=host, port...
2019-03-22 16:57:15
3207
2
原创 实体识别(corenlp)
# coding=utf-8import jsonimport loggingfrom stanfordcorenlp import StanfordCoreNLP# nlp_entity = StanfordCoreNLP(r'stanford-corenlp-full-2018-02-27', lang='zh', quiet=False, logging_level=logging...
2019-03-22 16:52:22
1367
2
原创 自动摘要(抽取式)
wiki语料处理与word2vec语料训练step1_wiki.py# -*- encoding:utf-8 -*-'''Function: 解析.bz2格式语料包,得到.txt'''import requestsfrom gensim.corpora.wikicorpus import extract_pages, filter_wikiimport bz2fileimpo...
2019-03-22 16:45:56
2594
原创 朴素贝叶斯分类
train.py#!/usr/bin/env python# -*- coding: UTF-8 -*-import osimport shutilimport jiebaimport picklefrom sklearn.datasets.base import Bunchfrom sklearn.feature_extraction.text import TfidfVecto...
2019-03-22 16:08:10
437
原创 批量插入mysql数据库函数
def insert(result): logging.debug("开始写入") conn = pymysql.connect(host=host, port=3306, user=user, passwd=passwd, db=db, charset='utf8') logger.debug('Get connection successfully') cursor = c...
2019-01-10 17:40:24
359
原创 jieba.cut和posseg.cut自定义词库特殊字符问题
python\Lib\site-packages\jieba_init_.py(#注释掉的是原文)#re_han_default = re.compile(“([\u4E00-\u9FD5a-zA-Z0-9+#&._]+)”, re.U) re_han_default = re.compile(“(.+)”, re.U) #re_userdict = re.compile(‘^(.+...
2019-01-07 15:56:20
4463
1
原创 neo4j在线增量批量插入三元组
1.python代码生成words.csv、relations_daixiang.csv relations_yongxiang.csv relations_xiangguan.csv 注意:每种关系单独导入!# 生成map{word:id}map = {} # 词和他的id对应词典 注意id不要为数字 不然会错乱!!!for tuplei in tuples: if ...
2019-01-03 09:26:06
2344
原创 flask框架下的restfulAPI
restfulAPI.pyfrom flask import Flask, jsonify, abort, request, current_appapp = Flask(__name__)@app.route('/test', methods=['GET', 'POST'])def test(): return "test"if __name__ == '__main__'...
2018-12-29 10:45:40
199
原创 python多进程
# 多进程class MyProcess(multiprocessing.Process): def __init__(self, name, year, startln, len): multiprocessing.Process.__init__(self) self.name = name self.year = year ...
2018-12-29 10:32:23
230
原创 经跳板连接数据库函数
# logginglogging.basicConfig(format='%(asctime)s %(levelname)8s: %(message)s', datefmt='%m-%d %H:%M:%S')logger = logging.getLogger(__name__)logger.setLevel('DEBUG')# 隧道def ssh(host): # 配置隧道...
2018-12-29 10:29:04
457
原创 neo4j初始化批量导入三元组
python代码生成word.csv、relation.csv# 生成map{word:id}map = {} # 词和他的id对应词典 注意id不要为数字 不然会错乱!!!for tuplei in tuples: if not map.get(tuplei[0], 0): map[tuplei[0]] = tuplei[0] if not m...
2018-12-29 10:20:21
4086
2
原创 neo4j集群配置流程
1.安装jdk(有的话就不用装了) yum install -y java-1.8.0-openjdk2.下载neo4j安装包wget http://dist.neo4j.org/neo4j-enterprise-3.2.13-unix.tar.gz3.解压neo4j安装包tar artifact.php?name=neo4j-enterprise-3.2.13-unix.tar.g...
2018-12-29 10:08:30
1137
原创 获取并计算Excel两列的RMSE(python)
预测代码里只计算了测试集的rmse,得出额外预测值后,想要和刚刚从台站获取的真实值做对比,计算一下误差,又不愿意再源程序里添加代码,但Excel的计算确实不是很懂,只能新开一个py单独计算:# -*- coding: utf-8 -*-import mathfrom sklearn.metrics import mean_squared_error # 用于评估模型import xlrd...
2018-09-18 10:21:07
12449
原创 .csv文件新增行操作(python)
在网上看了很多对.csv文件插入行的操作,效果都不是我想要的,所以自己摸索了一下,源码如下:import pandas as pdf = open('dataset/new.txt', 'r') # 这里是我要提取数据的文件datanew = f.readlines() f.close()dataname = 'dy_rain_20_20_57827.csv'datafr...
2018-09-17 17:32:57
12951
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人