自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(57)
  • 资源 (7)
  • 收藏
  • 关注

转载 记一次用java实现ftp过程的问题

问题描述:在调用ftpClient.storeFile(fileName, inputStream)的时候总是出现false 解决方法:调用上述函数之前调用ftpClient.enterLocalPassiveMode() 原文详解:来自

2018-03-08 19:14:57 396

翻译 Stanford CoreNLP API

生成annotations ConreNLP包的核心重要由两个类组成:Annotation和annotator。Annnotations是用来保存annotators结果的一种数据结构;Annotators是一个基于Annotations操作的函数,而不是基于objects操作。Annotators和Annotations被整合到了AnnotationPipelines中,再由它产生了一系列的An

2017-08-31 19:47:27 1488

原创 Stanford CoreNLP 介绍

Overview介绍 Stanford CoreNLP是用处理自然语言的工具集合。它可以给出词语的基本形式:词性(它们是公司名、人名等,规范化得日期,时间,和数字),根据短语和语法依赖来标记句子的结构,发现实体之间的关系、情感以及人们所说的话等。你选择选择Stanford CoreNLP的理由: 1、它是一个众多语法分析工具集成的工具包。 2、对任意的文本来说它具有快和鲁棒性

2017-08-25 14:37:23 7006

原创 Stanford Core NLP

目录安装介绍github

2017-08-22 14:08:45 608

原创 Stanford Core NLP 安装

java maven安装参考java maven安装(参考)<dependency> <groupId>edu.stanford.nlp</groupId> <artifactId>stanford-corenlp</artifactId> <version>3.8.0</version></dependency><dependency> <groupId>edu

2017-08-22 14:07:30 1179

原创 python编码问题

错误一错误二错误一错误描述:UnicodeDecodeError: ‘ascii’ codec can’t decode byte 0xe5 in position 0: ordinal not in range(128) 错误原因:原因就是Python的str默认是ascii编码,和unicode编码冲突。 解决方法:import sysreload(sys)sys.setdefault

2017-07-31 15:58:28 214

原创 spark运行中的各种错误

NoClassDefFoundErrorNoClassDefFoundError错误描述: Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/spark/SparkConf 解决办法: maven加载依赖是 provided去掉 参考

2017-07-05 00:37:25 532

原创 linux服务器常用命令

uname -acat proccpuinfo grep physical sort -n uniq wc -luname -aLinux xxx 3.13.0-65-generic #106-Ubuntu SMP Fri Oct 2 22:08:27 UTC 2015 x86_64 x86_64 x86_64 GNU/Linuxcat /proc/cpuinfo | grep phys

2017-06-04 16:11:34 336

原创 win7 X 64 tensorflow安装

环境说明具体安装步骤anaconda安装python35虚拟环境的设置conda create -n tensorflow python35特别说明tensorflow安装检验是否安装成功anaconda常用方法小结conda create -n tensorflow python35创建环境并指定python的版本号conda remove -n tensorflow all删除

2017-06-02 19:36:53 485

原创 Shell中的问题

crontab执行问题crontab执行问题问题描述:使用crontab可以调用一个shell脚本,一般的命令都可以调用,但是在调用另一个shell脚本的时候一直没用执行另外一个脚本。 原因:可能是环境设置的问题。 解决办法:在shell脚本的开头加入source /etc/profile(或者其它的环境文件)参考一

2017-04-19 14:53:35 284

转载 maven包导入问题(eclipse)

Maven 手动添加 JAR 包到本地仓库重新下载jar文件Maven 手动添加 JAR 包到本地仓库参考重新下载jar文件来自百度

2017-04-16 22:11:14 308

原创 操作mysql的相关错误

#

2017-04-16 22:09:52 173

原创 shell学习记录

ssh 远程运行命令ssh 远程运行命令linux 远程杀掉进程【参考】

2017-04-10 19:02:41 218

原创 maven包导入问题(eclipse)

Maven 手动添加 JAR 包到本地仓库重新下载jar文件Maven 手动添加 JAR 包到本地仓库参考重新下载jar文件来自百度

2017-04-10 18:58:06 418

转载 git问题总结

问题一问题一问题描述:fatal: Could not read from remote repository.的解决办法 问题解决:转载

2017-03-11 17:12:44 341

原创 django rest framework and angularjs

123451pip install -r requirements.txtpython setup.py develop2sudo apt-get install npm3sudo npm install -g expressnpm install -g grunt-cli bower4npm installbower insta

2016-12-27 14:19:08 723

原创 python2和3使用过程中的(重要)不同点记录

除法 - - - dict的iter除法 - - - > /python2: 3/2=1 python3:3/2=1.5dict的iterpython2: Hs.iteritems() python3:Hs.items()

2016-12-25 17:16:37 289

原创 ubuntu16上安装gitlab

环境设置全文参考1全文参考2安装gitlab问题解决环境设置【全文参考1,全文参考2】安装依赖:sudo apt-get install curl openssh-server ca-certificates postfix安装gitlab首先配置yum源curl https://packages.gitlab.com/gpg.key 2> /dev/null | sudo apt-key a

2016-12-20 18:29:18 1355

原创 httpclient爬取网页

1、设置爬取的urlString url = "http://www.gametoutiao.com/toutiao/index.html";2、建立爬取的客户端HttpClient client = new HttpClient();client.getHttpConnectionManager().getParams().setConnectionTimeout(90000);client

2016-10-16 14:29:39 1768

原创 1、URL和URLConnection类的使用

URL的使用URLConnection的使用URL的使用URL obj = new URL("https://www.baidu.com/");System.out.println(obj.getPath());System.out.println(obj.getProtocol());System.out.println(obj.getQuery());System.out.printl

2016-10-10 15:03:31 1587

原创 GET请求

设置URL创建链接设置参数发出Get请求得到返回请求获得url输入流补充设置URLURL obj = new URL("https://www.baidu.com");创建链接HttpURLConnection con = (HttpURLConnection) obj.openConnection();设置参数con.setRequestProperty("User-Agent",

2016-10-10 14:39:28 385

原创 maven项目创建中的错误

错误一错误一错误描述:第一次执行mvnThe goal you specified requires a project to execute but there is no POM in this directory解决办法: 有可能是命令之间的空格,eg:mvn archetype:generate -Dgroup***Id = com***.mavenTest.data -Dartifac

2016-10-07 21:41:21 413

原创 requests应用step1

爬取说明使用模块主要作用说明代码解释完整代码爬取说明爬取的是小黄鸭的图片并保存到本地使用模块主要作用说明import requestsfrom urllib.request import urlretrieveimport reimport osurlretrieve:保存下载的图片 os:判断文件目录是否存在和文件目录的创建 re:正则模块,查找需要的内容代码解释设置了请求头:u

2016-09-05 17:20:40 270

原创 python爬虫总结

基础基础

2016-09-04 21:05:14 348

原创 selenium结合lxml爬取豆瓣电影相关信息

环境说明重要代码解释完整代码环境说明python3.5 centos7.2重要代码解释使用selenium加载网页:driver=webdriver.PhantomJS()driver.get("https://movie.douban.com/")使用selenium和web进行互动将网页加在完全:end = Truewhile (end): try: end

2016-09-04 21:02:52 981

原创 phantomjs在centos7.2上的安装

环境准备安装直接解压下载好的安装包并添加环境变量测试环境准备下载连接安装直接解压下载好的安装包并添加环境变量tar -zxvf phantomjs-2.1.1-linux-x86_64.tar.bz2export PHANTOMJS_HOME = /PATH/phantomjs-2.1.1/bin测试phantomjs --version

2016-08-16 10:31:32 8871 2

原创 pyspider

安装安装(1)、加如下的path到环境变量中export PYCURL_SSL_LIBRARY=nss(2)、使用pip安装pip install pyspider(3)、在浏览器中检查localhost:5000

2016-08-16 09:47:21 285

转载 centos7.2上安装chrome

1rpm包下载2安装3使用1、rpm包下载下载地址2、安装yum install google-chrome-stable_current_x86_64.rpm3、使用在有上角的Applications–>internet–>Google Chrome

2016-08-15 17:53:00 626

原创 mongodb的安装

环境说明yum安装mongodb的yum源创建安装mongodb32配置SELinuxmongodb的操作配置文件位置各种错误问题汇总配置SELinux的错误环境说明操作系统:centos7.2 mongodb:mongodb3.2 其它环境的准备:yum install -y openssl-devel openssl(在centos中安装的软件大部分都需要这个ssl)yum安

2016-08-12 18:02:58 269

原创 ipython安装

1准备环境2安装Ipython1、准备环境yum groupinstall 'Development Tools'yum install python3-devel2、安装Ipythonpip install jupyter

2016-08-09 16:17:06 273

原创 python使用中的错误总结

pip使用错误python中使用scrapy的错误python环境使用说明: centos7 python3.5.2pip使用错误错误描述:command 'gcc' failed with exit status 1解决办法:yum -y install gcc gcc-c++ kernel-devel yum -y install python-devel libxslt-devel

2016-08-07 23:30:24 412 4

原创 Hadoop操作错误总结

文件库问题1文件库权限问题文件上传问题文件库问题1、文件库权限问题问题描述: 错误1:Permission denied: user=dr.who, access=READ_EXECUTE, inode="/tmp":root:supergroup:drwx-wx-wx 错误2:java.lang.RuntimeException: The root scratch dir: /t

2016-08-06 16:38:59 405

原创 Rhadoop的安装

说明环境说明安装Rhadoop的准备环境必要的包环境变量的设置安装Rhadooprhdfs的安装只需要在user-client上安装即可rmr2的安装每个节点都需要安装测试rhdfsrmr2Rhadoop中各个包在集群中的安装情况补充相关类型的文章说明环境说明操作系统:centos7.2 hadoop环境使用的是2.7.2 java使用的是1.8安装Rhadoop的准备

2016-08-01 13:57:39 1767

原创 win下eclipse链接centos7上的hadoop2.7步骤和各种错误

链接步骤下载eclipse for java 版下载插件hadoop_dll_winutil_271下载 hadoop-eclipse-plugin-272rar在eclipse中进行设置win上环境变量问题路径与配置文件问题缺少jar包链接步骤1.下载eclipse for java 版eclipse win64位下载链接–>解压2.下载插件hadoop_dll_winutil_2.

2016-07-20 18:01:16 540

原创 hadoop错误各种原因

NoRouteToHostExceptionCheck system time and time zonesNoRouteToHostException错误描述: INFO hdfs.DFSClient: Exception in createBlockOutputStreamjava.net.NoRouteToHostException: No route to host解决办法:是防火墙的

2016-07-18 10:13:18 1237

原创 centos7下安装python3

安装前的准备工作安装一些环境将usrbinpython重命名修改usrbinyum安装python3将下载好的python3压缩包解压进入解压目录添加python快捷图标安装前的准备工作安装一些环境yum install openssl-devel将/usr/bin/python重命名[root@]#cd /usr/bin/[root@]#ls python*python py

2016-07-17 15:55:38 1473

原创 R函数对比

apply和sapplyapply和sapply·用法 apply(data,MARGIN,FUN):MARGIN可取1或2,1表示对行操作,2表示对列操作。 sapply(data,FUN,……) : ……是数字则作用到FUN上,比如:sapply(data,sum,1):将把1加到求和后的结果上。**但是,例外**:sapply(data,"[",1):是从拆分函数“[”中提取第一部

2016-07-12 10:47:40 274

原创 python相关

os列出一个目录下的所有目录包括文件os列出一个目录下的所有目录(包括文件)#!/usr/bin/pythonimport ospwd = os.path.abspath('.')[0]global aa=1def findName(path,name): global a print(a,path,os.path.isdir(path),path.__contains__(n

2016-07-11 17:16:00 230

转载 ggplot_坐标轴

转自:九茶 [toc]初始化图形library(ggplot2)dt = data.frame(A = 1:10, B = c(2,15,6,18,9,7,13,15,10,3), C = c('A','C','A','B','C','D','A','C','D','B'))p = ggplot(dt, aes(x = A, y = B, color = C, group = factor(1

2016-07-09 17:45:44 3946

原创 R语言ggplot2绘图——柱状图

柱状图绘制柱状图数据准备画出初始图修改柱状图的宽度修改柱形图的顺序柱条上添加文字主题对坐标轴进行限制柱状图绘制柱状图数据准备这里是ggplot2中的diamonds数据框中的随机抽取100条数据:library(ggplot2)set.seed(100)small<-diamonds[sample(nrow(diamonds),100),]small<-within(small

2016-07-07 16:21:12 112310

spark_deploy

spark配置文件

2016-09-09

hadoop_deploy

hadoop配置文件

2016-09-09

rhdfs1.0.8

rhdfs1.0.8

2016-08-01

rhdfs_1.0.8

rhdfs_1.0.8

2016-08-01

rmr2_3.3.1

rmr2_3.3.1

2016-08-01

hadoop-eclipse-plugin-2.7.2

将其下载解压到eclipse的plugins下面

2016-07-24

win下eclipse链接centos7上的hadoop2.7步骤和各种错误

将文件解压到hadoop/bin下

2016-07-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除