wish我ww-CSDN博客

原创 Stanford NLP的介绍安装和简单使用

1.介绍Stanford NLPStanford NLP提供了一系列自然语言分析工具。它能够给出基本的词形，词性，不管是公司名还是人名等，格式化的日期，时间，量词，并且能够标记句子的结构，语法形式和字词依赖，指明那些名字指向同样的实体，指明情绪，提取发言中的开放关系等。一个集成的语言分析工具集进行快速，可靠的任意文本分析整体的高质量的文本分析支持多种主流语言多种编程语言的易用...

2019-07-27 09:31:38 795

原创写爬虫总是出现乱码，习惯不好所以谢谢笔记

写爬虫有时候需要静态页面就不得不把页面下载下来，但是写入的时候总是出现一些奇怪的乱码或者不能写入比如：’gbk’ codec can’t encode character ‘\xa0’ in position 4877: illegal multibyte sequence 这种错误，gbk codec can’t encode character :说明是将Unicode字符编码为GB...

2018-10-13 15:40:49 216

原创 Hive 2.2.0安装配置

1下载:apache-hive-2.2.0-bin.tar.gz 2解压：tar –zxvf apache-hive-2.2.0-bin.tar.gz 3移动：mv apache-hive-2.2.0-bin.tar.gz /home/yangting/hive2.2.0 4配置：sudo gedit /etc/profileexport HIVE_HOME=/home/yangti...

2018-08-11 08:46:09 920

1、到官网https://zookeeper.apache.org/releases.html#download下载zookeeper安装包，我使用的是zookeeper-3.4.13.tar.gz。 2、拷贝到linux服务器，并解压。命令：tar –zxvf zookeeper-3.4.13.tar.gz 3、将zookeeper/conf目录下的zoo_sample.cfg重命名为zoo...

2018-08-09 09:31:37 266

原创 hadoop(单机)安装配置

1.安装JDK yum -y install java-1.8.0-openjdk* 2.在相应目录下安装hadoop wget http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.9.1/hadoop-2.9.1.tar.gz 解压并且配置HADOOPHOME 3.修改$HADOOPHOME/etc/ha...

2018-08-09 09:23:29 447

原创 zookeeper(单机)的安装配置

我是以JDK都装好而且配置好了环境变量的前提下写的一、zookeeper安装过程从 http://zookeeper.apache.org/releases.html 这个地址下载zookeeper安装包，下载完成后我是放在/opt目录下面，如图所示： zookeeper安装比较简单，它对主流的Linux系统兼容性都算比较好，接下来，我们就解压开这个tar.gz...

2018-08-09 09:15:55 210

原创 12306爬虫的一点笔记

引言因为老师突然给了个比赛，所以就和我朋友一起参加了，我负责的工作是项目整合和界面的绘画，使用的语言是python，用pyQT5画的界面。项目完成这里我做一些笔记。前面的爬去就直接看我朋友的文章吧获取验证码：https://blog.csdn.net/r244925932/article/details/81227873获取车票信息：https://blog.csdn.net/r2...

2018-08-07 10:59:20 1465 1

qq_39816322的博客