win 安装mysq-python出错的其他安装方式

在windows的命令行中输入: pip install mysql-python 出现问题如下: _mysql.c(42) : fatal error C1083: Cannot open include file: 'config-win.h': No such file or dir...

2019-03-21 16:20:45

阅读数 28

评论数 0

Ubuntu 17 安装scrapy爬虫

Ubuntu 17 安装scrapy爬虫     第一步 安装pip:输入:sudo apt-get install python-pip   第二步  再执行:输入:sudo apt-get install python-dev   第三步 安装Scrapy :输入:pip ins...

2018-09-06 12:24:04

阅读数 116

评论数 1

jupyter notebook 写代码自动补全

操作步骤 进入命令行环境。我使用的是conda。有两种方式进入命令行。 方法1:通过anconda navigator界面,选择environments,选择对应环境名,选择open terminal 方法2:直接使用cmd或者terminal等终端进入命令行。激活...

2018-08-09 17:36:46

阅读数 19320

评论数 9

Visual Studio 2015 产品下载地址以及激活码

Visual Studio Community 2015 简体中文免费版 镜像SHA1:1044F9F4E0EA1304AFECF6780BF599F1DA248DF8 http://download.microsoft.com/download/B/4/8/B4870509-05CB-447...

2018-08-08 10:26:28

阅读数 169

评论数 0

在Linux 中安装hive数据仓库

 hive正是实现了这个,hive是要类SQL语句(HiveQL)来实现对hadoop下的数据管理。hive属于数据仓库的范畴,那么,数据库和数据仓库到底有什么区别了,这里简单说明一下:数据库侧重于OLTP(在线事务处理),数据仓库侧重OLAP(在线分析处理); 首先确定 已经安装好了hadoo...

2018-08-03 20:57:45

阅读数 139

评论数 0

windows下使用anaconda prompt修改 jupyter notebook打开文件夹路径

修改配置文件里面的路径。 anaconda promt下运行jupyter notebook --generate-config,会生成配置文件jupyter_notebook_config.py。可以看到文件生成的路 径: 打开文件,查找## The directory to use for...

2018-07-25 17:51:01

阅读数 1336

评论数 0

windows 的pip下载更换源地址

【国内镜像】 中国科学技术大学 : https://pypi.mirrors.ustc.edu.cn/simple 清华:https://pypi.tuna.tsinghua.edu.cn/simple 豆瓣:http://pypi.douban.com/simple/ 华中理工大学 : ...

2018-07-21 17:48:27

阅读数 768

评论数 0

python对时间的操作

Python日期的加减等操作1. 日期输出格式化所有日期、时间的api都在datetime模块内。1. datetime => stringnow = datetime.datetime.now() now.strftime('%Y-%m-%d %H:%M:%S') #输出2...

2018-03-30 09:26:22

阅读数 303

评论数 0

同样局域网下的主机互相访问某主机下的虚拟机

 第一步:配置如下第二步:配置点击“编辑”->“虚拟网络编辑器”第三步:按顺序点击进入第四步:配置如下:第五部:要不关闭防火墙(不建议),要不修改入站策略:第六步:按顺序点击第七步:点击端口 输入端口号 保存即可。测试:主机ip:10.21.20.26           虚...

2018-03-19 12:39:55

阅读数 114

评论数 0

intellij IDE Exception in thread "main" java.lang.OutOfMemoryError: Java heap space

出现该原因是因为内存不够用了,所以需要 修改java vm 的内存; 打开intellij IDE 的 Run 选项 2.然后再选择edit configuration 进入到vm options

2017-12-26 16:43:26

阅读数 572

评论数 0

关于安装scrapy-redis分布式常见问题

直接运行其实免Python 安装  使用命令pip install *** sudo pip install scrapy sudo pip install scrapy-redis sudo apt-get install redis-server sud...

2017-11-29 22:48:09

阅读数 434

评论数 0

Exception in thread "main" java.lang.SecurityException问题解决方法

提交运行spark程序,出现如下 错误:: hadoop@master:/usr/local/hadoop/spark/spark-data$ spark-submit --master spark:192.168.71.128:7077 --class PageRank...

2017-10-24 22:38:39

阅读数 587

评论数 0

Error:scalac: missing or invalid dependency detected while loading class file 'RDD.class'.问题

使用intelig 运行spark程序出现 Error:scalac: missing or invalid dependency detected while loading class file 'RDD.class'. Could not access term hadoop in pac...

2017-10-24 22:23:22

阅读数 651

评论数 0

Ubuntu突然连接不上网

好早之前安装的Ubuntu,运行过大量程序,有一天突然连接不上网络,之前的网络配置还在那里。   去本地电脑找到服务,发现原来是vmware Nat service 被关掉了,无语,浪费我好多时间!!!!  (所以写个备忘录)   --正确设置vmware的共享文件夹后  在/mn...

2017-10-24 17:12:27

阅读数 2693

评论数 0

linux分布式scrapy爬虫之安装scrapy-redis

安装完redis后,进入到redis目录下 输入redis-cli 会有提示安装 sudo apt-get install redis-tools 再输入:redis-server /etc/redis.conf 会有提示安装:sudo apt-get install redi...

2017-10-23 16:24:36

阅读数 779

评论数 0

Ubuntu下搭建spark集群开发环境

之前在windows下搭建了一个spark的开发环境,但是后来发现如果想要搞spark streaming的例子的话在Linux下使用更方便,于是在Ubuntu下面搭建一下spark开发环境,记录以做备忘之用。 1 .首先去spark官网下载相关软件,我这里用的是spark2.1.0版本http:...

2017-10-23 12:10:24

阅读数 601

评论数 0

hadoop-2.7.4完全分布式集群部署 外加测试例子mapreduce

更改系统时区(将时间同步更改为北京时间) xiaolei@hadoop1:~$ date Wed Oct 26 02:42:08 PDT 2017 xiaolei@hadoop1:~$ sudo tzselect 根据提示选择Asia China Beijing Time yes  最后将Asia...

2017-09-01 13:20:04

阅读数 353

评论数 0

securecrt 上传文件出现 *** was skipped 问题

当上使用securecrt上传文件时,出现** was skipped 就是没有上传成功,因为权限不够。 解决办法:前面加 sudo,就可以了,即: sudo rz //注意只要不是root的用户,一般的用户执行命令钱通常需要加 "sudo...

2017-08-29 17:19:36

阅读数 2148

评论数 0

Ubuntu 17.04更换源

更换Ubuntu 有两种方法,一种是直接在命令行更换,还有一种是在Ubuntu 界面中更换。 第一种命令行更换: 输入:sudo /etc/apt/sources.list /etc/apt/sources.list.bak //备份原来的源 阿里云的源: ...

2017-08-29 16:25:13

阅读数 6423

评论数 0

使用lrzsz工具和 bec-cli工具在百度云下载数据

BCE-CLI-0.10.3工具安装: 安装该工具,前提是必须已经安装Python(安装过程请参考,之前的“Django安装与连接数据库”文件)。 BCE-CLI 工具下载链接:https://cloud.baidu.com/doc/Downloadcenter/CLI.html (选择Lin...

2017-08-18 15:46:48

阅读数 293

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭