黄大芬-CSDN博客

原创 pySpark 在windows下环境搭建

本人系统是windows,64位要想在windows下搭建Spark(python版本)主要分为：JDK安装配置Scala安装配置Spark安装配置Hadoop安装配置Python安装配置PyCharm运行JDK安装配置JDK 版本需要在 1.8 下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.

2017-09-02 17:40:23 13785 1

原创 Python2.7 爬虫实践：豆瓣电影影评分析

reference from ：hangsegmentfault.com/a/1190000010473819本人先看到以上，觉得挺好玩，所以就跟着原作者的思路在撸一遍代码后来发现了几个问题本人的python 2.7 原作者为python3所以其中的一些funtion/属性也不支持所以做了一下修改安装必要的lib 之后会有文章进

2017-08-29 23:20:36 1964

原创安装包注意

matplotlib 安装过程http://www.2cto.com/os/201309/246928.htmlno display name and no $DISPLAY environment variable文件起始加这两句import matplotlib matplotlib.use('Agg')

2015-09-28 21:12:04 270

转载朴素贝叶斯分类器

转自：http://blog.csdn.net/hareric/article/details/48582211本文介绍朴素贝叶斯分类器（Naive Bayes classifier），它是一种简单有效的常用分类算法。一、朴素贝叶斯分类的基本原理给定的待分类项的特征属性，计算该项在各个类别出现的概率，取最大的概率类别作为预测项。二、贝叶斯定理根据条件概率的定义。

2015-09-22 20:55:18 965

原创 R语言入门学习

1、安装windows下R语言环境安装：http://blog.csdn.net/testcs_dn/article/details/441159272、简单实例（1）保存图片输出图片>setwd("D:/Documents/graphs") #路径可以用\\ 两个斜杠，设定保存的目录> x1=100:200> x=x1/100> y=exp(2*x)+sin

2015-09-07 11:57:23 311

原创 python 爬虫总结(一)

__author__ = 'fen'# coding=utf8import urllib2import urllibfrom StringIO import StringIOimport bs4def base1(url): content=urllib2.urlopen(url).read return contentdef agent(url): prox

2015-09-06 10:19:16 471

转载 R 语言 ubantu配置以及安装

首先先配置好环境1.首先更新sources.listcd /etc/apt/sudo gedit sources.list添加 #deb http://mirrors.ustc.edu.cn/CRAN/bin/linux/ubuntu/ precise/2.更新软件源deb http:///bin/linux/ubuntu saucy/deb h

2015-08-26 22:19:50 576

转载多线程就这么简单 python版

多线程就这么简单 http://www.cnblogs.com/fnng/p/3670789.htmlpython线程指南 http://www.cnblogs.com/huxi/archive/2010/06/26/1765808.html

2015-06-15 09:25:22 217

原创将django项目云服务器需要注意

新手遇到的问题。共勉～大神就忽略就忽略渣渣～服务器购买注意 1、系统版本 2、内存 3、适用地区 4、速度配置 1、看python 版本看是否需要升级命令 python -version 2、看jdk 版本命令 java -version 3、安装需要导入的包、django 4、远程命令 ssh [email protected] 5、scp的

2015-05-11 22:43:30 521

原创菜鸟更新ubantu

将自己ubantu 12.0.0 的升级到14.0 LST版本用了下面的命令sudo apt-get updata　　sudo update-manager -c -d然后选选择 upgrade等了很久。后果：1、时间很久还不如重新再装2、出现很多问题可以 sudo apt-get update （1）输入法有问题导致有些文件

2015-04-04 20:22:17 460

funfun0的专栏