自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 资源 (9)
  • 问答 (2)
  • 收藏
  • 关注

原创 在window上运行spark1.6.0

1、首先在官网上下载:spark-1.6.0-bin-hadoop2.6.tgz2、解压后,放到D盘下,并改名为spark-1.6.0,将D:\spark-1.6.0\bin加入到环境变量中,在终端中输入:pyspark,能打开交互界面,但是提示:ERROR util.Shell: Failed to locate the winutils binary in the hadoop bin

2016-05-29 15:34:17 1735 2

原创 pyspark ArrtibuteError: 'builtin_function_or_method' object has no attribute '__code__'

在使用spark1.5.0时,出现这个问题:ArrtibuteError: 'builtin_function_or_method' object has no attribute '__code__'解决办法,换用高版本的spark,spark1.6.0也可以与hadoop2.6.0搭配使用。

2016-05-28 14:53:43 3281

原创 ValueError: Cannot run multiple SparkContexts at once; existing SparkContext ...

将代码写成如下形式:from pyspark import SparkContextsc.stop() #停止以前的SparkContext,要不然下面创建工作会失败sc=SparkContext('local','pyspark')'''your code'''sc.stop() #最好是再停止一下本次的

2016-05-28 11:34:04 3506

原创 python记录

>>> ss=[var if not var%2 else var+10 for var in range(1,10)]>>> ss[11, 2, 13, 4, 15, 6, 17, 8, 19]在上例中,if语句与前面的var相结合,不能没有else,如果没有的话,会出错(而且,就算改为else pass,或者else continue也会出错,因为if-else的这种特殊写法在这里必须

2016-05-26 20:46:26 395

原创 微信开发 python django 多客服接口发送到客户端的消息乱码

在用python django做服务器进行微信开发时,想通过多客服接口向指定的用户发消息,代码如下: url='https://api.weixin.qq.com/cgi-bin/message/custom/send?access_token='+str(access_token) #content=to_text(content) data={ "touser":openid,

2016-05-26 08:45:48 2235

原创 zookeeper java.net.ConnectException

一台物理机装ubuntu,里面建立两个ubuntu虚拟机,启动zkServer.sh start时成功,但是zkServer.sh status时显示 java.net.ConnectException。将三个机器的/etc/hosts里的“127.0.1.1 ”这一条去掉。

2016-05-15 15:19:36 521

原创 ubuntu虚拟机进不去界面

今天在玩ubuntu虚拟机时,重启后,发现原来能进的账户进不去界面了,而且密码也没有错。我改用root账户登录,然后用su命令切换到出问题的账户,发现用户目录下只有:Access-Your-Private-Data.desktop和README.txt,上面提示输入encryptfs-mount-private,然后输入密码。之后,就可以用原来的账户登录了。上一步输入的密码为:想一想,在最

2016-05-15 13:12:29 5363

原创 python编码问题:\ufeff8804转换为8804

>>> ss='\ufeff8804'>>> ss.encode('utf-8').decode('utf-8-sig')'8804'编码转换请参考:http://stackoverflow.com/questions/17912307/u-ufeff-in-python-string

2016-05-13 11:26:07 1684

原创 python re.findall 遇到的小问题

原始文件中数据格式如下:{ "subscribe": 1, "openid": "ozJBZuCmclX2DJssCnIYedo0qVzQ", "nickname": "宝玉

2016-05-10 20:44:44 1599

原创 python json json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes

>>> import json>>> test="{'data':'123'}">>> result=json.loads(test)Traceback (most recent call last): File "", line 1, in File "d:\Anaconda3\lib\json\__init__.py", line 319, in loads retur

2016-05-09 19:34:43 37022

原创 python2.7 中构造带u'的字符串

python中由字符串变量构造前面带u的字符串的方法:ss='test'sb=u''+str(ss)sb就是我们想要的前面带u的字符串

2016-05-09 18:53:14 3297 2

concurrent 摘自guava concurrent

这个工程是为了学习guava concurrent中的AbstractFuture而建立的,里面有可以运行的例子,再配合我的博客:https://blog.csdn.net/o1101574955/article/details/82889851,可以看明白guava concurrent的基本设计思路。

2018-09-28

graph cut matlab

graph cut matlab 代码 可以运行 能直观看到结果。下载觉不会后悔的。 对理解和使用matlab 函数都有帮助

2017-11-10

achartengine-1.1.0-0.jar

achartengine-1.1.0.jar 用于在android上绘制曲线图和趋势图 它功能强大,支持散点图、折线图、饼图、气泡图、柱状图、短棒图、仪表图等多种图表

2017-10-30

《淘宝技术这十年》完整版 带批注.pdf

《淘宝技术这十年》是由淘宝子柳写的,是一本非常好的关于淘宝、阿里技术的书籍。该书的所有权归子柳所有,同时希望大家购买正版书籍进行学习和阅读。希望对你有所帮助,确实是本好书啊~ 该书目录如下: 第一部分 淘宝技术发展 引言:光棍节的狂欢 个人网站 第二部分 淘宝技术发展 Java时代 创造技术 第三部分 淘宝技术发展 分布式时代 中间件 Session框架 开放平台 第四部分 我在淘宝这八年

2017-10-16

Netty.in.Action.2015.12.pdf

Netty是一款用于创建高性能网络应用程序的高级框架。在第一部分,我们将深入地探究它的能力,并且在3个主要的方面进行示例: 使用Netty构建应用程序,你不必是一名网络编程专家; 使用Netty比直接使用底层的Java API容易得多; Netty推崇良好的设计实践,例如,将你的应用程序逻辑和网络层解耦。 在第1章中,我们将首先小结Java网络编程的演化过程。在我们回顾了异步通信和事件驱动的处理的基本概念之后,我们将首先看一看Netty的核心组件。在第2章中,你将能够构建自己的第一款基于Netty的应用程序!在第3章中,你将开启对于Netty的细致探究之旅,从它的核心网络协议(第4章)以及数据处理层(第5章和第6章)到它的并发模型(第7章)。 我们将把所有的这些细节组合在一起,对第一部分进行总结。你将看到:如何在运行时配置基于Netty的应用程序的各个组件,以使它们协同工作(第8章),Netty是如何帮助你测试你的应用程序的(第9章)。

2017-09-03

用sbt构造好的Intellij版的spark工程

sbt构造spark项目实在是太慢了,终于构造好了,拿出来和大家分享,直接导入到intellij里就可以研究spark了,定义跳转非常方便。基于当前最新版本的spark构造的工程。

2016-07-23

pyspark_nltk数据和代码

用pyspark+nltk处理文本数据

2016-06-03

c语言百例 cpp文件

c语言编程例子,例如利用指针计算时间差,结果返回到主函数 int * jisuan(int a,int b,int c,int d,int e,int f,int g,int h) { int hour1,hour2,minu1,minu2,hour_diff,minu_diff; //算时间差没必要换算成分钟数,只需要小时数相减,分钟数相减即可 int result[4]; hour1=a*10+b; hour2=e*10+f; if(hour1<=hour2) hour_diff=hour2-hour1; else hour_diff=hour1-hour2; minu1=c*10+d; minu2=g*10+h; if(minu1<=minu2) minu_diff=minu2-minu1; else hour_diff=hour_diff-1; minu_diff=60-(minu1-minu2); result[0]=hour_diff/10; result[1]=hour_diff; result[2]=minu_diff/10; result[3]=minu_diff; return(result); }

2012-01-05

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除