spark
鶸者为何战斗
这个作者很懒,什么都没留下…
展开
-
解决spark缺少winutils.exe的问题
前几天在运行spark的时候一直显示Could not locate executabl ....\hadoop-2.2.0\hadoop-2.2.0\bin\winutils.exe in the Hadoop binaries刚开始以为缺少了hadoop,就去下载了hadoop,但是正常安装好了并且添加了环境变量以后还是不能解决。打开hadoop中发现根本就没有winutil.原创 2016-06-05 11:13:44 · 10346 阅读 · 0 评论 -
pyhive中 一些错误的地方
因为最近在用集群用到了hive python连接需要使用pyhive,但是这个包一直在报错 不存在tab_name和database_name,经过下午查源码发现了错误点上面两处就是错误点需要改成下面的样子这样子错误就消息了。这次修改仅限于0.2.1版本,因为后续应该会修好这个问题的。原创 2017-01-06 17:57:47 · 2372 阅读 · 0 评论 -
sqlalchemy中hive的url形式
python中:hive://localhost:port/database?auth=XXXXphp中:hive://localhost:port/database;auth=XXXX原创 2017-01-09 16:33:43 · 4162 阅读 · 1 评论