- 博客(10)
- 收藏
- 关注
原创 java 调 hivesever2问题记录
1 拒绝访问:《1》 Connection reset 服务没启动,查看端口10000是否监听 netstat -nltp|grep 10000 如果未监听,执行 hive/bin/hiveserver2 & 启动服务《2》 Could not open client transport with JDBC Uri 验证方式有问题,可考虑使用
2017-06-22 14:50:33
420
原创 java调用hive
1 pom.xml dependency> groupId>org.apache.hadoopgroupId> artifactId>hadoop-commonartifactId> version>2.7.2version>
2017-06-22 14:49:42
2057
原创 pymongo.errors.CursorNotFound: Cursor not found, cursor id: 124891571478
默认 mongo server维护连接的时间窗口是十分钟默认 单次从 server获取数据是101条或者 大于1M小于16M的数据所以默认情况下,如果10分钟内未能处理完数据,则抛出该异常。解决办法:1. 修改每批次获取数据量的条数,即batch size:collection.find(condition).batch_size(5)批量数需 估算十分钟内能处
2017-06-07 11:17:42
8694
转载 maven将hadoop依赖打包成jar,运行jar后报错 java.io.IOException: No FileSystem for scheme
java.io.IOException: No FileSystem for scheme: hdfs在这篇文章中,介绍了如何将Maven依赖的包一起打包进jar包。使用maven-assembly打成jar后,将这个jar提供给其他工程引用的时候,报出如下错误:log4j:WARN No appenders could be found for logger
2017-06-01 10:17:11
1152
原创 centos7 安装tensorflow 环境步骤
记录本人centos7 虚拟机下 搭建tensorflow 开发环境的步骤 其中最大的坑是 需要提前安装zlib-devel 这样编译安装python3.5 会自动安装setuptools 和 pip 如果未安装zlib-devel则会报各种依赖错误,一个个解决很费劲另外选择python3.5.3 pip install tensorflow 直接能安装 其他版本无法找到地址需要自行下载whl文件
2017-05-14 23:10:32
1255
原创 openstack juno+ vmware vsphere6.0部署配置
初步记录 参考链接:http://www.hellovinoth.com/multi-hypervisor-openstack-integrating-vmware-vcenter-and-kvm-hypervisors-with-openstack/1、 vshpere6.0准备 选取 6.0 主要是因为通过查看官方配置文件,5.0需要额外配置很多参数1.1 安装vc
2015-08-17 21:05:40
1189
原创 openstanc juno 配置迁移过程及碰到的问题
openstack Juno版本配置迁移的过程,以及碰到错误的排错过程。主要参照文章开头列出的链接。
2015-05-04 18:28:22
583
原创 Linux Swap分区删除方法
机器配置了两块硬盘,都分别装有系统并分配了SWAP分区,现在想将其中一块作LVM,在重新分区后 执行pvcreate /dev/sdb1时提示操作失败: Can’t open /dev/sda2 exclusively. Mounted filesystem?。 后排查发现SWAP分区仍存在。 1、查看swap分区 cat /proc/swaps2、停用 swap分区 swapoff /
2015-03-17 15:41:47
1624
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人