- 博客(15)
- 收藏
- 关注
原创 HDFS中JAVA API的使用
参考网址:http://www.cnblogs.com/liuling/p/2013-6-17-01.html HDFS是一个分布式文件系统,既然是文件系统,就可以对其文件进行操作,比如说新建文件、删除文件、读取文件内容等操作。下面记录一下使用JAVA API对HDFS中的文件进行操作的过程。对分HDFS中的文件操作主要涉及一下几个类:1、Configuration类:该类的对象
2017-03-25 11:14:33 312
原创 ubuntu系统使用U盘
1、查看所有硬盘信息:$ sudo fdisk -l2、挂载U盘(就是插入并识别U盘):$ sudo mount -t vfat /dev/sdb4 /mnt/usb注:这里的sdb4是通过查看硬盘信息获得的U盘的编号。3、卸载U盘(就是拔出U盘):$ umount /dev/sdb4
2017-03-24 01:34:59 563
原创 ubuntu14.04中安装Hbase-0.98(全分布式)
Hbase下载网址:http://mirror.bit.edu.cn/apache/hbase/前提是已经安装好hadoop三台主机CDH,CDH1,CHD2。第一步:每台机器上下载并安装Hbase0.98版本输入指令:$ wget -r -O hbase-0.98.24-hadoop2-bin.tar.gz "http://mirror.bit.edu.cn/apache/hba
2017-03-22 14:47:10 851
原创 ubuntu14.04系统中安装tensorflow(gpu版)cuda-8.0 + cudann(5.0 or 6.0)
系统配置:ubuntu14.04 + GTX1060 + i7(7700K)安装部署参考地址1:http://blog.csdn.net/zhouchao_fight/article/details/51517338安装部署参考地址2(推荐):http://blog.csdn.net/zhaoyu106/article/details/52793183安装前准备工作(离线安装)官方...
2017-03-21 22:40:42 13530 3
原创 linux 中apt-get update源设置
sudo apt-get update经常会出现如下错误:Err http://security.ubuntu.com trusty-security/main amd64 Packages 404 Not Found [IP: 91.189.91.26 80] Fetched 1,107 kB in 11s (92.8 kB/s) W: GPG error
2017-03-21 10:53:11 8527
原创 Linux用户管理相关指令
第一节:新建用户useradd [可多选] 用户名可选参数说明:-c comment 指定一段注释性描述。-d 目录 指定用户主目录,如果此目录不存在,则改为使用-m选项,可以创建主目录( 默认目录在/home/abcd(新建的用户名)/ )。-g 用户组 指定用户所属的用户组。-G 用户组,用户组 指定用户所属的附加组。-s Shell文件
2017-03-21 10:34:05 183
原创 HDFS相关指令操作
第一步:换件变量配置sudo vim /etc/profile # Java Env export JAVA_HOME=/usr/local/java/jdk1.8.0_121 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
2017-03-20 15:50:10 460
原创 Ubuntu14.04配置VNC服务
第一步:安装VNCserver指令:sudo apt-get install vnc4server第二步:开启vnc服务指令:vncserver这里需要输入vnc链接的密码看到..desk is master:1 说明已经启动了vnc服务。启动vnc成功后,会在主目录下产生一个.vnc目录(~/.vnc/)。 这时候window通过vnc链接到linux时,桌面系统是doc。
2017-03-20 10:28:02 820
原创 tensorflow中的一些重要函数
tf.constanttf.constant(value, dtype=None, shape=None, name=’Const’) 创建一个常量tensor,按照给出value来赋值,可以用shape来指定其形状。value可以是一个数,也可以是一个list。 如果是一个数,那么这个常亮中所有值的按该数来赋值。 如果是list,那么len(value)一定要小于等于shape展开后
2017-03-14 15:56:33 4772
原创 hadoop设置ssh免密码登陆
原理:机器1免密码登陆机器2: 机器1的私钥区与机器2的公钥区匹配有三台机器:10.0.83.201 CDH10.0.83.202 CDH110.0.83.173 CDH2第一步:三台机器都安装ssh: sudo apt-get install openssh-server第二步:三台机器上都执行:ssh localhost 然后 exit 否则~/目录下(ls -a)
2017-03-09 15:37:57 649
原创 ubuntu14.04部署hadoop环境(学习笔记)
第一步:准备三台虚拟机并创建3个hadoop用户修改hosts文件如下: sudo vim /etc/hosts127.0.0.1 localhost #127.0.1.1 ubuntu-14.04-Server ubuntu-14 #一定要注释掉 10.0.83.201 CDH 10.0.83.202 CDH1 10.0.83.17...
2017-03-09 00:42:08 1638
原创 ubuntu14.04系统中安装tensorflow(cpu版)
第一步:安装pip工具sudo apt-get install python-pip第二步:安装tensorflow-cpu版sudo pip install https://storage.googleapis.com/tensorflow/linux/cpu/tensorflow-0.9.0-cp27-none-linux_x86_64.whl或:sudo pip instal
2017-03-07 11:04:13 2303
原创 ubuntu安装mysql
第一节:下载mysql指令:sudo apt-get install mysql-server第二节:相关操作1创建用户:指令:sudo mysql -u root -p 输入密码即可mysql> grant all on *.* to myhive@"%" identified by "312715289" ; mysql> flush privileges; (刷新系统权限表)(执...
2017-03-01 14:09:22 202
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人