2012年12月_xuefeng0707

12月 08月 07月 06月 05月

原创 Linux的一些笔记

(1)VirtualBox ubuntu共享文件夹设置：#mount -t vboxsf share_folder /mnt/path#mount -t vboxsf C_DRIVE /mnt/path (mount整个C盘)(2)su密码>sudo passwd然后会提示输入UNIX密码了。(3)安装VMware增强工具http://blog.csd

2012-12-17 22:36:31 650

原创 HDFS读和写

hadoop处理的输入数据通常很大，以GB或TB计。hadoop将大文件分割为多个块(分片、Input split)，分别存在多个机器上。这样，当需要分析此大文件时，MapReduce程序在多台机器上并行处理。分片不能太大，如果所有数据在一个分片内，那就无法并行处理；分片不能太小，启动和停止每个分片也需要消耗时间。HDFS使用FSDataInputStream读取文件，提供了随机读功能

2012-12-17 22:24:58 856

原创 JSP中使用EL表达式 ieELIgnoed问题

在JSP中使用EL表达式时，需要标识 isELIgnored="false"，不然EL表达式是作为普通的字符串来编译的，而在页面上也不会显示出正确的值。在apache-tomcat-6.0.35-src中可以看到这一点：protected String[] generateJava() throws Exception { String[]

2012-12-14 13:25:35 961 1

原创 HDFS操作

HDFS基本命令:hadoop fs -cmd cmd: 具体的操作，基本上与UNIX的命令行相同args:参数HDFS资源URI格式：scheme://authority/pathscheme：协议名，file或hdfsauthority：namenode主机名path：路径示例：hdfs://localhost:9000/user/chunk/test.tx

2012-12-09 00:50:06 8699

原创 hadoop搭建

下载hadoop-1.0.3验证ssh>which ssh>which sshd>which ssh-keygen生成ssh密钥对>ssh-kengen -t rsa查看ssh公钥>more /home/hadoopadmin/.ssh/id_rsa.pub (hadoopadmin是ubuntu用户名)将公钥复制到主节点及各个从节点>scp ~/.ssh/

2012-12-08 21:37:41 1128