2015年01月_flash8627

11月 03月 02月 01月

原创 MongoDB日志

spring data + mongodb http://www.open-open.com/lib/view/open1342877356974.html MongoDB工具MagicMongoDBTool使用介绍 http://www.open-open.com/bbs/view/1321148836202 MongoDB 容量规划 htt

2015-01-22 16:41:19 805

原创 hadoop-2.6集群安装

基础环境 sshd配置目录：/root/.ssh 整个配置就四个shell 1. 每台机器操作一次 ssh-keygen -t rsa 生成ssh密钥，生成的文件如下： id_rsa id_rsa.pub .pub为公钥，没有.pub为私钥 2. 每台机器操作一次 cp id_rsa.pub

2015-01-28 23:39:37 4080 2

原创 linux 6.6 vsftpd 配置

ftp 配置我这里主要是要上传工具方便，并不是要做专业的　ftp服务器，所以我只使用root用户登陆上传，root用户只需要把ftp屏蔽的用户列表去掉root，打开防火墙，关闭selinux即可. 在以下文件一般第一行就是root 使用#注释掉　　其它的不用管。 vim /etc/vsftpd/user_list vim /etc/vsftpd/ftpusers 运行

2015-01-26 23:12:16 962

原创 ssh无密码登陆终极解释

目录：/root/.ssh 整个配置就四个shell 1. 每台机器操作一次 ssh-keygen -t rsa 生成ssh密钥，生成的文件如下： id_rsa id_rsa.pub .pub为公钥，没有.pub为私钥 2. 每台机器操作一次 cp id_rsa.pub authorized_keys

2015-01-26 22:56:06 984

原创 hadoop 使用 -- spring-data-hadoop

spring是java开发者比较熟悉的框架，准备使用spring-data-hadoop为hadoop开发定制一个框架，方便后续开发人员能快速熟悉开发框架 hadoop下载地址(含各版本)： http://mirrors.cnnic.cn/apache/hadoop/common/ mongodb下载地址： http://repo.spring.io/libs-releas

2015-01-22 16:50:24 5835 3

原创 git 版本管理

待续…… 整理中……

2015-01-15 10:32:39 639 1

原创可恨的ORA-01034

虚拟机linux 6系统新装的oracle 11g,装好测试就报 ERROR at line 1: ORA-01034: ORACLE not available Process ID: 0 Session ID: 0 Serial number: 0 烦了,重新装了一次,好了,用了几天,又来... select * from scott.emp * ERROR a

2015-01-13 23:28:35 3731 1

原创 hadoop实实的体验 hdfs读写

有人称hdfs存储过程,我不写习惯,容易联想到oracle存储过程, hdfs以块(block)为单位,每块64MB 检查block: hadoop fsck / -files -blocks 命令行接口: hadoop fs -copyFromLocal input/docs/quangle.txt quangle.txt 1.

2015-01-13 22:13:46 729

原创 hadoop实实的体验--hello -wordcount

1. wordcount是hadoop的示例程序 hadoop fs -ls / #可以看到集群的文件目录 hadoop fs -mkdir dzg_data_fod 新建一个集群的文件目录 2. 将数据放入hdfs上准备点文件做数据: touch data1 touch

2015-01-13 22:06:09 636

原创 hadoop实实的体验--安装

hadoop集群时注意环境保持一致,目录结构. 1.1.1 所需工具 Redhat Enterprise Linux 6.3 hadoop 1.2.1 jdk 1.6 + 1.1.2 配置系统IP 这里推荐静态ip(static) 这里略过... 1.1.3 先修改一个主机名 hadoop喜好使用主机名访问节点第一步：看机器名：uname-a Linux

2015-01-13 22:03:56 758