自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(33)
  • 收藏
  • 关注

转载 oracle 权限与角色查询语句

UNLIMITED TABLESPACE 权限,也就是这个用户可以在其他表空间里随意建表。  SQL> select * from dba_sys_privs where grantee='CHENWM';  GRANTEE PRIVILEGE ADMIN_OPTION  ------------------------------ --------------------------

2016-02-24 08:56:46 345

转载 hive安装配置与hive的JDBC (hadoop-0.20.2 + hive-0.7.0)

转:http://blog.163.com/huang_zhong_yuan/blog/static/174975283201181371146365/hive安装安装hive的时候参考了http://yp.oss.org.cn/software/show_resource.php?resource_id=270 和http://www.cnblogs.com/flying5/archiv

2016-02-22 16:35:07 342

转载 配置hive元数据存储在mysql中

转:http://blog.sina.com.cn/s/blog_3fe961ae0101925l.html默认情况下,Hive的元数据信息存储在内置的Derby数据中。Hive支持将元数据存储在MySQL中,配置过程如下:1.安装MySQL创建用户hadoop$ mysql -u root -pEnter password:进入MySQL后,mysql> CR

2016-02-22 16:32:10 794

原创 hive安装遇到的问题

参考:http://www.iteye.com/problems/49859关于安装hive,启动hive后产生此问题:[hadoop@master conf]$ hiveHive history file=/tmp/hadoop/hive_job_log_hadoop_201602221512_1847642902.txthive> show tables;Exception

2016-02-22 15:46:41 536

转载 MySQL创建用户的三种方法

前言:mysql创建用户的方法分成三种:INSERT USER表的方法、CREATE USER的方法、GRANT的方法。一、账号名称的构成方式账号的组成方式:用户名+主机(所以可以出现重复的用户名,跟其他的数据库不一样)用户名:16字符以内.主机名:可以用主机名和IP地址,也可以用通配符通配符说明:172.18.10.%(IP地址为172.18.10段的所有

2016-02-22 13:57:56 281

转载 CentOS 6.5系统中安装配置MySQL数据库

就像Windows server 2003,2008中一般安装的是Sql Server 数据库,在linux系统中一般安装的是mysql数据库,而且Mysql数据库的第一个版本就是发行在Linux系统上的。一、mysql简介MySQL是一个关系型数据库管理系统,由瑞典MySQL AB公司开发,目前属于Oracle公司。MySQL是一种关联数据库管理系统,关联数据库将数据保存在不同的

2016-02-22 13:41:53 324

转载 namenode fsimage edits

fsimage保存了最新的元数据检查点。edits保存自最新检查点后的命名空间的变化。2、工作原理:从最新检查点后,hadoop将对每个文件的操作都保存在edits中,为避免edits不断增大,secondary namenode就会周期性合并fsimage和edits成新的fsimage,edits再记录新的变化。这种机制有个问题:因edits存放在Namenod

2016-02-19 10:50:28 267

转载 window Eclipse中运行cygwin Hadoop!

转:http://www.360doc.com/content/12/0227/22/23378_190145383.shtmladoop版本:hadoop-0.20.2Eclipse版本:eclipse-java-helios-SR2-linux-gtk.tar.gz ========================安装eclipse=======

2016-02-18 16:30:27 313

转载 在windows系统中安装hadoop

转:http://my.oschina.net/u/570654/blog/112757 1、安装Cygwin    从http://www.cygwin.com/ 下载cygwin的setup.exe,双击运行:        选择从Internet安装:        设置安装目录:        设置安装包目录:        设置“Inter

2016-02-18 16:19:16 295

转载 win7下Cygwin搭建Hadoop开发环境(由于win7环境不同导致本文章并不一定适合所有的win7用户)

转;http://www.cnblogs.com/tonychanleader/archive/2012/09/22/2697930.html第一步:安装JDK略。  第二步:安装Cygwin  官方网址:http://www.cygwin.com/  下载setup.exe  安装时选择相应的安装包:  Base-->sed  Editors-->vi

2016-02-18 16:18:03 426

转载 配置Cygwin支持无密码SSH登陆

转:http://www.bianceng.cn/a/2014/0628/42031.htm1、安装SSH默认的Cygwin没有安装ssh,所以重新运行http://www.cygwin.com/setup.exe在Select Packages的时候,在search输入ssh,选择openssh:The OpenSSH server and client programs

2016-02-18 16:15:49 438

转载 Windows环境下为Hadoop搭建Cygwin环境

转:http://jingyan.baidu.com/article/a681b0de34dc6a3b19434662.htmlCygwin是一个在windows平台上运行的类UNIX模拟环境,它对于学习UNIX/Linux操作环境,或者从UNIX到Windows的应用程序移植,或者进行某些特殊的开发工作,尤其是使用GNU工具集在Windows上进行嵌入式系统开发,非常有用。Cygwin

2016-02-18 16:12:37 363

原创 关于hadoop父节点已推出,子节点还在杀不掉

start-all.shstarting namenode, logging to  xxx-namenode-calm.outcalm: datanode running as process 43376. Stop it first.calm: secondarynamenode running as process 2968. Stop it first.jobtracker

2016-02-18 15:09:57 374

转载 MapReduce提交作业常见问题

转:http://yu06206.iteye.com/blog/1402084今天在hadoop集群上跑MapReduce程序,遇到的一些问题和解决的方法,希望对大家有帮助!1.从HDFS上传下载文件到第一种错误:Java代码  "font-size: medium;">Exception inthread"main"java.lang.Ille

2016-02-17 11:33:46 409

转载 在Linux下基于Eclipse的Hadoop应用开发环境配置

转:http://www.cnblogs.com/flyoung2008/archive/2011/12/09/2281400.html基于Eclipse的Hadoop应用开发环境配置我的开发环境:操作系统centos5.5 一个namenode 两个datanodeHadoop版本:hadoop-0.20.203.0Eclipse版本:eclipse-java-helio

2016-02-17 10:56:27 435

转载 实战 windows7 下 eclipse 远程调试 linux hadoop

转:http://my.oschina.net/leejun2005/blog/122775实战 windows7 下 eclipse 远程调试 linux hadoop恩,之所以有这篇博客,是因为最近又有童鞋咨询怎么在 windows 7 下用eclipse远程调试部署在linux下的hadoop,其实我自己不这么混搭的,既然有童鞋这么问了,那我就索性随着折腾一把了。

2016-02-17 10:32:45 639

转载 Eclipse:Run on Hadoop 没有反应

转:http://www.linuxidc.com/Linux/2012-05/60784.htmEclipse:Run on Hadoop 没有反应原因:hadoop-0.20.2下自带的eclise插件已过时。解决方案:1、下载正确的插件:https://issues.apache.org/jira/secure/attachment/12460491/ha

2016-02-17 09:33:41 312

转载 Cygwin上Eclipsef运行Hadoop遇到的有关问题

Cygwin上Eclipsef运行Hadoop遇到的有关问题Cygwin下Eclipsef运行Hadoop遇到的问题  下午终于在Eclispe下面调通hasoop的WordCount例子了,期间碰到了很多的问题,有些是环境的问题,有些是配制问题。这里分享一下我碰到的问题。  0.我的系统环境:           win7操作系统    Cygwin 

2016-02-16 21:55:16 344

转载 Hadoop:hadoop.job.ugi

转:http://my.oschina.net/ale0512/blog/55003关于eclipse下连接hadoop出现error null问题如果Hadoop用户标识不同于客户机上的用户账号,可以通过hadoop.job.ugi属性来显式设定Hadoop用户名和组名。 用户名和组名之间有半角逗号隔开例如:preston,diecotrs,invento

2016-02-16 17:49:27 1727

转载 Eclipse安装颜色主题,个性化你的IDE,让你的IDE焕然一新

转:http://www.open-open.com/lib/view/open1389410762742.html我们都知道eclipse默认的颜色主题是白色的背景,但是如果想改变代码编辑区的背景颜色,需要怎么办呢?今天给大家介绍一个非常赞的eclipse,可以很方便的根据自己的需求选择喜欢的颜色主题,其他的不多说,直接上图,这是我个人比较喜欢的一个主题,长时间工作对眼睛也有一定的保护效

2016-02-16 15:42:52 992

转载 Eclipse颜色主题插件:Eclipse Color Theme

转:http://www.cnblogs.com/Rocky_/archive/2011/11/30/2269442.html2011年08月20日由Leyond发布在 Java留下评论 一个很赞的eclipse插件,可以简单方便地实现eclipse下的代码配色。另外插件作者还专门为此插件做了一个eclipse配色网站,配色多达728个,开发者们也可以在此网站分

2016-02-16 15:17:47 497

转载 myeclipse配置hadoop开发环境,及遇到问题解决

转:http://www.dataguru.cn/thread-203560-1-1.html参见myeclipse配置hadoop开发环境,及遇到问题解决http://f.dataguru.cn/thread-199557-1-1.htmlorg.apache.hadoop.security.AccessControlException:Permission denied:user=

2016-02-16 10:36:38 852

转载 如何使用Maven构建《hadoop权威指南3》随书的源码包

《hadoop:the definitive guide 3th》中的例子默认提供了一种编译和构建jar包方法——maven,如果没有maven你会发现编译测试随书的源码会非常的麻烦(至少在命令行下),当然你也可以使用eclipse导入随书的源码再自己一个个的添加依赖性jar包(恐怕也不太容易)。不过还好有非常好的开源的软件项目管理工具来帮助我们做这些无关于程序本身设计与架构的琐碎的工作,那就是m

2016-02-15 21:40:21 339

转载 如何在windows上使用eclipse远程连接hadoop进行程序开发

由于hadoop主要是部署和应用在linux环境中的,但是目前鄙人自知能力有限,还无法完全把工作环境转移到linux中去(当然还有点小私心啦,windows下那么多好用的程序到linux下用不了还真有点心疼——比如说快播,O(∩_∩)O~),于是便想着用eclipse来远程连接hadoop进行开发,摸索了一番,下面是其步骤:  1. 首先把hadoop-eclipse-plugin-1.0

2016-02-15 21:38:52 401

转载 Notepad++远程连接Linux系统

转:http://jingyan.baidu.com/article/d8072ac4791d0cec94cefd7c.htmlNotepad++是一套非常有特色的自由软件的纯文字编辑器,有完整的中文化接口及支持多国语言编写的功能。现在用Notepad++来远程编辑Linux系统文本文件。工具/原料Notepad++L

2016-02-15 16:12:55 4631

转载 如何查看网站的端口

转:http://jingyan.baidu.com/article/4dc40848be2fd2c8d946f1a0.html本文教您:1,网站的域名和端口是什么含义2,网站的端口到底有哪些方法/步骤1通俗化解释什么是网站的端口,特别实用。-------------------------------

2016-02-06 11:29:22 10942 2

转载 Hadoop配置项整理(hdfs-site.xml)

转:http://slaytanic.blog.51cto.com/2057708/1101111/续上篇整理一下hdfs相关的配置项   name valueDescription dfs.default.chunk.view.size32768namenode的http访问页面中针对每个文件的内容显示大小,通常

2016-02-06 11:13:44 320

转载 ssh密钥认证原理

转:http://www.tuicool.com/articles/qyiyimSSH之所以能够保证安全,原因在于它采用了公钥加密。整个ssh密码登录过程是这样的:1)用户向远程主机发登录请求:ssh user@远程主机2)远程主机收到用户的登录请求,把自己的公钥发给用户。2)用户使用这个公钥,将登录密码加密后,发送回远程主机。3)远程主机用自己的私

2016-02-05 18:37:24 357

转载 ODS

转:http://wenku.baidu.com/link?url=ce3UtntZAkZhYW_g3jdvaaxWVbDFiHckLlgkFQ8G5VdnZ-chlMM1PAbHGLCM2xQTZLOmAxxPYcUu_UDDQ-D36ziObOLxJ8ZfIDbfJK5PusK什么是 ODSODS是一个面向主题的、集成的、可变的、当前的细节数据集合,用于支持企业对于即时性的、操作性

2016-02-05 15:46:23 305

转载 Maven 手动添加 JAR 包到本地仓库

转:http://www.blogjava.net/fancydeepin/archive/2012/06/12/380605.htmlMaven 确确实实是个好东西,用来管理项目显得很方便,但是如果是通过 Maven 来远程下载 JAR 包的话,我宿舍的带宽是4兆的,4个人共用,有时候用 Maven 来远程下载 JAR 包会显得很慢,一般我发现下载速度不明显的时候,我就 Ct

2016-02-04 15:52:55 185

转载 eclipse插件Maven添加依赖查询无结果的解决方法(Select Dependency doesn't work)

转:http://blog.csdn.net/z69183787/article/details/22290665在eclipse中用过maven的可能都遇到过这种情况,我以前一直在search.maven里面搜索,然后添加pom信息。今天在网上搜索时,找到了一个解决方法,在这里分享一下。第一步,在preferences里面选择maven,选中“Do

2016-02-04 15:21:27 299

转载 Maven 配置

转:http://www.fwqtg.net/maven-%E9%85%8D%E7%BD%AE.html项目管理中用到了Maven,Maven是一款用于管理项目的第三方软件,常用的有加载JAR包、打包等功能。在配置的时候遇到许多问题,以下详细记录。 1、下载安装Maven,地址:http://maven.apache.org/ 2、配置Maven环境,添加M

2016-02-04 14:52:07 490

转载 Oracle的优化器是CBO,所以对象的统计数据对执行计划的生成至关重要

转:http://blog.itpub.net/26892340/viewspace-721935/                           由于Oracle的优化器是CBO,所以对象的统计数据对执行计划的生成至关重要!作用:DBMS_STATS.GATHER_TABLE_STATS统计表,列,索引的统计信息(默认参数下是对表进行直方图信息收集,包含该表

2016-02-01 10:15:28 368

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除