独自登高楼 望断天涯路

学lucene 学hadoop,Google/baidu搜:“独自登高楼”,进入本博客

排序:
默认
按更新时间
按访问量

hadoop深入研究:(五)——Archives

转载请注明来源地址:http://blog.csdn.net/lastsweetop/article/details/9123155简介我们在hadoop深入研究:(一)——hdfs介绍里已讲过,hdfs并不擅长存储小文件,因为每个文件最少一个block,每个block的元数据都会在namenod...

2013-06-21 17:16:32

阅读数:10905

评论数:6

hadoop深入研究:(四)——distcp

转载请注明出处:http://blog.csdn.net/lastsweetop/article/details/9086695 我们前几篇文章讲的都是单线程的操作,如果要并行拷贝很多文件,hadoop提供了一个小工具distcp,最常见的用法就是在两个hadoop集群间拷贝文件,帮助文档很详尽,...

2013-06-18 17:46:13

阅读数:11954

评论数:2

hadoop深入研究:(三)——hdfs数据流

以下几个小节并补独立,都是相辅相成的,要结合来看,你就会发现很多有趣的地方。转载请注明来源地址:http://blog.csdn.net/lastsweetop/article/details/90656671.拓扑距离这里简单讲下hadoop的网络拓扑距离的计算在大数量的情景中,带宽是稀缺资源,...

2013-06-12 17:38:20

阅读数:12532

评论数:11

hadoop深入研究:(二)——java访问hdfs

转载请注明出处,http://blog.csdn.net/lastsweetop/article/details/9001467所有源码在github上,https://github.com/lastsweetop/styhadoop读数据使用hadoop url读取比较简单的读取hdfs数据的方...

2013-06-03 21:28:09

阅读数:17389

评论数:6

hadoop深入研究:(一)——hdfs介绍

转载请注明出处:http://blog.csdn.net/lastsweetop/article/details/8992505hdfs设计原则1.非常大的文件:这里的非常大是指几百MB,GB,TB.雅虎的hadoop集群已经可以存储PB级别的数据2.流式数据访问:基于一次写,多次读。3.商用硬件...

2013-05-31 15:31:20

阅读数:13592

评论数:6

intellij IDEA下远程调试hadoop

转载请注明出处,来源地址:http://blog.csdn.net/lastsweetop/article/details/89645201.前言Google I/O 2013开发者大会上被android studio震撼,没想到intellij IDEA变的如此强大,我一直是eclipse的忠实...

2013-05-23 12:30:22

阅读数:25741

评论数:17

给你的shell一点颜色看看

转载请注明出处:http://blog.csdn.net/lastsweetop/article/details/8908808         作者:逆火天麟为了避免每个用户都设置,直接修改/etc/profile文件1.Linux下增加一下三行:给你的ls一点颜色alias ls='/bin/...

2013-05-10 04:57:05

阅读数:8415

评论数:4

lynx安装及配置

转载请注明出处   http://blog.csdn.net/lastsweetop/article/details/8908596    作者:lastsweetop1.简介Lynx是个纯文字网页浏览器,在linux下有比较广泛的使用。类似的浏览器有links,w3m。2.下载最新的稳定版本为 ...

2013-05-10 03:02:21

阅读数:13108

评论数:1

jps jstat 命令失效的问题

这里以hadoop的进程为例,大家看做是普通java进程即可1.tmpwatchman tmpwatch可以看到tmpwatch是用来删除一些上时间未使用的临时文件NAME tmpwatch - removes files which haven’t been accessed...

2013-05-03 21:55:21

阅读数:5845

评论数:0

zookeeper研究笔记(二)—— 集群模式搭建

1.简介zookeeper集群安装方式和单机方式很类似,基本的配置在这里就不细说了不是很清楚的可以看zookeeper研究笔记(一)—— single模式搭建主要是配置上的不同2.配置修改conf/zoo.cfg配置文件如下# The number of milliseconds of each ...

2013-04-12 18:36:17

阅读数:3474

评论数:0

zookeeper研究笔记(一)—— single模式搭建

1.安装配置下载地址   http://www.apache.org/dyn/closer.cgi/zookeeper/目前我用的版本是3.4.5   下载解压后 cd 到根目录由于zookeeper是由jar启动,那么所谓的安装就是修改配置文件。cd 到conf目录 appletekiMacBo...

2013-04-12 11:03:10

阅读数:4049

评论数:0

maven项目站点生成

这次以配置简述的形势讲解,以下所有配置只需在父工程配置即可。1.项目信息 scm:git:git@github.com:lastsweetop/account.git scm:git:git@github.com:lastsweetop/account.git https://gi...

2013-04-09 21:29:35

阅读数:7159

评论数:0

maven灵活解决环境问题

maven构建之灵活不必细说,这里举个实际遇到的场景,并给出我如何解决。由于服务器紧张,我的hudson服务器和nexus服务器是部署在同一台的,而这台服务器的外网是映射出去的公网地址。也就是说本机通过外网地址是无法访问本机的。代码是托管在Github的,每次push代码到Github,hudso...

2013-04-02 15:20:30

阅读数:3278

评论数:0

maven+hudson+git持续集成

Maven  hudson git的安装非常简单   这里就不一一介绍了直接从huson系统配置讲起1.huson系统配置1.1JDK设置这里不要点自动安装,直接指定目录1.2Maven设置与第一条一样,直接指定目录2新建任务2.1构建策略旧的构建只保存8份,防止空间不足2.2git设置填好git...

2013-03-25 19:46:02

阅读数:11428

评论数:3

Android 4游戏高级编程(第2版)书评

1.前4章讲解比较详尽,5章之后不适用于android初学者,读者层次定位不明。3星2.外接蓝牙控制器的部分因为没调测设备没仔细看,但图片硬件加速,音视频处理,触摸屏技术,多点触摸技巧方面都讲得比较详尽,可当做教科书来查询,5星3.翻译方面,几乎很完美,找不到太多纰漏  5星4.示例代码较多,每段...

2013-02-25 00:13:57

阅读数:3073

评论数:0

maven仓库简介

1仓库结构图以下篇幅从下往上讲起2本地仓库本地仓库默认是用户目录下的\.m2\repository,用户级的配置文件settings.xml也放在这里。但用户目录下载C盘,C盘一般都只跑个操作系统,个人仓库随着项目的积累会很大,放在C盘比较占用C盘空间,如果需要更改本地仓库的放置目录的话,需要修改...

2013-01-29 22:40:02

阅读数:6865

评论数:0

maven插件解析机制

maven插件的介绍网上也有很多了,这里主要从一个方面来探讨和学习下maven插件的功用。这里通过一条命令的扩展来看maven插件的机制。输入 mvn dependency:treemaven会做些什么呢?第一步,maven会默认以org.apache.maven.plugins作为groupId...

2013-01-22 21:35:53

阅读数:9334

评论数:1

maven依赖总结

1.依赖元素 org.springframework spring-core ${springframework.version} jar compile groupId,必选,实际隶属项目artifactId,必选,其中的模块version必选,...

2013-01-11 15:13:35

阅读数:34378

评论数:4

WhatAnalyzer开源分词项目参与方法(三)

1.回到你自己的仓库界面,例如https://github.com/xxxxxxxxxxx/what-analyzer,复制你的ssh地址 2.在git repo视图里点clone repo图标,然后把刚才的网址复制进去,不用输入其他信息,直接点下一步3.在你刚才引入的库中如图位置,右键impor...

2012-12-05 16:08:51

阅读数:7308

评论数:0

WhatAnalyzer开源分词项目参与方法(二)

1.安装Egit插件,插件地址:http://download.eclipse.org/egit/updates2.配置下git的user setting,最好与git hub上保持一致。3.生成自己的SSH公钥,我之前的文章有讲到:http://blog.csdn.net/lastsweetop...

2012-12-05 15:03:57

阅读数:7174

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭