- 博客(7)
- 收藏
- 关注
RSS订阅转载 nutch-1.7-学习笔记（2）-org.apache.nutch.crawl.Generator.java-关于Hadoop的partition
学习到nutch的generator 不太懂的地方一遍google一边看书以下内容转载1.解析PartitionMap的结果，会通过partition分发到Reducer上，Reducer做完Reduce操作后，通过OutputFormat，进行输出，下面我们就来分析参与这个过程的类。Mapper的结果，可能送到Combiner做合并，Combiner在系统中并没有自己的基类，而是
2014-07-24 15:03:02
345
转载 nutch-1.7-学习笔记（1）-org.apache.nutch.crawl.Injector.java-TreeMap
">公共类TreeMap的">扩展AbstractMap , Cloneable, Serializable">实现NavigableMap ，可克隆，序列化红黑树的基础NavigableMap实现。该地图是根据其键的自然顺序进行排序，或者通过提供创建映射时，这取决于使用的构造方法一比较。此实现提供保证的log（n ）时间开销为containsKey，get ，put和删
2014-07-24 15:00:33
325
转载 nutch-1.7-学习笔记（1）-org.apache.nutch.crawl.Injector.java-ToolRunner
http://blog.csdn.net/gubaohua/article/details/575488public class SimpleDateFormat extends DateFormatSimpleDateFormat 是一个以国别敏感的方式格式化和分析数据的具体类。 它允许格式化 (date -> text)、语法分析 (text -> date)和标准化。Simple
2014-07-24 14:59:13
262
转载 nutch-1.7-学习笔记（1）-org.apache.nutch.crawl.Injector.java-Configuration
2.2 Hadoop Configuration详解 2.2 Hadoop Configuration详解Hadoop没有使用java.util.Properties管理配置文件，也没有使用Apache Jakarta Commons Configuration管理配置文件，而是使用了一套独有的配置文件管理系统，并提供自己的API，即使用org.apache.
2014-07-24 14:57:01
312
转载 ruby四种闭包
blocks, Procs, Methods, lambdas(也称闭包)是Ruby中最强大的一部分，用过你就会知道，同时也是最容易迷惑的。这可能是因为Ruby处理闭包的方式有点怪。更甚的是，Ruby有4种处理闭包的方式, 第一次用，每种都不太顺手。首先：blocks代码块最常见、最简单、最富争议、最有Ruby风格的方式是blocks。写法如下：array = [1, 2, 3,
2014-07-23 19:49:19
470
原创 Ruby on Rails教程第三章调试
Ruby on Rails Tutorial第三章关于bundle exec respec 版本的debug Ruby on Rails Tutorial 教程中--第三章的第一个测试 最后运行 $ bundle exec rspec spec/requests/static_pages_spec.rb时会因为版本的问题导致一些列的出错与教程中的结果会有不符debug比较繁琐。在
2014-07-13 12:51:45
718
转载 mysql 安装配置
ubuntu 安装配置 MySQL安装 MySQL注意：本次安装是说直接在服务器采用安装包模式1. 在终端提示符后运行下列命令：sudo apt-get install mysql-server mysql-client #中途会让你输入一次root用户密码一旦安装完成，MySQL 服务器应该自动启动。sudo start mysql # 手动的话这样
2014-07-13 12:08:48
261
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人