devalone 的专栏

安装Parameterized Trigger 插件，传递管道中初始BUILD_NUMBER 为例。在初始 job 配置中，点击 “增加构建后操作步骤” --> Trigger parameterized build on other projects，然后点击 Add Parameters，选择 Predefinded parameters，在出现的文本框中填写要传递的参数，格式为 Key=value，一行一对。例：SOURCE_BUILD_NUMBER=${BU...

Windows 安装Jenkins 运行后，默认数据目录，也就是工作区目录，即每次构建的项目数据文件所在目录为： C:\Users\Administrator\AppData\Local\Jenkins\.jenkins随着项目和构建次数增加，这是个空间暴涨的目录，因此有必要将它转移到别的地方。登录 Jenkins 访问 Manage Jenkins ->System Configuration -> Configure System 可以看到页面最上面第一项就是当前主目录位...

1.  安装 MongoDBMongoDB 可以从 https://docs.mongodb.com/master/administration/install-on-linux/ 获得安装信息。● 通过系统自带仓库安装：        CentOS7 通过 yum 包管理器安装：            [devalone@devalone chapter03]$ sudo yum...

下载： https://www.python.org/ftp/python/3.7.0/Python-3.7.0.tgz解包：tar -zxvf Python-3.7.0.tgz进入 Python-3.7.0 目录:    cd Python-3.7.0 1. 安装必要的依赖模块：执行下面的安装指令：[devalone@nutch Python-3.7.0]$ sudo...

MySQL 默认安装将 /var/lib/mysql 作为数据存储目录，可以通过登录 mysql 查看 datadir 变量的值，或者查看 /etc/my.cnf 文件查看：    mysql> SHOW VARIABLES like 'datadir';    +---------------+--------------------+    | Variable_name | V...

继 ： 利用 Topgit 对 Nutch 定制开发进行代码管理（一） 6. 利用 Topgit 对 Nutch 定制开发进行代码管理了解了 Topgit 的原理和使用方法之后，就可以利用 Topgit 对 Nutch 定制开发进行源代码管理了。 6.1 准备版本库 ● 克隆完整的 Nutch 项目代码从 github 上克隆完整的 nutch 项目代码：  ...

对开源项目的定制开发，源代码管理是一个人抓狂的问题。随着主代码版本的推进和定制版本开发越来越远，要使用主代码中新版本的特性，势必要将主代码中的新版本合并到自己的定制版本中。这时可能出现大量的冲突，而且冲突的数量会随着时间的推移和两个分支上代码量的增加而显著增多。解决这些冲突要耗费大量的时间和精力，而且可能会弄得一塌糊涂，令人望而生畏。然而这个过程不会结束，每隔一段时间就会由于主代码版本发布新的版本...

Nutch 1.x 是成熟的产品级 web 爬虫，这个分支通过精细的优化配制，充分利用了具有非常强大的批处理能力的Apache Hadoop数据结构。目前该分支最新版本是 2017 年12月23日发布的 Nutch 1.14，基于 Hadoop 2.7.4 版本开发。Nutch 的另一开发分支为 Nutch 2.x，利用 Apache Gora 作为数据中间层来处理对象的持久化映射。这样用户可...

Apache NutchApache Nutch 起源于 Apache Lucene 项目，是高可扩展性和高可伸缩性的开源 web 爬虫软件项目。项目主页：    http://nutch.apache.org/    出于底层数据存储多样性的设计，目前该项目在两个代码分支上持续开发，分别是：    ● Nutch 1.x ：成熟的产品级 web 爬虫，这个分支通过精细的优化配制，...