- 博客(22)
- 收藏
- 关注
转载 重构博客
0x01 说明研究生的生活即将告一段落,一直想着把自己的博客好好的设置一下,以备以后再学习和工作中能够更好的记录和分享自己的心得和成果。以前也尝试过自己搭建一个博客用Github Pages来托管,可是又因为访问速度和图云的问题而被迫放弃了,自己建博客确实更自由而且更加的简洁。不过后来我发现博客园的CSS定制功能也很不错,博客园不但能够提供优秀的访问速度、搜索优化,而且连图云的问题都...
2018-11-05 17:18:00
173
转载 Storm安装部署
0x01 环境说明OS: CentOS-6.5-x86_64JDK: jdk-8u111-linux-x64Hadoop: hadoop-2.6.5Zookeeper: zookeeper-3.4.6Storm: storm-0.9.70x02 安装配置2.1 下载可以在下载列表中选择你想要安装的版本,这里下载的是apache-storm-0.9.7.tar.g...
2017-10-21 12:37:00
138
转载 博客园为文章添加目录
由于显示效果并不理想,现已弃用,新的博客是基于LessIsMore模板定制而来。0x01 效果展示先给大家看一下最终的实现效果,如果你觉的还可以,那么请继续阅读。在此首先要感谢marvin和asxinyu,我这次目录的实现基本是结合了他们二人的成果,在此特别致谢。下面是他们相关博客的链接。【分享】博客美化(6)为你的博文自动添加目录如何给你的为知笔记添加一个漂亮的导航目录...
2017-10-12 16:44:00
246
转载 Apache Kylin安装部署
0x01 Kylin安装环境Kylin依赖于hadoop大数据平台,安装部署之前确认,大数据平台已经安装Hadoop, HBase, Hive。1.1 了解kylin的两种二进制包预打包的二进制安装包:apache-kylin-1.6.0-bin.tar.gz特别二进制包:apache-kylin-1.6.0-HBase1.x-bin.tar.gz说明:特别二进制包是一个在...
2017-09-03 11:28:00
249
转载 GitHub正式启用声明
0x00 说明GitHub账号很早之前就已经注册,几经常识都没有能够好好的将这座宝库应用好,实在是汗颜。今天特地将GitHub重新拾起,以后一定要好好使用这个利器,不要荒废了。0x01 内容GitHub地址:https://github.com/git-ning/更新内容现在里面只有一个byte-of-python项目是自己创建并且上传了相关代码的。0x02 结语平...
2017-09-03 11:00:00
159
转载 CentOS 6.5通过yum安装和配置MySQL
0x00 说明Linux安装MySQL一共有两种方式,一种是下载安装包离线安装,另一种就是通过yum在线安装,这里先介绍在线安装的方式,此方法简单方便,出错最少,但是无法控制安装的MySQL版本,如果需要特定版本的MySQL依然建议自己下载安装包进行安装。0x01 卸载原有mysql查看系统是否已经安装了MySQL# rpm -qa | grep mysql如果有使用命令...
2017-09-03 10:59:00
92
转载 Kettle安装和配置
0x01 Kettle软件概览Spoon:集成开发环境Kitchen:作业的命令行运行程序,可以通过Schell脚本来调用Pan:转换的命令行程序Carte:轻量级的HTTP服务,后台运行,监听HTTP请求来运行一个作业1.1 Spoon主要用于ETL设计阶段。1.2 命令行启动:Kitchen和Pan作业和转换可以在图形界面里执行,但这只是在开发、测试和调试阶段。在...
2017-08-17 22:12:00
398
转载 IntelliJ IDEA Windows下Spark开发环境部署
0x01 环境说明1.1 本地OS: windows 10JDK: jdk1.8.0_121Scala: scala-2.11.11IDE: IntelliJ IDEA ULTIMATE 2017.2.11.2 服务器OS: CentOS_6.5_x64JDK: jdk1.8.111Hadoop: hadoop-2.6.5Spark: spark-1.6.3-b...
2017-08-14 20:34:00
218
转载 Mahout安装部署
0x01 简介Mahout 是一套具有可扩充能力的机器学习类库。它提供机器学习框架的同时,还实现了一些可扩展的机器学习领域经典算法的实现,可以帮助开发人员更加方便快捷地创建智能应用程序。通过和 Apache Hadoop 分布式框架相结合,Mahout 可以有效地使用分布式系统来实现高性能计算。0x02 安装配置Mahout2.1 下载安装下载地址:http://archive....
2017-07-11 21:26:00
364
转载 Python解释器【转载】
原文链接0x01 简介当我们编写Python代码时,我们得到的是一个包含Python代码的以.py为扩展名的文本文件。要运行代码,就需要Python解释器去执行.py文件。0x02 Python解释器类型CPython当我们从Python官方网站下载并安装好Python 3.6后,我们就直接获得了一个官方版本的解释器:CPython。这个解释器是用C语言开发的,所以叫CPyth...
2017-06-30 16:05:00
417
转载 Python第一行代码
0x01 命令行交互Python版本:Python 3.6.1在交互式环境的提示符>>>下,直接输入代码,按回车,就可以立刻得到代码执行结果。现在,试试输入100+200,看看计算结果是不是300:>>> 100 + 200300让Python打印出指定的文字,可以用print()函数,然后把希望打印的文字用单引号或者双引号括起来,...
2017-06-27 15:18:00
917
转载 Hive安装部署
0x01 环境说明OS: CentOS-6.5-x86_64java: jdk1.8.0_111hadoop: hadoop-2.6.5hive: hive-2.1.10x02 安装配置2.1 下载下载地址:http://www.apache.org/dyn/closer.cgi/hive安装版本:apache-hive-2.1.1-bin.tar.gz2.2 安装...
2017-06-25 19:33:00
985
转载 Python 3.6安装教程
0x01 安装Python1.1 说明目前,Python有两个版本,一个是2.x版,一个是3.x版,这两个版本是不兼容的。本教程安装的是python-3.6.1-amd64版本。Python官网:https://www.python.org/Python下载地址:https://www.python.org/downloads/1.2 在Windows上安装Python首先...
2017-06-23 10:35:00
146
转载 Spark安装部署
0x01 软件环境Spark 官方提供了三种集群部署方案: Standalone, Mesos, YARN。其中 Standalone 最为方便,本文主要讲述结合 YARN 的部署方案。软件环境:CentOS_6.5_x64hadoop-2.5.2jdk-1.8.111scala-2.11.11spark-2.1.00x02 安装scala2.1 下载Spark官...
2017-06-12 19:00:00
87
转载 Code:Blocks中文输出乱码解决方法
0x01 问题描述将CB的编码格式设置为UTF-8之后,在CMD窗口输出中文乱码。0x02 解决办法控制台显示的时候缺省的是使用系统默认的字符集,比如windows下用的是GBk,但是默认情况下,编译之后的执行文件时编译成UTF-8的,所以又出现了不统一,乱码由此而生!搞懂了乱码产生的原因,那么不难得出结论,如何修改,你想修改成什么都OK,关键是要统一,并不是像网上一些人说的,...
2017-02-27 20:23:00
713
转载 HBase集群安装部署
0x01 软件环境OS: CentOS-6.5-x86_64JDK: jdk-8u111-linux-x64Hadoop: hadoop-2.6.5Zookeeper: zookeeper-3.4.6Hbase: hbase-0.98.240x02 集群概况IPhostname192.168.1.10master192.168.1.11s...
2017-02-26 22:00:00
88
转载 Hadoop集群时间同步
目录 0x01 ntp安装 1.1 检查时间服务器是否安装 1.2 设置ntp自启动 1.3 手动同步时间 0x02 ntp配置 2.1 修改配置文件ntp.cnf 0x03 在其它节点上与master节...
2017-02-25 23:09:00
123
转载 ZooKeeper安装部署
0x00 环境说明OS: CentOS-6.5-x86_64JDK: jdk-8u111-linux-x64Hadoop: hadoop-2.6.5Zookeeper: zookeeper-3.4.60x01 简介Zookeeper是一个很好的集群管理工具,被大量用于分布式计算。如Hadoop以及Storm系统中。Apache ZooKeeper是一个为分布式应用所设计...
2017-02-19 18:18:00
86
转载 Hadoop2.5.2 安装部署
0x00 平台环境OS: CentOS-6.5-x86_64JDK: jdk-8u111-linux-x64Hadoop: hadoop-2.5.20x01 操作系统基本设置1.1 网络配置修改主机名//查看当前主机名# hostname//修改当前主机名vim /etc/sysconfig/networkNETWORKING 是否利用网络GATEWAY 默认...
2017-02-18 21:54:00
318
转载 Hadoop1.0.3安装部署
0x00 大数据平台相关链接官网:http://hadoop.apache.org/主要参考教程:http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503949.html0x01 hadoop平台环境操作系统:CentOS-6.5-x86_64Java版本:jdk_1.8.0_111Hadoop版本:hadoop-1.0...
2017-02-14 14:15:00
202
转载 水滴石穿
在博客园写的第一段文字,希望以后自己能在这里多留下一些足迹,能够多学到一点知识。力求自己的每一篇文章都能够宁缺毋滥!!!#include<stdio.h>int main(){ printf("Hello cnblog!"); return 0; }2017-02-08; 18:34:54转载于:https:...
2017-02-08 18:38:00
114
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人