2017年03月_大师兄啊

06月 03月

原创第一阶段:Svn版本管理与代码上线架构方案-----nexus安装和部署

将nexus安装包解压 window启动： linux bin ./nexus start 出现如下错误；解决：>vi /etc/profile shift+g 调到最后一行 o（小写）新增一行 export RUN_AS_USER=root . /etc/profile 或者 source /etc/profile 生效启动>./nex

2017-03-21 11:42:52 35414

原创 Hbase入门教程和分布式的安装部署

我们一般什么时候用Hbase呢？ Hadoop关于海量数据的存储有一个组件叫文件系统，当我们需要随机访问文件系统的某一条数据的时候数据是非常慢的，发杂度也比较高，就算是通过madreduce也一样很慢。那么，Hbase和他有什么区别呢？Hbase是一个分布式的数据库（Nosql数据库不支持sql语法，支持的查询功能很简单，但是数据的结构很灵活），数据库用来阻止组织数据的，然后通过某一种格式转换成一

2017-03-20 18:02:51 35366

原创 linux系统下Mysql5.7安装教程

安装mysql (了解Linux（内核）版本：redHad,ubuntu debian),查看命令：lsb_release -a；查看32/64位：uname -a 官方地址：http://dev.mysql.com/doc/refman/5.7/en/linux-installation-rpm.htmltar -xf my*.tar 解压安装包，查看mysql自带组件：rpm -qa|grep

2017-03-10 10:48:35 37036

原创 MySQL命令行导出导入数据（windows和Linux）

MySQL命令行导出数据库： 1，进入MySQL目录下的bin文件夹：cd MySQL中到bin文件夹的目录如我输入的命令行：cd C:\Program Files\MySQL\MySQL Server 4.1\bin (或者直接将windows的环境变量path中添加该目录) 2，导出数据库：mysqldump -u 用户名 -p 数据库名 > 导出的文件名

2017-03-09 10:43:10 37060

spark部署和基础代码的编写

spark部署和基础代码的编写spark部署和基础代码的编写spark部署和基础代码的编写

2018-04-24

jdk-8u45-windows-x64.exe

jdk-8u45-windows-x64.exe......................................

2018-04-04

hadoop2.4.1三台机器分布式安装

集群规划：主机名 IP 安装的软件运行的进程 weekend01 192.168.1.201 jdk、hadoop NameNode、DFSZKFailoverController(zkfc) weekend02 192.168.1.202 jdk、hadoop NameNode、DFSZKFailoverController(zkfc) weekend03 192.168.1.203 jdk、hadoop ResourceManager weekend04 192.168.1.204 jdk、hadoop ResourceManager weekend05 192.168.1.205 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain weekend06 192.168.1.206 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain weekend07 192.168.1.207 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain 说明： 1.在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。Active NameNode对外提供服务，而Standby NameNode则不对外提供服务仅同步active namenode的状态，以便能够在它失败时快速进行切换。 hadoop2.0官方提供了两种HDFS HA的解决方案，一种是NFS，另一种是QJM。这里我们使用简单的QJM。在该方案中，主备NameNode之间通过一组JournalNode同步元数据信息，一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode 这里还配置了一个zookeeper集群，用于ZKFC（DFSZKFailoverController）故障转移，当Active NameNode挂掉了，会自动切换Standby NameNode为standby状态 2.hadoop-2.2.0中依然存在一个问题，就是ResourceManager只有一个，存在单点故障，hadoop-2.4.1解决了这个问题，有两个ResourceManager，一个是Active，一个是Standby，状态由zookeeper进行协调

2018-04-04

flume-push.conf

a1.sources = r1 a1.sinks = k1 a1.channels = c1 a1.sources.r1.type = spooldir a1.sources.r1.spoolDir = /var/log/flume a1.sources.r1.fileHeader = true a1.sinks.k1.type = avro a1.sinks.k1.hostname = 192.168.10.130 a1.sinks.k1.port = 9999 a1.channels.c1.type = memory a1.channels.c1.capacity = 1000 a1.channels.c1.transactionCapacity = 100 a1.sources.r1.channels = c1 a1.sinks.k1.channel=c1

2018-04-04

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

qq_25843323的博客

原创第一阶段:Svn版本管理与代码上线架构方案-----nexus安装和部署

原创 Hbase入门教程和分布式的安装部署

原创 linux系统下Mysql5.7安装教程

原创 MySQL命令行导出导入数据（windows和Linux）

spark部署和基础代码的编写

jdk-8u45-windows-x64.exe

hadoop2.4.1三台机器分布式安装

flume-push.conf

kafka_2.10-0.8.2.1.tgz

openssl-fips-2.0.12.tar.gz--pcre-8.36.tar.gz---zlib-1.2.8.tar.gz

nginx-1.10.3.tar.gz

eclipsejuno_x64_jb51

Visio2003_SP3

空空如也

原创 第一阶段:Svn版本管理与代码上线架构方案-----nexus安装和部署

原创 Hbase入门教程和分布式的安装部署

原创 linux系统下Mysql5.7安装教程

原创 MySQL命令行导出导入数据（windows和Linux）

spark部署和基础代码的编写

jdk-8u45-windows-x64.exe

hadoop2.4.1三台机器分布式安装

flume-push.conf

kafka_2.10-0.8.2.1.tgz

openssl-fips-2.0.12.tar.gz--pcre-8.36.tar.gz---zlib-1.2.8.tar.gz

nginx-1.10.3.tar.gz

eclipsejuno_x64_jb51

Visio2003_SP3

空空如也

原创第一阶段:Svn版本管理与代码上线架构方案-----nexus安装和部署