浅汐

大数据技术交流与分享，内有大量大数据干货 1群：126181630 2群：663052251 3群：671914634 4群：707635769 5群：545916944

12月 11月 10月 09月

原创 Apache Spark：三种分布式部署方式比较

目前Apache Spark支持三种分布式部署方式，分别是standalone、spark on mesos和 spark on YARN，其中，第一种类似于MapReduce 1.0所采用的模式，内部实现了容错性和资源管理，后两种则是未来发展的趋势，部分容错性和资源管理交由统一的资源管理系统完成：让Spark运行在一个通用的资源管理系统之上，这样可以与其他计算框架，比如MapReduce，公用一

2017-09-30 16:42:23 1201

原创如何编译Hadoop-Eclipse插件

一、相关软件的安装和配置 1.JDK的安装和配置 2.Ecplise的安装和配置 3.Ant的安装和配置 Ant的安装和配置： 1.下载 http://ant.apache.org/bindownload.cgi 2.解压到一个目录 3.环境变量额配置 4.cmd测试一下是否配置正确学习参考地址：http://ke.dajiangtai.com/index

2017-09-30 16:39:55 341

原创 hadoop伪分布式环境的搭建

软件安装的目录：/opt/modules/安装0）说明1.系统：Centos 64位2.关闭防火墙和SELinuxservice iptables statusservice iptables stop永久关闭：chkconfig iptables offvi /etc/sysconfig/selinux设置SELinux-disabled3.设置静态IP地址vi/etc/sysconfig/ne...

2017-09-30 16:36:01 313

原创 CentOS最常用命令及快捷键整理

常用命令: 文件和目录: # cd /home 进入 '/home' 目录 # cd .. 返回上一级目录 # cd ../.. 返回上两级目录 # cd - 返

2017-09-30 16:32:15 175

原创 MySQL备份与恢复

为了保障数据的安全，需要定期对数据进行备份。备份的方式有很多种，效果也不一样。一旦数据库中的数据出现了错误，就需要使用备份好的数据进行还原恢复。从而将损失降到最低。下面我们来了解一下MySQL常见的有三种备份恢复方式： 1、利用Mysqldump+二进制日志实现备份 2、利用LVM快照+二进制日志实现备份 3、使用Xtrabackup备份一：实验环境介绍：系统介绍：CentOS6.4

2017-09-30 16:30:33 204

原创 tar包方式安装Mysql

1.Download and Check MD5 [root@sht-sgmhadoopnn-01 ~]# cd /usr/local [root@sht-sgmhadoopnn-01 local]# wget https://downloads.mariadb.com/archives/mysql-5.6/mysql-5.6.23-linux-glibc2.5-x86_64.tar.gz

2017-09-30 16:28:14 929

原创 CentOS6.x一键部署安装zabbix

简介 zabbix是一个基于WEB界面的提供分布式网络监视功能的企业级的开源解决方案。相对于cacti和nagios而言，zabbix最大的特点是分布式监控，自动发现，自定义监控项目。一、监控系统所具备的四个要素 1、数据采集 zabbix采集数据的手段有SNMP、zabbix的Agent、IPMI agent、web monitoring、database moni

2017-09-30 16:24:03 380

原创 Cobbler全自动批量安装部署Linux系统

安装之前的一点说明 Cobbler服务器系统：CentOS5.10 64位 IP地址：192.168.21.128 需要安装部署的Linux系统： eth0（第一块网卡，用于外网）IP地址段：192.168.21.160-192.168.21.200 eth1（第二块网卡，用于内网）IP地址段：10.0.0.160-10.0.0.200 子网掩码：255.255.255.0 网关：1

2017-09-30 16:21:17 365

原创 Linux下mysql的root密码忘记解决方法（三种）

MySQL密码的恢复方法之一： 1．首先确认服务器出于安全的状态，也就是没有人能够任意地连接MySQL数据库。因为在重新设置MySQL的root密码的期间，MySQL数据库完全出于没有密码保护的状态下，其他的用户也可以任意地登录和修改MySQL的信息。可以采用将MySQL对外的端口封闭，并且停止Apache以及所有的用户进程的方法实现服务器的准安全状态。最安全的状态是到服务器的Con

2017-09-30 16:18:35 244

原创 rpm方式安装Mysql

rpm安装mysql的方式已经自带了mysql用户以及mysql用户组，不需要单独创建了 a. 检查MySQL及相关RPM包，是否安装，如果有安装，则移除（rpm –e 名称） [root@localhost ~]# rpm -qa | grep -i mysql mysql-libs-5.1.66-2.el6_3.x86_64 [root@localhost ~]# yum -

2017-09-30 16:16:23 662

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人