- 博客(121)
- 资源 (33)
- 收藏
- 关注
RSS订阅原创 CDH5.12.0集群离线安装
CDH是cloudera公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分，分别为Cloudera Manager和CDH软件包。其中Cloudera Manager负责集群的部署与管理。CDH软件包囊括了hadoop生态圈的安装包，例如hdfs、yarn、hive、spark等等。
2018-02-08 11:33:50
12792
原创 系统异常重启检测-mcelog
mcelog 是Linux 系统上用来检查硬件错误，特别是内存和CPU错误的工具。 比如服务器隔一段时间莫名的重启一次，而message和syslog又检测不到有价值的信息。 通常发生MCE报错的原因有如下： 1、内存报错或者ECC问题 2、处理器过热 3、系统总线错误 4、CPU或者硬件缓存错误 一般来说当有错误提示时，需要优先注意内存问题，但由于现在内存控制器是集成在cpu里，所
2018-01-11 09:17:12
14273
3
原创 Linux下查看CPU的温度
在Linux下可以通过lm_sensors来查看CPU的温度(当然你的硬件首先要支持），且使用这个功能要有内核相关模块(比如I2C)的支持 先查看机器上是否安装了lm_sensors： # rpm -q lm_sensors 如果没有安装直接yum安装： # yum install -y lm_sensors 检测传感器： # sh -c "yes|sensors-detect
2018-01-11 09:10:11
52562
1
原创 在CentOS系统中使用yum安装指定版本软件
yum默认都是安装最新版的软件，这样可能会出一些问题，或者我们希望yum安装指定(特定)版本(旧版本)软件包。所以，就顺带分享yum安装指定(特定)版本(旧版本)软件包的方法。
2017-11-29 17:59:02
122008
原创 insserv: Starting xx depends on plymouth and therefore on system facility `$all'
用tar包安装nifi过后，Ubuntu16.04系统无法再用apt安装其他软件，报错：insserv: Starting nifi depends on rc.local and therefore on system facility `$all' which can not be true!
2017-10-26 14:52:23
4705
原创 用python实现多只猴子分桃问题
据说“五猴分桃”问题最先是由大物理学家狄拉克提出来的，这一貌似简单的问题曾困扰住了他，经过努力，他只是获得了相当繁琐的求解方法。为了获得简便的方法，他把问题提供给当时的一些数学家，有意思的是竟然也没有得到满意的结果。在后来者的不断努力下，比较简捷的方法才逐步涌现。
2017-10-20 16:26:59
7004
转载 linux sed命令详解
sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。
2017-10-18 13:12:11
500
转载 Linux服务器性能出问题，排查这些参数指标
一个基于 Linux 操作系统的服务器运行的同时，也会表征出各种各样参数信息。通常来说运维人员、系统管理员会对这些数据会极为敏感，但是这些参数对于开发者来说也十分重要，尤其当你的程序非正常工作的时候，这些蛛丝马迹往往会帮助快速定位跟踪问题。
2017-10-17 10:12:36
1819
转载 史上最详细的vsftpd配置文件讲解
vsftpd作为一个主打安全的FTP服务器，有很多的选项设置。本文将提供完整的vsftpd.conf的中文说明。学习本文的内容将有助于你初步了解vsftpd的配置文件。
2017-09-12 17:19:28
913
原创 搭建vsftpd服务器及简单配置
VSFTP是一个基于GPL发布的类Unix系统上使用的FTP服务器软件，它的全称是Very Secure FTP 从此名称可以看出来，编制者的初衷是代码的安全。
2017-09-12 17:16:55
5698
原创 Firewalld的基本参数和简单使用方法
Firewalld即Dynamic Firewall Manager of Linux systems，Linux系统的动态防火墙管理器。Firewalld是一个服务，用于配置网络连接，从而哪些内外部网络的数据包可以允许穿过网络或阻止穿过网络。
2017-08-02 15:43:10
5572
原创 sqoop java.lang.NullPointerException 和 No columns to generate for ClassWriter
running Sqoop: java.lang.NullPointerExceptionSQL command not properly endedjava.io.IOException: No columns to generate for ClassWriter
2017-07-31 14:56:14
15662
原创 Hadoop Shell 常用命令
FS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。
2017-07-21 11:08:38
5208
原创 ERROR 2003 (HY000): Can't connect to MySQL server on '172.27.9.252' (110 "Connection timed out")
ERROR 2003 (HY000): Can’t connect to MySQL server on ‘172.27.9.252’ (110 “Connection timed out”)
2017-06-16 11:21:24
11643
原创 安装ambariHDP后App TimeLine Server无法正常启动
安装好ambariHDP后，各项服务已经启动，但是App TimeLine Server 无法正常启动。
2017-06-16 10:20:04
7079
1
原创 使用ambari启动Spark Thrift Server时报错：bad substitution
系统信息： centos 6.8final ambari 版本：2.2.1 hdp版本：2.7.1.2.3.2.0-2950 原因： spark on yarn 没有接收到hdp.version 解决方法： 通过ambari管理界面修改MapReduce2 配置: MapReduce2→configs→Advanced→Advanced mapred-site: 修改: mapre
2017-04-10 15:41:04
12829
5
原创 使用 denyhosts 防御服务器被SSH暴力攻击
DenyHosts是Python语言写的一个程序，它可以分析sshd的登录日志文件（/var/log/secure），当发现重复的攻击时就会记录IP到/etc/hosts.deny文件，从而达到自动屏IP阻止SSH密码暴力破解的功能。
2017-04-07 10:35:39
1833
原创 yum安装软件提示：Public key for xxx.rpm is not installed
warning: rpmts_HdrFromFdno: Header V3 RSA/SHA256 Signature, key ID 0608b895: NOKEY Public key for fail2ban-0.9.6-1.el6.1.noarch.rpm is not installed
2017-04-05 17:20:13
27446
1
原创 使用 fail2ban 防御服务器被SSH暴力攻击
fail2ban 是 Linux 上的一个著名的入侵保护的开源框架，它会监控多个系统的日志文件（例如： /var/log/secure ）并根据检测到的任何可疑的行为自动触发不同的防御动作。事实上，fail2ban 在防御对SSH服务器的暴力密码破解上非常有用。
2017-04-05 16:52:22
3062
转载 Python爬虫，用于抓取豆瓣电影Top前100的电影的名称
初步接触python爬虫(其实python也是才起步)，发现一段代码研究了一下，觉得还比较有用处，Mark下。
2017-03-02 15:18:00
8533
1
CM6.1.0和CDH6.1.0资源下载
2021-04-14
CDH6.0.1.txt
2021-04-14
CM5.10.1和CDH5.10.1资源下载
2021-04-14
CM5.16.2和CDH5.16.2资源下载
2021-04-14
CM5.12.1和CDH5.12.1资源下载
2021-04-14
CM6.2.0和CDH6.2.0资源下载
2021-04-14
CM5.15.0和CDH5.15.0资源下载
2021-04-14
CM5.14.2和CDH5.14.2资源下载
2021-04-14
CM6.2.1和CDH6.2.1资源下载
2021-04-14
CM6.3.1和CDH6.3.2资源下载
2021-04-14
FusionInsight LibrA Tools Data Studio
2018-05-23
ruby-2.2.0.tar.gz
2018-04-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人