自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

冰河的专栏

微信搜一搜【冰河技术】,关注后回复【PDF】领取冰河原创超硬核PDF电子书,海量面试资料和简历模板。

  • 博客(20)
  • 资源 (133)
  • 论坛 (1)
  • 收藏
  • 关注

原创 Hadoop之——Flume采集Nginx日志到Hive的事务表

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/97975539注意:笔者这里使用的各软件版本为:Hadoop 3.2.0、Flume 1.9.0、Hive 2.3.5、Nginx 1.17.2。简单流程示意图如下:1.Nginx数据格式有关Nginx的安装和配置可以参见博文《Nginx+Tomcat+Memc...

2019-07-31 23:25:02 538

原创 Flume之——配置案例

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/97934236监听telnet 44444端口myagent.sources = r1myagent.sinks = k1myagent.channels = c1# Describe/configure the sourcemyagent.sources.r1.t...

2019-07-31 17:02:54 218

原创 Hadoop之——通过distcp并行复制

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/97814582distcp是一个分布式复制程序,改程序可以从Hadoop文件系统间复制大量数据,也可以将大量的数据复制到Hadoop中distcp的典型应用是在两个HDFS集群间传输数据hadoop distcp hdfs://binghe101/foo hdfs:/...

2019-07-30 20:28:51 324

原创 SVN之——安装SVN服务

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/97171953Windows下安装到链接https://www.visualsvn.com/server/download/ 下载安装包安装即可。Linux下安装1.检查本地是否已经安装了subversionrpm -qa | grep subversion...

2019-07-24 21:43:29 143

原创 Sqoop之——Sqoop连接数据库报错(找不到org/apache/commons/lang/StringUtils)

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/97135322问题:Sqoop连接数据库报错,报错信息为:Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/commons/lang/StringUtils at...

2019-07-24 15:33:49 2236 2

转载 SpringMVC之——Filter需要配置多个url-pattern

最近做项目遇到一个Filter需要配置多个url-pattern,上网查了下资料,经测试,现总结下filter-mapping元素位于web.xml文件中filter元素之后serlvet元素之前。它包含如下三个可能的子元素。filter-name 这个必需的元素必须与用filter元素声明时给予过滤器的名称相匹配。url-pattern 此元素声明一个以斜杠(/)开始的模式,它指定过滤器应用...

2019-07-24 10:12:19 1748

转载 Hive之——防止数据被误删除

1、HDFS层面开启trash功能(fs.trash.interval)被删除的数据在HDFS中的/user/$USER/.Trash目录中,开启这个功能秩序要将配置属性fs.trash.interval得知你设置成为合理的整数,单位是分钟。设置值1440为24小时。如果删除了重要的数据,可以重新建一张表,重新建所需的分区,再从.Trash目录将误删除的文件移动到正确的文件夹目录下。2、创建...

2019-07-21 23:27:06 1108

原创 Hive之——内部表与外部表相互相互转化

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/96768919直接上代码,大家都懂create table tablePartition(s string) partitioned by(pt string);alter table tablePartition add if not exists partition...

2019-07-21 22:09:04 2511

转载 Hive之——Hive-hiveserver2-beeline

在Hadoop集群中任选一台服务器作为Hive的服务器。主要配置Hive,配置好后,启动该服务器的meterstore,并配置<!--配置使远程客户端连接Hive服务器bidev-cdh005--><property> <name>hive.metastore.uris</name> <value>thrift:/...

2019-07-18 19:17:02 452

原创 Hive之——使用hive的beeline连接报错hadoop is not allowed to impersonate hadoop (state=08S01,code=0)解决方案

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/96444889问题:使用hive的beeline连接Hive的远程模式终端时报错,报错信息为:hadoop is not allowed to impersonate hadoop (state=08S01,code=0)原因:hiveserver2增加了权限...

2019-07-18 19:01:29 902

原创 Hadoop之——crontab 定时运行 hadoop 任务(以Hadoop用户身份运行crontab报错)

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/95964457问题:在/etc/crontab 里添加任务,想以hadoop 用户去执行这个脚本。*/5 * * * * hadoop /bin/sh /home/hadoop/runhadoop.sh一直报错,如下:crontab Error creati...

2019-07-15 14:28:42 784 8

转载 CentOS之——Centos 6.8 定时任务Crontab服务

一,crontab服务的简介二、安装cron服务安装cron服务 : --yum install vixie-cron --yum install crontabs把crond服务添加到系统启动项chkconfig crond on启动cron服务service crond start检查cron服务检查crontab工具...

2019-07-15 14:21:46 1624

原创 Python之——pip is configured with locations that require TLS/SSL, however the ssl module in Python

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/95938590问题:安装Python后,使用pip命令安装Python库,报错,如下:$ pip install numpypip is configured with locations that require TLS/SSL, however the ssl ...

2019-07-15 09:30:28 2146

原创 Hadoop之——Permission denied error 13 - Python on Hadoop

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/95932591问题:在Hadoop中运行Python程序,命令行输入如下命令:-bash-4.1$ hadoop jar /usr/local/hadoop-3.2.0/share/hadoop/tools/lib/hadoop-streaming-3.2.0.jar...

2019-07-14 22:14:13 532

原创 Hadoop之——基于3台服务器搭建Hadoop3.x集群(实测完整版)

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/93892479一、 服务器规划二、Hadoop集群环境的准备搭建Hadoop集群环境之前,需要为搭建Hadoop集群环境做一些相关的准备工作,以达到正确安装Hadoop集群的目的。1.添加hadoop用户身份以root身份登录每台虚拟机服务器,在每台服务器...

2019-07-14 08:37:52 3656 1

原创 Hadoop之——实现全排序

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/95603288一般方法:有一种方式可以实现Hadoop的全排序,那就是将多个Map阶段输出的排序中间结果全部输入到一个Reducer类中,这种方式的并行度不高,性能瓶颈也比较明显,无法发挥分布式计算的优势。改进的方法:如果将Map任务的输出结果拼接起来称为一个全局的...

2019-07-12 12:46:50 266 3

原创 Hadoop之——Hadoop3.0前后命令对比

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/95450246启动命令变化对比总结如下: Hadoop 3.0以前版本的命令 Hadoop 3.0之后版本的命令启动进程:hadoop-daemons.sh start 进程名 ——> hdfs --workers -...

2019-07-11 09:52:55 495 1

原创 Hadoop之——setfacl 设置访问控制列表异常

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/94992969默认情况下,在命令行执行Hadoop的设置访问控制列表时,出现异常,具体异常信息如下:setfacl: The ACL operation has been rejected. Support for ACLs has been disabled by s...

2019-07-07 15:11:40 1251 2

原创 Hadoop之——HDFS容错

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/94721335HDFS的容错能力大概可以分为两个方面:文件系统的容错性以及Hadoop本身的容错能力。文件系统的容错性心跳机制,在Namenode和Datanode之间维持心跳检测,当由于网络故障之类的原因,导致Datanode发出的心跳包没有被Namenode正常收到...

2019-07-05 10:58:26 876 1

转载 Google大数据之——三篇著名论文中文版

Google File System中文版Google Bigtable中文版Google MapReduce中文版

2019-07-02 09:01:49 545

Docker+K8S+GitLab/SVN+Jenkins+Harbor持续集成yaml安装文件

Docker+K8S+GitLab/SVN+Jenkins+Harbor持续集成yaml安装文件,为避免读者搭建环境过程中出现各种异常情况,冰河特别整理了这份yaml安装文件,一起加油呀~~

2021-05-12

sharding-jdbc之——分库分表实例完整源码

sharding-jdbc之——分库分表实例完整源码,详情请参见博文:http://blog.csdn.net/l1028386804/article/details/79368021

2018-02-25

MySQL各版本my.cnf配置文件.rar

MySQL 5.6、5.7、8.0版本的my.cnf完整配置文件,亲测可用,配置文件中优化了MySQL中的一些默认配置项,能够有效的提高MySQL数据库的并发处理能力!

2020-01-12

Flume采集Nginx日志到Hive.rar

Flume采集Nginx日志到Hive的事务表时需要导入到Flume下的Jar文件,具体使用方式可参见博文:https://blog.csdn.net/l1028386804/article/details/97975539

2019-08-01

史上最简单Android图片轮播效果实现 源码程序

这个Android示例用最简单的方式实现了图片轮播效果,具体实现细节请阅读博文:http://blog.csdn.net/l1028386804/article/details/48049913

2015-08-28

中国象棋游戏源码.rar

中国象棋游戏Java源代码,完整的源码和注释,可直接运行,可直接用作毕业设计,也可作为学习Java语言的小项目

2021-04-26

hydra 一键安装包

Hydra一键安装包,内含脚本,直接运行脚本就可以安装了,由冰河大神亲自整理

2019-01-07

深入理解高并发编程(冰河原创电子书)

全网首个最全的免费开源的高并发电子书,内容涵盖源码分析、基础案例、实战案例、面试和系统架构,内含秒杀系统和分布式锁的完整架构过程,历时半年精打细磨,三个月下载量突破16万,无论是刚工作的初级程序员,还是工作多年的老司机,都值得一看!

2021-04-28

Easy File Sharing Web Server 7.2

Easy File Sharing Web Server 是一种允许访客容易地经由浏览器上传/下载文件的文件分享系统.

2019-01-15

ActiveMQ实现的消息收发案例

基于ActiveMQ实现简单的消息收发案例 ,详情请参见博文:http://blog.csdn.net/l1028386804/article/details/68969450

2017-04-03

VMWare安装MacOS的unlocker.rar

解锁虚拟机苹果系统选项的批处理工具,解压即可使用,利用此工具就可以在虚拟机上安装macOS系统啦!亲测可用

2019-11-19

nexus-2.11.2-03-bundle.rar

Nexus——搭建Maven私有仓库,参见博文:https://blog.csdn.net/l1028386804/article/details/71037336

2020-06-15

配置Maven私服配置文件setting.xml

配置Maven私服时,需要修改Maven的默认配置文件,此文件已经配置好Maven私服模板,只需要修改IP和对应的端口号即可

2017-11-29

ImmunityDebugger

Immunity Debugger软件专门用于加速漏洞利用程序的开发,辅助漏洞挖掘以及恶意软件分析。它具备一个完整的图形用户界面,同时还配备了迄今为止最为强的Python安全工具库。它巧妙的将动态调试功能与一个强大的静态分析引擎融合于一体,它还附带了一套高度可定制的纯pythont图形算法,可用于帮助我们绘制出直观的函数体控制流以及函数中的各个基本块。

2019-01-15

PCMan-FTP+溢出脚本

PCMan-FTP+溢出脚本,实战渗透PcMan-FTP,由冰河大神亲自整理奉献

2019-01-17

Android实现锁屏、设置密码、恢复出厂设置示例

通过本示例的学习,初学者可轻松掌握如何获取Android系统管理员的权限

2015-07-22

nginx1.9.7+keepalive1.3.2

nginx1.9.7+keepalive1.3.2,可搭建Nginx可高用集群和自动故障转移

2018-04-26

Android模拟实现检测心率变化的应用源代码

这个应用模拟实现了检测心率变化,详细实现原理请到链接http://blog.csdn.net/l1028386804/article/details/47169025查看

2015-07-31

商城数据库SQL脚本文件.rar

垂直分库后的商城数据库SQL脚本文件,下载可以稍微修改下即可用于项目中,同时,也可以拿来学习商城数据库的架构知识

2020-03-01

Memcached 32bit与64bit安装包

Memcached 32bit与64bit安装包,具体安装请参见博文:http://blog.csdn.net/l1028386804/article/details/61417166

2017-03-11

SQL注入实战

安全大神冰河亲自制作SQL注入入门级案例,非常适合初学者研究实践SQL注入,更好的提升自身对SQL 漏洞的注入能力和对数据库安全的认识。

2018-11-20

Spring与ActiveMQ整合完整案例

Spring与ActiveMQ整合完整案例,详情请参见博文:http://blog.csdn.net/l1028386804/article/details/68979725

2017-04-03

Java操作FastDFS示例代码

Java操作FastDFS示例代码,具体详情请参见博文:http://blog.csdn.net/l1028386804/article/details/71842826

2017-05-13

Android自定义下拉菜单示例

本示例完整实现了自定义下拉菜单的功能,初学者可快速掌握自定义下拉菜单的技巧,有关具体的实现细节请参考博文:http://blog.csdn.net/l1028386804/article/details/48101651

2015-08-30

FastDFS6.06完整安装包

FastDFS完整安装包,安装步骤详见:https://binghe.blog.csdn.net/article/details/108803782

2021-04-13

Servlet3.1规范(中文最终版)

Servlet3.1规范中文最终版,可以参考实现Servlet异步请求与回调机制

2019-09-08

linux库:compat-libstdc++-33-3.2.3-61

compat-libstdc++-33-3.2.3-61.i386.rpm及compat-libstdc++-33-3.2.3-61.x86_64.rpm

2020-04-20

Android断点下载示例

本示例实现了基于Android平台的断点下载功能,通过本示例的学习,可以让Android初学者轻松掌握Android断点下载的知识,代码注释详尽,确实是学习Android网络编程与文件下载的好资料

2015-07-15

nginx+tomcat+memcached集群和负载均衡所有资源包

nginx+tomcat+memcached集群和负载均衡所有资源包,具体集群方法请参见博文:http://blog.csdn.net/l1028386804/article/details/48289765

2015-09-09

MySQL8.0.19安装包

冰河亲自整理的MySQL8.0.19安装包,具体安装步骤参见:https://binghe.blog.csdn.net/article/details/109036011

2021-04-10

免杀端口转发lcx

免杀lcx,下载后尽量不要放在桌面或其他敏感的地方解压,以免被360等杀毒软件恶意封杀,程序本身是没毒的,亲测成功。 

2019-11-04

Navicat For MongoDB 15.0.6

Navicat for MongoDB 15是一款功能十分强大的数据库管理功能类的软件,我们这款软件就是可以在软件中实现数据传输的一个操作,也就是通过这款软件到用户们的数据库就可以自己想要传输的数据进行传输,并且还可以将那些新的数据进行传输到MongoDB中来使用

2020-06-13

freefloatftpserver1.0 漏洞重现

freefloatftpserver1.0 漏洞重现 ,freefloatftpserver1.0安装程序,并冰河大神亲自整理

2019-02-14

Nmap+Zenmap+Amap+Zmap神器说明

Nmap+Zenmap+Amap+Zmap神器说明,带你全面了解Nmap+Zenmap+Amap+Zmap神器操作,由安全大神冰河亲自实测验证并整理

2018-11-18

sqoop1.46和1.47

sqoop框架开发工具使用的jar,目前版本有1.4.6和1.4.7两个jar包,启动Sqoop时,抛出异常:Error: Could not find or load main class .usr.local.sqoop-1.4.7.sqoop-1.4.7.jar 则可以下载资源将sqoop-1.4.7.jar放到sqoop的lib目录下重新启动,问题解决

2018-09-12

FastDFS集群的配置文件

FastDFS集群的配置文件,详情请参见博文:http://blog.csdn.net/l1028386804/article/details/72803681

2017-05-29

自定义TextView示例

通过本示例,初学者可以迅速掌握Android中自定义控件的流程和方法

2015-07-27

Linux RTL8111/8168B PCI EXPRESS 网卡驱动

Linux 版本的RTL8111/8168B PCI EXPRESS网卡驱动。。。

2017-10-17

Keepalived + Nginx 实现高可用 Web 负载均衡配置文件

Keepalived + Nginx 实现高可用 Web 负载均衡配置文件,具体详情参见博文:http://blog.csdn.net/l1028386804/article/details/72801492

2017-05-29

SQL漏洞测试平台

SQL漏洞测试平台,安装WAMP,然后项目部署在WAMP_HOME\apache2\htdocs下,即可。可作为SQL注入漏洞的入门平台

2018-11-19

冰 河的留言板

发表于 2020-01-02 最后回复 2020-06-04

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除