自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

似水流年

  • 博客(10)
  • 资源 (25)
  • 收藏
  • 关注
全部文章> 2017年03月
排序：
按最后发布时间
按访问量
RSS订阅
12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

转载 HDFS负载均衡问题

转载：http://www.thebigdata.cn/Hadoop/28910.htmlhadoop HDFS 负载均衡问题，在实际的数据开发中，由于受到cup、磁盘空间、内存容量甚至是网络开销限制。会出现集群的负载均衡问题负载均衡包括两方面：1.集群个主机之间的数据负载均衡2.某台主机内部的数据负载均衡问题Hadoop 分布式文件系统（Hadoop

2017-03-31 17:00:37 4483

原创 hive会产生大量的tmp文件

在实际的hive数据开发中，目录/tmp目录下产生大量文件数据，占用大量的磁盘空间。下面是cloudera官网给出解释：http://community.cloudera.com/t5/Storage-Random-Access-HDFS/Why-does-tmp-hive-admin-take-up-so-much-space/m-p/38863#

2017-03-31 15:54:14 6108

转载 hive group by distinct区别以及性能比较

Hive去重统计相信使用Hive的人平时会经常用到去重统计之类的吧，但是好像平时很少关注这个去重的性能问题，但是当一个表的数据量非常大的时候，会发现一个简单的count(distinct order_no)这种语句跑的特别慢，和直接运行count(order_no)的时间差了很多，于是研究了一下。先说结论:能使用group by代替distinc就不要使用distinct，例子：实际论

2017-03-30 10:57:16 29433 18

转载 nvl,coalesce,decode,if用法及其区别

SQL中 nvl（）、coalesce（）、decode（）这三个函数，如果只是判断非空的话，哪一个效率相比较高？nvl(bonus,0) 意思是 如果 bonus is null ， 那么返回 0， 否则返回 bonuscoalesce(bonus,0,1) 意思是 返回 参数列表中， 第一个非 空的数据。也就是相当于， 如果 bonus is null ， 那么返回 0， 否则返回

2017-03-30 08:42:32 3756

转载 SQL的各种连接（cross join、inner join、full join)的用法理解

SQL中的连接可以分为内连接，外连接，以及交叉连接 。1. 交叉连接CROSS JOIN如果不带WHERE条件子句，它将会返回被连接的两个表的笛卡尔积，返回结果的行数等于两个表行数的乘积；举例,下列A、B、C 执行结果相同，但是效率不一样：A:SELECT * FROM table1 CROSS JOIN table2B:SELECT * FROM tabl

2017-03-30 08:40:32 45792 5

原创 Hive实现自增列的两种方法

多维数据仓库中的维度表和事实表一般都需要有一个代理键，作为这些表的主键，代理键一般由单列的自增数字序列构成。Hive没有关系数据库中的自增列，但它也有一些对自增序列的支持，通常有两种方法生成代理键：使用row_number()窗口函数或者使用一个名为UDFRowSequence的用户自定义函数（UDF）。  假设有维度表tbl_dim和过渡表tbl_stg，现在要将tbl_stg的数据装载到t

2017-03-29 17:55:57 17782

原创 牛人的技术博客：http://shiyanjun.cn/archives/1497.html

http://shiyanjun.cn/archives/1497.html

2017-03-22 14:18:29 1038

原创 PLSQL显示乱码-无法进行中文条件查询解决

PL/SQL Developer 使用中文条件查询时无数据，这是由于字符集的不一致导致的。1、执行以下sql命令：select userenv('language') from dual;显示：AMERICAN_AMERICA.AL32UTF82、 设置本地环境变量。（PLSQL优先从环境变量中获取属性）    右击 我的电脑 -> 属性 -> 告警系统

2017-03-17 15:47:50 4201

转载 Hive优化—-控制hive任务的reduce数

转载：http://www.superwu.cn/?p=21231. Hive自己如何确定reduce数：reduce个数的设定极大影响任务执行效率，不指定reduce个数的情况下，Hive会猜测确定一个reduce个数，基于以下两个设定：hive.exec.reducers.bytes.per.reducer（每个reduce任务处理的数据量，默认为1000^3=1G）h

2017-03-14 09:30:10 4096

原创 查看集群文件使用状态hdfs dfs -du -h /hbase --max-depth=1

[root@]# hdfs dfs -du -h /hbase --max-depth=10        0       /hbase/.tmp755.6 M  5.2 G   /hbase/WALs22.4 G   67.3 G  /hbase/archive0        0       /hbase/corrupt32.6 G   99.2 G  /hbase/dat

2017-03-09 18:20:10 4501

PPT资源库----模板
PPT资源库----模板

2021-07-14

wireshark-v3.4.2.zip
运行换进：win64 抓包：TCP报文 主要用到的过滤指令： tcp.port == 80 || udp.port == 80 ip.addr == 192.168.1.57 and not tcp.port in {80 25}

2021-04-20

cmake-3.11.4-win64-x64.msi
windows7 版的cmake安装包

2021-04-01

自定义的gsoap头文件station.h
Gsoap的头文件示例

2021-03-27

gsoap_2.8.74.zip
C++ WebService开发辅助工具

2021-03-27

rapidxml.zip
适用于windows环境C++读取xml文件，rapidxml依赖库

2021-03-24

shell脚本案例-俄罗斯方块
该脚本需要在Linux-centos系统中运行，需要安装格式转换工具 dos2unix； 改脚本对于shell初学者来说是不错案例选择，仅用619行脚本代码，写出了有趣的小游戏； 环境：Centos7.x 1.dos2unix安装 yum -y install dos2unix 2.格式转换： dos2unix square.sh 3.执行脚本 sh square.sh 备注：该脚本本人已经验证过。如有疑问请关注微信公众号：“IT菜籽U”搜索"（八）Linux系统-shell基础--脚本执行方式"，有详细的介绍;

2021-03-01

gsoap2.8.11&2.8.1双版本.txt
linux:centos7.x 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤：https://blog.csdn.net/xiaoshunzi111/article/details/113444209

2021-02-05

gsoap2.8.11离线安装包
适用于centos7.X 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装：https://blog.csdn.net/xiaoshunzi111/article/details/113444209 ./configure --prefix=/usr/local/gSOAP make make install 。。。

2021-02-05

yum离线安装包(真实有效)
以用于Centos7.X.； 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤： 1.解压缩：unzip yum离线安装包.zip 2. rpm -ivh yum-plugin-fastestmirror-1.1.31-53.el7.noarch.rpm --nodeps 。。。

2021-02-05

PERL/NASM安装包(exe)工具以及openssl-1.1.1-pre5.tar.gz
本资源为编译openssl库时所需要的辅助编译工具，ActivePerl5.24.3_X64，Nasm2.14rc15_X64，本人已经过实际项目验证

2020-11-03

NVIDIA-Linux-x86_64-418.88.run
NVIDIA-Linux-x86_64显卡驱动，适用于RTX2060显卡的设备。只需要将改软件copy到Ubuntu16.04LTS系统下./NVIDIA-Linux-x86_64-418.88.run然后一步步操作即可；安装完毕后可通过nvidia-smi 查看是否安装成功；

2020-09-02

Ubuntu16.04 openssh安装包
Ubuntu16.04 1.安装解压缩 sudo dpkg -i *.deb 2.执行 sudo ps -e |grep ssh 有 sshd 说明ssh服务已经启动。 如果没有 执行 sudo systemctl ssh start 默认端口22若需要修改，执行 sudo gedit /etc/ssh/sshd_config

2020-07-16

全栈性能java网络爬虫从入门到精通实战.pdf
全面总结概括爬虫的基本原理以及应用，特别是对java有一定基础的人更容易上手。由于它在业界得到广泛的认可的是爬虫爱好者必备的武功秘籍。

2020-05-26

Ubuntu操作系统ssh安装包
安装包中包含里ssh所有依赖包，包括openssh-server_7.2p2-4ubuntu2.8_amd64.deb、 openssh-sftp-server_7.2p2-4ubuntu2.8_amd64.deb 和openssh-client_7.2p2-4ubuntu2.8_amd64.deb等在内，使用于Ubuntu16.04LTS环境；一键安装：dgbk -i *.deb

2020-05-25

VS2013-64位
VS2013是C++开发者最常用的编译工具，由于他能够与win系列系统无缝兼容，被C++开发者广泛认可；VS2013工具安全可靠稳定

2020-05-10

SoapUI-x32-5.4.0.exe
SoapUI-x32-5.4.0是32二位的接口调试工具，可用于WebService协议接口对接调试，本人已经验证过，安全，可用。

2020-04-13

qt-opensource-linux-x64-5.7.1.run
本资源适用于Linux之Ubuntu16+ LTS系统环境，Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.7.1.run。郑重声明：本资源已经经过实际项目验证。

2020-03-26

qt-opensource-linux-x64-5.5.1.run
本资源适用于Linux之Ubuntu16+ LTS系统环境，Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.5.1.run。郑重声明：本资源已经经过实际项目验证。

2020-03-26

curl-7.49.0.tar.gz
本资源适用于Linux之Ubuntu16+ LTS，curl离线安装包中库文件，可用于基于http数据传输协议C++语言开发应用。亲测，安全可靠。郑重声明：凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

libevent-2.0.21-stable.tar.gz
本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.0.21-stable.tar.gz，适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证，安全可靠。 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

Linux libevent2.1安装包
本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.1.11-stable.tar.gz，适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证，安全可靠。 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

redis505.rar
redis5.05.tar.gz安装包，支持Linux CentOS7安装，安装简单实用，并支持C++程序调用，亲测过可用！ 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-04

支持VMWare Esxi6.7虚拟机操作系统，VMware-ovftool-4.3.0.x86_64。用于企业大容量（20G亲测）OVF导出.txt
支持VMWare Esxi6.7虚拟机操作系统，VMware-ovftool-4.3.0.x86_64。用于企业大容量（20G亲测）OVF导出。 凡通过本人上传的资源，全部是经过实际项验证过的。

2019-11-05

GDI开发包，C++绘图工具包
包括：gdiplus.h，gdiplus.lib，动态链接库的.dll文件：gdiplus.dll

2018-09-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除