自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

似水流年

  • 博客(10)
  • 资源 (25)
  • 收藏
  • 关注
全部文章> 2016年12月
排序：
按最后发布时间
按访问量
RSS订阅
12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

转载 自定义hive永久函数详细步骤

需求原因：本公司有部门需要，Hive本身提供一个nvl的函数，但是该函数只对null值起作用，现在的需求是不只是对null起作用，对“”这样的空值也要起作用，所以需要自定义一个名叫nvls的函数，并集成到hive当中去。具体步骤：1：先写好Java文件内容如下：package org.apache.Hadoop.hive.ql.udf; impo

2016-12-29 09:10:09 1522

转载 Hive中order by，sort by，distribute by，cluster by的区别

Hive中order by，sort by，distribute by，cluster by的区别标签： Hive排序Order bysort bydistritute bycluster by2015-01-30 13:38 3483人阅读 评论(0) 收藏 举报 分类：Hive（36） 一：order byorder by会对输入

2016-12-22 09:37:29 666

转载 Hive Order By操作

转发：http://blog.csdn.net/lzm1340458776/article/details/43230517。多谢博主！Hive中常见的高级查询包括：group by、Order by、join、distribute by、sort by、cluster by、Union all。今天我们来看看order by操作，Order by表示按照某些字段排序，语法如下：

2016-12-22 09:36:16 2453

原创 hive字段重复保存数据异常，大表与大表关联造成的数据倾斜

create table single_goods_orderbyas select cc.name ,cc.category,cc.price,cc.quantity,ec.name ,cc.modify_times from        (select com.name ,c.corp_id from zhiyoubao.ecological_company com join z

2016-12-20 20:30:19 2447

原创 Hive创建表一般流程（优化）

思路：1.创建原表2.针对不同的业务穿件不同的子表数据存储格式orcfile/parquetmap output 数据压缩 格式snappy创建外表创建分区表

2016-12-18 13:58:34 1305

原创 hive调优笔记

hive在创建表格时候有多种格式类型，默认格式文件格式textFile，常用的textFile、ORC，RCFile、parquet另外还有AVRO、inputformat，数据存储分为：案列存储和按行存储hive表文件压缩格式常用压缩方式ZLIB、SNAPPYsnappy压缩语句：create  table quyu_orc_snappy(id int,phone str

2016-12-17 13:24:13 1233

原创 Linux 快速定位vi 文件字符串

Linux 快速定位vi 文件字符串  vi 文件名：/字符串

2016-12-17 12:04:57 6091

原创 hive标的三种创建方式

表创建方式一：create table if exists 库名.表名(字段名 字段类型 comment '字段注释') comment '表注释' row format  delimited fields terminated by ‘ ’ 每一行中列之间的分隔符 stored as textile 表指定的文件数据格式 企业中常用的ORC、PARQUET，默认textfile类型

2016-12-13 17:12:11 707

转载 hadoop中4中常用的压缩格式的特征的比较

1 gzip压缩优点：压缩率比较高，而且压缩/解压速度也比较快；hadoop本身支持，在应用中处理gzip格式的文件就和直接处理文本一样；有hadoop native库；大部分linux系统都自带gzip命令，使用方便。缺点：不支持split。应用场景：当每个文件压缩之后在130M以内的（1个块大小内），都可以考虑用gzip压缩格式。譬如说一天或者一个小时的日志压缩成一个gzip 文件

2016-12-12 09:22:55 711

转载 Oracle模糊查询时间以及按照时间区间查询

转载：http://blog.csdn.net/bestcxx/article/details/49619553，致谢！在结构化数据库（oracle）中模糊查询有两种1，普通字符串的字段模糊匹配select * from 表名 where 字段名 like '...%';2.时间的字段模糊匹配Oracle模糊查询时间select *

2016-12-06 09:52:54 18887

PPT资源库----模板
PPT资源库----模板

2021-07-14

wireshark-v3.4.2.zip
运行换进：win64 抓包：TCP报文 主要用到的过滤指令： tcp.port == 80 || udp.port == 80 ip.addr == 192.168.1.57 and not tcp.port in {80 25}

2021-04-20

cmake-3.11.4-win64-x64.msi
windows7 版的cmake安装包

2021-04-01

自定义的gsoap头文件station.h
Gsoap的头文件示例

2021-03-27

gsoap_2.8.74.zip
C++ WebService开发辅助工具

2021-03-27

rapidxml.zip
适用于windows环境C++读取xml文件，rapidxml依赖库

2021-03-24

shell脚本案例-俄罗斯方块
该脚本需要在Linux-centos系统中运行，需要安装格式转换工具 dos2unix； 改脚本对于shell初学者来说是不错案例选择，仅用619行脚本代码，写出了有趣的小游戏； 环境：Centos7.x 1.dos2unix安装 yum -y install dos2unix 2.格式转换： dos2unix square.sh 3.执行脚本 sh square.sh 备注：该脚本本人已经验证过。如有疑问请关注微信公众号：“IT菜籽U”搜索"（八）Linux系统-shell基础--脚本执行方式"，有详细的介绍;

2021-03-01

gsoap2.8.11&2.8.1双版本.txt
linux:centos7.x 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤：https://blog.csdn.net/xiaoshunzi111/article/details/113444209

2021-02-05

gsoap2.8.11离线安装包
适用于centos7.X 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装：https://blog.csdn.net/xiaoshunzi111/article/details/113444209 ./configure --prefix=/usr/local/gSOAP make make install 。。。

2021-02-05

yum离线安装包(真实有效)
以用于Centos7.X.； 内核版本：Linux localhost.localdomain 3.10.0-1160.15.2.el7.x86_64 #1 SMP Wed Feb 3 15:06:38 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装步骤： 1.解压缩：unzip yum离线安装包.zip 2. rpm -ivh yum-plugin-fastestmirror-1.1.31-53.el7.noarch.rpm --nodeps 。。。

2021-02-05

PERL/NASM安装包(exe)工具以及openssl-1.1.1-pre5.tar.gz
本资源为编译openssl库时所需要的辅助编译工具，ActivePerl5.24.3_X64，Nasm2.14rc15_X64，本人已经过实际项目验证

2020-11-03

NVIDIA-Linux-x86_64-418.88.run
NVIDIA-Linux-x86_64显卡驱动，适用于RTX2060显卡的设备。只需要将改软件copy到Ubuntu16.04LTS系统下./NVIDIA-Linux-x86_64-418.88.run然后一步步操作即可；安装完毕后可通过nvidia-smi 查看是否安装成功；

2020-09-02

Ubuntu16.04 openssh安装包
Ubuntu16.04 1.安装解压缩 sudo dpkg -i *.deb 2.执行 sudo ps -e |grep ssh 有 sshd 说明ssh服务已经启动。 如果没有 执行 sudo systemctl ssh start 默认端口22若需要修改，执行 sudo gedit /etc/ssh/sshd_config

2020-07-16

全栈性能java网络爬虫从入门到精通实战.pdf
全面总结概括爬虫的基本原理以及应用，特别是对java有一定基础的人更容易上手。由于它在业界得到广泛的认可的是爬虫爱好者必备的武功秘籍。

2020-05-26

Ubuntu操作系统ssh安装包
安装包中包含里ssh所有依赖包，包括openssh-server_7.2p2-4ubuntu2.8_amd64.deb、 openssh-sftp-server_7.2p2-4ubuntu2.8_amd64.deb 和openssh-client_7.2p2-4ubuntu2.8_amd64.deb等在内，使用于Ubuntu16.04LTS环境；一键安装：dgbk -i *.deb

2020-05-25

VS2013-64位
VS2013是C++开发者最常用的编译工具，由于他能够与win系列系统无缝兼容，被C++开发者广泛认可；VS2013工具安全可靠稳定

2020-05-10

SoapUI-x32-5.4.0.exe
SoapUI-x32-5.4.0是32二位的接口调试工具，可用于WebService协议接口对接调试，本人已经验证过，安全，可用。

2020-04-13

qt-opensource-linux-x64-5.7.1.run
本资源适用于Linux之Ubuntu16+ LTS系统环境，Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.7.1.run。郑重声明：本资源已经经过实际项目验证。

2020-03-26

qt-opensource-linux-x64-5.5.1.run
本资源适用于Linux之Ubuntu16+ LTS系统环境，Linux环境下是C++的开发集成工具。qt-opensource-linux-x64-5.5.1.run。郑重声明：本资源已经经过实际项目验证。

2020-03-26

curl-7.49.0.tar.gz
本资源适用于Linux之Ubuntu16+ LTS，curl离线安装包中库文件，可用于基于http数据传输协议C++语言开发应用。亲测，安全可靠。郑重声明：凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

libevent-2.0.21-stable.tar.gz
本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.0.21-stable.tar.gz，适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证，安全可靠。 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

Linux libevent2.1安装包
本安装包基本Linux之Ubuntu16 LTS环境压缩包-libevent-2.1.11-stable.tar.gz，适用于C++ 开发语言值http协议。其中libevent库文件集成了evhttp高并发多延迟框架的库文件。经过实际的项目验证，安全可靠。 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-26

redis505.rar
redis5.05.tar.gz安装包，支持Linux CentOS7安装，安装简单实用，并支持C++程序调用，亲测过可用！ 凡通过本人上传的资源，全部是经过实际项验证过的。

2020-03-04

支持VMWare Esxi6.7虚拟机操作系统，VMware-ovftool-4.3.0.x86_64。用于企业大容量（20G亲测）OVF导出.txt
支持VMWare Esxi6.7虚拟机操作系统，VMware-ovftool-4.3.0.x86_64。用于企业大容量（20G亲测）OVF导出。 凡通过本人上传的资源，全部是经过实际项验证过的。

2019-11-05

GDI开发包，C++绘图工具包
包括：gdiplus.h，gdiplus.lib，动态链接库的.dll文件：gdiplus.dll

2018-09-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除