Maxwell_

年年岁岁花相似,岁岁年年人不同
私信 关注
yeweiouyang
码龄10年
  • 817,764
    被访问量
  • 156
    原创文章
  • 8,223
    作者排名
  • 187
    粉丝数量
  • 毕业院校 中南民族大学
  • 目前就职 1号店
  • 于 2011-09-09 加入CSDN
获得成就
  • 博客专家认证
  • 获得85次点赞
  • 内容获得57次评论
  • 获得200次收藏
荣誉勋章
兴趣领域
  • #后端
    #Java
TA的专栏
  • LeetCode
    33篇
  • C++逆向分析
    7篇
  • Apache Hive
    19篇
  • Linux
    8篇
  • Java
  • [Linux]
    10篇
  • [LeetCode]
    32篇
  • [大数据]MapReduce
    2篇
  • [大数据]HDFS
    2篇
  • [大数据]HBase
    1篇
  • [大数据]Hive
    21篇
  • [大数据]Sqoop
    3篇
  • [大数据]Storm
    1篇
  • [编程语言]Java
    8篇
  • [编程语言]C/C++
    18篇
  • [编程语言]C++逆向分析
    6篇
  • [ACM ICPC]
    24篇
  • [问题记录]
    18篇
  • [其它]
    22篇
第三方账号
Pulpit rock Pulpit rock Pulpit rock
  • 最近
  • 文章
  • 资源
  • 问答
  • 课程
  • 帖子
  • 收藏
  • 关注/订阅

阿里云智能事业群招人!

阿里云智能事业群招人!有意愿的朋友,请简历发送给我:yewei.oyyw@alibaba-inc.com※ 团队介绍阿里云智能数据库事业部 OLAP 平台团队,专注于提供全球领先的全栈式大规模 OLAP 数据库产品,包括分析型数据库 AnalyticDB、数据湖分析 Data Lake Analytics、时序数据库、硬件加速等,产品服务于阿里巴巴公有云、专有云的众多客户关键业务,同时服务于阿里巴巴集团内部众多数据分析类业务。岗位1:阿里云智能事业群-数据库平台技术研发专家-杭州/北京/深圳【期望
原创
2093阅读
0评论
0点赞
发布博客于 8 月前

[基础工具]离线数据立方体构建工具

在数据的实际使用过程中,我们经常需要进行多维度的组合汇总,做一个数据立方体。常见的方法是在各个维度下进行group by,建立多个任务,这样不利于代码查看和维护,同时也浪费开发时间
原创
1847阅读
0评论
1点赞
发布博客于 4 年前

[问题记录]解决RabbitMQ消息丢失与重复消费问题

本文仅记录排查和问题定位、解决的过程
原创
50899阅读
3评论
7点赞
发布博客于 4 年前

[运维]ELK实现日志监控告警

ELK(Elasticsearch+LogStash+Kibana),最近使用ELK处理了一些平台日志,下面以「mysql连接数监控」记录部署流程
原创
45021阅读
3评论
8点赞
发布博客于 4 年前

[问题记录]Unsupported major.minor version 52.0

背景jdk1.7升级到jdk1.8,运行时报错。 报错原因是高版本的jdk运行在低版本的jre上原因一:本地Java环境尚未更新使用命令java -version检查本地java环境,保持一致 如果是windows下,配置了JAVA环境后需要重启电脑,才能生效原因二:检查IDE配置以Intellij IDEA为例Go to Maven Settings -> Maven -> Impo
原创
1066阅读
0评论
2点赞
发布博客于 5 年前

[问题记录]MAVEN打依赖jar包

记录maven打依赖jar包
原创
755阅读
0评论
1点赞
发布博客于 5 年前

[Java]JGit用法总结

JGit常用用法总结
原创
11034阅读
0评论
4点赞
发布博客于 5 年前

[问题记录]log4j使用记录

步骤一:maven配置依赖https://mvnrepository.com/artifact/log4j/log4j/1.2.16步骤二:IDEA加入log4j.properties文件File->Project Structure 将log4j.properties文件放入resources文件夹中 步骤三:配置log4j.properties文件输出到控制台输出到../logs/tas
原创
508阅读
0评论
1点赞
发布博客于 5 年前

[问题记录]hdfs删除文件提示rmr: Failed to move to trash

问题/现象使用hadoop fs -rmr xxx删除hdfs上的文件失败$ hadoop fs -rmr /app/lbs/nuomi-da-stat/stat_platform_auto/1004/dt=20161118/000000_0rmr: Failed to move to trash: /app/lbs/nuomi-da-stat/stat_platform_auto/1004/dt=
原创
6213阅读
0评论
1点赞
发布博客于 5 年前

[Mysql]Mysql常用命令

1. 常规操作进入数据库use market;改变字符编码charset utf8;导出数据mysql \-h 10.0.2.54 \-P 3307 \-u marketuser \-e "use market; charset utf8; select * from RPT_ONLINE_KPI;" \-p | sed 's/\t/,/g' > ./rpt_online_kpi_2015
原创
3701阅读
0评论
1点赞
发布博客于 5 年前

[Storm]Storm流控制

一个流分流到多个流在storm中,将一个流分流到多个不同的流中。 参考代码: main部分// tracker解析器topologyBuilder.setBolt( "TrackerBolt", new TrackerBolt(), 2).shuffleGrouping("KafkaFilterBolt");// 点击数统计topolog
原创
3810阅读
0评论
1点赞
发布博客于 5 年前

[Linux]linux killtask命令

给定任务名称,杀死所有该任务的linux进程
原创
6186阅读
0评论
1点赞
发布博客于 5 年前

[Hive]Hive指定查询输出分隔符

业务场景做数据分析的时候,经常会用到hive -e "sql" > xxx.txt或者最原始的hive命令行来获得查询结果,然后再将查询结果放到Excel等工具中,但是如果查询的字段太多,这时候将查询结果放到Excel会经常会碰到错位问题,很是头疼.解决方案一:借助linux管道替换输出分隔符样例如下:# 方法一:sedhive -e "select * from pms.pms_algorith
原创
29659阅读
0评论
5点赞
发布博客于 5 年前

[Hive]Hive执行脚本的方式以及转义字符

1. hive脚本的执行方式hive脚本的执行方式大致有三种: 1. hive控制台执行; 2. hive -e "SQL"执行; 3. hive -f SQL文件执行;参考hive的用法usage: hive -d,--define <key=value> Variable subsitution to apply to hive
原创
31353阅读
3评论
9点赞
发布博客于 5 年前

[Hive]Hive静态分区与动态分区

1. 静态分区若分区的值是确定的,那么称为静态分区。下面举例一个业务场景: 统计程序每天都需要统计1号店中由精准化推荐带来的销售额,日期是确定的,现在需要将每天统计好的销售额数据插入到指定的日期分区中1.1. 实现方式参见如下的脚本:hive -e "--设置Hive Job任务队列set mapred.job.queue.name=pms;--创建精准化销售额数据汇总表create t
原创
6825阅读
0评论
2点赞
发布博客于 5 年前

[Linux]Linux重定向

>outfile 2>&1 与 2>&1 >outfile 的区别关于重定向,有一个疑问就是为什么这两个Bash Shell写法,得到的结果会不一样:$ cat oyyw >outfile 2>&1$ cat outfile cat: oyyw: 没有那个文件或目录和$ cat oyyw 2>&1 >outfilecat: oyyw: 没有那个文件或目录解惑搜集了一部分资料以后,解答如下:顺序
原创
3786阅读
0评论
1点赞
发布博客于 5 年前

[Linux]Linux Shell脚本参数传递

1. shell脚本的默认变量下面用一个shell脚本来描述shell脚本的默认变量[ouyangyewei@localhost workspace]$ cat learn_argument.sh #! /bin/bash## check arguments##-----------------if [ $# -lt 3 ]then echo "Error! Not Enough A
原创
5997阅读
0评论
1点赞
发布博客于 5 年前

[Linux]Linux Shell多进程并发以及并发数控制

Unix是一个多任务系统,允许多用户同时运行多个程序。shell的元字符&提供了在后台运行不需要键盘输入的程序的方法。输入命令后,其后紧跟&字符,该命令就会被送往到linux后台执行,而终端又可以继续输入下一个命令了。
原创
26340阅读
5评论
11点赞
发布博客于 5 年前

[Linux]结合awk列举大于指定容量大小所有文件目录

结合awk列举大于指定容量大小所有文件目录
原创
4065阅读
0评论
2点赞
发布博客于 6 年前

[Linux]结合awk删除hdfs指定日期前的数据

结合awk删除hdfs指定日期前的数据
原创
5434阅读
0评论
1点赞
发布博客于 6 年前

[Java]Java计算器

用Java实现一个标准版计算器
原创
1700阅读
2评论
2点赞
发布博客于 6 年前

[Sqoop]利用sqoop对mysql执行DML操作

利用sqoop对mysql进行DML操作
原创
2716阅读
0评论
1点赞
发布博客于 6 年前

[Sqoop]将Hive数据表导出到Mysql

利用sqoop将Hive数据表导出到Mysql
原创
6329阅读
1评论
2点赞
发布博客于 6 年前

[Sqoop]将Mysql数据表导入到Hive

利用sqoop将Mysql数据表导入到Hive
原创
1681阅读
0评论
2点赞
发布博客于 6 年前

[Hive]Hive将一行记录拆分成多行

借助lateral view 和 explode,将一行记录拆分成多行
原创
28987阅读
0评论
2点赞
发布博客于 6 年前

[Hive]Hive多分区操作

讲述Hive多分区表的创建、导入数据
原创
13703阅读
0评论
2点赞
发布博客于 6 年前

[Hive]HBaseIntegration:通过Hive读写HBase

HBaseIntegration:通过Hive读写HBase
原创
4216阅读
2评论
1点赞
发布博客于 6 年前

[MapReduce]MapReduce调试:在DataNode节点上查看打印信息

在DataNode节点上查看打印信息
原创
1739阅读
1评论
1点赞
发布博客于 6 年前

[Hive]Hive调优:让任务并行执行

Hive调优,让任务并行执行,描述优化流程、结论
原创
23527阅读
4评论
8点赞
发布博客于 6 年前

[Linux]shell多进程并发—详细版

linux多进程并发,详细讲解优化shell执行顺序的方案,结论
原创
4104阅读
1评论
1点赞
发布博客于 6 年前

[Hive]关于Hive的启动问题

业务背景用户轨迹工程脚本最近经常报错,报错如下:SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]FAILED: Error in metadata: MetaException(message:java.lang.RuntimeException: commitTransaction was called bu
原创
4958阅读
0评论
2点赞
发布博客于 6 年前

[Hive]Hive数据倾斜(大表join大表)

Hive数据倾斜(大表join大表)的现象、思路以及解决方案
原创
18332阅读
4评论
9点赞
发布博客于 6 年前

[Linux]Shell多进程并发—简易版

Shell多进程并发
原创
1060阅读
0评论
1点赞
发布博客于 6 年前

[Hive]Hive分区表新增字段

[Hive]Hive分区表新增字段
原创
47173阅读
0评论
2点赞
发布博客于 6 年前

[Hive]简单查询不启用Mapreduce job而启用Fetch task

转载自:http://blog.csdn.net/wypblog/article/details/17410315如果你想查询某个表的某一列,Hive默认是会启用MapReduce Job来完成这个任务,如下:hive> SELECT id, money FROM m limit 10;Total MapReduce jobs = 1Launching Job 1 out of
转载
3365阅读
0评论
0点赞
发布博客于 6 年前

[Hive]MapReduce将数据写入Hive分区表

[Hive]MapReduce将数据写入Hive分区表
原创
7344阅读
0评论
1点赞
发布博客于 6 年前

[Git]Git未初始化导致的错误提示

[Git]Git未初始化导致的错误提示
原创
16536阅读
3评论
6点赞
发布博客于 6 年前

[Hive]求两个集合的减集

HIVE求两个集合的减集
原创
6356阅读
0评论
1点赞
发布博客于 6 年前

SQL数据表两个字段关联同一张数据表

SQL数据表两个字段关联同一张数据表
原创
4524阅读
1评论
3点赞
发布博客于 6 年前

[Hive]使用HDFS目录数据创建Hive表分区

Hive使用HDFS目录数据创建Hive表分区
原创
7998阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Add Binary

[LeetCode]Add Binary
原创
916阅读
0评论
1点赞
发布博客于 7 年前

MapReduce-MulitipleOutputs实现自定义输出到多个目录

MapReduce-MulitipleOutputs实现自定义输出到多个目录
原创
2295阅读
0评论
1点赞
发布博客于 7 年前

PHP中Notice: Undefined index: sku in 问题解决方案

PHP中Notice: Undefined index: sku in 问题解决方案
原创
2460阅读
0评论
1点赞
发布博客于 7 年前

[Hive]用left semi join替代in子查询的方式

hive用left semi join替代in子查询的方式
原创
9419阅读
0评论
2点赞
发布博客于 7 年前

[Hive]用concat_w实现将多行记录合并成一行

hive concat_w实现将多行记录合并成一行
原创
36419阅读
2评论
8点赞
发布博客于 7 年前

[LeetCode]Minimum Depth of Binary Tree

Minimum Depth of Binary Tree
原创
1080阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Path Sum

Path Sum
原创
974阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Pascal's Triangle II

Pascal's Triangle II
原创
966阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Pascal's Triangle

Pascal's Triangle
原创
870阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Valid Palindrome

Valid Palindrome
原创
784阅读
0评论
1点赞
发布博客于 7 年前

hive建立外表

hive建立外表
原创
6945阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]LRU Cache

[LeetCode]LRU Cache
原创
1327阅读
0评论
2点赞
发布博客于 7 年前

教你如何在只供试听的网站上下载音乐

教你如何在只供试听的网站上下载音乐
原创
1554阅读
0评论
2点赞
发布博客于 7 年前

Job Submission failed with exception 'java.io.IOException

Job Submission failed with exception 'java.io.IOException(Failed to run job : org.apache.hadoop.security.AccessControlException: User pms cannot submit applications to queue root.default)'FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.
原创
10902阅读
0评论
5点赞
发布博客于 7 年前

Error: java.lang.UnsupportedOperationException: Not implemented by the HftpFileSystem FileSystem imp

Error: java.lang.UnsupportedOperationException: Not implemented by the HftpFileSystem FileSystem implementation
原创
5260阅读
0评论
2点赞
发布博客于 7 年前

Maven解决jar包冲突

Maven解决jar包冲突
原创
5263阅读
0评论
2点赞
发布博客于 7 年前

shell判断hdfs文件目录是否存在

shell判断hdfs文件目录是否存在
原创
31807阅读
0评论
3点赞
发布博客于 7 年前

Shell脚本执行hive语句 | hive以日期建立分区表 | linux schedule程序 | sed替换文件字符串 | shell判断hdfs文件目录是否存在

Shell脚本执行hive语句 | hive以日期建立分区表 | linux schedule程序 | sed替换文件字符串 | shell判断hdfs文件目录是否存在
原创
7934阅读
1评论
5点赞
发布博客于 7 年前

Java API 读取HDFS的单文件

Java API 读取HDFS的单文件
原创
1411阅读
0评论
3点赞
发布博客于 7 年前

Java API 读取HDFS目录下的所有文件

Java API 读取HDFS目录下的所有文件
原创
13224阅读
1评论
4点赞
发布博客于 7 年前

hive按当天日期建立分区表 | 动态往日期分区插入数据

hive按当天日期建立分区表 | 动态往日期分区插入数据
原创
17676阅读
3评论
11点赞
发布博客于 7 年前

[LeetCode]Search a 2D Matrix

[LeetCode]Search a 2D Matrix
原创
925阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Binary Tree Level Order Traversal II

[LeetCode]Binary Tree Level Order Traversal II
原创
964阅读
0评论
1点赞
发布博客于 7 年前

Java 将自定义的对象作为HashMap的key

Java 将自定义的对象作为HashMap的key
原创
3245阅读
0评论
2点赞
发布博客于 7 年前

Java 读写TXT文件

Java 读写TXT文件
原创
1620阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Generate Parentheses

[LeetCode]Generate Parentheses
原创
779阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]N-Queens II

[LeetCode]N-Queens II
原创
826阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Gray Code

[LeetCode]Gray Code
原创
873阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Integer to Roman

[LeetCode]Integer to Roman
原创
819阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Populating Next Right Pointers in Each Node

[LeetCode]Populating Next Right Pointers in Each Node
原创
823阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Best Time to Buy and Sell Stock II

[LeetCode]Best Time to Buy and Sell Stock II
原创
1225阅读
0评论
2点赞
发布博客于 7 年前

Java创建二叉树

Java创建二叉树
原创
1058阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Binary Tree Preorder Traversal

[LeetCode]Binary Tree Preorder Traversal
原创
821阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Binary Tree Inorder Traversal

[LeetCode]Binary Tree Inorder Traversal
原创
897阅读
0评论
4点赞
发布博客于 7 年前

[LeetCode]Reverse Words in a String

[LeetCode]Reverse Words in a String
原创
812阅读
0评论
3点赞
发布博客于 7 年前

Java Map

Java for循环遍历MapMap categoryLevelMap = new Category().GetCategoryLevelMap(categoryFile, conf); Scan scan = new Scan(); for (Map.Entry entry : categoryLevelMap.entrySet()) { Long categoryId = e
原创
554阅读
0评论
0点赞
发布博客于 7 年前

[LeetCode]Merge Sorted Array

[LeetCode]Merge Sorted Array
原创
819阅读
0评论
3点赞
发布博客于 7 年前

[LeetCode]Remove Duplicates from Sorted Array

[LeetCode]Remove Duplicates from Sorted Array
原创
721阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Swap Nodes in Pairs

[LeetCode]Swap Nodes in Pairs
原创
798阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Balanced Binary Tree

[LeetCode]Balanced Binary Tree
原创
729阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Reverse Integer

[LeetCode]Reverse Integer
原创
761阅读
0评论
0点赞
发布博客于 7 年前

[LeetCode]Merge Two Sorted Lists

[LeetCode]Merge Two Sorted Lists
原创
651阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Remove Element

[LeetCode]Remove Element
原创
762阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Roman to Integer

[LeetCode]Roman to Integer
原创
739阅读
0评论
0点赞
发布博客于 7 年前

[LeetCode]Climbing Stairs

[LeetCode]Climbing Stairs
原创
824阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Remove Duplicates from Sorted List

[LeetCode]Remove Duplicates from Sorted List
原创
671阅读
0评论
1点赞
发布博客于 7 年前

[LeetCode]Search Insert Position

[LeetCode]Search Insert Position
原创
682阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Linked List Cycle

[LeetCode]Linked List Cycle
原创
691阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Same Tree

[LeetCode]Same Tree
原创
745阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Maximum Depth of Binary Tree

[LeetCode]Maximum Depth of Binary Tree
原创
725阅读
0评论
2点赞
发布博客于 7 年前

[LeetCode]Single Number

[LeetCode]Single Number
原创
683阅读
0评论
3点赞
发布博客于 7 年前

心得体会

个人心得体会、经验总结
原创
1441阅读
0评论
7点赞
发布博客于 7 年前

Excel查询序列所对应的值-vLoopup函数,求比例分子改变但分母不变

Excel查询序列所对应的值-vLoopup函数,求比例分子改变但分母不变
原创
1576阅读
0评论
4点赞
发布博客于 7 年前

Excel对相同项求和

Excel对相同项求和
原创
6543阅读
0评论
2点赞
发布博客于 7 年前

Eclipse运行程序提示:Exception in thread "main" java.lang.OutOfMemoryError: Java heap space

Eclipse运行程序提示:Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
原创
8488阅读
4评论
1点赞
发布博客于 7 年前

运行shell脚本提示“syntax error near unexpected token for((i=0;i<$length;i++))”

运行shell脚本提示“syntax error near unexpected token for((i=0;i<$length;i++))”
原创
4998阅读
0评论
2点赞
发布博客于 7 年前

The expression after ELSE should have the same type as those after THEN: "bigint" is expected but "i

The expression after ELSE should have the same type as those after THEN: "bigint" is expected but "i
原创
3811阅读
0评论
2点赞
发布博客于 7 年前

linux常用命令

linux常用命令
原创
895阅读
0评论
2点赞
发布博客于 7 年前

hdfs shell常用命令

hdfs shell常用命令
原创
1248阅读
0评论
4点赞
发布博客于 7 年前

hive常用命令

hive常用命令
原创
1087阅读
0评论
1点赞
发布博客于 7 年前