Maxwell_

年年岁岁花相似,岁岁年年人不同

排序:
默认
按更新时间
按访问量

[Linux]Linux Shell多进程并发以及并发数控制

Unix是一个多任务系统,允许多用户同时运行多个程序。shell的元字符&提供了在后台运行不需要键盘输入的程序的方法。输入命令后,其后紧跟&字符,该命令就会被送往到linux后台执行,而终端又可以继续输入下一个命令了。

2016-09-12 12:56:59

阅读数:12538

评论数:4

[基础工具]离线数据立方体构建工具

在数据的实际使用过程中,我们经常需要进行多维度的组合汇总,做一个数据立方体。常见的方法是在各个维度下进行group by,建立多个任务,这样不利于代码查看和维护,同时也浪费开发时间

2017-11-14 17:17:20

阅读数:730

评论数:0

[问题记录]解决RabbitMQ消息丢失与重复消费问题

本文仅记录排查和问题定位、解决的过程

2017-07-11 16:27:27

阅读数:15823

评论数:0

[运维]ELK实现日志监控告警

ELK(Elasticsearch+LogStash+Kibana),最近使用ELK处理了一些平台日志,下面以「mysql连接数监控」记录部署流程

2017-02-09 19:10:01

阅读数:13282

评论数:3

[问题记录]Unsupported major.minor version 52.0

背景jdk1.7升级到jdk1.8,运行时报错。 报错原因是高版本的jdk运行在低版本的jre上 原因一:本地Java环境尚未更新使用命令java -version检查本地java环境,保持一致 如果是windows下,配置了JAVA环境后需要重启电脑,才能生效 原因二:检查IDE配置以I...

2016-12-20 12:56:03

阅读数:632

评论数:0

[问题记录]MAVEN打依赖jar包

记录maven打依赖jar包

2016-12-19 21:08:40

阅读数:451

评论数:0

[Java]JGit用法总结

JGit常用用法总结

2016-12-15 09:19:44

阅读数:4308

评论数:0

[问题记录]log4j使用记录

步骤一:maven配置依赖https://mvnrepository.com/artifact/log4j/log4j/1.2.16步骤二:IDEA加入log4j.properties文件File->Project Structure 将log4j.properties文件放入resour...

2016-12-14 20:27:16

阅读数:369

评论数:0

[问题记录]hdfs删除文件提示rmr: Failed to move to trash

问题/现象使用hadoop fs -rmr xxx删除hdfs上的文件失败$ hadoop fs -rmr /app/lbs/nuomi-da-stat/stat_platform_auto/1004/dt=20161118/000000_0rmr: Failed to move to trash...

2016-12-08 14:45:45

阅读数:1983

评论数:0

[Mysql]Mysql常用命令

1. 常规操作进入数据库use market;改变字符编码charset utf8;导出数据mysql \ -h 10.0.2.54 \ -P 3307 \ -u marketuser \ -e "use market; charset utf8; select * from RPT_O...

2016-09-17 01:28:34

阅读数:3452

评论数:0

[Storm]Storm流控制

一个流分流到多个流在storm中,将一个流分流到多个不同的流中。 参考代码: main部分// tracker解析器 topologyBuilder.setBolt( "TrackerBolt", new TrackerBolt(), ...

2016-09-17 01:25:23

阅读数:3327

评论数:0

[Linux]linux killtask命令

给定任务名称,杀死所有该任务的linux进程

2016-09-17 01:22:57

阅读数:4301

评论数:0

[Hive]Hive指定查询输出分隔符

业务场景做数据分析的时候,经常会用到hive -e "sql" > xxx.txt或者最原始的hive命令行来获得查询结果,然后再将查询结果放到Excel等工具中,但是如果查询的字段太多,这时候将查询结果放到Excel会经常会碰到错位问题,很是头疼.解决方案一:借助lin...

2016-09-17 01:21:16

阅读数:14832

评论数:0

[Hive]Hive执行脚本的方式以及转义字符

1. hive脚本的执行方式hive脚本的执行方式大致有三种: 1. hive控制台执行; 2. hive -e "SQL"执行; 3. hive -f SQL文件执行;参考hive的用法usage: hive -d,--define <key=value>...

2016-09-17 01:20:08

阅读数:18145

评论数:3

[Hive]Hive静态分区与动态分区

1. 静态分区若分区的值是确定的,那么称为静态分区。下面举例一个业务场景: 统计程序每天都需要统计1号店中由精准化推荐带来的销售额,日期是确定的,现在需要将每天统计好的销售额数据插入到指定的日期分区中 1.1. 实现方式参见如下的脚本:hive -e " --设置Hive Job任务...

2016-09-17 01:15:52

阅读数:4915

评论数:0

[Linux]Linux重定向

>outfile 2>&1 与 2>&1 >outfile 的区别关于重定向,有一个疑问就是为什么这两个Bash Shell写法,得到的结果会不一样:$ cat oyyw >outfile 2>&1 $ cat outfile cat:...

2016-09-17 01:12:25

阅读数:3533

评论数:0

[Linux]Linux Shell脚本参数传递

1. shell脚本的默认变量下面用一个shell脚本来描述shell脚本的默认变量[ouyangyewei@localhost workspace]$ cat learn_argument.sh #! /bin/bash# # check arguments # #--------------...

2016-09-17 00:53:43

阅读数:5063

评论数:0

[Linux]结合awk列举大于指定容量大小所有文件目录

结合awk列举大于指定容量大小所有文件目录

2015-08-11 21:05:43

阅读数:1675

评论数:0

[Linux]结合awk删除hdfs指定日期前的数据

结合awk删除hdfs指定日期前的数据

2015-08-11 20:48:11

阅读数:2048

评论数:0

[Java]Java计算器

用Java实现一个标准版计算器

2015-07-31 16:16:58

阅读数:606

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭