xunming的专栏

自律给我自由

Android基于Bmob第三方后台开发的App——足说

————重大更新,App更新换代,重新归来,改名和改Icon————!!!新版2.1已更新,更新日期:2017-07-27 流程分析 1想法和需求 2设计 3编码 4测试 5市场 App介绍 1名字 2介绍 3代码 Github开源技术 第三方开放平台 市场上架 1腾讯应用宝 2优亿eoe市场 3...

2016-05-31 21:25:41

阅读数:6330

评论数:13

开发常用工具

工欲善其事必先利其器,好的工具能使开发效率大大提高,达到事半功倍的效果,以下是本人开发过程中使用到的各种工具,整理如下: charles 1、注册码 Registered Name: https://zhile.io License Key: 48891cf209c6d32bf4 2、过...

2014-11-04 17:14:45

阅读数:2540

评论数:0

使用Excel做动态更新数据折线图

一、数据源 数据源如下: 生成的数据透视表如下: 二、定义名称 打开公式菜单,选择定义名称,就打开定义名称弹框 定义三个名称,分别是tj,yw,rq 关键的就是选择单元格区域如何定义 =OFFSET(透视表!$B$3,,,COUNTA(透视表!$B:$B)-2,) 以上的函数的意义就是选...

2018-11-08 15:46:52

阅读数:74

评论数:0

使用pyspark执行hive sql

文章目录配置环境执行模式hive模式pyspark模式最终结果hive模式pyspark模式参考文章 配置环境 环境配置这里就不再多讲,只研究执行效率的对比 spark hadoop 执行模式 假设一个查询host出数量的sql是这样: select host,count(distinct c...

2018-09-25 11:31:27

阅读数:407

评论数:0

CDH之Hue、Hive操作

cdh全称为Cloudera’s Distribution Including Apache Hadoop

2018-08-27 19:03:25

阅读数:278

评论数:0

Hadoop生态圈之Spark

1、spark-shell 进入spark模式,scala 2、简单示例 //载入本地txt文件 var xmfile = sc.textFile("file://Users/liuxunming/Desktop/TODO.txt&...

2018-07-31 08:21:09

阅读数:148

评论数:0

Hadoop学习笔记之lzo文件格式

一、下载、安装、编译lzo 二、修改Hadoop配置 三、安装、编译hadoop-lzo-master 四、检测是否配置成功 1、hive方法 2、job日志方法 五、参考链接 LZO(LZO是Lempel-Ziv-Oberhumer的缩写)是一种高压缩比和解压速度极快的编码,它...

2018-06-28 17:18:47

阅读数:244

评论数:0

Mac的使用技巧

所需材料: 1、macpro一台 2、Belkin USB-C LAN 转接头,建议从苹果官网购买,为什么需要买这个,因为mac电脑本身只有无线网卡模块,没有网线端口,所有需要自行购买转接头 3、网线一根 4、可以上网的环境 Mac有线网配置:首先要有以太网转接头,然后在网络偏好设置里,...

2018-06-27 14:03:39

阅读数:81

评论数:0

MyBatis的初步使用

1、批量更新 <update id="batchUpdate" parameterType="java.util.List&qu...

2018-05-30 15:05:33

阅读数:126

评论数:0

Excel的使用心得与技巧

vlookup()函数的使用 1,选择要填充的列的第一行,输入=vloolup 2,第一个参数选择左边一列的第一行 3,第二个参数选择另一个sheet工作表的两列单元格 4,第三个参数填入2,表示要填充的是表格的第二列 5,第四个参数填入0,表示精确匹配 6,回车,双击黑色十字,单列填...

2018-05-28 13:40:26

阅读数:490

评论数:0

Gps带你跑出你想要的图案

路书效果: 所需软件(mac): 具体步骤: 1、准备素材 2、选择场地 3、素材位置 4、文字描边 5、保存gpx 6、添加路书 7、跑步导航 具体实施: 参考链接: 路书效果: 所需软件(mac): 1、谷歌地球,http://www.pc6.com/mac/...

2018-04-27 15:02:16

阅读数:160

评论数:0

Hadoop学习笔记之avro文件格式

一、什么是avro 英文简介 https://en.wikipedia.org/wiki/Apache_Avro 官网简介 http://avro.apache.org/docs/current/ avro是一个数据序列化系统,它提供 丰富的数据结构 快速可压缩的二进制数据形式 存储持久...

2018-03-27 19:28:51

阅读数:648

评论数:0

GPG对文件加解密的简单实现

初识GPG 加解密实现 gui加解密 生成密钥 命令行方式加解密 信任度设置 方法一 方法二 参考链接 初识GPG 首先下载gpg套件,https://gpgtools.org/ 安装完成后首先建立公私钥,建立好后如下图: 加解密实现 gui加解密 ...

2018-03-08 17:20:55

阅读数:2687

评论数:0

Linux之for循环进程终止的方法

需求是这样: #!/usr/bin/bash day=0 tmpday=0 tmp2=0 #for循环执行进程,省的一个个手动跑 for((day=1;day<=59;day++)) do if [[ $day -lt 10 ]]; then tmpd...

2018-03-06 18:06:25

阅读数:565

评论数:0

Hadoop学习笔记之Partitioner分区

partitioner意为分区,在hadoop中,这个阶段在map之后,reduce之前 具体实现共两步: 1、设置分区类 job.setPartitionerClass(MyPartitioner.class); 自定义partitioner类,MyPartitioner,分区...

2018-02-27 17:09:55

阅读数:106

评论数:0

Linux回收站功能的实现

RM命令改造 定时清空回收站 记录删除时间 使用方式 RM命令改造 vim /etc/bashrc 在文件的最前端添加如下代码 #修改rm命令 alias rm=delete #命令别名,通过delete来实现rm改为mv alias r=delete alias...

2018-02-11 16:14:05

阅读数:1134

评论数:0

Maven项目之错误日志发邮件通知

1、主要通过logback.xml配置,该文件位于src/main/resource目录下 configuration scan="false"> property name="fileName" value="xunmin...

2018-01-30 15:37:46

阅读数:553

评论数:1

Vim、Shell及Linux命令的高效使用

Vim的使用 目标:把一个每行都是url的txt文件内容,转为一个java代码中使用的string[]数组 源Url telepathy.kakamobi.com ai.kakamobi.cn tpc.kakamobi.cn dspmnt.autohome.com.cn deal...

2018-01-11 14:15:53

阅读数:261

评论数:0

Hadoop错误之namenode宕机的数据恢复

情景再现: 在修复hadoop集群某一个datanode无法启动的问题时,搜到有一个答案说要删除hdfs-site.xml中dfs.data.dir属性所配置的目录,再重新单独启动该datanode即可; 问题就出在这个误删除上,当时是在namenode的hadoop/hdfs/目录下,然后就...

2018-01-09 17:49:51

阅读数:1962

评论数:2

Hadoop错误之 /bin/bash: /bin/java: No such file or directory

莫名的错误日志如下,该错误的产生原因大概可能由于重装hadoop环境有关 SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/Users/liuxunming/MyCon...

2018-01-05 16:35:46

阅读数:1850

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭