2016年08月_pizipeng2

转载 sed 处理文本的用法

linux之sed用法sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作，下面先了解一下sed的用法 sed命令行格式为： sed [-nefri] ‘command’ 输入文本常用选项： -n∶使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDI

2016-08-23 11:41:13 319

Common Join最为普通的join策略，不受数据量的大小影响，也可以叫做reduce side join ,最没效率的一种join 方式. 它由一个mapreduce job 完成.首先将大表和小表分别进行map 操作, 在map shuffle 的阶段每一个map output key 变成了table_name_tag_prefix + join_column_value , 但是在进行p

2016-08-18 16:26:57 306

转载 spring 注入properties属性乱码问题

使用Spring注解方式注入properties文件内容，并配合Junit4+Spring做单元测试先看看工作目录，然后再来讲解1、建立config.properties，我的config.properties内容如下：author_name=luolinproject_info=该项目主要是用于写一些demo2、配置Spring配置文件，读取properties文件，并设置编码格式。大家从我的项

2016-08-18 15:55:45 8927

原创 mongodb复制和分片

复制主从复制主从复制是MongoDB最常用的复制方式，这种方式非常灵活，可用于备份、故障恢复、读扩展等。最基本的设置方式就是建立一个主节点和一个或者多个从节点，每个从节点要知道主节点的地址。运行mongod --master就启动了主服务器。运行mongod --slave --source master_address则启动了从服务器，其中master_address 就是上面主节点的地址。*

2016-08-13 22:01:23 2101

转载远程运行shell脚本

ssh执行远程操作命令格式复制代码代码如下:ssh -p $port $user@$p 'cmd' $port : ssh连接端口号 $user: ssh连接用户名 $ip:ssh连接的ip地址 cmd:远程服务器需要执行的操作准备工作基于公私钥认证或者用户名密码认证能确保登录到远程local2服务器(有点基本运维知识的人做这个事情都不是问题) cmd如果是脚本，注意绝

2016-08-12 14:18:39 2984

转载 java 正则匹配符号

1 [正则表达式]文本框输入内容控制 2 整数或者小数：^[0-9]+\.{0,1}[0-9]{0,2}$ 3 只能输入数字："^[0-9]*$"。 4 只能输入n位的数字："^\d{n}$"。 5 只能输入至少n位的数字："^\d{n,}$"。 6 只能输入m~n位的数字：。"^\d{m,n}$" 7 只能输入零和非零开头的数字："^(0|[1-9][0-9]*)$"。

2016-08-11 14:22:51 1777

原创 mongodb 索引、聚合操作

MongoDB索引MongoDB的索引几乎与传统的关系型数据库索引一模一样。创建索引的方法：> db.trans.ensureIndex({card1: 1}){ "createdCollectionAutomatically" : false, "numIndexesBefore" : 1, "numIndexesAfter" : 2, "ok" : 1}对于同

2016-08-05 16:08:29 2701

原创 mongo 基本操作

mongodb是面向文档的数据库，没有模式，文档的键不会事先定义，也不会固定不变。由于没有模式需要更该，通常不需要迁移大量的数据。优点1、容易扩展 2、丰富的功能 - 索引 - 存储javascript - 聚合 - 固定集合 - 文件存储 3、不牺牲速度 - 使用MongoDB传输协议 - 预分配数据文件 - 默认的存储引擎中使用了内存映射 - 动态查询优

2016-08-02 21:53:16 1009

pizipeng2的博客