2012年08月_baiyangfu

原创批量将文件中的tab转换成空格

修改代码时发现很多地方由于用的tab键，造成代码很乱。系统默认的tab占8个空格长度。我想把所有代码中的tab键转换成四个空格，写了个小脚本。做个笔记，大家别见笑。 1 #!/bin/bash 2 folder=/home/q/www/dataware1/webapps/qops/flight 3 4 sudo chmod -R 777 $folder 5 cd

2012-08-27 19:02:03 4660

原创 mysql 5.5 设置字符集问题

在虚拟机上安装了一个mysql，修改其my.cof文件，发现这个配置文件好强大，但是，遇到一个问题：设置字符集时，分别在 [client]、[mysql] 和 [mysqld] 下设置 default-character-set=utf8 ，但是出现以下问题：一个个排查，发现是在 [mysqld] 下设置 default-character-set=utf8 导致的。查看/v

2012-08-26 14:59:23 2252

原创 JUnit4测试java

说是原创，其实是记录一个笔记，好吧，呵呵，加油！希望可以写很多原创的！看了一个关于JUnit4测试java 的入门介绍，感觉非常好，实际用了一下，好使！初级篇：http://blog.csdn.net/andycpp/article/details/1327147中级篇：http://blog.csdn.net/andycpp/article/details/1327346高级篇：

2012-08-25 21:14:03 704

原创关于mysql优化一些总结

最近在做mysql数据库的一些优化，主要是sql语句的优化。查阅了一些资料加上一些实战，这里简单做一下总结，水平有限，欢迎大家指正：sql优化，一般有两方面：优化io：IO应该是数据库（尤其是数据量比较大的时候）时间开销最大的地方了，所以，IO优化非常重要，我们常用的方法是通过合理的使用索引来减少IO。减少cpu运算：除了IO，减少cpu运算也是一个优化sql的有效手段。o

2012-08-25 20:08:48 1256

转载一些shell命令

1.显示消耗内存/CPU最多的10个进程Java代码 ps aux | sort -nk +4 | tail ps aux | sort -nk +3 | tail 2.查看Apache的并发请求数及其TCP连接状态Java代码 netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S

2012-08-23 17:42:23 840

原创 tomcat配置 log4j

今天配置了一下 tomcat的 log4j，过程还是比较简单的，做一个笔记：将log4j的 .jar 包放到 WEB-INF/lib 目录下，或者放到 java 的 classpath下，只要能访问到就行。在WEB-INF/classes 目录下创建： log4j.properties 文件，该文件内容： # 设定logger的root level为INFO，指定的输出目的地（

2012-08-22 21:06:09 836

转载 java异常小结

本文重在Java中异常机制的一些概念。写本文的目的在于方便我很长时间后若是忘了这些东西可以通过这篇文章迅速回忆起来。 1. 异常机制 1.1 异常机制是指当程序出现错误后，程序如何处理。具体来说，异常机制提供了程序退出的安全通道。当出现错误后，程序执行的流程发生改变，程序的控制权转移到异常处理器。1.2 传统的处理异常的办法是，函数返回一个特殊的结果来表示出现异常（通常这个特殊结果

2012-08-22 20:55:42 854

原创 jsp多线程同步问题

今天遇到一个jsp多线程同步问题，最后发现是在页面中使用了实例变量： Date strssDate = new Date(); Calendar cal = Calendar.getInstance(); SimpleDateFormat sdf = new SimpleDateFormat("yy

2012-08-22 20:53:14 1295

转载 linkedin 数据科学实习的5个经验总结

1. Spend time cleaning your data. Data is your starting point so make sure it is clean. This will only make things simpler as you proceed further and make your results more reliable.花一些时间再数据清洗上面。数

2012-08-20 22:51:32 1100

转载小文件、nginx、Redis、Moosefs

小文件、nginx、Redis、Moosefs现在有3KW的数据，单条数据都很小的，如果按key-value来看的话，key就是32位的MD5字符串，value按平均算大概是100字节左右。现在需要将这些数据做缓存以在高并非的时候依然可以快速响应。因为这些数据基本没有冷热数据之分，所以需要将全部数据都放到缓存中。1、直接生成静态文件，利用nginx对静态文件的高效做静态缓存。

2012-08-20 20:45:17 761

转载添加 index mysql

1.添加PRIMARY KEY（主键索引）mysql>ALTER TABLE `table_name` ADD PRIMARY KEY ( `column` )2.添加UNIQUE(唯一索引)mysql>ALTER TABLE `table_name` ADD UNIQUE (`column`)3.添加INDEX(普通索引)mysql>ALTER TABLE `ta

2012-08-20 12:05:40 941

转载 sql优化和注意事项

一、SQL的优化和注意事项现在我们假设我们只有一台MySQL服务器，所有的select/update/insert/delete操作都是在这上面进行的，我们同时有三台Web服务器，通过DNS轮巡来访问，那么我们如何进行我们应用程序和SQL的优化。1. Where条件在查询中，WHERE条件也是一个比较重要的因素，尽量少并且是合理的where条件是很重要的，在写每一个where条件的时候

2012-08-10 16:15:32 816

转载 sql执行效率检测 mysql explain

explain显示了mysql如何使用索引来处理select语句以及连接表。可以帮助选择更好的索引和写出更优化的查询语句。使用方法，在select语句前加上explain就可以了：如：explain select surname,first_name form a,b where a.id=b.id 分析结果形式如下： table | type | possible_keys

2012-08-10 15:37:27 1476

原创一个以前用的提交hadoop作业的shell脚本

做个笔记，用到的时候可以看一看。感谢大师兄！怀念校园那段日子。#!/bin/sharg0=$0arg1=$1arg2=$2arg3=$3arg4=$4arg5=$5JAR=MyJob3-1.jarJOBNAME=MyJob3echo $#args=$#usage(){ echo "Usage: $arg0 [dataOver

2012-08-03 16:52:36 1335

转载一个shell脚本调用另外一个脚本

原帖: [url]http://forum.ubuntu.org.cn/viewtopic.php?f=88&t=1878[/url]脚本 first (测试示例1) first#!/bin/bashecho 'your are in first file'方法一:使用source #!/bin/bashecho 'your are in sec

2012-08-03 16:50:15 874

原创 js 与jsp传输变量

今天遇到 js与jsp传输变量的问题，先记录自己的解决方法： function search() { var startDate = $('#startDate').val(); var endDate = $('#endDate').val

2012-08-03 16:14:45 1026

原创 mysql学习笔记（3）

影响mysql server性能的因素//商业需求对性能的影响1、在系统优化中，应该尽可能分析出那些不实时的和不完全精确的地方，做出相应的调整，可能会带来性能巨大的提升。2、无用功能堆积使系统过度复杂影响整体性能。//系统架构及实现对性能的影响我们数据库中存放的都是适合在数据库中存放的吗？以下数据都是不适合在数据库中存放的：1、二进制多媒体数据2、流

2012-08-01 18:04:29 728

原创关于url传送参数的转码问题

今天遇到一个url传送参数的转码问题，在js中获取参数，后台在java中用request.getParameter()来获取参数。如果参数中有中文，在ie浏览器中会传过去类似 '%………%……'之类的代码，后台解析不了。在网上找了几种办法，http://lishuaishuai.iteye.com/blog/1278015http://297014031.iteye.com/blo

2012-08-01 13:57:40 2095

baiyangfu的专栏