积累文档
我是小牧
Java开发,数据挖掘,hadoop,spark,mahout的研究员
展开
-
WebHavrest使用分享(一)
需要使用爬虫这个东西,所以我研究了一下子这个东西。WebHarvest是个挺强大的爬虫,主要不是在Java代码那块使用,而是需要写脚本。现在对WebHarvest这个配置的语法也不是很熟,只是写写使用经验。外话:虽然我很烦写脚本,不过用着用着,我也觉得脚本的好处,发现脚本粘合性用在项目中也是很不错的。 :D 可以到www.webharvest.org网上下载jar包。...2010-01-14 15:44:08 · 122 阅读 · 0 评论 -
使用JDBC插入多数据测试
闲来无事,就想测试一下我的mysql插入数据的效率到底如何。现在不清楚我的测试方法到位否,所以与大家分享一下,看看大家的意见。测试的思路:多次向表中插入1000条数据,看看每次使用了多少毫秒。现在我打算使用JDBC的方式去插入。外话:思路很简单,不过我这里使用了Spring JUnit,因为我上瘾了,非常地方便。想看看大家是不是也这样子使用。所以我在后文中附贴出我一...2010-01-15 23:19:59 · 95 阅读 · 0 评论 -
编写HTTP代理中,上一些我的工具方法。
近来好多人亮相自已发出HTTP请求,我也正好也在做HTTP代理,还可以看看我写的一个文章也有关于HttpClient的内容 [url]http://feixing2008.iteye.com/blog/569927[/url]其中我没有使用HttpClient这个东西,我想更直接地透传数据。下边写了几个工具方法,引出内容。还有出遇到的一些问题。[code="java"] pub...2010-04-16 14:08:52 · 91 阅读 · 0 评论 -
Spring与我的经验过程
刚刚学习Java不久,就听过Spring这个大名。估计这个是一个牛东西,不能不学。来来去去也就那几样:IOC,AOP开始觉得没有什么用,应是自己不会用吧。先说说简单地使用Struts2做Web时的经历:1.经常需要在Action里边去使用JDBC去连接数据库,也就是说每个请求就连接一次数据库。而且业务逻辑与数据库控制代码都搞在一起,代码混乱,更不用说什么脱藕之类的东西。...原创 2010-02-02 14:26:06 · 119 阅读 · 0 评论 -
Linux内存盘提升系统性能手记
公司已经有一套运行多年的信息系统。已经积累了三年左右的数据。数据库使用oracle。系统开发由于赶进度,开发时使用了堆字段,各种关联的方式来设计。经常出现了5百行以上的SQL语句,经常系统性能不佳,用户报怨系统卡与慢。经过分析,有多个SQL语句经常超过20秒钟,并且一些批量的操作,会让oracle假死。由此不得不重启数据库,以便恢复系统正常。 细化分析后,发现直接堆代码的...原创 2016-03-28 23:14:29 · 253 阅读 · 0 评论