- 博客(9)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 基于BeautifulSoup解析的网页爬虫实现
目标爬去cnkongqi.com上的气象数据，cnkongqi.com站点上包含全国每个城市的天气，空气质量等数据，这些数据每小时都会进行更新。我的目标是要将该站点的某一时间的气象数据全部抓取下来，并保存到数据库。本次爬虫编写语言选用python，由于在下对python是小白，所以这个爬虫程序可以算是我的第一个完整的python爬虫。
2016-12-28 22:03:47
1062
原创 MySQL5.7中对JSON的支持
概述从MySQL5.7.8开始，Mysql提供了一个原生的Json类型，Json值将不再以字符串的形式存储，而是采用一种允许快速读取文本元素（document elements）的内部二进制（internal binary）格式。在Json列插入或者更新的时候将会自动验证Json文本，未通过验证的文本将产生一个错误信息。Json文本采用标准的创建方式，可以使用大多数的比较操作符进行比较操作
2016-12-16 14:51:57
25587
3
原创 Java实现BT种子解析
BT种子结构announce:tracker服务器的URL(字符串)announce-list(可选):备用tracker服务器列表(列表)creation date(可选):种子创建的时间，Unix标准时间格式，从1970 1月1日 00:00:00到创建时间的秒数(整数)comment(可选):备注(字符串)created by(可选):创建人或创建程序的信息(字符串)info:一个
2016-12-16 09:39:19
10426
3
原创 基于Jsoup实现的简单爬虫
Jsoup 概念 jsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。其实在这之前我解析Html一直都是使用HtmlPaser来做，在我第一次看到Jsoup的时候，我就在思考Jsoup的存在意义，既然已经有htmlPaser为什么还会Jsoup出现。
2016-12-09 15:19:26
3389
原创 SQL中CASE关键字的使用
使用方法代码示例CASE关键字有两种使用方法，分别是‘简单case函数’和‘case搜索函数’简单case函数CASE sex WHEN '1' THEN '男' WHEN '2' THEN '女'ELSE '其他' ENDcase搜索函数CASE sex WHEN sex='1' THEN '男' WHEN sex='2' THEN '女'ELSE '其他' E
2016-12-08 19:36:08
15751
原创 基于HTTP的多线程文件下载功能实现
思想文件信息获取的获取方式与单线程的方式一样与单线程相比不同的是将远程文件分块并发获取，然后再并发写入到本地暂存文件中远程文件分块的实现依据是：connection.setRequestProperty(“Range”,”bytes=”+start+”-“+end)本地将文件写入指定位置的实现依据是：RandomAccessFile
2016-12-08 19:33:58
1990
原创 SpringMVC实现文件下载的两种方法
这两天玩spring的过程中遇到了一个很常见的问题——文件下载。以往很多时候都是直接给一个文件的静态链接，这种方法有很多局限性，其中一个很明显的局限性就是不易统计下次状态，还有就是需要http服务器来保存文件，不可访问服务器本机文件系统的文件，综上所述，我们需要一种易于统计并可下载本地文件系统中文件的方法：那就是服务器读取本地文件流，然后将文件流输出到客户端。这个过程中流传输异常、完成都可以轻易获取
2016-12-06 16:50:33
46327
8
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人