- 博客(9)
- 资源 (14)
- 收藏
- 关注
原创 MySQL workbench 修改查询时显示1000条数据?
MySQL workbench如何修改查询时显示数据的条数?因为在做一个爬虫,爬取下来的数据有很多,保存在本地,然后通过 MySQL workbench 软件打开时,却发现查询数据时只显示1000条数据(我就估摸着是默认显示只能是1000条),一旦数据比较多,自己不想一页一页的翻,便想着把这个限制取消,或者修改,找了一段时间才找到解决方法。如果碰到同样问题的,那么下面就跟我一起来看看是如何解决的。
2016-10-23 23:05:55 13352
原创 文件通配符中大小写匹配问题?
如下图,在文件夹“公共的”下面有a.c A.c D.c等文件,当我敲出命令ls [A-Z].c时,显示的是A.c 和 D.c ,这是符合的,但是当我敲出 ls [a-z].c 时,显示的却是 a.c A.c D.c,我懵逼了。我再次使用 ls [[:lower:]].c 显示的是 a.c , ls [[:upper:]].c 时显示A.c D.c ,这时终于正常了。但是不知道前面那个 [a-z].c
2016-10-23 00:24:22 6396
原创 Pyspider框架 —— Python爬虫实战之爬取 V2EX 网站帖子
背景:PySpider:一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写,分布式架构,支持多种数据库后端,强大的WebUI支持脚本编辑器,任务监视器,项目管理器以及结果查看器。在线示例: http://demo.pyspider.org/官方文档: http://docs.pyspider.org/en/latest/ Github : https://github
2016-10-22 20:28:29 8822 2
原创 Pyspider 框架学习时走过的一些坑
背景:自己在做一个 V2EX 爬虫的时候,需要把爬取的帖子中的内容( title 和 content)保存在本地数据库。 环境:Pycharm 2016.1 + MySQL 5.7 + Pyspider + MySQL workbench + python 2.7 32位1. windows下安装MySQLdb出现的问题及其解决方法你有两个选择:安装已编译好的版本(一分钟)
2016-10-20 22:42:26 9625 5
原创 HTTP 599: SSL certificate problem: unable to get local issuer certificate错误
自己在用 PySpider 框架爬虫运行代码后时出现 HTTP 599: SSL certificate problem: unable to get local issuer certificate错误完整报错信息: HTTP 599: SSL certificate problem: unable to get local issuer certificate [E 161018 21
2016-10-18 22:05:04 21035 10
转载 你是去上大学,别让大学上了你
注:文章转载于微信公众号 “ 咪蒙 ”地址:你是去上大学,别让大学上了你 (邦乔彦 作品)“请你别在宿舍学习,影响室友玩。”大学开学一个多月了,是不是有种强烈的上当的感觉?高中的时候,老师都给我们画大饼:现在辛苦两个月,上了大学就可以随便玩了;现在别搞什么早恋,进了大学你们想怎么谈怎么谈……那时候,总以
2016-10-18 13:22:29 5424
转载 网易云音乐登录信息加密算法详解
原文地址:网易云音乐新登录API分析网易云音乐登录加密算法核心过程如下: text = { 'username': username, 'password': password, 'rememberLogin': 'true' } text = json.dumps(text) secKey = createSecretKey(
2016-10-11 16:28:29 14745 2
原创 大型网站架构演化历程
大型网站的挑战主要来自庞大的用户,高并发的访问和海量数据,任何简单的业务一旦需要处理数以P计的数据和面对数以亿计的用户,问题就会变得棘手。大型网站架构主要就是解决这类问题。本文内容大部分来自《大型网站技术架构》、《大型网站系统与Java中间件实践》这两本书,这两本书很值得一看,强烈推荐。在微信公众号 猿blog 后台(扫描下图二维码)回复关键词“ 大型网站架构 ”可以获得这两本书籍的电子版和一张思维
2016-10-07 10:22:32 6897
Flink 全网最全资源(视频、博客、PPT、入门、原理、实战、性能调优、源码解析、问答等持续更新)
2019-10-25
Flink源码解析.zip
2019-06-04
Flink 全网最全资源(视频、博客、PPT、入门、实战、源码解析、问答等持续更新).md
2019-06-04
Distributed.Systems.An.Algorithmic.Approach.2nd.Edition
2018-10-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人