有梦想的蜗牛

记录学习点滴

排序:
默认
按更新时间
按访问量

scrapy在Request之间传递参数

我们在写爬虫的时候,经常会遇到这种情况,这里举例说明一下,比如爬一个新闻页面,首先爬的是新闻列表页pageA,从pageA里获取新闻详细页连接,然后爬新闻详情页pageB,新闻详情页pageB里有一个关于这个新闻的解说,在另一个页面pageC。这时候如果用传参的方法可以直接在爬取完成一条新闻的整个...

2017-06-05 20:45:38

阅读数:2291

评论数:0

Docker创建Mysql容器并通过命令行连接到容器

文章转自http://www.cnblogs.com/baolong/p/5763412.html创建mysql5.6容器 1master+3个slavedocker run --name mysql-master -d -P hub.c.163.com/nce2/mysql:5.6 docker...

2017-05-04 09:22:42

阅读数:372

评论数:0

SSM框架——详细整合教程(Spring+SpringMVC+MyBatis)

使用SSM(spring、SpringMVC和Mybatis)已经有三个多月了,项目在技术上已经没有什么难点了,基于现有的技术就可以实现想要的功能,当然肯定有很多可以改进的地方。之前没有记录SSM整合的过程,这次刚刚好基于自己的一个小项目重新搭建了一次,而且比项目搭建的要更好一些。以前解决问题的过...

2017-01-23 11:21:36

阅读数:494

评论数:0

Spring MVC 教程,快速入门,深入分析

原文地址:http://elf8848.iteye.com/blog/875830/#目录 一、前言 二、spring mvc 核心类与接口 三、spring mvc 核心流程图 四、spring mvc DispatcherServlet说明 五、spring mvc 父子上下文的说明 六、sp...

2017-01-23 10:40:51

阅读数:442

评论数:0

python读取xml文件

关于python读取xml文章很多,但大多文章都是贴一个xml文件,然后再贴个处理文件的代码。这样并不利于初学者的学习,希望这篇文章可以更通俗易懂的教如何使用python 来读取xml 文件。什么是xml?xml即可扩展标记语言,它可以用来标记数据、定义数据类型,是一种允许用户对自己的标记语言进行...

2017-01-10 22:31:01

阅读数:360

评论数:0

Python图片处理模块Pillow

原文来自Pillow安装警告* Pillow 不能和PIL 同时存在于一个环境中,在安装Pillow之前需要先卸载PIL * Pillow 1.0 版本后已经不支持import Image,请使用from PIL import Image来代替 * Pillow 2.1.0版本以后已经不支持imp...

2016-12-26 09:23:17

阅读数:5590

评论数:0

iOS下载历史版本App教程

该文章属于<简书 — Timhbw>原创,转载请注明: <简书社区 — Timhbw>http://www.jianshu.com/p/edfed1b1822c有些时候我们需要下载旧版本的 App 进行研究或者其他用途,然而在 iOS 下,苹果的 App Store 里面默...

2016-12-14 09:36:58

阅读数:8458

评论数:0

Docker创建Mysql容器并通过命令行连接到容器

原文地址:http://www.cnblogs.com/baolong/p/5763412.html拉取网易蜂巢的mysql-server:5.6docker pull hub.c.163.com/nce2/mysql:5.6创建mysql5.6容器 1master+3个slavedocker r...

2016-12-07 14:11:44

阅读数:2754

评论数:0

elasticsearch 查询(match和term)

原文: http://www.cnblogs.com/yjf512/p/4897294.htmlelasticsearch 查询(match和term)es中的查询请求有两种方式,一种是简易版的查询,另外一种是使用JSON完整的请求体,叫做结构化查询(DSL)。由于DSL查询更为直观也更为简易,...

2016-12-06 11:11:58

阅读数:311

评论数:0

elasticsearch不能以root运行的问题

当我们在使用elasticsearch的时候,如果是以root权限来执行elasticsearch./elasticsearch则会有以下报错Exception in thread "main" java.lang.RuntimeException: don't run ela...

2016-11-30 09:03:17

阅读数:10367

评论数:1

如何让你的scrapy爬虫不再被ban

原文地址:前面用scrapy编写爬虫抓取了自己博客的内容并保存成json格式的数据scrapy爬虫成长日记之创建工程-抽取数据-保存为json格式的数据和写入数据库scrapy爬虫成长日记之将抓取内容写入mysql数据库。然而,这个爬虫的功能还是过于弱小,一旦目标网站设置了爬虫的限制,我们的爬虫也...

2016-11-21 17:29:03

阅读数:2448

评论数:0

MySQL 连接错误Can't connect to MySQL server on (61)

链接数据库时忽然遇到一个问题。Mac Navicat链接时报错Cant connect to MySQL server on ‘xx.xx.xx.xx’ (61)。PS. win版Navicat 报错Can’t connect to MySQL server on ‘xx.xx.xx.xx’ (1...

2016-11-02 18:50:43

阅读数:19755

评论数:1

Mac 10.11安装MySQLdb-python时报错总结

前言===其实以前遇到过这些坑,费了n久解决了以后,实在是心累,不想总结。当时心想,现在配好这个环境,以后再也不弄这个了!!然鹅,是我图样图森破了,这美好的乌托邦环境在一次电脑抽风,只能重装以后就木有了!心好累~错误===下面开始我们的错误之旅~1、mysql_config not found==...

2016-11-01 19:44:53

阅读数:1352

评论数:0

JQuery 开始关闭按钮禁用属性

启用禁用属性:$("#buttonID").attr({"disabled":"disabled"}); 或者 $("#buttonID").attr('disabled','');两着都会给id为buttonID的按...

2016-10-25 17:35:12

阅读数:968

评论数:0

Django链接远程数据库并创建model

前言基础知识网上有很多,不再赘述。这里默认你已经对Django有了一定的的了解。 看本文的前提: 已经对Django有了基础的认识 已经有了远程数据库 拥有该数据库的相关权限 远程数据库配置修改settings.py中数据库相关代码:DATABASES = { 'default': { ...

2016-07-21 10:12:17

阅读数:2022

评论数:0

正则表达式 linux shell

热身正则表达式(regular expression)描述了一种字符串匹配的模式,可以用来检查一个串是否含有某种子串、将匹配的子串做替换或者从某个串中取出符合某个条件的子串等。例如 grep, expr, sed , awk. 或Vi中经常会使用到正则表达式,为了充分发挥 shell 编程的威力,...

2016-02-20 20:23:11

阅读数:543

评论数:0

swift与OC混编(方法调用)

原创文章转载请注明出处。 背景在上一篇文章中简单讲述了怎么创建Swift和OC的混编工程。本篇讲一下Swift和OC的混编工程中的方法调用。OC调用SwiftOC调用Swift方法比较简单。但是需要注意以下几点: 1.需要在当前OC类里导入xxx-Swift.h头文件,其中xxx为项目名称(与你的...

2016-01-29 11:48:53

阅读数:10311

评论数:0

修复iOS模拟器无法启动

今天遇到模拟器无法启动问题,点击模拟器或者Xcode build模拟器就一直跳,跳一会就不跳了。然后查看模拟器状态,显示为无响应。 如果你有类似情况可以尝试执行以下命令:rm -rf ~/Library/Developer/CoreSimulator/Deviceskillall -9 com....

2016-01-29 11:39:17

阅读数:6884

评论数:0

iOS客户端与JAVA服务器之间的RSA加密解密

文章转载自:http://www.cnblogs.com/makemelike/articles/3802518.html  在网上找了许多篇关于RSA加密解密的文章与博客,是很有帮助,但比较零散与不简洁。  (至于RSA的基本原理,大家可以看 阮一峰的网络日志 的 RSA算法原理(一) 和 RS...

2016-01-27 09:24:52

阅读数:9211

评论数:4

swift与OC混编(创建混编工程)

原创文章转载请注明出处。 背景Swift语言自推出以来苹果官方就开始努力开始推这门新语言。就在15年WWDC上更是把Swift进行了开源,瞬间star就开始不断飙升,截止今天(16年1月25)已经达到26059个star【源码请点击这里】,而且每天还都在不断增长,而且每天都会有Pull Reque...

2016-01-26 00:17:41

阅读数:1998

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭