关于几个坑

注解模式抓取table中每行tr情况 [code="java"] package com.lsiding.robot.page.model; import java.util.ArrayList; import java.util.List; ...

2018-10-12 18:27:24

阅读数 28

评论数 0

非get请求及关于post去重

[b]处理非HTTP GET请求[/b] 一般来说,爬虫只会抓取信息展示类的页面,所以基本只会处理HTTP GET方法的数据。但是对于某些场景,模拟POST等方法也是需要的。 0.7.1版本之后,废弃了老的nameValuePair的写法,采用在Request对象上添加Method和r...

2018-10-11 16:02:15

阅读数 53

评论数 0

使用Pipeline保存结果

[b]使用Pipeline保存结果[/b] 好了,爬虫编写完成,现在我们可能还有一个问题:我如果想把抓取的结果保存下来,要怎么做呢?WebMagic用于保存结果的组件叫做Pipeline。例如我们通过“控制台输出结果”这件事也是通过一个内置的Pipeline完成的,它叫做ConsolePip...

2018-10-11 15:50:17

阅读数 135

评论数 0

使用Selectable抽取元素

[b]使用Selectable抽取元素[/b] Selectable相关的抽取元素链式API是WebMagic的一个核心功能。使用Selectable接口,你可以直接完成页面元素的链式抽取,也无需去关心抽取的细节。 在刚才的例子中可以看到,page.getHtml()返回的是一个Htm...

2018-10-11 15:29:58

阅读数 212

评论数 0

简单的例子

[code="java"]package com.rose.msg.page; import us.codecraft.webmagic.Page; import us.codecraft.webmagic.Site; import us.codecr...

2018-10-11 10:29:27

阅读数 28

评论数 0

WebMagic整体框架

总体架构 [img]http://dl2.iteye.com/upload/attachment/0130/8330/954dd4fe-309f-3dc3-93ec-c7cb04c20cda.jpg[/img] WebMagic的结构分为Downloader、PageProcessor、S...

2018-10-09 19:54:13

阅读数 43

评论数 0

css 自定义滚动条样式

http://www.xuanfengge.com/demo/201311/scroll/css3-scroll.html http://www.xuanfengge.com/css3-webkit-scrollbar.html

2018-05-21 19:02:11

阅读数 26

评论数 0

flex布局

http://www.ruanyifeng.com/blog/2015/07/flex-grammar.html

2017-12-26 16:35:52

阅读数 23

评论数 0

React.createClass从0.48开始被删除,PropTypes被删除

替代品是 create-react-class 包中的 createReactClass 方法 [code="javascript"] var createReactClass = require('create-react-class'); v...

2017-12-14 19:14:33

阅读数 37

评论数 0

Cannot find entry file index.ios.js [index.android.js] in any of the roots

[img]http://dl2.iteye.com/upload/attachment/0128/1717/f1099ad0-5a22-38ed-9096-c3053404018a.png[/img] 如上的错误,需要清理掉watchman

2017-12-14 17:32:16

阅读数 23

评论数 0

node.js清理缓存,AmbiguousModuleResolutionError

[img]http://dl2.iteye.com/upload/attachment/0128/1576/aaccc392-7074-3ae2-bfcc-78056bf941c8.png[/img] 如图所示 大概意思是说,require('ReactNative')失败,有多个叫这...

2017-12-13 17:38:36

阅读数 56

评论数 0

react-native报 Execution failed for task ':app:mergeDebugResources'错误

react-native报 Execution failed for task ':app:mergeDebugResources'错误 http://blog.csdn.net/hunannanhu/article/details/77159322

2017-12-12 17:28:44

阅读数 208

评论数 0

react-native修改android 类的包(package)名

安卓已包名作为应用的唯一id,相对iOS来说改起来就不是那么方便,但为了能正式发布自己的应用,还是得改过来。 假设包名为com.exease.etd.objective,以下地方需要修改。 首先是两个java文件:android/app/src/main/java/com/PROJEC...

2017-12-12 16:07:47

阅读数 42

评论数 0

react native 升级后项目没有升级,运行报错问题

[img]http://dl2.iteye.com/upload/attachment/0128/1388/910c115b-ef0b-30e8-9978-46ca704798bc.png[/img] 这个函数是react native的底层初始化组件函数,报这个问题,基本上只有 ...

2017-12-12 16:07:07

阅读数 53

评论数 0

ios发布

http://www.jianshu.com/p/21ebca8cadf6http://www.jianshu.com/p/21ebca8cadf6

2017-12-06 10:42:58

阅读数 21

评论数 0

react native boost库下载失败

提示类似于 curl: (56) SSLRead() return error -9806 curl: Saved to filename 'boost_1_63_0.tar.gz' 原因:init命令默认会创建最新的版本,而目前最新的0.45版本需要下载boost库编译。此库体积庞大,...

2017-11-30 13:25:17

阅读数 43

评论数 0

vmware 安装mac os 10.11

vmware 12.5.5 unlocker 208 os x 10.11 安装vmware后,关掉vmware程序,运行 unlocker 208的win-install.cmd win8极更高版本系统需要管理员身份运行。 新建虚拟机后,需要修改对应的虚拟机文件.vmx 在...

2017-11-29 20:29:42

阅读数 12

评论数 0

mysql 保存表情符号 incorrect string value

1. mysql结构字段或者表,设置字段为 字符编码:utf8mb4 序列规则:utf8mb4_general_ci 2.驱动版本需要支持utf8mb4 ,本人使用过的5.1.36 3.mysql配置 [mysqld] 增加 character-set-serve...

2017-11-13 21:29:21

阅读数 46

评论数 0

Android Studio开发第Xposed模块

需要提前了解的 根据个人的理解,Xposed模块本身是不需要运行的,只有当hook被调用时,Xposed会主动去唤醒对应的assets/xposed_init中指定的类,但唤醒本身不会让Active激活,所以hook本身不要直接调用本模块定义的Active 1.Android Stud...

2017-11-11 18:11:02

阅读数 51

评论数 0

CSS3: 移动端开发中 max-device-width 与 max-width 的区别

http://justcoding.iteye.com/blog/2313976

2017-09-11 11:06:42

阅读数 88

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭