兎先森-CSDN博客

转载深入理解Python爬虫代理池服务

深入理解Python爬虫代理池服务在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务。 1、问题代理IP从何而来？刚自学爬虫的时候没有代理IP就去西刺、快代理之类有免费代理的网站去爬，还是...

2019-01-10 16:23:13 602

转载 Mac Jenkins的安装和使用

这里写自定义目录标题准备工作安装三配置Jenkins配置开发团队新建任务配置构建任务其他参数本文转载自：https://www.jianshu.com/p/897b9a8fb210 Jenkins是基于Java开发的一种持续集成工具，用于监控持续重复的工作。本篇文章介绍如何使用Jenkins来完成ios的自动构建打包的方法。网上也有介绍很多方法，好些个文章都是粘贴复制，Jenkins实现自动构建...

2018-10-31 15:20:37 1912

原创 Mac下 Python2、Python3 共存

这里写自定义目录标题已完成配置后效果如何配置已完成配置后效果可以通过在终端（控制台）命令which python获取到对应的python路径如下图：同时可以通过命令行 python、python2、python3 进入到对应的python环境如下图：如何配置 1、Mac下已安装了python2（mac系统自带python2.7）、python3 且确认好python的安装路径 ...

2018-10-19 17:35:06 917

转载 Selenium2Library 关键字中文

转载自： https://www.cnblogs.com/emor/p/4463091.html 1、给你当前的会话增加一个cookie。“name&quot;和&quot;value”，“path”,&quot;domain&quot;和&quot;secure&quot;是可选项. Add Cookie [ name | value | path=None | domain=None | secure=Non

2018-10-10 15:09:37 1281

原创 selenium 模拟手机浏览器操作 click点击/tap触摸元素无效的解决方法

我遇到的问题获取到登录按钮的 xpath，且可以保证 xpath 正确无误点击登录按钮，无法正常跳转到登录成功页 from selenium import webdriver from selenium.webdriver.chrome.options import Options mobile_emulation = {&quot;deviceName&quot;: &quot;iPhone X&quot;} op...

2018-10-09 11:10:03 7722

转载 selenium+python自动化84-chrome手机wap模式（登录淘宝页面）

selenium+python自动化84-chrome手机wap模式（登录淘宝页面）前言遇到的问题Chrome手机模式TouchAction参考代码转载自：https://www.cnblogs.com/yoyoketang/p/7942275.html 前言 chrome手机wap模式登录淘宝页面，点击验证码无效问题解决。切换到wap模式，使用TouchActions模块用tap方法触摸我...

2018-10-08 16:09:25 1891

原创 mac Chromedriver 安装存放路径

mac Chromedriver 存放安装路径目前在使用robotFramework/Selenium时，一直卡在唤起Chrome的坑上，在网络上找了各种方法均无法正常解决问题，经过一番研究，终于搞定，步骤如下： Check你的Chrome版本，不同的Chrome版本，需要对应版本的Chromedriver，如果版本没对应上，则无法正常唤起Chrome，例如目前最新的ChromeDri...

2018-09-18 11:55:18 6462 1