- 博客(15)
- 资源 (6)
- 收藏
- 关注
原创 python爬取xici的免费代理、并验证(重点、清楚)
网上爬取xici的帖子很多,但是验证都说的不是很清楚,这里我会认真给大家解释这里我写了一个代理类proxy,写了四个方法(个人写法不必在意),get_user_agent(得到随机use-agent,请求头中最重要的一个)、get_proxy(爬取代理IP)、test_proxy(验证代理可用性)、store_txt(将可用的代理保存到txt文件中。1.爬取:headers是请求头,cho...
2019-01-30 13:27:19 3344 1
原创 python装饰器的方法:特性(property)、静态方法(staticmethod)、类方法(classmethod)
python装饰器的三种方法介绍及应用笔记, 用图片格式分享给大家。
2019-01-27 17:39:39 568
原创 Django创建web项目流程
下面是django创建web项目的基本流程,分享给大家:下一篇:Django简介和MVC、MTV的初识 https://blog.csdn.net/Chenftli/article/details/86557905
2019-01-27 17:34:06 894
原创 Django模型的流程知识点与认识
学习整理的Django模型Model的流程知识点与认识的xmind笔记,现在分享出来,供大家参考:下一篇:Django模板 https://blog.csdn.net/Chenftli/article/details/86667087...
2019-01-27 16:24:07 543
原创 Django视图View的一些具体流程认识
这个是之前学习时整理的笔记,Django视图View的一些流程写法,总结为xmind,用图片导出下一篇: Django模型 https://blog.csdn.net/Chenftli/article/details/86667027...
2019-01-27 16:16:05 637
原创 Django的简介和MVC及MTV的初步认识
已经总结了好几个月了,一直苦于没时间发,加上后来又忘记。现总结为xmind文件,我将它导出成图片的格式,便于发文。 下一篇:Django视图 https://blog.csdn.net/Chenftli/article/details/86666949...
2019-01-27 15:45:03 607
原创 接上一篇appium安装碰到的问题ANDROID_HOME is NOT set! ,JAVA_HOME is NOT set!
1.ANDROID_HOME is NOT set!2. JAVA_HOME is NOT set!这两个问题都是一个原理就是AndroidSDK、Java的JDK没安装,即使安装了也没配置环境变量。解决问题:AndroidSDK:下载androidSDK,这里我是直接用下载安装的Android Studio的,而且安装完成后,默认的sdk工具包的路径是'/Users/你自...
2019-01-26 14:52:59 11085 1
原创 appium的安装及坑Error: Could not detect Mac OS X Version from sw_vers output,TypeError: Cannot read prope
Appium的安装大体有两种方式: 1) 先安装配置nodejs的环境,然后通过npm对appium进行安装 2)直接下载官网提供的dmg包安装,dmg里面已经有nodejs的环境和appium的可执行文件本着从简的原则,本文选择了第二种,也是对新手比较友好的一种,如果有兴趣可以尝试一下第一种官网:https://bitbucket.org/appium/appium....
2019-01-25 18:43:48 1043
转载 pyodps中的apply用法
apply在pandas里非常好用的,那在pyodps里如何去使用,还是有一些区别的在pyodps中要对一行数据使用自定义函数,可以使用 apply 方法,axis 参数必须为 1,表示在行上操作。apply 的自定义函数接收一个参数,为上一步 Collection 的一行数据,用户可以通过属性、或者偏移取得一个字段的数据。iris.apply(lambda row: row.sep...
2019-01-25 13:23:40 2023 1
原创 pyodps中一些经验:取分组排序后的第一条数据
pyodps中有很多本来在pandas中一个API解决的东西却要想半天才能搞定。pandas中在groupby后只要用first就可以去出分组后的第一行。例如:# 以student_id为分组列,然后取出分组后每组的第一条数据df_stu_frist_course = df_stu_course.groupby('student_id').first()然而pyodps中却很坑...
2019-01-24 18:57:45 5872
原创 建数仓表时TypeError: expected type 'int' but type 'datetime.date' found
一直在maxcomputer上用pyodps建数仓表,讲讲其中一个巨大的坑就是它存储时间的时候是最后都是转化成时间戳存储的,如果你想把datetime类型的日期取出date存进去就会报:TypeError: expected <type 'int'> but <type 'datetime.date'> found例如: # pay_time是...
2019-01-23 09:50:32 1183
原创 linux操作系统基础及命令格式
linux的内核(kernel):内核功能:进程管理、内存管理、文件系统、硬件驱动、网络功能、安全机制linux基本设计原则: 1. 由目的单一的小程序组成,组合小程序完成复杂任务 2. 一切皆文件 3.尽可能规避捕获用户接口 4. 配置文件保存为纯文本格式linux的接口:(主要是CLI接口) GUI接口:图形界面接口...
2019-01-19 17:30:21 626
转载 分享一篇关于互联网行业以及软件的自动化测试的认识以及学习博客
作者写的很用心,受益匪浅。谢谢,也分享给更多的人行业分析:http://www.cnblogs.com/beer/p/4605133.htmlpython自动化测试合集:http://www.cnblogs.com/beer/p/6381327.html...
2019-01-05 11:14:38 1110
ELK日志系统整套安装资源
2022-04-22
canal-阿里增量日志解析组件-1.1.5
2022-04-06
flink-connector-kafka1.13.6
2022-04-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人