小玉玉丸子-CSDN博客

原创爬虫的个人总结

1 最近总是要爬取一些东西，索性就把Python爬虫的相关内容都总结起来了，自己多动手还是好。（1）普通的内容爬取（2）保存爬取的图片/视频和文件和网页（3）普通模拟登录（4）处理验证码登录（5）爬取js网站（6）全网爬虫（7）某个网站的站内所有目录爬虫（8）多线程（9）爬虫框架Scrapy 一，普通的内容爬取 coding=utf-8import...

2018-08-07 19:02:04 3754

原创软件实施流程

主要项目阶段阶段组成主要里程碑可交付成果启动阶段编制总体项目计划签署的《总体项目计划》启动会项目启动会签署的《项目实施协议》需求调研阶段需求分析报告确认需求调研结束签署的《需求分析报告》软件实现软件功能确认软件功能确认签署的《软件功能确认表》数据初装用户签署初装计划及初装培训计划签署的《初装计划及初装培训计划》初装检查及总结数据初装完成《数据初装总结表...

2018-12-17 11:38:10 4393

转载 Scrapy框架爬虫小说网工作流程

1.需求工具 pycharm 小说网的域名 (www.qisuu.com) 第一步—–创建文件创建成功后显示如图:这里写图片描述第二步——将创建在桌面上的scrapy文件用pycharm打开: 这是创建成功后在pycharm中的显示这里写图片描述pycharm左下角打开 Terminal 这里写图片描述打开后如图我第一次键入了一条命令提示爬虫名字不能和项目名称一样...

2018-09-15 12:06:05 623

转载 python 总结的面试题

1、一行代码实现1–100之和利用sum()函数求和2、如何在一个函数内部修改全局变量利用global 修改全局变量3、列出5个python标准库os：提供了不少与操作系统相关联的函数sys: 通常用于命令行参数re: 正则匹配math: 数学运算datetime:处理日期时间4、字典如何删除键和合并两个字典del和update方法5、谈下p...

2018-08-08 18:34:09 262

原创项目环境搭建

python3.6 django-1.111. Python3.6安装与配置1.1 采用apt方式安装 (建议方案) 在ubuntu 16.04版本中，系统默认安装了python 2.7和3.5版本，因为系统本身用到python的程序，删除默认的版本又担心系统有问题，那有没有办法同时在安装和使用python 3.6版本呢？(1)、配置软件仓库，因为pytho...

2018-08-08 08:46:59 140

原创 linux常用命令

一、linux文件系统结构~ sudo apt-get install tree tree --help #查看帮助 tree -L 1 #显示文件目录 ~~ root@ubuntu16 /# tree -L 1 . #系统根目录 ├── bin #存放常见的命令 ├── boot #系统启动文件和核心文件都在这...

2018-08-08 08:45:24 246

原创 16道面试题

1.Python是如何进行内存管理的？答:从三个方面来说,一对象的引用计数机制,二垃圾回收机制,三内存池机制一、对象的引用计数机制Python内部使用引用计数，来保持追踪内存中的对象，所有对象都有引用计数。引用计数增加的情况：1，一个对象分配一个新名称2，将其放入一个容器中（如列表、元组或字典）引用计数减少的情况：1，使用del语句对对象别名显示的销毁2，引用超...

2018-08-01 10:35:28 156

原创 Python工程师面试必备知识点

1.到底什么是Python？ Python是一种解释型语言。这就是说，与C语言和C的衍生语言不同，Python代码在运行之前不需要编译。其他解释型语言还包括PHP和Ruby。Python是动态类型语言，指的是你在声明变量时，不需要说明变量的类型。你可以直接编写类似x=111和x=”I’m a string”这样的代码，程序不会报错。Python非常适合面向对象的编程（OOP），因为它支持...

2018-07-31 15:48:54 261

原创冒泡排序

冒泡排序和快速排序的性能分析：平均情况最好情况最坏情况稳定性冒泡排序 o(n^2) o(n) o(n^2) 稳定快速排序 o(n*logn) o(n*logn) o(n^2) 不稳定 .从最好情况来看冒泡排序比快速排序性能更好，也就是说如果你的排序元素基本有...

2018-07-31 12:42:18 134

原创 MYSQL基础

火星小编博客园首页新随笔联系订阅管理随笔-25 文章-0 评论-7 MySQL基础(非常全) MySQL基础一、MySQL概述1、什么是数据库？　答：数据的仓库，如：在ATM的示例中我们创建了一个 db 目录，称其为数据库2、什么是 MySQL、Oracle、SQLite、Access、MS SQL Server等？　答：他们均是一个软...

2018-07-31 11:57:38 94

原创 Xadmin 改造Django后台

Django-Xadmin使用我们使用xadmin作为Django框架的后端管理平台1 安装xadmin下载xadmin https://github.com/nocmt/Xadmin1.11.x.git将主目录的xadmin拷贝到extra_apps目录下加入依赖包，(venv) $ pip freeze > xadmin_requirements.txt ...

2018-07-26 16:56:20 1275

原创 python+flask项目实战开发

python虚拟环境的介绍与安装因为python的框架更新迭代很快，有时候需要在一个电脑上存在一个框架的多个版本，这个时候虚拟环境就可以解决这个问题。通过以下命令安装虚拟环境 (cmd命令)pip install virtualenvmkdir Virtualenv //创建虚拟环境目录 cd virtualenv virtualenv flask-env3.激活虚拟环境...

2018-07-26 16:50:29 13111 1

qq_42803940的博客