- 博客(21)
- 收藏
- 关注
RSS订阅原创 解决python -m pip install --upgrade pip 一直升级失败的问题
解决办法，换命令：python -m pip install --upgrade pip -i https://pypi.douban.com/simple
2020-05-17 16:54:30
967
原创 5.python爬虫 - 简单动态网页爬（二）
这次将讲解如何将爬取的内容，保存到本地。代码内容比较多，所需的库比较多，需要一定爬虫基础和pandas数据处理基础，建议用jupyter做直接附上代码，代码有简单的备注：1.引入所需的库：from selenium.webdriver.common.by import By # 寻找id、类等的库from selenium import webdriverfrom sele...
2020-01-09 19:27:06
678
原创 4.python爬虫 - 简单动态网页爬（一）
1.首先要理清静态网页和动态网页的区别：①静态网页指的是网页中没有其他脚本语言（java、php、asp等），只有HTML+CSS（即：超文本标记语言），一般后缀为.html,.htm,或者.xml等。没有数据交互，数据没有动态加载，内容全部在html文件上。②动态网页是指跟静态网页相对的一种网页编程技术。动态网页是有数据交互，连接数据库，还有脚本语言和后台。数据有动态加载。如图动...
2020-01-01 15:37:56
447
原创 3.python爬虫 - 简单静态网页爬（一）
目录1.认识爬虫相关库2.爬虫基本流程：3.下面做一个简单的网页爬起：①获取浏览器头部 User-agent②基本代码③ 完善一下代码，提取作者名称和评论信息：先讲一些基本原理，后面接上案例说明建议把Jupyter和Pycharm都装上1.认识爬虫相关库目前Python有着形形色色的爬虫相关库，按照库的功能，整理如下：2.爬虫基本流程：--...
2019-12-30 16:16:57
941
原创 2.爬虫基本认识 - python爬虫基础（二）
目录1.Python网络编程Socket库①套接字（socket）：②socket协议类型：socket库中的服务器端函数仅供服务器使用③服务器端Socket函数：④客户端Socket函数：socket库中的客户端函数仅供客户端使用⑤公共Socket函数：socket库中的公共函数即可在服务器端使用也可在客户端使用，为通用函数。2.使用Socket进行TCP编程TC...
2019-12-30 10:17:14
406
原创 1.爬虫基本认识 - python爬虫基础（一）
1.认识爬虫前以一张图了解浏览网页的基本流程：2.网络爬虫概念：也被称为网络蜘蛛、网络机器人，是一个自动下载网页的计算机程序或自动化脚本。 网络爬虫就像一只蜘蛛一样在互联网上沿着URL的丝线爬行，下载每一个URL所指向的网页，分析页面内容 3.爬虫分类：①通用爬虫：（百度搜索等）通用网络爬虫又称为全网爬虫，其爬行对象由一批种子URL扩充至整个Web，该类爬虫比较适...
2019-12-28 16:50:50
2225
原创 3.本地客户端连接云服务器readis（一）
①配置好云服务器后，尝试通过本地客户端连接服务器redis可以到github上下载最新版的redis地址是：https://github.com/MSOpenTech/redis/releases②下载到本地并解压，并配置好系统环境变量只需浏览文件夹就可以了如图：非常简单③接着到云服务器官网，点击控制台，复制公网④然后打开dom窗口，Win+R输...
2019-12-27 10:27:53
358
原创 1.了解Scrapy爬虫框架
Scrapy是一个爬虫框架而非功能函数库，简单地说，它是一个半成品，可以帮助用户简单快速地部署一个 专业的网络爬虫。Scrapy爬虫框架主要由引擎（Engine）、调度器（Scheduler）、下载器（ Downloader）、Spiders、Item Pipelines、下载器中间件（Downloader Middlewares）、Spider中 间件（Spider Middlewa...
2019-12-26 20:47:52
425
原创 3.Pycharm的安装与配置
非常简单百度 Pycharm官网https://www.jetbrains.com/或者点击这个点击 Tools会有全家桶软件，如果需要其他的也可以下载虽然不是免费的，不过某宝上的激活码价格非常实惠，一个激活码 全家桶可以用一年点击PyCharm然后点击右上角的Download如果在某宝上买了激活码，建议下载专业版。接下来是安装配置...
2019-10-07 15:26:22
168
原创 2.Python3下载安装配置
非常简单的下载和安装百度 python 进入官网接着。。。下面还有历史各个版本的下载安装教程，直接看官方文档（中文版）即可，很详细https://docs.python.org/zh-cn/3.7/using/windows.html#有点要注意的建议勾上------------------------------------------------...
2019-10-07 14:29:17
150
原创 1.python的基础认识
1、各种语言的对比：机器语言： -通过二进制编码来编写程序 - 执行效率好，编写起来非常麻烦，而且不易开发者的理解 符号语言（汇编）： - 使用符号来代替机器语言 - 编写程序时，无需使用二进制，直接编写符号 - 编写完成后，需将符号转换为机器码，再由计算...
2019-10-07 13:59:27
151
原创 2.ThinkPHP3框架基本认识
1.从框架的文件分类，开始认识TP2.打开Application文件夹3.可以自己手动创建多个文件夹，也可以Copy他们的项目文件夹过来修改，以下看看我项目的目录结构4.下篇文章接着讲...
2019-06-18 10:55:07
202
原创 1.ThinkPHP3框架基本认识
1.MVC结构的开源PHP框架2.助于Web快速开发3.简单易上手4.菜鸟可以在一个月以内开发一个有前后台的具备基本功能网站5.TP官网http://www.thinkphp.cn/
2019-06-18 10:19:35
183
原创 7.创建Maven项目
入门程序： 创建Maven项目； 在src -> main -> webapp下创建WEB-INF目录，并在目录下创建web.xml； 修改Maven默认编译级别： 全局编译级别 -> 修改settings.xml 项目级别修改 -> 项目对应的pom.xml 在Java Resourcese -> src/main/java下写代码，创建包和...
2019-04-24 18:13:59
93
原创 6.Maven的scope属性
Scope依赖作用域也可称作依赖范围：maven中的依赖，会根据程序所处的阶段和场景发生变化，所以maven用scope属性来做限制； compile（默认值）：在编译、运行、测试、打包都有效； provided：编译、测试时有效，运行、打包无效； test：仅在测试时有效； runtime：测试、运行、打包时有效； system：不推荐使用，使用syst...
2019-04-22 23:03:47
185
原创 5、Maven常用命令和命令的生命周期
Maven常用命令： clean： 清理，编译后的目录； compile： 编译，只编译main目录，不编译test中的代码； test-compile：编译test目录中的代码； test： 运行test里边的代码； package： 打包 java项目->打成jar包； web项目->打成war包； install：发布项目到本地仓库，用在打j...
2019-04-19 19:43:58
153
原创 4、简谈Maven的优点
maven由纯Java语言开发，是跨平台的可以在window、linux、mac上使用。 清晰的项目结构； 使用Maven将大型项目按照模块拆分成若干工程，不同的团队维护各自的工程，可大大的提升开发效率；大型商城项目按业务分成商品管理、用户管理、订单管理等等模块。中小型项目按照传统项目分为Web、Service、Dao层，依照员工自身的业务能力分配工作。可一键构建...
2019-04-19 12:46:28
698
原创 3、Maven三种仓库概念：本地仓库、远程仓库、中央仓库
如图：1.阿里云Maven仓库镜像地址:https://maven.aliyun.com/mvn/search2.Maven官方中央仓库地址：https://mvnrepository.com/3.设置阿里云Maven仓库镜像：在settings.xml文件中的mirrors下添加mirror标签； <mirror> <id>al...
2019-04-19 12:27:29
2889
原创 2、配置Maven本地仓库
Maven项目通过坐标的方式从本地仓库获取jar包； 坐标：由公司/组织名(groupId)+项目名/子项目名(artifactId)+版本号(version)组成； 本地仓库：存放很多jar包，供Maven项目使用； Maven通过建立本地仓库索引，可以快速的找到符合要求的jar包，从而解决效率问题； 多个Maven项目都可以从本地仓库获取jar包； 3.设...
2019-04-19 11:03:47
143
原创 1、Maven下载、安装、配置环境变量
Maven是Apache下的项目管理工具，它由纯Java语言开发，可以帮助我们更方便的管理和构建Java项目。Maven入门：下载、安装、配置环境变量Maven； http://maven.apache.org/download.cgi 安装JDK 1.8； 配置环境变量； win + r 打开运行窗口 或者 进入cmd命令窗口； 输入sysdm.cpl打开系统属性 ...
2019-04-19 09:58:02
643
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人