python
DCX_abc
我爱编程!
展开
-
一个简单的爬虫实例
1. 概述本文主要实现一个简单的爬虫,目的是从一个百度贴吧页面下载图片。下载图片的步骤如下:获取网页html文本内容;分析html中图片的html标签特征,用正则解析出所有的图片url链接列表;根据图片的url链接列表将图片下载到本地文件夹中。2. urllib+re实现#!/usr/bin/python# coding:utf-8# 实现一个简单的爬虫,爬取百度贴吧图原创 2018-02-03 15:12:06 · 1254 阅读 · 0 评论 -
Win系统下python3和python2同时安装并解决pip共存问题
特别说明,本文是在Windows64位系统下进行的,32位系统请下载相应版本的安装包,安装方法类似。 使用python开发,环境有Python2和 python3 两种,有时候需要两种环境切换使用,下面提供详细教程一份。1、下载python3和python2进入python官网,链接https://www.python.org/选择Downloads--->Windows,原创 2018-02-03 14:52:52 · 621 阅读 · 0 评论 -
解决pycharm无法导入本地包的问题(Unresolved reference 'XXX')
在用scrapy(python2.7)写爬虫的时候from tutorail.items import DmozItem这一行始终提示没有找到包,实际上已经在本地下载了。 也就是出现 Unresolved reference 'tutorial' 的问题。 当然,其实不只是爬虫,如果你初次导入包是应该也可能会遇见这个问题! 解决办法:1.清除缓存并重启原创 2018-02-03 14:56:45 · 1953 阅读 · 0 评论 -
Windows下的Jupyter Notebook 安装与自定义启动
安装jupyter Notebook之前先要安装python,安装python方法网上有很多,很简单,这里就不赘述了。这是我自定义的Python 的安装目录 (D:\SoftWare\Python\Python36\Scripts)1、Jupyter Notebook和pip 为了更加方便地写Python代码,还需要安装Jupyter notebook。 利用pip安装原创 2018-02-03 15:01:46 · 726 阅读 · 0 评论