donggou4575-CSDN博客

转载 python全栈(中国历史天气可视化系统)

在前面博客中写过python爬虫爬取各个城市历史天气及数据可视化，感觉还是有点粗糙，本文章是借这个例子抛砖引玉，写出个更NB的python全栈项目。此项目预览页面全国各城市天气可视化系统scrapy抓取全国各城市的历史天气创建项目及准备工作创建项目scrapy startproject lishitianqi创建爬虫脚本文件（考虑到tianqi...

2019-09-09 17:44:00 1415

转载 cnblog优化指南

为什么要优化cnblog用了一段时间，发现好多问题编辑器功能不足，影响编辑效率美化不足，影响视觉体验功能优化自动添加目录根据h2,h3标签自动生成目录，点击目录的指定条目可以跳转的指定类容，每个内容小标题上都有回到顶部目录按钮。我只做了两级目录，只有h2存在时才生成目录，且存在h3时，h3是h2的子目录，代码如下：<scr...

2019-09-06 01:29:00 618

转载 Mysql日志详解

错误日志错误日志会记录如下信息mysql执行过程中的错误信息mysql执行过程中的告警信息event scheduler运行时所产生信息mysq启动和停止过程中产生的信息主从复制结构中，重从服务器IO复杂线程的启动信息错误日志相关参数MariaDB [(none)]> show variables where -> ...

2019-09-05 21:07:00 314

转载 scrapy抓取所有网站域名

需求分析从一个门户网站出发，试图爬取该门户网站所有链接，如此递归下去，发现新域名则保存起来，每个域名网站只爬取一次。有了这些数据在通过外部DNS获得IP，就可以自己搭建DNS服务器了创建项目创建一个项目，名叫crawl_all_domainnamescrapy startproject crawl_all_domainname创建爬虫脚本domai...

2019-09-04 01:27:00 980

转载 python设计模式

创建型模式工厂模式定义了一个用于创建对象的接口，让子类决定实例化哪一个类，使一个类的实例化延迟到其子类。#鼠标基类class Mouse: pass#戴尔鼠标类class DellMouse(Mouse): pass #惠普鼠标类class HpMouse(Mouse): pass#鼠标...

2019-09-02 14:18:00 117

转载 Redis集群搭建

1. Redis环境下载redis工具包和源代码https://github.com/microsoftarchive/redis/releasesredis-trib.rb在源码的src目录下，后面需要用到2. Ruby环境redis的集群创建工具redis-trib.rb需要ruby环境才能运行，windows安装包如下，安装时勾选添加的环境变量下...

2019-09-01 20:55:00 134

转载深入理解Redis

Redis协议 Redis 的通信协议是基于文本的，且以行为划分，每行以 \r\n 结束。每一行都有一个消息头，消息头共分为5种分别如下:+表示一个正确的状态信息，具体信息是当前行 + 后面的字符；- 表示一个错误信息，具体信息是当前行－后面的字符；* 表示消息体总共有多少行，不包括当前行,* 后面是具体的行数；$ 表示下一行数据长度，不包括换行符长度 \r\n, $...

2019-08-30 22:45:00 104

转载 Python实现常用查找与排序算法

查找算法二分查找import doctestdef binary_search(alist, item): """ >>> alist=[1,3,4,7,11,18,29] >>> binary_search(alist,1) 0 >>> binary_sea...

2019-08-27 21:23:00 136

转载 python爬虫爬取各个城市历史天气及数据可视化

前言：　　爬取网站www.tianqihoubao.com上各城市的历史天气数据，并利用matplotlib将数据可视化。　　代码实现： 1 import asyncio 2 import aiohttp 3 from lxml import etree 4 import re 5 from collections import ...

2019-08-21 23:07:00 3670