94v587-CSDN博客

原创虚拟环境的配置

虚拟环境的安装及使用virtualenv 安装 pip install vitualenv 测试： virtualenv --version 创建： vitualenv env_name 激活： source env_name/bin/activate 退出： dea...

2018-11-14 21:30:56 201

原创 nodejs导出表格

这里使用的excel-export来导出表格，使用前需要安装const nodeExcel = require('excel-export');router.get('/exportexcel',async (ctx) => { async function readydata() { 获取数据 let exceldata = 填充的数据;...

2018-09-22 15:24:02 843 1

原创 Python数据分析与挖掘学习笔记二:Numpy

用于处理任意维度的数组Numpy（Numerical Python）是一个开源的Python科学计算基础库，包含：一个强大的N维数组对象 ndarray 广播功能函数整合C/C++/Fortran代码的工具线性代数、傅里叶变换、随机数生成等功能同时Numpy是SciPy、 Pandas等数据处理或科学计算库的基础numpy与Python原生list相比的优势n...

2018-08-17 11:23:59 676

原创 Python数据分析与挖掘学习笔记一:库和环境搭建

概念介绍:数据分析: 用适当的统计分析方法对收集来的大量数据进行详细研究和概括总结，以求最大化地发挥数据的作用，提取有用信息和形成结论数据挖掘: 从大量数据中通过算法搜索隐藏于其中信息的过程.数据分析的三大作用：现状分析、原因分析、预测分析。数据分析的流程:1. 明确目的与思路：先决条件、提供方向2. 数据收集：数据库、其他媒介(使用爬虫, 网...

2018-08-17 10:24:27 598

原创 requests和urllib模块

requests模块的介绍：能够帮助我们发起请求获取响应response常见的属性： response.text 响应体 str类型 respones.content 响应体 bytes类型 response.status_code 响应状态码 response.request.headers 响应对应的请求头 response.headers 响应头 response.request._...

2018-07-13 09:33:51 1879

在发送请求，获取响应的过程中就是发送http或https的请求，获取http或https的响应HTTP: 超文本传输协议, 默认端口号80HTTP + SSL(安全套接字层)，即带有安全套接字层的超本文传输协议默认端口: 443浏览器发送HTTP请求的过程浏览器先向地址栏中的url发起请求，并获取相应在返回的响应内容（html）中，会带有css、js、图片等url地址，以及ajax代码，浏览...

2018-07-11 14:05:49 416

原创什么是爬虫?有哪些用途

数据的来源：去第三方的公司购买数据(比如企查查)去免费的数据网站下载数据(比如国家统计局)通过爬虫爬取数据人工收集数据(比如问卷调查)爬虫的概念：模拟浏览器发送网络请求，接收请求响应爬虫的用途: 12306抢票,网络投票等爬虫的分类: 分为通用爬虫(搜索引擎、聚焦爬虫(12306抢票) 、增量式网络爬虫（Incremental Web Crawler）和深层网络爬虫爬虫获取的数据的用途...

2018-07-11 11:44:51 22233 2

原创页面静态化

页面静态化的作用: 1. 避免每次访问都要查询数据库的⼤大量量数据 2. 采用主⻚页静态的方式是为了提升主页的访问效率,因为主页是网站访问量最大的页面1. 准备主⻚页静态化工具方法(contents.crons.py)from collections import OrderedDictfrom django.conf import settingsfrom django.temp...

2018-07-01 09:43:03 216

原创用Docker安装和运行FastDFS流程

1.获取fastfds镜像 docker load -i ⽂文件路路径/fastdfs_docker.tar 使用下载好的文件安装 docker image pull delron/fastdfs 2.运行trackerdocker run -dti --network=host --name tracker -v /var/fdfs/tracker:/var/fdfs del...

2018-06-30 11:30:03 537

原创 FastDFS自定义文件存储系统

自定义文件存储系统, 前提是使用Docker安装和运行FastDFS.1.⾃自定义⽂文件存储系统的类from django.core.files.storage import Storageclass FastDFSStorage(Storage):...2. 内部实现class FastDFSStorage(Storage): """⾃自定义Django⽂文件存储系统""" ...

2018-06-30 11:20:32 2419

原创 >>> from fdfs_client.client import Fdfs_client >>> client = Fdfs_client('meiduo_mall/utils/fastdfs/c

使用shell 运行FastDFS客户端时,执行下面三条命令: 1.from fdfs_client.client import Fdfs_client 2. client = Fdfs_client('male/utils/fastdfs/client.conf') 3. ret = client.upload_by_filename('/home/python/De...

2018-06-30 11:04:15 2662 1

原创 Docker的安装流程

1.更新ubuntu的apt源索引sudo apt-get update2.安装包允许apt通过HTTPS使用仓库sudo apt-get install \ apt-transport-https \ ca-certificates \ curl \ software-properties-common3.添加Docker官方GPG keycurl -fsSL h...

2018-06-28 10:02:05 505

94v587的博客