- 博客(12)
- 收藏
- 关注
转载 Python-Web应用部署步骤
Python-Web应用部署步骤 假设: 操作系统为原生Ubuntu 18.04 LTS 当前登录用户为xyz Web程序目录: /home/xyz/myblog 虚拟环境运行启动脚本: /home/xyz/runinenv.sh /home/xyz/runinenv.sh内容如下: #!/bin/bash export SOME_ENV=te...
2019-03-07 12:54:00 218
转载 scrapy_redis(分布式爬取)
创建scrapy项目 scrapy startproject 项目名 创建爬虫 scrapy genspider 爬虫名 爬取网站地址 修改spiders下面的py文件 from scrapy_redis.spiders import RedisSpider class ManhuataiSpider(RedisSpider): name =...
2019-03-04 17:46:00 234
转载 git笔记
Git常用命令 克隆代码: 语法:git clone <仓库地址> 示例:git clone https://github.com/geeeeeeeeek/git-recipes.git 查看状态 语法:git status 查看文件修改 语法:git diff <file> 示例:git dif...
2019-03-04 10:40:00 105
转载 scrapy保存数据到mongodb
修改配置文件settings.py添加 ITEM_PIPELINES = { # 'tutorial.pipelines.QQNewsPipeline': 300, 'tutorial.pipelines.QQNewsMongoPipeline':400 } MONGO_URI = 'mongodb://localhost:27017' MONGO_DB = ...
2019-02-22 15:33:00 128
转载 部署virtualenv(虚拟环境)
pip安装virtualenv pip install virtualenv 命令virtualenv就可以创建一个独立的Python运行环境,我们还加上了参数--no-site-packages,这样,已经安装到系统Python环境中的所有第三方包都不会复制过来,这样,我们就得到了一个不带任何第三方包的“干净”的Python运行环境。 virtualenv --no-...
2019-02-22 11:54:00 103
转载 sqlalchemy 流程演示
Select专题 - 准备 # 导入引擎创建函数 from sqlalchemy import create_engine # 导入语句处理函数 from sqlalchemy.sql.expression import text # 导入SQL构造相关函数 ''' from sqlalchemy.sql.expression import ( sel...
2019-02-21 22:45:00 146
转载 SQLAlchemy 增、删、该、查
SQLAlchemy-03-1 Table(表)类方式 - Insert # 导入引擎创建函数 from sqlalchemy import create_engine # 导入语句处理函数 from sqlalchemy.sql.expression import text # 导入元数据、表类 from sqlalchemy import MetaData,...
2019-02-21 22:26:00 391
转载 SQLAlchemy ORM方式操作
SQLAlchemy-ORM方式操作 SQLAlchemy ORM方式操作 引入所需模块 # 创建引擎 from sqlalchemy import create_engine # 引入模型基类声明函数 from sqlalchemy.ext.declarative import declarative_base # 引入列类和基本数据类型 from sq...
2019-02-21 22:10:00 129
转载 pandas简介
pandas-01 参考: pandas手记 Pandas 中文文档:数据结构简介 Pandas速查手册中文版 pandas: powerful Python data analysis toolkit 说明 基础模块导入 import pandas as pd import numpy as np 短名称(别名) df为...
2019-02-21 22:07:00 240
转载 sqlalchemy_mysql
sqlalchemy-mysql 参考: Python之使用Pandas库实现MySQL数据库的读写 SQLAlchemy的简单使用 sqlalchemy学习笔记 python使用sqlalchemy连接mysql数据库 doc: pandas.read_sql doc: pandas.read_sql_query doc: pandas.DataFram...
2019-02-21 22:04:00 106
转载 scrapy配置mysql
在pipeline.py里面新建一个类 class mysqlPipeline(object): def process_item(self,item,spider): ''' 将爬取的信息保存到mysql ''' # 将item里的数据拿出来 # title = item['tit...
2019-02-21 15:51:00 226
转载 Python 使用数据库(SQLite)
SQLite是一种嵌入式数据库,它的数据库就是一个文件。由于SQLite本身是C写的,而且体积很小,所以,经常被集成到各种应用程序中,甚至在iOS和Android的App中都可以集成。 Python就内置了SQLite3,所以,在Python中使用SQLite,不需要安装任何东西,直接使用。 在使用SQLite前,我们先要搞清楚几个概念: 表是数据库中存放关系数据的集合,一个数据库...
2018-07-27 19:57:00 132
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人