- 博客(5)
- 收藏
- 关注
RSS订阅原创 mongodb数据库常用命令操作
终端命令 1：mongo 启动MongoDB shell客户端的命令 2: mongod 启动MongoDB数据库服务的命令，三种启动方式（指定数据库目录–dbpath=/xxxxx/xxxxx，以配置文件方式启动-f /etc/mongodb.cnf，以守护进程方式启动–logpath=/data/db/mongodb.log --fork） 数据库基本命令和用户类命令 1：关闭守护进...
2018-12-16 20:27:25
197
原创 转换请求头参数的python脚本，自动添加引号
在爬虫的时候好多朋友都在纠结怎么快速请求头加引号和逗号隔开，每次都要一个一个加引号，很费时间，在这里给大家分享一个自己写的脚本，把请求头复制进去运行，再复制出来即可用，代码如下 headers= """ Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8 Acce...
2018-12-13 12:47:19
1976
3
原创 python2与pyhton3爬取百度贴吧
使用python3和python2爬取百度贴吧数据保存到本地，仅作为python2和python3在urllib2模块使用上的区别的记录 python2版本 #coding:utf-8 # import urllib.request import urllib2 # import urllib.parse import urllib class BaiduSpider(object): ...
2018-12-13 12:31:28
158
原创 在docker中安装Elasticsearch
1.安装docker sudo apt install apt-transport-https ca-certificates software-properties-common curl 2.添加 GPG 密钥，并添加 Docker-ce 软件源，这里还是以中国科技大学的 Docker-ce 源为例 curl -fsSL https://mirrors.ustc.edu.cn/docke...
2018-12-13 12:19:48
358
原创 带你看懂python2与python3在字符编码方面的区别
从python2更新到python3，相信每个人都遇到过爬取网页编码错乱，编码转码混淆等问题，在这里，笔者详细说明一下python2与python3之间的字符编码问题，也是个人在使用过程中的一些总结。 1. 什么是字符编码： 计算机里所有数据，本质都是二进制表示。 先带大家来看下什么是编码 这里用的是python3环境，python3环境默认字符串的字符类型是str，默认编码类型是Unico...
2018-12-10 21:33:46
310
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人