- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 五种不同的微博评论数据获取方法
接下来简单介绍五种不同的微博评论数据获取方法。第一种方式:有4种不同的微博登录方式,m.weibo.cn m.weibo.com(电脑端打不开) weibo.cn weibo.com, 今天我们主要使用m.weibo.cn。1.登录网址https://m.weibo.cn/detail/45027259848874042.注意:要爬评论是需要先登录的,通过登录获取cookie,之后的请求均携带此cookie。有了cookie了,接下来就是按照分析的规则进行评论的爬取接...
2020-05-10 19:28:22
5074
原创 如何快速的获取微博内容?
如何快速的获取微博内容?(只需要微博内容、发微博时间、微博作者三类信息)注:不需要编程哦~用到的工具有txt文档、word、excel。1.在电脑上登录网址 https://m.weibo.cn/2.在顶端的搜索框输入关键词,如“居家学习”3.拖动页面右侧的滚动条一直向下拉,一直拉到所有内容加载完成。4.此时,按Ctrl+A,全选,打开一个txt文档,可命名为“居家学习-初始数据”,将所有内容粘贴进去。这下我们就暂时得到了网页上面的所有数据咯~不过此时的数据格式不太好啦,还要进行其他操作
2020-05-08 22:06:30
1335
原创 win10系统pip时出现超时报错(timeout)的解决方法
解决方法1.在自己的用户文件夹下(例如我的是C:\Users\sxy)建立一个名为pip的文件夹,网上也有大神说是在用户文件夹下的Roaming文件夹下,我自己试了下没成功,不知是否与电脑有关。2.文件夹中建立一个pip.ini文件,里面写入内容[global]timeout = 60000index-url = https://pypi.tuna.tsinghua.edu.c...
2020-02-11 16:12:46
1259
原创 利用python爬取网页选考要求数据
爬取背景:福建省发布了选考要求数据,想要获取数据进行分析,无奈数据量太大需求分析:要爬取数据的网站为http://fj.101.com/gaokao/#/,需要将数据存储为csv格式。爬取代码如下# coding=gbkimport requests # 引入爬虫所需的requests模块from bs4 import BeautifulSoup # 引入BS模块im...
2019-09-06 18:53:17
334
原创 使用python实现字典格式的文件利用key取value并写入txt或者csv文件
# coding=gbk#--------------------------------利用key取value-----------------------------------------------import jsonitems= {"totalPages":33,"numberOfElements":20,"totalElements":647,"content":[{"id...
2019-09-05 20:44:30
2297
原创 从第一个微信小程序实战中学到了什么?
1.小程序的基本文件配置新建小程序项目,选择目录后,在本地的目录下会自动生成以下几个文件: ├─ pages/ ······································ 页面目录│ ├─ index/ ··································· index页面│ │ ├─ index.js ······················...
2019-02-08 20:58:10
244
原创 微信小程序入门:初步了解官方文档(循环、视图容器、icon、image)
今天是正式学习微信小程序的第一天,学习微信小程序先从了解官方文档开始吧。这一节开始学习微信小程序官方文档中的for循环、视图容器、icon、image等。打开index文件夹下的index.wxml,接下来可以开始我们的表演啦。 1.使用for循环打印数组、打印九九乘法表、打印n遍同样的话效果如下:源码如下:<!--for循环实例--><v...
2019-02-02 22:52:06
1133
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人