- 博客(8)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 对不起，2020，我把你过得很糟
一个词形容 2020：离谱。后来想了想，种种离谱又都是有迹可循的：最初奇怪的尝鲜招来了疫情，随后不断在人群中扩散，生活节奏开始混乱，各种震惊的消息也被无限放大——好像再离谱的事情放到 2...
2020-12-31 18:13:49
230
原创 Git 更新代码并提交笔记
按照工作中使用的 git 代码顺序，简单记录：1.拉取最新代码到本地git pull2.将本地修改完成的代码添加到暂存区git add .不要漏掉最后的点3.检查文件状态git status -s4.将暂存区代码提交到本地仓库git commit -m "自定义信息"引号中信息自己随便写，标记此次提交的信息5.将本地分支推送到远程分支git push -u origin master这里 origin 是远程分支，master 是本地分支，如果本地分支是用了其他，也可以相
2020-12-14 21:29:16
637
原创 NodeJS 由 header 参数 content-length 导致的爬虫失败
在爬取一系列子页面时，对 header 参数配置一样，但有几个页面却抓取失败，经过一番比对，发现是子页面参数中 content-length 设置不同导致的。解决方案，删去 content-length 参数，添加 “transfer-encoding”: “chunked”具体细节可参考...
2020-12-14 17:10:34
998
原创 如何快速比对表格数据
最近在倒腾一些表格数据，遇到这么个问题：先前下载了一批数据，等再次更新下载时，数目却变少了，我需要快速定位到缺失的条目并探究原因。如图，左侧 10 条数据是先前下载的，右侧少了 1 条（...
2020-12-11 15:13:11
665
原创 NodeJS 爬虫笔记一，熟悉爬虫相关模块
这两天开始接触 NodeJS 爬虫，网上的案例比较笼统和稀疏，也很难能对应起来。工作需要爬虫的任务，我也是先用 Python 写了个能跑的，之后摸索着用 NodeJS 来实现。本想找个案例比对着写下 NodeJS 和 Python 爬虫的区别的，没找到合适的 api 数据接口做展示，索性先略过，之后遇到合适的案例再来分享。今天主要的进展是将 Python 通过 requests 爬虫、pandas 将数据写入 csv 表格文件的过程，通过 NodeJS 做到了大致实现。先是通过 JS 的 request
2020-12-04 20:56:19
391
原创 JavaScript学习笔记三
JavaScript学习笔记三2.JavaScript 引用类型2.1 Object 类型2.2 Array 类型转换方法2.3 Date 类型2.4 RegExp类型2.5 Function 类型2.6 基本包装类型目标是学习 NodeJs 爬虫，所以先来回顾下 JavaScript 的基础知识点。第一阶段先学习 《JavaScript高级程序设计（第3版）》书中的第1,3,4,5,6,7,20,22,24章。本篇笔记主要记录书中知识要点。2.JavaScript 引用类型2.1 Object 类型
2020-12-02 16:08:04
156
原创 JavaScript学习笔记二
JavaScript学习笔记二1.JavaScript 语言基本概念1.5 操作符1.6 语句if 语句do-while 语句while 语句for 语句for-in 语句label 语句break、continue 语句with 语句switch 语句1.7 函数目标是学习 NodeJs 爬虫，所以先来回顾下 JavaScript 的基础知识点。第一阶段先学习 《JavaScript高级程序设计（第3版）》书中的第1,3,4,5,6,7,20,22,24章。本篇笔记主要记录书中知识要点。第一章主要介绍
2020-12-02 14:56:21
516
原创 JavaScript学习笔记一
JavaScript学习笔记一1.JavaScript 语言基本概念1.1 语法注意大小写标识符注释语句关键字保留字变量数据类型目标是学习 NodeJs 爬虫，所以先来回顾下 JavaScript 的基础知识点。第一阶段先学习 《JavaScript高级程序设计（第3版）》书中的第1,3,4,5,6,7,20,22,24章。本篇笔记主要记录书中知识要点。第一章主要介绍 JavaScript 历史和组成部分，不作记录。1.JavaScript 语言基本概念1.1 语法注意大小写变量、函数名和操作符
2020-12-01 21:40:08
170
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人