python爬虫——http协议与https协议

1、http协议

       概念：服务器和客户端进行数据交互的一种形式

2、常用请求头信息

（1）User-Agent：请求载体的身份标识

（2）Connetction：请求完毕后的连接状态（断开连接、保持连接）

3、常用响应头信息

Content-Type：服务器响应回客户端的数据类型

4、https协议

安全的超文本传输协议

5、加密方式

（1）对称密钥加密（对称密钥加密又叫专用密钥加密或共享密钥加密，即发送和接收数据的双方必使用相同的密钥对明文进行加密和解密运算。 对称密钥加密算法主要包括：DES、3DES、IDEA、RC5、RC6等。）

（2）非对称密钥加密（非对称密码体制也叫公钥加密技术，该技术是针对私钥密码体制 (对称加密算法)的缺陷被提出来的。 与对称密码体制不同，公钥加密系统中，加密和解密是相对独立的，加密和解密会使用两把不同的密钥，加密密钥 (公开密钥)向公众公开，谁都可以使用，解密密钥 (秘密密钥)只有解密人自己知道，非法使用者根据公开的加密密钥无法推算出解密密钥，这样就大大加强了信息保护的力度。 公钥密码体制 不仅解决了密钥分配的问题，它还为签名和认证提供了手段。 非对称密码算法有很多，其中比较典型的是 RSA算法 ，它的数学原理是大素数的分解。 [1] 加密技术一般分为对称式加密以及非对称式加密两类。 采用的比较广泛的是对称式加密，主要特点是加密和解密使用同一个密钥。）

（3）证书密钥加密