一、爬虫的基础简介

1. 什么是爬虫？

• 1.通过编写程序，模拟浏览器上网，然后让其去还联网上抓取数据

2. 爬虫的价值是什么

• 1.实际应用
• 2.就业

3.http协议

一、概念

• 服务器和客户端进行数据交互的一种形式。

二、常用请求头信息

• User-agent：请求载体的身份标识
• Connection：请求完毕后，是断开连接还是保存连接

三、常用响应头信息

• Content-Type：服务器响应为客户端的数据类型

4.https协议

• 表示安全的超文本传输协议。

1.加密方式

• 对称密钥加密： 双方共同持有这个密钥，发送方用这个密钥按照指定的算法将数据加密，再发出去；接收方用这个密钥将接收到的数据解密，以得到真实的数据含义。由于双方都持有这个密钥，而且内容相同，所以叫对称密钥

• 非对称密钥加密：这种加密方式的密钥是一对，发送方用其中的一把钥匙将数据加密，再发出去；接收方用这对密钥的另一把钥匙将数据解密，以得到真实的数据含义。发送方持有密钥中的一把钥匙，接收方持有另外一把。接收方持有的钥匙叫 私钥, 而接收方持有的这把钥匙叫公钥 。两把钥匙不一样，所以叫做非对称密钥加密，也叫做公开密钥算法。

• 证书密钥加密

原文地址：http://www.cnblogs.com/nfsmg/p/16844179.html