python之爬虫基础（1）

目录

爬虫基础

1.1 HTTP 基本原理

1.1.1 URI和 URL

1.1.2超文本

?1.1.3 HTTP 和HTTPS

1.1.4 HTTP 请求过程

1.1.5 请求

---

爬虫基础

在写爬虫之前，我们还需要了解一些基础知识，如HTTP原理、网页的基础知识、爬虫的基本原理、Cookies的基本原理等。本章中，我们就对这些基础知识做一个简单的总结。

1.1 HTTP 基本原理

在本节中，我们会详细了解 HTTP的基本原理，了解在浏览器中敲入URL 到获取网页内容之间发生了什么。了解了这些内容，有助于我们进一步了解爬虫的基本原理。

1.1.1 URI和 URL

这里我们先了解一下URI和URL,URI的全称为Uniform Resource Identifier,即统―资源标志符，URL的全称为Universal Resource Locator，即统一资源定位符。
举例来说，https://github.com/favicon.ico是 GitHub的网站图标链接，它是一个URL，也是一个URI。即有这样的一个图标资源，我们