❶ Urllib库基本使用、详解（爬虫，urlopen，request，代理ip的使用，cookie解析，异常处理，URL深入解析）
Urllib库基本使用及详解：
Urllib概述：
- Urllib是Python的内置HTTP请求库，专门用于处理URL地址。
- 在Python3中，Urllib得到了更新与优化，功能更加丰富。
urlopen函数：
- urllib.request.urlopen函数用于打开并读取URL链接。
- 参数包括URL地址、可能的数据、超时时间、证书文件等。
- 返回的是一个HTTP响应对象，包含状态码、响应头和内容等。
request模块：
- request模块提供了更高级的HTTP请求功能，如设置请求头、自定义请求方法。
- 使用urllib.request.Request类可以构建请求对象，然后传递给urlopen函数。
代理IP的使用：
- 通过配置请求参数，可以使用代理服务器来发送HTTP请求。
- 使用urllib.request.ProxyHandler类来设置代理服务器，然后将其添加到请求对象的处理器中。
Cookie解析：
- Cookie是网站用来跟踪用户会话的一种机制。
- Urllib库中的urllib.request.HTTPCookieProcessor类可以处理Cookie，帮助解析网站的Cookie信息。
- 通过这个处理器，可以实现登录状态的保持或会话跟踪。
异常处理：
- 在进行HTTP请求时，可能会遇到各种错误。
- Urllib库提供了异常处理机制，如urllib.error.URLError和urllib.error.HTTPError等异常类。
- 通过捕获这些异常，可以确保程序在请求过程中出现错误时仍能正常运行。
URL深入解析：
- 使用urllib.parse模块可以对URL进行深入解析。
- urlparse函数用于解析URL的各个组成部分。
- urlunparse函数用于根据解析后的组件构造URL。
- urljoin函数用于将基本URL与相对URL合并成一个完整的URL。
- urlencode函数用于将字典或键值对序列编码为URL查询字符串。
综上所述，Urllib库是一个功能强大的HTTP请求库，通过掌握其基本使用和详解内容，可以更加高效地进行网络爬虫和数据抓取工作。