别只会用requests了！urllib与urllib3深度解析：Python爬虫的底层基石

在Python爬虫圈，requests库几乎是“开箱即用”的代名词。但当你深入阅读Scrapy、Elasticsearch-py、boto3等工业级框架的源码时，会发现它们底层依赖的并非requests，而是urllib3。而更底层的urllib，则是Python标准库中所有网络请求的起点。

很多开发者对这两个模块的认知停留在“难用”和“过时”上。事实上，理解urllib是掌握HTTP协议本质的必经之路，而掌握urllib3则是构建高可靠采集系统的工程基础。本文将从零开始，深度拆解两者的核心机制、隐性陷阱与实战技巧，帮你跳出“API调用员”的舒适区。

一、 urllib：标准库的双刃剑

urllib是Python内置的HTTP客户端，无需安装任何第三方包。它由四个子模块组成，各自职责分明但也因此显得割裂。

1. 四大子模块速览