[Python知识库] python的urllib库简介

开发: C++知识库 Java知识库 JavaScript Python PHP知识库人工智能区块链大数据移动开发嵌入式开发工具数据结构与算法开发测试游戏开发网络协议系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑笔记本显卡显示器固态硬盘硬盘耳机手机 iphone vivo oppo 小米华为单反装机图拉丁

-> Python知识库 -> python的urllib库简介 -> 正文阅读

[Python知识库]python的urllib库简介

python的urllib库简介

urllib库用来实现：向服务器发送请求，得到服务器响应，获取网页响应。
urllib包括以下内容：1、request模块；2、error模块；3、parse模块；4、robotparse模块。
1、request模块：HTTP请求模块，可以用来模拟发送请求，只需要传入URL 额外参数就可以模拟浏览器访问页面的过程。
2、error模块：异常处理模块，检测请求是否报错，捕捉异常错误，进行重试或者其他操作，保证程序不会终止。
3、parse模块：工具模块，提供许多URL 处理方法。如拆分、解析、合并等。
4、robotparser模块：识别网站的robots.txt文件。判断那些网站可以爬