[网络协议]爬虫入门学习---百度翻译

目录

代码如下：

post请求与get请求

共同点：

区别：

利用requests模块来抓取百度翻译的这个部分：

也就是实现局部页面的抓取。

代码如下：

import requests
import json
# 1.指定url
post_url = "https://fanyi.baidu.com/sug"
# 2.进行UA伪装
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36 Edg/96.0.1054.62'
}
# 3.post请求参数处理同get请求的参数处理
word = input('请输入单词：')
data = {
    'kw': word
}
# 4.请求发送
response = requests.post(url=post_url, data=data, headers=headers)
# 5.获取响应数据：json()获取的是obj（对象）（如果确认响应数据为json类型才可使用）
dic_obj = response.json()
# 6.持久化存储
file = word+'.json'
fp = open(file, 'w', encoding='utf-8')
json.dump(dic_obj, fp=fp, ensure_ascii=False)

此处运用到post请求，获取的是json类型的数据，

post请求与get请求

共同点：

都是将数据传送到服务器

区别：

GET：从服务器请求数据后获取服务端数据

POST：就是发送、提交。向服务器提交/发送要被处理的数据。

在此处体现在是否携带参数。