爬虫入门学习---百度翻译

爬虫入门学习---百度翻译,第1张

爬虫入门学习---百度翻译

目录

代码如下:

post请求与get请求

共同点:

区别:


利用requests模块来抓取百度翻译的这个部分:

也就是实现局部页面的抓取。

代码如下:
import requests
import json
# 1.指定url
post_url = "https://fanyi.baidu.com/sug"
# 2.进行UA伪装
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36 Edg/96.0.1054.62'
}
# 3.post请求参数处理同get请求的参数处理
word = input('请输入单词:')
data = {
    'kw': word
}
# 4.请求发送
response = requests.post(url=post_url, data=data, headers=headers)
# 5.获取响应数据:json()获取的是obj(对象)(如果确认响应数据为json类型才可使用)
dic_obj = response.json()
# 6.持久化存储
file = word+'.json'
fp = open(file, 'w', encoding='utf-8')
json.dump(dic_obj, fp=fp, ensure_ascii=False)

此处运用到post请求,获取的是json类型的数据

post请求与get请求 共同点:

都是将数据传送到服务器

区别:

GET:从服务器请求数据后获取服务端数据

POST:就是发送、提交。向服务器提交/发送要被处理的数据。

在此处体现在是否携带参数。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5711860.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存