无头浏览器+反检测
无头浏览器:得到浏览器对象后不弹出来,没有可视化界面
selenium被检测:selenium有特征值,可以被网站检测出来
from selenium import webdriver
from time import sleep
from selenium.webdriver.chrome.options import Options # 实现无可视化界面
from selenium.webdriver import ChromeOptions # 实现规避检测
# 实现无可视化界面的操作
options = Options()
options.add_argument('--headless')
options.add_argument('--disable-gpu')
# 实现规避检测(selenium有特征值,防止selenium被检测出来)
options.add_experimental_option('excludeSwitches', ['enable-automation'])
bro = webdriver.Chrome(options=options)
# 无可视化界面(无头浏览器)
bro.get('https://www.baidu.com')
print(bro.page_source)
sleep(2)
bro.quit()
超级鹰基本使用
用于识别验证码
方法使用链接:
??????(33条消息) python3爬虫验证码识别——超级鹰打码平台的使用&实战:识别古诗文网登录页面中的验证码_zep-CSDN博客
#!/usr/bin/env python
# coding:utf-8
import requests
from hashlib import md5
class Chaojiying_Client(object):
def __init__(self, username, password, soft_id):
self.username = username
password = password.encode('utf8')
self.password = md5(password).hexdigest()
self.soft_id = soft_id
self.base_params = {
'user': self.username,
'pass2': self.password,
'softid': self.soft_id,
}
self.headers = {
'Connection': 'Keep-Alive',
'User-Agent': 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0)',
}
def PostPic(self, im, codetype):
"""
im: 图片字节
codetype: 题目类型 参考 http://www.chaojiying.com/price.html
"""
params = {
'codetype': codetype,
}
params.update(self.base_params)
files = {'userfile': ('ccc.jpg', im)}
r = requests.post('http://upload.chaojiying.net/Upload/Processing.php', data=params, files=files, headers=self.headers)
return r.json()
def ReportError(self, im_id):
"""
im_id:报错题目的图片ID
"""
params = {
'id': im_id,
}
params.update(self.base_params)
r = requests.post('http://upload.chaojiying.net/Upload/ReportError.php', data=params, headers=self.headers)
return r.json()
if __name__ == '__main__':
chaojiying = Chaojiying_Client('xx', 'xx', 'xx') #用户中心>>软件ID 生成一个替换 96001
im = open('haha.jpg', 'rb').read() #本地图片文件路径 来替换 a.jpg 有时WIN系统须要//
print (chaojiying.PostPic(im, 9004))
# print (chaojiying.PostPic(im, 9004)[pic_str]) #1902 验证码类型 官方网站>>价格体系 3.4+版 print 后要加()
?
|