[开发测试]【爬虫神器 pyppeteer】比 selenium 更高效的爬虫利器--pyppeteer

Puppeteer 是 Google 基于 Node.js 开发的工具，调用 Chrome 的 API，通过 JavaScript 代码来操纵 Chrome 完成一些操作，用于网络爬虫、Web 程序自动测试等。pyppeteer 使用了 Python 异步协程库 asyncio，可整合 Scrapy 进行分布式爬虫。要注意的是它执行python3.6+以后版本使用，下面我们一起来了解下如何使用。

安装：

pip install pyppeteer

说明：

• 当你第一次运行 pyppeteer 时，它会下载最新版本的 Chromium
  (~100MB)。如果您不喜欢这种行为，请pyppeteer-install在运行使用 pyppeteer 的脚本之前运行命令。
• Pyppeteer 与 puppeteer 一样相似，但 python 和 JavaScript 之间的一些差异使其变得困难。 这些是
  puppeteer 和 pyppeteer 之间的区别。

例子使用：我们使用pyppeteer 对百度网页进行截图操作：

# -*- coding: utf-8 -*-
import asyncio
from pyppeteer import launch
import os
save_path

了解本专栏 订阅专栏 解锁全文 学习会员免费看 赠一年