[Python知识库]2021-12-5

爬虫（上）

        --基本，Selenium + chromedriver

一、基本知识

1、当你访问一个网站的时候浏览器默认使用80端口

2、  User-Agent：浏览器名称
        Referer：表明当前请求从那个url过来的
        Cookie：登录后才能访问的网站就需要发送cookie

3、数据可视化

pyecharts库
安装pip install pyecharts
使用步骤：
（1）导入Bar（柱状图）
        form pyecharts import Bar
（2）创建Bar对象
        chart = Bar("柱状图表的名")
（3）使用Bar对象添加数据
        Bar对象的add()方法
（4）生成本地文件
        Bar对象的render()方法
教程：https://www.jianshu.com/p/554d64470ec9

4、数据存储

Json

JSON数据：json数据本质就是一个字符串
数据格式：
        1、对象（字典），使用花括号
        2、列表（数组），使用方括号
        3、整型、浮点型，布尔类型、null类型

开通VIP 解锁文章