这次准备讲述用python爬虫以及将爬来的数据存到MySQL数据库的过程,爬的是煎蛋网的无聊图。
准备:下载了python3.7并配置好了环境变量
下载了PyCharm作为开发python的IDE
安装了MySQL客户端以及服务端
安装了Navicat客户端
通过pip命令下载安装beautifulsoup,selenium以及pymysql模块,pip命令如下:
pip install beautifulsoup4 pip install selenium pip install pymysql