爬取掌阅app免费电子书数据

主要介绍如何抓取app数据及抓包工具的使用,能看到这相信你已经有爬虫基础了

编不下去了,主要是我懒,直接开干吧!

一.使用环境和工具

  windows + python3 + Jsonpath + Charles + MuMu模拟器

二.下载工具

  Charles下载:https://www.charlesproxy.com/latest-release/download.do

  MuMu模拟器:

三.安装及配置工具

  Charles

    安装,直接傻瓜式安装就行

    配置:

      1.打开Charles->点击Help->SSL Procying->Install Charles Root Certificate,即可进入证书安装界面

        

爬取掌阅app免费电子书数据

      2.安装证书->下一步->将所有的证书都放入下列存储(P)->浏览->受信任的根证书颁发机构->确定->下一步->完成

        

爬取掌阅app免费电子书数据

        

爬取掌阅app免费电子书数据

      3.可设置端口号,一般为默认(如果系统没有其他软件与8888端口冲突,可忽略该步骤)

        

爬取掌阅app免费电子书数据

      4.设置SSL代理(如果不设置,后面请求会是有很多443)

          Proxy -> SSL Proxying Settings -> Add

        

爬取掌阅app免费电子书数据

        输入端口号443,点击OK

        

爬取掌阅app免费电子书数据

        出现下面界面就添加成功了

        

爬取掌阅app免费电子书数据

  

   MuMu模拟器

    安装:同样是傻瓜式

    配置:

      1.设置代理

        

爬取掌阅app免费电子书数据

爬取掌阅app免费电子书数据

爬取掌阅app免费电子书数据

      2.获取电脑ip  ,  win + r -> 输入cmd -> 回车

        

爬取掌阅app免费电子书数据

      3.安装证书

        在虚拟器打开浏览器,输入cals.pro/ssl自动下载证书,下载完成后,点击打开

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:https://www.heiqu.com/zzwxpy.html