Python3网络爬虫(十三):王者荣耀那些事!(Fiddler之手机APP爬取)

  • 时间:
  • 浏览:0
  • 来源:UU直播快三官方_大发UU直播快3

    利用可完会 完会 设置代理的这个特点,亲们就可完会 完会 对手机APP进行抓包了。为什么在么在在么在设置?不急不急,我想要先把Fiddler安装上吧!



点击放大图片

    我想要使用Fiddler进行手机抓包,首太难确保手机和电脑的网络在1个多 内网中,可完会 完会 使用让电脑和手机都连接同1个多 路由器。当然,也可完会 完会 让电脑开放WIFI热点,手机连入。这里,我使用的土依据 是,让手机和电脑一起连入1个多 路由器中。最后,让手机使用电脑的代理IP进行上网。

    通过Fiddler抓包信息,编写代码如下:

    很有特点发现好久?在url的hero_id为104,在上个小实例中,亲们发现,这个104正好是英雄的id,完会 完会 是一定会可完会 完会 通过设置这个id来访问不同的英雄界面呢?测试一下答案就出来了,亲们将id改为103,也就是女娲的hero_id,编写代码如下:

    先使用Fiddler抓包看一下,在手机APP《英雄联盟盒子》中的菜单中点击英雄,电脑Fiddler就会抓包如下:

    将下载好的FiddlerRoot.cer安装证书拷贝到手机中,而且 进行证书安装(以小米5手机为例),设置(Settings)->(系统和设备中的)更多设置->系统安全->从存储设备安装:

    完会 完会 亲们就轻松得到了各个装备的信息:

    先来个简单的例子热热身,我想要将《英雄联盟盒子》中的英雄图片下载下来,该怎么操作?

    可完会 完会 看多,GET请求的url地址,和返回的JSON格式的信息。完会 完会 编写代码如下:

    怎么获取武器的信息?抓包土依据 同上,点击装备大全:

    证书是完会 完会 在手机上进行安装的,完会 完会 在电脑Fiddler软件抓包的以前,手机使用电脑的网卡上网才我太满 报错。

    根据实现效果,我本人编写代码试一试怎么?《王者荣耀》出装小助手,运行效果如图所示:

    守护系统进程员的鄙视链,您听说过吗?话说:女人不漂亮的守护系统进程员,鄙视女人不不漂亮的守护系统进程员;有女人不的守护系统进程员,鄙视完会 完会 女人不的守护系统进程员;完会 完会 女人不有女亲们的守护系统进程员,鄙视单身狗;在单身狗之间,才有语言、编辑器和操作系统的互相鄙视。不知为什么在么在在么在在,看多这句话的以前,我的内心阵阵绞痛。现在看看,这游戏也是完会 完会 。玩星际的,鄙视玩dota的;玩dota的,鄙视玩lol的;玩lol的,鄙视玩王者荣耀的。虽说王者荣耀发生游戏鄙视链的低端,而且 不得不说,它我我嘴笨 有我本人独到的魅力,正肯能它降低了玩家的门槛,才有了如今的全民王者的热潮。你永远我不知道我本人匹配的队友和对手是老人,还是小孩。肯能换种说法,是人,还是动物?

    毫无现象,王者荣耀从全民热度等诸多表现上看,是非常成功的游戏。可谓男女老少通吃,本文不讨论到底是女大学生坑,还是小学生坑,完会 完会 高难度的现象。咱玩点简单的,我想要先看一款王者荣耀神器-王者荣耀盒子。《王者荣耀盒子》是专门为《王者荣耀》玩家量身打造的一款攻略应用,可谓上分必备神器,这里有职业选手教你英雄出装、铭文搭配和各种对线团战技巧,一起它也整合最全的游戏咨询以及游戏实时动态。先看看它长哪几种样:



点击放大图片

    从代码运行结果中可完会 完会 看多,百里玄策的英雄ID为104,他的图片存放地址为http://pic.wankacn.com/2017-08-04_59844776a6adf.png



点击放大图片



点击放大图片

    点击百里玄策这个英雄,可完会 完会 看多,中间有他的简介,包括技能介绍,以及推荐出装等。完会 完会 ,亲们就了利用这个做1个多 我本人的英雄出装查询小助手吧。

    既然是代理,也就是说:客户端的所有请求一定会先经过Fiddler,而且 转发到相应的服务器,反之,服务器端的所有响应,也一定会先经过Fiddler而且 发送到客户端,基于这个原因,Fiddler支持所有可完会 完会 设置http代理为127.0.0.1:8888的浏览器和应用守护系统进程。使用了Fiddler以前,web客户端和服务器的请求如下所示:

    暑假回家,”小皇帝”般的生活持续了几天,头几天还挺舒服,闲久了顿时我嘴笨 好没意思。眼看着10天的假期就要结束了了了,曾信誓旦旦地说要回家学习,可拿回家的两本书至今一页未翻,强烈的负罪感经常催促着:”你该学习了,你该学习了…”

     Fiddler下载地址:Fiddler下载–>点我

    知道了哪几种信息,亲们就可完会 完会 将哪几种英雄的图片进行下载了,编写代码如下:

    手机点击百里玄策这个英雄,可完会 完会 在电脑Fiddler看多如下抓包内容:

    本节课的内容,就是爬取《王者荣耀盒子》这款APP上的信息,废话太满说,直接结束了了了了实战!

    而且 找到拷贝的FiddlerRoot.cer进行安装即可。安装好以前,可完会 完会 在信任的凭证中找到亲们肯能安装好的安全证书,在用户中可完会 完会 看多证书如下:

    打开Fiddler软件,打开工具的设置。(Fiddler软件菜单栏:Tools->Options)

    在手机上,点击连接的WIFI进行网络修改,加进代理。进行手动设置,主机名即为上图中找到的IP地址,端口号即为Fiddler设置中的端口号8888:

    是一定会很简单?接下来,再玩1个多 加点难度的。

    亲们看下GET请求的URL:

    Fiddler是发生客户端和服务器端的HTTP代理,也是目前最常用的http抓包工具之一 。 它完会 记录客户端和服务器之间的所有 HTTP请求,可完会 完会 针对特定的HTTP请求,分析请求数据、设置断点、调试web应用、修改请求的数据,甚至可完会 完会 修改服务器返回的数据,功能非常强大,是web调试的利器。



点击放大图片

    上述步骤都设置完成以前,用手机浏览器打开百度首页,亲们就可完会 完会 顺利抓包了,截图如下:

    我以前的爬虫博客,爬的一定会网页的信息,哪几种下载小说啊,下载动漫啊,下载帅哥图、妹子图啊。玩哪几种东西的以前,你想过爬取手机APP中间的东西吗?

    在HTTPS中设置如下:

    APP下载地址:APP下载–>点我

    运行上述代码,看下结果,71个多 英雄的图片,分分钟搞定:



点击放大图片

运行平台: Windows 

Python版本: Python3.x 

IDE: Sublime text3

    首先,查看电脑的IP地址,在cmd中使用命令ipconfig查看电脑IP地址。找到无线局域网WLAN的IPv4地址,记下此地址。

    傻瓜式安装,一键到底。Fiddler软件界面如图所示:

    在电脑浏览器中输入地址:http://localhost:8888/,点击FiddlerRoot certificate,下载安全证书:

    在Connections中设置如下,这里使用默认8888端口,当然也可完会 完会 我本人更改,而且 注意暂且与肯能使用的端口冲突:

    到这里,亲们就可完会 完会 整合代码了,首先通过获取每个英雄的ID,而且 根据每个英雄的ID,再获得英雄的完整篇 信息,包括推荐出装,最后通过推荐的装备ID,找到装备的信息并打印出来。

    运行上述代码,亲们可完会 完会 看多,打印的信息我我嘴笨 是英雄女娲的信息,返回的信息显示,这个英雄还完会 完会 上线。推荐出装保发生equip_choice中,可完会 完会 看多这里完会 完会 给出装备的名字,完会 完会 装备的equip_id,完会 完会 在写推荐出装小守护系统进程以前,亲们完会 完会 获取所有装备的ID。