您现在的位置是:网站首页>python爬虫python爬虫

用Python爬取"王者荣耀"英雄皮肤

deling2019年3月29日python爬虫563人已围观

简介Python爬取王者荣耀壁纸

1.环境

  • 操作系统:Windows /  Linux

  • Python版本:3.6.8


2. 需求分析

我们打开《王者荣耀》官网,找定位到英雄列表的页面,可直接点此链接:

https://pvp.qq.com/web201605/herolist.shtml

wangzhe1.jpg

在这个网页中包含了所有的英雄,头像及英雄名称。点击其中一个英雄的头像,如“孙悟空”,进去后如下图所示:

wangzhe2.jpg 我们记下此时的网址:

 https://pvp.qq.com/web201605/herodetail/167.shtml

再后退到英雄列表页面,点“露娜”进去查看:

 https://pvp.qq.com/web201605/herodetail/146.shtml

可以看到这些网址几乎是固定不变的,变化的只是515、127这些数字,这些其实就是代表的英雄数字编号。

那么第一个关键点就来了,怎么找出各个英雄所对应的数字编号呢?


我们回到最初的英雄列表页面,

打开浏览器的开发者工具<F12>,

刷新页面、仔细观察,你会找到一个

herolist.json文件,如图所示:

wangzhe4.jpg

这里记录了各个英雄的信息,其中就包含了每个英雄对应的数字编号了,请忽略这里截图中的乱码显示。我们切到herolist.json中的Headers,就可以拿到该请求的URL地址,进而就可以把英雄及其对应的数字,编号都提取出来了。

有了英雄编号的对应关系,再找寻下英雄皮肤的链接规律。

现在重新进入一个英雄的网址,打开浏览器的开发者工具,刷新页面,在Network下刷新并找到英雄的皮肤图片,如图所示:

wangzhe5.jpg 在Headers中查看该图片的网址,查看即Request URL处的链接:

 https://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/146/146-bigskin-1.jpg

找寻另一个看看:

https://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/529/529-bigskin-1.jpg

继续寻另一个看看:

https://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/167/167-bigskin-4.jpg

仔细分析如上三个链接,我们可以把英雄皮肤的

URL拆分开来看。

它是由一个固定前缀(我们可以记为base_url)

再加上英雄数字编号、"bigskin"、皮肤编号、

".jpg"组合而成,如下:

 base_url / hero_num / hero_num - bigskin - heroskin_num .jpg

拿到了各个英雄皮肤的URL地址后,我们就可以进行图片的下载并保存在本地了。


3.代码演示:

首先导入我们所用到的模块

import requests
import os

注:requests是非内置模块,若环境中没有,

需自行安装:

pip install requests

3.1提取英雄名字及数字    

使用herolist.json拿到herolist,并提取出我们关心的内容

# 包含英雄名称信息的URLurl = 'http://pvp.qq.com/web201605/js/herolist.json'

head = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36'}

response = requests.get(url, headers=head)

hero_list = response.json()

# 提取英雄名字及对数字
hero_name = list(map(lambda x:x['cname'], hero_list))

hero_number = list(map(lambda x:x['ename'], hero_list))

3.2 构造英雄皮肤的URL

首先准备好我们的BASE_URL,

即英雄皮肤的固定前缀。

h_l='http://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/'

接下来构造好英雄皮肤的URL,同时我们需要对每一个英雄的所有皮肤进行遍历,如下:

# 逐一遍历英雄

for i in hero_number: 
  
 # 逐一遍历皮肤,此处假定一个英雄最多有10个皮肤
 
    for sk_num in range(10):
    
        hsl = h_l + str(i)+'/'+str(i)+'-bigskin-'+str(sk_num)+'.jpg'
        
        hl = requests.get(hsl)

3.3 存储图片

最后我们就只需将获取到的图片保存在本地即可。

 # 将图片保存下来,并以"英雄名称_皮肤序号"方式命名
 
 with open(hero_name[num] + str(sk_num) + '.jpg', 'wb') as f:
 
    f.write(hl.content)

4.效果展示


image.png



5.源码下载

python King.zip


Tags: python爬虫

很赞哦! (7)

上一篇: 无

下一篇: 无

留言

来说点儿什么吧...

您的姓名: *

选择头像: *

留言内容:

    2019年2月25日 13:35嘿嘿

    2019年2月26日 13:20ok

    可以可以!

    2019年3月18日 09:2311

    1

    2019年3月28日 09:24www.ikeguang.com

    可以可以

    2019年5月29日 18:47qwe

    666

    2019年5月30日 16:52BlankYk

    he,tui~

    2019年5月30日 17:04123

    321

    2019年6月26日 10:02周树人

    厉害厉害

    2019年6月26日 10:34sdlakrj

    sdaag

    2019年6月29日 15:31sdagafdbaf

    dgafdgdfh

    站长回复:你这是什么什么高级语言,我表示看不懂哈哈

    2019年7月6日 16:37啦啦

    写的真好!谢谢博主

    站长回复:谢谢!

    2019年8月14日 12:35傻傻

    厉害 小林

    2019年9月11日 20:05sdfw

    fgbhjksdgjdfhag

    2019年9月11日 22:18baba

    keke tui

    2019年11月5日 20:09666

    666