python 爬取王者荣耀图片

最近手痒了，想使用python爬取美女图片，不过找不到合适网站，没办法，只好找老王了，最主要是很久没使用python了，带这复习目的。

1. '''
2. 王者荣耀官方 英雄壁纸爬取
4. '''
5. import os
6. from fake_useragent import UserAgent
7. from bs4 import BeautifulSoup
8. import requests
9. import time
10. import random
11. import re
14. def get_fake_userAgent():
15.     try:
16.         return {
17.             'User-Agent':UserAgent().random
18.         }
19.     except:
20.          return {
21.             'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/105.0.0.0 Safari/537.36 Edg/105.0.1343.50'
22.         }
25. def get_response(url):
26.     time.sleep(random.choice([1,2,3,4,5]))
27.     try:
28.         response = requests.get(url=url,headers=get_fake_userAgent())
29.         if response and response.status_code==200:
30.             return response.content
31.         else:
32.             return None
33.     except Exception as e:
34.         print(f"响应失败{url}",e)
35.         return None
36.    
38. def parse_single_hero_data(url):
39.     res = get_response(url).decode('gbk')
40.     # 获取英雄id
41.     hero_id = re.search(r'/\d+\.shtml',url,re.I)[0].replace('/','').replace('.shtml','')
42.     if res:
43.         soup = BeautifulSoup(res,'lxml')
44.         # 英雄名称
45.         hero_name = soup.select_one('div.cover h2.cover-name').get_text()
46.         hero_skin_name_list = soup.select('ul.pic-pf-list.pic-pf-list3')[0]['data-imgname']
47.         hero_skin_name_list = re.sub(r'(&\d+)','',hero_skin_name_list,re.M).split('|')
48.         # 皮肤遍历下载
49.         # 创建文件夹
50.         save_hero_skin(hero_id,hero_name,hero_skin_name_list)
51.    
52.       
54. def save_hero_skin(hero_id,hero_name,hero_skin_link_list):
55.     path = os.getcwd()+'\\img\\'+hero_name
56.     if not os.path.exists(path):
57.         os.makedirs(path)
58.     for i,skin_name in enumerate(hero_skin_link_list):
59.         try:
60.             link = skin_skin_link.format(hero_id,hero_id,i+1)
61.             content = get_response(link)
62.             if content:
63.                 with open(f'{path}//{skin_name}.jpg',mode='wb') as file:
64.                     file.write(content)
65.             print(hero_name + skin_name ,'下载成功')
66.         except Exception as e:
67.             print(hero_name + skin_name ,'下载失败！',e)
69.         
73. def get_hero_list(url):
74.     data = get_response(url).decode('gbk')
75.     if data:
76.         soup = BeautifulSoup(data,'lxml')
77.         hero_link_list = soup.select('ul.herolist.clearfix li a')
78.         for index,hero_link in enumerate(hero_link_list):
79.             # 地址拼接替换
80.             hero_link_list[index] = root_url + hero_link['href']
81.         return hero_link_list
82.     else:
83.         return []
88. def start():
89.     # 执行初始地址
90.     hero_link_list = get_hero_list(init_url)
91.     # 遍历查找
92.     for link in hero_link_list:
93.         parse_single_hero_data(link)
96. if __name__ == '__main__':
97.     # 英雄列表地址
98.     init_url = 'https://pvp.qq.com/web201605/herolist.shtml'
99.     skin_skin_link = 'https://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/{}/{}-bigskin-{}.jpg'
100.     # 单张下载
101.     parse_single_hero_data('https://pvp.qq.com/web201605/herodetail/162.shtml')
102.     # 全部英雄下载
103.     # start()

复制代码

经过测试，能够全部下载，如果需要下载全部，请将上述 start() 取消注释！
源代码地址 ： https://gitee.com/wuxin0011/python-demo/blob/master/01-wzry/index.py

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！