本文主要是介绍pyppeteer爬虫保存图片，python爬虫，完美，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！
#pip install pyppeteer,使用 Pyppeteer（异步方案）
import asyncio
import os
import randomimport requests
from pyppeteer import launch
async def main():browser = await launch()page = await browser.newPage()await page.goto('https://pic.sogou.com/pics?st=255&channel=vr&scene=pic_result&query=%E5%9B%BE%E7%89%87&rawQuery=%E5%9B%BE%E7%89%87&vrExpId=&vrAdParams=&hitKey=')# 获得标签对象img = await page.querySelectorAll("img")# 提取每个 img 标签的属性信息img_info = []for img_element in img:try:# 获得地址src = await img_element.getProperty('src')src_value = await src.jsonValue()# 获得图片名称alt = await img_element.getProperty('alt')alt_value = await alt.jsonValue() if alt else None# 获得图片格式if src_value:# 从 URL 中提取文件扩展名作为格式file_extension = src_value.split('.')[-1].lower()img_info.append({'src': src_value, '名称': alt_value, '格式': file_extension})# 判断url是否可以访问response = requests.get(src_value, timeout=5) # 使用 requests 库进行判断，设置超时时间为 5 秒if response.status_code == 200:# 保存图片img_name = os.path.basename(src_value)print(f"可以访问:{src_value}，保存图片：{img_name}")# 获得随机数random_number = random.randint(1000000, 9000000)# 这个保存如果没获得名称，格式失败，所以使用随机数+png# with open(f'dade/{img_name}', 'wb') as f:with open(f'dade/{random_number}.png', 'wb') as f:# 下载f.write(response.content)else:print(f"不可以访问:{src_value}")except Exception as e:print(f"出错啦: {e}")# 打印print(img_info)await browser.close()
asyncio.get_event_loop().run_until_complete(main())
这篇关于pyppeteer爬虫保存图片，python爬虫，完美的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！
