Single

python爬虫爬取360图片代码多线程1分钟几百+图片到手

python是一个好东西,爬虫是真的很强
这个爬虫代码爬取的对象是360图片 https://image.so.com

需要的配件

Python
requests
threading

代码-注意在目录下创建一个img文件夹

import requests
import threading
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}


def get_response(html_url):
 response = requests.get(url=html_url, headers=headers)
return response

def save(img_url, title):
 path = 'img\\' + title + '.jpg'
 img_content = get_response(img_url).content
with open(path, mode='wb') as f:
 f.write(img_content)
print('正在保存:', title)


def main(url):
 html_data = get_response(url).json()
 lis = html_data['list']
for li in lis:
 img_url = li['qhimg_downurl']
 title = li['title']
 save(img_url, title)

 

if __name__ == '__main__':
for page in range(0, 301, 30):
 url = 'https://image.so.com/zjl?ch=beauty&sn={}&listtype=new&temp=1'.format(page)
 main_thread = threading.Thread(target=main, args=(url,))
 main_thread.start()

直接下载

下载信息

下载地址:点击下载

部分资源来源于网络如有侵权,请联系删除

暂无评论

发表评论
Python爬虫——解析网页HTML内容BeautifulSoup

Python爬虫——解析网页HTML内容B…

阅读更多
python图片api爬虫下载代码

python图片api爬虫下载代码

阅读更多
哪吒探针创建带有动态背景的 ACG 网页

哪吒探针创建带有动态背景的 AC…

阅读更多
Hellohao图像托管 - 也许这会是最优秀的图像托管程序

Hellohao图像托管 – 也许…

阅读更多
通过docker-compose部署WordPress

通过docker-compose部署WordPre…

阅读更多
VPS 安装 ros 系统

VPS 安装 ros 系统

阅读更多