admin管理员组

文章数量:1530842

python 爬虫

为什么会想到,用Python去爬取QQ空间相册呢,而且还要区分是照片,还是视频呢,就因太多了,这里回想当时,是多么想哭,还好,我是一个技术宅,还是个汇在通信圈里的技术宅,因此查资料,琢磨出来这大篇幅的脚本,今天代码出现了幺儿子,修正了代码,又可以执行了,现在分享给有需要的人,希望有人能关注,一块交流交流。

先简单说下,技术要点吧。

原理就是利用,python + selenium + chromedrive 模拟手机浏览器,获取相应的COOK,爬虫的一些简单的应用,下面是简单教程(这里是以你电脑已装了Python3.6+):

1)直接使用pip安装

pip3 install selenium

2)下载chromedriver 和chrome浏览器,这里要注意的是,chromedriver 和chrome浏览器是有版本对应的,也就是也什么版本的chrome浏览器,对应着不同的chromedriver ,下面是最新的对应表,直接用就可以了。

ChromeDriver v74.0.3729.6 (2019-03-14)----------Supports Chrome v74

下载地址:

http://npm.taobao/mirrors/chromedriver/

这两样都下载了,然后,把 chromedriver放在相应的浏览器安装目录下,

好了,做好这两个步就完成了环境了,下面直接分享代码:

#!coding:utf-8#ver:v2.1版本from selenium import webdriverimport requests,time,json,os,urllib,urllib3,logging#记录日志logging.basicConfig(filename='example.log', filemode="w

本文标签: 相册爬虫空间查看器照片