新人报道，发个91爬虫？

ralaro

之前有大佬出教程了，你还发

pce0835

本帖最后由 10000 于 2018-2-3 22:37 编辑

本次还有280条未下载
下载失败
开始下载地址为http://XX/view_video.php?viewkey=1addf8a36b6058c123cd&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=9134cb5129392adab019&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=3011e6a686a3e49cad95&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=faed07ce4520765ca0db&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=994070284fb7966f77b7&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=9130a12e17f35c404570&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=d67432a6343a30363bbc&page=7&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=eb8754a365b5bbc73581&page=7&viewtype=basic&category=mf




抓取成功了，为毛下载都是失败啊

10000

谢谢分享。VIRMACH 29刀HDD HDD大硬盘盘独服派上用场了

vultrlinode

这个不错

xcy1020

具体怎么操作啊。。。。。

martin106s

全球X站爬虫论坛.

sora

"

为毛我抓成功，下载失败啊
10000 发表于 2018-2-3 22:54

为毛我抓成功，下载失败啊
改个地方，看下错误 我都下载了500g了

10000ralaro

本帖最后由 10000 于 2018-2-4 00:42 编辑

ralaro 发表于 2018-2-4 00:36

改个地方，看下错误 我都下载了500g了

改哪里啊~~

10000

ralaro 发表于 2018-2-4 00:36

改个地方，看下错误 我都下载了500g了

开始抓取第21页，地址为http://XX/v.php?category=mf&viewtype=basic&page=21
Some characters could not be decoded, and were replaced with REPLACEMENT CHARACTER.
开始抓取第22页，地址为http://XX/v.php?category=mf&viewtype=basic&page=22
Some characters could not be decoded, and were replaced with REPLACEMENT CHARACTER.
开始抓取第23页，地址为http://XX/v.php?category=mf&viewtype=basic&page=23
Some characters could not be decoded, and were replaced with REPLACEMENT CHARACTER.
开始抓取第24页，地址为http://XX/v.php?category=mf&viewtype=basic&page=24
Some characters could not be decoded, and were replaced with REPLACEMENT CHARACTER.
本次还有662条未下载
开始下载地址为http://XX/view_video.php?viewkey=f2394902c854712f47cb&page=23&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=e607a1a75f6fc439a465&page=24&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=5df6a5c666c421157b76&page=25&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=e0d3fbf0142859f653b9&page=25&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=b3b63573ea3e64409055&page=25&viewtype=basic&category=mf
下载失败
开始下载地址为http://XX/view_video.php?viewkey=97added79518f0e85002&page=25&viewtype=basic&category=mf

10000

也是要request库的？