昨天晚上写了个 Python 程序,下载了一个福利网站 5000 来张妹子图片

2015 年 8 月 24 日
 liuxu
github:
https://github.com/liuxu0315/download_nvshen_so

执行:$ python nvshen_so.py

用了多线程, 8 条线程,在 /tmp 下生成 nvshen_so/01 等文件夹并下载到相应的目录。
里面有 2 行代码被注释掉了,它们是配套的,用来下载 2014/12/下的图片,有几百张。

现在有个问题,我的程序无法一次全部下载完,总是漏一点,要么是执行一段时间后就卡死不动了不知道是什么原因。。
当然下载图片前有判断是否有该文件,可以重复执行下载程序,不过这个治标没治本。。
19656 次点击
所在节点    Python
108 条回复
zixianlei
2015 年 8 月 24 日
难道楼上就是站长?哈哈^ω^
happywowwow
2015 年 8 月 24 日
站长 来了 哈哈哈
wenbinwu
2015 年 8 月 24 日
@freaks 你想在 python 里面运行另一个 python ?
wenbinwu
2015 年 8 月 24 日
哈哈哈,站长告诉你要 sleep
chanssl
2015 年 8 月 24 日
哈哈,笑翻了
Kokororin
2015 年 8 月 24 日
好奇站长是怎么找过来的
jonnn
2015 年 8 月 24 日
站长找上门来了!
malcolmyu
2015 年 8 月 24 日
@fjgwg 爬的都访问不了了
libotony
2015 年 8 月 24 日
@fjgwg 站长不哭,已经收藏你的站
wuwuyun
2015 年 8 月 24 日
hahahaha 站长哭晕在厕所
idblife
2015 年 8 月 24 日
擦,我都是人肉爬虫的。。。

http://qingbuyaohaixiu.com/
flight2006
2015 年 8 月 24 日
想起了我的 1024.py
idblife
2015 年 8 月 24 日
@flight2006
这位大哥口味够重
话说那么多种图床,好抓吗?
qinglangee
2015 年 8 月 24 日
把潜水的站长给逼了出来
ybh37
2015 年 8 月 24 日
硬生生的把站长逼出来了啊~
Andy1999
2015 年 8 月 24 日
看到站长我笑了 哈哈哈哈
axzy
2015 年 8 月 24 日
楼主可以把图片打包提供下载吗
karlxu
2015 年 8 月 24 日
@Dongdong36 请教下怎么加代理?
thinkmore
2015 年 8 月 24 日
为啥不把链接先趴下来呢
Dongdong36
2015 年 8 月 24 日

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/215479

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX