全球主机交流论坛

标题: 【晚点放出代码和图片,今天内】20分钟下载MM131全站图片 [打印本页]

作者: 揽月    时间: 2019-6-10 05:31
标题: 【晚点放出代码和图片,今天内】20分钟下载MM131全站图片
本帖最后由 揽月 于 2019-6-10 10:55 编辑

看看这个吧,此贴可以终结了 :https://www.sunk.eu.org/thread-556234-1-1.html

------------------------------------------

开了20个线程,用时20分钟下载完m.mm131.net全站图片

下载了4906套图,有50+套没下载到,共16.4G图片

程序设定了500毫秒的超时时间,500毫秒内无响应就忽略了

这里我用了最简单的方式跑线程,不涉及到线程间共享资源

每个线程负责下载250套图

前边能跑满我本地的150M带宽,后边因为有部分线程先执行完了所以带宽就没用那么多

满打满算一直跑满150M带宽的话用时15分钟整,实际用时不到20分钟





来两张样张





要是电脑配置好,带宽足,数量又多,每台电脑开多线程刷CDN挺快的
作者: hcyme    时间: 2019-6-10 05:36
牛掰
作者: 30826    时间: 2019-6-10 05:37
关键是不好看
作者: 揽月    时间: 2019-6-10 05:40
30826 发表于 2019-6-10 05:37
关键是不好看

我感觉这个站的图片还行,主要是没水印
作者: wifitry    时间: 2019-6-10 05:55
大佬,能否pm分享下
作者: 萌萌哒    时间: 2019-6-10 06:39
这时候求分享就对了。
作者: 颠峰布衣飘    时间: 2019-6-10 06:59
这个。。。莫得共享地址啊
作者: leeger    时间: 2019-6-10 07:02
粘贴你的下载地址吧… 记得加权限哦
作者: w742152012    时间: 2019-6-10 07:32
这个分享就对了
作者: vps1    时间: 2019-6-10 07:37
下载地址呢
作者: 0752385    时间: 2019-6-10 07:38
同款ide风格来插个眼
作者: hostei    时间: 2019-6-10 07:44
又是java大佬
作者: dzwangfei    时间: 2019-6-10 07:53
不是python吗?

作者: 风影OvO    时间: 2019-6-10 08:05
地址地址
作者: 怼烎    时间: 2019-6-10 08:06
既然都说了,就分享下呗
作者: zgangang    时间: 2019-6-10 08:07
胸dei借一套说话
作者: solomon    时间: 2019-6-10 08:12
大佬分享地址呢?
作者: 白衣乞丐    时间: 2019-6-10 08:47
大佬,你的地址还没上呢
作者: fatal    时间: 2019-6-10 08:56
求分享,zsbd
作者: Niwi    时间: 2019-6-10 08:58
脚本?
作者: yhqdq    时间: 2019-6-10 09:00
大佬 求PM地址
作者: 雷子献    时间: 2019-6-10 09:11
那么问题来了,下载地址呢
作者: godstar    时间: 2019-6-10 09:13
网盘?
作者: smithken    时间: 2019-6-10 09:17
发车了,赶紧上车,车牌号上面有
作者: 天生要强    时间: 2019-6-10 09:20
求大佬分享脚本
作者: dbug    时间: 2019-6-10 09:23
等大佬的资源了
作者: c7r1st    时间: 2019-6-10 09:28
坐等共享包.
作者: giano    时间: 2019-6-10 09:31
等老大资源,好人啊!
作者: baymin    时间: 2019-6-10 09:34
快5000套怎么才20G ,爬了一个站点,5000套就是200多G
作者: maxfly    时间: 2019-6-10 09:39
这图看起来太假了。。。
作者: why5711351    时间: 2019-6-10 09:45
求代码图片
作者: liuxu    时间: 2019-6-10 09:54
火速留言等地址
作者: 1121744186    时间: 2019-6-10 09:55
用个线程池就好了
作者: 送子神医    时间: 2019-6-10 09:55
大佬辛苦了,分享你成功的喜悦吧
作者: 靓坤    时间: 2019-6-10 10:00
直接用把地址加入queue扔进pool里就行了
作者: woodnaonly    时间: 2019-6-10 10:12
球源码
作者: netrefugee    时间: 2019-6-10 10:16
怎么过的防采集?
作者: 揽月    时间: 2019-6-10 10:24
netrefugee 发表于 2019-6-10 10:16
怎么过的防采集?
  1. HttpURLConnection con = (HttpURLConnection) url.openConnection();
  2.             // 设置这个才能下载有防盗链设置的图片
  3.             con.setRequestProperty("Referer", "https://m.mm131.net/");
复制代码


核心,Referer
作者: Backfire    时间: 2019-6-10 10:38
大佬求pm地址
作者: tvision    时间: 2019-6-10 10:40
分享下呗
作者: 静候轮回    时间: 2019-6-10 11:03
网盘链接呢 大哥
作者: 揽月    时间: 2019-6-10 11:11
静候轮回 发表于 2019-6-10 11:03
网盘链接呢 大哥

16GB呢,怎么传...,晚点我仍到OneDrive吧
作者: forppy    时间: 2019-6-10 13:22
ps过渡
作者: 葱油饼董事长    时间: 2019-6-10 14:49
揽月 发表于 2019-6-10 11:11
16GB呢,怎么传...,晚点我仍到OneDrive吧

等车,树脂布丁
作者: 3000    时间: 2019-6-10 15:21
上面的女人太丑。。没看头。。
作者: 钓鱼岛    时间: 2019-6-10 17:36
dalao 流弊
作者: AceSheep    时间: 2019-6-10 18:00
羡慕大佬, 传dg吧
作者: 我们没有在一起    时间: 2019-6-10 18:21
大佬每家图床吗
作者: svd1983    时间: 2019-6-10 18:30
gkd
作者: 先容我水一发    时间: 2019-6-10 18:48
这有啥好看的,都是打擦边球的
作者: flyqie    时间: 2019-6-10 19:00
求大佬公布图片下载地址
作者: 虚心学习    时间: 2019-6-11 12:48
提示: 作者被禁止或删除 内容自动屏蔽
作者: 揽月    时间: 2019-6-11 12:55
虚心学习 发表于 2019-6-11 12:48
求大佬分享个下载地址啊

看这个  https://www.sunk.eu.org/thread-556431-1-1.html
作者: lovexu    时间: 2019-6-12 11:56
我现在只想要导入到blog的办法了。感谢楼主。
作者: 揽月    时间: 2019-6-12 11:59
lovexu 发表于 2019-6-12 11:56
我现在只想要导入到blog的办法了。感谢楼主。

看这个 https://www.sunk.eu.org/thread-556431-1-1.html




欢迎光临 全球主机交流论坛 (https://sunk.eu.org/) Powered by Discuz! X3.4