全球主机交流论坛

标题: 硬盘不够用了, 一个晚上爬了500G的汤NO热的视频和图片 [打印本页]

作者: openos 时间: 2018-3-6 16:25
标题: 硬盘不够用了, 一个晚上爬了500G的汤NO热的视频和图片
本帖最后由 openos 于 2018-3-6 23:42 编辑

最近的爬虫极大的推动了大盘鸡的发展, 我今天凌晨到现在爬了500G的汤NO热的视频和图片

https://imgchr.com/i/9gCXaF

爬的资料截图
https://imgchr.com/i/9gNSKI

要找大盘服务器了. 看来4TB或以上的比较合适.
求推荐

作者: roxser 时间: 2018-3-6 16:28
你自己签名里的推荐这么多

作者: openos 时间: 2018-3-6 16:29

roxser 发表于 2018-3-6 16:28
你自己签名里的推荐这么多

没有超过4TB，而且很便宜的独立服务器.

作者: 西门庆 时间: 2018-3-6 16:31
子弹还够用么

作者: oldj 时间: 2018-3-6 16:31
online 的st8把

作者: 达达大人 时间: 2018-3-6 16:33
求汤的爬虫

作者: openos 时间: 2018-3-6 16:33

oldj 发表于 2018-3-6 16:31
online 的st8把

昨天看了，但是有很高的安装费.

作者: Lucky 时间: 2018-3-6 16:35
爬就完事了

作者: openos 时间: 2018-3-6 16:36

西门庆发表于 2018-3-6 16:31
子弹还够用么

哈哈.
家里的NAS都存不下了

作者: sasber 时间: 2018-3-6 16:37
之前79刀的18T杜甫呢？

作者: liuxu 时间: 2018-3-6 16:39
www.lowendstorage.win

作者: openos 时间: 2018-3-6 16:39

达达大人发表于 2018-3-6 16:33
求汤的爬虫

搜索一下，你就有新发现

作者: aumfoo 时间: 2018-3-6 16:41
爬来干啥用呢。。。

作者: openos 时间: 2018-3-6 16:42

aumfoo 发表于 2018-3-6 16:41
爬来干啥用呢。。。

我也不知道，想着空服务器多, 发现爬这个几台服务器都不够用.

作者: aumfoo 时间: 2018-3-6 16:45

openos 发表于 2018-3-6 16:42
我也不知道，想着空服务器多, 发现爬这个几台服务器都不够用.

爬来也没有用处那跟吃灰无异啊

作者: openos 时间: 2018-3-6 16:47

aumfoo 发表于 2018-3-6 16:45
爬来也没有用处那跟吃灰无异啊

是没啥用....

作者: laokof4n 时间: 2018-3-6 16:48
提示: 作者被禁止或删除内容自动屏蔽

作者: openos 时间: 2018-3-6 16:50

laokof4n 发表于 2018-3-6 16:48
求大佬分享

这个不能分享，自己去爬吧，记得找个大一点的硬盘，要不然一个晚上就填满了

作者: longskay 时间: 2018-3-6 16:51
PM个地址啊大佬

作者: wenguonideshou 时间: 2018-3-6 16:53

longskay 发表于 2018-3-6 16:51
PM个地址啊大佬

签名的博客超链接不正确，要加上http://

作者: openos 时间: 2018-3-6 16:53
本帖最后由 openos 于 2018-3-6 20:09 编辑

longskay 发表于 2018-3-6 16:51
PM个地址啊大佬

https://github.com/dixudx/tumblr-crawler/blob/master/README_CN.md

作者: longskay 时间: 2018-3-6 16:53

wenguonideshou 发表于 2018-3-6 16:53
签名的博客超链接不正确，要加上http://

懂了谢谢大佬

作者: crazi 时间: 2018-3-6 16:54
楼主这个图床和chevereto好像啊

作者: dark32 时间: 2018-3-6 17:09
爬的时候可以过滤下，比如心超1万的才爬，这样数据比较优质

作者: openos 时间: 2018-3-6 17:09

crazi 发表于 2018-3-6 16:54
楼主这个图床和chevereto好像啊

作者: 左手写爱 时间: 2018-3-6 17:55
楼主学习爬虫都看过什么书或者教程？

作者: jy02201949 时间: 2018-3-6 17:56
91之后又来个汤不热，我的硬盘已炸

作者: bycon 时间: 2018-3-6 17:58
爬完就完事了？？ssvip呢？

作者: shijinqiang 时间: 2018-3-6 17:59
爬虫，哪个大佬发布的

作者: openos 时间: 2018-3-6 23:40
爬虫
https://github.com/dixudx/tumblr-crawler/blob/master/README_CN.md

作者: crazi 时间: 2018-3-7 16:47

openos 发表于 2018-3-6 23:40
爬虫
https://github.com/dixudx/tumblr-crawler/blob/master/README_CN.md

chevereto大佬会用不？搞半天不懂如何让chevereto读取本地服务器文件夹里的图片

作者: openos 时间: 2018-3-7 17:00

crazi 发表于 2018-3-7 16:47
chevereto大佬会用不？搞半天不懂如何让chevereto读取本地服务器文件夹里的图片 ...

不行.

作者: maxfly 时间: 2018-3-7 17:03
爬的脚本分享下啊，谢谢了

作者: 阿威 时间: 2018-3-7 17:06
tumblr上gv也挺多，你有兴趣爬吗？

作者: etour 时间: 2018-3-7 17:13
爬下来也是无序数据啊，不实用不实用

作者: openos 时间: 2018-3-7 17:17

etour 发表于 2018-3-7 17:13
爬下来也是无序数据啊，不实用不实用

文件夹分用户ID.
只爬图片和视频

作者: alex丶 时间: 2018-3-7 20:07

求个爬虫

作者: myseil 时间: 2018-3-7 20:09
求分享分享才是真道理！

作者: 635389202 时间: 2018-3-7 20:14
500G的xiao 姐姐！！好厉害

作者: bigboss60 时间: 2018-3-7 21:57
爬的谁的汤不热账号

说出来让我看看

作者: crazi 时间: 2018-3-8 01:11

openos 发表于 2018-3-7 17:00
不行.

chevereto不能读取服务器本地文件夹？这点还不如lychee图床哈，不过lychee文件夹名字不能包含太多中文，遗憾

欢迎光临全球主机交流论坛 (https://hostloc-workers.ikyomon.com/)