抓取2亿的数据貌似要一年多。。。

cache · 发表于 2018-9-26 06:53:09

家里开了个525小主机，10线采集境外站点，估算了一下，2亿的数据需要一年多，主要是机器死机，不定期断网，跳闸断电。。。

anme · 发表于 2018-9-26 08:48:38

去撸充值送美刀的商家，然后开最好的机器

xfspace · 发表于 2018-9-26 07:02:06

525扔了，好歹也用Xeon啊

hostlocooo · 发表于 2018-9-26 07:08:00

关键你这么采集人家封你ip不

yugan300 · 发表于 2018-9-26 07:50:49

提示: 作者被禁止或删除内容自动屏蔽

cache · 发表于 2018-9-26 08:11:37

hostlocooo 发表于 2018-9-26 07:08
关键你这么采集人家封你ip不

封IP的是因为采集严重影响了人家服务器，正常情况下不会有那个管理员这样搞，所以，采集别人不去采的或少有人采的，加上整体速度上不去，所以不会封IP。

cache · 发表于 2018-9-26 08:18:34

xfspace 发表于 2018-9-26 07:02
525扔了，好歹也用Xeon啊

不是短时间搞完的，525主要是省电啊，小主机整体功耗20W左右

ghyghoo8 · 发表于 2018-9-26 08:26:41

cache 发表于 2018-9-26 08:18
不是短时间搞完的，525主要是省电啊，小主机整体功耗20W左右

一年多也太久了吧，上个低功耗e3也好啊

wenguonideshou · 发表于 2018-9-26 09:00:09

看来你的时间不值钱

显示全部楼层 · 发表于 2018-9-26 10:58:53

提示: 作者被禁止或删除内容自动屏蔽

		自动登录	找回密码
密码			注册

yugan300 yugan300 当前离线积分 11518	发表于 2018-9-26 07:50:49 来自手机 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
yugan300 yugan300 当前离线积分 11518
	回复支持反对举报

某某人该用户已被删除	发表于 2018-9-26 10:58:53 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
某某人该用户已被删除
	回复支持反对举报