全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 2024|回复: 10

[lighttpd] 我发现我不适合自己采集小说站,我就适合看

[复制链接]
发表于 2020-5-11 22:57:32 | 显示全部楼层 |阅读模式
我就是照着201206030大佬的程序
小说精品屋-plus已开通充值功能,欢迎大家体验
自己在空闲的2o上搭了一个。
想着自己以后看书再也不用看广告了。可是爬了一天多了,才736本,6.8G


可能是2Ocpu太差了吧,跑程序的还是pve开的小小LXC鸡
 楼主| 发表于 2020-5-16 13:15:50 | 显示全部楼层
更新:
才几天啊都快到一万本了。硬盘总共占了120G了,其中MySQL54G,再爬我鸡没地方了
发表于 2020-5-16 13:31:44 | 显示全部楼层
content 都存数据库,估计小说多了带不动吧
发表于 2020-5-11 23:02:24 | 显示全部楼层
确实,自己采集的话太消耗CPU和硬盘了
他支持一个单独的VPS采集然后远程调用吗?
 楼主| 发表于 2020-5-11 23:05:19 | 显示全部楼层
tir 发表于 2020-5-11 23:02
确实,自己采集的话太消耗CPU和硬盘了
他支持一个单独的VPS采集然后远程调用吗? ...

应该是可以的,我看爬虫设置文件里有ip的设置选项
发表于 2020-5-12 00:14:33 来自手机 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2020-5-16 13:38:56 | 显示全部楼层
这是要逼我玩大盘鸡了吗
 楼主| 发表于 2020-5-16 13:42:56 | 显示全部楼层
lansghy 发表于 2020-5-16 13:31
content 都存数据库,估计小说多了带不动吧

估计有点,因为现在content表是百万级的数量
 楼主| 发表于 2020-5-16 13:44:00 | 显示全部楼层
52naiba 发表于 2020-5-16 13:38
这是要逼我玩大盘鸡了吗

我是闲置2O终于有用了
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-3-29 20:33 , Processed in 0.064289 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表