我发现我不适合自己采集小说站，我就适合看

mzh · 发表于 2020-5-11 22:57:32

我就是照着201206030大佬的程序
小说精品屋-plus已开通充值功能，欢迎大家体验
自己在空闲的2o上搭了一个。
想着自己以后看书再也不用看广告了。可是爬了一天多了，才736本，6.8G

可能是2Ocpu太差了吧，跑程序的还是pve开的小小LXC鸡

mzh · 发表于 2020-5-16 13:15:50

更新：
才几天啊都快到一万本了。硬盘总共占了120G了，其中MySQL54G，再爬我鸡没地方了

lansghy · 发表于 2020-5-16 13:31:44

content 都存数据库，估计小说多了带不动吧

neeyuese · 发表于 2020-5-16 13:55:57

居然2O搭。

mzh · 发表于 2020-5-16 13:44:00

52naiba 发表于 2020-5-16 13:38
这是要逼我玩大盘鸡了吗

我是闲置2O终于有用了

mzh · 发表于 2020-5-16 13:42:56

lansghy 发表于 2020-5-16 13:31
content 都存数据库，估计小说多了带不动吧

估计有点，因为现在content表是百万级的数量

52naiba · 发表于 2020-5-16 13:38:56

这是要逼我玩大盘鸡了吗

某斑竹草泥马 · 发表于 2020-5-12 00:14:33

提示: 作者被禁止或删除内容自动屏蔽

9c.cx · 发表于 2020-5-11 23:24:32

提示: 作者被禁止或删除内容自动屏蔽

mzh · 发表于 2020-5-11 23:05:19

tir 发表于 2020-5-11 23:02
确实，自己采集的话太消耗CPU和硬盘了
他支持一个单独的VPS采集然后远程调用吗？ ...

应该是可以的，我看爬虫设置文件里有ip的设置选项

		自动登录	找回密码
密码			注册

某斑竹草泥马某斑竹草泥马当前离线积分 390	5^# 发表于 2020-5-12 00:14:33 来自手机 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
某斑竹草泥马某斑竹草泥马当前离线积分 390
	回复支持反对举报

9c.cx 9c.cx 当前离线积分 3685	4^# 发表于 2020-5-11 23:24:32 来自手机 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
9c.cx 9c.cx 当前离线积分 3685
	回复举报

[lighttpd] 我发现我不适合自己采集小说站，我就适合看