全球主机交流论坛

标题: 请问Huginn 卡任务是什么情况？麻烦大佬帮忙指导下 [打印本页]

作者: JtrD 时间: 2020-11-30 08:09
标题: 请问Huginn 卡任务是什么情况？麻烦大佬帮忙指导下

docker安装Huginn，其中更换过MySQL、MariaDB、PostgreSQL三种数据库，但是都几天后就出现卡任务的情况，麻烦大佬指导下，谢谢。

作者: JtrD 时间: 2020-11-30 12:48

等大佬。

作者: sqliuchang 时间: 2020-11-30 12:59
Huginn默认是单线程，某一个任务卡住会阻塞后面的，但是一般情况下不会卡很久，而且一般是网络原因。

作者: sqliuchang 时间: 2020-11-30 13:02
比如网站有反爬措施，或者被强干扰。还有就是你的抓取频率定的太高了，一直有卡的任务要执行，就变成999排队了。

作者: JtrD 时间: 2020-11-30 13:04

sqliuchang 发表于 2020-11-30 12:59
Huginn默认是单线程，某一个任务卡住会阻塞后面的，但是一般情况下不会卡很久，而且一般是网络原因。 ...

感谢大佬回复，目前我就14个任务这样，那我搜索下多线程看看，网络原因的确可能，因为国外机都是抓国内网站，单独跑2GB运存应该够用了吧？

作者: sqliuchang 时间: 2020-11-30 13:06

JtrD 发表于 2020-11-30 13:04
感谢大佬回复，目前我就14个任务这样，那我搜索下多线程看看，网络原因的确可能，因为国外机都是抓 ...

够，任务不多512都能跑。
我是放在家里路由器上跑的。
你可以找到卡的那个把他暂停再观察观察，实在不行就docker跑多个huginn

作者: JtrD 时间: 2020-11-30 13:08

sqliuchang 发表于 2020-11-30 13:06
够，任务不多512都能跑。
我是放在家里路由器上跑的。
你可以找到卡的那个把他暂停再观察观察，实在不行 ...

好的，我再测试下，谢谢。

欢迎光临全球主机交流论坛 (https://lilynana.eu.org/)