kimono - 和服桌面爬行卡在“排队”

Question

我正在使用 Kimono Desktop 抓取网站并将数据发布到 Firebase 端点。除了自动运行外，一切都从头到尾工作。

当使用 Chrome 扩展程序创建或编辑 Kimono API 时，桌面应用程序会抓取并报告“最后一次抓取成功”。下一次运行被列为设定的爬行时间（我在多台机器上尝试了 5 分钟、30 分钟和 1 小时），但是当该时间过去时，下一次自动运行会显示“已排队”但从未真正运行。

和服桌面爬取设置

上面屏幕截图中的 API 设置为每五分钟抓取一次，但已排队至少 2 小时 55 分钟而没有运行。出于好奇，我让一台机器运行了 2 天，没有再次爬行。

单击 Start Crawl 可以正常工作，但会破坏自动运行的目的。想法？

Answer 1

不幸的是，据我所知，和服桌面版不支持自动运行。

有一些人通过按自己确定的时间间隔使用脚本通过 ondemand 调用 api 取得了成功，这似乎是目前唯一的方法。

我相信随着时间的推移会有更多的人找到修改桌面版本的方法，但不幸的是，到目前为止自动运行对我来说没有运气。

要查找有关如何使用桌面版本的按需呼叫的信息，有关此答案的一些信息HERE应该能够帮助您。