0

使用 Kimono Web,在爬取的有效负载中,每个源 URL JSON 中始终存在 url 和 index 字段。但是对于桌面,这些字段都缺失了,我的产品完全依赖于它。

我正在浏览和服桌面的源代码,但我无法找到那部分。

索引字段在那里解释;https://help.kimonolabs.com/hc/en-us/articles/203349674-Add-a-unique-index-to-each-result-object-

任何人都可以帮我吗?

谢谢

4

1 回答 1

0

我有同样的问题。我在桌面应用程序http://mudd.com/blog/how-to-extract-vdp-data-from-your-website/中找到了缺少 url 字段的解决方法

此外,如果您在和服网络应用程序中使用爬网调度功能,我发现如果我编辑我的 API 并再次保存它们,它可以让我选择爬网频率。我刚刚发现了这一点,所以我交叉手指等待看看它是否真的会起作用。

于 2016-05-21T23:41:09.510 回答