java - 锅炉管有任何限制吗？

Question

我想使用锅炉管道来抓取网站的所有文章（新闻）以进行数据挖掘。在锅炉管的演示页面中指出：

由于过去大量使用此免费服务，每个用户的请求数量有限

锅炉管库是否有任何限制，或者此限制适用于演示页面？

Answer 1

除非有我没有看到的许可条款，否则锅炉管库不应该有任何这样的限制。您看到的限制可能是因为免费站点是共享资源，并且不受限制的使用会被某些人滥用（当有在线免费服务可以为我做时，为什么还要使用图书馆？）并对那些使用的人产生负面影响实际上是在尝试按预期使用演示站点。