nutch抓取种子过多时抓取数据不全。用solr为其建索引时也不全

nutch抓取种子过多时抓取数据不全。用solr为其建索引时也不全,第1张

当nutch抓取太多种子时,抓取的是不完整的数据。 solr用来索引的时候,也是不完整的。当nutch抓取太多种子时,抓取的是不完整的数据。 简介:nutch捕捉数据。当种子太多时,nutch捕捉到的数据是不完整的。solr在建立数据不完整的索引时,建立的索引在这些数据的基础上也是不完整的。我不知道是什么问题。 我在构建索引时配置了index-more插件。

欢迎分享,转载请注明来源:聚客百科

原文地址: https://juke.outofmemory.cn/life/1968606.html

()
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-10-08
下一篇 2022-10-08

发表评论

登录后才能评论

评论列表(0条)

保存