经过很多麻烦后,我开始工作了。我最终使用了ES 1.4.4,nutch 2.3.1,mongodb 3.10和JDK 8。
我经历过的许多问题在其他一些线程中仍未得到解决:
- (这很简单,但是…)请确保一切都在运行。确保elasticsearch在具有正确端口的正确机器上运行。确保您可以与之交谈。确保MongoDB已启动并在正确的端口上运行,并确保您可以与之对话。
- 使用正确的索引命令。对于Nutch 3.2.1,它是:(
./bin/nutch index -all
在获取并解析之后)。如果遇到Solr错误,则nutch-site.xml中没有正确的索引功能。 - 在elasticsearch.yml和nutch-site.xml中将搜寻器引擎命名为“ SAME THING”。这是巨大的。这是我的索引函数抛出任何错误的主要原因。
- 版本控制。我尝试使用新版本的Elasticsearch进行此 *** 作,并经常遇到问题。我将尝试在最新版本的Elasticsearch和Mongo上构建它,然后回到此线程。尝试使用与我先做的相同的构建,然后再尝试其他构建。由于在ivy / ivy.xml设置以及indexer-elastic / plugin.xml设置中与gora有关,因此使用nutch进行Elasticsearch版本控制似乎是最重要的部分。
拜托,拜托,拜托,请让我知道您是否对此有任何疑问。我花了将近2个星期的时间才弄清楚此构建过程,而且我知道它可能会令人沮丧。如果您遇到问题,请下午给我发帖或发布,我相信我可以帮助您解决问题。
乔
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)