文档章节

windows solrcloud伪分布式搭建

小叮当_加V
 小叮当_加V
发布于 2016/12/14 18:54
字数 1783
阅读 111
收藏 2

一 、概述

    最近几个月装了好几次windows solrcloud伪分布式,参考了其他博客,我自己也总结了一下,包含一些注意和一些错误的解决方法。
    参考博客:
                    http://blog.csdn.net/wanghui2008123/article/details/37813525
                    http://blog.csdn.net/vltic/article/details/20998269

二、环境

    系统:windows server 2008 64位
    软件:jdk-7u80-windows-x64、apache-tomcat-7.0.70、solr-4.10.3、zookeeper-3.4.6
    注意:不同版本的solr配置不一样。

三、部署步骤

    一台服务器部署3个节点。

3.1单机版Tomcat+Solr

    第一步:在D盘根目录下建立solrCloud目录。并把apache-tomcat-7.0.70.tar.gz解压到SolrCloud目录下,重命名为tomcat-server_1。把solr-4.10.3.zip解压,并把solr-4.10.3/example/solr目录下的solr文件夹复制到SolrCloud目录下,重命名为solr_home_1。如下图:

    第二步:把solr-4.10.3\example\webapps\solr.war复制到tomcat-server_1/webapps目录下。

    第三步:修改D:\solrCloud\tomcat-server_1\bin目录下的catalina.bat文件,里面加入tomcat的启动参数,,参数如下:

    set JAVA_OPTS=-Dsolr.solr.home=D:/SolrCloud/solr_home_1

    配置solr/home的第二种方法,在D:\SolrCloud\tomcat-server_1\webapps\solr\WEB-INF\web.xml中配置:

   <env-entry>
       <env-entry-name>solr/home</env-entry-name>
       <env-entry-value>D:\\SolrCloud\\solr_home_1</env-entry-value>
       <env-entry-type>java.lang.String</env-entry-type>
    </env-entry>

     关于solr/home的设置,其实有三种方法:1、在solr的web.xml中设置,在tomcat启动时附带参数,还有就是本文的方法。

     第二种方法,必须首先启动,tomcat,然后solr.war解压后才能找到solr\WEB-INF

    第四步:如果solr版本小于4.3,此时单机solr版本就可以启动了,但是我们是4.10.3。启动 tomcat-server_1 ,发现是会报错,此时你会发现D:\SolrCloud\tomcat-server_1\webapps\solr.war被解压成solr文件目录。此处可以删除 D:\SolrCloud\tomcat-server_1\webapps\solr.war,也可以不删除,我建议删除。

    第五步:把solr-4.10.3\solr-4.10.3\example\lib\ext下面所有jar包拷贝到,D:\SolrCloud\tomcat-server_1\webapps\solr\WEB-INF\lib目录

    第六步:在D:\SolrCloud\tomcat-server_1\webapps\solr\WEB-INF创建classes目录,将\solr-4.10.3\example\resources目录下的log4j.properties文件拷贝刚刚建立的classes文件下,并且修改第16行:

        log4j.appender.file.File=../solr_logs/solr.log

       注意:日志路径是自己制定的。

    第七步:启动tomcat,并在浏览器中输入:http://localhost:8080/solr/ 验证是否配置成功。如果配置成功,浏览器的页面如下:

3.2配置多Tomcat+solr同时运行

    第一步:把tomcat-server_1复制2份,分别命名tomcat-server_2,tomcat-server_3;把solr_home_1复制2份,分别命名solr_home_2,solr_home_3。,目录如下:

    第二步:为了三个tomcat能够在一台机器上同时启动,需要修改tomcat的端口信息,即修改 修改位置在D:\solrCloud\tomcat-server_*\conf\server.xml里面的参数,修改方案如下:

                            shutdown port  HTTP/1.1 Port AJP/1.3  port
tomcat-server_1 8005 8080 8009
tomcat-server_2 8015 8081 8019
tomcat-server_3 8025 8082 8029

    第三步:修改各个tomcat服务器catalina.bat文件里面的solrhome

    tomcat-server_2修改成set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_2
    tomcat-server_3修改成set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_3

    第四步:验证修改是否成功,依次启动三个Tomcat。并在浏览器输入如下的URL:

    http://localhost:8080/solr/
    http://localhost:8081/solr/
    http://localhost:8082/solr/

    如果都能正常访问到solr的admin页面,那么说明配置是成功的。否则就需要检查哪里错了或者遗漏了。

3.3 配置ZooKeeper集群

    这部分的内容与前面tomcat+solr是没有关联的。
    第一步:解压zookeeper-3.4.6.tar.gz到D:/solrCloud目录,重命名为zk-server_1。
    第二步:把D:\solrCloud\zk-server_1\conf\目录下的zoo_sample.cfg修改为zoo.cfg。并写入如下的配置参数:

tickTime=2000
initLimit=5
syncLimit=2
dataDir=D:/SolrCloud/zk-server_1/data
clientPort=2181
dataLogDir=D:/SolrCloud/zk-server_1/logs
server.1=127.0.0.1:2888:3888
server.2=127.0.0.1:2889:3889
server.3=127.0.0.1:2890:3890

    并且按照配置创建相应的data和logs目录。如果不不创建目录是无法正常启动的。在data目录中创建文件myid(不需要后缀名),在myid文件中写入数字1并保存退出。

    第三步:把zk-server_1复制2份,分别命名为zk-server_2、zk-server_3。然后修改各个zk-server的conf目录下zoo.cfg的dataDir和dataLogDir和clientPort。修改方案如下:

  dataDir dataLogDir clientPort
zk-server_1/conf/zoo.cfg D:/solrCloud/zk-server_1/data D:/solrCloud/zk-server_1/logs 2181
zk-server_2/conf/zoo.cfg D:/solrCloud/zk-server_2/data D:/solrCloud/zk-server_2/logs 2182
zk-server_3/conf/zoo.cfg D:/solrCloud/zk-server_3/data D:/solrCloud/zk-server_3/logs 2183

    并且修改每个data目录下的myid文件中的内容。zk-server_1是1, zk-server_2是2,zk-server_3是3 。

    第四步:启动三个zk-server(D:\SolrCloud\zk-server_*\bin\zkServer.cmd)。并验证是否配置成功。注意:连接第一台时有异常信息,不用管,等都连接起来就没有异常了。

3.4 配置Tomcat+solr+zookeeper集群

前面tomcat+solr能够启动和访问了,而且zookeeper也能启动和访问了。接下来就需要把他们关联起来。

    第一步:修改solr_home_*的solr.xml配置信息,把hostPort分别修改成对应的tomcat端口。

    solr_home_1/solr.xml

solr_home_2/solr.xml
<int name="hostPort">${jetty.port:8081}</int>

solr_home_3/solr.xml
<int name="hostPort">${jetty.port:8082}</int>

    第二步:修改tomcat-server_*中的catalina.bat的参数信息。

tomcat-server_1参数信息如下:
set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_1 -Dbootstrap_confdir=D:/solrCloud/solr_home_1/collection1/conf -Dcollection.configName=myconf -DnumShards=3 -DzkHost=127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183


tomcat-server_2的参数信息如下:
set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_2 -DzkHost=127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183

 

tomcat-server_3的参数信息如下:
set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_3 -DzkHost=127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183

参数解释:-DnumShards=3  表示 3个分片,由于3个节点,系统默认会一个节点一个分片。

 

第三步:由于zookeeper已经启动,先tomcat-server_1,后启动其它的tomcat-server。启动完成后,在浏览器中输入:
http://localhost:8080/solr/#/~cloud
http://localhost:8081/solr/#/~cloud
http://localhost:8082/solr/#/~cloud

如下图:

注意:在第三步中,第一次启动tomcat集群模式时候,必须先tomcat-server_1,后启动其它的tomcat-server,这里我经过多次测试过。由于tomcat-server_1中有DnumShards=3的参数,集群会知道这个collection需要分为3个shard,如果先启动其他tomcat-server,最后启动tomcat-server_1,集群会默认collection只是一个shard做3个备份。

3.5:报错处理

由于我这个步骤是参考别的博文的,所以遇到了一个错误,只要tomcat配置上zookeeper,就不能启动,单机就能启动,大概提示错误如下:org.apache.solr.common.SolrException: Could not load config for solrconfig.xml

窗口报次信息的前一行提示一个错误,大概意思是:shard1已经注册过了

原因:由于我们安装的时候不停的启动tomcat,zookeeper,且有修改tomcat的启动文件,导致zookeeper已经记录了shard1信息,tomcat-server_*启动时候又去注册。

解决方法:清空如下目录
            D:\SolrCloud\zk-server_1\data\version-2
            D:\SolrCloud\zk-server_2\data\version-2
            D:\SolrCloud\zk-server_3\data\version-2

然后重新启动zookeeper,重启动tomcat就好了。

如何避免这个错误:这个错误真正的导致原因是 tomcat-server_1参数 测配置
set JAVA_OPTS=-Dsolr.solr.home=D:/solrCloud/solr_home_1 -Dbootstrap_confdir=D:/solrCloud/solr_home_1/collection1/conf -Dcollection.configName=myconf -DnumShards=3 -DzkHost=127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183

如果我们配置的时候不配置红色部分,可以自己创建collection

 http://localhost:8080/solr/admin/collections?action=CREATE&name= collection 1&numShards=3

 

© 著作权归作者所有

小叮当_加V
粉丝 6
博文 98
码字总数 19908
作品 0
东城
私信 提问
Java之品优购部署_day01(5)

SolrCloud 2.1 SolrCloud 简介 2.1.1 什么是 SolrCloud SolrCloud(solr 云)是 Solr 提供的分布式搜索方案,当你需要大规模,容错,分布式索引和检索能力时使用 SolrCloud。当一个系统的索引数...

我是小谷粒
2018/07/09
0
0
Solr初探(6)——SolrCloud

Solr集群,即是Solr提供的分布式搜索方案,当你需要大规模,容错,分布式索引和检索能力时使用 。 当一个系统的索引数据量少的时候是不需要使用SolrCloud的,当索引量很大,搜索请求并发很高...

yuanlaijike
2018/04/12
0
0
solr集群solrCloud搭建

SolrCloud(solr 云)是Solr提供的分布式搜索方案,当你需要大规模,容错,分布式索引和检索能力时使用 SolrCloud。 当一个系统的索引数据量少的时候是不需要使用SolrCloud的,当索引量很大,搜...

黄信程
2017/07/04
0
0
SolrCloud和MultiCore的区别

一、SolrCloud 与 MultiCore 的本质区别SolrCloud 用多台机搭建一个SolrCore(即整个系统只有一套schema,solrconfig)MultiCore 是多个独立的服务,不同的core可以用几套schema,solrconfi...

clebeg
2013/09/19
2.6K
1
solr4.7.2 + zookeeper-3.3.6 在window搭建伪集群后,可以像单个solr那么创建索引吗?

solr4.7.2 + zookeeper-3.3.6 在window搭建伪集群后,可以像单个solr那么创建索引吗? 搭建好solrcloud后,log部分日志: 2017年1月24日 上午11:41:50 WARN RecoveryStrategy Stopping recov...

Jzdn
2017/01/24
313
0

没有更多内容

加载失败,请刷新页面

加载更多

springboot2.0 maven打包分离lib,resources

springboot将工程打包成jar包后,会出现获取classpath下的文件出现测试环境正常而生产环境文件找不到的问题,这是因为 1、在调试过程中,文件是真实存在于磁盘的某个目录。此时通过获取文件路...

陈俊凯
今天
4
0
BootStrap

一、BootStrap 简洁、直观、强悍的前端开发框架,让web开发更加迅速、简单 中文镜像网站:http://www.bootcss.com 用于开发响应式布局、移动设备优先的WEB项目 1、使用boot 创建文件夹,在文...

wytao1995
今天
9
0
小知识:讲述Linux命令别名与资源文件的区别

别名 别名是命令的快捷方式。为那些需要经常执行,但需要很长时间输入的长命令创建快捷方式很有用。语法是: alias ppp='ping www.baidu.com' 它们并不总是用来缩短长命令。重要的是,你将它...

老孟的Linux私房菜
今天
8
0
《JAVA核心知识》学习笔记(6. Spring 原理)-5

它是一个全面的、企业应用开发一站式的解决方案,贯穿表现层、业务层、持久层。但是 Spring 仍然可以和其他的框架无缝整合。 6.1.1. Spring 特点 6.1.1.1. 轻量级 6.1.1.2. 控制反转 6.1.1....

Shingfi
今天
7
0
Excel导入数据库数据+Excel导入网页数据【实时追踪】

1.Excel导入数据库数据:数据选项卡------>导入数据 2.Excel导入网页数据【实时追踪】:

东方墨天
今天
8
1

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部