首页 > 代码库 > SolrCloud4.7.1分布式部署

SolrCloud4.7.1分布式部署

2024-07-02 03:30:41   225人阅读

一.环境

软件:

  • apache-tomcat-7.0.53.tar.gz
  • solr-4.7.1.tgz
  • zookeeper-3.4.6.tar.gz

 

规划:

三个节点IP:

  • 192.168.50.9
  • 192.168.50.227
  • 192.168.20.32

请配置每台机器上hosts文件，使每个节点都能通过机器名访问

SolrCloud数据集

primary

Zookeeper集群

3

索引分片

3

复制因子

2

手动将3个索引分片(Shard)的复本(Replica)分布在3个SolrCloud节点上

说明:部署修改配置操作都在Window系统上完成,最后打成包放到Linux上解压运行

 

二.安装Zookeeper集群

1.解压zookeeper-3.4.6.tar.gz到本地

 

2.复制zookeeper-3.4.6\conf下zoo_sample.cfg为zoo.cfg并修改内容

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/data/zookeeper-3.4.6

clientPort=1181

server.1=192.168.50.9:1888:2888

server.2=192.168.20.32:1888:2888

server.3=192.168.50.227:1888:2888

这里我修改了端口号,也可根据情况调整.

需要注意的是Server.1中1为下面对应机器的myid编号

3.在zookeeper-3.4.6的根目录打包成zookeeper-3.4.6.zip

 

4.在liunx中建立solrCloud4.7目录将zookeeper-3.4.6.zip上传并解压

mkdir solrCloud4.7

unzip zookeeper-3.4.6.zip

 

5.新建/data/zookeeper-3.4.6,初始化myid,三个节点编号依次为1,2,3，在其余节点上分别执行命令（注意修改编号）。

mkdir /data/zookeeper-3.4.6 -p

echo "1">/data/zookeeper-3.4.6/myid

注意1的节点IP为192.168.50.9

 

6.在其他三个节点上执行上述操作后,启动Zookeeper集群

sh zookeeper-3.4.6/bin/zkServer.sh start

sh zookeeper-3.4.6/bin/zkServer.sh status

查看Zookeeper集群状态

 

三.Tomcat和Solr的配置

1.解压apache-tomcat-7.0.53.tar.gz与solr-4.7.1.tgz到本地

 

2.修改apache-tomcat-7.0.53\bin中的catalina.sh文件,配置JAVA_OPTS

JAVA_OPTS="-Djetty.port=8585

-Dsolr.solr.home=/solrCloud4.7/solrhome

-Dbootstrap_confdir=/solrCloud4.7/solrhome/primary/conf

-Dcollection.configName=primary

-DzkHost=192.168.50.227:1181,192.168.20.32:1181,192.168.50.9:1181"

注意之后要建立solrhome

 

3.修改apache-tomcat-7.0.53\conf下的server.xml文件中端口号

<Connector port="8585" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" />

 

4.拷贝solr-4.7.1\example\resources下log4j.properties到apache-tomcat-7.0.53\lib中

 

5.建立solrhome文件夹,将solr-4.7.1\example\solr文件夹中的全部内容拷贝到solrhome中

a.修改solr.xml

<solr>

<solrcloud>

<str name="host">${host:}</str>

<str name="zkHost">192.168.50.9:1181,192.168.20.32:1181,192.168.50.227:1181</str>

<int name="hostPort">${jetty.port:8585}</int>

<str name="hostContext">${hostContext:solr}</str>

<int name="zkClientTimeout">${zkClientTimeout:30000}</int>

<bool name="genericCoreNodeNames">${genericCoreNodeNames:true}</bool>

</solrcloud>

 

<shardHandlerFactory name="shardHandlerFactory"

class="HttpShardHandlerFactory">

<int name="socketTimeout">${socketTimeout:15000}</int>

<int name="connTimeout">${connTimeout:15000}</int>

</shardHandlerFactory>

</solr>

 

b.重命名collection1为primary,修改primary中core.properties文件中name=primary

 

6.解压solr-4.7.1\example\webapps\solr.war到本地(/solr)

a.拷贝solr-4.7.1\example\lib\ext下所有文件到solr\WEB-INF\lib中

b.修改solr-4.7.1\example\webapps\solr\WEB-INF中web.xml文件

<!--

<env-entry>

<env-entry-name>solr/home</env-entry-name>

<env-entry-value>/put/your/solr/home/here</env-entry-value>

<env-entry-type>java.lang.String</env-entry-type>

</env-entry>

-->

放开上面注释,替换为

<env-entry>

<env-entry-name>solr/home</env-entry-name>

<env-entry-value>/solrCloud4.7/solrhome</env-entry-value>

<env-entry-type>java.lang.String</env-entry-type>

</env-entry>

 

7.拷贝之前配置的solr-4.7.1\example\webapps\solr文件夹到tomcat中

apache-tomcat-7.0.53\webapps文件夹下

 

8.在根目录打包solrhome和apache-tomcat-7.0.53,上传到solrCloud4.7下

 

四.Zookeeper集群的配置

1.通过bootstrap设置solrhome

java -classpath .:/solrCloud4.7/apache-tomcat-7.0.53/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI

-zkhost 192.168.50.9:1181,192.168.50.227:1181,192.168.20.32:1181

-cmd bootstrap

-solrhome /solrCloud4.7/solrhome

SolrCloud集群的所有的配置存储在ZooKeeper上。一旦SolrCloud节点启动时配置了-Dbootstrap_confdir参数,

该节点的配置信息将发送到ZooKeeper上存储。其他节点启动时会应用ZooKeeper上的配置信息,这样当我们改动配置时就不用一个个机子去更改了。

 

2.SolrCloud是通过ZooKeeper集群来保证配置文件的变更及时同步到各个节点上，所以，需要将配置文件上传到ZooKeeper集群中

java -classpath .:/solrCloud4.7/apache-tomcat-7.0.53/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI

-zkhost 192.168.50.9:1181,192.168.50.227:1181,192.168.20.32:1181

-cmd upconfig

-confdir /solrCloud4.7/solrhome/primary/conf

-confname primaryconf

zkhost指定ZooKeeper地址，逗号分割,/solrhome/primary/conf为配置文件目录。primaryconf为在ZooKeeper上的配置文件名称。

 

3.把配置文件和目标collection联系起来

java -classpath .:/solrCloud4.7/apache-tomcat-7.0.53/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI

-zkhost 192.168.50.9:1181,192.168.50.227:1181,192.168.20.32:1181

-cmd linkconfig

-collection primary -confname primaryconf

创建的collection叫做primary，并指定和primaryconf连接

 

4.查看Zookeeper集群状态

sh zookeeper-3.4.6/bin/zkCli.sh -server localhost:1181

 

 

五.启动Tomcat

1.给tomcat中sh文件授权

chmod +x apache-tomcat-7.0.53/bin/*.sh

 

2.启动三台机子的tomcat

sh apache-tomcat-7.0.53/bin/startup.sh

    这个版本没有配好,solrCloud也不会报错

 

3.创建collection,初始化shard

curl ‘http://192.168.50.9:8585/solr/admin/collections?action=CREATE&name=primary&numShards=3&replicationFactor=1‘

 

返回内容

<?xml version="1.0" encoding="UTF-8"?>

<response>

<lst name="responseHeader">

<int name="status">0</int>

<int name="QTime">4228</int>

</lst>

<lst name="success">

<lst>

<lst name="responseHeader">

<int name="status">0</int>

<int name="QTime">3606</int>

</lst>

<str name="core">primary_shard2_replica1</str>

</lst>

<lst>

<lst name="responseHeader">

<int name="status">0</int>

<int name="QTime">3661</int>

</lst>

<str name="core">primary_shard3_replica1</str>

</lst>

<lst>

<lst name="responseHeader">

<int name="status">0</int>

<int name="QTime">3820</int>

</lst>

<str name="core">primary_shard1_replica1</str>

</lst>

</lst>

</response>

 


联系
我们