SolrCloud+tomcat7+zookeeper集群配

Pines_Cheng 发布于2019-08-14 14:20 / 414人阅读

摘要：的主要功能主要功能包括强大的全文搜索，点击显示，面搜索，动态聚类，数据库集成，丰富的文件如，处理，和空间搜索而且他具有高度的可扩展性，提供容错的分布式搜索和索引。端口分别对应的端口其他同理。这都是不要紧的，三个启动好了就不会报错了。

solrCloud的主要功能:

主要功能包括强大的全文搜索，点击显示，面搜索，动态聚类，数据库集成，丰富的文件（如Word，PDF）处理，和空间搜索,而且他具有高度的可扩展性，提供容错的分布式搜索和索引。

         1）集中式的配置信息
    
         2）自动容错
    
         3）近实时搜索
    
         4）查询时自动负载均衡

图1. Collection大致结构图

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/1.png)

    1、下载https://zookeeper.apache.org/ 
    2、下载http://lucene.apache.org/solr/
    3、下载http://tomcat.apache.org/

下面我就开始学习之旅：

首先复制三个tomcat例如:
tomcat-server_1  端口：8080  
tomcat-server_2  端口：8090  
tomcat-server_3  端口：8100

一、在分别复制solr-4.7.0下面的example/webapps的solr.war解压复制到tomcat-server_1、tomcat-server_2、tomcat-server_3的webapp下面为solr，分别创建三个文件夹分别为solr_home_1、solr_home_2、solr_home_3作为存放solr的数据。将solr-4.7.0下面example/solr/分别复制到solr_home_1、solr_home_2、solr_home_3下面。

图2:

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/2.png)

二、分别修改solr_home_1、solr_home_2、solr_home_3下面的solr.xml。

    
            
            ${host:}
            ${jetty.port:8080}//端口分别对应tomcat的端口
            ${hostContext:solr}
            ${zkClientTimeout:30000}
            ${genericCoreNodeNames:true}
            
          
          ${socketTimeout:0}
          ${connTimeout:0}
          
    
    其他solr.xml同理。

三、分别进入tomcat-server_1、tomcat-server_2、tomcat-server_3 下面的webapp下面的solr，然后去改WEB-INF下的web.xml，分别为下面的清单：

        
               solr/home
               D:/solrCloud/solr_home_1//定义solr索引所存的地址
               java.lang.String
        
    
        
               solr/home
               D:/solrCloud/solr_home_2//定义solr索引所存的地址
               java.lang.String
           

        
               solr/home
               D:/solrCloud/solr_home_3//定义solr索引所存的地址
               java.lang.String

四、分别在tomcat-server_1、tomcat-server_2、tomcat-server_3的bin下面的catalina.bat的添加

    set java_opts=-Dsolr.home=d:/solrCloud/solr_home_1 -Dbootstrap_confdir=D:/solrCloud/solr_home_1/collection1/conf -Dcollection.configName=myconf -DnumShards=2 -DzkHost=127.0.0.1:2181
    set JAVA_OPTS=-Dsolr.home=d:/solrCloud/solr_home_2 -DzkHost=127.0.0.1:2181
    set JAVA_OPTS=-Dsolr.home=d:/solrCloud/solr_home_3 -DzkHost=127.0.0.1:2181

五、复制三个zoo例如:

        zk-server_1  端口：2181
        zk-server_2  端口：2182
        zk-server_3  端口：2183
        在zk-server_1、zk-server_2、zk-server_3下面分别建立两个文件夹为data和logs用来存储数据和日志。
        分别再data目录下面创建myid，里面分别写1、2、3。
        配置D:solrCloudzk-server_1confzoo.cfg如下:
        dataDir=D:/solrCloud/zk-server_1/data
        dataLogDir=D:/solrCloud/zk-server_1/logs
        clientPort=2181
        server.1=127.0.0.1:2888:3888
        server.2=127.0.0.1:2889:3889
        server.3=127.0.0.1:2890:3890
        其他两个配置如同上面配置。

图3:

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/3.png)


下面我们启动zk_server1、zk_server2、zk_server3.如下图:

图4:

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/4.jpeg)

启动时，第一个报错是因为找不到其他两个zk，才会报错。这都是不要紧的，三个启动好了就不会报错了。


下面我们在启动tomcat-server_1、tomcat-server_2、tomcat-server_3。

图5:

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/5.jpeg)

图6:

![osjp-vertx-fig1-thumb-100159570-orig](http://7xvmgi.com1.z0.glb.clouddn.com/6.png)

创建

http://127.0.0.1:8080/solr/admin/collections?action=CREATE&name=collection1&numShards=3&replicationFactor=2&maxShardsPerNode=2&collection.configName=myconf

重新加载接口

http://127.0.0.1:8080/solr/admin/collections?action=RELOAD&name=collection1

删除

http://127.0.0.1:8080s/solr/admin/collections?action=DELETE&name=collection1

清单1. SolrCloud.java

    import java.io.IOException;
    import java.util.ArrayList;
    import java.util.Collection;
    import java.util.Map;
    import org.apache.solr.client.solrj.SolrQuery;
    import org.apache.solr.client.solrj.SolrServer;
    import org.apache.solr.client.solrj.SolrServerException;
    import org.apache.solr.client.solrj.impl.CloudSolrServer;
    import org.apache.solr.client.solrj.response.QueryResponse;
    import org.apache.solr.common.SolrDocument;
    import org.apache.solr.common.SolrDocumentList;
    import org.apache.solr.common.SolrInputDocument;
    public class SolrCloud {
            private static CloudSolrServer cloudSolrServer;
            private static synchronized CloudSolrServer getCloudSolrServer(final String zkHost) {
            if (cloudSolrServer == null) {
                try {
                        cloudSolrServer = new CloudSolrServer(zkHost);
                    } catch (Exception e) {
                        e.printStackTrace();
                    }
            }

        return cloudSolrServer;
    }
    //添加索引
    private void addIndex(SolrServer solrServer) {
        try {
            SolrInputDocument doc1 = new SolrInputDocument();
            doc1.addField("id", "421245251215121452521251");
            doc1.addField("title", "张三");
            SolrInputDocument doc2 = new SolrInputDocument();
            doc2.addField("id", "4224558524254245848524243");
            doc2.addField("title", "李四");

            SolrInputDocument doc3 = new SolrInputDocument();
            doc3.addField("id", "4543543458643541324153453");
            doc3.addField("title", "王五");

            Collection docs = new ArrayList();
            docs.add(doc1);
            docs.add(doc2);
            docs.add(doc3);

            solrServer.add(docs);
            solrServer.commit();

        } catch (SolrServerException e) {
            System.out.println("Add docs Exception !!!");
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        } catch (Exception e) {
            System.out.println("Unknowned Exception!!!!!");
            e.printStackTrace();
        }

    }
   // 搜索
    public void search(SolrServer solrServer, String String) {
        SolrQuery query = new SolrQuery();
        query.setQuery(String);
        try {
            QueryResponse response = solrServer.query(query);
            SolrDocumentList docs = response.getResults();
            for (SolrDocument doc : docs) {
                for (Map.Entry entry : doc) {
                    System.out.println(entry.getKey()+"="+entry.getValue());
                } 
            }
        } catch (SolrServerException e) {
            e.printStackTrace();
        } catch (Exception e) {
            System.out.println("Unknowned Exception!!!!");
            e.printStackTrace();
        }
    }
    //删除
    public void deleteAllIndex(SolrServer solrServer) {
        try {
            solrServer.deleteByQuery("*:*");// delete everything!
            solrServer.commit();
        } catch (SolrServerException e) {
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        } catch (Exception e) {
            System.out.println("Unknowned Exception !!!!");
            e.printStackTrace();
        }
    }

    public static void main(String[] args) {
        final String zkHost = "127.0.0.1:2181,127.0.0.1:2182,127.0.0.1:2183";
        final String defaultCollection = "collection1";
        final int zkClientTimeout = 20000;
        final int zkConnectTimeout = 1000;

        CloudSolrServer cloudSolrServer = getCloudSolrServer(zkHost);
        System.out.println("The Cloud SolrServer Instance has benn created!");
        cloudSolrServer.setDefaultCollection(defaultCollection);
        cloudSolrServer.setZkClientTimeout(zkClientTimeout);
        cloudSolrServer.setZkConnectTimeout(zkConnectTimeout);
        cloudSolrServer.connect();
        System.out.println("The cloud Server has been connected !!!!");
        SolrCloud test = new SolrCloud();
         test.addIndex(cloudSolrServer);
         test.search(cloudSolrServer, "id:*");
         test.deleteAllIndex(cloudSolrServer);
         test.search(cloudSolrServer, "id:*");
         System.out.println("hashCode"+test.hashCode());
         cloudSolrServer.shutdown();
    }
}

相关阅读

使用Vert.x构建Web服务器和消息系统

RABBITMQ在分布式系统的应用

作者信息
作者系力谱宿云 LeapCloud 团队_云服务研发成员：JinYang Zhang
首发地址：https://blog.maxleap.cn/archives/977

欢迎关注微信订阅号：从移动到云端（MaxLeap - 让移动开发更快速）

欢迎加入我们的力谱宿云 LeapCloud 活动QQ群：555973817，我们将不定期做技术分享活动。
若有转载需要，请转发时注意自带作者信息一栏并本自媒体公号：力谱宿云 LeapCloud，尊重原创作者的劳动成果~ 谢谢配合~

云服务器 GPU云服务器 zookeeper集群安装 zookeeper集群配置 zookeeper集群搭建 SolrCloud

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/64953.html

墙裂推荐：搜云库技术团队，面试必备的技术干货

摘要：今天整理了一下近大半年以来的一些文章，和我的预期一样，很多文章我都忘记自己曾经写过了，这个记录的过程让我也有了新的理解。希望大家，收藏，点赞，加转发。今天整理了一下近大半年以来的一些文章，和我的预期一样，很多文章我都忘记自己曾经写过了，这个记录的过程让我也有了新的理解。希望大家，收藏，点赞，加转发。面试必备面试必备：深入Spring MVC DispatchServlet 源码...

SegmentFault 2019-06-24 18:12 评论0 收藏0
墙裂推荐：搜云库技术团队，面试必备的技术干货

摘要：今天整理了一下近大半年以来的一些文章，和我的预期一样，很多文章我都忘记自己曾经写过了，这个记录的过程让我也有了新的理解。希望大家，收藏，点赞，加转发。今天整理了一下近大半年以来的一些文章，和我的预期一样，很多文章我都忘记自己曾经写过了，这个记录的过程让我也有了新的理解。希望大家，收藏，点赞，加转发。面试必备面试必备：深入Spring MVC DispatchServlet 源码...

Neilyo 2019-08-16 13:48 评论0 收藏0
【推荐】最新200篇：技术文章整理

摘要：作为面试官，我是如何甄别应聘者的包装程度语言和等其他语言的对比分析和主从复制的原理详解和持久化的原理是什么面试中经常被问到的持久化与恢复实现故障恢复自动化详解哨兵技术查漏补缺最易错过的技术要点大扫盲意外宕机不难解决，但你真的懂数据恢复吗每秒作为面试官，我是如何甄别应聘者的包装程度Go语言和Java、python等其他语言的对比分析 Redis和MySQL Redis：主从复制的原理详...

BicycleWarrior 2019-08-19 11:38 评论0 收藏0