Java API 开发中使用 Solr 进行全文搜索

随着互联网的发展和信息爆炸式增长,我们现在能够访问和获取的信息量非常大,无论是从网页、文献还是日常生活中获取的信息,都需要一种高效的方式来处理和管理。全文搜索是一种非常高效和常用的方式,它可以通过关键词或短语的方式定位和提取我们需要的信息,而 Solr 就是一种非常适合用于全文搜索开发的工具。

本文将介绍 Solr 的基本概念以及在 Java API 开发中如何使用 Solr 进行全文搜索。

一、Solr 简介

Solr 本质上是一款开源的 enterprise search platform,它基于 Apache Lucene 的 Java 库,并提供了一些方便的 REST APIs。根据 Solr 官方的介绍,其主要包括以下特性:

  • 全文搜索
  • 实时搜索
  • 网站搜索
  • 分布式搜索
  • 数据库集成
  • 多种文件格式的解析
  • 多种文件格式的导出
  • 外部配置

作为一种企业级的搜索平台,Solr 提供了非常完善的搜索功能和灵活的配置方式,这使得我们在实际开发中可以很方便地进行搜索模块的开发。下面我们将重点介绍在 Java API 开发中如何使用 Solr 进行全文搜索。

二、使用 Solr 进行全文搜索

2.1 安装 Solr

首先,我们需要在本地环境或服务器上安装 Solr。Solr 官方提供了非常方便的方式来安装和运行 Solr:

  • 下载 Solr 地址:https://lucene.apache.org/solr/downloads.html。
  • 解压文件:tar -zxvf solr-x.x.x.zip。
  • 进入解压文件夹:cd solr-x.x.x。
  • 启动 Solr:bin/solr start。

2.2 创建 Solr Core 并定义 Schema

Solr Core 是 Solr 中一个非常核心的概念,它相当于一个独立的搜索环境,包含数据的索引和搜索请求的处理。在 Solr 中,我们可以创建多个 Core,每个 Core 都可以有独立的配置和数据集。

在 Solr 中,我们需要首先创建一个 Core,然后再定义用于搜索的 Schema。Schema 定义了数据的字段、类型、索引等属性,这些属性将影响搜索的效率和准确度。

可以使用 Solr 自带的 Schema or 用户自定义 Schema 来定义搜索所需的字段属性,这里介绍使用 Solr 的默认 Schema。

使用 Solr 自有默认Schema:

  1. 创建 core:

    bin/solr create_core -c <core name>
  2. 清除所有创建了的字段:

    curl http://localhost:8983/solr/<core name>/schema -H 'Content-type:application/json' -d '{"delete-all-fields":{}}'
  3. 添加字段:

    curl http://localhost:8983/solr/<core name>/schema -H 'Content-type:application/json' -d '
     {
       "add-field":{
          "name":"field_name",
          "type":"string",
          "stored":true
        }
     }'
  4. 重启Solr服务

使用用户自定义Schema:

用户可以自定义Schema以满足不同的应用需求,Solr提供了Schema API。为创作者提供了简便的Schema添加。

  1. 创建 core:

    bin/solr create_core -c <core name>
  2. 添加字段:

    • 添加字段类型:
      向 Solr server 发送POST 请求,content_type 设置为application/json
    {   
         "add-field-type": {   
           "name":"test_fieldType","class":"solr.TextField","indexAnalyzer":{   
              "tokenizer":{   
                 "class":"solr.StandardTokenizerFactory"   
              },"filters":[  
              {   
                  "class":"solr.StopFilterFactory",   
                  "ignoreCase":true,   
                  "words":"stopword.txt",   
                  "format":"snowball",   
                  "enablePositionIncrements":true   
              },{   
                  "class":"solr.SnowballPorterFilterFactory",   
                  "language":"English"   
              }   
             ],   
             "queryAnalyzer":{   
                 "tokenizer":{   
                    "class":"solr.StandardTokenizerFactory"   
                  },"filters":[  
                  {   
                     "class":"solr.StopFilterFactory",   
                     "ignoreCase":true,   
                     "words":"stopword.txt",   
                     "format":"snowball",   
                     "enablePositionIncrements":true   
                  },{   
                     "class":"solr.SnowballPorterFilterFactory",   
                     "language":"English"   
                   }   
                 ]   
              }   
           }   
    }
    • 添加字段(title):
    {
         "add-field": {
             "name": "title",
             "type": "text_en",
             "stored": true
         }
    }

    字段添加成功后会返回回应。

  3. 在Solr config中指定这个Schema:

    进入${core}/conf目录中修改solrconfig.xml,添加以下代码:

    <schemaFactory class="ClassicIndexSchemaFactory"/>
    <schema name="schema_name" version="1.5">
        <field name="title" type="text_en" indexed="true" stored="true" />
    </schema>

二、在 Java API 中使用 Solr 进行全文搜索

接下来,我们将介绍如何在 Java Web 应用程序中使用 Solr 的 Java API 进行全文搜索。

  1. 添加 SolrJ 依赖

在 Maven 项目中,我们需要添加 SolrJ 依赖,Solr 官方提供了非常方便的依赖:

<dependency>
    <groupId>org.apache.solr</groupId>
    <artifactId>solr-solrj</artifactId>
    <version>8.2.0</version>
</dependency>
  1. 在代码中使用 SolrJ 进行搜索

在 Java 代码中,我们可以使用 SolrJ 提供的 QueryResponse 和 SolrClient 来进行搜索操作。查询的数据都可以被视为键值对。

首先,我们需要创建 SolrClient 的实例。在 SolrJ 中,SolrClient 是 Solr 的客户端,提供了直接调用 Solr REST API 的方法。

String solrUrl = "http://localhost:8983/solr/core_name";
SolrClient solr = new HttpSolrClient.Builder(solrUrl).build();

然后,我们需要创建一个 SolrQuery 对象,这个对象是用来设置搜索参数的,其中包括搜索关键词、排序规则、过滤条件等。

SolrQuery query = new SolrQuery();
query.setQuery("keyword");
query.setStart(0);
query.setRows(10);
query.setSort("sort_field", SolrQuery.ORDER.asc);
query.addFilterQuery("filter_field:filter_value");

最后,我们可以通过 solr.query(query) 方法来执行搜索,返回的 QueryResponse 中包含了搜索结果和相关的元数据信息。我们需要通过 response.getResults() 方法来获取搜索结果列表。

QueryResponse response = solr.query(query);
SolrDocumentList results = response.getResults();

在实际开发中,我们还可以根据需要对搜索结果进行二次处理,比如将结果转换为 JSON 格式或 Java 对象。

for (SolrDocument result : results) {
    String id = (String) result.getFieldValue("id");
    String title = (String) result.getFieldValue("title");
    String content = (String) result.getFieldValue("content");
    
    // 将搜索结果转换为 Java 实体类
    SearchResult item = new SearchResult(id, title, content);
    
    // 或将搜索结果转换为 JSON 字符串
    String json = new ObjectMapper().writeValueAsString(result);
}

以上就是在 Java API 开发中使用 Solr 进行全文搜索的基本过程。Solr 提供了非常完善的搜索功能和 Java API 支持,使得我们可以轻松开发出高效、准确的搜索模块,为用户提供更好的搜索体验。

以上就是Java API 开发中使用 Solr 进行全文搜索的详细内容,更多请关注其它相关文章!