第04项目：淘淘商城(SpringMVC+Spring+Mybatis)【第八天】(solr服务器搭建、搜索功能实现)

https://pan.baidu.com/s/1bptYGAb#list/path=%2F&parentPath=%2Fsharelink389619878-229862621083040

第04项目：淘淘商城(SpringMVC+Spring+Mybatis) 的学习实践总结【第五天】

第04项目：淘淘商城(SpringMVC+Spring+Mybatis) 的学习实践总结【第六天】

第04项目：淘淘商城(SpringMVC+Spring+Mybatis)【第七天】(redis缓存)

第04项目：淘淘商城(SpringMVC+Spring+Mybatis)【第八天】(solr服务器搭建、搜索功能实现)

第04项目：淘淘商城(SpringMVC+Spring+Mybatis)【第八天】(solr服务器搭建、搜索功能实现)

---

今天内容：

商品搜索功能：

1、使用solr实现。

2、搭建搜索服务层。

3、使用poratl调用搜索服务，实现商品搜索。

---

在安装使用solr前，需要先安装并配置好jdk1.8.0和tomcat8.5在CentOS7.5虚拟机系统中。具体步骤详情请见本文末尾的参考资料。

在VMware® 15Pro虚拟机中的CentOS7系统下安装与配置Solr整合tomcat8.5与中文分词器的使用

03.solr配置中文分析器及业务字段

启动tomcat服务：

cd /usr/local/tomcat8.5/bin

./startup.sh

关闭tomcat服务：

cd /usr/local/tomcat8.5/bin

./shutdown.sh

浏览器访问地址

http://192.168.179.128:8080/solr/index.html#/

04.索引库的维护

05.solrJ维护索引库

solrJ客户端，此处使用7.7.2版本

<!-- solrJ客户端 -->
<dependency>
  <groupId>org.apache.solr</groupId>
  <artifactId>solr-solrj</artifactId>
  <version>7.7.2</version>
</dependency>

HttpSolrClient solrServer = new HttpSolrClient.Builder("http://192.168.179.128:8080/solr/collection1").build();

package com.taotao.rest.jedis;

import org.apache.solr.client.solrj.impl.HttpSolrClient;
import org.apache.solr.common.SolrInputDocument;
import org.junit.Test;

public class SolrJTest {
    @Test
    public void addDocument() throws Exception {

        // https://www.cnblogs.com/jepson6669/p/9142676.html#headline1-11
        // 创建一连接，solr7的URL需要在solr/后面补全core的名称
        HttpSolrClient solrServer = new HttpSolrClient.Builder("http://192.168.179.128:8080/solr/collection1").build();
        //创建一个文档对象
        SolrInputDocument document = new SolrInputDocument();
        document.addField("id", "test001");
        document.addField("item_title", "测试商品001");
        document.addField("item_price", 123456);
        //把文档对象写入索引库
        solrServer.add(document);
        //提交
        solrServer.commit();
        //Solr中没有update,只需要id一致覆盖重写即可
    }

    @Test
    public void deleteDocument() throws Exception {
        //创建一连接Solr4
        //SolrServer solrServer = new HttpSolrServer("http://192.168.25.154:8080/solr");
        //创建一连接Solr7
        HttpSolrClient solrServer = new HttpSolrClient.Builder("http://192.168.179.128:8080/solr/collection1").build();
        //solrServer.deleteById("test001");
        solrServer.deleteByQuery("*:*");
        solrServer.commit();
    }

}

把商品信息导入到索引库

使用java程序读取mysql数据库中的商品信息，然后创建solr文档对象，把商品信息写入索引库。

需要发布一个服务。

为了灵活的进行分布式部署需要创建一搜素的服务工程发布 搜素服务。Taotao-search。

3.3    导入商品数据

3.3.1   需要使用的表

3.3.2   Sql语句

SELECT
    a.id,
    a.title,
    a.sell_point,
    a.price,
    a.image,
    b.`name` category_name,
    c.item_desc
FROM
    tb_item a
LEFT JOIN tb_item_cat b ON a.cid = b.id
LEFT JOIN tb_item_desc c ON a.id = c.item_id

3.3.3   Dao层

需要创建一个mapper接口+mapper映射文件。名称相同且在同一目录下。

package com.taotao.search.pojo;

public class Item {
    private String id;
    private String title;
    private String sell_point;
    private long price;
    private String image;
    private String category_name;
    private String item_des;

//==============================

}

ItemMapper.xml

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd" >
<mapper namespace="com.taotao.search.mapper.ItemMapper">

    <select id="getItemList"
        resultType="com.taotao.search.pojo.Item">
        SELECT
        a.id,
        a.title,
        a.sell_point,
        a.price,
        a.image,
        b.name category_name
        FROM
        tb_item a
        LEFT JOIN tb_item_cat b ON a.cid = b.id
    </select>

</mapper>

applicationContext-solr.xml

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:context="http://www.springframework.org/schema/context"
    xmlns:p="http://www.springframework.org/schema/p"
    xmlns:aop="http://www.springframework.org/schema/aop"
    xmlns:tx="http://www.springframework.org/schema/tx"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.0.xsd
    http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-4.0.xsd">

    <!-- 扫描包加载Service实现类 -->
    <!-- 配置spring创建容器时，开启注解要扫描的包，不扫描@Controller 注解的 JAVA 类-->
    <context:component-scan
        base-package="com.taotao.search.service" />

    <!-- 配置单机版7.7.2的Solr的HttpSolrClient对象 -->
    <bean id="httpSolrClient"  class="org.apache.solr.client.solrj.impl.HttpSolrClient">
        <constructor-arg name="builder"  value="${SOLR.SERVER.URL}"></constructor-arg>
    </bean>

</beans>

solr.properties

#solr服务器虚拟机core地址的baseUrl
SOLR.SERVER.URL=http://192.168.179.128:8080/solr/collection1

Service层

@Service
public class ItemServiceImpl implements ItemService {

    @Value("SOLR.SERVER.URL")
    private String SOLR_SERVER_URL;

    @Autowired
    private ItemMapper itemMapper;

    @Autowired
    private HttpSolrClient httpSolrClient;

    @Override
    public TaotaoResult importAllItems() {

        try {
            // 查询商品列表
            List<Item> list = itemMapper.getItemLsit();

            // 把商品信息写入索引库
            for (Item item : list) {
                // 创建一个SolrInputDocument对象
                SolrInputDocument document = new SolrInputDocument();
                document.setField("id", item.getId());
                document.setField("item_title", item.getTitle());
                document.setField("item_sell_point", item.getSell_point());
                document.setField("item_price", item.getPrice());
                document.setField("item_image", item.getImage());
                document.setField("item_category_name", item.getCategory_name());
                document.setField("item_desc", item.getItem_des());
                // 写入索引库
                httpSolrClient.add(document);
            }
            // 提交修改
            httpSolrClient.commit();

        } catch (Exception e) {
            e.printStackTrace();
            return TaotaoResult.build(500, ExceptionUtil.getStackTrace(e));
        }

        return TaotaoResult.ok();
    }

}

java的web项目使用maven管理工程，要把src/main/java目录下的package里的.xml和.properties文件也编译build

        <resources>
            <resource>
                <directory>src/main/java</directory>
                <includes>
                    <include>**/*.properties</include>
                    <include>**/*.xml</include>
                </includes>
                <filtering>false</filtering>
            </resource>
            <resource>
                <directory>src/main/resources</directory>
                <includes>
                    <include>**/*.properties</include>
                    <include>**/*.xml</include>
                </includes>
                <filtering>false</filtering>
            </resource>
        </resources>

3.3.5   Controller层

功能：发布一个rest形式的服务。调用Service的服务方法，把数据导入到索引库中，返回TaotaoResult。

Url：/search/manager/importall

@Controller
@RequestMapping("/manager")
public class ItemController {

    @Autowired
    private ItemService itemService;

    /**
     * 导入商品数据到索引库
     */
    @RequestMapping("/importall")
    @ResponseBody
    public TaotaoResult importAllItems() {
        TaotaoResult result = itemService.importAllItems();
        return result;
    }
}

http://localhost:8083/search/manager/importall

---

4  搜索服务发布

4.1    需求分析

http形式的服务。对外提供搜索服务是一个get形式的服务。调用此服务时需要查询条件，分页条件可以使用page（要显示第几页）、rows（每页显示的记录数）。返回一个json格式的数据。可以使用TaotaoResult包装一个商品列表转换成json。

请求的url：/search/query/{查询条件}/{page}/{rows}

/search/query?q={查询条件}&page={page}&rows={rows}

返回的结果：TaotaoResult包装商品列表。

package com.taotao.common.pojo;

import java.util.List;

public class SearchResult {
    //商品列表
    private List<Item> itemList;
    //总记录数
    private long recordCount;
    //总页数
    private long pageCount;
    //当前页
    private long curPage;

//==========get/set=======//

}

/**
 *   商品搜索DAO
 * @author kangy
 *
 */
@Repository //DAO层IOC注解
public class SearchDaoImpl implements SearchDao {

    @Autowired //在applicationContext-solr.xml里注入对象
    private HttpSolrClient httpSolrClient; 

    @Override
    public SearchResult search(SolrQuery query) throws Exception {
        //new一个返回值对象
        SearchResult result = new SearchResult();
        //1.根据查询条件查询索引库
        QueryResponse queryResponse = httpSolrClient.query(query);
//2.取查询结果
        SolrDocumentList solrDocumentList = queryResponse.getResults();
//3.1取查询结果总数量
        result.setRecordCount(solrDocumentList.getNumFound());
        //new一个商品列表
        List<Item> itemList = new ArrayList<>();
        //取高亮显示
        Map<String, Map<String, List<String>>> highlighting = queryResponse.getHighlighting();
        //取商品列表
        for (SolrDocument solrDocument : solrDocumentList) {
//new创建一商品对象
            Item item = new Item();
            item.setId((String) solrDocument.get("id"));
            //取高亮显示的结果
            List<String> list = highlighting.get(solrDocument.get("id")).get("item_title");
            String title = "";
            if (list != null && list.size()>0) {
                title = list.get(0);
            } else {
                title = (String) solrDocument.get("item_title");
            }
            item.setTitle(title);
            item.setImage((String) solrDocument.get("item_image"));
            item.setPrice((long) solrDocument.get("item_price"));
            item.setSell_point((String) solrDocument.get("item_sell_point"));
            item.setCategory_name((String) solrDocument.get("item_category_name"));
            //把item的结果添加到商品列表
            itemList.add(item);
        }
        //返回商品查询结果集合
        result.setItemList(itemList);
        return result;
    }

}

4.3   Service层

功能：接收查询条件。查询条件及分页条件（page、rows），创建一个SolrQuery对象。指定查询条件、分页条件、默认搜索域、高亮显示。调用dao层执行查询。得到查询结果计算总页数。

返回SearchResult对象。

@Service
public class SearchServiceImpl implements SearchService {

    @Autowired
    private SearchDao searchDao;

    @Override
    public SearchResult search(String queryString, int page, int rows) throws Exception {
        // 创建查询条件对象
        SolrQuery query = new SolrQuery();
        // 1.设置查询条件
        query.setQuery(queryString);
        // 2.设置分页
        query.setRows(rows);
        query.setStart((page - 1) * rows);
        // 3.设置默认搜索域
        query.set("df", "item_keywords");
        // 设置高亮显示
        query.setHighlight(true);
        query.addHighlightField("item_title");
        query.setHighlightSimplePre("<em style=\"color:red\">");
        query.setHighlightSimplePost("</em>");
        // 4.执行查询
        SearchResult searchResult = searchDao.search(query);
        // 5.计算查询结果总页数
        long recordCount = searchResult.getRecordCount();
        long pageCount = recordCount / rows;
        if (recordCount % rows > 0) {
            pageCount++;
        }
        searchResult.setPageCount(pageCount);
        searchResult.setCurPage(page);

        return searchResult;
    }

}

4.4   Controller层

接收查询参数：查询条件、page、rows

调用Service执行查询返回一个查询结果对象。

把查询结果包装到TaotaoResult中返回，结果是json格式的数据。

如果查询条件为空，返回状态码：400，消息：查询条件不能为空。

Page为空：默认为1

Rows 为空：默认为60

@Controller
public class SearchController {

    @Autowired
    private SearchService searchService;

    @GetMapping(value="/query")
    @ResponseBody
    public TaotaoResult search(@RequestParam("q")String queryString,
            @RequestParam(defaultValue="1")Integer page,
            @RequestParam(defaultValue="60")Integer rows) {
        //查询条件不能为空
        //commons.lang3.StringUtils
        if (StringUtils.isBlank(queryString)) {
            return TaotaoResult.build(400, "查询条件不能为空");
        }
        //com.taotao.common.pojo.SearchResult
        SearchResult searchResult = null;
        try {
            //解决get乱码问题
            queryString = new String(queryString.getBytes("iso-8859-1"),"utf-8");
            searchResult = searchService.search(queryString, page, rows);
        } catch (Exception e) {
            e.printStackTrace();
            //com.taotao.common.utils.ExceptionUtil
            return TaotaoResult.build(500, ExceptionUtil.getStackTrace(e));
        }
        return TaotaoResult.ok(searchResult);

    }

}

扫描dao的applicationContext-dao.xml配置：

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:context="http://www.springframework.org/schema/context"
    xmlns:p="http://www.springframework.org/schema/p"
    xmlns:aop="http://www.springframework.org/schema/aop"
    xmlns:tx="http://www.springframework.org/schema/tx"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.0.xsd
    http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-4.0.xsd">

    <!--扫描包加载DAO层和Service层 -->
    <!-- 配置spring创建容器时，开启注解要扫描的包，不扫描@Controller 注解的 JAVA 类-->
    <context:component-scan base-package="com.taotao.search">
        <context:exclude-filter type="annotation" expression="org.springframework.stereotype.Controller"/>
    </context:component-scan>

http://localhost:8083/search/query?q=手机

===============================================================

在VMware® Workstation 中的CentOS7系统虚拟机下安装jdk-8u231-linux-x64.tar.gz

win10环境下使用VM15PRO虚拟机CentOS7系统下安装tomcat8.5

拼音分析器的安装 ：https://www.cnblogs.com/jepson6669/p/9134652.html

未完待续。。。