Elasticsearch系列---聚合查询原理
概要本篇主要介绍聚合查询的内部原理，正排索引是如何建立的和优化的，fielddata的使用，最后简单介绍了聚合分析时如何选用深度优先和广度优先。正排索引聚合查询的内部原理是什么，Elastichsearch是用什么样的数据结构去执行聚合的？用倒排索引吗？工作原理我们了解到倒排索引对搜索是非常高效的，...
elasticsearch系列（五）score
概述score在ES中有着很重要的作用，有了它才有了rank，是验证文档相关性的关键数据，score越大代表匹配到的文档相关性越大官方解释查询的时候可以用explain来展示score的计算过程，也可以增加format=yaml来讲json转成yaml方便阅读类似xxx/_search?explai...
ElasticSearch 2 (23) - 语言处理系列之词根提取
ElasticSearch 2 (23) - 语言处理系列之词根提取摘要世界上大多数语言都是屈折变化的，意思是词语可以通过变形来表达不同的含义：数（Number）: fox, foxes时态（Tense）: pay, paid, paying性（Gender）: waiter, waitress人称...
ElasticSearch 2 (36) - 信息聚合系列之显著项
ElasticSearch 2 (36) - 信息聚合系列之显著项摘要significant_terms（SigTerms）聚合与其他聚合都不相同。目前为止我们看到的所有聚合在本质上都是简单的数学计算。将不同这些构造块相互组合在一起，我们可以创建复杂的聚合以及数据报表。版本elasticsearch...
剖析Elasticsearch集群系列第一篇 Elasticsearch的存储模型和读写操作
剖析Elasticsearch集群系列涵盖了当今最流行的分布式搜索引擎Elasticsearch的底层架构和原型实例。本文是这个系列的第一篇，在本文中，我们将讨论的Elasticsearch的底层存储模型及CRUD（创建、读取、更新和删除）操作的工作原理。Elasticsearch是当今最流行的分布...
ElasticSearch实战系列一: ElasticSearch集群+Kinaba安装教程
前言本文主要介绍的是ElasticSearch集群和kinaba的安装教程。ElasticSearch介绍ElasticSearch是一个基于Lucene的搜索服务器，其实就是对Lucene进行封装，提供了 REST API 的操作接口.ElasticSearch作为一个高度可拓展的开源全文搜索和分...
ElasticSearch实战系列七: Logstash实战使用-图文讲解
前言在上一篇中我们介绍了Logstash快速入门，本文主要介绍的是ELK日志系统中的Logstash的实战使用。实战使用我打算从以下的几个场景来进行讲解。时区问题解决方案在我们使用logstash将采集的数据传输到ES中的时候，会发现采集的时间@timestamp的时间和我们本地的不一致，这个主要是...
Elasticsearch 系列3 --- Elasticsearch配置
一、 位置ES的配置文件位于安装目录\config下面，主要有(1) elasticsearch.yml ES系统的配置；(2) jvm.options Java虚拟机配置；(3) log4j2.properties log4j2日志的配置文件。值得注意的是ES支持环境变量的配置方式，例如:node...
1.ElasticSearch系列之集群部署
第一步：安装JDKJDK要求jdk1.8+，不安装也可以，ES自带JDK第二步：系统配置2.1 禁用交换区 sudo swapoff -a2.2 开最大文件数的限制 编辑文件 /etc/security/limits.conf把nofile设置为65536 或者执行 echo...
干货分享 | HZERO系列组件之数据分发组件（二），ElasticSearch同步方案
上文我们讲述了利用数据分发组件如何进行广播表的数据分发，相信大家对数据分发也有了一定的了解，但是数据分发能做到的不仅仅是MYSQL表对表的同步，还有更多的适用场景，这里我们分享一个ElasticSearch同步方案。 同步方案概述 数据分发适用场景 本质上该工具是监控数据增量文件，进行增...
ElasticSearch 2 (27) - 信息聚合系列之故事开始
ElasticSearch 2 (27) - 信息聚合系列之故事开始摘要到目前为止，本书都在着重介绍搜索。对于搜索，我们有查询条件以及与查找到与条件匹配的集合。这个过程就和如大海捞针一样。对于聚合，我们站在远处总观数据。与查看单个文档不同，我们想要对数据集合进行整体的分析和总结。版本elastics...
Elasticsearch入门系列~通过Java一系列操作Elasticsearch
Elasticsearch索引的创建、数据的增删该查操作 上一章节已经在Linux系统上安装Elasticsearch并且可以外网访问，这节主要通过Java代码操作Elasticsearch 1、创建Maven工程 添加pom依赖，pom.xml代码如下 <project x...
Elasticsearch系列---搜索分页和deep paging问题
概要本篇从介绍搜索分页为起点，简单阐述分页式数据搜索与原有集中式数据搜索思维方式的差异，就分页问题对deep paging问题的现象进行分析，最后介绍分页式系统top N的案例。搜索分页语法Elasticsearch中search语法有from和size两个参数用来实现分页的效果：size：显示应该...
Elasticsearch系列---结构化搜索
概要结构化搜索针对日期、时间、数字等结构化数据的搜索，它们有自己的格式，我们可以对它们进行范围，比较大小等逻辑操作，这些逻辑操作得到的结果非黑即白，要么符合条件在结果集里，要么不符合条件在结果集之外，没有那种相似的概念。前言结构化搜索将会有大量的搜索实例，我们将"音乐APP"作为主要的案例背景，去开...
Rasa 3.x 学习系列-Rasa 3.1+ ElasticSearch 7.15.0 对话机器人实战八 Elasticsearch 可视化及SpacyNLP安装部署
Elasticsearch 可视化工具ElasticHD 下载https://github.com/qax-os/ElasticHD/releasesElasticHD 启动D:\rasa_book_project>ElasticHD -p 127.0.0.1:9800To view elas...
Elasticsearch系列---定制mapping
概要 本篇接着前一篇内容，继续介绍mapping信息，重点倾向于自定义mapping、自定义对象以及数组集合类的底层结构。 自定义mapping 上一篇文章介绍的都是Elasticsearch的自动mapping，我们在创建索引时，可以先指定好mapping的信息，还是以music索引为例： PUT...
Elasticsearch系列---初识mapping
概要 本篇简单介绍一下field数据类型mapping的相关知识。 mapping是什么？ 前面几篇的实战案例，我们向Elasticsearch索引数据时，只是简单地把JSON文本放在请求体里，至于JSON里的field类型，存储到ES里是什么类型，中间是怎么做的映射，这个映射过程，就是mappin...
Elasticsearch 编程API入门系列
前提，是Eclipse下Maven新建项目、自动打依赖jar包（包含普通项目和Web项目）setting.xml配置文件如何在Maven官网下载历史版本HBase 开发环境搭建（Eclipse\MyEclipse + Maven）MapReduce 开发环境搭建（Eclipse\MyEclipse ...
elasticsearch系列二：索引详解（快速入门、索引管理、映射详解、索引别名）
一、快速入门1. 查看集群的健康状况http://localhost:9200/_cathttp://localhost:9200/_cat/health?v说明：v是用来要求在结果中返回表头状态值说明Green - everything is good (cluster is fully func...
Elasticsearch-6.7.0系列-Joyce博客总目录
官方英文文档地址：https://www.elastic.co/guide/index.htmlElasticsearch博客目录Elasticsearch-6.7.0系列（一）9200端口 .tar.gz版本centos7环境--下载安装运行Elasticsearch-6.7.0系列（二）ES集...