深漂小码哥的博客_Elasticsearch(2)

【Elasticsearch 权威指南学习笔记】索引设置之主分片和副分片

两个最重要的设置：number_of_shards每个索引的主分片数，默认值是5。这个配置在索引创建后不能修改。number_of_replicas每个主分片的副本数，默认值是1。对于活动的索引库，这个配置可以随时修改。例如，我们可以创建只有一个主分片

Elasticsearch

原创 2021-07-07 21:37:36 320 阅读

【Elasticsearch 权威指南学习笔记】索引设置之主分片和副分片

两个最重要的设置： number_of_shards 每个索引的主分片数，默认值是5。这个配置在索引创建后不能修改。 number_of_replicas 每个主分片的副本数，默认值是1。对于活动的索引库，这个配置可以随时修改。例如，我们可以创建只有一个主分片，没有副本的小索引： PUT /my_temp_index { "settings": { "number_of_shards" : 1, "number_of_replicas"...

默认值

mysql

原创 2021-07-07 21:37:36 163 阅读

【Elasticsearch 权威指南学习笔记】分布式检索

一、查询阶段在初始查询阶段时，查询会广播到索引中每一个分片拷贝（主分片或者副本分片）。每个分片在本地执行搜索并构建一个匹配文档的优先队列。优先队列一个优先队列仅仅是一个存有top-n匹配文档的有序列表。优先队列的大小取决于分页参数from和size。例如，如下搜索请求将需要足够大的优先队列来放入100条文档。 GET /_search { "from": 90, "size": 10 } 这个查询阶段的过程如图所示。查询阶段包含以下三个步骤...

搜索

优先队列

字段

mysql

原创 2021-07-07 20:51:58 56 阅读

【Elasticsearch 权威指南学习笔记】相关性

字段

查询语句

文本检索

mysql

原创 2021-07-06 22:43:59 107 阅读

【Elasticsearch 权威指南学习笔记】验证查询

查询可以变得非常的复杂，尤其和不同的分析器与不同的字段映射结合时，理解起来就有点困难了。不过validate-queryAPI 可以用来验证查询是否合法。 1.不合法的查询（索引不存在）： GET /test/_validate/query?explain 请求体： { "query": { "match": { "title": "first" } } } 响应体： { "error": { ...

字段

mysql

原创 2021-07-06 21:05:23 60 阅读

【Elasticsearch 权威指南学习笔记】组合多查询

现实的查询需求从来都没有那么简单；它们需要在多个字段上查询多种多样的文本，并且根据一系列的标准来过滤。为了构建类似的高级查询，你需要一种能够将多查询组合成单一查询的查询方法。你可以用bool查询来实现你的需求。这种查询将多查询组合在一起，成为用户自己想要的布尔查询。它接收以下参数： must 文档必须匹配这些条件才能被包含进来。 must_not 文档必须不匹配这些条件才能被包含进来。 should 如果满足这些语句中的任意语句，将增加_score，否则，无任何影响。它们主要...

字段

简洁性

高级查询

mysql

原创 2021-07-06 20:55:25 31 阅读

【Elasticsearch 权威指南学习笔记】最重要的查询

match_all 查询 match_all查询简单的匹配所有文档。在没有指定查询方式时，它是默认的查询： { "match_all": {}} 它经常与 filter 结合使用—例如，检索收件箱里的所有邮件。所有邮件被认为具有相同的相关性，所以都将获得分值为1的中性_score。 match 查询无论你在任何字段上进行的是全文搜索还是精确查询，match查询是你可用的标准查询。如果你在一个全文字段上使用match查询，在执行查询前，它将用正确的分析器去分析查询字符串： ...

字段

字符串

全文搜索

mysql

原创 2021-07-06 20:48:03 19 阅读

【Elasticsearch 权威指南学习笔记】查询表达式

查询表达式(Query DSL)是一种非常灵活又富有表现力的查询语言。 Elasticsearch 使用它可以以简单的 JSON 接口来展现 Lucene 功能的绝大部分。要使用这种查询表达式，只需将查询语句传递给query参数： GET /_search { "query": YOUR_QUERY_HERE } 空查询（empty search）—{}— 在功能上等价于使用match_all查询，正如其名字一样，匹配所有文档：空查询： ...

查询语句

复合语句

查询表达式

mysql

原创 2021-07-06 20:39:32 29 阅读

【Elasticsearch 权威指南学习笔记】映射

索引中每个文档都有类型。每种类型都有它自己的映射，或者模式定义。映射定义了类型中的域，每个域的数据类型，以及Elasticsearch如何处理这些域。映射也用于配置与类型有关的元数据。 Elasticsearch 支持如下简单域类型：字符串:string 整数 :byte,short,integer,long 浮点数:float,double 布尔型:boolean 日期:date 当你索引一个包含新域的文档—之前未曾出现-- Elasticsearch 会使用...

elasticsearch

字符串

浮点数

mysql

原创 2021-07-06 20:20:46 128 阅读

【Elasticsearch 权威指南学习笔记】分析与分析器

分析包含下面的过程：首先，将一块文本分成适合于倒排索引的独立的词条，之后，将这些词条统一化为标准格式以提高它们的“可搜索性”，或者recall 分析器执行上面的工作。分析器实际上是将三个功能封装到了一个包里：字符过滤器首先，字符串按顺序通过每个字符过滤器。他们的任务是在分词前整理字符串。一个字符过滤器可以用来去掉HTML，或者将&转化成and。分词器其次，字符串被分词器分为单个的词条。一个简单的分词器遇到空格和标点的时候，可能会将文本拆分成词条。 ...

字符串

搜索

elasticsearch

mysql

原创 2021-07-06 08:02:37 69 阅读

【Elasticsearch 权威指南学习笔记】倒排索引

Elasticsearch 使用一种称为倒排索引的结构，它适用于快速的全文搜索。一个倒排索引由文档中所有不重复词的列表构成，对于其中每个词，有一个包含它的文档列表。例如，假设我们有两个文档，每个文档的content域包含如下内容： The quick brown fox jumped over the lazy dog Quick brown foxes leap over lazy dogs in summer 为了创建倒排索引，我们首先将每个文档的content域拆分成单独的词（我...

搜索

倒排索引

字符串

mysql

原创 2021-07-06 07:31:01 75 阅读

【Elasticsearch 权威指南学习笔记】分页

Elasticsearch 接受from和size参数： size 显示应该返回的结果数量，默认是10 from 显示应该跳过的初始结果数量，默认是0 如果每页展示 5 条结果，可以用下面方式请求得到 1 到 3 页的结果： GET /_search?size=5 GET /_search?size=5&from=5 GET /_search?size=5&from=10 响应体信息： { "took": 13, "timed_out": f...

2d

elasticsearch

3g

mysql

原创 2021-07-06 07:23:09 130 阅读

【Elasticsearch 权威指南学习笔记】多类型，多索引

如果不对某一特殊的索引或者类型做限制，就会搜索集群中的所有文档。Elasticsearch 转发搜索请求到每一个主分片或者副本分片，汇集查询出的前10个结果，并且返回给我们。然而，经常的情况下，你想在一个或多个特殊的索引并且在一个或者多个特殊的类型中进行搜索。我们可以通过在URL中指定特殊的索引和类型达到这种效果，如下所示： /_search 在所有的索引中搜索所有的类型 /gb/_search 在gb索引中搜索所有的类型 /gb,us/_search 在gb和us索引中搜索所有...

搜索

elasticsearch

mysql

原创 2021-07-06 07:15:06 35 阅读

【Elasticsearch 权威指南学习笔记】空搜索

搜索API的最基础的形式是没有指定任何查询的空搜索，它简单地返回集群中所有索引下的所有文档： GET /_search { "took": 741, "timed_out": false, "_shards": { "total": 5, "successful": 5, "skipped": 0, "failed": 0 }, "hits": { "total": {

搜索

数组

字段

mysql

原创 2021-07-05 21:13:32 69 阅读

【Elasticsearch 权威指南学习笔记】分布式文档存储

一、路由一个文档到一个分片中当索引一个文档的时候，文档会被存储到一个主分片中。 Elasticsearch 如何知道一个文档应该存放到哪个分片中呢？当我们创建文档时，它如何决定这个文档应当被存储在分片1还是分片2中呢？首先这肯定不会是随机的，否则将来要获取文档的时候我们就不知道从何处寻找了。实际上，这个过程是根据下面这个公式决定的：shard = hash(routing) % number_of_primary_shardsrouting是一个可变值，默认是文档的_id，也...

客户端

elasticsearch

多文档

mysql

原创 2021-07-05 21:00:26 73 阅读

【Elasticsearch 权威指南学习笔记】检索多个文档

mgetAPI 要求有一个docs数组作为参数，每个元素包含需要检索文档的元数据，包括_index、_type和_id。如果你想检索一个或者多个特定的字段，那么你可以通过_source参数来指定这些字段的名字：GET /_mget{ "docs" : [ { "_index" : "website", "_id" : 1, "_source" : ["title", "text"] // 指定返回字...

数组

字段

元数据

mysql

原创 2021-07-05 20:37:09 53 阅读

【Elasticsearch 权威指南学习笔记】乐观并发控制

为确保文档的旧版本不会覆盖较新版本，对文档执行的每个操作都会由协调该更改的主分片分配一个序列号。每次操作都会增加序列号，因此新操作可以保证比旧操作具有更高的序列号。然后，Elasticsearch 可以使用操作的序列号来确保更新的文档版本永远不会被分配了较小序列号的更改覆盖。例如，以下索引命令将创建一个文档并为其分配一个初始序列号和主要术语：PUT products/_doc/1567{ "product" : "r2d2", "details" : "A resourceful ast

序列号

2d

字段

mysql

原创 2021-07-04 13:30:01 38 阅读

【Elasticsearch 权威指南学习笔记】处理冲突

试想我们使用 Elasticsearch 存储我们网上商城商品库存的数量，每次我们卖一个商品的时候，我们在 Elasticsearch 中将库存数量减少。有一天，管理层决定做一次促销。突然地，我们一秒要卖好几个商品。假设有两个 web 程序并行运行，每一个都同时处理所有商品的销售，如图所示。web_1对stock_count所做的更改已经丢失，因为web_2不知道它的stock_count的拷贝已经过期。结果我们会认为有超过商品的实际数量的库存，因为卖给顾客的库存商品并不...

数据

elasticsearch

并发控制

mysql

原创 2021-07-04 09:59:09 58 阅读

【Elasticsearch 权威指南学习笔记】删除文档

删除文档的语法和我们所知道的规则相同，只是使用DELETE方法：DELETE /website/blog/123如果找到该文档，Elasticsearch 将要返回一个200 ok的 HTTP 响应码，和一个类似以下结构的响应体。注意，字段_version值已经增加:{ "_index": "website", "_type": "blog", "_id": "124", "_version": 2, "result": "deleted"...

字段

elasticsearch

mysql

原创 2021-07-04 09:52:55 44 阅读

【Elasticsearch 权威指南学习笔记】创建文档

确保创建一个新文档的最简单办法是，使用索引请求的POST形式让 Elasticsearch 自动生成唯一_id:POST /website/blog/{ ... }如果已经有自己的_id，那么我们必须告诉 Elasticsearch ，只有在相同的_index、_type和_id不存在时才接受我们的索引请求。这里有两种方式，第一种方法使用op_type查询-字符串参数：PUT /website/blog/123?op_type=create{ ... }...

elasticsearch

自动生成

元数据

mysql

原创 2021-07-04 09:43:51 75 阅读

【Elasticsearch 权威指南学习笔记】更新文档

如果想要更新现有的文档，需要重建索引或者进行替换，我们可以使用相同的indexAPI 进行实现PUT /website/blog/123{ "title": "My first blog entry", "text": "I am starting to get the hang of this...", "date": "2014/01/02"}在响应体中，我们能看到 Elasticsearch _version字段值已经增加了：{ "_index...

字段

elasticsearch

mysql

原创 2021-07-04 09:34:09 57 阅读

【Elasticsearch 权威指南学习笔记】检索文档

为了从 Elasticsearch 中检索出文档，我们仍然使用相同的_index,_type, 和_id，但是 HTTP 谓词更改为GET:GET /website/blog/123?pretty响应体包括目前已经熟悉了的元数据元素，再加上_source字段，这个字段包含我们索引数据时发送给 Elasticsearch 的原始 JSON 文档：{ "_index": "website", "_type": "blog", "_id": "123",...

字段

json

elasticsearch

mysql

原创 2021-07-04 09:13:41 38 阅读

【Elasticsearch 权威指南学习笔记】索引文档

通过使用indexAPI ，文档可以被索引—— 存储和使文档可被搜索。但是首先，我们要确定文档的位置。正如我们刚刚讨论的，一个文档的_index、_type和_id唯一标识一个文档。我们可以提供自定义的_id值，或者让indexAPI 自动生成。使用自定义的 ID如果你的文档有一个自然的标识符（例如，一个user_account字段或其他标识文档的值），你应该使用如下方式的indexAPI 并提供你自己_id：PUT /{index}/{type}...

自动生成

elasticsearch

自定义

mysql

原创 2021-07-04 08:59:57 80 阅读

【Elasticsearch 权威指南学习笔记】文档元数据

一个文档不仅仅包含它的数据，也包含元数据——有关文档的信息。三个必须的元数据元素如下：_index文档在哪存放_type文档表示的对象类别_id文档唯一标识_index一个索引应该是因共同的特性被分组到一起的文档集合。例如，你可能存储所有的产品在索引products中，而存储所有销售的交易到索引sales中。虽然也允许存储不相关的数据到一个索引中，但这通常看作是一个反模式的做法。实际上，在 Elasticsearch 中，我们的数据是被存储和索...

elasticsearch

数据

元数据

mysql

原创 2021-07-04 08:40:59 31 阅读

【Elasticsearch 权威指南学习笔记】什么是文档

在大多数应用中，多数实体或对象可以被序列化为包含键值对的 JSON 对象。一个键可以是一个字段或字段的名称，一个值可以是一个字符串，一个数字，一个布尔值，另一个对象，一些数组值，或一些其它特殊类型诸如表示日期的字符串，或代表一个地理位置的对象： { "name": "John Smith", "age": 42, "confi

Elasticsearch

原创 2021-07-04 08:31:09 103 阅读

【Elasticsearch 权威指南学习笔记】什么是文档

在大多数应用中，多数实体或对象可以被序列化为包含键值对的 JSON 对象。一个键可以是一个字段或字段的名称，一个值可以是一个字符串，一个数字，一个布尔值，另一个对象，一些数组值，或一些其它特殊类型诸如表示日期的字符串，或代表一个地理位置的对象：{ "name": "John Smith", "age": 42, "confirmed": true, "join_date": "2014-06-01", "...

json

字段

数组

mysql

原创 2021-07-04 08:31:09 42 阅读

【Elasticsearch 权威指南学习笔记】集群内的原理-应对故障

关闭一个节点后的集群我们关闭的节点是一个主节点。而集群必须拥有一个主节点来保证正常工作，所以发生的第一件事就是选举一个新的主节点：Node2在关闭Node1的同时也失去了主分片1和2，并且在缺失主分片的时候索引也不能正常工作。幸运的是，在其他节点上存在着两个主分片的完整副本，索引新的主节点立即将这些分片在Node2和Node3上对应的副本分片提升为主分片，此时集群的状态将会为yellow。这个提升主分片的过程是瞬间发生的，如同按下一个开关一般。为什么.

重新启动

数据文件

mysql

原创 2021-07-03 15:59:19 18 阅读

【Elasticsearch 权威指南学习笔记】集群内的原理-水平扩容

拥有三个节点的集群——为了分散负载而对分配进行重新分配Node1和Node2上各有1个分片被迁移到了新的分片Node3节点，现在每个节点上都有2个分片，而不是之前的3个。这表示每个节点的硬件资源（CUP、RAM\、I/0）将被更少的分片所共享，每个分片的性能将会得到提升。分片是一个功能完整的搜索引擎，它拥有使用一个节点上所有资源的能力。6个分片的索引（3个主分片和3个副本分片）的索引最大可以扩容到6个节点，每个节点上存在一个分片，并且每个分片拥有所在节点的所有资源。如果我们想要扩容超

数据

硬件资源

搜索

mysql

原创 2021-07-03 15:31:16 30 阅读

【Elasticsearch 权威指南学习笔记】集群内的原理-添加故障转移，单主机2个节点集群

当集群中只有一个节点在运行时，意味着会有一个单点故障问题——没有冗余。启动第二个节点：同一台机器，只要它和第一个节点有同样的cluster.name配置，它就会自动发现并加入集群中；但是在不同机器上启动节点的时候，为了加入到同一集群，需要配置一个可连接到的单播主机列表。拥有两个节点的集群——所有主分片和副本分片都已被分配当第二个节点加入到集群后，3个副本分片将会分配到这个节点上——每个主分片对应一个副本分片。这意味着当集群内任何一个节点出现问题时，我们的数据都完好无损。所有新近被索引的文档都

elasticsearch

bootstrap

html

mysql

原创 2021-07-03 13:12:47 14 阅读

【Elasticsearch Rest API版】删除所有索引

1.请求方式：PUT2.请求URL:http://127.0.0.1:9200/_delete3.响应信息：{ "acknowledged": true}

mysql

原创 2021-07-03 10:10:46 105 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

深漂小码哥的博客