一、基本概念和理念1、索引结构ES是面向文档的。各种文本内容以文档的形式存储到ES中，一般使用JSON作为文档的序列化格式。在存储结构上，由_index、_type和_id唯一标识一个文档。_index指向一个或多个物理分片的逻辑命令空间。_type类型用于区分同一个集合中的不同细分，在不同的细分中，数据的整体模式是相同或相似的，不适合完全不同的类型数据。_id文档标记符由系统自动生成或使用者提供
转载
2024-07-02 16:25:43
140阅读
这个问题困扰我们很久，各种原因需要重启集群的时候需要等待很长时间，总要在休息时间做重启。 后来发现ElasticSearch中支持几个参数配置附上官网地址gateway.expected_nodes
gateway.expected_master_nodes
gateway.expected_data_nodes
gateway.recover_after_time
gateway.rec
转载
2024-04-26 13:50:32
151阅读
本文主要简要介绍Elasticsearch单节点的启动和关闭流程。Elasticsearch版本：6.3.2相关文章1、Google Guice 快速入门
2、Elasticsearch 中的 Guice
3、教你编译调试Elasticsearch 6.3.2源码
4、Elasticsearch 6.3.2 启动过程创建节点Elasticsearch的启动引导类为 Bootstrap 类，在创建节
Elasticsearch节点重启时背后发生的故事有哪些，应该注意哪些配置内容，本篇文章做一个简单的探讨。节点离开在elasticsearch集群中，假设NodeA因为种种原因退出集群，在NodeA上的Shard分片情况(ShardA是主分片，ShardB是某一分片副本)在存活节点上找到ShardA的副本，将该副本升格为主分片由于ShardB这一分片副本丢失，所以会重新创建相应的分片副本在存活的节
转载
2024-03-17 12:19:20
105阅读
在es6之前，如果我们需要引入一个外部的库，可能是像下面这样子的：引入Jquery<script src="https://cdn.bootcss.com/jquery/3.2.1/core.js"></script>
然后在js中可以像下面这样使用：
$(function(){ $('.aaa').on('click',function(){ //... }); })
ElasticSearch集群的高可用和自平衡方案会在节点挂掉（重启）后自动在别的结点上复制该结点的分片，这将导致了大量的IO和网络开销。如果离开的节点重新加入集群，elasticsearch为了对数据分片(shard)进行再平衡，会为重新加入的节点再次分配数据分片(Shard), 当一台es因为压力过大而挂掉以后，其他的es服务会备份本应那台es保存的数
转载
2024-04-04 10:16:28
128阅读
作者：石文 时间：2018-06-12摘要Elasticsearch官方提供的重启方案支持在停止ES服务的情况下进行，对于在不停服务的情况下，ES重启过程中各类ES配置对集群的影响并没有明确的给出。本文通过对数个ES集群在不停止服务情况下进行滚定重启，提出了“不停服务情况下”支持的ES滚动重启的方案，并对在ES滚动重启各角色，各类配置API，对业务有何影响进行总结。ES官方滚动重启方案ES官方提供
转载
2024-04-02 10:25:22
57阅读
ES采用主从模式架构，Master节点的选取对整个集群的可用性及数据一致性都起到了关键作用，下面介绍一下ES选取主节点的流程（版本6.1）整体流程选举临时Master节点，判断如果本节当选，则等待选票超过半数，成为真正的Master节点，如果本节点不是临时Master节点，则尝试加入集群，加入集群其实是投票的过程，整体流程如下：1 选取临时节点1.1 ping所有节点，获取节点列表fullPing
转载
2024-08-21 14:54:57
70阅读
加入参数
转载
2019-02-25 19:01:00
1487阅读
2评论
Java Exception：1、Error 2、Runtime Exception 运行时异常 3、Exception 4、throw 用户自定义异常异常类分两大类型：Error类代表了编译和系统的错误，不允许捕获；Exception类代表了标准Java库方法所激发的异常。Exception类还包含运行异常类Runtime_Exception和非运行异常类Non_RuntimeExcepti
转载
2023-06-27 21:11:24
95阅读
1. 安装前的准备工作及下载1.1 创建用户创建一个es专门的用户(必须), 因为es软件不能用root用户启动. 注意: 在企业中,每个业务系统或者集群都需要申请独立的账号.#使用root用户的操作
#添加一个用户，叫做es
useradd es
# 使用root用户创建目录
mkdir -p /export/servers/es
mkdir -p /export/data/es
mkdir
转载
2024-04-19 15:08:53
456阅读
NFS（网络文件系统）用于Unix/Linux之间的文件共享，NFS在文件传送过程中依赖与RPC（远程过程调用）协议。NFS本身是没有提供信息传送的协议和功能。只要用到NFS的地方都需要启动RPC服务，不论是NFS的服务端还是客户端。在启动NFS服务之前，首先要启动RPC服务（CentOS5是portmap服务，CentOS6.6以后的版本是rpcbind服务），否则NFS服务器无法
转载
2024-04-12 14:15:13
352阅读
es恢复集群后报错
原创
2019-01-19 22:11:56
1073阅读
点赞
Redis Cluster 重启某一节点清单信息备份当前节点配置确认集群状态确认集群节点信息确认主从复制信息生成redis快照文件创建AOF文件切换主从角色停止redis server备份AOF文件关闭主机启动主机启动redis server确认集群状态复制延迟确认重启节点加入集群异常确认当前集群信息集群中剔除问题节点清理故障节点数据重新加入节点 title: redis cluster 某节点
转载
2024-06-19 21:30:11
70阅读
错误信息Connection reset by peernginx的错误日志中会出现Connection reset by peer) while reading response header from upstream, client: 1.1.1.1, server: 102.local, request: "GET / HTTP/1.1", upstream: "fastcgi://127
实在是太倒霉了！制作了一天的表格，还没保存呢！就停电了！我还没保存呢！我的数据啊！~~我辛苦了一天的数据呀~这可怎么办！没有保存文档还能恢复，死机、断电、蓝屏导致来不及保存文档，还能恢复！Word没有保存，如何恢复？一、不小心关闭未保存的word文档（包括停电、死机、忘记保存就关闭文档等），如下图所示： 未保存的word文档 二、再次打开word文档，之前编辑的内
standalone类型架构用于可穿透业务场景，如后端有DB存储，脱机影响不大的应用。 2、redis主从 假设我们生产环境使用了一台redis，redis挂了怎么办？如果等到运维重启redis，并恢复好数据，可能需要花费很长时间。那么在这期间，我们的服务是不可用的，这应该是不能容忍的。假设我们做了主从，主库挂了之后，运维让从库接管，那么
转载
2023-07-28 16:41:23
203阅读
# Hadoop初次启动有节点，重启后无节点
在使用Hadoop进行大数据处理的过程中，我们经常会遇到一种情况：初次启动Hadoop集群时，可以正常启动并拥有节点，但是在重启之后却发现节点全部丢失。这个问题可能会让人感到困惑，本文将会给出解决此问题的方法，并提供相应的代码示例。
## 问题分析
在分析问题之前，我们先来了解一下Hadoop的工作原理。Hadoop是一个分布式计算框架，它将计算
原创
2023-12-30 04:46:25
212阅读
[root@t3-tkbdpf-cdhtest-cdh01 cloudera-scm-server]# journalctl -xe
-- Support: http://lists.freedesktop.org/mailman/listinfo/systemd-devel
--
-- Unit cloudera-scm-server.service has begun starting up
Redis之主从复制与哨兵模式1. 主从简介配置多台Redis服务器，以主机和备机的身份分开。主机数据更新后，根据配置和策略，自动同步到备机的master/salver机制，Master以写为主，Slave以读为主，二者之间自动同步数据。目的： 读写分离提高Redis性能； 避免单点故障，容灾快速恢复原理：每次从机联通后，都会给主机发送sync指令，主机立刻进行存盘操作，发送RDB文件，给从机从机
转载
2024-10-12 17:46:24
109阅读
