一、ES概述

ES:ElasticSearch

ES是一个基于RESTful web接口并且构建在Apache Lucene之上的开源分布式搜索引擎。

可以在极短的时间内存储、搜索和分析大量的数据。通常作为具有复杂搜索场景情况下的

核心发动机。

二、使用案例

1、将ES作为网站的主要后端系统

比如现在搭建一个博客系统,对于博客帖子的数据可以直接在ES上存储,并且使用ES来

进行检索,统计。ES提供了持久化的存储、统计和很多其他数据存储的特性。

2、将ES添加到现有系统

有些时候不需要ES提供所有数据的存储功能,只是想在一个数据存储的基础之上使用ES。

比如已经有一个复杂的系统在运行,但是现在想加一个搜索的功能,就可以使用该方案。

3、将ES作为现有解决方案的后端部分

因为ES是开源的系统,提供了直接的HTTP接口,并且现在有一个大型的生态系统在支持

他。比如现在我们想部署大规模的日志框架、用于存储、搜索和分析海量的事件,考虑到

现有的工具可以写入和读取ES,可以不需要进行任何开发,配置这些工具就可以去运作。

三、ES安装与启动

1.进入elastic官网下载elasticsearch 点击打开链接,选择tar,右键复制链接

2.进入命令行输入: wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.2.3.tar.gz 下载到当前目录

3.输入命令:tar -vxf elasticsearch-6.2.3.tar.gz 解压,此时会生成 elasticsearch-6.2.3 文件

4.输入:vi elasticsearch-6.2.3/config/jvm.options 修改Xms1g和Xmx1g这两个值,我修改的为 Xms512m和Xmx512m,若果 你内存够大,可以不用修改

5.然后进入bin文件夹输入:./elasticsearch 启动 ,建议后台启动:./elasticsearch -d ,前台启动若关闭窗口,则ES会停掉

ES数据存储在hdfs上 es如何存储数据_elastic


ES数据存储在hdfs上 es如何存储数据_大数据_02


如果出现上述错误则是说明:不能用root用户启动,这时我们需要换一个普通用户(若普通用户已存在,则直接进入步骤7,否则先进入步骤6创建普通用户)

6.创建一个用户: 输入:useradd es

7.输入 su es 登录es用户

8.进入elasticsearch-6.2.3 bin 目录,输入 ./elasticsearch -d 启动ES

ES数据存储在hdfs上 es如何存储数据_elastic_03


如若出现上述错误,则是es这个用户权限不足,这时我们可以输入 ls -l查看,会发现elasticsearch的权限为 root root,所以此时我们需要为elastic这个用户添加权限

9.切换为root用户回到elasticsearch-6.2.3文件夹父级目录执行命令: chown es elasticsearch-6.2.3 -R

10.切换为elastic用户进入 elasticsearch-6.2.3 bin目录 输入:./elasticsearch -d 启动elasticsearch

ES数据存储在hdfs上 es如何存储数据_elastic_04


如图所示:此时我们可以看出elasticSearch已经启动成功,可以通过进程查看是否启动成功。

ps -ef|grep elasticsearch

若出现下图,表示已经启动成功~

ES数据存储在hdfs上 es如何存储数据_大数据_05


我们可以出浏览器输入 127.0.0.1:9200进行一个验证

ES数据存储在hdfs上 es如何存储数据_elasticsearch_06