一瓢一瓢的饮的博客_Mysql,Oracle,redis,Hive,Hadoop,Hbase,spring boot,spring cloud,大数据基础环境(9)

5、Elasticsearch7.6.1 filebeat介绍及收集kafka日志到es示例

FileBeat专门用于转发和收集日志数据的轻量级采集工具。它可以为作为代理安装在服务器上，FileBeat监视指定路径的日志文件，收集日志数据，并将收集到的日志转发到Elasticsearch或者Logstash。

kafka

elasticsearch

全文检索 ws

es 日志分析

es 分布式搜索

原创精选 2023-07-02 01:18:42 1296 阅读 1点赞 1收藏

6、Elasticsearch7.6.1、logstash、kibana介绍及综合示例（ELK、grok插件）

Logstash是一个开源的数据采集引擎。它可以动态地将不同来源的数据统一采集，并按照指定的数据格式进行处理后，将数据加载到其他的等等。

elk

elasticsearch

logstash

filebeat

kibana

原创 2023-07-02 01:18:31 733 阅读 1点赞 1收藏

7、Elasticsearch7.6.1收集nginx日志及监测指标示例

nginx

filebeat

elasticsearch

elk nginx

日志分析

原创 2023-07-02 01:18:05 699 阅读 1点赞 1收藏

9、Elasticsearch7.6.1 ES与HDFS相互转存数据-ES-Hadoop

ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearc

hadoop

elasticsearch

hdfs

es-hadoop

日志分析

原创精选 2023-07-01 10:12:08 676 阅读 1点赞 1收藏

3、Apache Kudu集成impala(shell和java操作)的详细操作

从 Impala 和 Kudu 的角度来看，通常表现最好的方法通常是使用 Impala 中的 SELECT FRO

java

apache kudu

impala kudu

impala_shell

impala java

原创精选 2023-07-01 10:11:05 581 阅读 1点赞 1收藏

5、apache-kylin-3.1.3-bin-hadoop3 segment管理及JDBC操作

本文简单的介绍了可以林的segment的产生原因以及如何进行自动或手动合并，并介绍了通过

kylin

java

apache kylin

segment管理

kylin java api

原创 2023-07-01 10:10:28 431 阅读 1点赞 1收藏

3、apache-kylin-3.1.3-bin-hadoop3基本操作(创建model和cube、数据查詢)

本文简单的介绍了kylin的基本使用示例，也给出了hive和kylin的使用比较。本文中第一个示

apache kylin

hive

数据分析

离线计算

hadoop

原创精选 2023-07-01 10:10:19 1173 阅读 1点赞 1收藏

8、Elasticsearch7.6.1收集mysql慢查询日志及监控

和mysql环境好用。

mysql

数据库

mysql慢查询

elasticsearch

filebeat

原创 2023-07-01 00:37:37 444 阅读 1点赞 1收藏

1、介绍lucene的功能以及建立索引、搜索单词、搜索词语和搜索句子四个示例实现

cene是一个简单易用的工具包，可以方便的实现全文检索的功能。

lucene

全文检索

搜索引擎

elasticsearch

ik分词器

原创 2023-07-01 00:37:31 227 阅读 1点赞 1收藏

2、Apache Kudu-java api操作kudu详细示例以及kudu的三种实现示例

du环境好用。本分分为3个部分，即maven依赖、入门示例和kudu的三种分区示例。

apache

java

apache kudu

kudu

kudu的范围分区

原创 2023-07-01 00:37:23 834 阅读 1点赞 1收藏

6、apache-kylin-3.1.3-bin-hadoop3 cube优化方向及减少cuboids和降低膨胀率详细示例

-hadoop3 segment管理及JDBC操作6、apache-kylin-3.1.3-bin

kylin

hadoop

apache kylin

kylin优化方向

kylin cube优化示例

原创精选 2023-07-01 00:37:19 658 阅读 1点赞 1收藏

2、apache-kylin-3.1.3-bin-hadoop3集群部署

Kylin 实例是无状态的服务，运行时的状态信息存储在 HBase metastore 中。出于负载均衡的考虑，您可以启用多个共享一个 metastore 的

kylin

大数据

离线计算

数据分析

hadoop

原创 2023-07-01 00:32:49 870 阅读 1点赞 1收藏

9、Elasticsearch7.6.1 ES与HDFS相互转存数据-ES-Hadoop

Elasticsearch 系列文章 1、介绍lucene的功能以及建立索引、搜索单词、搜索词语和搜索句子四个示例实现 2、Elasticsearch7.6.1基本介绍、2种部署方式及验证、head插件安装、分词器安装及验证 3、Elasticsearch7.6.1信息搜索示例（索引操作、数据操作-添加、删除、导入等、数据搜索及分页） 4、Elasticsearch7.6.1 Java api

hadoop

es-hadoop

elasticsearch hadoop

es hdfs

日志分析

原创 2023-06-30 15:22:29 583 阅读 1点赞 1收藏 yyds干货盘点