一、环境要求： ①linux系统（我这里是centos6.8） ②jdk（我这里安装的Java1.8_131版本） ③hadoop平台（我这里使用的cdh搭建的，hive版本为1.1.0） 二、安装es ①下载es安装包，去官网下载，zip或者tar.gz后缀的都行。我下载的是elasticsearch-5.6.3.zip ②解压：unzip elasticsearch-5.6.3.z
转载
2024-01-17 10:51:23
41阅读
实际这是很久之前的问题了，当时没时间记录这里简单回顾 项目基于数据架构不方便说太细，最精简的 somedata-> [kafka]->spark-stream->elasticsearch 在 spark-streaming 引用了elasticsearch-hadoop(实际用的是为支持upsert doc自已打包的，见elasticsearch-
转载
2024-01-09 22:59:45
31阅读
目标 部署一个单节点的ElasticSearch集群 依赖 java环境 安装 下载、解压 配置 config/elasticsearch.yml 参数含义 cluster.name 用来指定集群的名称。如果不指定，则默认是 elasticsearch。 node.name 用来指定当前节点的名称，
原创
2022-08-21 00:16:16
115阅读
配置文件 如果集群之间的主机内网IP不通的话,就需要通过外网IP地址进行通信 seed_hosts配置的是内网IP集合那么就需要配置network.host.如果seed_hosts配置的外网地址集合,那么就需要配置network.publish_host 集群安全认证 快照和备份 备份集群的唯一可
原创
2023-08-18 11:01:46
98阅读
elastic 网址： https://www.elastic.co/cn/elasticsearch中文发行版，针对中文集成了相关插件，方便新手学习测试. https://github.com/medcl/elasticsearch-rtf整理：windows:1.下载https://github.com/medcl/elasticsearch-rtf...
原创
2021-07-14 11:03:26
227阅读
elastic 网址： https://www.elastic.co/cn/ elasticsearch中文发行版，针对中文集成了相关插件，方便新手学习测试. https://github.com/medcl/elasticsearch-rtf 整理： windows: 1.下载https://gi
转载
2018-07-05 17:00:00
167阅读
2评论
文档， 在结构上说，类似与关系型数据库的一条数据。 这怎么是文档呢？我写的一篇文档，存成一个doc文件，这是一个文档吧？ 里面有很多条数据啊，文档好像是表的概念！ 从起源上来看，大数据要去搜索东西，就是一个个网页，每个网页算一个文档，文档里的词是字段。 而数据库里，存的只是这些文档的倒排索引，这也是 ...
转载
2021-09-04 08:40:00
945阅读
2评论
1. 添加文档POST /website/blog/{ "name":"zhangsan", "age":14} 其中 blog 是type,就是未来版本要废弃的 那个弱化他，用下面的POST /ppp/_doc{ "name":"zhangsan", "age":14} 2.用这个新增type 会 ...
转载
2021-09-13 19:02:00
900阅读
2评论
在做视频课程的过程中，虽然遇到了很多困难，但同时也收到了很多学友的鼓励，感谢鼓励、支持我的人，给了我坚持做下去的动力。Hello大家好，欢迎来到《AWS解决方案架构师认证 Professional(SAP)中文视频培训课程》，我们今天的课程内容为：Elastic Beanstalk。本节课将介绍什么是Elastic Beanstalk，Elastic Beanstalk有哪些优势以及实操演示部分。
原创
2022-01-05 17:32:42
346阅读
Kubernetes (K8S) 是一种用于自动化部署、扩展和操作容器化应用程序的开源平台。在容器化应用程序的部署和运行过程中，日志记录是非常重要的一环。Elastic 是一个用于日志管理和数据分析的解决方案，能够帮助我们收集、分析和可视化容器化应用程序的日志信息。
在 Kubernetes 中实现 Elastic 日志，主要可以通过以下步骤来完成：
| 步骤 | 操作 |
| ----
原创
2024-04-23 17:28:02
400阅读
文章目录【腾讯文档】定时任务集成https://docs.qq.com/doc/DWmNsWUhJS0pYVWlu完成
原创
2022-07-06 17:41:31
84阅读
转载
2017-05-25 20:47:00
105阅读
2评论
结合Hadoop使用Hunk
Hadoop由两个单元组成。首先是被称为HDFS的存储单元。HDFS能够分布在成千上万个复制的节点上。接下来是MapReduce单元，它负责跟踪和管理被命名为map-reduce jobs的作业。
之前，开发人员会用到Splunk Hadoop Connect (SHC)连接器。SHC通过经常使用的推模型（push model）来输出数据到Hadoop中。这块处理相
转载
2017-08-17 15:53:00
88阅读
2评论
转自：://blog..net/fanfan_v5/article/details/61310045elastic-job是当当开源的一款非常好用的作业框架，在这之前，我们开发定时任务一般都是使用quartz或者spring-task（ScheduledExecutorService），无论是使用quartz还是spring-task，我们都会至少遇到两个痛点：1.不敢轻易跟着应用
转载
2017-10-15 16:46:31
1722阅读
使用Java和Elastic Stack进行日志分析 大家好，我是微赚淘客系统3.0的小编，是个冬天不穿秋裤，天冷也要风度的程序猿！ 在现代企业中，日志分析是确保系统健康、进行故障排查和优化性能的重要环节。Elastic Stack（ELK Stack）是一个强大的工具集，包含 Elasticsea
原创
2024-08-06 21:41:42
43阅读
1, pom 文件添加依赖... 2， config 配置文件 3， 写接口文件
原创
2023-06-05 21:55:47
86阅读
1.2 LASSO、岭和 Elastic Net当参数变多的时候，就要考虑使用正则化进行限制，防止过拟合。操作步骤导入所需的包。import tensorflow as tf
import numpy as np
import matplotlib.pyplot as plt
import sklearn.datasets as ds
import sklearn.model_selection
原创
2018-11-23 20:58:44
58阅读
一.安装包下载Node:https://nodejs.org/en/download/ES:https://www.elastic.co/downloads/elasticsearchHead：https://github.com/mobz/elasticsearch-head二.安装Node安装Node是为了后续安装Head插件，Node安装比较简单，需要配置环境变量三.安装ES1.将ES安装包
原创
2018-07-25 16:30:03
1026阅读
关于_all 当索引一个文档的时候，Elasticsearch 取出所有字段的值拼接成一个大的字符串，作为 _all 字段进行索引。例如，当索引这个文档时： { "tweet": "However did I manage before Elasticsearch?", "date": "2014-
转载
2018-10-16 11:28:00
215阅读
2评论
阿里云官方镜像站：https://developer.aliyun.com/mirror/?utm_content=g_1000304574一、ElasticSearch ElasticSearch 是一个基于 Apache Lucene 的开源搜索引擎。它通过RESTful API 来隐藏Lucene的复杂性，从而让全文搜索变得简单。不过，Elasticsearch 不仅
转载
2021-11-02 14:45:07
226阅读
