大数据云计算——Docker环境下部署Hadoop集群及运行集群案列 本文着重介绍了在Docker环境下部署Hadoop集群以及实际案例中的集群运行。首先，文章详细解释了Hadoop的基本概念和其在大数据处理中的重要性，以及为何选择在Docker环境下部署Hadoop集群。接着，阐述了在Docker中配置和启动Hadoop集群所需的步骤和技术要点。 在展示部署过程中，文章包含了针对Docker容器
转载
2024-09-27 12:34:43
27阅读
ZooKeeper有三种部署方式，分别为单机模式、伪集群模式、集群模式。其中单机模式比较简单，自行查找；伪集群模式和集群模式基本一样，区别就是前者都在一台电脑上，后者在不同的电脑上。下面以生产环境一般用的集群方式部署为例说明，按最小要求3台节点来介绍集群部署方式。本样例是在3台虚拟机下部署的，每个节点安装Centos7核心版(不带GUI)3台机器分别规划如下：hdp1:10.10.10.110hd
转载
2024-04-07 10:44:19
59阅读
参考http://www.linuxidc.com/Linux/2014-03/98848.htm初始化两台机器初始化脚本,ntp,iptables默认策略等写sls1.salt必须要有returner，因为执行的结果失败，方便查看。2.看看为什么启动不了比如 note: 多实例部署，要涉及到多个脚本，想通过salt的service.running启动，那么必须要满足几个条件2.1 rc.d/in
转载
2017-09-13 14:09:42
805阅读
Saltstack 介绍一、SaltStack是什么SaltStack是一个配置管理系统，能够维护预定义状态的远程节点SaltStack是一个分布式远程执行系统，用来在远程节点上执行命令和查询数据二、saltstack说明salt是一个异构平台基础设置管理工具(虽然我们通常只用在Linux上)，使用轻量级的通讯器ZMQ用Python写成的批量管理工具，完全开源，遵守Apache2协议，与Puppe
视图预览 阿里云 SLS 指标展示，包括服务状态，日志流量，操作次数，总体 QPS 等。 版本支持 操作系统支持：Linux 前置条件 服务器 <安装 Datakit> 服务器 <安装 Func 携带版> 阿里云 RAM 访问控制账号授权 RAM 访问控制 登录 RAM 控制台 https://ra ...
例如以下日志 2025-02-12 10:55:17.657 [9f1f81bf0064836b,9f1f81bf0064836b] [http-nio-8080-exec-1] INFO com.jhddsz.gateway.filter.AuthGlobalFilter[54] - AuthGl
一、java项目如何导入包①添加内部jar方法11、从网上下载下来需要的jar包 2、把jar包放入src目录下，有Copy files方式和Link to files方式，前者方式是添加内部jar，后者是添加外部jar。内部jar的好处是项目移到其他环境中运行时，这些JAR包会被一起移动，不会出现缺JAR包中的类的情况。 3、在src目录下的jar包，右键-->Build Path--&g
spring cloud 工程接入sentinel启动sentinel控制台微服务接入sentinel加入依赖配置控制台信息Feign 支持spring cloud工程代码验证测试使用nacos配置流控、熔断规则引入依赖配置sentinel数据源以及流控配置文件sentinel控制台查看流控规则 启动sentinel控制台github中下载合适的版本，下载地址https://github.com
SLS（代表SaLt State文件）是Salt State系统的核心。SLS描述了系统的目标状态，由格式简单的数据构成。这经常被称作配置管理。 SLS文件使用YAML语言编写，其规则主要有以下三方面：缩进：每个缩进级别由两个空格组成，相同缩进表示相同的层级，严禁使用TAB键冒号：冒号+空格 用来分隔键和值，key通常以冒号结尾，而且
原创
2017-04-10 22:09:46
1287阅读
SLS（代表SaLt State文件）是Salt State系统的核心。SLS描述了系统的目标状态，由格式简单的数据构成。这经常被称作配置管理。
转载
2017-08-30 06:52:16
2672阅读
日志服务内容分为：project(项目) => logstore(库) => shard(分区)project：相当于一个项目，可以包含多个logstore。logstore：相当于一个存储空间，可以包含多个shard。shard：相当于将存储空间中切开了。1.限制说明1.1基础资源分类限制说明备注Project每个账号下最多可创建50个Project。可提工单新增Logstore一个
在早期的版本中 Kubernetes 提供了 heapster、influxDB、grafana 的组合来监控系统，现在更加流行的监控工具是 prometheus，prometheus 是 Google 内部监控报警系统的开源版本Kubernetes 集群的监控方案目前主要有以下几种方案：1、Heapster：Heapster 是一个集群范围的监控和数据聚合工具，以 Pod 的形式运行在集群中。
转载
2023-11-14 06:57:29
61阅读
一、解释变量内生性检验首先检验解释变量内生性（解释变量内生性的Hausman 检验：使用工具变量法的前提是存在内生解释变量。Hausman 检验的原假设为：所有解释变量均为外生变量，如果拒绝，则认为存在内生解释变量，要用IV；反之，如果接受，则认为不存在内生解释变量，应该使用OLS。reg ldi lofdi
estimates store ols
xtivreg ldi (lofdi=l.lof
转载
2024-06-03 12:36:35
1610阅读
这里举几个简单的例子来记录一下sls文件的两种调用方式，仅用以记录。1、分发/etc/hosts文件1）准备sls文件[root@salt-master base]# vim hosts.sls
[root@salt-master base]# cat hosts.sls
/etc/hosts:
fil
原创
2017-06-07 14:01:08
1221阅读
SLS（代表SaLt State文件）是Salt State系统的核心。SLS描述了系统的目标状态，由格式简单的数据构成。这经常被称作配置管理 首先，在master上面定义salt的主目录，默认是在/srv/salt/下面，vim /etc/salt/master：file_roots:
base:
-
原创
2016-06-28 15:35:55
680阅读
## 如何在阿里云上使用SLS日志服务
### 什么是阿里云SLS日志服务
阿里云日志服务（Log Service，简称SLS）是阿里云提供的一种云端日志服务，用户可以将日志实时写入并且实时查询、统计、消费。SLS有多种功能，包括数据采集、数据查询、数据分析等，可以帮助用户更好地管理和分析日志数据。
### 步骤
下面是使用阿里云SLS日志服务的整体流程：
| 步骤 | 说明 |
|----
原创
2024-04-23 19:10:40
183阅读
1、获取redis镜像 执行命令：docker pull redis，不加版本号是获取最新版本，也可以加上版本号获取指定版本 2、查看本地镜像 3、创建本地配置文件redis.conf，从官网下载在/usr/local目录下创建docker目录
mkdir /usr/local/docker
cd /usr/loca
转载
2023-05-18 22:54:24
3592阅读
1.linux安装logtail.sh使用安骑士命令通道下发安装Agent存在用户隐私方面风险，因此日志服务不再提供Logtail的自动安装功能，请参照本文手动安装Logtail支持Linux（64位）和Windows（32位、64位）操作系统wget http://logtail-release.oss-cn-hangzhou-internal.aliyuncs.com/linux64/logt
原创
2016-01-13 15:03:02
4361阅读
sls文件编写[root@vm01 ~]# vim /etc/salt/master
#在master配置文件中添加以下内容
file_roots:
base:
- /srv/salt
[root@vm01 ~]# mkdir -p /srv/s
原创
2016-04-12 20:50:38
1027阅读
在Kubernetes（K8S）集群中使用阿里云日志服务（Aliyun Log Service，简称sls）可以帮助开发者更好地管理和监控日志。本文将详细介绍如何在K8S集群中实现阿里云日志服务sls。
整体流程如下：
| 步骤 | 描述 |
| --- | --- |
| 1 | 创建阿里云日志服务sls资源 |
| 2 | 配置Kubernetes服务 |
| 3 | 收集Kubernete
原创
2024-05-15 10:11:33
178阅读
