前言：Ganglia监控Flume比较鸡肋，花里花哨，页面也不好看，确实监控不到什么内容，因为根据Flume的架构原理，Flume是不可能丢失数据的，其内部有完善的事务机制，Source到Channel是事务性的，Channel到Sink是事务性的，因此这两个环节不会出现数据的丢失，唯一可能丢失数据的情况是Channel采用memoryChannel，agent宕机导致数据丢失，或者Channel
转载
2024-05-28 12:41:59
75阅读
Ganglia是一款为HPC(高性能计算) 集群设计的可扩展性的分布式监控系统，它可以监视和显示集群中节点的各种状态信息，他由运行在各个节点上的gmond守护进程来采集 CPU、内存、磁盘利用率、I/O负载、网络流量情况等方面的数据。然后汇总到gmetad守护进程下，使用rrdtool存储数据，然后将历史数据以曲线方式通过PHP页面呈现。这里用来监控Flume的运行信息。1. 安装配置安装epel
转载
2024-02-10 14:25:44
56阅读
今天，在公司服务器上使用脚本远程启动flume：#!/bin/shf
原创
2022-06-16 13:17:53
108阅读
1.flume1.1.功能：实时采集分布式数据流1.2.应用采集实时文件和网络数据流1.3. flume的基本组成Agent（source->channel->sink）一个Agent就是一个Flume程序1.3.1 source（采集）：数据监听，新数据一产生就立即采集，并且将每一行数据封装成一个Event对象发给channel 注：Event:数据流传输时最小的封装单元，每行数据封
转载
2024-05-12 17:42:23
93阅读
在学计算机新知识时，第一件事情就是要写一个 “Hello World”，同样，在 flume 中，它的 “Hello World” 就是 run it。
1、flume 基本概要(1) flume 是做什么的？ flume 是 apach 的开源项目，它主要用来收集数据，即将来源于不同节点的数据汇聚到一个中心节点。 (2) 数据在 flume 内部传输过程中是否会丢失数据？ flume 内部支持
flume提供了flume shell方式来管理，非常强大。
1. 连接
可以使用 “flume shell”进入flume命令行环境，“connect”命令可以用来连接任何的flume的master服务器。
[root@test01] ~
0 $ flume shell
[flume (disconnected)] connect tes
原创
2012-01-16 12:29:19
2671阅读
bash shell 脚本的方法有多种,假设我们编写好的shell脚本的文件名为hello.sh，文件位置在/data/shell目录中并已有执行权限。方法一：切换到shell脚本所在的目录(此时，称为工作目录)执行shell脚本：复制代码代码如下:cd /data/shell./hello.sh./的意思是说在当前的工作目录下执行hello.sh。如果不加上./ ，bash可能会响
转载
2024-01-11 11:26:24
95阅读
有两种方式执行shell scripts，一种是新产生一个shell，然后执行相应的shell scripts；一种是在当前shell下执行，不再启用其他shell。方法一：切换到shell脚本所在的目录（此时，称为工作目录）执行shell脚本：复制代码 代码如下:cd /data/shell
./hello.sh方法二：以绝对路径的方式去执行bash shell脚本：复制代码 代码如下:/dat
转载
2023-10-17 14:57:35
1293阅读
什么是Shell？Shell是用户与内核进行交互操作的一种接口，目前最流行的Shell称为bash ShellShell也是一门编程语言<解释型的编程语言>，即shell脚本一个系统可以存在多个shell，可以通过cat /etc/shells命令查看系统中安装的shell，不同的shell可能支持的命令语法是不相同的一个规范的Shell脚本在第一行会指出由哪个程序（解释器）来执行脚本
转载
2023-11-28 07:12:59
635阅读
apache-flume重启脚本, apache-flume重启经常性的启动多个进程，杀不干净，就写个重启脚本。#echo -e 参数输出为红色，网上可以搜下shell输出带颜色的字体编码很多。cat obi-track_restart.sh
#!/bin/bash
pid=`lsof -i:8787 | grep java
原创
2017-01-03 14:33:58
3357阅读
文章目录前言shell函数的定义函数的优势shell 函数的调用实战案例总结前言Shell 函数的本质是一段可以重复使用的脚本代码，这段代码被提前编写好了，放在了指定的位置，使用时直接调取即可。
原创
2021-04-17 23:33:46
1698阅读
点赞
配置 bash Shell忽略命令大小写 |按“上“键显示该命令的历史 当按“上键”时，能够显示前一个历史命令。但是，这还 不太方便，下面的这个配置，可以让bash输入的命令头按“上“键显示该命令的历史，比如：输入 vim ，然后按”上“键，此时，可以显...
转载
2016-02-04 23:19:00
626阅读
2评论
一、开头 程序必须以下面的行开始（必须方在文件的第一行）： #!/bin/sh 符号#!用来告诉系统它后面的参数是用来执行该文件的程序。在这个例子中我们使用/bin/sh来执行程序。 当编写脚本完成时，如果要执行该脚本，还必须使其可执行。 要使编写脚本可执行： 编译 chmod +x filename 这样才能用./filename 来运行二、注释 在进行shell编程时，以#开头的句子表示注释，
转载
2023-12-07 02:26:47
142阅读
文章目录前言shell函数的定义函数的优势shell 函数的调用实战案例总结前言Shell 函数的本质是一段可以重复使用的脚本代码，这段代码被提前编写好了，放在了指定的位置，使用时直接调取即可。Shell 中的函数和C++、Java、Python
原创
2022-02-19 15:41:41
1162阅读
一、如何抒写shell脚本 1、shell脚本的命名 名字要有意义，不要以a、b、c、1、2、3这种方式命令，建议以sh结尾，在30个字节内，例如：check_memory.sh 2、shell脚本的格式 shell脚本开头必须指定运行环境以#!这个特殊组合来组成，如：#!/bin/bash指该脚本 ...
转载
2021-07-18 22:50:00
863阅读
2评论
while循环循环语句常用于重复执行一条指令或一组指令，直到条件不满足停止，shell脚本语言的循环语句常见的有while、until、for、select循环语句，其中，until和select已经基本淡出历史舞台。本章讲while循环 while循环语句主要用来重复执行一组命令会语句。在企业中常用于守护进程或持续运行的程序，也有时候会用while来读取文件的每一行内容7.1 while语法wh
转载
2024-02-23 23:12:30
306阅读
循环 for循环 用于已知循环次数的场景1、基本格式 for 变量名称(注意是名称不是变量$等) [ in 名称范围 ] (可以不写)do 执行内容 若满足循环则做什么动作done for循环结束标志for i in $(cat /opt/use
转载
2024-02-14 14:11:04
94阅读
目录一、while 介绍1.1 while 语法二、while 与 shell 运算2.1 比较运算2.2 逻辑运算2.3 文件类型判断2.4 特殊条件三、while 与循环控制语句3.1 sleep 语句3.2 break3.3 continue四、while 嵌套其他语句4.1 while 嵌套 if4.2 while 嵌套 for 4.3 while 嵌套 while &
转载
2024-04-30 14:13:00
112阅读
理论部分：循环的意思就是让程序重复地执行某些语句;whiler循环就是循环结构的一种，当事先不知道循环该执行多少次，就要用到while循环;while循环语句的运行过程使用while循环语句时，可以根据特定的条件反复执行一个命令，直到条件不满足为止;while会出现死循环的过程，因此循环体内的命令序列内应包括修改测试条件的语句while语句的语法结构:注意:使用while循环语句时，有两个特殊的条
转载
2024-04-11 10:46:20
76阅读
最近在调试服务器程序的时候，经常要重启进程，每次都要先查看PID、再kill掉、再启动进程，启动完了还要查看是不是启动成功了。略烦。
于是想要写个shell脚本做以上几件事，一了百了。
功能需求：
1、杀死指定进程
2、启动指定进程
3、检查指定进程是否启动
转载
2023-12-01 11:01:03
125阅读
