之前写了一篇博客,文章写的很烂,很多东西都没有写明白,导致好多朋友云里雾里的,今天决定再写一篇文章,让各位朋友明白logstash+kibana。
准备一台linux服务器,我个人使用的是ubuntu12.04桌面版
1.准备工作:
1.1安装准备配置jdk
下载jdk7
http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html
下载完毕后
mkdir -p /usr/java
tar zxvf jdk*.tar.gz -C /usr/java
vim /etc/profile
增加以下配置
export JDK_HOME=/usr/java/jdk1.7.0_21 export PATH=$PATH:$JDK_HOME/bin export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
source /etc/profile
1.2安装webserver,我选择的是nginx
下载nginx:wgethttp://nginx.org/download/nginx-1.5.5.tar.gz
安装nginx需要的pcre:
sudo apt-get install libpcre3 libpcre3-dev
tar zxvf nginx-1.5.5.tar.gz
cd nginx-1.5.5
./configure -–prefix=/usr/local/nginx
make -j2&&make install
2.kibana安装
下载最新版kibana:
wgethttps://download.elasticsearch.org/kibana/kibana/kibana-latest.zip
unzip kibana-latest.zip
删除nginx默认html页面
cd /usr/local/nginx/html&& rm -f ./*
移动kibana程序至nginx默认的root中
mv kibana-latest/* /usr/local/nginx/html/
启动nginx:
/usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf
现在打开页面 127.0.0.1可以看到
我们通过E文可以了解到,这是一个kibana介绍页面,并不是让人激动的kibana日志查询界面,使用默认的配置,需要以下步骤:
cd/usr/local/nginx/html/app/dashboards
mv logstash.json default.json
然后刷新页面,页面我们有了,但是查询得不到数据,页面会报错,如下:
不要着急,安装配置logstash后,写入日志就能查询到了
3.安装配置logstash
下载logstash:
wgethttps://download.elasticsearch.org/logstash/logstash/logstash-1.2.1-flatjar.jar
写配置文件:
vim logstash-test.conf
input { tcp { type => "system-log" port => 3333 } } output { elasticsearch { embedded => true } }
启动logstash
java -jar logstash-1.2.1-flatjar.jar agent -f logstash-test.conf &
logstash 启动之后,可以看到tcp侦听端口 3333 ,以及elasticsearch端口 9200、9300
测试写入日志
nc 127.0.0.1 3333 < /var/log/syslog
4.通过kibana查询日志
总结:
本篇文章只是写了单机简单搭建logstash+kibana,没有使用grok字段化切割日志,没有使用redis模块、没有单独搭建redis队列服务,没有单独搭建elasticsearch群集。1台机器搭建的环境,kibana配置文件我并没有更改。
后续logstash高级功能以及我会用的一些模块,我会逐一介绍。等不及可以先去官网看看,个人鼓捣鼓捣玩
http://www.elasticsearch.org/overview/