之前写了一篇博客,文章写的很烂,很多东西都没有写明白,导致好多朋友云里雾里的,今天决定再写一篇文章,让各位朋友明白logstash+kibana


准备一台linux服务器,我个人使用的是ubuntu12.04桌面版


1.准备工作:


1.1安装准备配置jdk


下载jdk7

http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html

下载完毕后

mkdir -p /usr/java

tar zxvf jdk*.tar.gz -C /usr/java

vim /etc/profile

增加以下配置

export JDK_HOME=/usr/java/jdk1.7.0_21
export PATH=$PATH:$JDK_HOME/bin
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

source /etc/profile


1.2安装webserver,我选择的是nginx

下载nginxwgethttp://nginx.org/download/nginx-1.5.5.tar.gz


安装nginx需要的pcre:

sudo apt-get install libpcre3 libpcre3-dev


tar zxvf nginx-1.5.5.tar.gz

cd nginx-1.5.5

./configure -–prefix=/usr/local/nginx

make -j2&&make install


2.kibana安装

下载最新版kibana

wgethttps://download.elasticsearch.org/kibana/kibana/kibana-latest.zip


unzip kibana-latest.zip


删除nginx默认html页面

cd /usr/local/nginx/html&& rm -f ./*


移动kibana程序至nginx默认的root


mv kibana-latest/* /usr/local/nginx/html/


启动nginx

/usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf


现在打开页面 127.0.0.1可以看到


163020198.png


我们通过E文可以了解到,这是一个kibana介绍页面,并不是让人激动的kibana日志查询界面,使用默认的配置,需要以下步骤:


cd/usr/local/nginx/html/app/dashboards

mv logstash.json default.json


然后刷新页面,页面我们有了,但是查询得不到数据,页面会报错,如下:


163109479.png


不要着急,安装配置logstash后,写入日志就能查询到了


3.安装配置logstash


下载logstash


wgethttps://download.elasticsearch.org/logstash/logstash/logstash-1.2.1-flatjar.jar


写配置文件:

vim logstash-test.conf


input {
  tcp {
    type => "system-log"
    port => 3333
  }
}
output {
  elasticsearch {
    embedded => true
  }
}


启动logstash


java -jar logstash-1.2.1-flatjar.jar agent -f logstash-test.conf &


logstash 启动之后,可以看到tcp侦听端口 3333 ,以及elasticsearch端口 9200、9300


测试写入日志


nc 127.0.0.1 3333 < /var/log/syslog


4.通过kibana查询日志

163229151.png



总结:


本篇文章只是写了单机简单搭建logstash+kibana,没有使用grok字段化切割日志,没有使用redis模块、没有单独搭建redis队列服务,没有单独搭建elasticsearch群集。1台机器搭建的环境,kibana配置文件我并没有更改。


后续logstash高级功能以及我会用的一些模块,我会逐一介绍。等不及可以先去官网看看,个人鼓捣鼓捣玩

http://www.logstash.net/

http://www.elasticsearch.org/overview/