文档章节

filebeat collect log

MrYx3en
 MrYx3en
发布于 2016/07/05 17:06
字数 154
阅读 108
收藏 3
filebeat:
  prospectors:
    -
      paths:
                - /path/to/mysql-slow.log
      document_type: mysql-slow
      fields:
        type: mysql-slow
        tags: mysql-host
    -
      paths:
                - /path/to/mysql-error.log
      document_type: mysql-error
      fields:
        type: mysql-error
        tags: mysql-host
    -
      paths:
                - /path/to/dmesg
      document_type: dmesg
      fields:
        type: dmesg
        tags: mysql-host

      encoding: plain
      input_type: log
      fields_under_root: true 
      # 每 10 秒钟扫描一次目录,更新通配符匹配上的文件列表
      scan_frequency: "10s"
      # buffer size every harvester uses when fetching the file
      harvester_buffer_size: 16384
      # read from bottom of file
      tail_files: false
      # check logfile whether to read or not every n second
      backoff: "3s"
  # Event count spool threshold
  spool_size: 1000
  # Defines how often the spooler is flushed. 
  # Flush even though spool_size is not reached
  idle_timeout: "10s"
  # registry file path
  registry_file: /opt/opbin/filebeat/registry

output:
  logstash:
    hosts: ["127.0.0.1:5140"]

#shipper:
logging:
  level: info
  to_files: true
  to_syslog: false
  files:
      path: /opt/opbin/filebeat/mybeat
      name: mybeat.log
      rotateeverybytes: 10485760
      keepfiles: 10

© 著作权归作者所有

下一篇: heka
MrYx3en
粉丝 10
博文 131
码字总数 30542
作品 0
宝鸡
系统管理员
私信 提问
elk日至系统

参考网址:https://www.elastic.co/downloads 组件: 1、Filebeat 客户端组件,用于收集log日志,发送至elasticsearch 2、logstash: 处理收集的日志 3、elasticsearch:储存收集的日志 4、k...

Love轩轩
2017/09/28
0
0
ELK实战之使用filebeat代替logstash收集日志

一、Filebeat介绍 Filebeat是轻量级单用途的日志收集工具,用于在没有安装java的服务器上专门收集日志,可以将日志转发到logstash、elasticsearch或redis等场景中进行下一步处理。官方文档:...

IT_外卖小哥
2018/01/02
0
0
filebeat输出日志到阿里云kafka

系统:centos install filebeatfilebeat版本: filebeat-5.1.2-x86_64.rpm下载链接: https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-5.1.2-x86_64.rpmyum -y install /home......

大猩猩secrets
2017/12/29
376
0
ELK+filebeat日志分析系统部署文档

环境说明 架构说明及架构图 filebeat部署在客户端用于收集日志并把收集到的日志发送到logstash. logstash把收集到的日志处理之后交给elasticsearch. kibana从elasticsearch中提取数据并进行展...

yzy121403725
2017/10/13
0
0
【Elasticsearch全文搜索引擎实战】之Filebeat快速入门

0. 背景 用过ELK(Elasticsearch, Logstash, Kibana)的人应该都面临过同样的问题,Logstash虽然功能强大:支持许多的input/output plugin、强大的filter功能。但是确内存占用会非常大。还有...

mantoudev
2018/01/21
0
0

没有更多内容

加载失败,请刷新页面

加载更多

为构建社交关系链手淘都做了啥?

作者|王卫(泓冰) 出品|阿里巴巴新零售淘系技术部 01、淘宝社交关系推荐的背景 1、互联网下半场到来:互联网的下半场,人口红利消失,各大平台需要对用户做精细化运营,用户的增长和留存是每一...

阿里云官方博客
21分钟前
3
0
Iaas/Paas/Saas有何区别,一个故事告诉你

云计算有三种服务模式,IaaS,PaaS和SaaS。单从英文全称去理解,他们分别是“基础设施即服务”“平台即服务”和“软件即服务”。 这样翻译过来可不好理解,但是我们可以举个例子。现在我们就以...

JEPaaS云平台
29分钟前
4
0
温度传感器怎么测好坏

  温度传感器也就是负温度系数热敏电阻,温度越高,电阻越小,测量时先看其阻值能不能根据温度的变化而变,再看其变化的阻值是不是在标定的范围之内。   有以下四种方法;   1、若是有...

仙溪
29分钟前
3
0
zk中ZooKeeperServer解析

内部类 ChangeRecord 处理PrepRP和FinalRP之间的信息 static class ChangeRecord { ChangeRecord(long zxid, String path, StatPersisted stat, int childCount, List<ACL> acl) {......

writeademo
40分钟前
3
0
LNMP---安装worrdpress、discuz,域名重定向,用户认证,nginx访问日志

4.34 安装wordpress 4.35 安装discuz 4.36 域名重定向 4.37 用户认证 4.38 nginx访问日志 一、安装wordpress 创建博客: 添加一个博客的虚拟主机 blog.tobe.com.conf 做如下更改 安装博客wor...

tobej
41分钟前
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部