温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Fluentd输入插件的方法是什么

发布时间:2021-12-20 15:44:07 来源:亿速云 阅读:98 作者:iii 栏目:大数据

这篇文章主要介绍“Fluentd输入插件的方法是什么”,在日常操作中,相信很多人在Fluentd输入插件的方法是什么问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Fluentd输入插件的方法是什么”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

tail

in_tail输入插件从文本文件的尾部读取事件,类似于linux中的tail -F命令。

格式如下

<source>  @type tail  path /var/log/httpd-access.log  pos_file /var/log/td-agent/httpd-access.log.pos  tag apache.access  <parse>    @type apache2  </parse></source>

eg:

在当前目录下创建etc目录和 fluent.conf配置文件

$mkdir etc$vim etc/fluent.conf

如下配置内容

<source>  @type tail  path  /tmp/test.log  pos_file /tmp/test.log.pos  tag test.log  <parse>    @type none  </parse></source><match test.log>  @type copy  <store>    @type stdout  </store>  <store>    @type file    path /tmp/test_backup/  </store></match>

创建docker

$ docker run -d --name fluentd  -v $(pwd)/etc:/fluentd/etc -v $(pwd)/tmp:/tmp fluent/fluentd
$ docker logs fluentd2020-08-10 17:18:31.047687752 +0000 test.log: {"message":"hell world"}

查看备份文件

查看备份文件内容

in_forward

in_forward插件通常用于从其他节点接收日志事件,这些节点包括其他Fluentd实例、fluent-cat命令行或者Fluentd客户端程序。这是目前效率最高的日志事件接收方法。

in_forward插件会在本地打开一个tcp监听socket,用于接收日志事件。同时,它也会开启一个udp端口用于接收和对端的心跳保活消息。

in_forward可接收json或MessagePack格式的数据,它会自动探测源数据是哪种格式。MessagePack是Fluentd内部使用的数据封装格式,因其效率高于json。

in_forward插件内置于Fluentd,无须安装。

in_http

in_http插件允许使用HTTP协议来采集日志事件。这个插件会建立一个支持REST风格的HTTP端点,来接收日志事件请求。

到此,关于“Fluentd输入插件的方法是什么”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注亿速云网站,小编会继续努力为大家带来更多实用的文章!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI