13. Fluentd输出插件:in_forward用法详解
2024-10-21 03:49:56
in_forward插件通常用于从其他节点接收日志事件,这些节点包括其他Fluentd实例、fluent-cat命令行或者Fluentd客户端程序。这是目前效率最高的日志事件接收方法。
in_forward插件会在本地打开一个tcp监听socket,用于接收日志事件。同时,它也会开启一个udp端口用于接收和对端的心跳保活消息。
in_forward可接收json或MessagePack格式的数据,它会自动探测源数据是哪种格式。MessagePack是Fluentd内部使用的数据封装格式,因其效率高于json。
in_forward插件内置于Fluentd,无须安装。
1.示例配置
<source>
@type forward
port 24224
bind 0.0.0.0
</source>
2.参数说明
- 通用参数适用于in_forward插件
@type
插件类型,取值为forward- port(0.14.0(最低要求版本,下同))监听端口,默认为24224
- bind(0.14.0)绑定的ip地址,默认为0.0.0.0
- tag(1.5.0)设置事件的tag,默认使用源事件的tag
- add_tag_prefix(1.5.0)向源事件tag前添加前缀
<source>
@type forward
add_tag_prefix prod
</source>
如此配置,in_forward产生的事件tag为prod.INCOMING_TAG,比如prod.app.log。
- linger_timeout(0.14.0)设置socket的close等待时长。
- resolve_hostname(0.14.10)是否由ip解析主机名,默认false
- deny_keepalive(0.14.5)是否禁用长连接,默认false
- send_keepalive_packet(1.4.2)是否启动tcp保活,默认false
- chunk_size_limit(0.14.0)指定接收数据的最大chunk大小,超出最大值的chunk会被丢弃。默认无限制。
- chunk_size_warn_limit(0.14.0):指定接收数据的预警chunk大小,超出预警值会发送告警信息。默认不告警。
- skip_invalid_event(0.14.0)是否跳过非法事件。
- source_address_key(0.14.11)指定生成事件中来源ip的字段名,默认不添加来源ip字段。
- source_hostname_key(0.14.4)指定生成事件中来源主机名称的字段名,默认不添加主机名字段。
<transport>
配置项in_forward默认使用tcp传输数据。不加密。可开启ssl加密传输
<transport tls>
cert_path /path/to/fluentd.crt
# 这里还需要其他参数,请参见Fluentd官网说明
</transport>
- 其他事项
- Fluentd工作在多worker进程模式时,in_forward插件会共用监听端口。
<system>
workers 3
</system>
<source>
@type forward
port 24224
</source>
这里,24224端口接收的事件会被自动路由到3个worker进程中。
- in_forward主要是为了高效传输日志,并不像in_tail一样可以通过
<parse>
来配置对数据的解析方法。
如果想解析收到的数据,可在事件路由链中添加合适的过滤器。
最新文章
- npm常用命令
- html中select标签根据枚举获得值的总结
- Linux下面桌面的安装
- 再来一发!DB2 应用程序如何从数据库取数据 Fetch
- 工作流模式与K2实现- (1)
- 【CITE】5个最优秀的Java和C#代码转换工具
- xcode plugin
- C# 中怎么将string转换成int型
- SZU:L89 Frog Encoding
- unix网络io模型
- SELinux Policy Macros
- [知了堂学习笔记]_纯JS制作《飞机大战》游戏_第3讲(逻辑方法的实现)
- php 变量 循环关键词以及方法
- iptables网络安全服务详细使用
- xml 制作 RSS 订阅源
- 听说jupyter notebook代码提示不友好?
- servlet 上下文
- SQL Server2012远程访问第二个实列
- Git删除本地分支和远程分支
- WebRTC学习之 Intel&#174; Collaboration Suite for WebRTC源码流程解读
热门文章
- 移动web开发01
- 达人专栏 | 还不会用 Apache Dolphinscheduler?大佬用时一个月写出的最全入门教程【三】
- DolphinScheduler JSON拆解详解
- 自己做一个RTOS
- BZOJ3037 创世纪(基环树DP)
- 在使用amoeba连接数据库时,报错java.lang.Exception: poolName=slaves, no valid pools
- zabbix 报表动作日志 报错”503“
- RS485自动收发切换电路 [原创www.cnblogs.com/helesheng]
- 渗透攻防Web篇-深入浅出SQL注入
- Sirni题解(最小生成树,埃氏筛)(继 Liang-梁)