Windows上搭建Flume运行环境
2024-10-19 05:29:13
1.如果没有安装过Java环境,则需首先安装JDK。
可参考《Windows上搭建Kafka运行环境》中的搭建环境安装JDK部分
2.官方下载Flume(当前为apache-flume-1.8.0-bin.tar.gz)
3.根据官方用户手册,创建一个简单例子监听44444端口的输入并在console中输出。
①进入apache-flume-1.8.0-bin\conf文件夹中创建一个example.conf文件。
# example.conf: A single-node Flume configuration # Name the components on this agent
a1.sources = r1
a1.sinks = k1
a1.channels = c1 # Describe/configure the source
a1.sources.r1.type = netcat
a1.sources.r1.bind = localhost
a1.sources.r1.port = # Describe the sink
a1.sinks.k1.type = logger # Use a channel which buffers events in memory
a1.channels.c1.type = memory
a1.channels.c1.capacity =
a1.channels.c1.transactionCapacity = # Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
②使用cmd,进入apache-flume-1.8.0-bin/bin,运行下面命令启动Flume。
flume-ng agent --conf ../conf --conf-file ../conf/example.conf --name a1 -property flume.root.logger=INFO,console
在console最后能看到下面这个端口监听提示表示Flume进程正常启动了。
③启动另外一个cmd,使用telnet连接到44444端口并发送信息Hello World!
telnet localhost
④在Flume的console中可以看到如下提示
PS:当你发送的数据超过16字节时,在console的界面上也只能最多显示16字节,其实数据是能完全接收完全的!
如果发送数据真的超过最大长度,会出现Client sent event exceeding the maximum length错误。
可参考《flume-ng 测试过程中event丢失部分body数据》
以上。
最新文章
- JQuery 选择器
- Js获取图片原始宽高
- Android—Ormlite框架简单的操作数据库
- Qt opencv程序运行异常
- 元素水平垂直居中(transform,margin,table-cell,jQuery)
- Ftp不能登陆的解决方法
- 【Android Developers Training】 108. 使用模拟定位进行测试
- 【HDU4622】Reincarnation(后缀自动机)
- flask 中使用 socket 遇到的坑
- 安装 ArcGISAPI31forSilverlight an i/o error occured while installing a file错误解决
- IDEA 配置datasource,提升编码效率,让你在 Mapper.xml 中编写sql可以飞起来~
- [P1516]青蛙的约会 (扩展欧几里得/中国剩余定理?)
- shell脚本编写informix数据库中表的导入和导出
- java基础篇---HTTP协议
- Python2.6 升级2.7
- 使用ccache大幅度加速gcc编译速度至少1倍以上(不需要修改任何编译选项)
- Python DDT(data driven tests)模块心得
- 开篇-QT完全手册
- JavaScript经常使用对象
- [笔记]用gdb调试core dump