Linux怎么安装Flume日志采集工具

畫卷琴夢

畫卷琴夢

2026-07-01

543人浏览

原创

flume-ng命令报“command not found”是因未加入path:需正确设置flume_home指向解压根目录,再将$flume_home/bin加入path,source配置后新开终端,并确认flume-ng有执行权限及java_home已配置。

linux怎么安装flume日志采集工具

flume-ng 命令报 “command not found” 怎么办

根本不是没装好,而是 flume-ng 没进 PATH。这是 90% 新手卡住的第一步。

  • FLUME_HOME 必须指向解压后的根目录(比如 /opt/flume-1.11.0),不能是 /opt/flume-1.11.0/bin/opt/flume-1.11.0/conf
  • ~/.bashrc/etc/profile 里加这行:export PATH=$PATH:$FLUME_HOME/bin,然后 source ~/.bashrc —— 注意:当前终端不会自动重载,得新开一个终端再试
  • 检查 $FLUME_HOME/bin/flume-ng 是否有执行权限:ls -l $FLUME_HOME/bin/flume-ng;如果前面没有 -rwx,就补一句:chmod +x $FLUME_HOME/bin/flume-ng
  • 别忘了 JAVA_HOME:Flume 是 Java 程序,java -version 得能输出 1.8+(OpenJDK 8/11 安全,17+ 可能触发反射警告);echo $JAVA_HOME 要有值,且路径真实存在

flume-env.sh 里 JAVA_OPTS 必须改吗

必须改,而且默认注释状态不放开,agent 启动后大概率秒退或 OOM。

  • $FLUME_HOME/conf/flume-env.sh,找到这行:# export JAVA_OPTS="",删掉开头的 #
  • 至少设 export JAVA_OPTS="-Xms512m -Xmx1024m";如果用 FileChannel 且日志量大(比如每秒千条以上),建议调到 -Xms2g -Xmx4g
  • 别乱加 GC 参数(比如 -XX:+UseG1GC)——Flume 自带的默认 GC 在多数场景下更稳,除非你真做过压测对比
  • -Dflume.root.logger=INFO,console 只用于调试,上线前务必删掉,否则日志刷屏干扰排查

channel.type 选 memory 还是 file

看数据可靠性要求,不是看“快不快”。memory 快但一崩全丢;file 慢点但断电都不丢。

宝塔Linux面板11.8.1
宝塔Linux面板11.8.1

宝塔Linux面板11.8.1为官网当前正式版,新增AI建站能力并经过宝塔网站工程师深度调教,开放自定义AI功能API,同时对WAF进行界面重构和深度优化,提升拦截能力与运维效率。

下载
  • memory:只适合测试、开发机、或明确允许丢数据的场景(比如采样监控指标)。配置里 capacity 别超 10 万,否则 GC 压力大
  • file:生产环境首选。两个硬性前提:df -h 确保磁盘剩余空间 ≥ 2× 预估日志日增体积;chown flume:flume $FLUME_HOME(把属主设成运行用户),否则 FileChannel 写盘失败且静默退出
  • 别混用:一个 agent 里所有 channel 必须同类型。写成 a1.channels=c1 c2c1.type=memoryc2.type=file 会启动失败,报错是 Channel c2 is not compatible with c1

agent 启动后没报错但数据不流动

八成是 source 和 sink 的 channel 绑定写错了,或者 source 类型根本不匹配你的数据源。

  • 检查 a1.sources.r1.channels = c1a1.sinks.k1.channel = c1 是否都写了,且 channel 名拼写一致(大小写敏感)
  • 确认 source 类型是否真能读你给的数据:比如用 exec 类型却没起 tail -F 进程;用 spooldir 却把文件直接放进去没加 .COMPLETED 后缀;用 netcat 却没开 telnetnc 往端口发数据
  • 别漏掉 transactionCapacity:它必须 ≤ capacity,否则启动时会报错退出,错误信息藏在 flume.log 里,不是控制台
  • 启动命令里别漏 --name a1(对应配置里的 agent 名),否则 Flume 找不到该 agent,直接静默退出

实际跑通的关键,往往不在“怎么装”,而在环境变量、JVM 参数、channel 类型选择这三处细节是否对齐真实场景。尤其 FileChannel 的磁盘权限和空间检查,最容易被跳过,一上线就卡住。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

2672

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

1649

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

1297

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

2674

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

2421

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

1660

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

1254

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

1423

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

210

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
高可用的海量日志采集系统-Flume
高可用的海量日志采集系统-Flume

共22课时 | 2.8万人学习

phpMyAdmin 安装文档
phpMyAdmin 安装文档

共0课时 | 0人学习

Apifox下载与安装手册
Apifox下载与安装手册

共0课时 | 0人学习