使用flume spool source采集数据，源文件会有增加后缀改动，有什么解决方案吗

qq_38827686 2018-12-17 09:25:47
使用flume spool source采集数据，源文件采集完成后会添加.complete后缀，不想让源文件有改动，有什么解决方案吗
...全文
69 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
【Flume】Flume入门
Flume 简介 Flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤其是在 Flume OG 的最后一个发行版本 0.9...
Flume简介及配置
Flume配置简介
Flume NG 简介及配置实战
目录[-] 1、Flume 的一些核心概念： 1.1 数据流模型 1.2 高可靠性 1.3 可恢复性 2、Flume 整体架构介绍 2.1 Exec source 2.2 Spooling Directory Source 3、常用架构、功能配置示例 3.1 先来个简单的：单节点 Flume 配置 3.2 单节点 Flume 直接写入 HDFS 3.3 来一个常见架构
Flume学习2_Flume NG简介、配置实战、技术架构应用和可能遇到的问题
目录[-] 1、Flume 的一些核心概念： 1.1 数据流模型 1.2 高可靠性 1.3 可恢复性 2、Flume 整体架构介绍 2.1 Exec source 2.2 Spooling Directory Source 3、常用架构、功能配置示例 3.1 先来个简单的：单节点 Flume 配置 3.2 单节点 Flume 直接写入 HDFS 3.3 来一个常见架构
flume-ng 整体介绍
目录[-] 1、Flume 的一些核心概念： 1.1 数据流模型 1.2 高可靠性 1.3 可恢复性 2、Flume 整体架构介绍 2.1 Exec source 2.2 Spooling Directory Source 3、常用架构、功能配置示例 3.1 先来个简单的：单节点 Flume 配置 3.2 单节点 Flume 直接写入 HDFS 3.3 来一个常见架构
数字化企业云平台论坛

213

社区成员

64

社区内容

发帖
与我相关
我的任务
社区描述
数字化企业已成为全球发展共识。如何去实现企业数字化成为各大公司的重要课题，IT精益运营要从业务，架构，流程，组织四大方面进行升级。双模IT，微服务架构，运营治理devops等新的技术点成为近期绝对热点
产品运营运维 技术论坛（原bbs）
社区管理员
  • 数字化企业云平台论坛社区
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章