全部身价问，td-agent服务启动时预导入问题

chenwei3390 2017-04-21 11:04:19

当前项目使用td-agent将mongodb数据实时导入到ES，数据量每日千万条。
mongodb数据都存放在一个集合，ES是按日创建索引的。

在td-agnent每次重启时，都会将mongodb的历史数据全部再次导入进来。
问题：如何设置td-agent不导入历史数据？

求大神，谢谢

...全文

1371 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

完整代码首先看下所有的特征介绍特征解释类型 id 行编号没有实际意义 club 该球员所属的俱乐部该信息已经被编码 league 该球员所在的联赛已被编码 birth_date 生日格式为月/日/年 height_cm 身高（厘米）数值变量 weight_kg 体重（公斤）数值变量 nationality 国籍已被编码 potent...

单 Agent 不够用了？一文吃透多智能体架构设计逻辑，看完少走99%弯路！

核心提示：系统的服务在开机时一般都可以自动启动，那在linux系统下如果想要程序在开机时自动启动怎么办?我们知道在 windows系统“开始”-->“所有程序”-->“启动”里面放个快捷方式就行，那Linux系统下呢？...系统的服务在开机时一般都可以自动启动，那在linux系统下如果想要程序在开机时自动启动怎么办?我们知道在 windows系统“开始”-->“所有程序”-->“启动”里面放个快捷

任务类型：回归背景介绍: 每个足球运动员在转会市场都有各自的价码。本次数据练习的目的是根据球员的各项信息和能力值来预测该球员的市场价值。数据来源：数据竞赛：足球运动员身价估计-SofaSofa目前竞赛的排行榜如下：（一）初始的XGBoost模型属性非常多，初始的XGBoost模型选用4个属性巧合的是刚好这些字段都没有缺失值。不用预处理代码：# 球员身价预测 import pandas as pd...

这是一个最简单的方法, 编辑 “/etc/rc.local”, 把启动程序的 shell 命令输入进去即可(要输入命令的全路径), 类似于 Windows 下的"启动"。下面, 那就可以在 “/etc/rc.local” 中加一行 “/opt/./haha.sh”, 或者两行 “cd /opt” 和 “./haha.sh”。操作系统自带的服务, 如 ssh, ftp 等等, 开机都是自动启动的, 我们也可以通过这种方式让自己开发的程序提高"身价"。因为是简单介绍, 所以具体细节不是很详细, 可以通过。

高性能计算

2,408

社区成员

1,025

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章