查看logstash 导入数据到es中,数据导入的数量

本文介绍了如何使用logstash从/home/raw_data/8_31/目录下导入所有.csv文件到elasticsearch,并跟踪数据导入的进度。logstash配置文件详细指定了file输入插件、csv过滤器和elasticsearch输出插件的参数。同时,文章提到了通过stat命令查看文件状态以了解logstash处理文件的进度,并解释了sincedb文件在记录处理进度中的作用。
摘要由CSDN通过智能技术生成


查看logstash 导入数据到es中,数据导入的数量
stat /home/raw_data/8_31/* #查看文件状态,




查看logstash处理文件进度记录
input {
file {
path => [
"/home/raw_data/8_31/*.csv"
]
start_position => "beginning" # 从什么位置读取
sincedb_path => "/home/es/sincedb/apk"
type => "apk"
tags => ["hgw", "gather"]
}
}


filter
{
if [type] == "apk"
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值