windowsDocker下用Logstash的logstash-input-jdbc插件实现mongodb与elasticsearch的同步

本文记录了在Docker环境下安装配置Logstash的过程,包括下载Logstash及其插件、编写配置文件及解决过程中遇到的各种错误。

AI 驱动代码审查实战

Claude code-review 插件深度解析,把 AI 智能审查接进 CI/CD 流水线

 1.docker环境下 下载logstash

docker pull logstash:7.5.2

(logstash版本要和elasticsearch和kibana版本一致)

 2.下载logstash-input-jdbc插件。拉取:先进入logstash的docker容器,在logstash容器中进行

/usr/share/logstash/bin/logstash-plugin install  logstash-input-jdbc

 3.编写配置文件:在容器中进入/usr/share/logstash/config下编写filesdb.conf(xxxx.conf)文件内容参考:https://blog.csdn.net/weixin_38722500/article/details/107635835?utm_medium=distribute.pc_relevant.none-task-blog-2~default~baidujs_title~default-0.pc_relevant_baidujshouduan&spm=1001.2101.3001.4242

我的filesdb.conf如下:

我的/usr/share/logstash/config目录下的logstash.yml如下:

 4.启动 进入bin目录下,执行命令:

logstash -f filesdb.conf

 报错:

 原因:data 路径问题

解决办法:指定路径,最好输入绝对路径 (为了避免和data冲突我在该目录下建了一个新的dataa)

 logstash -f filesdb.conf --path.data=/usr/share/logstash/dataa

该问题解决,

又报错路径下找不到文件 原因:bin目录下没有filesdb.conf文件,将上面写在config目录里的filesdb.conf复制过来即可

重新执行上述命令:

依旧报错:

然后发现可能是插件下载的问题,又在bin目录下安装了 logstash-input-mongodb

./logstash-plugin install logstash-input-mongodb

 由于是国外的镜像,所以可能安装失败,多试试就可以了

 安装成功后继续执行命令,这次换了logstash.conf文件,之前的filedb.conf是针对于插件logstash-input-jdbc写的配置文件,

 logstash -f logstah.conf --path.data=/usr/share/logstash/dataa

报错如下: 

 

 然后解决第一个

bin/logstash-plugin 安装 logstash-filter-elapsed 

 

还是没有成功。。。。。。。。。。

未完。

AI 驱动代码审查实战

Claude code-review 插件深度解析,把 AI 智能审查接进 CI/CD 流水线

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值