SpringBoot+kafka+ES实现信息数据同步管理(上)

该项目利用SpringBoot从ES检索数据,并通过Java后端处理数据库的增删改操作,确保TIDB与ES数据一致性。Kafka作为消息中间件,用于在大量用户操作时防止数据同步问题。数据初始化时,TIDB与ES同步导入,后续通过页面维护数据。

最近刚做完一个新的项目,趁着闲暇时间记录下用的项目结构与知识点

一、项目整体技术结构

本项目主要是需要的数据存储于TIDB与ES中,页面通过SpringBoot从ES中查询数据,在对数据有增、删、改的情况下,通过java后台对数据库数据进行同步,同时将增、删、改操作的数据同步发送到消息队列kafka中,再通过kafka将数据同步到ES中,这样始终保持数据库数据与ES数据一致。结构如下图

二、项目技术架构分析

1、项目才用kafka中间件作为消息同步工具,是因为防止该系统在使用时,用户量过多导致操作数据量过多而出现的问题。

2、使用java操作数据库是对数据能进行稳定方便存储,因为在数据初始化时候,TIDB数据与ES数据是同步导入的,后续,通过页面对部分数据进行维护(增删改)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值