一、高可靠性高实时性系统的需求背景

用户在APP更新数据后，数据插入mysql数据库后，debezium采集数据到Kafka，下游flink消费kafka topic中的数据后，插入到ElasticSearch数据库或Starrocks数据库后，业务能够在系统界面立即查询到用户的更新数据，整个过程要能够实现秒级别的响应。
对系统的要求是24小时高可靠性高实时性实现数据处理的秒级别响应。

二、具体实现的技术方案

Debezium基于Kafka Connect集群实现的数据采集会受到多种因素影响，例如kafka connect重平衡等，因此存在无法保证系统24小时实现数据处理的秒级别响应。
因此，需要考虑新的技术方案，这里有两种技术方案可以考虑：
- 基于Debezium引擎技术

AI做攻略、“双向奔赴”……国... 本文转自：人民网人民网记者许维娜今年国庆假期，AI（人工智能）成了不少年轻人的“旅行搭子”。行前做...

合肥的这个“梗”，翻篇了社交平台的评论区，曾长期流传一句专属于合肥的黑色幽默。有人问合肥哪里好玩，本地网友半开玩笑地回复：合...

7万+旅游中高层都在的群，今天... 做旅游这行，资源卡位、渠道互通、项目落地——往往就差一个“对的机会”。我们的行业社群已聚集70,00...

一场帐篷音乐节，如何让井研从“... 帐篷音乐节现场封面新闻记者周洪攀10月的研溪湿地，晚风里裹着柑橘的清甜与民谣的回响。夜幕降临，10...

白鹤翩翩落星愿，上海迪士尼度假... 10月9日，世界候鸟日前夕，上海迪士尼度假区星愿公园的湖风里多了一分白鹤的灵动。三座白鹤雕塑正式揭幕...

成都锦江边赏初秋枫叶飘飘目前，成都锦江边国华街枫叶树红了。近年来，国华街附近的几条街都栽种了红枫树，是城区较集中看枫叶的点位...

GBTA：商务旅行正在复苏，但... 亚太正在成为全球商务旅行增长的重要引擎。在经历疫情后的快速反弹之后，全球商务旅行正在进入一个新的增长...

从景区焕新到节赛引流邹城双节... 齐鲁网·闪电新闻10月9日讯中秋、国庆“双节”假期，邹城市文化和旅游局提前谋划、周密部署，立足自身...

江山如此多娇且看石楼今朝金秋十月，黄河岸畔秋意盎然，丰收盛会喜迎国庆。本次石楼国庆文旅活动以“江山如此多娇，且看石楼今朝”为...

海南国庆假期接待游客475.4... 2026年国庆假期，海南接待游客475.40万人次，较2025年增长13.1%，较2024年增长15...