社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  docker

MYSQL CDC使用apache Kafka和Kafka在本地连接,而不使用docker和confluent

Rooban Kumar • 4 年前 • 1622 次点击  

在没有docker和confluent cloud for CDC的服务器上运行Kafka群集的最佳方式是什么

如何将mysql db连接到本地运行的kafka群集,并创建到另一个mysql db的接收器连接。

我认为RESTAPI是最好的方法,但不确定如何做到这一点。

我需要在生产者端运行配置吗?需要一些如何实现它的想法吗

Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/131579
文章 [ 1 ]  |  最新文章 4 年前
OneCricketeer
Reply   •   1 楼
OneCricketeer    4 年前

从MySQL读取不需要融合的产品。

Debezium是开源的Apache 2.0许可证。卡夫卡和卡夫卡连接(Debezium使用)也是如此。

has a REST API 是的,这就是使用它的方式。

The Debezium tutorial 使用MySQL和Docker,但所有步骤都可以在没有Docker的情况下重复:

  • 下载卡夫卡
  • 下载Debezium连接器和MySQL驱动程序,并安装Connect classpath+插件(遵循Debezium安装文档)
  • 启动Zookeeper和Kafka并连接分布式服务器(遵循上面的Kafka快速启动和连接文档,并使用 分布式模式 )
  • 重新配置数据库地址&HTTP-POST使用教程中提到的JSON启动CDC连接器

到 下沉 将数据传输到另一个数据库,您将希望尝试使用 Confluent's JDBC Sink connector