mysql - 如何使用 Kafka Streams/Connect 使 MySQL 数据库与 HBASE 保持同步?

标签 mysql hbase apache-kafka-connect

我想借助 Kafka Streams 或 Kafka Connect 根据 MySQL 生成的更新触发器同步 HBASE 数据库。关于其可能性以及如何可能的任何建议?

最佳答案

使用 Kafka Connect 和 Debezium 将数据从 MySQL 中流式传输出来到 Kafka,然后使用 Kafka Connect 流式传输到 Hbase kafka-connect-hbase

在此处了解有关 Kafka Connect 的更多信息:http://rmoff.dev/ksldn19-kafka-connect

关于mysql - 如何使用 Kafka Streams/Connect 使 MySQL 数据库与 HBASE 保持同步?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/59069207/

相关文章:

hadoop - 使用 PIG 将文件加载到 Hbase

scala - 使用结构化 Spark Streaming 在 HBase 中批量插入数据

mysql - 在意外删除 AWS RDS 二进制日志后恢复 Debezium MySQL 连接器

mysql - 如何在MySQL中生成以出生日期开始的数字序列

mysql - 琐碎算术计算的数据库优化

mysql - 在 Mysql 中使用 Haversine 计算时无法使 COUNT() 工作

hadoop - HBase 是否使用集群中所有节点的计算能力来执行查询?

apache-kafka - Debezium 的 ExtractNewRecordState 转换无法工作

hadoop - 为Kafka主题创建Hive Table Producer

python - MySQL 到云存储桶 Airflow DAG 的 UnicodeDecodeError