Sqlstream：將MySQL複製事件流化到Apache Kafka

banq發表於2015-03-24

Sqlstream是能夠作為複製者連線到MySQL伺服器，將複製事件讀取到Apache Kafka的topic，這些事件能夠產生JSON序列號形式的map, key是產生事件的server-id。

pyr/sqlstream · GitHub可用於獲得MySQL的活躍快取更新，來自MySQL事件的物理檢視。

配置簡單，如下：

mysql.host=localhost
mysql.port=3306
mysql.user=replicant
mysql.password=replicant
topic=sqlstream
bootstrap.servers=localhost:9092
<p>

執行上面配置：

java -jar target/sqlstream-0.1.0-standalone.jar <config-file>

PostgreSQL邏輯複製資料同步到kafka
2022-03-31
SQLKafka
從簡單到複雜：Apache Kafka應用例項詳解
2017-04-13
ApacheKafka
使用Apache Kafka實現從單體到事件驅動微服務 - swlh
2021-12-17
ApacheKafka事件微服務
MySQL複製
2020-07-16
MySql
MySQL 複製
2016-10-06
MySql
使用事件溯源、Kafka和OGG從Oracle內部複製資料
2019-09-11
事件KafkaOracle
mysql複製--主從複製配置
2018-04-12
MySql
如何從MySQL中將變化的事件資料釋出到Kafka?
2018-11-26
MySql事件Kafka
linux搭建kafka叢集，詳細到複製命令就能成功
2022-04-06
LinuxKafka
從 MySQL 到 ClickHouse 實時複製與實現
2022-12-14
MySql
MySQL入門--MySQL複製技術之主從複製
2017-01-23
MySql
MySQL入門--MySQL複製技術之主主複製
2017-01-27
MySql
MySQL 8 複製（三）——延遲複製與部分複製
2020-02-12
MySql
MySQL 8 複製（一）——非同步複製
2020-02-12
MySql非同步
MySQL 8 複製（二）——半同步複製
2020-02-12
MySql
MySQL主從複製_複製過濾
2017-12-26
MySql
MySQL 組複製
2017-07-20
MySql
MySQL表複製
2012-11-29
MySql
MySQL複製FAQ
2012-03-04
MySql
MySQL主從複製、半同步複製和主主複製
2016-02-22
MySql
MySQL 複製全解析 Part 11 使用xtrabackup建立MySQL複製
2019-07-19
MySql
MySQL的主從複製與MySQL的主主複製
2017-11-16
MySql
[譯]從LinkedIn，Apache Kafka到Unix哲學
2019-05-11
ApacheKafka
MySQL 8 複製（四）——GTID與複製
2020-02-12
MySql
MySQL 8 複製（五）——配置GTID複製
2020-02-12
MySql
MySQL主從複製之GTID複製
2019-07-23
MySql
MySQL主從複製之半同步複製
2019-07-23
MySql
MySQL主從複製之非同步複製
2019-07-23
MySql非同步
MySQL主從複製與主主複製
2017-03-01
MySql
OGG 12c mysql複製到oracle部署方案
2022-03-17
MySqlOracle
Kafka映象複製KIP-382：MirrorMaker 2.0
2020-12-17
KafkaORM
Kafka基本知識回顧及複製
2018-02-12
Kafka
MySQL主從複製、半同步複製和主主複製概述
2016-03-14
MySql
配置OGG到MYSQL複製時登陸MYSQL報錯解決
2013-10-28
MySql
將一個陣列複製到另一個陣列上
2020-10-18
陣列
使用 Bulk Copy 將大量資料複製到資料庫
2013-06-26
資料庫
MySQL 多源複製
2020-04-20
MySql
mysql 併發複製
2022-01-27
MySql

Sqlstream：將MySQL複製事件流化到Apache Kafka

相關文章