kafka采用拉取模型,由消費(fèi)者自己記錄消費(fèi)狀態(tài),每個(gè)消費(fèi)者互相獨(dú)立地順序拉取每個(gè)分區(qū)的消息,消費(fèi)者可以按照任意的順序消費(fèi)消息。比如,消費(fèi)者可以重置到舊的偏移量,重新處理之前已經(jīng)消費(fèi)過的消息;或者直接跳到最近的位置,從當(dāng)前的時(shí)刻開始消費(fèi)。查看全文>>
leader對(duì)于消息的寫入以及讀取是非常關(guān)鍵的,此時(shí)有兩個(gè)疑問:Kafka如何確定某個(gè)partition是leader、哪個(gè)partition是follower呢?某個(gè)leader崩潰了,如何快速確定另外一個(gè)leader呢?使用Kafka Eagle找到某個(gè)partition的leader,再找到leader所在的broker。在Linux中強(qiáng)制殺掉該Kafka的進(jìn)程,然后觀察leader的情況。查看全文>>
我們可以讓Kafka根據(jù)消費(fèi)組中的消費(fèi)者動(dòng)態(tài)地為topic分配要消費(fèi)的分區(qū)。但在某些時(shí)候,我們需要指定要消費(fèi)的分區(qū),這時(shí)候就要手動(dòng)消費(fèi)分區(qū)中的數(shù)據(jù),下面來看一下分區(qū)方法。查看全文>>
TiDB 具備如下眾多特性,其中兩大核心特性為:水平擴(kuò)展與高可用。大多數(shù)情況下,無需修改代碼即可從 MySQL 輕松遷移至 TiDB,分庫分表后的 MySQL 集群亦可通過 TiDB 工具進(jìn)行實(shí)時(shí)遷移。查看全文>>
第一代數(shù)據(jù)庫系統(tǒng)是層次和網(wǎng)狀數(shù)據(jù)庫管理系統(tǒng),層次和網(wǎng)狀數(shù)據(jù)庫的代表產(chǎn)品是IBM公司在1969年研制出的層次模型數(shù)據(jù)庫管理系統(tǒng)。層次數(shù)據(jù)庫是數(shù)據(jù)庫系統(tǒng)的先驅(qū),而網(wǎng)狀數(shù)據(jù)庫則是數(shù)據(jù)庫概念、方法、技術(shù)的奠基。查看全文>>
為了方便將來進(jìn)行一鍵啟動(dòng)、關(guān)閉Kafka,我們可以編寫一個(gè)shell腳本來操作。將來只要執(zhí)行一次該腳本就可以快速啟動(dòng)/關(guān)閉Kafka。查看全文>>