RM新时代网站-首页

電子發(fā)燒友App

硬聲App

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示
創(chuàng)作
電子發(fā)燒友網(wǎng)>電子資料下載>電子資料>Debezium變更數(shù)據(jù)捕獲平臺(tái)

Debezium變更數(shù)據(jù)捕獲平臺(tái)

2022-06-14 | zip | 4.82 MB | 次下載 | 2積分

資料介紹

授權(quán)協(xié)議 Apache
開(kāi)發(fā)語(yǔ)言 Java
操作系統(tǒng) 跨平臺(tái)
軟件類型 開(kāi)源軟件

軟件簡(jiǎn)介

Debezium 是一個(gè)為捕獲數(shù)據(jù)更改 (Change Data Capture, CDC) 提供低延遲的流式處理平臺(tái),利用 Kafka 和 Kafka Connect 實(shí)現(xiàn)了持久性、可靠性和容錯(cuò)性。

Debezium 有很多非常有價(jià)值的使用場(chǎng)景,我們?cè)谶@兒僅僅列出幾個(gè)更常見(jiàn)的使用場(chǎng)景。

緩存失效 (Cache invalidation)

在緩存中緩存的條目(entry)在源頭被更改或者被刪除的時(shí)候立即讓緩存中的條目失效。如果緩存在一個(gè)獨(dú)立的進(jìn)程中運(yùn)行(例如Redis,Memcache,Infinispan或者其他的),那么簡(jiǎn)單的緩存失效邏輯可以放在獨(dú)立的進(jìn)程或服務(wù)中,從而簡(jiǎn)化主應(yīng)用的邏輯。在一些場(chǎng)景中,緩存失效邏輯可以更復(fù)雜一點(diǎn),讓它利用更改事件中的更新數(shù)據(jù)去更新緩存中受影響的條目。

簡(jiǎn)化單體應(yīng)用(Simplifying monolithic applications)

許多應(yīng)用更新數(shù)據(jù)庫(kù),然后在數(shù)據(jù)庫(kù)中的更改被提交后,做一些額外的工作:更新搜索索引,更新緩存,發(fā)送通知,運(yùn)行業(yè)務(wù)邏輯,等等。這種情況通常稱為雙寫(dual-writes),因?yàn)閼?yīng)用沒(méi)有在一個(gè)事務(wù)內(nèi)寫多個(gè)系統(tǒng)。這樣不僅應(yīng)用邏輯復(fù)雜難以維護(hù),而且雙寫容易丟失數(shù)據(jù)或者在一些系統(tǒng)更新成功而另一些系統(tǒng)沒(méi)有更新成功的時(shí)候造成不同系統(tǒng)之間的狀態(tài)不一致。使用捕獲更改數(shù)據(jù)技術(shù)(change data capture,CDC),在源數(shù)據(jù)庫(kù)的數(shù)據(jù)更改提交后,這些額外的工作可以被放在獨(dú)立的線程或者進(jìn)程(服務(wù))中完成。這種實(shí)現(xiàn)方式的容錯(cuò)性更好,不會(huì)丟失事件,容易擴(kuò)展,并且更容易支持升級(jí)。

共享數(shù)據(jù)庫(kù)(Sharing databases)

當(dāng)多個(gè)應(yīng)用共用同一個(gè)數(shù)據(jù)庫(kù)的時(shí)候,一個(gè)應(yīng)用提交的更改通常要被另一個(gè)應(yīng)用感知到。一種實(shí)現(xiàn)方式是使用消息總線,盡管非事務(wù)性(non-transactional)的消息總線總會(huì)受上面提到的雙寫(dual-writes)影響。但是,另一種實(shí)現(xiàn)方式,即Debezium,變得很直接:每個(gè)應(yīng)用可以直接監(jiān)控?cái)?shù)據(jù)庫(kù)的更改,并且響應(yīng)更改。

數(shù)據(jù)集成(Data integration)

數(shù)據(jù)通常被存儲(chǔ)在多個(gè)地方,尤其是當(dāng)數(shù)據(jù)被用于不同的目的的時(shí)候,會(huì)有不同的形式。保持多系統(tǒng)的同步是很有挑戰(zhàn)性的,但是可以通過(guò)使用Debezium加上簡(jiǎn)單的事件處理邏輯來(lái)實(shí)現(xiàn)簡(jiǎn)單的ETL類型的解決方案。

命令查詢職責(zé)分離(CQRS)

在命令查詢職責(zé)分離?Command Query Responsibility Separation (CQRS)?架構(gòu)模式中,更新數(shù)據(jù)使用了一種數(shù)據(jù)模型,讀數(shù)據(jù)使用了一種或者多種數(shù)據(jù)模型。由于數(shù)據(jù)更改被記錄在更新側(cè)(update-side),這些更改將被處理以更新各種讀展示。所以CQRS應(yīng)用通常更復(fù)雜,尤其是他們需要保證可靠性和全序(totally-ordered)處理。Debezium和CDC可以使這種方式更可行:寫操作被正常記錄,但是Debezium捕獲數(shù)據(jù)更改,并且持久化到全序流里,然后供那些需要異步更新只讀視圖的服務(wù)消費(fèi)。寫側(cè)(write-side)表可以表示面向領(lǐng)域的實(shí)體(domain-oriented entities),或者當(dāng)CQRS和?Event Sourcing?結(jié)合的時(shí)候,寫側(cè)表僅僅用做追加操作命令事件的日志。

?

下載該資料的人也在下載 下載該資料的人還在閱讀
更多 >

評(píng)論

查看更多

下載排行

本周

  1. 1山景DSP芯片AP8248A2數(shù)據(jù)手冊(cè)
  2. 1.06 MB  |  532次下載  |  免費(fèi)
  3. 2RK3399完整板原理圖(支持平板,盒子VR)
  4. 3.28 MB  |  339次下載  |  免費(fèi)
  5. 3TC358743XBG評(píng)估板參考手冊(cè)
  6. 1.36 MB  |  330次下載  |  免費(fèi)
  7. 4DFM軟件使用教程
  8. 0.84 MB  |  295次下載  |  免費(fèi)
  9. 5元宇宙深度解析—未來(lái)的未來(lái)-風(fēng)口還是泡沫
  10. 6.40 MB  |  227次下載  |  免費(fèi)
  11. 6迪文DGUS開(kāi)發(fā)指南
  12. 31.67 MB  |  194次下載  |  免費(fèi)
  13. 7元宇宙底層硬件系列報(bào)告
  14. 13.42 MB  |  182次下載  |  免費(fèi)
  15. 8FP5207XR-G1中文應(yīng)用手冊(cè)
  16. 1.09 MB  |  178次下載  |  免費(fèi)

本月

  1. 1OrCAD10.5下載OrCAD10.5中文版軟件
  2. 0.00 MB  |  234315次下載  |  免費(fèi)
  3. 2555集成電路應(yīng)用800例(新編版)
  4. 0.00 MB  |  33566次下載  |  免費(fèi)
  5. 3接口電路圖大全
  6. 未知  |  30323次下載  |  免費(fèi)
  7. 4開(kāi)關(guān)電源設(shè)計(jì)實(shí)例指南
  8. 未知  |  21549次下載  |  免費(fèi)
  9. 5電氣工程師手冊(cè)免費(fèi)下載(新編第二版pdf電子書)
  10. 0.00 MB  |  15349次下載  |  免費(fèi)
  11. 6數(shù)字電路基礎(chǔ)pdf(下載)
  12. 未知  |  13750次下載  |  免費(fèi)
  13. 7電子制作實(shí)例集錦 下載
  14. 未知  |  8113次下載  |  免費(fèi)
  15. 8《LED驅(qū)動(dòng)電路設(shè)計(jì)》 溫德?tīng)栔?/a>
  16. 0.00 MB  |  6656次下載  |  免費(fèi)

總榜

  1. 1matlab軟件下載入口
  2. 未知  |  935054次下載  |  免費(fèi)
  3. 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
  4. 78.1 MB  |  537798次下載  |  免費(fèi)
  5. 3MATLAB 7.1 下載 (含軟件介紹)
  6. 未知  |  420027次下載  |  免費(fèi)
  7. 4OrCAD10.5下載OrCAD10.5中文版軟件
  8. 0.00 MB  |  234315次下載  |  免費(fèi)
  9. 5Altium DXP2002下載入口
  10. 未知  |  233046次下載  |  免費(fèi)
  11. 6電路仿真軟件multisim 10.0免費(fèi)下載
  12. 340992  |  191187次下載  |  免費(fèi)
  13. 7十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
  14. 158M  |  183279次下載  |  免費(fèi)
  15. 8proe5.0野火版下載(中文版免費(fèi)下載)
  16. 未知  |  138040次下載  |  免費(fèi)
RM新时代网站-首页