SpinalTap SpinalTap —— 通用可靠的变更数据捕获(Change Data Capture: CDC)服务 变更数据捕获服务​

程序名称:SpinalTap SpinalTap —— 通用可靠的变更数据捕获(Change Data Capture: CDC)服务

授权协议: Apache-2.0

操作系统: 跨平台

开发语言: Java

SpinalTap SpinalTap —— 通用可靠的变更数据捕获(Change Data Capture: CDC)服务 介绍

SpinalTap —— 通用可靠的变更数据捕获(Change Data Capture: CDC)服务

SpinalTap
是一种可扩展、高性能、可靠、无损的变更数据捕获(CDC)服务,能够检测跨不同数据源类型的低延迟的数据突变,并将它们作为标准化事件传播给下游的消费者。SpinalTap
已经成为 Airbnb 基础架构和衍生数据处理平台中不可或缺一部分,几个关键应用流水线都依赖于此。

变更数据捕获(CDC)是一种设计模式,可以捕获数据更改并通知参与者,以便他们做出相应的反应。这遵循发布—订阅模型,其中数据集的更改是关键。

工作流程概述

SpinalTap SpinalTap —— 通用可靠的变更数据捕获(Change Data Capture: CDC)服务 官网

https://github.com/airbnb/SpinalTap

相关编程语言

RedHadoop 是一个持续优化的企业级Hadoop基础软件平...
来自 Mozilla 的 Heka 是一个用来收集和整理来自多个...
HBase – Hadoop Database,是一个高可靠性、高性能...
Mincemeat-node 是使用Node.js实现的极简MapReduce框...
REEF 是微软开发的一个大数据框架。 REEF运行在YARN...
Scribe旨在帮助Facebook处理服务器上的大量数据,正...