Kappa架构
定义
-
Kappa架构是Lambda架构的简化版本，由Jay Kreps提出，主要通过单一的流处理系统来处理实时和历史数据。
-
Kappa架构特别适用于实时性要求高、数据量相对适中的场景。它通过牺牲一定的批处理效率，换取架构的简单性和维护的便利性。相比Lambda架构，Kappa架构更容易实现和维护，但在海量历史数据处理方面可能面临效率挑战。
其核心特点包括：
- 统一的流处理
- 所有数据都被视为流
- 单一处理引擎处理所有数据
- 简化系统复杂度
- 数据重放机制
- 保留完整的数据日志
- 支持历史数据重新处理
- 通过重放实现代码更新
- 实时状态存储
- 维护计算结果状态
- 支持快速数据查询
- 确保数据一致性
- 简化的维护成本
- 消除双重处理逻辑
- 减少代码维护工作
- 降低系统复杂度