Waterdrop
Waterdrop 是一个非常易用,高性能、支持实时流式和离线批处理的海量数据处理产品,架构于Apache Spark 和 Apache Flink之上。
Waterdrop尽所能为您解决可能遇到的问题:
数据丢失与重复
任务堆积与延迟
吞吐量低
应用到生产环境周期长
缺少应用运行状态监控
Waterdrop 使用场景
海量数据ETL
海量数据聚合
多源数据处理
Waterdrop 的特性
简单易用,灵活配置,无需开发
实时流式处理
高性能
海量数据处理能力
模块化和插件化,易于扩展
支持利用SQL做数据处理和聚合
Spark Structured Streaming
————————————————
https://blog.csdn.net/luo981695830/article/details/108759824
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69949806/viewspace-2907052/ ,如需转载,请注明出处,否则将追究法律责任。