ITPub博客

首页 > 大数据 > 数据分析 > waterdrop

waterdrop

数据分析 作者:mcxiaoracle 时间:2022-07-22 01:22:05 0 删除 编辑

Waterdrop

Waterdrop 是一个非常易用,高性能、支持实时流式和离线批处理的海量数据处理产品,架构于Apache Spark 和 Apache Flink之上。


Waterdrop尽所能为您解决可能遇到的问题:

数据丢失与重复

任务堆积与延迟

吞吐量低

应用到生产环境周期长

缺少应用运行状态监控


Waterdrop 使用场景

海量数据ETL

海量数据聚合

多源数据处理


Waterdrop 的特性

简单易用,灵活配置,无需开发

实时流式处理

高性能

海量数据处理能力

模块化和插件化,易于扩展

支持利用SQL做数据处理和聚合

Spark Structured Streaming

————————————————

https://blog.csdn.net/luo981695830/article/details/108759824


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69949806/viewspace-2907052/ ,如需转载,请注明出处,否则将追究法律责任。

上一篇: 表的schema 文件
下一篇: DB数据库面试
请登录后发表评论 登录
全部评论
数据方向,了解oracle ,IBM DB2 730

注册时间:2019-09-30

  • 博文量
    286
  • 访问量
    226576