ITPub博客

首页 > 大数据 > Hadoop > 大数据技术 - Kyuubi

大数据技术 - Kyuubi

原创 Hadoop 作者:元亨利贞 时间:2024-03-05 09:20:05 0 删除 编辑

介绍

    Kyuubi 是网易秉持开源理念的作品,也是网易第一款贡献给 Apache 并进入孵化的开源项目。

    主要应用于大数据领域,包括大数据离线计算、数据仓库、Ad Hoc 等方向。

    Kyuubi 是一个分布式、支持多用户、兼容 DBC 或 ODBC 的大数据处理服务,采用了 Apache Spark 作为计算引擎,带来了良好的性能收益。未来也可能支持其他类似执行引擎,如 Apache Flink。

特点

  1. 开源:社区中的其他公司或技术开发人员可以为 Kyuubi 带来新颖的想法,促进其发展。

  2. 多租户:作为企业级服务,多租户功能不可或缺,同时需要保证数据的安全性。

  3. 兼容 Hive JDBC:支持无缝迁移现有 Hive 用户到 Kyuubi。

  4. Spark 计算引擎:选用业界公认性能最好的大数据计算引擎。

  5. 大规模数据处理能力:处理 GB 或 TB 级别的庞大数据量,同时支持并发查询。

  6. 开箱即用:务实、亲民设计,追求最低成本和最JIA效果。

适用场景

  • 需要进行大数据分析的环境,尤其是需要支持多用户并发查询的场景。

  • 典型使用场景包括使用 JDBC/BeeLine 连接 Kyuubi 进行交互式数据分析,或使用 RESTful API 提交 SQL/Python/Scala/Jar 批作业

文章推荐

https://mp.weixin.qq.com/s/-AwXJz9CqEeX7cRdGGdyIg

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024433/viewspace-3008055/ ,如需转载,请注明出处,否则将追究法律责任。

上一篇: JDBC 工具类-代码
请登录后发表评论 登录
全部评论

注册时间:2022-11-21

  • 博文量
    383
  • 访问量
    247985