ITPub博客

首页 > IT职业 > IT职场 > 使用hive 实现WordCount 计数

使用hive 实现WordCount 计数

IT职场 作者:flbwhx 时间:2021-09-09 10:15:49 0 删除 编辑

启动Hive

图片描述

启动hive

2.建表


图片描述

建表

3.导入数据


图片描述

导入数据

4.查询:


图片描述

查看wordcount 表

至此,数据导入完成。我原先以为做单词统计,这一张表就可以,但是我发现非常的困难,到这个地步就不能在用Hadoop里的MR来思维了,应该用RMDS的思维来解决这个问题,所以我又新建了一张表,叫words,用来存储分割字符串后的单词。

6.新建words表


图片描述

建表

7对words表进行格式上的处理执行下列语句

insert overwrite table wordsselect explode(split(word,'[ t]+')) wordfrom wordcount;         explode是hive的函数,在以后的深入学会了解到。

对表行一个处理,即遇到一个“t”自动切分

words表中的格式

8.使用HQL语句查询words表

select word ,count(*) from   words group by word


图片描述



作者:起个什么呢称呢
链接:https://www.jianshu.com/p/6407088212e5


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/933/viewspace-2819267/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2019-04-15

  • 博文量
    92
  • 访问量
    671