ITPub博客

首页 > > > R语言高速unnest改

R语言高速unnest改

作者:浪花小雨滴 时间:2020-01-10 14:24:49 0 删除 编辑

作者:黄天元,复旦大学博士在读,热爱数据科学与开源工具(R),致力于利用数据科学迅速积累行业经验优势和科学知识发现,涉猎内容包括但不限于信息计量、机器学习、数据可视化、应用统计建模、知识图谱等,著有《R语言数据高效处理指南》(《R语言数据高效处理指南》(黄天元)【摘要 书评 试读】- 京东图书,《R语言数据高效处理指南》(黄天元)【简介_书评_在线阅读】 - 当当图书)。知乎专栏:R语言数据挖掘。邮箱:huang.tian-yuan@qq.com.欢迎合作交流。


以前曾经抄过一段代码,是用来做unnest的,可以比tidyr的unnest函数快20x以上。

原帖子如下:

HopeR:R语言高速unnest​zhuanlan.zhihu.com图标

最近又需要用了,又去找了:

(Much) faster unnesting with data.table​www.r-bloggers.com图标


不曾想今天居然真的用上了,还...发现了它不行。它存在很多缺陷,比如只能对column list中只有一列进行unnest,如果里面放的是多于1列的数据框就会出问题。

我现在放上优化并简化后的版本:

library(rlang)
library(data.table)

unnest_dt <- function(tbl, col) {
  
  tbl <- as.data.table(tbl)
  
  col <- ensyms(col)
  
  clnms <- syms(setdiff(colnames(tbl), as.character(col)))
  
  tbl <- eval(
    expr(tbl[, unlist(!!!col,recursive = FALSE), by = list(!!!clnms)])
  )
  
  tbl
}

特别致谢:

https://stackoverflow.com/questions/40420597/r-flatten-nested-data-table/40420690#40420690​stackoverflow.com

原文作者:;如有侵权,请联系管理员删除。

请登录后发表评论 登录
全部评论

注册时间:2018-05-16

  • 博文量
    4259
  • 访问量
    46332