R语言中list of lists高效转换为dataframe的最优方法
R语言超大规模列表转指定列名DataFrame高效实现
注意:转换前需确保所有子向量长度完全一致,否则会触发长度不匹配报错。
你提供的输入列表结构恰好匹配R中DataFrame的底层存储逻辑(每个子元素对应单列数据,子元素名称对应列名),可以实现极低开销的转换,以下是按性能从高到低排序的实现方案:
方案1:data.table包实现(超大规模数据首选,性能最优)
data.table采用原地内存操作,无中间对象复制开销,处理GB级以上数据时性能比原生方法高3~10倍,内存占用低50%以上:
# 加载data.table包 library(data.table) # 转换为data.table格式,如果需要标准data.frame格式可以加setDF转换 df <- setDF(setDT(listoflists)) # 仅需要data.table格式的话可以省略setDF步骤 # dt <- setDT(listoflists)
方案2:base原生实现(无第三方包依赖,性能次优)
如果不能引入外部依赖,可以直接用原生方法转换:
df <- as.data.frame(listoflists)
两种方案输出结果完全匹配需求:
print(df) # col1 col2 # 1 1 5 # 2 2 6 # 3 3 7 # 4 4 8
不推荐使用
do.call(cbind, listoflists)再转data.frame的方法,该方法会产生额外的矩阵转换开销,性能远低于上述两种方案。
内容的提问来源于stack exchange,提问作者mk2080
相关产品推荐
相关产品推荐

