如何避免次日重启RStudio加载大型项目时卡顿或停滞？

1. 用高效格式存储合并后的数据集 #

每次重新合并12个CSV是核心耗时点，合并完成后把最终数据集存成二进制高效格式，后续直接加载这个文件，速度能提升几十倍：

• 用fst包（读写最快，支持随机访问）：

# 安装包（仅第一次需要）
install.packages("fst")
library(fst)

# 合并完成后保存
write_fst(df, "merged_data.fst", compress = 50) # 压缩比例0-100，50兼顾速度和大小

# 后续直接加载
df <- read_fst("merged_data.fst")

• 或者用readr的write_rds/read_rds：

install.packages("readr")
library(readr)

write_rds(df, "merged_data.rds", compress = "gz")
df <- read_rds("merged_data.rds")

2. 优化CSV读取速度 #

如果偶尔需要重新合并，别用base R的read.csv，换用专门优化大文件读取的工具：

• vroom（自动并行，速度快）：

install.packages("vroom")
library(vroom)

# 批量读取12个CSV并合并
csv_files <- list.files(pattern = "*.csv", full.names = TRUE)
df <- vroom(csv_files, id = "source_file") # id参数可选，记录每行来源文件

• data.table::fread：

install.packages("data.table")
library(data.table)

df <- rbindlist(lapply(csv_files, fread), fill = TRUE) # fill=TRUE处理列不一致的情况

3. 避免用View()查看全量600万行数据 #

View()会把所有数据加载到RStudio UI中，必然卡顿，换成以下两种方式：

• 只查看前N行：

View(head(df, 1000)) # 仅加载前1000行

• 用DT包做交互式分页查看（仅加载当前页数据，流畅无卡顿）：

install.packages("DT")
library(DT)

datatable(df, options = list(pageLength = 50, scrollX = TRUE))

4. 让项目自动加载数据 #

在项目的.Rprofile文件中添加代码，每次打开项目自动加载保存好的高效格式文件，省去手动操作：

1. 在RStudio中新建文件，命名为.Rprofile
2. 写入以下内容：

if (file.exists("merged_data.fst")) {
  library(fst)
  df <- read_fst("merged_data.fst")
  message("Loaded merged dataset from merged_data.fst")
}

5. 检查内存配置 #

确保R有足够内存处理大数据集：

• 查看当前可用内存：

memory.limit() # Windows系统
# Linux/macOS用：
system("free -h", intern = TRUE)

• 如果内存不足，关闭其他占用内存的程序；Windows用户可右键RStudio快捷方式，在目标栏末尾添加--max-mem-size=16G（根据自身内存调整数值）。

内容的提问来源于stack exchange，提问作者highc1157