如何为R中使用Arrow包的程序设置内存限制及临时目录？

针对你提出的两个问题，直接给出解决方案：

1. 设置内存使用上限 #

Arrow包在R中支持全局设置内存使用上限，和DuckDB的SET memory_limit逻辑类似，通过arrow::set_memory_limit()函数即可实现，代码示例：

# 设置内存上限为10GB
arrow::set_memory_limit("10GB")

这个限制会作用于Arrow的所有操作（包括导出数据框到Parquet文件），当内存消耗达到设定上限时，Arrow会停止分配更多RAM，转而触发后续的磁盘溢出逻辑。

2. 临时目录与磁盘溢出支持 #

Arrow原生支持内存溢出到磁盘的功能，当内存使用触及上限时，会自动将超出部分的数据写入临时目录。你可以通过arrow::set_temp_dir()指定自定义的临时目录路径，示例代码：

# 设置自定义临时目录
arrow::set_temp_dir("/data/temp/arrow_spill")

如果不手动设置，Arrow会默认使用系统的临时目录（比如Linux下的/tmp，Windows下的用户临时文件夹）。

需要注意的是，Arrow的内存管理是全局生效的，上述两个设置会影响所有基于Arrow的操作，而不仅仅是Parquet导出任务。

内容的提问来源于stack exchange，提问作者user17911