本地正常运行的Julia代码在集群安装RCall时出现curl错误及段错误求助

问题背景 #

本地可正常运行的Julia代码，在集群环境执行Pkg.add("RCall")时出错。启动Julia前已加载Julia/1.8.2和R/4.2.1-foss-2022a模块，进入项目目录后执行代码。

报错信息 #

执行过程中反复出现curl错误，最终触发段错误退出：

┌ Error: curl_easy_setopt: 48
└ @ Downloads.Curl /cache/build/default-amdci4-6/julialang/julia-release-1-dot-8/usr/share/julia/stdlib/v1.8/Downloads/src/Curl/utils.jl:29
┌ Error: curl_easy_setopt: 48
└ @ Downloads.Curl /cache/build/default-amdci4-6/julialang/julia-release-1-dot-8/usr/share/julia/stdlib/v1.8/Downloads/src/Curl/utils.jl:29
┌ Error: curl_easy_setopt: 48
└ @ Downloads.Curl /cache/build/default-amdci4-6/julialang/julia-release-1-dot-8/usr/share/julia/stdlib/v1.8/Downloads/src/Curl/utils.jl:29

终端后续提示：Segmentation fault

后续尝试 #

进入Julia项目目录后再加载R模块，RCall可正常运行，但上述curl_easy_setopt:48错误仍存在。

原因分析 #

1. curl错误码48含义：代表传入了无效的curl选项参数，通常由动态库版本冲突导致——Julia自带的curl库与集群环境中R模块依赖的curl库版本不兼容，加载顺序不同会影响库的优先级，进而触发无效选项调用。
2. 段错误原因：库冲突导致内存访问越界，触发程序崩溃；调整加载顺序后，RCall依赖的库优先级正常，功能可运行，但Julia的Downloads模块仍在使用冲突的curl库，因此残留curl错误。

解决方法 #

1. 强制Julia使用系统curl库 #

启动Julia前设置环境变量，让Julia调用集群系统的curl库，避免自带库与R模块的库冲突：

export JULIA_CURL_USE_SYSTEM=1

之后再加载Julia和R模块，进入项目执行操作。

2. 预构建项目依赖 #

在本地环境中完成项目依赖安装，将项目目录（包含Manifest.toml和Project.toml）同步到集群，避免在集群上执行包下载操作：

• 本地进入项目目录，执行Pkg.add("RCall")确保依赖安装完成
• 将整个项目目录复制到集群对应路径
• 集群中进入项目目录，直接启动Julia加载环境即可

3. 检查并配置网络代理 #

集群环境通常有网络限制，若curl错误是因无法访问Julia包仓库导致，需设置代理环境变量：

export HTTP_PROXY=http://your-proxy-addr:port
export HTTPS_PROXY=http://your-proxy-addr:port

4. 调整模块加载顺序（已验证可缓解功能问题） #

保持先进入Julia项目目录，再加载R模块的操作逻辑，确保RCall依赖的库正确加载，同时配合上述方法解决curl错误。

内容的提问来源于stack exchange，提问作者Hongyu