PostgreSQL中File_FDW是否支持从FTP读取文件及实现方法咨询

1. file_fdw是否支持直接连接FTP读取存储文件？ #

不原生支持。file_fdw是PostgreSQL官方提供的外部数据包装器，仅支持读取PostgreSQL服务端本地文件系统可直接访问的结构化文本文件（如CSV、固定宽度文本等），本身未内置FTP协议适配能力。
如果需要实现file_fdw读取FTP文件的需求，需要先将FTP共享目录挂载到PostgreSQL服务端所在主机的本地文件系统，再通过file_fdw访问挂载路径下的文件。 #

2. 具体操作实现步骤 #

前置依赖 #

需提前安装PostgreSQL contrib包（包含file_fdw扩展），以及FTP挂载工具：

• Linux环境推荐使用curlftpfs挂载FTP
• Windows环境可使用系统自带的网络驱动器映射功能，或第三方FTP映射工具

具体操作流程如下：

• 步骤1：挂载FTP共享目录到服务端本地
  以Linux环境curlftpfs为例，先安装工具：

  # Debian/Ubuntu 系列
  apt install curlftpfs
  # RHEL/CentOS 系列
  yum install curlftpfs
  

  执行挂载命令，替换尖括号内的实际参数：

  curlftpfs ftp://<FTP用户名>:<FTP密码>@<FTP服务器地址>/<共享目录路径> <本地挂载目录路径> -o allow_other
  

  挂载完成后，需确认运行PostgreSQL进程的系统用户（通常为postgres）对挂载目录和目标文件有可读权限。
• 步骤2：启用file_fdw扩展
  连接到目标PostgreSQL数据库，执行SQL：

  CREATE EXTENSION IF NOT EXISTS file_fdw;
  

• 步骤3：创建file_fdw外部服务器

  CREATE SERVER IF NOT EXISTS file_fdw_ftp_server FOREIGN DATA WRAPPER file_fdw;
  

• 步骤4：创建用户映射（可选，无特殊权限控制需求可跳过）
  示例为postgres用户配置映射：

  CREATE USER MAPPING FOR postgres SERVER file_fdw_ftp_server;
  

• 步骤5：创建外部表关联FTP挂载路径下的目标文件
  以下为读取CSV格式文件的示例，可根据实际文件格式调整字段和OPTIONS参数：

  CREATE FOREIGN TABLE ftp_data_table (
    id INT,
    user_name VARCHAR(100),
    register_time TIMESTAMP,
    score NUMERIC(5,2)
  ) SERVER file_fdw_ftp_server
  OPTIONS (
    filename '<本地挂载目录路径>/目标数据文件.csv',
    format 'csv',
    header 'true', -- 若文件第一行是表头则设为true，无表头设为false
    delimiter ',', -- 字段分隔符，根据实际调整
    encoding 'utf8' -- 文件编码，根据实际调整
  );
  

• 步骤6：验证数据读取
  直接查询外部表即可获取FTP文件中的数据：

  SELECT * FROM ftp_data_table LIMIT 10;
  

注意事项：该方案的稳定性依赖FTP挂载连接的可用性，若FTP连接中断，查询外部表会触发IO错误，生产环境使用建议做好挂载状态监控和异常重试机制。

内容的提问来源于stack exchange，提问作者Shajila KP