psycopg2.connect是否会继承上下文管理器中设置的代理?
核心原因
你使用的Socks5Proxy上下文管理器仅对纯Python实现的网络库(比如requests)生效,这类库要么会读取上下文管理器注入的代理环境变量,要么被上下文管理器替换了Python层面的socket实现从而走代理。但psycopg2是PostgreSQL官方C语言库libpq的Python封装,底层网络连接逻辑完全由libpq实现,不会继承Python层面的代理配置,所以直接走了Heroku dyno的原生网络出口,导致上报的IP是dyno的原生IP而非QuotaguardStatic的代理出口IP,被PostgreSQL的pg_hba.conf访问规则拦截。
可行的解决方法
- 方案一:使用进程级代理封装(无需修改业务代码)
可以使用socks隧道工具封装整个Django进程的网络请求,让libpq的所有网络流量默认走代理。Heroku环境下可以直接使用QuotaguardStatic配套的隧道工具,在启动命令前添加隧道封装逻辑,让进程所有出口流量自动走Quotaguard的代理节点。配置完成后psycopg2的连接会自动使用代理出口IP,无需修改现有数据库连接代码。 - 方案二:本地端口转发(代码层面适配)
借助pysocks库在本地启动一个端口转发服务,将本地端口的流量通过Socks5代理转发到远端PostgreSQL服务,再让psycopg2连接本地转发端口即可。示例代码如下:import socks import threading import os from urllib.parse import urlparse # 解析QuotaguardStatic代理地址 proxy_url = urlparse(os.environ['QUOTAGUARDSTATIC_URL']) PROXY_HOST = proxy_url.hostname PROXY_PORT = proxy_url.port PROXY_USER = proxy_url.username PROXY_PASS = proxy_url.password # 配置本地转发端口 LOCAL_FORWARD_PORT = 5433 def forward_tunnel(local_port, remote_host, remote_port, proxy_host, proxy_port, proxy_user, proxy_pass): server_socket = socks.socksocket() server_socket.set_proxy( proxy_type=socks.SOCKS5, addr=proxy_host, port=proxy_port, username=proxy_user, password=proxy_pass ) server_socket.bind(('localhost', local_port)) server_socket.listen(5) while True: (client_socket, address) = server_socket.accept() proxy_conn = socks.socksocket() proxy_conn.set_proxy( proxy_type=socks.SOCKS5, addr=proxy_host, port=proxy_port, username=proxy_user, password=proxy_pass ) proxy_conn.connect((remote_host, remote_port)) # 启动双向转发线程 threading.Thread(target=pipe, args=(client_socket, proxy_conn)).start() threading.Thread(target=pipe, args=(proxy_conn, client_socket)).start() def pipe(src, dst): while True: data = src.recv(4096) if not data: break dst.sendall(data) # 启动转发(可放在Django启动初始化逻辑中) threading.Thread( target=forward_tunnel, args=(LOCAL_FORWARD_PORT, EXTERNAL_DB_HOSTNAME, EXTERNAL_DB_PORT, PROXY_HOST, PROXY_PORT, PROXY_USER, PROXY_PASS), daemon=True ).start() # 数据库连接改为连接本地转发端口 connection = psycopg2.connect( user=EXTERNAL_DB_USERNAME, password=EXTERNAL_DB_PASSWORD, host='localhost', port=LOCAL_FORWARD_PORT, database=EXTERNAL_DB_DATABASE, cursor_factory=RealDictCursor ) - 方案三:使用支持代理的PostgreSQL驱动
可以替换为纯Python实现的PostgreSQL驱动pg8000,它的网络逻辑基于Python socket实现,可以被Socks5Proxy上下文管理器的代理规则覆盖,无需额外配置即可直接在你现有的上下文管理器内正常走代理连接数据库,仅需要把连接代码里的psycopg2相关逻辑替换为pg8000的对应API即可。
内容的提问来源于stack exchange,提问作者simplycoding
相关产品推荐
相关产品推荐

