Sphinx RT与Python：如何发送超长SQL查询？

我之前也碰到过类似的坑，问题根源其实很清晰：PyMySQL默认允许的最大数据包长度（约16MB）比Sphinx RT设置的max_allowed_packet（8MB）要大，当发送大文本时，PyMySQL会按自己的上限拆分请求，但Sphinx不支持这种分块传输逻辑，直接就触发报错了。给你几个可行的解决办法：

方案一：调整PyMySQL的数据包上限匹配Sphinx #

直接把PyMySQL的MAX_PACKET_LEN改成和Sphinx一致的8MB，这样它就不会发送超过Sphinx允许的数据包了。记得要在创建数据库连接之前添加这段代码：

import pymysql
# 设置为Sphinx的max_allowed_packet值：8*1024*1024=8388608
pymysql.connections.MAX_PACKET_LEN = 8 * 1024 * 1024

之后所有新建的PyMySQL连接都会遵循这个限制，避免拆分请求。

方案二：调高Sphinx的max_allowed_packet #

如果你的业务需要传输更大的文本，可以让Sphinx支持更大的数据包。在Sphinx的配置文件（比如sphinx.conf）的searchd段添加或修改：

searchd {
    # 其他配置项...
    max_allowed_packet = 16M
}

修改后重启Sphinx的searchd服务，这样Sphinx就能接受PyMySQL默认的最大数据包了。亲测Sphinx 2.2.11版本完全支持这个配置，放心调整。

方案三：手动拆分大文本（备选方案） #

要是没法修改两端的配置，只能退而求其次，手动把大文本切成多个小于8MB的片段，分批执行SQL操作。比如每段控制在7MB左右（留些冗余空间），分多次插入或更新。不过这个方法比较繁琐，尽量优先用前两个方案。

额外注意事项 #

• 修改Sphinx配置后必须重启searchd，否则新配置不会生效。
• 调整PyMySQL的全局参数时，要确保所有使用PyMySQL的代码都能读到这个修改，避免遗漏某些连接。
• 可以用select @@max_allowed_packet;再次确认Sphinx的设置是否生效，PyMySQL那边打印pymysql.connections.MAX_PACKET_LEN验证修改结果。

内容的提问来源于stack exchange，提问作者jen-soft