无法遍历cStringIO对象：脚本临时文件去重循环未执行问题

嘿，我之前也踩过这个坑！你遇到的循环根本不执行的问题，核心原因是cStringIO对象的文件指针停在了内容末尾——当你把所有行都写入临时对象后，指针已经指向了文件的最后一个字节后面，这时候去遍历自然读不到任何内容，循环当然就跳过啦。

给你几个解决思路和优化方案：

1. 先把文件指针移回开头 #

这是最直接的修复方法，写完内容后调用seek(0)把指针重置到文件起始位置，这样遍历的时候就能读到所有内容了。示例代码如下：

import cStringIO

# 创建临时文件对象
temp_buf = cStringIO.StringIO()
# 模拟写入重复行
temp_buf.write("hello\n")
temp_buf.write("world\n")
temp_buf.write("hello\n")

# 关键操作：将文件指针移到开头！
temp_buf.seek(0)

# 现在去重逻辑就能正常执行了
seen_lines = set()
unique_content = []
for line in temp_buf:
    # 这里可以根据需求决定是否strip换行符（避免因为换行符差异误判重复）
    clean_line = line.strip()
    if clean_line not in seen_lines:
        seen_lines.add(clean_line)
        unique_content.append(line)

# 写入真实文件
with open("final_file.txt", "w") as f:
    f.writelines(unique_content)

2. 更简洁的去重方式（保持行顺序） #

如果你的需求是保留行的首次出现顺序，还可以用更高效的写法：

• Python 2 可以用collections.OrderedDict，利用它键唯一且有序的特性：

from collections import OrderedDict

temp_buf.seek(0)
# 直接去重并保留顺序
unique_lines = list(OrderedDict.fromkeys(temp_buf))

• 要是你用的是Python 3.7及以上版本，普通字典就自带插入顺序保留的特性，写法更简单：

temp_buf.seek(0)
unique_lines = list(dict.fromkeys(temp_buf))

注意：这种方式会把完整的行（包括末尾的换行符）作为判断重复的依据，如果需要忽略换行符的差异，还是要先对每行做strip处理后再去重。

调试小技巧 #

下次遇到类似问题，可以在遍历前打印temp_buf.tell()，这个方法会返回当前指针的位置。如果写入后返回的是一个大于0的数字，就说明指针在末尾，必须调用seek(0)重置位置才行。

内容的提问来源于stack exchange，提问作者Alureon