Python实现按每1000个值对列进行分组拆分

方法1：Excel公式实现 #

若使用Excel处理，可通过公式直接生成目标格式的分组字符串：

• 假设原始数据存于A1:A1000000单元格区域，在B1单元格输入以下公式，再向下填充即可：

  =("('"&TEXTJOIN("','",TRUE,OFFSET($A$1,(INT((ROW()-1))*1000),0,1000))&"')")
  

  公式说明：
  • INT((ROW()-1))*1000：计算每组数据的起始行偏移量，确保每行对应一组1000个值
  • OFFSET：提取对应分组的1000行数据区域
  • TEXTJOIN：将区域内的值用','连接
  • 前后拼接('和')，生成最终的目标格式

方法2：Python脚本实现 #

针对百万级数据，编程处理更高效，以下提供两种实现方式：

原生Python方案 #

# 生成模拟数据（实际场景可从CSV/Excel文件读取）
data = [str(i) for i in range(1, 1000001)]

# 按每1000个元素拆分分组
groups = [data[i:i+1000] for i in range(0, len(data), 1000)]

# 格式化为目标字符串并输出
for group in groups:
    formatted_str = f"('{','.join(group)}')"
    print(formatted_str)

Pandas方案 #

import pandas as pd

# 读取数据（假设数据文件为data.csv，Column A为目标列）
df = pd.read_csv('data.csv')

# 移除数据中的千位分隔符并转为字符串类型
df['Column A'] = df['Column A'].str.replace(',', '').astype(str)

# 按每1000行分组
groups = df.groupby(df.index // 1000)['Column A'].apply(list)

# 输出格式化结果
for group in groups:
    print(f"('{','.join(group)}')")

内容的提问来源于stack exchange，提问作者Annn