如何获取Stack Overflow重复问题数据集?是否可从指定地址获取
Stack Overflow重复问题数据集获取说明
嘿,刚好对这块比较熟,给你详细说下:
- 你提到的那个archive上的stackexchange归档资源,确实包含Stack Overflow的重复问题相关数据!这个归档是官方认可的Stack Exchange全站点历史数据备份,里面自然涵盖了Stack Overflow的所有问题记录,包括标记为重复的那些。
- 具体来说,归档里的
Posts.xml文件是关键,所有标记为问题(PostTypeId=1)的条目里,重复问题会带有DuplicateOfQuestionId字段,直接指向它所重复的原问题ID,你可以通过这个字段轻松筛选出所有重复问题的数据集。 - 小提醒:这个归档文件体积不小,下载后建议用专门的XML解析工具处理,比如Python里的
xml.etree.ElementTree模块,或者更高效的lxml库来批量提取数据。
内容的提问来源于stack exchange,提问作者Eierschalen
相关产品推荐
相关产品推荐

