使用Google BigQuery查询GDELT项目,是否有含新闻标题及正文的表?
GDELT项目中包含新闻标题/摘要的表说明
GDELT并非所有表都仅提供新闻URL,以下是包含新闻标题、摘要/描述的核心表:
gdelt-bq.gdeltv2.gkg(Global Knowledge Graph表)
这是存储新闻元数据最核心的表之一,包含:DocumentTitle:新闻标题DocumentDescription:新闻摘要/描述DocumentIdentifier:新闻源URL
示例查询:
SELECT DocumentIdentifier, DocumentTitle, DocumentDescription FROM `gdelt-bq.gdeltv2.gkg` LIMIT 10;gdelt-bq.gdeltv2.eventmentions(事件提及关联表)
该表关联事件与对应的新闻提及内容,包含:MentionTitle:提及该事件的新闻标题MentionText:包含事件提及的新闻片段(非完整正文)MentionIdentifier:对应新闻的URL
注意事项
GDELT不存储新闻完整正文,受版权和存储成本限制,仅提供URL及提取的关键元数据。若需完整正文,需自行通过URL爬取,但需遵守目标网站的robots协议与版权规定。
另外你提到的gdelt-bq.full.events是事件结构化数据核心表,仅记录事件的属性、关联实体等信息,确实不包含新闻内容元数据,需关联上述表获取对应新闻信息。
内容的提问来源于stack exchange,提问作者Vahid Shams
相关产品推荐
相关产品推荐

