Yelp API批量获取商家评论及转字典、DataFrame的实现问题
问题解决方案
1. 批量查询商家评论并存储为字典
你可以将所有商家ID存入列表后遍历查询,同时添加简单的异常处理和速率控制,避免API调用中断或触发限流,示例代码如下:
import time # 替换为你持有的300个商家ID列表 biz_id_list = ['amys-ice-creams-austin-3', '其他商家id...'] responses = {} for biz_id in biz_id_list: try: # 调用API查询当前商家评论 resp = yelp_api.reviews_query(id=biz_id) # 以商家ID为key存储响应结果 responses[biz_id] = resp # 按需调整延时,避免触发Yelp API速率限制 time.sleep(0.2) except Exception as e: print(f"商家{biz_id}查询失败:{e}") responses[biz_id] = None
运行完成后responses就是你需要的字典格式结果,key为商家ID,value为对应评论查询响应。
2. 评论数据转DataFrame的正确实现
你原有代码的问题有两个:
- pandas 2.0及以上版本已经完全移除了
DataFrame.append()方法,运行会直接报错 - 遍历逻辑没有匹配多商家批量查询的响应结构,直接取
responses['reviews']无法匹配字典的键结构
正确实现不需要循环拼接,直接提取所有评论后生成DataFrame即可,代码如下:
import pandas as pd all_reviews = [] # 遍历所有商家的响应结果 for biz_resp in responses.values(): # 跳过查询失败的空结果 if biz_resp and 'reviews' in biz_resp: # 将当前商家的所有评论合并到总列表 all_reviews.extend(biz_resp['reviews']) # 直接用评论列表生成DataFrame reviews_df = pd.DataFrame(all_reviews) # 查看前几行数据 reviews_df.head()
内容的提问来源于stack exchange,提问作者Spal
相关产品推荐
相关产品推荐

