BigQuery数据传输服务同步Google Play指定App数据及计费咨询

指定应用同步的可行方案 #

官方原生的 Google Play 到 BigQuery 数据传输（DTS）连接器，默认配置会拉取关联账号下所有可访问的应用数据，配置界面没有提供直接勾选部分应用的选项，但你完全可以实现仅同步指定3款应用的需求，可选方案如下：

• 权限隔离方案（最推荐，维护成本最低）
  新建一个专用服务账号，仅给这个账号授予你需要同步的3款应用的Play控制台数据读取权限，完全不给剩余7款应用的任何访问权限。用这个服务账号创建DTS传输任务时，服务会自动拉取账号有权限访问的应用数据，只会同步这3个目标应用的内容，不需要额外做开发改造。
• 全量同步+后置筛选方案
  按默认配置把账号下全部10款应用的数据同步到专门的中转数据集，再配置BigQuery定时查询任务，通过package_name字段筛选出目标3款应用的数据，写入业务实际使用的正式数据集，同时给中转数据集配置数据定期过期规则，自动清理非目标应用的冗余数据。这个方案配置逻辑简单，但会产生全量传输的对应成本。
• 自定义传输链路方案
  不使用官方DTS的Play连接器，直接基于Google Play开发者API编写数据拉取逻辑，部署在Cloud Function、Cloud Run这类无服务器服务上定时触发，只拉取指定3款应用需要的报表字段后直接写入BigQuery。这个方案灵活度最高，可自定义同步字段、同步频率，但需要自己维护传输逻辑的稳定性、重试容错机制。

对应场景的成本计算规则 #

BigQuery DTS的Google Play传输项计费，是按当月实际成功传输到BigQuery数据集内的唯一Package Name数量核算，不会按你Play控制台名下的总应用数计费，不同方案的实际成本差异很大：

• 用权限隔离方案时，传输任务只会拉取3个目标包名的数据，Installs_country表对应的月成本为 3 * 25美元 = 75美元/月，其余按包名计费的Play报表项，也都按实际同步的3个包核算，不会收另外7款应用的传输费。
• 用全量同步+后置筛选方案时，DTS在传输阶段会拉取全部10个包名的数据，因此Installs_country表对应的月成本为 10 * 25美元 = 250美元/月——哪怕你后续在BigQuery里删掉了其余7款应用的数据，当月已经产生的传输费用也不会减免。
• 用自定义传输链路方案时，不会产生官方DTS的Play传输专项费用，你只需要付BigQuery的存储、查询费用，以及定时任务的计算资源费用，通常在仅同步少量应用的场景下这个方案成本最低，但需要投入一定的开发维护成本。

提示：首次配置权限隔离方案后，建议在第一次传输任务跑完后，抽查数据集内的包名列表，确认没有混入非目标应用的数据，避免权限配置错误产生额外支出。

内容的提问来源于stack exchange，提问作者Tim Chiang