推荐哪些托管数据服务可定期将加密领域REST API数据导入云存储？

优先选择的全托管方案（运维负担最低） #

• 你已经关注到的Precog是加密API场景的首选，本身内置Glassnode原生连接器，不需要你自己开发API鉴权、限流处理、分页拉取的逻辑，直接在界面选择你需要的时间粒度（小时/日级均支持）、设置回溯的时间范围，配置完成后平台会自动完成全量历史数据拉取，之后按照你设置的粒度自动做增量同步，管道的异常排查、维护都由平台负责，你只需要关注同步到BigQuery的数据是否符合预期即可，完全不需要运维服务器、调度任务这些底层资源。
• 通用类全托管数据集成服务，比如Fivetran、Airbyte Cloud，这类平台就算没有现成的Glassnode专用连接器，也有成熟的通用REST连接器，你只需要按Glassnode的API文档配置好鉴权参数、请求规则、时间字段映射，设置好同步频率和回溯范围即可，平台会自动处理全量拉取、增量同步的逻辑，运维成本也极低，出问题有官方技术支持处理，不需要你维护底层基础设施。
• 云厂商原生数据集成服务，比如你提到的Azure Data Factory，以及GCP的Cloud Data Fusion、AWS的Glue Studio，如果你已经在使用对应公有云的服务，选这类方案的适配性会更好，和BigQuery这类云存储的权限、网络打通不需要额外配置，也是低代码操作，配置好API拉取规则和调度规则即可，稳定性有云厂商保障，运维负担远低于自研管道。

选型优先级参考 #

你优先考虑降低运维负担的话，按以下顺序选择即可：

1. 优先选带Glassnode内置连接器的全托管服务，完全不需要做API适配，最快可以十几分钟完成管道配置，后续几乎不用维护
2. 其次选你当前在用的云厂商对应的原生数据集成服务，生态适配好，不需要额外跨云开通服务，权限管理更方便
3. 如果后续有自定义数据处理的需求，可以选Airbyte Cloud这类开源托管的集成服务，有需要的话可以自定义连接器，灵活性更高

核心需求适配说明 #

你提到的三个核心需求，上面的所有方案都能满足：

• 全量回溯：所有服务都支持自定义设置回溯的起始时间，你直接输入需要拉取的最早时间点即可，平台会自动处理API的批量拉取逻辑，不需要自己写循环拉取的代码
• 指定时间粒度：直接配置调度频率即可，需要日级数据就设置每日调度一次拉取前一天的全量数据，需要小时级就设置每小时调度一次拉取前一小时的数据，也支持自定义粒度配置
• 定期增量同步：所有服务都支持按时间戳做增量切割，你只需要指定Glassnode返回数据里的时间字段作为增量键，平台每次同步只会拉取上次同步完成之后的新增数据，不需要你自己维护同步位点

内容的提问来源于stack exchange，提问作者Mark