能否在AWS AppFlow单流程中使用多查询？Datadog集成优化需求

一、Amazon AppFlow现有方案优化 #

• 聚合Datadog数据源：通过Datadog API批量拉取多个监控器的查询结果，将数据聚合到单个自定义指标或日志流中，再用单个AppFlow流程同步这个聚合后的数据源。比如调用Datadog的GET /api/v1/monitor/<monitor_id>接口遍历监控器，把结果统一写入Datadog自定义日志，AppFlow只同步该日志流即可。
• 自动化流程管理：用AWS Lambda编写脚本，通过Datadog API获取所有监控器列表，然后调用AppFlow的StartFlowExecution接口批量启动流程。无需手动创建和维护大量流程，全程自动化执行，降低运维成本。
• 参数化查询尝试：检查AppFlow的Datadog连接器是否支持动态参数，若支持，可在流程中使用参数化查询，配合Lambda定期更新参数值，实现单个流程轮询多个监控器的查询结果。

二、AppFlow替代方案 #

• Lambda + Datadog SDK：直接用Lambda编写自定义逻辑，通过Datadog官方SDK（Python/Go等）批量拉取多个监控器的数据，再写入S3、Redshift、CloudWatch等AWS服务。这种方式完全自定义，支持批量请求、缓存、错误重试，灵活性远高于AppFlow。
• Datadog Webhooks + EventBridge：配置Datadog Webhook，将多个监控器的触发事件或定期数据推送至AWS EventBridge，再通过EventBridge规则将数据路由到目标服务。适合实时数据场景，无需轮询，且可批量配置Webhook到同一端点。
• MWAA（托管Airflow）：使用AWS托管的Apache Airflow服务，创建DAG任务批量调用Datadog API获取监控数据，再写入AWS目标存储或分析服务。Airflow擅长调度复杂批量任务，适合大量监控器的定期同步需求。

内容的提问来源于stack exchange，提问作者user15569323