Power BI静态递归Web API调用数据拉取不全，求排查错误

需要获取27515条记录，目标OData接口单次返回上限为1000条。动态M代码可拉取全量数据，但Power BI服务仅支持静态数据源刷新，只能使用静态代码。当前静态代码仅拉取到19000条记录（仅发起19次请求），实际需要28次请求才能获取全量数据。

初始API调用返回的d对象包含两个字段：

• results：存储当前请求的1000条数据
• __next：包含带skiptoken的下一页完整API URL，用于告知接口跳过已获取的数据

两段M代码对比 #

动态M代码（可正常拉取全量数据） #

= List.Generate( ()=> Json.Document(Web.Contents("https://my_instance/odata/v2/Table?$format=JSON&$paging=snapshot"))[d],
                    each Record.HasFields(_, "results")= true, 
                    each try Json.Document(Web.Contents(_[__next]))[d] otherwise [df=[__next="dummy_variable"]])

静态M代码（拉取不全，需排查） #

= List.Generate( ()=> Json.Document(Web.Contents("https://my_instance/odata/v2/Table?$format=JSON&$paging=snapshot"))[d],
                    each Record.HasFields(_, "results")= true, 
                    each try Json.Document(Web.Contents("https://my_instance/odata/v2/Table?$format=JSON&$paging=snapshot", [Query=[q=_[__next]]]))[d] otherwise [df=[__next="dummy_variable"]])

静态代码的核心问题是下一页请求的构造逻辑错误：

• 动态代码直接使用返回的__next完整URL发起请求，符合OData分页的标准逻辑。
• 静态代码错误地将__next这个完整URL作为q参数的值拼接到基础URL后，导致接口无法识别有效的skiptoken，最终提前终止分页流程。

要满足Power BI服务的静态数据源要求，需保留基础URL的静态性，同时正确提取__next中的skiptoken参数用于构造下一页请求。

修正后的静态M代码 #

= List.Generate(
    // 初始请求
    () => let
        initialResponse = Json.Document(Web.Contents("https://my_instance/odata/v2/Table", [
            Query = [
                $format = "JSON",
                $paging = "snapshot"
            ]
        ])),
        d = initialResponse[d]
    in d,
    // 迭代终止条件：存在results字段且存在下一页链接
    each Record.HasFields(_, "results") and Record.HasFields(_, "__next"),
    // 构造下一页请求
    each let
        // 从__next URL中提取skiptoken参数值
        nextUrl = _[__next],
        skiptoken = Text.AfterDelimiter(Text.AfterDelimiter(nextUrl, "skiptoken="), "&"),
        // 用静态基础URL+提取的skiptoken发起请求
        nextResponse = Json.Document(Web.Contents("https://my_instance/odata/v2/Table", [
            Query = [
                $format = "JSON",
                $paging = "snapshot",
                skiptoken = skiptoken
            ]
        ]))
    in nextResponse[d],
    // 提取每一页的results数据
    each _[results]
)

关键说明 #

1. 静态URL合规性：基础URLhttps://my_instance/odata/v2/Table固定不变，所有查询参数通过Query参数传递，符合Power BI服务对静态数据源的要求。
2. 正确解析分页参数：从__next中提取纯skiptoken值，而非直接使用完整动态URL，避免触发Power BI的动态数据源限制。
3. 优化终止条件：同时检查results和__next字段，确保只有存在有效下一页时才继续迭代，避免无效请求。

内容的提问来源于stack exchange，提问作者jessica4255