使用Page/Pageable限制查询返回量是否可行?能否处理千级数据集?
方案有效性及数据集处理能力说明
这个返回Page<Foo>类型的方案完全有效,处理1000条规模的数据集毫无压力,具体原因如下:
彻底解决方法冗余问题
不用再为不同的返回数量编写findTopNOrderByMarketDateDesc这类重复方法,只需通过Pageable参数动态配置:比如要获取最新的100条数据,就传入PageRequest.of(0, 100, Sort.by(Sort.Direction.DESC, "marketDate"));要取最新的1000条,就把页大小改成1000即可,灵活性拉满。性能可控,适配1000条数据完全没问题
Spring Data JPA会根据Pageable自动生成带分页逻辑的SQL(比如MySQL的LIMIT/OFFSET),只会查询当前页的目标数据,不会一次性加载全表数据到内存。哪怕你直接把页大小设为1000,1000条数据对JPA来说属于极小规模,无论是查询速度还是内存占用都不会有任何问题。附带实用元数据
Page对象不仅包含当前页的Foo列表,还会返回总记录数、总页数、当前页码等元数据,如果后续需要做分页展示(比如前端的分页组件),这些信息可以直接复用,比单纯返回List更实用。
需要注意的是,使用时要确保Pageable带上正确的排序条件,和原来的findTop99OrderByMarketDateDesc逻辑保持一致,也就是按marketDate倒序排列。
内容的提问来源于stack exchange,提问作者vic
相关产品推荐
相关产品推荐

