Django DRF不正确的分页计数

问题描述

我为我的 django drf 应用程序使用了一个自定义但简单的分页类：

from rest_framework.pagination import PageNumberPagination

class CustomPagination(PageNumberPagination):
    page_size = 10
    page_size_query_param = "page_size"
    max_page_size = 100

我还有一个 ViewSet 操作，它对继承的查询集执行一些操作并返回分页的结果：

class MatchOfJobViewSet(ModelViewSet):

  serializer_class = MatchSerializer
  filter_backends = (DjangoFilterBackend,)

  # classic filter inheriting from django_filter.FilterSet
  filter_class = MatchFilter

  def get_queryset(self):
    job_pk = self.kwargs["job_pk"]
    return Match.objects.filter(job_pk=job_pk)

  @action(
    detail=False,methods=["get"],url_path="dynamic",serializer_class=MatchDynamicSerializer
  )
  def dynamic(self,request,*args,other_args,**kwargs):
    """return the list of matches with a dynamic serializer"""

    # some operation on the queryset
    queryset = self.get_queryset().select_related("some_field")

    # apply the filters
    queryset = self.filter_queryset(queryset)

    # paginate
    page = self.paginate_queryset(queryset)

    # I use a custom serializer that takes extra arguments
    # to update dynamically the fields to be serialized
    serializer = self.get_serializer(page,many=True,other_args=other_args)

    # unchanged from the generic list response
    return self.get_paginated_response(serializer.data)

我从视图中得到的响应是这样的

{
  "count": 308,"next": "https://blabla.com?page=2&page_size=100","prevIoUs": "https://blabla.com?page=4&page_size=100","results": [...]
}

计数显示有 308 个条目虽然我在数据库中检查时只有 297 个条目（导致最后一页最终为空）

从我读到的 count 参数是由分页器（这是默认的 DjangoPaginator）使用相同的查询集计算的。评估的查询集和 Paginator.count() 如何给出不同的结果？

解决方法

感谢评论，我发现 queryset.count() 和 len(queryset) 之间的差异是由在我的 get_queryset() 方法中应用的一些注释引起的。

我认为使用 queryset.query.annotations.clean() 可以完全从 SQL 查询中清除它，但它留下了一些痕迹，特别是一些 OUTTER LEFT JOIN。这导致 COUNT SQL 查询多次计算条目。

如果您最终遇到类似问题，我建议您仔细检查应用于您的查询集的过滤器和注释。您可以使用 this ticket

中的方法检查 .count() 运行的 SQL 查询