Django MPTT 使用 DRF 高效序列化关系数据

2024-04-24

我有一个类别模型,它是 MPTT 模型。它是 m2m 到组,我需要序列化具有相关计数的树,想象我的类别树是这样的:

Root (related to 1 group)
 - Branch (related to 2 groups) 
    - Leaf (related to 3 groups)
...

所以序列化的输出将如下所示:

{ 
    id: 1, 
    name: 'root1', 
    full_name: 'root1',
    group_count: 6,
    children: [
    {
        id: 2,
        name: 'branch1',
        full_name: 'root1 - branch1',
        group_count: 5,
        children: [
        {
            id: 3,
            name: 'leaf1',
            full_name: 'root1 - branch1 - leaf1',
            group_count: 3,
            children: []
        }]
    }]
}

这是我目前超级低效的实现:

Model

class Category(MPTTModel):
    name = ...
    parent = ... (related_name='children')

    def get_full_name(self):
        names = self.get_ancestors(include_self=True).values('name')
        full_name = ' - '.join(map(lambda x: x['name'], names))
        return full_name

    def get_group_count(self):
        cats = self.get_descendants(include_self=True)
        return Group.objects.filter(categories__in=cats).count()

View

class CategoryViewSet(ModelViewSet):
    def list(self, request):
        tree = cache_tree_children(Category.objects.filter(level=0))
        serializer = CategorySerializer(tree, many=True)
        return Response(serializer.data)

串行器

class RecursiveField(serializers.Serializer):
    def to_native(self, value):
        return self.parent.to_native(value)


class CategorySerializer(serializers.ModelSerializer):
    children = RecursiveField(many=True, required=False)
    full_name = serializers.Field(source='get_full_name')
    group_count = serializers.Field(source='get_group_count')

    class Meta:
        model = Category
        fields = ('id', 'name', 'children', 'full_name', 'group_count')

这是可行的,但也会通过大量的查询来访问数据库,而且还有其他关系,而不仅仅是组。有没有办法提高效率?如何编写自己的序列化器?


你肯定遇到了 N+1 查询问题,我已经介绍过在另一个 Stack Overflow 答案中详细说明 https://stackoverflow.com/a/26598897/359284。我建议阅读 Django 中的优化查询,因为这是一个非常常见的问题。

现在,Django MPTT 还存在一些问题,您需要在 N+1 查询方面解决这些问题。这俩self.get_ancestors and self.get_descendants方法创建一个新的查询集,在您的情况下发生的情况是every您正在序列化的对象。您可能想寻找一种更好的方法来避免这些问题,我在下面描述了可能的改进。

In your get_full_name方法,你正在调用self.get_ancestors为了生成正在使用的链。考虑到在生成输出时您始终拥有父级,因此将其移动到SerializerMethodField重用父对象来生成名称。像下面这样的东西可能会起作用:

class RecursiveField(serializers.Serializer):

    def to_native(self, value):
        return CategorySerializer(value, context={"parent": self.parent.object, "parent_serializer": self.parent})

class CategorySerializer(serializers.ModelSerializer):
    children = RecursiveField(many=True, required=False)
    full_name = SerializerMethodField("get_full_name")
    group_count = serializers.Field(source='get_group_count')

    class Meta:
        model = Category
        fields = ('id', 'name', 'children', 'full_name', 'group_count')

    def get_full_name(self, obj):
        name = obj.name

        if "parent" in self.context:
            parent = self.context["parent"]

            parent_name = self.context["parent_serializer"].get_full_name(parent)

            name = "%s - %s" % (parent_name, name, )

        return name

您可能需要稍微编辑此代码,但总体思路是您并不总是需要获取祖先,因为您已经拥有祖先链。

这并不能解决Group查询,您可能无法优化这些查询,但它至少应该减少您的查询。递归查询非常难以优化,并且通常需要进行大量规划才能弄清楚如何最好地获取所需数据,而不会退回到 N+1 情况。

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

Django MPTT 使用 DRF 高效序列化关系数据 的相关文章

随机推荐

  • 在分布式 dask 中,我们如何为每个工作人员选择 --nthreads 和 --nprocs ?

    我们如何选择 nthreads and nprocsDask 中每个工人的分布情况 我有 3 个工作线程 2 个工作线程有 4 个核心 每个核心有一个线程 1 个工作线程有 8 个核心 根据输出lscpu每个worker上的Linux命令
  • 如何将基数词转换为序数词

    有没有一种简单的方法可以将数字 1 2 3 转换为 1st 2nd 3rd 并且以这种方式我可以为该函数提供一种语言并具有它会返回我目标语言的正确形式吗 标准 C stl 或 boost 都可以 MFC 或 ATL win32 api 或我
  • 如何简洁地赋值并立即调用函数变量?

    以下是在闭包中定义匿名函数 调用该函数并忽略它的方法 function do stuff 这用于维持有限的范围而不向脚本添加大量内容 IIFE 立即调用函数表达式 如果您希望立即执行某个函数 同时仍保留该函数以供将来使用 该怎么办 如下所示
  • 在重新激活 WiFi/移动网络之前,服务中的 Android 位置侦听器无法工作

    我的位置侦听器工作正常 收集数据没有任何问题 但有时它不收集任何数据 我此时必须关闭并重新启动我的位置提供程序 重新启动可以解决问题 但是 这可能不是用户期望做的最好的事情 当我使用 GPS 作为提供商时 没有问题 位置侦听器在服务中工作
  • 在react-router-dom中隐藏某些页面的标题

    有没有办法可以仅隐藏 React Router 中某些路由的页面标题 我现在的问题是我的App组件呈现我的Main组件 其中包含我的BrowserRouter 和我的Header呈现在我的App组件 所以我无法根据路由路径渲染标题 这是一些
  • 如何从access中的表中获取选择性记录

    下面给出的是我的查询结果 但有很多冗余记录 因此 我想过滤掉这个查询的结果 我的目标是每个角度仅提取两个记录 第一个和最后一个 例如当角度为195 我想获得它的第一条记录日期 2 27 2017 时间 2 00 00 AM和 日期为的第二条
  • 禁用 Chrome 严格 MIME 类型检查

    有什么办法可以禁用strict MIME type checking在 Chrome 中 实际上我正在跨域发出 JSONP 请求 它在 Firefox 上工作正常 但是在使用 chrome 时 它 在控制台中出现一些错误 拒绝执行来自 的脚
  • 批处理文件随机删除文本文件的一半行?

    我需要一种方法来使用批处理来查看文本文件的每一行 并删除该文本文件中的一半行 随机选择要删除的行 这是为了模拟 D D 游戏中的锦标赛 我所需要的只是一种方法来淘汰每轮比赛的获胜者 我可以轻松地制作一个批处理文件 复制文本文件并为每一轮重命
  • Ionic 4:Cordova 不可用。确保包含 cordova.js 或在设备/模拟器中运行

    我正在尝试在新的 ionic 4 项目中使用 cordova 插件 但我总是遇到有关 cordova 的错误 该插件已正确安装并显示在插件文件夹中 Error 本机 尝试调用 SplashScreen hide 但 Cordova 不可用
  • 使用 ggplot 为长格式数据创建散点图

    我研究了一个长格式的 data frame 在每种情况下都有不同数量的实体 如下所示 Condition rating Control 2 1596456 Control 0 2385878 Control 3 0042808 Contro
  • 如何从下拉框中获取用户选择的值并将其添加到模型中? [复制]

    这个问题在这里已经有答案了 我有一个表单 用户在其中创建新考试 并在表单中用户从下拉菜单中选择一个主题 该下拉列表包含主题字符串 而不是实际的主题对象 在我的程序中 存在与考试具有一对多关系的实际主题对象 如何找到用户选择的值 我想将其添加
  • 配置 Sonar 以从 Maven pom.xml 中排除文件

    我有一个在maven中配置的项目 代码分析是由SonarQube完成的 我正在尝试在 pom xml 文件中配置 SonarQube 以从代码分析中排除一些文件 这些文件可以通过它们的类名来识别 它们在扩展名之前包含下划线字符 它们是元模型
  • 操作系统状态错误-50?

    我刚刚收到从 ExtAudioFileWrite 返回的结果代码 50 而我在 扩展音频文件服务参考 中并没有找到关于这个结果代码的信息 请帮我解决它 Thanks 该错误代码在CarbonCore框架的MacErrors h中声明 50
  • R-sqldf 错误原始与双精度

    我有一个矢量 lims 有分数限制 1 0 000000 7 025894 9 871630 12 411131 15 155998 18 099176 21 431354 25 391163 30 616550 40 356630 我创建
  • 如何使用 JAXB 从 xsd 生成实现 Serialized 接口的 Java 类?

    我想将缓存引入到现有的 Spring 项目中 该项目使用 JAXB 来公开 WebServices 缓存将在端点级别完成 为了做到这一点 使用 JAXB 从 XSD 生成的类需要实现Serializable接口和覆盖Object s toS
  • C# - Windows 窗体应用程序位图 SetPixel 和 GetPixel 的更快替代方案

    我正在尝试自学 C 并且从各种来源听说函数 get 和 setpixel 可能非常慢 有哪些替代方案 性能改进真的那么显着吗 我的一段代码供参考 public static Bitmap Paint Bitmap b Color f Bit
  • 客户端通过 websocket 连接从后端服务器数据库表检索数据

    我使用以下服务器代码从 postgres 数据库检索数据 const express require express const app express const server require http createServer app
  • 在模拟 Excel.worksheet 时如何避免使用动态?

    我正在尝试使用 NSubstitute 或其他模拟框架和 MSTest Visual Studio 2010 模拟 Excel 电子表格 我不确定是否有比这更好的方法 而且这对于测试来说不太有效 这是一个示例 这是目前的所有原型代码 并且不
  • phpMyAdmin 中的“内部关系”对于 MyISAM 表有何作用?

    在 MyISAM 表的 phpMyAdmin v2 8 2 4 中 关系视图 出现在 结构 选项卡下 它显示内部关系列表 但是 考虑到 MyISAM 不支持外键约束或关系完整性 它们会做什么呢 从 phpMyAdmin 版本 3 2 0 1
  • Django MPTT 使用 DRF 高效序列化关系数据

    我有一个类别模型 它是 MPTT 模型 它是 m2m 到组 我需要序列化具有相关计数的树 想象我的类别树是这样的 Root related to 1 group Branch related to 2 groups Leaf related