Python处理列表套字典结构JSON数据的三种方式对比_Python

前言

对于 “列表套字典”（json 数组包含对象）类型的 json 文件，查找并修改特定键值的思路是：先遍历列表中的每个字典，找到符合条件的目标字典，再修改该字典中指定键的值，最后写回文件。

示例场景

假设 users.json 文件内容如下（列表套字典结构）：

[
  {"id": 1, "name": "alice", "age": 25, "active": true},
  {"id": 2, "name": "bob", "age": 30, "active": false},
  {"id": 3, "name": "charlie", "age": 28, "active": true}
]

需求

找到 id=2 的字典，将其 age 修改为 31，同时将 active 改为 true。

import json

# 1. 读取 json 文件（列表套字典结构，解析后是 python 列表）
with open("users.json", "r", encoding="utf-8") as f:
    data_list = json.load(f)  # data_list 是一个包含字典的列表

# 2. 遍历列表，查找目标字典并修改值
for item in data_list:
    # 假设通过 "id" 定位目标字典（可根据实际条件调整）
    if item.get("id") == 2:  # 找到 id=2 的字典
        item["age"] = 31  # 修改 age 的值
        item["active"] = true  # 修改 active 的值
        break  # 找到后退出循环，提高效率

# 3. 将修改后的列表写回 json 文件
with open("users.json", "w", encoding="utf-8") as f:
    json.dump(data_list, f, indent=2, ensure_ascii=false)

潜在问题及优化方案

在处理 “列表套字典” 结构的 json 数据时，遍历列表是最直接的方式，但对于数据量极大的场景（如几万 / 几十万条数据），遍历的效率确实可能偏低。此时可以通过优化查找逻辑或借助第三方库提升效率，具体方法如下：

方法 1：用 “字典映射” 预处理，将列表转为索引字典（推荐）

如果列表中的字典有唯一标识键（如id），可以先将列表转换为以该标识为键的字典（相当于建立 “索引”），后续查找时直接通过键获取目标字典，时间复杂度从遍历的o(n)降至o(1)。

示例（基于之前的users.json）：

import json

# 1. 读取数据并构建索引字典（以id为键）
with open("users.json", "r", encoding="utf-8") as f:
    data_list = json.load(f)

# 构建映射：{id: 对应的字典}
id_to_item = {item["id"]: item for item in data_list}

# 2. 直接通过id查找并修改（无需遍历）
target_id = 2
if target_id in id_to_item:
    id_to_item[target_id]["age"] = 31
    id_to_item[target_id]["active"] = true

# 3. 写回文件（原列表已被修改，因为字典是引用类型）
with open("users.json", "w", encoding="utf-8") as f:
    json.dump(data_list, f, indent=2, ensure_ascii=false)

优势：

预处理一次后，后续多次查找 / 修改均为o(1)，适合频繁操作的场景。
不改变原列表结构，写回文件时直接用原列表即可（因为字典是引用类型，修改映射中的字典会同步影响原列表）。

方法 2：用列表推导式 / 生成器表达式简化查找（适合单次查找）

如果只需单次查找，可通过列表推导式或生成器表达式快速定位目标，代码更简洁（本质仍是遍历，但写法更高效）。

示例：

import json

with open("users.json", "r", encoding="utf-8") as f:
    data_list = json.load(f)

# 用生成器表达式查找第一个符合条件的字典（找到即停止）
target = next((item for item in data_list if item["id"] == 2), none)
if target:
    target["age"] = 31
    target["active"] = true

with open("users.json", "w", encoding="utf-8") as f:
    json.dump(data_list, f, indent=2, ensure_ascii=false)

优势：

借助next()和生成器表达式，找到目标后会立即停止遍历（类似带break的循环），避免多余操作。
代码更简洁，适合一次性查询修改。

方法 3：借助第三方库（如pandas）处理结构化数据

如果 json 数据是结构化的（如每个字典的键相同，类似表格），可以用pandas将其转为 dataframe，通过类似 sql 的查询语法快速定位和修改，适合大数据量场景。

示例：

import json
import pandas as pd

# 1. 读取json并转为dataframe
with open("users.json", "r", encoding="utf-8") as f:
    data_list = json.load(f)
df = pd.dataframe(data_list)

# 2. 定位并修改（通过条件筛选）
df.loc[df["id"] == 2, ["age", "active"]] = [31, true]

# 3. 转回列表并写回文件
updated_list = df.to_dict("records")  # 转为列表套字典
with open("users.json", "w", encoding="utf-8") as f:
    json.dump(updated_list, f, indent=2, ensure_ascii=false)

优势：