
本文介绍如何将包含多个结构相似(即键集相同)字典的列表,按键集合自动分组,并将每组内各字段值聚合成列表,最终生成结构化的新字典列表。
本文介绍如何将包含多个结构相似(即键集相同)字典的列表,按键集合自动分组,并将每组内各字段值聚合成列表,最终生成结构化的新字典列表。
在 Python 数据处理中,常遇到一类“半结构化”字典列表:它们并非完全统一(如有的含 'fruit',有的含 'Veggie'),但每批字典内部具有相同的键集合(key set)。目标是将这些字典按其键结构归类,并对每个键下的所有值进行聚合——即把 'fruit': 'Apple'、'fruit': 'Banana' 等合并为 'fruit': ['Apple', 'Banana'],同时保持键名与值类型的对应关系。
核心思路是:以字典的键集合(frozenset(d.keys()))作为分组依据,因为 dict.keys() 返回的视图不可哈希,而 frozenset 是不可变且可哈希的,适合作为字典的键。随后使用 setdefault() 高效累积每组对应的原始字典。
以下是完整、健壮的实现代码:
lst = [
{"fruit": "Apple", "Color": "red", "weight": "10"},
{"fruit": "Banana", "Color": "yellow", "weight": "20"},
{"fruit": "Kiwi", "Color": "Green", "weight": "15"},
{"Veggie": "Onion", "Color": "white", "price": "10"},
{"Veggie": "Cabbage", "Color": "Light Green", "price": "30"},
{"Leafy": "Spinach", "Color": "Dark Green", "quantity": "30"},
]
# 步骤 1:按键集合分组(frozenset(d.keys()) 作为 group key)
groups = {}
for d in lst:
key_set = frozenset(d.keys())
groups.setdefault(key_set, []).append(d)
# 步骤 2:对每组生成新字典:每个键 → 对应所有字典中该键的值组成的列表
result = []
for key_set, dicts_in_group in groups.items():
merged = {}
for k in key_set: # 遍历该组共有的每个键
merged[k] = [d[k] for d in dicts_in_group]
result.append(merged)
print(result)
✅ 输出结果(顺序可能因字典插入顺序或 Python 版本略有差异,但逻辑等价):
[
{'fruit': ['Apple', 'Banana', 'Kiwi'], 'Color': ['red', 'yellow', 'Green'], 'weight': ['10', '20', '15']},
{'Veggie': ['Onion', 'Cabbage'], 'Color': ['white', 'Light Green'], 'price': ['10', '30']},
{'Leafy': ['Spinach'], 'Color': ['Dark Green'], 'quantity': ['30']}
]
⚠️ 注意事项:
- 键名大小写敏感:'Color' 与 'color' 被视为不同键,分组时不会合并。若需忽略大小写,预处理时统一 .lower() 即可。
- 空字典处理:若输入含 {},其 frozenset() 为空集,将被单独归为一组;生产环境建议提前过滤。
- 性能考量:该方案时间复杂度为 O(n × m)(n 为字典数,m 为平均键数),对万级以内数据高效可靠;超大规模场景可考虑 itertools.groupby 配合预排序(但需先标准化键顺序)。
- 扩展性提示:如需对数值字段自动转 int/float,可在 [d[k] for d in dicts_in_group] 处添加类型转换逻辑(注意容错)。
该方法不依赖外部库,纯 Python 实现,逻辑清晰、易于调试与定制,是处理异构字典列表聚合任务的经典范式。
Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!











