repeat会真实复制数据并分配新内存，expand仅调整stride和shape、共享原始内存；repeat适用于需独立副本的场景，expand适用于广播计算等省内存临时对齐。
repeat 会真实复制数据，必须分配新内存
因为 repeat 的语义是“把整块数据按指定次数平铺”，PyTorch 必须在 GPU 或 CPU 上开辟一块新 buffer，把原始元素逐个写入。哪怕只是 x.repeat(1, 1)，只要参数不是全 1，它就走复制路径——不复用原内存。
常见错误现象：repeat 后的张量修改不会影响原张量，但内存占用翻倍（比如 torch.float32 的 (1024, 768) 张量 repeat(2, 1) 后变成两倍显存）。
- 参数差异：传入的是各维度的「重复次数」，如
x.repeat(2, 3)表示第 0 维复制 2 份、第 1 维复制 3 份 - 性能影响：小张量看不出差别；大张量 + 高频调用时，显存压力和 memcpy 开销明显
- 兼容性注意：
repeat返回的张量总是contiguous()的，可直接进卷积等算子，无需额外处理
expand 只改 stride 和 shape，共享原始内存
expand 不是复制操作，而是构造一个逻辑视图：它只调整张量的 stride 和 size 字段，底层 data pointer 指向完全不变。所以它快、省内存，但有硬性限制——只能对 size=1 的维度做扩展。
典型报错：RuntimeError: The expanded size of the tensor (5) must match the existing size (3) at dimension 0，说明你试图 expand 一个非 singleton 维度。
- 使用场景：广播计算（如 bias 加法）、临时对齐 shape（如
logits.expand(-1, num_classes)） - 容易踩的坑：返回张量是只读视图，
expand后不能直接+=赋值；若需修改，必须先clone()或换用repeat - 内存地址验证：打印
x.data_ptr() == y.data_ptr()（y 是 x.expand(...)）通常为True
什么时候该用 repeat，什么时候选 expand？
核心判断依据就一条：你是否需要独立副本。
- 要独立副本（比如后续要 inplace 修改、多线程写入、或避免副作用）→ 用
repeat - 只是临时对齐形状参与计算（如加 bias、拼接前 reshape、loss 计算中的广播）→ 用
expand - 想省显存又不确定维度是否为 1 → 先检查
x.shape[d] == 1，再决定能否expand
混淆二者最常导致的问题不是报错，而是静默的内存泄漏或意外的数值污染——比如误用 expand 后修改了视图，结果上游参数也被改了。
expand_as 和 repeat_interleave 不是替代品
expand_as 只是语法糖，底层仍是 expand，约束条件完全一样；而 repeat_interleave 是按元素级重复（类似 numpy 的 repeat），和这里讨论的张量级 repeat 完全不同。
真正容易被忽略的复杂点在于：某些模型导出（如 ONNX）或量化流程中，expand 视图可能被强制 materialize 成实际数据，这时看似省下的内存会在部署时突然回归——得提前用 .contiguous() 或 .clone() 显式固化。
Python免费学习笔记（深入）：立即使用
在学习笔记中，你将探索 Python 的核心概念和高级技巧！
