如何创建混合分区表_结合内部数据与外部文件(如CSV)的分区表构建-Oracle-PHP中文网

混合分区表是通过外部表+分区表组合实现的方案，核心约束为：各分区须统一为本地表或csv外部表，不可混用；postgresql支持该模式，mysql/tidb不支持；csv需服务器本地可读且权限正确；仅支持只读查询，写入须避开csv分区。

什么是混合分区表：内部数据 + 外部 csv 的本质约束

混合分区表不是 postgresql 或 mysql 原生支持的“一类表”，而是通过外部表（create foreign table）+ 分区表（create table ... partition by）+ 继承或声明式分区绑定实现的组合方案。核心在于：每个分区可以是普通本地表，也可以是挂载了 csv 的外部表——但二者不能混在同一个分区键逻辑里自动路由。

常见错误现象：ERROR: cannot inherit from foreign table（PostgreSQL 15 之前）、Partition bound must be constant（试图用外部表路径做分区键值）、查询时 CSV 分区返回空但无报错（路径权限或格式不匹配）。

PostgreSQL 是目前唯一能较稳妥实现该模式的主流数据库，MySQL / TiDB 不支持外部表作为分区子表
CSV 必须放在数据库服务器本地可读路径（不是客户端），且 postgres 用户需有读权限
外部表定义中的 filename 选项不能含变量或表达式，必须是字面量字符串

PostgreSQL 中构建混合分区表的三步实操

以按日期分区为例：2024-01 到 2024-03 存本地表，2024-04 及之后用 CSV 外部表承载。

第一步：建主表并声明分区

CREATE TABLE sales (
  id int,
  amount numeric,
  sale_date date
) PARTITION BY RANGE (sale_date);

第二步：创建本地分区（常规操作）

CREATE TABLE sales_202401 PARTITION OF sales
  FOR VALUES FROM ('2024-01-01') TO ('2024-02-01');

第三步：为 CSV 创建外部分区（关键差异点）

先建 file_fdw 扩展：CREATE EXTENSION file_fdw;
建 server：CREATE SERVER file_server FOREIGN DATA WRAPPER file_fdw;
建外部表（注意列类型、分隔符、header 必须和 CSV 严格一致）：

CREATE FOREIGN TABLE sales_202404 (
  id int,
  amount numeric,
  sale_date date
) SERVER file_server
OPTIONS (
  filename '/var/lib/postgresql/data/sales_202404.csv',
  format 'csv',
  header 'true'
);

手动绑定到主表：ALTER TABLE sales ATTACH PARTITION sales_202404 FOR VALUES FROM ('2024-04-01') TO ('2024-05-01');

查询与写入的边界必须手动划清

混合分区表只读安全，写入必须避开 CSV 分区——否则会报 ERROR: cannot insert into foreign table。

使用场景明确区分：

BI 工具或报表查询全表：SELECT * FROM sales WHERE sale_date >= '2024-01-01'; —— 自动下推到各分区，CSV 部分走 file_fdw 读取
新增当日数据：INSERT INTO sales_202404 ... ❌ 禁止；应改写为 INSERT INTO sales_202405 ...（提前建好下一个本地分区）
需要追加 CSV 数据？只能重写整个 CSV 文件，然后 ANALYZE sales_202404; 更新统计信息

性能影响明显：CSV 分区无索引、无 MVCC、每次查询都全文件扫描；若单个 CSV 超 100MB，响应延迟会陡增。