一、描述
1.1 混合分区表的介绍
从 Oracle Database 19c 开始, Oracle 数据库支持 Hybridpartitioned tables ,也就是混合分区表,进一步扩展了 Oracle 分区技术。这里的混合指的是数据的分布,一些分区可以位于数据库中,另一些可以是位于数据库外部的文件(比如操作系统文件或 Hadoop Distributed File System (HDFS) 文件)。从 12.2 开始就支持了外部表分区、只读分区,在 19c 中只是将内部分区( internal partitions )与 Oracle 外部分区( external partitions )特性结合起来,形成一个更通用的分区,称为混合分区表。
Oracle 混合分区表的意义是通过将传统的内部分区表和外部分区表结合起来,从而形成了更加通用的分区,启用混合分区表更易将内部分区和外部分区集成到单个分区表中。该特性还可以很容易的将非活跃分区移动到外部文件中,从而得降低存储解决方案成本。
1.2 支持外部分区的所有外部表类型
混合分区表支持外部分区的所有现有外部表类型 :
• ORACLE_DATAPUMP
• ORACLE_LOADER
• ORACLE_HDFS
• ORACLE_HIVE
1.3 混合分区表支持的操作
混合分区表支持的操作
( 1 )当前仅支持创建 single-level 的 range 和 list 分区,其中只有 single-level LIST 分区支持 HIVE
( 2 )可以使用 alter table ...DDLs 操作,比如 ADD,DROP 和 RENAME partitions
( 3 )可以在分区级别修改 external partitions 的 external data sources 位置
( 4 )可以将既有的内部分区表修改为混合分区表
( 5 )可以修改现有的 location 到 empty location 形成一个空的 external partition
( 6 )可以针对内部分区创建 global partial non-unique indexes
( 7 )可以针对内部分区创建 materialized views
( 8 ) 可以创建包含外部分区的 materialized views ,前提是 QUERY_REWRITE_INTEGRITY 必须为 STALE_TOLERATED 模式
( 9 ) DML 操作只能针对混合分区表的内部分区
二 混合分区表测试
2.1 构造外部数据
VI 编辑器编辑
sales_2016.txt
region,time_id,amount
EAST,20160101,6000
SOUTH,20160101,4000
WEST,20160101,2467
NORTH,20160101,2600
sales_2017.txt
region,time_id,amount
EAST,20170101,8000
SOUTH,20170101,2000
WEST,20170101,3400
NORTH,20170101,2000
sales_2018.txt
region,time_id,amount
EAST,20180101,2100
SOUTH,20180101,1300
WEST,20180101,3800
NORTH,20180101,2120
2.2 创建目录对象
mkdir /home/oracle/extfiles/2016
mkdir /home/oracle/extfiles/2017
CREATE DIRECTORY sales_data as '/home/oracle/extfiles';
CREATE DIRECTORY sales_data_2016 as '/home/oracle/extfiles/2016';
CREATE DIRECTORY sales_data_2017 as '/home/oracle/extfiles/2017';
将 sales_2016.txt 移动到 /home/oracle/extfiles/2016 下做为外部文件
将 sales_2017.txt 移动到 /home/oracle/extfiles/2017 下做为外部文件
将 sales_2018.txt 移动到 /home/oracle/extfiles 下做为外部文件
2.3 创建混合分区表
CREATE TABLE hybrid_partition_table
(
region varchar2(6) NOT NULL,
time_id DATE NOT NULL,
amount NUMBER(10,2)
)
EXTERNAL PARTITION ATTRIBUTES (
TYPE ORACLE_LOADER
DEFAULT DIRECTORY sales_data
ACCESS PARAMETERS(
FIELDS TERMINATED BY ','
(region,time_id DATE 'yyyy-mm-dd',amount)
)
REJECT LIMIT UNLIMITED
)
PARTITION BY RANGE (time_id)
(
PARTITION sales_2016 VALUES LESS THAN (TO_DATE('2017-01-01','yyyy-mm-dd'))
EXTERNAL DEFAULT DIRECTORY sales_data_2016 LOCATION ('sales_2016.txt'),
PARTITION sales_2017 VALUES LESS THAN (TO_DATE('2018-01-01','yyyy-mm-dd'))
EXTERNAL DEFAULT DIRECTORY sales_data_2017 LOCATION ('sales_2017.txt'),
PARTITION sales_2018 VALUES LESS THAN (TO_DATE('2019-01-01','yyyy-mm-dd')) EXTERNAL LOCATION ('sales_2018.txt'),
PARTITION sales_2019 VALUES LESS THAN (TO_DATE('2020-01-01','yyyy-mm-dd'))
);
REJECT LIMIT UNLIMITED :指定在数据库返回错误和查询终止前,允许出现多少行转换错误发生
TYPE :定义外部文件访问驱动类型 ORACLE_LOADER ORACLE_DATAPUMP
ACCESS PARAMETERS :定义访问属性
EXTERNAL 子句的 PARTITION 子句将分区定义为外部分区。如果没有 EXTERNAL 子句,则该分区是内部分区。
如果没有为外部分区定义外部文件,则外部分区为空。可以使用 ALTER TABLE MODIFY PARTITION 语句用外部文件填充它。
PARTITION sales_2015 VALUES LESS THAN (TO_DATE('2016-01-01','yyyy-mm-dd')) EXTERNAL,
2.4 查看是否为混合分区表
查看是否为混合分区表:
SQL> select table_name,partitioned, hybrid from dba_tables where owner='SYS' and table_name='HYBRID_PARTITION_TABLE';
TABLE_NAME PAR HYB
------------------------------ --- ---
HYBRID_PARTITION_TABLE YES YES
2.5 混合分区表的DML 操作
SQL> select * from HYBRID_PARTITION_TABLE partition (sales_2019);
no rows selected
SQL> select * from HYBRID_PARTITION_TABLE partition (sales_2016);
REGION TIME_ID AMOUNT
------ --------- ----------
EAST 01-JAN-16 6000
SOUTH 01-JAN-16 4000
WEST 01-JAN-16 2467
NORTH 01-JAN-16 2600
SQL> select * from HYBRID_PARTITION_TABLE partition (sales_2017);
REGION TIME_ID AMOUNT
------ --------- ----------
EAST 01-JAN-17 8000
SOUTH 01-JAN-17 2000
WEST 01-JAN-17 3400
NORTH 01-JAN-17 2000
SQL> select * from HYBRID_PARTITION_TABLE partition (sales_2018);
REGION TIME_ID AMOUNT
------ --------- ----------
EAST 01-JAN-18 2100
SOUTH 01-JAN-18 1300
WEST 01-JAN-18 3800
NORTH 01-JAN-18 2120
内部分区支持 DML 操作,外部分区表不支持 DML 操作
内部分区表:
insert into hybrid_partition_table values('EAST', to_date('20190101','yyyy-mm-dd'),1032);
insert into hybrid_partition_table values('EAST', to_date('20190102','yyyy-mm-dd'),2371);
commit;
SQL> select * from HYBRID_PARTITION_TABLE partition (sales_2019);
REGION TIME_ID AMOUNT
------ --------- ----------
EAST 01-JAN-19 1032
EAST 02-JAN-19 2371
SQL> delete from HYBRID_PARTITION_TABLE partition (sales_2019);
2 rows deleted.
外部分区表:
insert into hybrid_partition_table values('EAST', to_date('20160102','yyyy-mm-dd'),2371);
ERROR at line 1:
ORA-14466: Data in a read-only partition or subpartition cannot be modified.
SQL> delete from HYBRID_PARTITION_TABLE partition (sales_2016);
ERROR at line 1:
ORA-14354: operation not supported for a hybrid-partitioned table
