有一個分區表,按list分區,只有一個本地唯一索引,沒有外鍵和觸發器
當單個分區數量在2000萬以內時,insert效率還可以,每秒2.3-2.5萬條
但數據量越大,速度越慢,
目前單個分區數量達到3億,占用磁盤空間28G,索引占用13G,insert每秒才2000條
做過的嘗試:
1、已經將表和索引設置成nologging
2、試過append,沒有明顯改善
分析應該是維護索引導致的性能問題,有什么方法可以改善?
建議如下:
1.采取批量提交比如2000-5000 行提交一次
2.如果數據都是插入到單個分區的話,可以把該分區上的索引先disable 然后再插入 完成后rebuild 該分區上的索引
alter index ind_t100 unusable;
alter index IND_T100 rebuild;
3.如果日志文件切換很平凡的話,建議增大日志文件大小
很明顯是維護索引消耗
alter index xxx unusable;
最后再重建這個索引
有人反映,
唯一索引,UNUSABLE后不能insert
----------------------------------------------------------------61萬數據進行測試
失效索引后重建:
alter index? ACT_IDX_HI_PROCVAR_TASK_ID unusable;
alter index? ACT_HI_VARINSTWITHIDX_INDEX1 unusable;
alter index ACT_IDX_HI_PROCVAR_NAME_TYPE unusable;
alter index ACT_IDX_HI_PROCVAR_PROC_INST unusable;
?insert into act_hi_varinstspan select * from act_hi_varinst;
alter index? ACT_IDX_HI_PROCVAR_TASK_ID rebuild;
alter index? ACT_HI_VARINSTWITHIDX_INDEX1 rebuild;
alter index ACT_IDX_HI_PROCVAR_NAME_TYPE rebuild;
alter index ACT_IDX_HI_PROCVAR_PROC_INST rebuild;
插入612,627 行數據耗費30.7秒
重建耗費10秒
不分區:
無索引
612,627 行已插入。
16.518秒
帶索引
612,627 行已插入。
127.492秒
分區:
非索引
612,627 行已插入。
16.518秒
帶索引
612,627 行已插入。
108.081秒
---------------------------------------------------------------相關實驗及語句
---按日期進行分區
select table_name,partition_name from user_tab_partitions where table_name='ACT_HI_VARINSTSPAN';
create table ACT_HI_VARINSTSPAN (
? id_??????????????? NVARCHAR2(64) not null,
? proc_inst_id_????? NVARCHAR2(64),
? execution_id_????? NVARCHAR2(64),
? task_id_?????????? NVARCHAR2(64),
? name_????????????? NVARCHAR2(255) not null,
? var_type_????????? NVARCHAR2(100),
? rev_?????????????? INTEGER,
? bytearray_id_????? NVARCHAR2(64),
? double_??????????? NUMBER(*,10),
? long_????????????? NUMBER(19),
? text_????????????? NVARCHAR2(2000),
? text2_???????????? NVARCHAR2(2000),
? create_time_?????? TIMESTAMP(6),
? last_updated_time_ TIMESTAMP(6)
) partition by range(create_time_)
?interval (numtodsinterval(1,'day'))
?(
? partition create_time_ values less than (to_date('2016-01-01','yyyy-mm-dd'))
?);
-- 查看分區表
?SELECT * FROM USER_PART_TABLES;
-- 查看表分區
?select table_name,partition_name from user_tab_partitions where table_name='ACT_HI_VARINSTSPAN';
-- 為分區進行建立索引
CREATE INDEX ACT_HI_VARINSTSPAN_INDEXSPAN1 ON ACT_HI_VARINSTSPAN(ID_) LOCAL;
-- 查看分區進行建立索引
?select INDEX_NAME,PARTITION_NAME,HIGH_VALUE,STATUS from dba_ind_partitions where index_name='ACT_HI_VARINSTSPAN_INDEXSPAN1';
-- 查看分區進行建立索引
?SELECT * FROM USER_PART_INDEXES
--重建分區索引
? alter index ACT_HI_VARINSTSPAN_INDEXSPAN1 rebuild partition SYS_P718;
?