批次轉換分割槽表為普通表
今天資料遷移的小組找到我,希望我能夠重新構建一些測試環境,其中測試環境中的一些分割槽表都需要去掉分割槽,轉換成普通表的形式,因為他們在做一些工作的時候碰到了問題,而且希望必要的約束等都保留,這個需求聽起來倒不復雜,很清晰,我看了下需要轉換的表,一看有將近100多個,而且重構好幾套環境,想想都頭疼。
這個需求是很特別,至少從資料庫層面是不支援的。
一種類似就是透過exp/imp 做資料結構的同步,生成對應的ddl語句,然後解析ddl語句,把分割槽的部分剔除。
因為exp生成的ddl語句含有很多的儲存細節,storage,segment_attributes等,解析的過程也更為複雜,不好控制。
還有一種思路就是透過dbms_metadata來生成ddl語句,先過濾一些不必要的ddl細節,然後在生成的ddl語句中剔除分割槽資訊。
這個部分相對來說要稍微容易一些。
可以透過如下的指令碼來生成不含有分割槽資訊的ddl語句。
大體思路就是先生成ddl語句,然後在關鍵字中擷取"PARTITION BY"之上的部分。
#chg_partition.sh
sqlplus -s n1/n1@testdb <
select *from dual;
set linesize 300
set pages 0
col sql_text format a300
set feedback off
set long 99999
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'STORAGE',false);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'PRETTY',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'SQLTERMINATOR',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'TABLESPACE',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'SEGMENT_ATTRIBUTES',false);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'REF_CONSTRAINTS',false);
spool tmp_$1.sql
select 'select DBMS_METADATA.GET_DDL('||chr(39)||'TABLE'||chr(39)||','||chr(39)||table_name||chr(39)||','||chr(39)||owner||chr(39)||') sql_text from dual; 'FROM all_tables where owner='N1' and table_name in
(
upper('$1')
);
spool off;
spool $1_ddl.tmp
@tmp_$1.sql
spool off
EOF
last_line=`grep -n "PARTITION BY" $1_ddl.tmp|awk -F: '{print $1}'`
last_line=`expr $last_line - 1`
sed -n '1,'$last_line'p' $1_ddl.tmp > tmp_$1_ddl.sql1
sed 's/PRDAPPO/'$2'/' tmp_$1_ddl.sql1 > tmp_$1_ddl.sql
echo ";" >> tmp_$1_ddl.sql
rm $1_ddl.tmp
rm tmp_$1_ddl.sql1
如果我們指定需要處理的表為 CUSTOMER_INFO,處理之後生成的檔案就會使如下的樣子。
-rw-r--r-- 1 xxxxx dba 5723 Sep 11 14:32 tmp_CUSTOMER_INFO_ddl.sql
如果目前有100多個表。
可以寫一個簡單的入口檔案來呼叫chg_partition.sh 即可,這樣不管有多少表需要轉換都可以一次搞定,最後生成一個run.sql的檔案,直接執行run.sql就可以建立所有的表了。
ksh chg_partition.sh MENT_RESOURCE CONV_TEST
ksh chg_partition.sh ES_HISTORY CONV_TEST
ksh chg_partition.sh GED_TRIAL_BALANCE CONV_TEST
ksh chg_partition.sh HARGES CONV_TEST
ksh chg_partition.sh HARGE_GROUP CONV_TEST
ksh chg_partition.sh REDIT_DEBIT_LINK CONV_TEST
ksh chg_partition.sh USTOMER_CREDIT CONV_TEST
ksh chg_partition.sh NVOICE CONV_TEST
ksh chg_partition.sh AYMENT CONV_TEST
ksh chg_partition.sh AYMENT_ACTIVITY CONV_TEST
ksh chg_partition.sh AYMENT_DETAILS CONV_TEST
ksh chg_partition.sh AX_ITEM CONV_TEST
ksh chg_partition.sh RANSACTION_LOG CONV_TEST
ksh chg_partition.sh NAPPLIED_CREDIT CONV_TEST
ksh chg_partition.sh ILL_STATEMENT CONV_TEST
ksh chg_partition.sh HARGE CONV_TEST
ksh chg_partition.sh USTOMER_INFO CONV_TEST
ksh chg_partition.sh YCLE_CUSTOMERS CONV_TEST
ksh chg_partition.sh YC_PAYER_POP CONV_TEST
ksh chg_partition.sh OCUMENT CONV_TEST
ksh chg_partition.sh NVOICE CONV_TEST
ksh chg_partition.sh NV_CHARGE_REL CONV_TEST
ksh chg_partition.sh C_RATES CONV_TEST
ksh chg_partition.sh AX CONV_TEST
ksh chg_partition.sh AX_ITEM CONV_TEST
ksh chg_partition.sh REATMENT_ACTIVITY CONV_TEST
ksh chg_partition.sh GREEMENT_PARAM CONV_TEST
ksh chg_partition.sh GR_PRM_HISTORY CONV_TEST
ksh chg_partition.sh R_GRP_MEMBERS CONV_TEST
ksh chg_partition.sh EMO CONV_TEST
ls -lrt *.sql |awk '{print "@"$9}' > run.sql
這個需求是很特別,至少從資料庫層面是不支援的。
一種類似就是透過exp/imp 做資料結構的同步,生成對應的ddl語句,然後解析ddl語句,把分割槽的部分剔除。
因為exp生成的ddl語句含有很多的儲存細節,storage,segment_attributes等,解析的過程也更為複雜,不好控制。
還有一種思路就是透過dbms_metadata來生成ddl語句,先過濾一些不必要的ddl細節,然後在生成的ddl語句中剔除分割槽資訊。
這個部分相對來說要稍微容易一些。
可以透過如下的指令碼來生成不含有分割槽資訊的ddl語句。
大體思路就是先生成ddl語句,然後在關鍵字中擷取"PARTITION BY"之上的部分。
#chg_partition.sh
sqlplus -s n1/n1@testdb <
set linesize 300
set pages 0
col sql_text format a300
set feedback off
set long 99999
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'STORAGE',false);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'PRETTY',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'SQLTERMINATOR',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'TABLESPACE',true);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'SEGMENT_ATTRIBUTES',false);
EXEC DBMS_METADATA.SET_TRANSFORM_PARAM(DBMS_METADATA.SESSION_TRANSFORM,'REF_CONSTRAINTS',false);
spool tmp_$1.sql
select 'select DBMS_METADATA.GET_DDL('||chr(39)||'TABLE'||chr(39)||','||chr(39)||table_name||chr(39)||','||chr(39)||owner||chr(39)||') sql_text from dual; 'FROM all_tables where owner='N1' and table_name in
(
upper('$1')
);
spool off;
spool $1_ddl.tmp
@tmp_$1.sql
spool off
EOF
last_line=`grep -n "PARTITION BY" $1_ddl.tmp|awk -F: '{print $1}'`
last_line=`expr $last_line - 1`
sed -n '1,'$last_line'p' $1_ddl.tmp > tmp_$1_ddl.sql1
sed 's/PRDAPPO/'$2'/' tmp_$1_ddl.sql1 > tmp_$1_ddl.sql
echo ";" >> tmp_$1_ddl.sql
rm $1_ddl.tmp
rm tmp_$1_ddl.sql1
如果我們指定需要處理的表為 CUSTOMER_INFO,處理之後生成的檔案就會使如下的樣子。
-rw-r--r-- 1 xxxxx dba 5723 Sep 11 14:32 tmp_CUSTOMER_INFO_ddl.sql
如果目前有100多個表。
可以寫一個簡單的入口檔案來呼叫chg_partition.sh 即可,這樣不管有多少表需要轉換都可以一次搞定,最後生成一個run.sql的檔案,直接執行run.sql就可以建立所有的表了。
ksh chg_partition.sh MENT_RESOURCE CONV_TEST
ksh chg_partition.sh ES_HISTORY CONV_TEST
ksh chg_partition.sh GED_TRIAL_BALANCE CONV_TEST
ksh chg_partition.sh HARGES CONV_TEST
ksh chg_partition.sh HARGE_GROUP CONV_TEST
ksh chg_partition.sh REDIT_DEBIT_LINK CONV_TEST
ksh chg_partition.sh USTOMER_CREDIT CONV_TEST
ksh chg_partition.sh NVOICE CONV_TEST
ksh chg_partition.sh AYMENT CONV_TEST
ksh chg_partition.sh AYMENT_ACTIVITY CONV_TEST
ksh chg_partition.sh AYMENT_DETAILS CONV_TEST
ksh chg_partition.sh AX_ITEM CONV_TEST
ksh chg_partition.sh RANSACTION_LOG CONV_TEST
ksh chg_partition.sh NAPPLIED_CREDIT CONV_TEST
ksh chg_partition.sh ILL_STATEMENT CONV_TEST
ksh chg_partition.sh HARGE CONV_TEST
ksh chg_partition.sh USTOMER_INFO CONV_TEST
ksh chg_partition.sh YCLE_CUSTOMERS CONV_TEST
ksh chg_partition.sh YC_PAYER_POP CONV_TEST
ksh chg_partition.sh OCUMENT CONV_TEST
ksh chg_partition.sh NVOICE CONV_TEST
ksh chg_partition.sh NV_CHARGE_REL CONV_TEST
ksh chg_partition.sh C_RATES CONV_TEST
ksh chg_partition.sh AX CONV_TEST
ksh chg_partition.sh AX_ITEM CONV_TEST
ksh chg_partition.sh REATMENT_ACTIVITY CONV_TEST
ksh chg_partition.sh GREEMENT_PARAM CONV_TEST
ksh chg_partition.sh GR_PRM_HISTORY CONV_TEST
ksh chg_partition.sh R_GRP_MEMBERS CONV_TEST
ksh chg_partition.sh EMO CONV_TEST
ls -lrt *.sql |awk '{print "@"$9}' > run.sql
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/8494287/viewspace-1347029/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- LightDB 22.4 新特性之相容Oracle線上轉換普通表為分割槽表Oracle
- 非分割槽錶轉換成分割槽表
- Oracle 12.2之後ALTER TABLE .. MODIFY轉換非分割槽表為分割槽表Oracle
- oracle 普通表-分割槽表改造流程Oracle
- 線上重定義與普通表改為分割槽表
- 【ASK_ORACLE】使用insert語句將普通錶轉換成分割槽表Oracle
- 線上重定義方式將普通表修改為分割槽表
- 非分割槽錶轉換成分割槽表以及注意事項
- PG的非分割槽表線上轉分割槽表
- oracle 線上重新定義,普通表改變分割槽表,分割槽表可以更改型別、分割槽欄位等Oracle型別
- 線上重定義的操作步驟__普通錶轉換為分割槽表的實驗案例
- oracle將表配置為分割槽表Oracle
- oracle分割槽表和分割槽表exchangeOracle
- oracle分割槽表和非分割槽表exchangeOracle
- 增加表分割槽時,為local分割槽索引指定不同表空間的方法索引
- Oracle 12C新特性-線上把非分割槽錶轉為分割槽表Oracle
- 【MYSQL】 分割槽表MySql
- oracle 分割槽表move和包含分割槽表的lob moveOracle
- 移動分割槽表和分割槽索引的表空間索引
- MySQL線上轉分割槽表(以及TiDB)MySqlTiDB
- PostgreSQL/LightDB 分割槽表之分割槽裁剪SQL
- Oracle分割槽表基礎運維-07增加分割槽(3列表分割槽)Oracle運維
- Oracle分割槽表基礎運維-04列表分割槽Oracle運維
- 分割槽表-實戰
- MySQL 分割槽表探索MySql
- [oracle] expdp 匯出分割槽表的分割槽Oracle
- Oracle分割槽表基礎運維-06分割槽表索引Oracle運維索引
- 指令碼:線上重定義,從普通表到分割槽表,redefinition_table.sh指令碼
- Oracle分割槽表基礎運維-01分割槽表分類Oracle運維
- Mysql表分割槽實操MySql
- OceaBase 分割槽表建立技巧
- Mysql表分割槽實現MySql
- PostgreSQL:傳統分割槽表SQL
- PostgreSQL:內建分割槽表SQL
- SQL SERVER之分割槽表SQLServer
- ORACLE分割槽表梳理系列Oracle
- Spark操作Hive分割槽表SparkHive
- mysql 進行表分割槽MySql
- 【Linux】MBR磁碟分割槽表只能有四個分割槽?Linux