PHP將數(shù)據(jù)從Oracle向Mysql數(shù)據(jù)遷移實例
為什么要遷移?
首先從運營成本考慮,用Mysql可以節(jié)約不少的費用。另一方面,Mysql的穩(wěn)定性及功能不斷地提高與增強,基本上可以滿足客戶的需求,如支持多 節(jié)點部署,數(shù)據(jù)分區(qū)等。還有就是Mysql使用方便,比Oracle簡單易用。故客戶就要求將已有的Oracle數(shù)據(jù)表與內(nèi)容遷移到Mysql來。
為什么要自己寫腳本?
遷移的表與數(shù)據(jù)都蠻多的,有幾百張表。因此手工完成不太方便。也嘗試了一些免費的遷移工具,如:MySQLMigrationTool等,發(fā)現(xiàn)轉(zhuǎn)移 的字段類型不太符合要求(可能是原來的Oracle表設(shè)計得不太好),會導(dǎo)致數(shù)據(jù)不太完整,覺得不是太可靠,所以決定自己寫遷移腳本放心一些,有不符合要求的也可立即調(diào)整,所以就開始吧。
所用到的技術(shù)支持
1.php5
2.php oci8
3.mysql 5.1
遷移表結(jié)構(gòu)
獲取schema所有表
用以下語句可以從Oracle中獲得schema中所有的表名
SELECT table_name FROM user_tables |
然后可以遍歷所有表向mysql進行表結(jié)構(gòu)的創(chuàng)建與數(shù)據(jù)的遷移工作。
獲取單個表的所有字段與類型
用以下語句可以從oracle中獲得單個表的所有字段與類型
SELECT COLUMN_NAME, DATA_TYPE, DATA_LENGTH, NULLABLE, DATA_DEFAULT FROM USER_TAB_COLUMNS WHERE TABLE_NAME = UPPER('{$table_name}') ORDER BY column_id ASC |
這樣可以得知表字段的名稱,類型,長度,是否允許為空,默認值。因為oracle與mysql的字段類型并不完全兼容,故需要建立字段類型的對應(yīng)關(guān)系表。
| Oracle | Mysql |
|---|---|
| number(<11)> | int |
| number(>11) | bigint |
| varchar | varchar |
| varchar2(<255)> | varchar |
| varchar2(>255) | text |
| clob | text |
| date | date |
獲取單個表的Primary Foreign Unique Key用以下語句可以從oracle中獲得單個表的Primary Foreign Unique Key
SELECT C.CONSTRAINT_NAME, C.CONSTRAINT_TYPE, C.R_CONSTRAINT_NAME, C.DELETE_RULE, CC.COLUMN_NAME FROM USER_CONSTRAINTS C, USER_CONS_COLUMNS CC WHERE C.TABLE_NAME=upper('{$table_name}') AND C.CONSTRAINT_TYPE!='C' AND C.CONSTRAINT_NAME=CC.CONSTRAINT_NAME AND C.OWNER=CC.OWNER AND C.TABLE_NAME=CC.TABLE_NAME ORDER BY C.CONSTRAINT_TYPE, C.CONSTRAINT_NAME, CC.POSITION |
獲取單個表的索引
用以下語句可以從oracle中獲得單個表的索引
SELECT T.INDEX_NAME,T.COLUMN_NAME,I.INDEX_TYPE FROM USER_IND_COLUMNS T,USER_INDEXES I WHERE T.INDEX_NAME = I.INDEX_NAME AND T.TABLE_NAME = I.TABLE_NAME AND T.TABLE_NAME = UPPER('{$table_name}') |
這樣可以獲知表的索引名稱,被索引的字段。
將所有的表信息組裝成mysql的表結(jié)構(gòu) 有了表名,字段信息,主鍵,F(xiàn)oreign, Unique.索引等信息,就可以將表結(jié)構(gòu)建立起來。由于oracle沒有自增字段,一個變通的方法是用primary key做為mysql中的自增字段,因為在oracle中沒辦法準確地知道哪個字段用到了seq來做自增,用這種方法也不是很準確。
遷移視圖
獲取schema所有views。用以下語句可以從oracle中獲取schema所有views
SELECT VIEW_NAME,TEXT FROM USER_VIEWS |
這樣可以獲得view的名稱及建立view的構(gòu)成語句。
Oracle與Mysql不兼容的view處理
Oracle的對view的構(gòu)建語句比較寬松一些,mysql中對view的構(gòu)建語句要嚴格些,from不能從子查詢中構(gòu)建,也就是人樣的讓語句是不被允許的。
CREATE VIEW `view_name` AS SELECT * FROM (SELECT * FROM table_name) ... |
那么處理這樣的view,有一個辦法是將子查詢再建立成一個view,將子查詢替換成新建立的view名即可。
遷移數(shù)據(jù)
數(shù)據(jù)的遷移,從Oracle數(shù)據(jù)庫中select出數(shù)據(jù),拼裝成Mysql的insert語句就可以了。需要注意的兩點:一是oracle的日期類 型的數(shù)據(jù)格式與mysql的日期類型格式不太一致,所以要用TO_CHAR(field_name, 'YYYY-MM-DD')將其轉(zhuǎn)換成mysql的相應(yīng)的數(shù)據(jù)格式;二是oracle中的clob字段的內(nèi)容要用 oci_fetch_array($stid, OCI_ASSOC|OCI_RETURN_NULLS|OCI_RETURN_LOBS)將其取出,插入到mysql的text字段。 在mysql插入大量數(shù)據(jù)時,還要注意,在window的my.ini或my.cnf默認max_allowed_packet是1M要將其改為
[mysqld]...max_allowed_packet = 16M... |
要不會出現(xiàn)mysql goes away的錯誤,linux版本沒有這個問題,因為其默認值就是16M。
不能遷移的內(nèi)容
Oracle中的觸發(fā)器、存儲過程與Mysql中是不一樣的,所以不能通過腳本程序自動遷移過去。要手工進行重寫。
總結(jié)
從Oracle向Mysql數(shù)據(jù)遷移,table結(jié)構(gòu)與數(shù)據(jù)是基本上可以平移過去的,view有些還不是完全兼容oracle的語句,所以要對其作 出一些中間表。觸發(fā)器與存儲過程是不能平移的,這兩部份需要重寫。表結(jié)構(gòu)平移過去后,看是否都比較合適,如果覺得不太好還可以通過alter等語句對其進 行相應(yīng)的調(diào)整。在導(dǎo)入大量數(shù)據(jù)時還要注意一下mysql的配置文件(my.ini或my.cnf)里的max_allowed_packet值,這應(yīng)設(shè)置 得太小,以免導(dǎo)入數(shù)據(jù)時出錯或?qū)Р贿M去或亂碼等不穩(wěn)定因素。
【編輯推薦】






















