這兩個星期里一直都在忙于一件事兒,就是數(shù)據(jù)庫的遷移問題。沒有做的時候感覺這是一件十分輕松的事兒,可是等到實實在在去做去實現(xiàn)的時候,自己傻眼了。這種糾結啊,
在這里先說下遇到的問題:
1。數(shù)據(jù)庫的表結構問題:數(shù)據(jù)類型不同需要解決varchar2------varchar、number-----int、date----datetime,建表的sql語句字段默認值、注釋怎么解決。
2. oracle中沒有所謂的敏感字段,可是mysql表中的敏感字段有好多。當時出錯的時候很奇怪不知道是哪里錯了。原來有個describe的字段是mysql的敏感字段。
這里我也是在網(wǎng)上找了一個現(xiàn)成的工具:oracletomysql,它是只能為我們遷移表結構。
具體地址:http://www.5stardatabasesoftware.com/cn/
3. oracle的備份sql沒法正常的mysql中跑,一些to_date()函數(shù),to_char()讓人很是痛苦不知道怎么去代替,原因很簡單在oracle的備份文件中有一堆的解釋文字:
復制代碼 代碼如下:
prompt PL/SQL Developer import file
prompt Created on 2012-05-30 by chenbh
set feedback off
set define off
prompt Disabling triggers for T_B_AUDITOR...
alter table T_B_AUDITOR disable all triggers;
prompt Loading T_B_AUDITOR...
insert into T_B_AUDITOR (AUDITORID, NAME, ORGID, SEX, IDCARDNO, TITLE, PHONE, MOBILE, DESCRIBE, AUDITORRIGHT, AUDITORSTATUS, RECORDSTATUS, FIELD1, FIELD2)
這些東西該怎么除去,大家的想法可能是我直接刪除后直接在mysql中跑,可是您想一下如果要是您的備份文件很大很大呢,根本打不開就是。我遇到的sql備份有1G的,電腦不行實在是打不開沒有辦法只好,從新想其他的辦法了。
在這里感謝下:ITPUB論壇的philip_zhong朋友,這里他給提供了一個程序,來處理大數(shù)據(jù)量的遷移工作。在這里說下我的使用感言啊,他提供了多種方式,shell腳本、windows下的bat啟動、還有源程序。我都試過了,前兩者沒有調(diào)通,只好硬著頭皮把他的源程序給跑一下,各種debug修改后終于調(diào)通了。很高興……
這里需要提醒的是:
復制代碼 代碼如下:
static dataSyncDataSourceParameter dataSourceParameters;
static dataSyncSessionParameter sessionParameter;
//static final String configFileName = "config.properties";//這里是源程序中的參數(shù),按照自己的需要進行配置
static final String configFileName = "config_oracle2mysql.properties";//這里是我的配置文件
/**
* @param args
*/
public static void main(String[] args) {
// initialize the parameters
//String progPath = args[0];
//String progPath = "D://work//MyEclipse 8.5//Workspaces//dataSync";E://workspace//oracletomysql//package
String progPath = "E://workspace//oracletomysql//package";//這里大家注意下,是你的package的位置所在。
String confFilePath = progPath + "http://conf";
if (setparameters(confFilePath)) {
// start to call thread to sync the data
syncData();
}
}
config_oracle2mysql.properties配置文件:這里需要注意的是:ora_hash是個10g中才有的函數(shù)這里我們從新改變下:DBMS_UTILITY.GET_HASH_VALUE這個hash函數(shù)是在網(wǎng)上找了好長時間才有人提到的類似與ora_hash的函數(shù)。反正這里我的理解就是為了多線程進行大數(shù)據(jù)量的搬運節(jié)約時間,作者才通過hash的方法進行控制。其他注意的地方我已經(jīng)在程序里寫出來一來提醒我注意二來給大家提個醒別犯我的錯而浪費大家的時間。
復制代碼 代碼如下:
#for source database parameters
source.dataSource.initialSize=10
source.dataSource.maxIdle=20
source.dataSource.minIdle=5
source.dataSource.maxActive=100
source.dataSource.maxWait=120000
source.jdbc.driverClassName=oracle.jdbc.driver.OracleDriver
source.jdbc.url=jdbc:oracle:thin:@10.17.199.8:1521:lab1107
source.jdbc.username=lab1107
source.jdbc.password=lab1107
#Target sync data threadNum=source.database.threadNum
source.database.threadNum=10
#這里的auditorid必須是主鍵,ora_hash是在10g中使用的,我們的9i沒辦法用啊。
source.database.selectSql=select * from t_b_role where DBMS_UTILITY.GET_HASH_VALUE(roleid,1,#threadNum#)=?
#you can input many commands and split by ";"
source.database.sessionCommand=ALTER SESSION SET DB_FILE_MULTIBLOCK_READ_COUNT=128;
#for target jdbc parameters
target.dataSource.initialSize=10
target.dataSource.maxIdle=20
target.dataSource.minIdle=5
target.dataSource.maxActive=100
target.dataSource.maxWait=120000
target.jdbc.driverClassName=com.mysql.jdbc.Driver
target.jdbc.url=jdbc:mysql://10.5.110.239:3306/test?autoReconnect=truecharacterEncoding=UTF-8
target.jdbc.username=root
target.jdbc.password=chen
#target.database.insertSql=insert into test2(PATHALIASID,PATH,CREATETIME,LASTMODIFIEDTIME,OBJECTPREFIX,PATHMD5ID,COLLIDESWITH) values(?,?,?,?,?,?,?)
target.database.insertSql=insert into T_B_ROLE(ROLEID,ROLENAME,ROLEDESC,ROLESTATUS,RECORDSTATUS,FIELD1,FIELD2,SORTNUM) values(?,?,?,?,?,?,?,?)這里必須是目標數(shù)據(jù)庫中的現(xiàn)成的一張表。
target.database.commitNum=1000
具體的問題大家要是遇到了,可以一起交流下。
您可能感興趣的文章:- oracle數(shù)據(jù)遷移到db2數(shù)據(jù)庫的實現(xiàn)方法(分享)
- oracle數(shù)據(jù)庫遷移到MySQL的方法總結
- mysql數(shù)據(jù)遷移到Oracle的正確方法
- 直接拷貝數(shù)據(jù)文件實現(xiàn)Oracle數(shù)據(jù)遷移
- Oracle數(shù)據(jù)庫遷移方案
- Oracle數(shù)據(jù)庫升級或數(shù)據(jù)遷移方法研究
- oracle 數(shù)據(jù)庫數(shù)據(jù)遷移解決方案
- Oracle 10g DG 數(shù)據(jù)文件遷移的實現(xiàn)