簡(jiǎn)述
適合閱讀對(duì)象:移動(dòng)開發(fā)
sqlite3數(shù)據(jù)遷移到mysql會(huì)遇到許多語(yǔ)法問(wèn)題,想要一下列出所有問(wèn)題會(huì)力所不及,本文會(huì)盡量多的列出可能會(huì)遇到的問(wèn)題,因?yàn)槊總€(gè)人遇到的問(wèn)題都不一樣。讀者根據(jù)此文可以提前預(yù)知是否有自己會(huì)面臨到的問(wèn)題,做到心中有數(shù)才能避免或減少遷移數(shù)據(jù)后會(huì)發(fā)生意料之外的問(wèn)題。根據(jù)問(wèn)題列表可以了解自己需要解決哪些問(wèn)題,我這里同時(shí)會(huì)給出一個(gè)解決方案供大家參考。遷移這個(gè)問(wèn)題不會(huì)有一個(gè)萬(wàn)能的方案的,因?yàn)槊總€(gè)人遇到的問(wèn)題不同,如果一些互相沖突的問(wèn)題同時(shí)存在解決方案中反而就變成了一個(gè)問(wèn)題。
好了,開門見山!
問(wèn)題列表
1、sqlite3 dump出的各種變量在mysql不識(shí)別,如(BEGIN TRANSACTION、COMMIT等等)
2、sqlite數(shù)據(jù)庫(kù)數(shù)據(jù)無(wú)法導(dǎo)出隱藏字段rowid
3、sqlite數(shù)據(jù)庫(kù)數(shù)據(jù)導(dǎo)出格式與其他數(shù)據(jù)庫(kù)不兼容,如單引號(hào)、雙引號(hào)問(wèn)題
4、導(dǎo)出的sqlite數(shù)據(jù)不帶列名,如下 INSERT INTO protocol VALUES('大類頁(yè)(新)', ' ')
。我們可能需要的是 INSERT INTO protocol('text1','text2') VALUES('大類頁(yè)(新)', '刷新頁(yè)')
5、特殊符號(hào)處理,如轉(zhuǎn)義符 "\"
6、表字段長(zhǎng)度限制不一樣
7、數(shù)據(jù)量寫入效率問(wèn)題
問(wèn)題解決
首先不能使用sqliteStudio、Navicat等工具,這里采用shell命令的方式,直接避免一下內(nèi)容生成,
BEGIN TRANSACTION
COMMIT
CREATE UNIQUE INDEX
PRAGMA foreign_keys=OFF
同時(shí)使用shell方式可以用很少的代碼量實(shí)現(xiàn)。
1、解決字段列名沒有輸出問(wèn)題
運(yùn)行sqlite3命令“ pragma table_info(表名);
“得到以下輸出內(nèi)容
0|name|TEXT|0||0
1|description|TEXT|0||0
再通過(guò)字符串替換得到列名,如下:
假設(shè)變量為 COLS = name,description
2、解決單引號(hào)、雙引號(hào)問(wèn)題
運(yùn)行sqlite3命令“ .mode insert .dump 表名
“得到如下輸出內(nèi)容
INSERT INTO表名VALUES('test',' test');
INSERT INTO表名VALUES('test','test');
INSERT INTO表名VALUES('test','test');
以這種方式可以解決單引號(hào)雙引號(hào)問(wèn)題,這里直接統(tǒng)一輸出單引號(hào)
3、解決sqlite3默認(rèn)字段rowid無(wú)法顯示問(wèn)題,這里直接將rowid改為id
將當(dāng)前模式設(shè)置為.dump insert 模式
運(yùn)行sqlite3命令“ select rowid as id,$COLS from 表名
“得到如下輸出
INSERT INTO表名VALUES(1,'test',' test');
INSERT INTO表名VALUES(2,'test','test');
INSERT INTO表名VALUES(3,'test','test');
4、通過(guò)shell字符串命令,將之前得到的列名添加到以下sql語(yǔ)句
修改后如下:
INSERT INTO表名('name',' description')VALUES(1,'test',' test');
INSERT INTO表名('name',' description')VALUES(2,'test','test');
INSERT INTO表名('name',' description')VALUES(3,'test','test');
5、轉(zhuǎn)義符處理
如果數(shù)據(jù)庫(kù)里的數(shù)據(jù)存在轉(zhuǎn)義符,如: {\"lastname\":\\"天津\\"}
。這種數(shù)據(jù)如果不處理,那么將數(shù)據(jù)insert到數(shù)據(jù)庫(kù)時(shí)會(huì)變成{"lastname":\"天津\"}
。所以需要對(duì)轉(zhuǎn)義符做下處理,用shell命令處理很簡(jiǎn)單,如命令:sed 's#\\#\\\\#g'
方案實(shí)現(xiàn)
此腳本主要解決了以上1~5問(wèn)題,根據(jù)需要可以對(duì)腳本進(jìn)行修改
#!/bin/sh
SQLITE=sqlite3
if [ -z "$1" ] ; then
echo usage: $0 sqlite3.db
exit
fi
DB="$1"
TABLES=`"$SQLITE" "$DB" .tables`
for TABLE in $TABLES ; do
CREATE=`"$SQLITE" "$DB" "SELECT sql FROM sqlite_master WHERE type=\"table\" AND name = \"$TABLE\";"`
echo $CREATE";" |
cut -d'=' -f2 |
sed "s/^CREATE TABLE $TABLE (/CREATE TABLE $TABLE (id int auto_increment primary key ,/g"
COLS=`"$SQLITE" "$DB" "pragma table_info($TABLE)" | cut -d'|' -f2 `
COLS_CS=`echo $COLS | sed 's/ /,/g'`
echo ".mode insert \n.header on \n select rowid as id,$COLS_CS from $TABLE;\n" |
"$SQLITE" "$DB" |
sed "s/^INSERT INTO \"table\"/INSERT INTO $TABLE /g" |
sed 's#\\#\\\\#g'
done
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,謝謝大家對(duì)腳本之家的支持。
您可能感興趣的文章:- 將 Ghost 從 SQLite3 數(shù)據(jù)庫(kù)遷移到 MySQL 數(shù)據(jù)庫(kù)