前期誤操作,導(dǎo)致數(shù)據(jù)庫(kù)表刪除,雖然數(shù)據(jù)量不多,但是通過(guò)binlog恢復(fù)比較麻煩,通過(guò)備份文件來(lái)恢復(fù),備份文件達(dá)36個(gè)G打開(kāi)都是問(wèn)題;
大文件編輯器,glogg-latest-x86_64-setup通過(guò)該文件打開(kāi)備份文件,雖然過(guò)程稍慢,但是能夠打開(kāi),且正常讀取編輯信息,要恢復(fù)的數(shù)據(jù)量不大時(shí)采取是沒(méi)問(wèn)題的,但是如果表幾十萬(wàn)行,操作起來(lái)就比較麻煩了;
采用Golang讀取,借助編程語(yǔ)言的優(yōu)勢(shì)來(lái)讀取備份,經(jīng)過(guò)測(cè)試讀取指定備份文件(約36GB)表,大約需要12min,其實(shí)主要就是讀取遍歷備份文件的過(guò)程;
**
* @Author: ws
* @File: main
* @Date: 2019/11/16 0016 14:35
* @Remark:
*/
var(
_INSERT_INTO="INSERTINTO${table}VALUES"
_Dir="temp"
)
var TABLE_CAR="T_SCM_CAR"
func ReadSqlFile(){
t1 := time.Now() // get current time
f, err := os.Open("E:\\update\\crm_20191112_210001.sql\\crm_20191112_210001.sql")
defer f.Close()
if err != nil {
}
buf := bufio.NewReader(f)
nfs:=getTxtFile(TABLE_CAR)
for {
s, err := buf.ReadString('\n')
if(err!=nil){
logger.ERROR(err.Error())
break
}
if err == nil {
if s==""{
continue
}
sqlstr:=getSqlStr(s,TABLE_CAR)
if(sqlstr!=""){
nfs.Write([]byte(sqlstr))
}
}
}
elapsed := time.Since(t1)
fmt.Println("App elapsed: ", elapsed)
}
/**
調(diào)整驗(yàn)證每一行數(shù)據(jù)的格式化,并與預(yù)設(shè)是否一致,如果一致則讀取加載到
*/
func getSqlStr(sqlstr,tableName string)string{
var realTableName=strings.Replace(_INSERT_INTO,"${table}",tableName,-1)
replaceEmptyStr:=strings.Replace(sqlstr," ","",-1)
tempS:=strings.ToUpper(strings.Replace(replaceEmptyStr,"`","",-1))
if(len(tempS)>=len(realTableName)) {
tabName := tempS[0:len(realTableName)]
if (tabName ==realTableName) {
return sqlstr
}
}
return ""
}
/**
打開(kāi)txt文件
*/
func getTxtFile(fileName string)os.File{
txtFile:=createToFile(fmt.Sprintf("%v/%v.txt",_Dir,fileName))
nfs, err := os.OpenFile(txtFile.Name(), os.O_APPEND |os.O_RDWR|os.O_CREATE, 0644)
if err != nil {
logger.ERROR(fmt.Sprintf("打開(kāi)文件失敗:%v",err.Error()))
}
defer nfs.Close()
nfs.Seek(0, io.SeekEnd)
return *nfs
}
func readLine(r *bufio.Reader) (string, error) {
line, isprefix, err := r.ReadLine()
for isprefix err == nil {
var bs []byte
bs, isprefix, err = r.ReadLine()
line = append(line, bs...)
}
return string(line), err
}
func createToFile(fileName string)os.File{
_, err := os.Stat(_Dir)
if err == nil {
}
if os.IsNotExist(err) {
os.MkdirAll(_Dir, os.ModePerm)
}
newFile, err := os.Create(fileName)
if err != nil {
logger.ERROR(fmt.Sprintf("文件創(chuàng)建失敗:%v",err.Error()))
}
defer func() {
newFile.Close()
}()
newFile.WriteString("\xEF\xBB\xBF") // 寫入U(xiǎn)TF-8 BOM,防止中文亂碼
return *newFile
}
func main() {
ReadSqlFile()
}
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,謝謝大家對(duì)腳本之家的支持。