Mysql 日常備份和增量備份腳本(Linux)

           
          創(chuàng)造共用協(xié)議:署名,非商業(yè),保持一致   除經(jīng)特別注明外,本文章版權(quán)歸JScud Develop團隊或其作者所有.
          署名,非商業(yè)用途,保持一致.   scud(飛云小俠)   JScud Develop




                  你是否在尋找一個mysql備份腳本?

          適合對象

                  本文是在linux下,mysql 4.1.14版本下測試的,經(jīng)過適當修改可能適合mysql 4.0,5.0及其其他版本.
                 
                  本文適合于沒有啟動復制功能的mysql,如果啟動了復制,可能不需要采取這種備份策略或者需要修改相關(guān)參數(shù).
                 
                  每個人的備份策略都可能不同,所以請根據(jù)實際情況修改,做到舉一反三,不要照搬照抄,可能會造成不必要的損失.
                 
                  希望你明白這個腳本要干什么工作!
                 
                 
          腳本描述

                  每7天備份一次所有數(shù)據(jù),每天備份binlog,也就是增量備份.
                 
                  (如果數(shù)據(jù)少,每天備份一次完整數(shù)據(jù)即可,可能沒必要做增量備份)
                 
                  作者對shell腳本不太熟悉,所以很多地方寫的很笨 :)
                 

          開啟 bin log

                  在mysql 4.1版本中,默認只有錯誤日志,沒有其他日志.可以通過修改配置打開bin log.方法很多,其中一個是在/etc/my.cnf中的mysqld部分加入:
                 
                  [mysqld]
                  log-bin
                 
                  這個日志的主要作用是增量備份或者復制(可能還有其他用途).
                 
                  如果想增量備份,必須打開這個日志.
                 
                  對于數(shù)據(jù)庫操作頻繁的mysql,這個日志會變得很大,而且可能會有多個.
                 
                  在數(shù)據(jù)庫中flush-logs,或者使用mysqladmin,mysqldump調(diào)用flush-logs后并且使用參數(shù)delete-master-logs,這些日志文件會消失,并產(chǎn)生新的日志文件(開始是空的).
                 
                  所以如果從來不備份,開啟日志可能沒有必要.
                 
                  完整備份的同時可以調(diào)用flush-logs,增量備份之前flush-logs,以便備份最新的數(shù)據(jù).
                 
                 
          完整備份腳本
                 
                  如果數(shù)據(jù)庫數(shù)據(jù)比較多,我們一般是幾天或者一周備份一次數(shù)據(jù),以免影響應(yīng)用運行,如果數(shù)據(jù)量比較小,那么一天備份一次也無所謂了.
                 
                  下載假設(shè)我們的數(shù)據(jù)量比較大,備份腳本如下:(參考過網(wǎng)絡(luò)上一個mysql備份腳本,致謝 :))

           
                 
                  #!/bin/sh
                 
                  # mysql data backup script
                  # by scud http://www.jscud.com
                  # 2005-10-30
                  #       
                  # use mysqldump --help,get more detail.
                  #
                 
                  BakDir=/backup/mysql
                  LogFile=/backup/mysql/mysqlbak.log
                 
                  DATE=`date +%Y%m%d`
                 
                  echo " " >> $LogFile
                  echo " " >> $LogFile
                  echo "-------------------------------------------" >> $LogFile
                  echo $(date +"%y-%m-%d %H:%M:%S") >> $LogFile
                  echo "--------------------------" >> $LogFile
                 
                 
                  cd $BakDir
                 
                  DumpFile=$DATE.sql
                  GZDumpFile=$DATE.sql.tgz       
                 
                  mysqldump --quick --all-databases --flush-logs
                          --delete-master-logs --lock-all-tables
                           > $DumpFile                
                 
                  echo "Dump Done" >> $LogFile       
                 
                  tar czvf $GZDumpFile $DumpFile >> $LogFile 2>&1
                 
                  echo "[$GZDumpFile]Backup Success!" >> $LogFile
                 
                  rm -f $DumpFile
                 
                  #delete previous daily backup files:采用增量備份的文件,如果完整備份后,則刪除增量備份的文件.
                  cd $BakDir/daily
                 
                  rm -f *                
                 
                  cd $BakDir
                          
                  echo "Backup Done!"
                 
                  echo "please Check $BakDir Directory!"
                 
                  echo "copy it to your local disk or ftp to somewhere !!!"
                 
                  ls -al $BakDir
                 上面的腳本把mysql備份到本地的/backup/mysql目錄,增量備份的文件放在/backup/mysql/daily目錄下.
                 
                  注意:上面的腳本并沒有把備份后的文件傳送到其他遠程計算機,也沒有刪除幾天前的備份文件:需要用戶增加相關(guān)腳本,或者手動操作.
                 

          增量備份
                 
                  增量備份的數(shù)據(jù)量比較小,但是要在完整備份的基礎(chǔ)上操作,用戶可以在時間和成本上權(quán)衡,選擇最有利于自己的方式.
                 
                  增量備份使用bin log,腳本如下:

           
                 
                  #!/bin/sh
                 
                  #
                  # mysql binlog backup script
                  #
                 
                  /usr/bin/mysqladmin flush-logs
                 
                  DATADIR=/var/lib/mysql
                  BAKDIR=/backup/mysql/daily
                 
                  ###如果你做了特殊設(shè)置,請修改此處或者修改應(yīng)用此變量的行:缺省取機器名,mysql缺省也是取機器名
                  HOSTNAME=`uname -n`
                 
                  cd $DATADIR
                 
                  FILELIST=`cat $HOSTNAME-bin.index`

                  ##計算行數(shù),也就是文件數(shù)       
                  COUNTER=0
                  for file in $FILELIST
                  do
                          COUNTER=`expr $COUNTER + 1 `
                  done
                 
                  NextNum=0
                  for file in  $FILELIST
                  do
                      base=`basename $file`
                          NextNum=`expr $NextNum + 1`
                          if [ $NextNum -eq $COUNTER ]
                          then
                                  echo "skip lastest"
                          else
                                  dest=$BAKDIR/$base
                                  if(test -e $dest)
                                  then
                                          echo "skip exist $base"
                                  else
                                          echo "copying $base"
                                          cp $base $BAKDIR
                                  fi
                          fi
                  done
                 
                  echo "backup mysql binlog ok"
                  增量備份腳本是備份前flush-logs,mysql會自動把內(nèi)存中的日志放到文件里,然后生成一個新的日志文件,所以我們只需要備份前面的幾個即可,也就是不備份最后一個.
                  因為從上次備份到本次備份也可能會有多個日志文件生成,所以要檢測文件,如果已經(jīng)備份過,就不用備份了.
                 
                  :同樣,用戶也需要自己遠程傳送,不過不需要刪除了,完整備份后程序會自動生成.
                 
          訪問設(shè)置

                  腳本寫完了,為了能讓腳本運行,還需要設(shè)置對應(yīng)的用戶名和密碼,mysqladmin和mysqldump都是需要用戶名和密碼的,當然可以寫在腳本中,但是修改起來不太方便,假設(shè)我們用系統(tǒng)的root用戶來運行此腳本,那么我們需要在/root(也就是root用戶的home目錄)創(chuàng)建一個.my.cnf文件,內(nèi)容如下

           
                 
                  [mysqladmin]
                  password =password
                  user= root
                  [mysqldump]
                  user=root
                  password=password       
                  :設(shè)置本文件只有root可讀.(chmod 600 .my.cnf )
                 
                  此文件說明程序使用mysql的root用戶備份數(shù)據(jù),密碼是對應(yīng)的設(shè)置.這樣就不需要在腳本里寫用戶名和密碼了.
                 

          自動運行
                 
                  為了讓備份程序自動運行,我們需要把它加入crontab.
                 
                  有2種方法,一種是把腳本根據(jù)自己的選擇放入到/etc/cron.daily,/etc/cron.weekly這么目錄里.
                  一種是使用crontab -e放入到root用戶的計劃任務(wù)里,例如完整備份每周日凌晨3點運行,日常備份每周一-周六凌晨3點運行.
                 
                  具體使用,請參考crontab的幫助.
                 
          錯誤指正

                  請在 http://www.jscud.com 或者我的博客 http://www.aygfsteel.com/scud 發(fā)表評論或者留言,以便改進. :)
                 
                 
          所為何
                  在網(wǎng)上沒有找到類似的腳本,只好學習shell語法,自己寫了一個 :)
                 
                  適合自己的,就是最好的!

          posted on 2005-11-01 18:43 Scud(飛云小俠) 閱讀(1080) 評論(1)  編輯  收藏 所屬分類: 其他

          評論

          # re: Mysql 日常備份和增量備份腳本(Linux) 2005-11-01 22:35 scud(飛云小俠)

          參考的帖子為:

          http://bbs.chinaunix.net/viewthread.php?tid=418474&extra=page%3D1

            回復  更多評論   

          <2005年11月>
          303112345
          6789101112
          13141516171819
          20212223242526
          27282930123
          45678910

          導航

          統(tǒng)計

          公告

          文章發(fā)布許可
          創(chuàng)造共用協(xié)議:署名,非商業(yè),保持一致

          我的郵件
          cnscud # gmail


          常用鏈接

          留言簿(15)

          隨筆分類(113)

          隨筆檔案(103)

          相冊

          友情鏈接

          技術(shù)網(wǎng)站

          搜索

          積分與排名

          最新評論

          閱讀排行榜

          評論排行榜

          主站蜘蛛池模板: 宁乡县| 丰台区| 望江县| 天台县| 普宁市| 罗城| 滕州市| 玛曲县| 荣成市| 英德市| 武鸣县| 滨州市| 九龙坡区| 岗巴县| 奉节县| 莱西市| 康平县| 靖远县| 新晃| 绵竹市| 新余市| 太仓市| 彰化市| 南岸区| 固阳县| 洛隆县| 邳州市| 平邑县| 昌都县| 鹿泉市| 临朐县| 贺兰县| 宝清县| 上思县| 乳源| 法库县| 集安市| 铜山县| 五河县| 抚州市| 余姚市|