主頁 > 知識庫 > shell腳本實現(xiàn)文件鎖功能

shell腳本實現(xiàn)文件鎖功能

熱門標簽:百度地圖的地圖標注 地圖標注超出范圍怎么辦 東莞電銷機器人價格一覽表 excel地址地圖標注 陜西電銷卡外呼系統(tǒng)怎么安裝 杭州機器人外呼系統(tǒng) 佛山高德地圖標注中心 百度地圖標注圖標更換 旅游地圖標注大全

1.背景

當多個進程可能會對同樣的數(shù)據(jù)執(zhí)行操作時,這些進程需要保證其它進程沒有在操作,以免損壞數(shù)據(jù)。通常,這樣的進程會使用一個“鎖文件”,也就是建立一個文件來告訴別的進程自己在運行,如果檢測到那個文件存在則認為有操作同樣數(shù)據(jù)的進程在工作。這樣的問題是,進程不小心意外死亡了,沒有清理掉那個鎖文件,那么只能由用戶手動來清理了。

2.關(guān)于flock

flock 是對于整個文件的建議性鎖。也就是說,如果一個進程在一個文件(inode)上放了鎖,那么其它進程是可以知道的。(建議性鎖不強求進程遵守。)最棒的一點是,它的第一個參數(shù)是文件描述符,在此文件描述符關(guān)閉時,鎖會自動釋放。而當進程終止時,所有的文件描述符均會被關(guān)閉。

3. shell中實現(xiàn)flock系統(tǒng)調(diào)用的命令是flock,其使用格式有以下兩種(man flock)


復制代碼 代碼如下:

flock [-sxon] [-w timeout] lockfile [-c] command...
flock [-sxun] [-w timeout] fd


選項和參數(shù):


-s,--shared:獲取一個共享鎖,在定向為某文件的FD上設(shè)置共享鎖而未釋放鎖的時間內(nèi),其他進程試圖在定向為此文件的FD上設(shè)置獨占鎖的請求失敗,而其他進程試圖在定向為此文件的FD上設(shè)置共享鎖的請求會成功。
-x,-e,--exclusive:獲取一個排它鎖,或者稱為寫入鎖,為默認項
-u,--unlock:手動釋放鎖,一般情況不必須,當FD關(guān)閉時,系統(tǒng)會自動解鎖,此參數(shù)用于腳本命令一部分需要異步執(zhí)行,一部分可以同步執(zhí)行的情況。
-n,--nb, --nonblock:非阻塞模式,當獲取鎖失敗時,返回1而不是等待
-w, --wait, --timeout seconds:設(shè)置阻塞超時,當超過設(shè)置的秒數(shù)時,退出阻塞模式,返回1,并繼續(xù)執(zhí)行后面的語句
-o, --close:表示當執(zhí)行command前關(guān)閉設(shè)置鎖的FD,以使command的子進程不保持鎖。
-c, --command command:在shell中執(zhí)行其后的語句

4. shell中實現(xiàn)排它鎖避免腳本重復執(zhí)行

Linux中的例行性工作排程crontab會定時執(zhí)行一些腳本,但腳本的執(zhí)行時間往往無法控制,當腳本執(zhí)行時間過長時,可能會導致上一次任務(wù)的腳本還沒執(zhí)行完,下一次任務(wù)的腳本又開始執(zhí)行了。這種情況下可能會出現(xiàn)一些并發(fā)問題,嚴重時會導致出現(xiàn)臟數(shù)據(jù)/性能瓶頸的惡性循環(huán)。
通過使用flock建立排它鎖可以規(guī)避這個問題,如果一個進程對某個加了排他鎖,則其它進程無法加鎖,可以選擇等待超時或馬上返回。測試實例如下:

4.1 創(chuàng)建執(zhí)行腳本

復制代碼 代碼如下:

#cat /scripts/shell/file_lock.sh
#!/bin/bash
# Description: test for file flock
PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin
export PATH

echo ""
echo "----------------------------------"

echo "start at `date '+%Y-%m-%d %H:%M:%S'` ..."

sleep 140s

echo "finished at `date '+%Y-%m-%d %H:%M:%S'` ..."


4.2 創(chuàng)建定時任務(wù):測試排它鎖


復制代碼 代碼如下:

#crontab -e
* * * * * flock -xn /dev/shm/test.lock -c "sh /scripts/shell/file_lock.sh > /root/stdout.log"

每分鐘執(zhí)行一次該腳本,并將輸出信息寫入到stdout.log
 
查看輸出日志如下:
復制代碼 代碼如下:

----------------------------------
start at 2014-04-10 10:23:01 ...            #獲取鎖
finish at 2014-04-10 10:25:21 ...           #釋放鎖
 
 
----------------------------------
start at 2014-04-10 10:26:01 ...            #10:27:00及10:28:00啟動的定時任務(wù)由于無法獲取鎖,以失敗而退出執(zhí)行,直到10:26:00才獲取到鎖
finish at 2014-04-10 10:28:21 ...


4.3 測試排它鎖,加上等待超時


復制代碼 代碼如下:

* * * * * flock -x -w 20 /dev/shm/test.lock -c "sh /scripts/shell/file_lock.sh > /root/stdout.log"

查看日志輸出信息:
復制代碼 代碼如下:

----------------------------------
start at 2014-04-10 10:29:01 ...
finish at 2014-04-10 10:31:21 ...
 
----------------------------------
start at 2014-04-10 10:31:21 ...    #10:31:00啟動的定時任務(wù)等待了20秒后,上一個任務(wù)釋放了鎖,所以此任務(wù)可以馬上拿到鎖,并繼續(xù)執(zhí)行
finish at 2014-04-10 10:33:41 ...

您可能感興趣的文章:
  • linux shell之文件鎖

標簽:通遼 南充 雅安 朝陽 延邊 西藏 隨州 青島

巨人網(wǎng)絡(luò)通訊聲明:本文標題《shell腳本實現(xiàn)文件鎖功能》,本文關(guān)鍵詞  shell,腳本,實現(xiàn),文件,鎖,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《shell腳本實現(xiàn)文件鎖功能》相關(guān)的同類信息!
  • 本頁收集關(guān)于shell腳本實現(xiàn)文件鎖功能的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章