主頁 > 知識庫 > 批處理處理文本文件去重復(fù)實現(xiàn)代碼

批處理處理文本文件去重復(fù)實現(xiàn)代碼

熱門標(biāo)簽:呼倫貝爾外呼系統(tǒng) 智能打電話機(jī)器人收費(fèi) 如何申請400電話業(yè)務(wù)mm 如何弄地圖標(biāo)注 玉林市機(jī)器人外呼系統(tǒng)哪家好 雷霆電銷機(jī)器人怎么樣 電話機(jī)器人全國招商 清遠(yuǎn)百度地圖標(biāo)注店鋪位置 電話機(jī)器人產(chǎn)品怎么樣

最近需要將重復(fù)的內(nèi)容去掉,所以就想到了使用bat或vbs實現(xiàn),沒想到網(wǎng)上已經(jīng)有人寫好了,測試也正好學(xué)習(xí)一下

使用方法:把文本拖到批處理上就行了。。。

@echo off
:: Code by oicu#lsxk.org 2007/11/29

rem chcp 437>nul
:: 看情況使用,utf-8編碼的文件不能少了chcp命令,一般無需使用,
:: 但無論是否使用都不支持utf-16的文件。

:: pushd "%~dp1"
:: 如果不用pushd和popd,文件都要用絕對路徑不能只用文件名。

if "%~1"=="" goto :EOF
set outputfile=%~dpn1_output%~x1

type nul>"%outputfile%"

echo Waiting...

for /F "tokens=1* delims=:" %%i in ('findstr /n .* "%~1"') do (
  findstr /B /E /C:"%%j" "%outputfile%">nul 2>1 || echo.%%j>>"%outputfile%"
)

pause
start "" notepad "%outputfile%"
:: popd
exit

【 在 oicu (Oh! I see you!) 的大作中提到: 】
: 去重復(fù)倒是行。。缺點(diǎn)就是慢和保留原有的空行了。

以下是vbs實現(xiàn)的代碼

以下是這個腳本的源代碼,復(fù)制后另存為vbs后綴的文件,雙擊即可運(yùn)行。文件要放在C盤根下的Text.TXT,請?zhí)貏e注意:文本中一行一條記錄,不要有空行。

Const adOpenStatic = 3
Const adLockOptimistic = 3
Const adCmdText = H0001 
Set objConnection = CreateObject("ADODB.Connection")
Set objRecordSet = CreateObject("ADODB.Recordset")

strPathToTextFile = "C:\"
strFile = "Test.txt"

objConnection.Open "Provider=Microsoft.Jet.OLEDB.4.0;"  _
   "Data Source="  strPathtoTextFile  ";"  _
     "Extended Properties=""text;HDR=NO;FMT=Delimited"""

objRecordSet.Open "Select DISTINCT * FROM "  strFile, _
  objConnection, adOpenStatic, adLockOptimistic, adCmdText

Do Until objRecordSet.EOF

Set objFSO = CreateObject("Scripting.FileSystemObject")
   set Fp=objFSO.OpenTextFile("C:\test1.txt",8,True,0)
   fp.WriteLine objRecordSet.Fields.Item(0).Value
   fp.close
   set objFSO = nothing
   objRecordSet.MoveNext
Loop

標(biāo)簽:江西 白銀 株洲 公主嶺 樂山 臺州 蕪湖 三門峽

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《批處理處理文本文件去重復(fù)實現(xiàn)代碼》,本文關(guān)鍵詞  批處理,處理,文本,文件,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《批處理處理文本文件去重復(fù)實現(xiàn)代碼》相關(guān)的同類信息!
  • 本頁收集關(guān)于批處理處理文本文件去重復(fù)實現(xiàn)代碼的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章