主頁 > 知識庫 > Linux系統(tǒng)中的curl命令使用教程

Linux系統(tǒng)中的curl命令使用教程

熱門標(biāo)簽:電話機器人服務(wù)器部署 電銷語音機器人哪個好 百度地圖標(biāo)注未成功 地圖上標(biāo)注點位的圖標(biāo) 文山外呼營銷系統(tǒng) 拉薩銷售外呼系統(tǒng)軟件 常熟外呼系統(tǒng) 中山防封卡電銷卡辦理 江蘇小型外呼系統(tǒng)軟件

命令:curl
在Linux中curl是一個利用URL規(guī)則在命令行下工作的文件傳輸工具,可以說是一款很強大的http命令行工具。它支持文件的上傳和下載,是綜合傳輸工具,但按傳統(tǒng),習(xí)慣稱url為下載工具。
語法:# curl [option] [url]
常見參數(shù):
-A/--user-agent string>              設(shè)置用戶代理發(fā)送給服務(wù)器
-b/--cookie name=string/file>    cookie字符串或文件讀取位置
-c/--cookie-jar file>                    操作結(jié)束后把cookie寫入到這個文件中
-C/--continue-at offset>            斷點續(xù)轉(zhuǎn)
-D/--dump-header file>              把header信息寫入到該文件中
-e/--referer                                  來源網(wǎng)址
-f/--fail                                          連接失敗時不顯示http錯誤
-o/--output                                  把輸出寫到該文件中
-O/--remote-name                      把輸出寫到該文件中,保留遠(yuǎn)程文件的文件名
-r/--range range>                      檢索來自HTTP/1.1或FTP服務(wù)器字節(jié)范圍
-s/--silent                                    靜音模式。不輸出任何東西
-T/--upload-file file>                  上傳文件
-u/--user user[:password]>      設(shè)置服務(wù)器的用戶和密碼
-w/--write-out [format]                什么輸出完成后
-x/--proxy host[:port]>              在給定的端口上使用HTTP代理
-#/--progress-bar                        進度條顯示當(dāng)前的傳送狀態(tài)

例子:
1、基本用法

復(fù)制代碼
代碼如下:

# curl http://www.linux.com

執(zhí)行后,www.linux.com 的html就會顯示在屏幕上了
Ps:由于安裝linux的時候很多時候是沒有安裝桌面的,也意味著沒有瀏覽器,因此這個方法也經(jīng)常用于測試一臺服務(wù)器是否可以到達一個網(wǎng)站
2、保存訪問的網(wǎng)頁
2.1:使用linux的重定向功能保存
復(fù)制代碼
代碼如下:

# curl http://www.linux.com >> linux.html

2.2:可以使用curl的內(nèi)置option:-o(小寫)保存網(wǎng)頁

復(fù)制代碼
代碼如下:
$ curl -o linux.html http://www.linux.com

執(zhí)行完成后會顯示如下界面,顯示100%則表示保存成功
% Total    % Received % Xferd  Average Speed  Time    Time    Time  Current
                                Dload  Upload  Total  Spent    Left  Speed
100 79684    0 79684    0    0  3437k      0 --:--:-- --:--:-- --:--:-- 7781k
2.3:可以使用curl的內(nèi)置option:-O(大寫)保存網(wǎng)頁中的文件
要注意這里后面的url要具體到某個文件,不然抓不下來
復(fù)制代碼
代碼如下:

# curl -O http://www.linux.com/hello.sh

3、測試網(wǎng)頁返回值
復(fù)制代碼
代碼如下:

# curl -o /dev/null -s -w %{http_code} www.linux.com
Ps:在腳本中,這是很常見的測試網(wǎng)站是否正常的用法

4、指定proxy服務(wù)器以及其端口
很多時候上網(wǎng)需要用到代理服務(wù)器(比如是使用代理服務(wù)器上網(wǎng)或者因為使用curl別人網(wǎng)站而被別人屏蔽IP地址的時候),幸運的是curl通過使用內(nèi)置option:-x來支持設(shè)置代理

復(fù)制代碼
代碼如下:
# curl -x 192.168.100.100:1080 http://www.linux.com

5、cookie
有些網(wǎng)站是使用cookie來記錄session信息。對于chrome這樣的瀏覽器,可以輕易處理cookie信息,但在curl中只要增加相關(guān)參數(shù)也是可以很容易的處理cookie
5.1:保存http的response里面的cookie信息。內(nèi)置option:-c(小寫)

復(fù)制代碼
代碼如下:
# curl -c cookiec.txt http://www.linux.com

執(zhí)行后cookie信息就被存到了cookiec.txt里面了

5.2:保存http的response里面的header信息。內(nèi)置option: -D

復(fù)制代碼
代碼如下:
# curl -D cookied.txt http://www.linux.com

執(zhí)行后cookie信息就被存到了cookied.txt里面了
注意:-c(小寫)產(chǎn)生的cookie和-D里面的cookie是不一樣的。

5.3:使用cookie
很多網(wǎng)站都是通過監(jiān)視你的cookie信息來判斷你是否按規(guī)矩訪問他們的網(wǎng)站的,因此我們需要使用保存的cookie信息。內(nèi)置option: -b

復(fù)制代碼
代碼如下:
# curl -b cookiec.txt http://www.linux.com

6、模仿瀏覽器
有些網(wǎng)站需要使用特定的瀏覽器去訪問他們,有些還需要使用某些特定的版本。curl內(nèi)置option:-A可以讓我們指定瀏覽器去訪問網(wǎng)站
復(fù)制代碼
代碼如下:

# curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" http://www.linux.com

這樣服務(wù)器端就會認(rèn)為是使用IE8.0去訪問的
7、偽造referer(盜鏈)
很多服務(wù)器會檢查http訪問的referer從而來控制訪問。比如:你是先訪問首頁,然后再訪問首頁中的郵箱頁面,這里訪問郵箱的referer地址就是訪問首頁成功后的頁面地址,如果服務(wù)器發(fā)現(xiàn)對郵箱頁面訪問的referer地址不是首頁的地址,就斷定那是個盜連了
curl中內(nèi)置option:-e可以讓我們設(shè)定referer

復(fù)制代碼
代碼如下:
# curl -e "www.linux.com" http://mail.linux.com

這樣就會讓服務(wù)器其以為你是從www.linux.com點擊某個鏈接過來的
8、下載文件
8.1:利用curl下載文件。
復(fù)制代碼
代碼如下:

#使用內(nèi)置option:-o(小寫)
# curl -o dodo1.jpg http:www.linux.com/dodo1.JPG
#使用內(nèi)置option:-O(大寫)
# curl -O http://www.linux.com/dodo1.JPG

這樣就會以服務(wù)器上的名稱保存文件到本地
8.2:循環(huán)下載
有時候下載圖片可以能是前面的部分名稱是一樣的,就最后的尾椎名不一樣

復(fù)制代碼
代碼如下:
# curl -O http://www.linux.com/dodo[1-5].JPG

這樣就會把dodo1,dodo2,dodo3,dodo4,dodo5全部保存下來
8.3:下載重命名
復(fù)制代碼
代碼如下:

# curl -O http://www.linux.com/{hello,bb}/dodo[1-5].JPG

由于下載的hello與bb中的文件名都是dodo1,dodo2,dodo3,dodo4,dodo5。因此第二次下載的會把第一次下載的覆蓋,這樣就需要對文件進行重命名。
復(fù)制代碼
代碼如下:

# curl -o #1_#2.JPG http://www.linux.com/{hello,bb}/dodo[1-5].JPG

這樣在hello/dodo1.JPG的文件下載下來就會變成hello_dodo1.JPG,其他文件依此類推,從而有效的避免了文件被覆蓋
8.4:分塊下載
有時候下載的東西會比較大,這個時候我們可以分段下載。使用內(nèi)置option:-r

復(fù)制代碼
代碼如下:
# curl -r 0-100 -o dodo1_part1.JPG http://www.linux.com/dodo1.JPG
# curl -r 100-200 -o dodo1_part2.JPG http://www.linux.com/dodo1.JPG
# curl -r 200- -o dodo1_part3.JPG http://www.linux.com/dodo1.JPG
# cat dodo1_part* > dodo1.JPG

這樣就可以查看dodo1.JPG的內(nèi)容了
8.5:通過ftp下載文件
curl可以通過ftp下載文件,curl提供兩種從ftp中下載的語法

復(fù)制代碼
代碼如下:
# curl -O -u 用戶名:密碼 ftp://www.linux.com/dodo1.JPG
# curl -O ftp://用戶名:密碼@www.linux.com/dodo1.JPG

8.6:顯示下載進度條

復(fù)制代碼
代碼如下:
# curl -# -O http://www.linux.com/dodo1.JPG

8.7:不會顯示下載進度信息

復(fù)制代碼
代碼如下:
# curl -s -O http://www.linux.com/dodo1.JPG

9、斷點續(xù)傳
在windows中,我們可以使用迅雷這樣的軟件進行斷點續(xù)傳。curl可以通過內(nèi)置option:-C同樣可以達到相同的效果
如果在下載dodo1.JPG的過程中突然掉線了,可以使用以下的方式續(xù)傳

復(fù)制代碼
代碼如下:
# curl -C -O http://www.linux.com/dodo1.JPG

10、上傳文件
curl不僅僅可以下載文件,還可以上傳文件。通過內(nèi)置option:-T來實現(xiàn)

復(fù)制代碼
代碼如下:
# curl -T dodo1.JPG -u 用戶名:密碼 ftp://www.linux.com/img/

這樣就向ftp服務(wù)器上傳了文件dodo1.JPG
11、顯示抓取錯誤
復(fù)制代碼
代碼如下:

# curl -f http://www.linux.com/error

其他參數(shù)(此處翻譯為轉(zhuǎn)載):
-a/--append                        上傳文件時,附加到目標(biāo)文件
--anyauth                            可以使用“任何”身份驗證方法
--basic                                使用HTTP基本驗證
-B/--use-ascii                      使用ASCII文本傳輸
-d/--data data>                  HTTP POST方式傳送數(shù)據(jù)
--data-ascii data>            以ascii的方式post數(shù)據(jù)
--data-binary data>          以二進制的方式post數(shù)據(jù)
--negotiate                          使用HTTP身份驗證
--digest                        使用數(shù)字身份驗證
--disable-eprt                  禁止使用EPRT或LPRT
--disable-epsv                  禁止使用EPSV
--egd-file file>              為隨機數(shù)據(jù)(SSL)設(shè)置EGD socket路徑
--tcp-nodelay                  使用TCP_NODELAY選項
-E/--cert cert[:passwd]>      客戶端證書文件和密碼 (SSL)
--cert-type type>              證書文件類型 (DER/PEM/ENG) (SSL)
--key key>                    私鑰文件名 (SSL)
--key-type type>              私鑰文件類型 (DER/PEM/ENG) (SSL)
--pass  pass>                  私鑰密碼 (SSL)
--engine eng>                  加密引擎使用 (SSL). "--engine list" for list
--cacert file>                CA證書 (SSL)
--capath directory>            CA目   (made using c_rehash) to verify peer against (SSL)
--ciphers list>                SSL密碼
--compressed                    要求返回是壓縮的形勢 (using deflate or gzip)
--connect-timeout seconds>    設(shè)置最大請求時間
--create-dirs                  建立本地目錄的目錄層次結(jié)構(gòu)
--crlf                          上傳是把LF轉(zhuǎn)變成CRLF
--ftp-create-dirs              如果遠(yuǎn)程目錄不存在,創(chuàng)建遠(yuǎn)程目錄
--ftp-method [multicwd/nocwd/singlecwd]    控制CWD的使用
--ftp-pasv                      使用 PASV/EPSV 代替端口
--ftp-skip-pasv-ip              使用PASV的時候,忽略該IP地址
--ftp-ssl                      嘗試用 SSL/TLS 來進行ftp數(shù)據(jù)傳輸
--ftp-ssl-reqd                  要求用 SSL/TLS 來進行ftp數(shù)據(jù)傳輸
-F/--form name=content>        模擬http表單提交數(shù)據(jù)
-form-string name=string>      模擬http表單提交數(shù)據(jù)
-g/--globoff                    禁用網(wǎng)址序列和范圍使用{}和[]
-G/--get                        以get的方式來發(fā)送數(shù)據(jù)
-h/--help                      幫助
-H/--header line>              自定義頭信息傳遞給服務(wù)器
--ignore-content-length        忽略的HTTP頭信息的長度
-i/--include                    輸出時包括protocol頭信息
-I/--head                      只顯示文檔信息
-j/--junk-session-cookies      讀取文件時忽略session cookie
--interface interface>        使用指定網(wǎng)絡(luò)接口/地址
--krb4 level>                  使用指定安全級別的krb4
-k/--insecure                  允許不使用證書到SSL站點
-K/--config                    指定的配置文件讀取
-l/--list-only                  列出ftp目錄下的文件名稱
--limit-rate rate>            設(shè)置傳輸速度
--local-portNUM>              強制使用本地端口號
-m/--max-time seconds>        設(shè)置最大傳輸時間
--max-redirs num>              設(shè)置最大讀取的目錄數(shù)
--max-filesize bytes>          設(shè)置最大下載的文件總量
-M/--manual                    顯示全手動
-n/--netrc                      從netrc文件中讀取用戶名和密碼
--netrc-optional                使用 .netrc 或者 URL來覆蓋-n
--ntlm                          使用 HTTP NTLM 身份驗證
-N/--no-buffer                  禁用緩沖輸出
-p/--proxytunnel                使用HTTP代理
--proxy-anyauth                選擇任一代理身份驗證方法
--proxy-basic                  在代理上使用基本身份驗證
--proxy-digest                  在代理上使用數(shù)字身份驗證
--proxy-ntlm                    在代理上使用ntlm身份驗證
-P/--ftp-port address>        使用端口地址,而不是使用PASV
-Q/--quote cmd>                文件傳輸前,發(fā)送命令到服務(wù)器
--range-file                    讀?。⊿SL)的隨機文件
-R/--remote-time                在本地生成文件時,保留遠(yuǎn)程文件時間
--retry num>                  傳輸出現(xiàn)問題時,重試的次數(shù)
--retry-delay seconds>        傳輸出現(xiàn)問題時,設(shè)置重試間隔時間
--retry-max-time seconds>      傳輸出現(xiàn)問題時,設(shè)置最大重試時間
-S/--show-error                顯示錯誤
--socks4 host[:port]>          用socks4代理給定主機和端口
--socks5 host[:port]>          用socks5代理給定主機和端口
-t/--telnet-option OPT=val>    Telnet選項設(shè)置
--trace file>                  對指定文件進行debug
--trace-ascii file>            Like --跟蹤但沒有hex輸出
--trace-time                    跟蹤/詳細(xì)輸出時,添加時間戳
--url URL>                    Spet URL to work with
-U/--proxy-user user[:password]>  設(shè)置代理用戶名和密碼
-V/--version                    顯示版本信息
-X/--request command>          指定什么命令
-y/--speed-time                放棄限速所要的時間。默認(rèn)為30
-Y/--speed-limit                停止傳輸速度的限制,速度時間'秒
-z/--time-cond                  傳送時間設(shè)置
-0/--http1.0                    使用HTTP 1.0
-1/--tlsv1                      使用TLSv1(SSL)
-2/--sslv2                      使用SSLv2的(SSL)
-3/--sslv3                      使用的SSLv3(SSL)
--3p-quote                      like -Q for the source URL for 3rd party transfer
--3p-url                        使用url,進行第三方傳送
--3p-user                      使用用戶名和密碼,進行第三方傳送
-4/--ipv4                      使用IP4
-6/--ipv6                      使用IP6


使用curl命令獲取文件下載速度

使用curl可以下載網(wǎng)絡(luò)內(nèi)容,那如何獲取curl下載時的下載速度呢,使用下面的命令即可:

復(fù)制代碼
代碼如下:

# curl -Lo /dev/null -skw "%{speed_download}\n" http://mirrors.163.com/ubuntu/ls-lR.gz

226493.000
當(dāng)然,還可以獲取連接時間、重定向時間等更多的數(shù)據(jù):
 

復(fù)制代碼
代碼如下:

# curl -Lo /dev/null -skw "time_connect: %{time_connect} s\ntime_namelookup: %{time_namelookup} s\ntime_pretransfer: %{time_pretransfer} s\ntime_starttransfer: %{time_starttransfer} s\ntime_redirect: %{time_redirect} s\nspeed_download: %{speed_download} B/s\ntime_total: %{time_total} s\n\n" http://www.sina.com

time_connect: 0.154 s
time_namelookup: 0.150 s
time_pretransfer: 0.154 s
time_starttransfer: 0.163 s
time_redirect: 0.157 s
speed_download: 324679.000 B/s
time_total: 1.692 s

標(biāo)簽:河南 欽州 景德鎮(zhèn) 黔南 威海 海北 天門 鶴壁

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《Linux系統(tǒng)中的curl命令使用教程》,本文關(guān)鍵詞  Linux,系統(tǒng),中的,curl,命令,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《Linux系統(tǒng)中的curl命令使用教程》相關(guān)的同類信息!
  • 本頁收集關(guān)于Linux系統(tǒng)中的curl命令使用教程的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章