1. 程式人生 > >[轉]CURL常用命令

[轉]CURL常用命令

原文地址: http://www.thegeekstuff.com/2012/04/curl-examples/

原文地址:http://www.cnblogs.com/gbyukg/p/3326825.html

通過選項 -s -w %{http_code} 獲取curl命令的http code

下載單個檔案,預設將輸出列印到標準輸出中(STDOUT)中

curl http://www.centos.org

通過-o/-O選項儲存下載的檔案到指定的檔案中:
-o:將檔案儲存為命令列中指定的檔名的檔案中
-O:使用URL中預設的檔名儲存檔案到本地

1 # 將檔案下載到本地並命名為mygettext.html
2 curl -o mygettext.html http://www.gnu.org/software/gettext/manual/gettext.html
3 
4 # 將檔案儲存到本地並命名為gettext.html
5 curl -O http://www.gnu.org/software/gettext/manual/gettext.html

同樣可以使用轉向字元">"對輸出進行轉向輸出

同時獲取多個檔案

1 curl -O URL1 -O URL2

若同時從同一站點下載多個檔案時,curl會嘗試重用連結(connection)。

通過-L選項進行重定向
預設情況下CURL不會發送HTTP Location headers(重定向).當一個被請求頁面移動到另一個站點時,會發送一個HTTP Loaction header作為請求,然後將請求重定向到新的地址上。
例如:訪問google.com時,會自動將地址重定向到google.com.hk上。

複製程式碼
 1 curl http://www.google.com
 2 <HTML>
 3 <HEAD>
 4     <meta http-equiv="content-type" content="text/html;charset=utf-8">
 5     <TITLE>302 Moved</TITLE>
 6 </HEAD>
 7 <BODY>
 8     <H1>302 Moved</H1>
 9     The document has moved
10     <A HREF="http://www.google.com.hk/url?sa=p&amp;hl=zh-CN&amp;pref=hkredirect&amp;pval=yes&amp;q=http://www.google.com.hk/&amp;ust=1379402837567135amp;usg=AFQjCNF3o7umf3jyJpNDPuF7KTibavE4aA">here</A>.
11 </BODY>
12 </HTML>
複製程式碼

上述輸出說明所請求的檔案被轉移到了http://www.google.com.hk。

這是可以通過使用-L選項進行強制重定向

1 # 讓curl使用地址重定向,此時會查詢google.com.hk站點
2 curl -L http://www.google.com

斷點續傳

通過使用-C選項可對大檔案使用斷點續傳功能,如:

複製程式碼
1 # 當檔案在下載完成之前結束該程序
2 $ curl -O http://www.gnu.org/software/gettext/manual/gettext.html
3 ##############             20.1%
4 
5 # 通過新增-C選項繼續對該檔案進行下載,已經下載過的檔案不會被重新下載
6 curl -C - -O http://www.gnu.org/software/gettext/manual/gettext.html
7 ###############            21.1%
複製程式碼

對CURL使用網路限速
通過--limit-rate選項對CURL的最大網路使用進行限制

1 # 下載速度最大不會超過1000B/second
2 
3 curl --limit-rate 1000B -O http://www.gnu.org/software/gettext/manual/gettext.html

下載指定時間內修改過的檔案

當下載一個檔案時,可對該檔案的最後修改日期進行判斷,如果該檔案在指定日期內修改過,就進行下載,否則不下載。
該功能可通過使用-z選項來實現:

1 # 若yy.html檔案在2011/12/21之後有過更新才會進行下載
2 curl -z 21-Dec-11 http://www.example.com/yy.html

CURL授權

在訪問需要授權的頁面時,可通過-u選項提供使用者名稱和密碼進行授權

1 curl -u username:password URL
2 
3 # 通常的做法是在命令列只輸入使用者名稱,之後會提示輸入密碼,這樣可以保證在檢視歷史記錄時不會將密碼洩露
4 curl -u username URL

從FTP伺服器下載檔案

CURL同樣支援FTP下載,若在url中指定的是某個檔案路徑而非具體的某個要下載的檔名,CURL則會列出該目錄下的所有檔名而並非下載該目錄下的所有檔案

1 # 列出public_html下的所有資料夾和檔案
2 curl -u ftpuser:ftppass -O ftp://ftp_server/public_html/
3 
4 # 下載xss.php檔案
5 curl -u ftpuser:ftppass -O ftp://ftp_server/public_html/xss.php

上傳檔案到FTP伺服器

通過 -T 選項可將指定的本地檔案上傳到FTP伺服器上

複製程式碼
# 將myfile.txt檔案上傳到伺服器
curl -u ftpuser:ftppass -T myfile.txt ftp://ftp.testserver.com

# 同時上傳多個檔案
curl -u ftpuser:ftppass -T "{file1,file2}" ftp://ftp.testserver.com

# 從標準輸入獲取內容儲存到伺服器指定的檔案中
curl -u ftpuser:ftppass -T - ftp://ftp.testserver.com/myfile_1.txt
複製程式碼

獲取更多資訊

通過使用 -v 和 -trace獲取更多的連結資訊

通過字典查詢單詞

複製程式碼
1 # 查詢bash單詞的含義
2 curl dict://dict.org/d:bash
3 
4 # 列出所有可用詞典
5 curl dict://dict.org/show:db
6 
7 # 在foldoc詞典中查詢bash單詞的含義
8 curl dict://dict.org/d:bash:foldoc
複製程式碼

為CURL設定代理

-x 選項可以為CURL新增代理功能

1 # 指定代理主機和埠
2 curl -x proxysever.test.com:3128 http://google.co.in

 

其他網站整理

儲存與使用網站cookie資訊

1 # 將網站的cookies資訊儲存到sugarcookies檔案中
2 curl -D sugarcookies http://localhost/sugarcrm/index.php
3 
4 # 使用上次儲存的cookie資訊
5 curl -b sugarcookies http://localhost/sugarcrm/index.php

傳遞請求資料

預設curl使用GET方式請求資料,這種方式下直接通過URL傳遞資料
可以通過 --data/-d 方式指定使用POST方式傳遞資料

複製程式碼
1 # GET
2 curl -u username https://api.github.com/user?access_token=XXXXXXXXXX
3 
4 # POST
5 curl -u username --data "param1=value1&param2=value" https://api.github.com
6 
7 # 也可以指定一個檔案,將該檔案中的內容當作資料傳遞給伺服器端
8 curl --data @filename https://github.api.com/authorizations
複製程式碼

注:預設情況下,通過POST方式傳遞過去的資料中若有特殊字元,首先需要將特殊字元轉義在傳遞給伺服器端,如value值中包含有空格,則需要先將空格轉換成%20,如:

1 curl -d "value%201" http://hostname.com

在新版本的CURL中,提供了新的選項 --data-urlencode,通過該選項提供的引數會自動轉義特殊字元。

1 curl --data-urlencode "value 1" http://hostname.com

除了使用GET和POST協議外,還可以通過 -X 選項指定其它協議,如:

1 curl -I -X DELETE https://api.github.cim

上傳檔案

1 curl --form "[email protected]" http://hostname/resource

 

http://curl.haxx.se/docs/httpscripting.html