Вопрос: Разница между `curl -I` и` curl -X HEAD`


Я наблюдал за забавным типом сервера от http://www.reddit.com с curl -I http://www.reddit.com когда я догадался, что curl -X HEAD http://www.reddit.com будет делать то же самое. Но на самом деле это не так.

Мне интересно, почему.

Это то, что я наблюдаю за выполнением двух команд:

  • curl -I: работает как ожидалось, выводит заголовок и существует.

  • curl -X HEAD: ничего не показывает и, кажется, ждет ввода пользователя.

Но, обнюхивая tshark Я вижу, что вторая команда отправляет тот же HTML-запрос и получает правильный ответ, но он не показывает его, и он не закрывает соединение.

curl -I

0.000000 333.33.33.33 -> 213.248.111.106 TCP 59675 > http [SYN] Seq=0 Win=5840 Len=0 MSS=1460 TSV=47267342 TSER=0 WS=6
0.045392 213.248.111.106 -> 333.33.33.33 TCP http > 59675 [SYN, ACK] Seq=0 Ack=1 Win=5792 Len=0 MSS=1460 TSV=2552532839 TSER=47267342 WS=1
0.045441 333.33.33.33 -> 213.248.111.106 TCP 59675 > http [ACK] Seq=1 Ack=1 Win=5888 Len=0 TSV=47267353 TSER=2552532839
0.045623 333.33.33.33 -> 213.248.111.106 HTTP HEAD / HTTP/1.1
0.091665 213.248.111.106 -> 333.33.33.33 TCP http > 59675 [ACK] Seq=1 Ack=155 Win=6432 Len=0 TSV=2552532886 TSER=47267353
0.861782 213.248.111.106 -> 333.33.33.33 HTTP HTTP/1.1 200 OK
0.861830 333.33.33.33 -> 213.248.111.106 TCP 59675 > http [ACK] Seq=155 Ack=321 Win=6912 Len=0 TSV=47267557 TSER=2552533656
0.862127 333.33.33.33 -> 213.248.111.106 TCP 59675 > http [FIN, ACK] Seq=155 Ack=321 Win=6912 Len=0 TSV=47267557 TSER=2552533656
0.910810 213.248.111.106 -> 333.33.33.33 TCP http > 59675 [FIN, ACK] Seq=321 Ack=156 Win=6432 Len=0 TSV=2552533705 TSER=47267557
0.910880 333.33.33.33 -> 213.248.111.106 TCP 59675 > http [ACK] Seq=156 Ack=322 Win=6912 Len=0 TSV=47267570 TSER=2552533705

curl -X HEAD

34.106389 333.33.33.33 -> 213.248.111.90 TCP 51690 > http [SYN] Seq=0 Win=5840 Len=0 MSS=1460 TSV=47275868 TSER=0 WS=6
34.149507 213.248.111.90 -> 333.33.33.33 TCP http > 51690 [SYN, ACK] Seq=0 Ack=1 Win=5792 Len=0 MSS=1460 TSV=3920268348 TSER=47275868 WS=1
34.149560 333.33.33.33 -> 213.248.111.90 TCP 51690 > http [ACK] Seq=1 Ack=1 Win=5888 Len=0 TSV=47275879 TSER=3920268348
34.149646 333.33.33.33 -> 213.248.111.90 HTTP HEAD / HTTP/1.1
34.191484 213.248.111.90 -> 333.33.33.33 TCP http > 51690 [ACK] Seq=1 Ack=155 Win=6432 Len=0 TSV=3920268390 TSER=47275879
34.192657 213.248.111.90 -> 333.33.33.33 TCP [TCP Dup ACK 15#1] http > 51690 [ACK] Seq=1 Ack=155 Win=6432 Len=0 TSV=3920268390 TSER=47275879
34.823399 213.248.111.90 -> 333.33.33.33 HTTP HTTP/1.1 200 OK
34.823453 333.33.33.33 -> 213.248.111.90 TCP 51690 > http [ACK] Seq=155 Ack=321 Win=6912 Len=0 TSV=47276048 TSER=3920269022

Любая идея о том, почему эта разница в поведении?


49
2018-05-10 08:49


Источник


Смотрите также daniel.haxx.se/blog/2015/09/11/unnecessary-use-of-curl-x - Abbafei


Ответы:


Кажется, что разница имеет отношение к Content-Length заголовок и как он обрабатывается обеими командами.

Но прежде чем вникать в это, curl -X HEAD не дает никакого вывода, потому что, по умолчанию, curl не печатает заголовки, если переключатель -i не предоставляется (не требуется -I хоть).

В любом случае, curl -I это правильный способ получения заголовков. Он просто запрашивает заголовок и закрывает соединение.

С другой стороны curl -X HEAD -i будет ожидать передачи количества байтов, указанных в Content-Length, В случае нет Content-Length не указан, я думаю, он будет ожидать некоторые данные или для этого конкретного заголовка.

Некоторые примеры, демонстрирующие это поведение:

$ curl -X HEAD -i http://www.elpais.es
HTTP/1.1 301 Moved Permanently
Server: AkamaiGHost
Content-Length: 0
Location: http://www.elpais.com/
Date: Wed, 12 May 2010 06:35:57 GMT
Connection: keep-alive

Потому как Content-Length 0, в этом случае обе команды ведут себя одинаково. После этого соединение закрывается.

$ curl -X HEAD -i http://slashdot.org
HTTP/1.1 200 OK
Server: Apache/1.3.41 (Unix) mod_perl/1.31-rc4
SLASH_LOG_DATA: shtml
X-Powered-By: Slash 2.005001296
X-Bender: Since I love you all so much, I'd like to give everyone hugs.
X-XRDS-Location: http://slashdot.org/slashdot.xrds
Cache-Control: no-cache
Pragma: no-cache
Content-Type: text/html; charset=iso-8859-1
Content-Length: 115224
Date: Wed, 12 May 2010 06:37:20 GMT
X-Varnish: 1649060825 1649060810
Age: 1
Connection: keep-alive

curl: (18) transfer closed with 115224 bytes remaining to read

В этом случае, кажется, есть тайм-аут (возможно, от Varnish), поэтому curl возражает, что соединение было закрыто, прежде чем Content-Length количество байтов.

Кстати, посмотрите на забавный X-Bender (показан в примере) и X-Fry (попробуйте сами) заголовки :).


48
2018-05-12 06:49



В случае, если кто-то еще ищет это: возможность установки в библиотеке curl PHP CURLOPT_NOBODY, - Matthew Caruana Galizia


Я думаю, что это ошибка в завитке. Если я укажу метод с -X, завиток должен обрабатывать ответ в соответствии с RFC. К сожалению, сопровождающий завиток не согласен. Кто-то подал ошибку и даже отправил патч:

http://sourceforge.net/tracker/?func=detail&atid=100976&aid=1810273&group_id=976

но сторонник завитки отверг его. По-видимому, сломанная опция «-X HEAD» «работает как запроектированная».

--Jamshid


11
2018-03-29 20:59



Справедливости ради, я могу следовать логике ответа на билет: --head действительно предоставляет нам действительную реализацию запроса HEAD и -X <method> просто переопределяет HTTP-метод в запросе. - Hank
да, это было то, что мне было нужно. У меня есть багги-сервер, который обслуживает контент, когда ему присваивается запрос HEAD. -X HEAD был единственным способом проверить его при попытке заставить сервер придерживаться RFC - Hashbrown


Из документы:

-X, --request

(HTTP) Задает метод пользовательского запроса, который следует использовать при общении с HTTP-сервером. Указанный метод запроса будет использоваться вместо используемого метода (по умолчанию GET). Прочтите спецификацию HTTP 1.1 для подробностей и пояснений. Общие дополнительные HTTP-запросы включают PUT и DELETE, но связанные технологии, такие как WebDAV, предлагают PROPFIND, COPY, MOVE и другие.

Обычно вам не нужен этот вариант. Всевозможные запросы GET, HEAD, POST и PUT скорее вызываются с использованием выделенных параметров командной строки.

Этот параметр меняет только фактическое слово используемый в HTTP-запросе, он не изменяет способ поведения завитка, Например, если вы хотите сделать правильный запрос HEAD, использование -X HEAD будет недостаточным. Вам нужно использовать опцию -I, -head.

Другими словами, -X для других методов, кроме GET, HEAD, POST а также PUT, Для HEAD использование -I,


2
2018-03-02 07:36





Я встречаю ту же проблему при написании кода cpp на curl 7.34,

curl_easy_setopt(curl_handle, CURLOPT_CUSTOMREQUEST, "HEAD");

будет висеть там долгое время, кажется, что он ждет передачи тела, пока не произойдет тайм-аут. после добавления новой строки эта проблема решена.

curl_easy_setopt(curl_handle, CURLOPT_NOBODY, 1L );

из документ

сделать запрос на загрузку без получения тела

эта линия заставит завиток не ждать.


0
2017-07-19 08:42