คุณส่งคำขอ HEAD HTTP ใน Python 2 ได้อย่างไร

สิ่งที่ฉันพยายามทำที่นี่คือรับส่วนหัวของ URL ที่กำหนดเพื่อให้ฉันสามารถระบุประเภท MIME ได้ ฉันต้องการดูว่าhttp://somedomain/foo/จะส่งคืนเอกสาร HTML หรือรูปภาพ JPEG หรือไม่ ดังนั้นฉันต้องหาวิธีส่งคำขอ HEAD เพื่อให้ฉันสามารถอ่านประเภท MIME ได้โดยไม่ต้องดาวน์โหลดเนื้อหา ไม่มีใครรู้วิธีง่ายๆในการทำเช่นนี้?

แก้ไข : คำตอบนี้ใช้ได้ แต่ในปัจจุบันคุณควรใช้ไลบรารีคำขอตามที่ระบุไว้ในคำตอบอื่น ๆ ด้านล่าง

ใช้httplib

>>> import httplib
>>> conn = httplib.HTTPConnection("www.google.com")
>>> conn.request("HEAD", "/index.html")
>>> res = conn.getresponse()
>>> print res.status, res.reason
200 OK
>>> print res.getheaders()
[('content-length', '0'), ('expires', '-1'), ('server', 'gws'), ('cache-control', 'private, max-age=0'), ('date', 'Sat, 20 Sep 2008 06:43:36 GMT'), ('content-type', 'text/html; charset=ISO-8859-1')]

นอกจากนี้ยังมีgetheader(name)เพื่อรับส่วนหัวเฉพาะ

urllib2สามารถใช้เพื่อดำเนินการร้องขอ HEAD นี่ดีกว่าการใช้ httplib เล็กน้อยเนื่องจาก urllib2 แยกวิเคราะห์ URL ให้คุณแทนที่จะต้องให้คุณแยก URL เป็นชื่อโฮสต์และเส้นทาง

>>> import urllib2
>>> class HeadRequest(urllib2.Request):
...     def get_method(self):
...         return "HEAD"
... 
>>> response = urllib2.urlopen(HeadRequest("http://google.com/index.html"))

ส่วนหัวพร้อมใช้งานผ่าน response.info () เหมือนเดิม ที่น่าสนใจคือคุณสามารถค้นหา URL ที่คุณถูกเปลี่ยนเส้นทางไป:

>>> print response.geturl()
http://www.google.com.au/index.html

Requestsวิธีบังคับ:

import requests

resp = requests.head("http://www.google.com")
print resp.status_code, resp.text, resp.headers

ฉันเชื่อว่าควรกล่าวถึงไลบรารีคำขอด้วยเช่นกัน

แค่:

import urllib2
request = urllib2.Request('http://localhost:8080')
request.get_method = lambda : 'HEAD'

response = urllib2.urlopen(request)
response.info().gettype()

แก้ไข: ฉันเพิ่งมารู้ว่ามี HTTplib2: D

import httplib2
h = httplib2.Http()
resp = h.request("http://www.google.com", 'HEAD')
assert resp[0]['status'] == 200
assert resp[0]['content-type'] == 'text/html'
...

ข้อความลิงก์

เพื่อความสมบูรณ์ที่จะมีคำตอบที่เทียบเท่า Python3 เพื่อคำตอบที่ได้รับการยอมรับโดยใช้httplib

โดยพื้นฐานแล้วเป็นรหัสเดียวกันกับที่ไลบรารีไม่ได้เรียกว่าHTTplibอีกต่อไป แต่เป็นhttp.client

from http.client import HTTPConnection

conn = HTTPConnection('www.google.com')
conn.request('HEAD', '/index.html')
res = conn.getresponse()

print(res.status, res.reason)

import httplib
import urlparse

def unshorten_url(url):
    parsed = urlparse.urlparse(url)
    h = httplib.HTTPConnection(parsed.netloc)
    h.request('HEAD', parsed.path)
    response = h.getresponse()
    if response.status/100 == 3 and response.getheader('Location'):
        return response.getheader('Location')
    else:
        return url

นอกจากนี้เมื่อใช้ HTTplib (อย่างน้อยใน 2.5.2) การพยายามอ่านการตอบสนองของคำขอ HEAD จะบล็อก (ใน readline) และล้มเหลวในภายหลัง หากคุณไม่ได้อ่านคำตอบคุณจะไม่สามารถส่งคำขออื่นเกี่ยวกับการเชื่อมต่อได้คุณจะต้องเปิดคำขอใหม่ หรือยอมรับความล่าช้าเป็นเวลานานระหว่างคำขอ

ฉันพบว่า httplib เร็วกว่า urllib2 เล็กน้อย ฉันจับเวลาสองโปรแกรม - โปรแกรมหนึ่งใช้ HTTplib และอีกโปรแกรมใช้ urllib2 - ส่งคำขอ HEAD ไปยัง 10,000 URL HTTplib หนึ่งเร็วขึ้นหลายนาที httplib 's สถิติรวมทั้งสิ้น: จริง 0m2.124s ใช้ 6m21.334s SYS 0m16.372s

และสถิติทั้งหมดของurllib2คือผู้ใช้จริง 9m1.380s 0m16.666s sys 0m28.565s

มีใครให้ข้อมูลเกี่ยวกับเรื่องนี้อีกไหม?

และอีกวิธีหนึ่ง (คล้ายกับคำตอบของ Pawel):

import urllib2
import types

request = urllib2.Request('http://localhost:8080')
request.get_method = types.MethodType(lambda self: 'HEAD', request, request.__class__)

เพียงเพื่อหลีกเลี่ยงการมีเมธอดที่ไม่ถูกผูกมัดในระดับอินสแตนซ์

อาจง่ายกว่า: ใช้ urllib หรือ urllib2

>>> import urllib
>>> f = urllib.urlopen('http://google.com')
>>> f.info().gettype()
'text/html'

f.info () เป็นอ็อบเจกต์ที่เหมือนพจนานุกรมดังนั้นคุณสามารถทำ f.info () ['content-type'] ฯลฯ

http://docs.python.org/library/urllib.html
http://docs.python.org/library/urllib2.html
http://docs.python.org/library/httplib.html

เอกสารระบุว่าโดยปกติไม่ได้ใช้ HTTplib โดยตรง