python 仅使用 urllib2 获取标头

我必须使用 urllib2 实现一个仅获取标头的函数（不执行 GET 或 POST）。这是我的功能：

def getheadersonly(url, redirections = True):
    if not redirections:
        class MyHTTPRedirectHandler(urllib2.HTTPRedirectHandler):
            def http_error_302(self, req, fp, code, msg, headers):
                return urllib2.HTTPRedirectHandler.http_error_302(self, req, fp, code, msg, headers)
            http_error_301 = http_error_303 = http_error_307 = http_error_302
        cookieprocessor = urllib2.HTTPCookieProcessor()
        opener = urllib2.build_opener(MyHTTPRedirectHandler, cookieprocessor)
        urllib2.install_opener(opener)

    class HeadRequest(urllib2.Request):
        def get_method(self):
            return "HEAD"

    info = {}
    info['headers'] = dict(urllib2.urlopen(HeadRequest(url)).info()) 
    info['finalurl'] = urllib2.urlopen(HeadRequest(url)).geturl() 
    return info

使用答案中的代码this https://stackoverflow.com/a/2070916/842837 and this https://stackoverflow.com/a/554580/842837。然而这is doing即使标志是重定向False。我尝试使用以下代码：

print getheadersonly("http://ms.com", redirections = False)['finalurl']
print getheadersonly("http://ms.com")['finalurl']

在这两种情况下，它都给予了morganstanley.com。这里有什么问题吗？

首先，您的代码包含几个错误：

1. 根据每个请求getheadersonly您安装一个新的全局 urlopener，然后在后续调用中使用urllib2.urlopen

2. 您发出两个 HTTP 请求来获取响应的两个不同属性。

3. 实施urllib2.HTTPRedirectHandler.http_error_302并不是那么微不足道，我不明白它首先如何防止重定向。

基本上，您应该了解每个处理程序都安装在开启器中以处理某种类型的响应。urllib2.HTTPRedirectHandler是否可以将某些 http 代码转换为重定向。如果您不需要重定向，请勿将重定向处理程序添加到 opener 中。如果您不想打开 ftp 链接，则不要添加FTPHandler, etc.

您所需要的就是创建一个新的开启器并添加urllib2.HTTPHandler()在其中，将请求自定义为“HEAD”请求，并将请求的实例传递给打开器，读取属性，然后关闭响应。

class HeadRequest(urllib2.Request):
    def get_method(self):
        return 'HEAD'

def getheadersonly(url, redirections=True):
    opener = urllib2.OpenerDirector()
    opener.add_handler(urllib2.HTTPHandler())
    opener.add_handler(urllib2.HTTPDefaultErrorHandler())
    if redirections:
        # HTTPErrorProcessor makes HTTPRedirectHandler work
        opener.add_handler(urllib2.HTTPErrorProcessor())
        opener.add_handler(urllib2.HTTPRedirectHandler())
    try:
        res = opener.open(HeadRequest(url))
    except urllib2.HTTPError, res:
        pass
    res.close()
    return dict(code=res.code, headers=res.info(), finalurl=res.geturl())