大家好,这真的很简单(我希望)。我正在使用 htmlagility pack 进行网络爬虫。那么,如果我输入 url,然后将我定向到新的 url,会发生什么情况,如何捕获该新的重定向 URL?
如果 htmlagilitypack 没有办法,有人可以建议另一种方法吗?
使用 Html Agility Pack 附带的 HtmlWeb 类,您可以在实际执行之前调整请求,如下所示:
HtmlWeb web = new HtmlWeb();
web.PreRequest = OnPreRequest;
HtmlDocument doc = web.Load("http://wwwblablahh.com");
private static bool OnPreRequest(HttpWebRequest request)
{
request.AllowAutoRedirect = true;
return true;
}
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)