HttpBrowserCapability.Crawler 属性(http://msdn.microsoft.com/en-us/library/aa332775(VS.71).aspx) 工作?我需要检测合作伙伴的自定义爬网程序,并且此属性返回 false。
我在哪里/如何添加他的用户代理以便该属性返回 true?除了创建自己的用户代理检测机制之外还有其他方法吗?
这一切都是由作为 .NET 框架一部分的默认 browsercaps 声明驱动的。
要设置此特定爬虫,您需要将自定义 browserCaps 部分添加到 web.config 以将其标识为爬虫。
关于如何进行此操作的 MSDN 文档有很好的记录,这是一个链接。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)