xgoogle python 库不再工作了?

2024-01-05

我在我的一个项目中使用了 xgoogle python 库。直到最近它都运行良好。我没有得到以前得到的结果集。如果使用过 Peter Krummins 编写的这个库的人遇到类似的情况,你能建议一个解决方法吗?


The 的存在BeautifulSoup.py https://github.com/pkrumins/xgoogle/tree/master/xgoogle该库使用的提示网页抓取 http://en.wikipedia.org/wiki/Web_scraping得到它的结果。

一个常见的问题是,当被抓取的页面的设计/布局发生变化时,它很容易崩溃。您看到的问题似乎与谷歌最近推出的新搜索结果布局相符。

另一个问题是,它常常违反被抓取网站的服务条款。并根据第 5.3 点谷歌服务条款 http://www.google.com/accounts/TOS它实际上是:

您明确同意不通过任何自动方式(包括使用脚本或网络爬虫)访问(或尝试访问)任何服务 [...]

更好的主意是使用自定义搜索API http://code.google.com/apis/customsearch/v1/overview.html.

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

xgoogle python 库不再工作了? 的相关文章

随机推荐