怎样使用python爬取google scholar的内容

一年前我爬过scholar 当时公司会换IP且请求间有sleep所以成功爬到几百万数据。另:requests你值得拥有
■网友
贴一张图。
怎样使用python爬取google scholar的内容

需要翻墙,然后在代码里面挂个代理,基本可行。
【怎样使用python爬取google scholar的内容】 如果需要大规模爬数据需要很多trick,动态ip,sleep之类的。


    推荐阅读