当前位置: redice's Blog > TAG标签 > webscraping

日期:11-05-07 |  分类:Webscraping |  标签:webscrapingGoogle Cache |  0 Comments

最近遇到了个比较BT的网站,限制每个IP每天只能下载50个页面,多余50就会出现block提示信息。即便用30个代理一天也才只能下载1500个页面。 Richard给我推荐了两个解决方案: (1)从Google Cache中读取页面。 (2)利用Google Translation。 我首先尝试了方

阅读剩余部分...

    共1页/1条

redice's Blog  is powered by DedeCms |  Theme by Monkeii.Lee |  网站地图 |  本服务器由西安鲲之鹏网络信息技术有限公司友情提供

返回顶部