通过我上篇博客;中国土地市场网爬虫——浏览器Cookie验证(简单) 讲述了中国土地市场网(www.landchina.com)的三种验证方式。
该网站的三种防止爬虫策略
1、通过cookie验证,三次跳转,两次取得cookie的简单安全策略。
2、通过cookie验证,通过图片验证码取得cookie认证的高级安逸认识。
由于网站访问压力大,中国土地市场网就会切换成第二种方式图片验证方式。
当我们访问 https://www.landchina.com/ 就会出现图片验证的方式,由于该网站自己把图片做完Base64,编码返回让我们的工作少了很多,一次性就把图片和cookie取得,我们只需要把图片通过图片技术识别就能进行请求。方法很简单。
这里我们最终取得cookie中的 security_session_high_verify;然而三次跳转是security_session_mid_verify。两者就区分开来。
这里就不方便公布源码;,如果需要相关的代码和数据,可以联系作者。
QQ号: 397713572 邮 箱: tngou@tngou.net QQ群: 277916496 手 机: 13518355196(同微信号)
可以一起做相关数据交流,和分析。
中国土地市场爬虫 图片 验证