1. 博客
  2. 爬虫技术
  3. 帖子详情

中国土地市场爬虫——浏览器cookie验证(图片验证码)


中国土地市场爬虫——浏览器cookie验证(图片验证码),由于该网站自己把图片做完Base64,编码返回让我们的工作少了很多,一次性就把图片和cookie取得,我们只需要把图片通过图片技术识别就能进行请求。


通过我上篇博客;中国土地市场网爬虫——浏览器Cookie验证(简单) 讲述了中国土地市场网(www.landchina.com)的三种验证方式。

   该网站的三种防止爬虫策略

 

    1、通过cookie验证,三次跳转,两次取得cookie的简单安全策略。

    2、通过cookie验证,通过图片验证码取得cookie认证的高级安逸认识。

    3、通过woff字体对文章类容进行加密(土地公告)。


由于网站访问压力大,中国土地市场网就会切换成第二种方式图片验证方式。

当我们访问    https://www.landchina.com/ 就会出现图片验证的方式,由于该网站自己把图片做完Base64,编码返回让我们的工作少了很多,一次性就把图片和cookie取得,我们只需要把图片通过图片技术识别就能进行请求。方法很简单。

这里我们最终取得cookie中的 security_session_high_verify;然而三次跳转是security_session_mid_verify。两者就区分开来。

 

这里就不方便公布源码;,如果需要相关的代码和数据,可以联系作者。


TG微信号

可以一起做相关数据交流,和分析。


中国土地市场爬虫 图片 验证

关于我

甘三数据网创始人-陈磊(tngou); 7年的互联网老兵,精通WBE技术、爬虫技技术、应用数据处理、大数据开发、自然语言处理与分析; 专业从事数据收集整理多年,并且和大家一起分享应用数据;海量数据,无限未来。

查看名片 →
热门文章
最新动态

陈磊个人信息


TG微信号