首页 > spider

今天爬数据真是爬的绝望,下午2点多开始写到下班,还主动加了一小时班,然后回到家又码到10点。终于爬出来了。   用java自带的 HttpURLConnection 模拟请求,返回的都是乱码。用Jsoup也是一样的。 用postman测了几下,结果一致。 应该是做了什么验证 ,导致代码伪装他的 ajax 请求是不会返回正确数据的。   ...

Read more »

阅读全文 »

  以bangumi动画为例= = 成果,总共四千多个(最后一名是雷锋的故事) 这个图是我给扒下来的数据保存到mysql数据库了在导出的excel文件 还有用IO流输出的txt文件和DOM转换的xml文件就懒得放了 废话不多说,上代码   Anime类 private int id;//排名 private String name;//名字 private String oldName;//原名 pr ...

Read more »

阅读全文 »
EA PLAYER &

历史记录 [ 注意:部分数据仅限于当前浏览器 ]清空

      00:00/00:00