网络爬虫如何爬取分页的页面数据
一般简单的网页通过get参数进行分页 这种情况就通过构造url来进行分页,有些网站是通过post参数来进行分页,那就用代码post的相应的参数给网站,比较复杂的ajax的分页需要通过抓包来实现。
可以找某宝中的楚江数据,可以代写爬虫,也可以直接让他们爬取数据。一般简单的网页通过get参数进行分页 这种情况就通过构造url来进行分页,有些网站是通过post参数来进行分页,那就用代码post的相应的参数给网站,比较复杂的ajax的分页需要通过抓包来实现。
可以找某宝中的楚江数据,可以代写爬虫,也可以直接让他们爬取数据。
还没有评论,来说两句吧...