问题:

网页上的翻页形式多种多样,需要翻页的网页如何采集?

 

回答:

1、点击【下一页】按钮,是最常见的翻页方式。

此类翻页解决方法请查看教程 翻页以采集多页数据

 

 

2、点击【加载更多】、【再显示20条】等按钮进行翻页。常见的网页有:搜狗微信首页、微博评论。

此类翻页解决方法请查看教程 特殊翻页:加载更多/滚动翻页/数字翻页

 

 

 

3、无翻页按钮,需不断向下滚动页面,加载出新数据。常见的网页有:百度图片搜索、今日头条首页。

此类翻页解决方法请查看教程 特殊翻页:加载更多/滚动翻页/数字翻页

 

 

4、无翻页按钮,只有一排数字,需点击数字进行翻页。

此类翻页解决方法请查看教程 特殊翻页:加载更多/滚动翻页/数字翻页