博客
关于我
万物皆可爬系列查看翻页翻到最后是什么
阅读量:342 次
发布时间:2019-03-04

本文共 127 字,大约阅读时间需要 1 分钟。

山的尽头是什么?山的尽头还是山。
一直很好奇,某个网站如果一直往下翻下去会出现什么?
效果如下
在这里插入图片描述
思路:
1.打开网页->2. 往下滚动->3. 等待加载按钮出现->4.点击。继续 234循环
在这里插入图片描述
源码


技术本无罪,明镜亦非台。既然可以翻页,就能爬取全部数据。

转载地址:http://spjr.baihongyu.com/

你可能感兴趣的文章
LWIP协议socket通信设置发送接收超时等待时间
查看>>
RT -Thread Studio开发环境下使用W5500做TCP客户端
查看>>
Warning: The core is locked up的解决办法
查看>>
奔涌吧 后浪!!! 哔哩哔哩 何冰
查看>>
【JVM系列】JDK 内置工具
查看>>
JAVA 基础与进阶系列索引 -- JDK 源码学习系列 -- 并发
查看>>
网络编程系列索引 -- Linux 网络编程索引
查看>>
网络编程系列索引 -- JAVA 网络编程系列
查看>>
【JDK源码分析系列】ArrayBlockingQueue源码分析
查看>>
【网络通信 -- 直播】音视频常见封装格式 -- MEPG2 TS
查看>>
【网络通信 -- 直播】音视频常见封装格式 -- FLV
查看>>
【C/C++基础进阶系列】C/C++ 对象模型 -- 类基础知识总结(三)
查看>>
【C/C++基础进阶系列】C/C++ 对象模型 -- 对象语义
查看>>
【Linux网络编程】使用eclipse调试libevent和开发libevent应用程序
查看>>
基于FPGA的HDMI信号采样原理
查看>>
Spring 与使用STOMP消息
查看>>
AngularJS ng-class、ng-style
查看>>
Linux 查看系统语言
查看>>
十 一、C语言创建桌面程序:单选按钮、复选框和分组框控件
查看>>
Java基本查找算法--顺序查找
查看>>