爬取网页中的动态数据

每一次异步加载都会在netwo中加载一项,异步加载和普通的加载方式一样,普通的加载方式是点击下一页,异步加载是在向下拖动时候加载,加载的还是一个新的网页,外在的表现就是在保存原先的加载的网页的基础上,加载后来的网页。从network中的XHR可以查看相关的respond和requares,从respond中的url即可得到相关的网页,再观察url的规律即可得到想要爬取的网页地址。


最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容