[scrapy] 2024-04-27 圈点523
摘要:自动到达页面的底部命令而自动加载新的页面,可以用如下的JS命令自动到达页面的底部:window.scrollTo(0, document.body.scrollHeight)
部分页面会自动在浏览到页面底部时自动加载新的内容在底部,这个时候如果要采集到底部新加载的内容。而手动移动页面底部比较费时费力;可以用如下的JS命令自动到达页面的底部:
window.scrollTo(0, document.body.scrollHeight)
命令模型:window.scrollTo(x,y)
命令解析:移动到指定的位置坐标(x,y)。
需要注意的是自动下拉的高度的判断document.body.scrollHeight在不同的浏览器会有一些区别,选择合适的浏览器。