java 如何用python爬取网页中隐藏的div内容?

如何用python爬取网页中隐藏的div内容?这是在JS中实现的。因此,下面的内容实际上是动态生成的,web爬虫会抓取静态页面。至于解决方案,互联网上有几种方法:一种是使用自动化测试工具,如selen

如何用python爬取网页中隐藏的div内容?

这是在JS中实现的。因此,下面的内容实际上是动态生成的,web爬虫会抓取静态页面。至于解决方案,互联网上有几种方法:一种是使用自动化测试工具,如selenium,它可以模拟点击和其他操作,但这实际上与爬虫程序有很大不同。

第二种方法是使用特定的类库在后端调用JS。Python有,但我不懂Java。

第三是找到相关页面的JS代码,分析相关请求URL,直接调整新URL,但是一般JS是加密压缩的,但是可以试试。