用python写爬虫的时候，对于js的页面内容如何抓取

自己先搜了一下，发现要解析js就必须得用一个js解析器，或者直接使用webkit这样的网页解析，但都没有成熟的做法， 想问一下是否有开源的较成熟的解决方案？

python JavaScript 网页爬虫 webkit


share
金麟岂是池中物 10 years, 9 months ago

Answers

当然有。搜索关键词“Headless browser”

比如 http://phantomjs.org/


share
LinLin answered 10 years, 9 months ago

Your Answer

Ask Question
Related questions

python爬取页面元素失败

如何使用python运行一个webkit核心加载某个页面，从而监控到页面的所有HTTP请求

flask中view怎么return给js数据

使用simditor为网页上的textarea增加重新编辑功能，simditor图标不整齐

node-webkit开发桌面客户端如何不规则布局。

python模拟http请求，返回“浏览器不支持javascript，请设置您的浏览器开启ja...