能否推荐几款合适的爬虫？
我这有个项目需求是这样的，从指定的网站内实时去查询是否有页面存在某些指定的关键字，如果有就记录下来。例如：我想通过爬虫爬去 新浪、网易门户网站内的所有页面，查看是否有“北京、天安门” 这样的关键字，如果有就记录下来。
有没有合适的爬虫可以推荐的。
香波泡泡球
10 years, 4 months ago
Answers
你可以用火车头采集器， http://www.locoy.com/
如果你想自己写爬虫，可以用基于爬虫框架开发，例如python的scrapy。
sohuren
answered 10 years, 3 months ago