Python编程网页爬虫工具集有哪些?

1、Beautiful Soup 客观的说，Beautifu Soup不完满是一套爬虫东西，需求合作urllib运用，而是一套HTML / XML数据分析，清洗和获取东西。 Python-Goose Goose最早是用Java写得，后来用Scala重写，是一个Scala项目。

2、Crawley可以高速爬取对应网站的内容，支持关系和非关系数据库，数据可以导出为JSON、XML等。