2026 Github上爬虫框架开源项目推荐 | GitHub 中文社区

爬虫框架

该分类下的开源项目

scrapy/scrapy

Scrapy project@scrapy

Scrapy 是一个强大的 Python 网络爬虫框架，提供完整的工具集，用于高效、大规模地从网站提取结构化数据。

Python scraping crawling 框架爬虫

Python61.08 k

1 天前

#爬虫框架#一个快速优雅的Golang爬虫框架

Go scraper 框架爬虫 scraping

Go25.21 k

2 个月前

Roy Binux@binux

#爬虫框架#python爬虫框架。简单易上手，自带在线编程和任务管理界面

Python17 k

2 年前

R Max Espinoza@rmax

#爬虫框架#基于Scrapy和Redis的分布式爬虫框架

scrapy 爬虫 distributed redis

Python5.63 k

2 年前