一款流行,高效,生态丰富的Python爬虫框架


 
Loading

该仓库已收录但尚未编辑。项目介绍及使用教程请前往 GitHub 阅读 README


0 条讨论

登录后发表评论

关于

Scrapy, a fast high-level web crawling & scraping framework for Python.

创建时间
是否国产

-

  修改时间

2025-09-28T08:16:47Z


语言

  • Python99.8%
  • HTML0.1%
  • Roff0.1%
  • 其他0.01%

scrapy 的其他开源项目

A service daemon to run Scrapy spiders

Python3.06 k
1 个月前

A pure-python HTML screen-scraping library

HTML1.88 k
3 年前

Scrapy project to scrape public web directories (educational) [DEPRECATED]

Python1.63 k
8 年前

This is a sample Scrapy project for educational purposes

Python1.34 k
2 年前

您可能感兴趣的

大模型Grok-1开源

Python50.51 k
1 年前
fastapi/fastapi

#Web框架#FastAPI 是一个简单易学,高性能的 Python Web框架

Python90.35 k
2 天前

小红书笔记 | 评论爬虫、抖音视频 | 评论爬虫、快手视频 | 评论爬虫、B 站视频 | 评论爬虫、微博帖子 | 评论爬虫、百度贴吧帖子 | 百度贴吧评论回复爬虫 | 知乎问答文章|评论爬虫

Python37.59 k
2 天前

Open-Sora: 完全开源的高效复现类Sora视频生成方案

Python27.28 k
5 个月前
Python70.49 k
14 天前

Devika is now Opcode

Python19.5 k
8 天前
Python63.94 k
39 分钟前
Jupyter Notebook99.67 k
8 小时前

#计算机科学#PyTorch 是一个开源的Python机器学习库,基于Torch,底层由C++实现。

Python93.68 k
4 小时前

上传截图通过GPT生成HTML/Tailwind/JavaScript代码

Python70.95 k
2 个月前

#Web框架#强大的Python Web框架,可以快速开发安全和可维护的网站

Python85.31 k
4 小时前

一个简单、优雅的Python HTTP网络库

Python53.34 k
24 天前
fastapi/full-stack-fastapi-template

#前端开发#现代化、全栈 Web 应用模板。使用FastAPI、React, SQLModel, PostgreSQL, Docker, GitHub Actions 等技术。

TypeScript38.13 k
2 天前

Pandas 是一个灵活、强大的Python数据操纵、数据分析库,提供标注过的数据结构类似于 R 语言的data.frame 对象、统计函数等等

Python46.73 k
2 小时前

#大语言模型#本地化搭建和运行 Llama2 和其他大模型

Go153.5 k
5 小时前
SeleniumHQ/selenium

#自动化#Selenium 是一个模拟用户与浏览器交互,执行自动化任务的工具和库,提供Java、Python、C#、Ruby、JavaScript、Kotlin等编程接口

Java33.37 k
5 小时前
Lissy93/web-check

🕵️‍♂️ All-in-one OSINT tool for analysing any website

TypeScript26.58 k
2 个月前

#爬虫框架#python爬虫框架。简单易上手,自带在线编程和任务管理界面

Python16.9 k
1 年前
yt-dlp/yt-dlp

一个功能丰富的命令行式的音频/视频下载器,支持上千个网站。

Python129.49 k
3 天前