GitHub 中文社区
回车: Github搜索    Shift+回车: Google搜索
论坛
排行榜
趋势
登录

©2025 GitHub中文社区论坛GitHub官网网站地图GitHub官方翻译

  • X iconGitHub on X
  • Facebook iconGitHub on Facebook
  • Linkedin iconGitHub on LinkedIn
  • YouTube iconGitHub on YouTube
  • Twitch iconGitHub on Twitch
  • TikTok iconGitHub on TikTok
  • GitHub markGitHub’s organization on GitHub
scrapy

scrapy / scrapy

星标57.98 k
复刻11.01 k

一款流行,高效,生态丰富的Python爬虫框架


问题 官网
 
Loading

该仓库已收录但尚未编辑。项目介绍及使用教程请前往 GitHub 阅读 README


0 条讨论

登录后发表评论

关于

Scrapy, a fast high-level web crawling & scraping framework for Python.

scrapy.org
Pythonscrapingcrawling框架爬虫Hacktoberfestweb-scrapingweb-scraping-python
创建时间

2010-02-22

是否国产

-

  修改时间

2025-08-18T15:00:23Z

Readme
相关推荐

语言

  • Python99.8%
  • HTML0.1%
  • Roff0.1%
  • 其他0.01%

scrapy 的其他开源项目

Scrapy project
scrapyd
Scrapy project@scrapy

A service daemon to run Scrapy spiders

Python3.06 k
6 天前
Scrapy project
scrapely
Scrapy project@scrapy

A pure-python HTML screen-scraping library

HTML1.88 k
3 年前
Scrapy project
dirbot
Scrapy project@scrapy

Scrapy project to scrape public web directories (educational) [DEPRECATED]

Python1.63 k
8 年前
Scrapy project
quotesbot
Scrapy project@scrapy

This is a sample Scrapy project for educational purposes

Python1.34 k
2 年前

您可能感兴趣的

grok-1
@xai-org

大模型Grok-1开源

Python50.4 k
1 年前
fastapi/fastapi
fastapi
@fastapi

#Web框架#FastAPI 是一个简单易学,高性能的 Python Web框架

PythonJSONswagger-uiredocstarlette
Python88.5 k
11 小时前
MediaCrawler
@NanmiCoder

小红书笔记 | 评论爬虫、抖音视频 | 评论爬虫、快手视频 | 评论爬虫、B 站视频 | 评论爬虫、微博帖子 | 评论爬虫、百度贴吧帖子 | 百度贴吧评论回复爬虫 | 知乎问答文章|评论爬虫

Python35.92 k
6 小时前
Open-Sora
@hpcaitech

Open-Sora: 完全开源的高效复现类Sora视频生成方案

Python27.03 k
4 个月前
Vinta Chen
awesome-python
Vinta Chen@vinta

Python精选

Awesome ListsPythoncollectionspython-librarypython-framework
Python255.59 k
1 个月前
pallets/flask
The Pallets Projects
flask
The Pallets Projects@pallets

#Web框架#简单易用的,Python微服务框架

PythonFlaskwsgiweb-frameworkwerkzeug
Python70.19 k
2 个月前
devika
@stitionai

Devika is an Agentic AI Software Engineer that can understand high-level human instructions, break them down into steps, research relevant information, and write code to achieve the given objective. D...

Python19.4 k
1 年前
OpenHands
@All-Hands-AI

#大语言模型#🙌 OpenHands: Code Less, Make More

agent人工智能大语言模型ChatGPTclaude-ai
Python62.25 k
4 小时前
microsoft/generative-ai-for-beginners
Microsoft
generative-ai-for-beginners
Microsoft@microsoft

#大语言模型#微软生成式AI课程,12课时

人工智能ChatGPTdall-egenerativeaigpt
Jupyter Notebook95.13 k
12 小时前
pytorch
pytorch
@pytorch • Meta

#计算机科学#PyTorch 是一个开源的Python机器学习库,基于Torch,底层由C++实现。

神经网络autogradgpuNumPy深度学习
Python92.47 k
27 分钟前
screenshot-to-code
@abi

上传截图通过GPT生成HTML/Tailwind/JavaScript代码

Python70.74 k
22 天前
Django
django
Django@django

#Web框架#强大的Python Web框架,可以快速开发安全和可维护的网站

PythonDjangoWeb框架对象关系映射(ORM)
Python84.61 k
1 天前
requests
@psf

一个简单、优雅的Python HTTP网络库

PythonHTTPforhumansrequestspython-requests
Python53.18 k
1 天前
fastapi/full-stack-fastapi-template
full-stack-fastapi-template
@fastapi

#前端开发#现代化、全栈 Web 应用模板。使用FastAPI、React, SQLModel, PostgreSQL, Docker, GitHub Actions 等技术。

PythonJSONJSON SchemaDockerPostgreSQL
TypeScript36.91 k
1 小时前
pandas
pandas
pandas@pandas-dev

Pandas 是一个灵活、强大的Python数据操纵、数据分析库,提供标注过的数据结构类似于 R 语言的data.frame 对象、统计函数等等

数据分析pandasflexiblealignmentPython
Python46.33 k
2 小时前
ollama
@ollama

#大语言模型#本地化搭建和运行 Llama2 和其他大模型

llama大语言模型llama2Go
Go150.43 k
21 小时前
SeleniumHQ/selenium
Selenium
selenium
Selenium@SeleniumHQ

#自动化#Selenium 是一个模拟用户与浏览器交互,执行自动化任务的工具和库,提供Java、Python、C#、Ruby、JavaScript、Kotlin等编程接口

SeleniumwebdriverJavaRubyPython
Java32.98 k
5 小时前
Lissy93/web-check
web-check
@Lissy93

🕵️‍♂️ All-in-one OSINT tool for analysing any website

OSINT隐私安全sysadmin
TypeScript26.14 k
15 天前
Roy Binux
pyspider存档
Roy Binux@binux

#爬虫框架#python爬虫框架。简单易上手,自带在线编程和任务管理界面

Python爬虫
Python16.76 k
1 年前
yt-dlp/yt-dlp
yt-dlp
@yt-dlp

一个功能丰富的命令行式的音频/视频下载器,支持上千个网站。

youtube-dlPythonsponsorblockyt-dlpyoutube-downloader
Python122.88 k
2 天前