rmax / scrapy-redis

Scrapy project based on dirbot to show how to use Twisted's adbapi to store the scraped data in MySQL.

DataBrewer Recipes Repository.

#爬虫框架#一款流行，高效，生态丰富的Python爬虫框架

#网络爬虫#Web app for Scrapyd cluster management, Scrapy log analysis & visualization, Auto packaging, Timer tasks, Monitor & Alert, and Mobile UI. Docs 文档 👉

强大的少样本语音转换与语音合成Web用户界面。

#大语言模型#微软生成式AI课程，12课时

Python binding for curl-impersonate fork via cffi. A http client that can impersonate browser tls/ja3/http2 fingerprints.

#计算机科学#We write your reusable computer vision tools. 💜

Bruno 是一款全新且创新的 API 客户端，旨在颠覆 Postman 和其他类似工具

#网络爬虫#🎭 Intelligent browser header & fingerprint generator

🕵️‍♂️ All-in-one OSINT tool for analysing any website

ILSpy 是一个.NET反编译器，支持PDB生成，ReadyToRun、Metadata

微信小程序反编译脚本备份

TikTok 发布/喜欢/合辑/直播/视频/图集/音乐；抖音发布/喜欢/收藏/收藏夹/视频/图集/实况/直播/音乐/合集/评论/账号/搜索/热榜数据采集工具/下载工具

#网络爬虫#Scrapy middleware to handle javascript pages using selenium

#计算机科学#Translate manga/image 一键翻译各类图片内文字 https://cotrans.touhou.ai/ (no longer working)

Visual scraping for Scrapy

#大语言模型#LlamaIndex is the leading framework for building LLM-powered agents over your data.

使用Python Web框架Django开发的一个B2C网上蔬果商城，包含用户、商品、购物车、订单等模块等等

#爬虫框架#python爬虫框架。简单易上手，自带在线编程和任务管理界面

一个跨平台的Rust GUI框架，受Elm启发

小红书笔记 | 评论爬虫、抖音视频 | 评论爬虫、快手视频 | 评论爬虫、B 站视频 ｜ 评论爬虫、微博帖子 ｜ 评论爬虫、百度贴吧帖子 ｜ 百度贴吧评论回复爬虫 | 知乎问答文章｜评论爬虫