Dao-AILab / flash-attention

大模型Grok-1开源

Open-Sora： 完全开源的高效复现类Sora视频生成方案

#大语言模型#A high-throughput and memory-efficient inference and serving engine for LLMs

#大语言模型#本地化搭建和运行 Llama2 和其他大模型

This project aim to reproduce Sora (Open AI T2V model), we wish the open source community contribute to this project.

#大语言模型#Unified Efficient Fine-Tuning of 100+ LLMs & VLMs (ACL 2024)

#计算机科学#DeepSpeed Chat: 一键式RLHF训练，让你的类ChatGPT千亿大模型提速省钱15倍

#自然语言处理#为 Jax、PyTorch 和 TensorFlow 打造的先进的自然语言处理

Devika is an Agentic AI Software Engineer that can understand high-level human instructions, break them down into steps, research relevant information, and write code to achieve the given objective. D...

#自然语言处理#通义千问-7B（Qwen-7B） 是阿里云研发的通义千问大模型系列的70亿参数规模的模型

Mamba SSM architecture

Hackable and optimized Transformers building blocks, supporting a composable construction.

Development repository for the Triton language and compiler

一个基于 Gradio 的 Web UI，用于运行像 LLaMA、llama.cpp、GPT-J、Pythia、OPT 和 GALACTICA 这样的大型语言模型。

LangChain 是一个用于构建基于LLM应用（大型语言模型）的Python库。

LLaMA模型的推理代码

#大语言模型#🙌 OpenHands: Code Less, Make More

#大语言模型#🤗 PEFT: State-of-the-art Parameter-Efficient Fine-Tuning.

#大语言模型#LlamaIndex is the leading framework for building LLM-powered agents over your data.