← 트렌딩
Tangerine Index는 ChatGPT 이후 나온 프로덕트와 사람들의 반응을 싣습니다.
cache-dit
github.com
A PyTorch-native inference engine with cache, parallelism, quantization and cpu offload for 100+ DiTs.
오픈소스
반응 (1)
비슷한 프로덕트
설명이 비슷한 순
ao
PyTorch native quantization for training and inference
- Hacker News
- 반응 없음
- GitHub
- 스타 3,023
gemma.cpp
lightweight, standalone C++ inference engine for Google's Gemma models.
- Hacker News
- 반응 없음
- GitHub
- 스타 7,079
Genie-TTS
GPT-SoVITS ONNX Inference Engine & Model Converter
- Hacker News
- 반응 없음
- GitHub
- 스타 1,840
tokenspeed
TokenSpeed is a speed-of-light LLM inference engine.
- Hacker News
- 반응 없음
- GitHub
- 스타 2,885
An RDMA/Infiniband Distributed Cache for Fast Inference and Training
A high-performance RDMA distributed file system for fast LLM Inference and GPU Training.
- Hacker News
- 13점
- GitHub
- 스타 47