|
TileKernels: DeepSeek AI가 공개한, LLM 연산을 위한 고성능 TileLang 기반 GPU 커널 라이브러리
|
|
0
|
138
|
6월 24, 2026
|
|
turbovec: TurboQuant 알고리즘을 Rust로 구현한 학습이 필요 없는 벡터 인덱스
|
|
0
|
619
|
5월 21, 2026
|
|
ExecuTorch: 마이크로컨트롤러부터 스마트폰까지 PyTorch 모델을 그대로 배포하기 위한 통합 PyTorch 네이티브 엣지 AI 배포 프레임워크 (feat. Meta, MLSys 2026)
|
|
0
|
210
|
5월 18, 2026
|
|
cider: Apple Silicon M5의 INT8 TensorOps로 LLM prefill 속도를 끌어올리는 MLX W8A8 추론 SDK
|
|
0
|
200
|
5월 11, 2026
|
|
Club-3090: RTX 3090 GPU에서 vLLM, llama.cpp, SGLang으로 LLM을 서빙하는 커뮤니티 레시피 모음
|
|
0
|
336
|
5월 4, 2026
|
|
eLLM: CPU에서 GPU보다 빠른 대규모 언어 모델 추론을 목표로 하는 경량 추론 엔진
|
|
0
|
523
|
5월 4, 2026
|
|
turboquant-pytorch: Google의 TurboQuant를 PyTorch로 처음부터 직접 구현한 LLM KV 캐시 양자화 라이브러리
|
|
2
|
3220
|
4월 3, 2026
|
|
flash-moe: 순수 C와 Metal로 구현한, M3 Max 맥북 프로에서 397B 파라미터 MoE 모델을 실행하는 고성능 추론 엔진
|
|
0
|
2318
|
3월 23, 2026
|
|
Quanto, Hugging Face에서 개발한 PyTorch 기반의 양자화 도구(Quantization Toolkit)
|
|
0
|
580
|
3월 25, 2024
|
|
양자화된 모델 추론 시 입출력 데이터 형식
|
|
4
|
521
|
2월 14, 2024
|