파이토치 한국 사용자 모임
layer-sharing
글
댓글
조회수
활동
MobileLLM: On-Device를 위한 1B 미만 크기의 언어 모델 최적화에 대한 연구 (feat. Meta)
읽을거리&정보공유
meta
,
paper
,
meta-ai
,
optimizing
,
small-llm
,
on-device
,
mobilellm
,
sub-billion-scale
,
layer-sharing
,
embedding-sharing
,
group-query-attention
,
swiglu
,
executorch
0
741
7월 10, 2024