์๊ฐ
Langfuse๋ LLM ๊ธฐ๋ฐ ์ ํ๋ฆฌ์ผ์ด์
์ ์ํ ์คํ ์์ค ๊ด์ธก ๋ฐ ๋ถ์ ์๋ฃจ์
์
๋๋ค. ์ด ๋๊ตฌ๋ ์ฃผ๋ก ์์ฐ ํ๊ฒฝ์์์ ์ฌ์ฉ์ ๋ชฉ์ ์ผ๋ก ํ์ง๋ง, ์ผ๋ถ ์ฌ์ฉ์๋ค์ ์์ ์ LLM ์ ํ๋ฆฌ์ผ์ด์
์ ๋ก์ปฌ ๊ฐ๋ฐ์๋ ์ฌ์ฉํฉ๋๋ค. (ee/
ํด๋๋ฅผ ์ ์ธํ๊ณ MIT ๋ผ์ด์ ์ค ์ ์ฉ)
๊ด์ธก(Observability): ์๊ฐ์ UI์์ ๋ณต์กํ ๋ก๊ทธ / Trace ํ์ ๋ฐ ๋๋ฒ๊น
Explore and debug complex logs & traces in a visual UI
๋ถ์(Analytics): ๋น์ฉ, ์ง์ฐ ์๊ฐ ๋ฐ ์๋ต ํ์ง ์ธก์ ๋ฐ ๊ฐ์
Measure & improve costs, latency and response quality
Langfuse ์๊ฐ
Langfuse์ ํน์ง
Langfuse๋ LLM ์์ ๊ตฌ์ถ๋ ์ ํ๋ฆฌ์ผ์ด์ ์ ์ค์ ์ ๋๊ณ ์์ต๋๋ค. ์ต๊ทผ์๋ ์์ด์ ํธ, ์ฐ๊ฒฐ๋ ํ๋กฌํํธ, ์๋ฒ ๋ฉ ๊ธฐ๋ฐ ๊ฒ์, LLM์ REPL ๋ฐ API ์ก์ธ์ค์ ๊ฐ์ ๋ง์ ์๋ก์ด ์ถ์ํ์ ์ผ๋ฐ์ ์ธ ๋ชจ๋ฒ ์ฌ๋ก๊ฐ ๋ฐ์ ํ์ต๋๋ค. ์ด๋ฌํ ๊ธฐ๋ฅ์ ์ ํ๋ฆฌ์ผ์ด์ ์ ๋์ฑ ๊ฐ๋ ฅํ๊ฒ ๋ง๋ค์ง๋ง, ๊ฐ๋ฐ์๋ค์ด ๊ทธ๋ค์ ์ ํ๋ฆฌ์ผ์ด์ ์ ํ์ง, ๋น์ฉ ๋ฐ ์ ๋ฐ์ ์ธ ๋๊ธฐ ์๊ฐ์ ์ด๋ป๊ฒ ๋ณํ๊ฐ ๋ฏธ์น๋์ง๋ฅผ ์์ ํ ์์ธกํ ์ ์๊ฒ ๋ง๋ญ๋๋ค. ๋ฐ๋ผ์ Langfuse๋ ์ด๋ฌํ ์ ํ๋ฆฌ์ผ์ด์ ์ ๋ชจ๋ํฐ๋งํ๊ณ ๋๋ฒ๊น ํ๋ ๋ฐ ๋์์ ์ฃผ๋ ๊ฒ์ ๋ชฉํ๋ก ํฉ๋๋ค.
๊ด์ธก(Observability) ๊ธฐ๋ฅ
Langfuse๋ ๊ด์ธก๋ ๋ฐ์ดํฐ๋ฅผ ํ์ํ๊ธฐ ์ํ ๊ด๋ฆฌ์ UI๋ฅผ ์ ๊ณตํฉ๋๋ค. LLM ์ฑ ์คํ์ ์ค์ฒฉ ๋ ๋ทฐ; ๋๊ธฐ ์๊ฐ, ๋น์ฉ, ์ ์์ ๋ํ ์์ธํ ์ ๋ณด๋ฅผ ํฌํจํฉ๋๋ค.
๋ํ, ์ฌ์ฉ์ ํผ๋๋ฐฑ๋ณ๋ก ์คํ ํ์ ์ ๋ถํ ํ์ฌ ์์ฐ ๋ฌธ์ ๋ฅผ ์๋ณํฉ๋๋ค.
๋ถ์(Analytics) ๊ธฐ๋ฅ
-
์๋ ๋ด์ฉ์ ๋ํ ๋ฆฌํฌํ
- ๋ชจ๋ธ๋ณ ํ ํฐ ์ฌ์ฉ๋
- Trace ์ฉ๋
- ์ ์(Score) / ํ๊ฐ(Eval)
-
์๋ ๊ธฐ์ค๋ค๋ก ์ธ๋ถํ(break-down)
- ์ฌ์ฉ์๋ณ
- ๋ฆด๋ฆฌ์ค๋ณ
- ํ๋กฌํํธ/์ฒด์ธ ๋ฒ์ ๋ณ
- ํ๋กฌํํธ/์ฒด์ธ ์ ํ๋ณ
- ์๊ฐ๋ณ
๋ ์์๋ณด๊ธฐ
ํํ์ด์ง
๋ฐ๋ชจ (๊ณ์ ํ์)
๋ฌธ์
GitHub ์ ์ฅ์
https://github.com/langfuse/langfuse?utm_source=tldrai