롱타임노씨 blog
홈최근 포스트짧은 생각
Development10DevOps1Infrastructure1Life3
@간헐적 궁금증1
@나다운 부자 되기3
@바이브 코딩 생존 가이드7
@시스템 엔지니어가 해부하는 LLM의 모든 것1
태그
#바이브코딩#ai개발#개발방법론#경제적자유#기술부채#tdd#next.js#supabase#llm#트랜스포머#토크나이저#임베딩#어텐션#ffn#ollama#시스템엔지니어#미니멀리즘#파이어족#수도승#충분함+18
로그인
테마
홈최근 포스트짧은 생각
← 태그 목록

#트랜스포머

1개의 포스트

1. LLM은 텍스트를 어떻게 처리하는가

LLM이 텍스트 한 줄을 받아서 다음 토큰을 예측하기까지의 전체 과정을 4단계로 따라간다. 토크나이저, 임베딩, 트랜스포머 레이어, 출력까지 "OOM killer가 nginx를" 한 문장이 모델 안에서 겪는 여행.

DevOps·2026. 03. 03. 오후 10:00(수정됨)·3분·
6
·@시스템 엔지니어가 해부하는 LLM의 모든 것·
#LLM#트랜스포머#토크나이저+5