- Attention: 문맥에 따라 집중할 단어를 결정하는 방식
- Encoder: input 를 압축 데이터(context vector)로 변환 및 출력
- Decoder: 압축 데이터(context vector)를 입력받아 output data로 출력
'LLM' 카테고리의 다른 글
| Vector Search (1) | 2024.02.09 |
|---|---|
| 프롬프트 엔지니어링 (0) | 2024.02.09 |
| Word Embedding (0) | 2024.01.20 |
| 평가지표 (0) | 2024.01.19 |
| 개념 (0) | 2024.01.17 |