Vùng Gốc4/4 đã ra mắt

Nơi mọi thứ bắt đầu: mỗi từ là một mũi tên, mỗi phép tính là một cách bẻ cong không gian.

1. 01→Vectơ — Ngôn ngữ của AI Miễn phí
2. 02[ ]Ma trận — Phép biến đổi không gian Miễn phí
3. 03a·bTích vô hướng Miễn phí
4. 04eˣSoftmax Miễn phí

Vùng Xuôi Dòng3/12 đã ra mắt

Theo chân một câu chữ đi xuôi qua model, từ lúc bị cắt thành mảnh đến khi đoán ra từ tiếp theo.

1. 05BPETokenization & BPE — Từ chữ thành số Miễn phí
2. 06✦Embedding — Bầu trời của từ Miễn phí
3. 07∿Positional Encoding — Thứ tự của từ Miễn phí
4. 08QKVQ, K, V — Bộ ba của Attention Xem sớm 10.000đ
5. 09√dScaled Dot-Product Attention — Công thức cốt lõi20:00 thứ Sáu, 9/10
6. 10×hMulti-Head Attention & Causal Masking20:00 thứ Sáu, 16/10
7. 11ReLUNeuron & Activation — Vì sao cần phi tuyến20:00 thứ Sáu, 23/10
8. 12σ²Feed-Forward Network & LayerNorm20:00 thứ Sáu, 30/10
9. 13x+fResidual Connection & Transformer Block hoàn chỉnh20:00 thứ Sáu, 6/11
10. 14P(w)Language Modeling — Đoán từ tiếp theo20:00 thứ Sáu, 13/11
11. 15w→wAutoregressive Generation — AI viết văn20:00 thứ Sáu, 20/11
12. 16T°Temperature, Top-k, Top-p — Nghệ thuật chọn từ20:00 thứ Sáu, 27/11

Vùng Ngược Dòng0/8 đã ra mắt

Quay ngược con đường vừa đi: đo model sai bao nhiêu, rồi lần theo con dốc để sửa từng con số.

1. 17−logEntropy & Cross-Entropy20:00 thứ Sáu, 4/12
2. 18KLKL Divergence & Perplexity20:00 thứ Sáu, 11/12
3. 19d/dxĐạo hàm & Chain Rule20:00 thứ Sáu, 18/12
4. 20∇Gradient — Hướng đi của AI20:00 thứ Sáu, 25/12
5. 21∂LBackpropagation — AI học từ sai lầm20:00 thứ Sáu, 1/1
6. 22↘Gradient Descent & Learning Rate20:00 thứ Sáu, 8/1
7. 23AdamSGD, Momentum & Adam20:00 thứ Sáu, 15/1
8. 240.5ⁿVanishing / Exploding Gradient20:00 thứ Sáu, 22/1

Vùng Văn Minh0/9 đã ra mắt

Nơi một model biết đoán chữ trở thành trợ lý: biết nghe lời, biết suy nghĩ, chạy được trên máy bạn.

1. 25SFTFine-tuning & SFT20:00 thứ Sáu, 29/1
2. 26RLHFRLHF & DPO — Dạy AI "ngoan"20:00 thứ Sáu, 5/2
3. 27CoTReasoning — AI biết "suy nghĩ"20:00 thứ Sáu, 12/2
4. 28A·BLoRA — Fine-tune tiết kiệm20:00 thứ Sáu, 19/2
5. 294bitQuantization — Chạy LLM trên laptop20:00 thứ Sáu, 26/2
6. 30KVKV Cache & Context dài20:00 thứ Sáu, 5/3
7. 31MoETransformer hiện đại — từ GPT-3 đến 202620:00 thứ Sáu, 12/3
8. 32logScaling Laws — To hơn là giỏi hơn?20:00 thứ Sáu, 19/3
9. 33★Tổng kết — Từ Số 0 Đến Transformer20:00 thứ Sáu, 26/3