Inference Engineering: bản đồ toàn cảnh
Inference engineering là gì, vì sao 2026 là năm đầu tiên thế giới chi cho inference nhiều hơn training, và bản đồ 5 tầng từ hardware tới gateway — kèm lộ trình đọc 67 bài của chuỗi.
17 phút đọc
4 bài viết
Inference engineering là gì, vì sao 2026 là năm đầu tiên thế giới chi cho inference nhiều hơn training, và bản đồ 5 tầng từ hardware tới gateway — kèm lộ trình đọc 67 bài của chuỗi.
RLHF - Reinforcement Learning from Human Feedback: ba giai đoạn huấn luyện LLM, reward model và thuật toán PPO.
Phân tích kiến trúc mô hình Llama: RMSNorm, RoPE, SwiGLU và Grouped Query Attention.
Giải thích LoRA và QLoRA: hai kỹ thuật fine-tuning hiệu quả tham số cho mô hình ngôn ngữ lớn.