RECAP WORKSHOP #4: LARGE LANGUAGE MODEL (LLM), RAG VÀ LoRA

🧠 RECAP WORKSHOP #4: LARGE LANGUAGE MODEL (LLM), RAG VÀ LoRA

Chiều Chủ nhật ngày 21/06/2026, Khoa Công nghệ Phần mềm đã tổ chức thành công Workshop #4 thuộc chuỗi seminar:

"TỪ NEURAL NETWORK ĐẾN LLM: NẮM BẮT AI HIỆN ĐẠI ĐỂ KHÔNG TỤT HẬU"

Tại workshop, TS. Đỗ Trọng Hợp đã nhắc lại những kiến thức nền tảng về Attention, Transformer, BERT, BART, GPT đã giới thiệu ở buổi workshop trước. Sau đó, nội dung trọng tâm của buổi workshop là Large Language Model (LLM), Retrieval-Augmented Generation (RAG) và LoRA – những công nghệ đang đóng vai trò trung tâm trong việc xây dựng các hệ thống AI hiện đại được giới thiệu và minh họa.

📌 Trong buổi học, sinh viên đã được tìm hiểu cách các mô hình ngôn ngữ lớn hoạt động, từ quá trình tiền huấn luyện (pretraining), sinh văn bản cho đến các giới hạn thường gặp như kiến thức lỗi thời hoặc hiện tượng hallucination.

✨ Workshop tiếp tục giới thiệu Retrieval-Augmented Generation (RAG) – kỹ thuật cho phép kết hợp mô hình ngôn ngữ với nguồn dữ liệu bên ngoài nhằm nâng cao độ chính xác của câu trả lời. Qua đó, sinh viên đã hiểu được cách các hệ thống chatbot doanh nghiệp, trợ lý học tập và hệ thống hỏi đáp thông minh có thể truy xuất tài liệu trước khi sinh câu trả lời thay vì chỉ dựa trên kiến thức đã được huấn luyện sẵn trong mô hình.

🚀 Bên cạnh đó, TS. Đỗ Trọng Hợp cũng giới thiệu LoRA (Low-Rank Adaptation) – một phương pháp fine-tuning hiệu quả giúp tùy biến các mô hình ngôn ngữ lớn cho từng lĩnh vực cụ thể với chi phí thấp hơn đáng kể so với việc huấn luyện lại toàn bộ mô hình.

Sinh viên được minh họa cách tùy chỉnh mô hình BERT và LLM dùng kỹ thuật LoRA áp dụng cho bài toán phân tích bình luận theo khía cạnh và thấy được hiệu quả của việc tùy chỉnh mô hình so với dùng các mô hình gốc.

👩‍💻 Workshop #4 đánh dấu bước chuyển từ việc tìm hiểu các kiến trúc nền tảng của AI như Transformer và GPT sang việc xây dựng các hệ thống AI hoàn chỉnh dựa trên LLM – một trong những hướng phát triển quan trọng nhất của ngành công nghiệp AI hiện nay.

Khoa Công nghệ Phần mềm xin cảm ơn các bạn sinh viên đã tham gia và đồng hành cùng chuỗi workshop.

🚀 Trong các buổi tiếp theo, chuỗi workshop sẽ tiếp tục với các chủ đề như AI Agent, Vision-Language Model (VLM), AI đa phương thức (Multimodal AI) và các hệ thống AI tự trị.

#UIT #KTPM #TTĐPT #TTPT #AI #LLM #RAG #LoRA #GenerativeAI