Đây là khóa học dành cho người mới bắt đầu để hiểu khái niệm và cách ứng dụng của Mô hình Thị giác-Ngôn ngữ (Vision-Language Model, VLM), và thực hành quá trình chạy mô hình LLaVA trong môi trường dựa trên Ollama và liên kết với MCP (Model Context Protocol).

Khóa học này bao gồm nguyên lý của mô hình đa phương thức, lượng tử hóa (Quantization), dịch vụ và phát triển demo tích hợp, cung cấp cả lý thuyết và thực hành một cách cân bằng.

dreamingbumblebee

[VLM101] Tạo chatbot đa phương tiện bằng fine-tuning (feat.MCP)

실습 중심

This is an introductory course to understand the concepts and application methods of Vision-Language Models (VLM), and to practically run the LLaVA model in an Ollama-based environment, practicing the process of integrating it with MCP (Model Context Protocol).

This course covers the principles of multimodal models, Quantization, service, and integrated demo development, providing a balanced mix of theory and practice.

입문

초급

중급이상

비전 트랜스포머

Vision Transformer

transformer

메타 대규모 언어 모델

Llama

Model Context Protocol

[VLM101] Creating a Multimodal Chatbot with Fine-tuning (feat.MCP)

Orientation

Understanding Vision Language Model (VLM)

VLM Finetuning & Quantization Lab

Understanding Model Context Protocol (MCP) and PoC Demo Development

Chat Demo Implementation Practice (Hands On)