This is an introductory course to understand the concepts and application methods of Vision-Language Models (VLM), and to practically run the LLaVA model in an Ollama-based environment, practicing the process of integrating it with MCP (Model Context Protocol).

This course covers the principles of multimodal models, Quantization, service, and integrated demo development, providing a balanced mix of theory and practice.

dreamingbumblebee

[VLM101] Creating a Multimodal Chatbot with Fine-tuning (feat.MCP)

실습 중심

비전-언어 모델(Vision-Language Model, VLM)의 개념과 활용 방법을 이해하고, 실제로 LLaVA 모델을 Ollama 기반 환경에서 실행하며 MCP(Model Context Protocol)와 연동하는 과정을 실습하는 입문자용 강의입니다.

이 강의는 멀티모달 모델의 원리, 경량화(Quantization), 서비스 및 통합 데모 개발까지 다루며, 이론과 실습을 균형 있게 제공합니다.

꿈꾸는범블비

입문

초급

중급이상

비전 트랜스포머

Vision Transformer

transformer

메타 대규모 언어 모델

Llama

Model Context Protocol

[VLM101] 파인튜닝으로 멀티모달 챗봇 만들기 (feat.MCP)

오리엔테이션

Vision Language Model (VLM) 이해

VLM Finetuning & Quantization 실습

Model Context Procotol (MCP) 이해와 PoC 데모 개발

채팅 데모 구현 실습 (Hands On)