๋ชจ๋๋ฅผ ์ํ ๋๊ท๋ชจ ์ธ์ด ๋ชจ๋ธ LLM(Large Language Model) Part 1 - Llama 2 Fine-Tuning ํด๋ณด๊ธฐ
LLM(Large Language Model)์ ๊ธฐ์ด ๊ฐ๋ ๋ถํฐ ๊ณ ์ฑ๋ฅ LLM์ธ Llama 2 ๋ชจ๋ธ์ ๋ด๊ฐ ์ํ๋ ๋ฐ์ดํฐ์ ์ Fine-Tuningํ๋ ๋ฐฉ๋ฒ๊น์ง ์ฐจ๊ทผ์ฐจ๊ทผ ํ์ตํฉ๋๋ค.
์๊ฐ์ 1,363๋ช
๋์ด๋ ์ค๊ธ์ด์
์๊ฐ๊ธฐํ ๋ฌด์ ํ

- ๋ฏธํด๊ฒฐ
LLM ๊ธฐ๋ฐ ๋ฌธ์ ์ ์ฌ๋ ์ฐ์ถ ๊ฐ๋ฅ์ฑ ๊ด๋ จ ๋ฌธ์๋๋ฆฝ๋๋ค
์๋ ํ์ธ์.LLM ๊ด๋ จ ๊ฐ์ ์ ๋ฃ๊ณ ์์ต๋๋ค. ์ค๋ฌด ์ ์ฉ์ ๋ง์ ๋์์ด ๋๊ณ ์์ด ๊ฐ์ฌ๋๋ฆฝ๋๋ค.๊ฐ์ ๋ด์ฉ๊ณผ ์ง์ ์ ์ธ ์ฐ๊ณ๋ ์๋์ง๋ง, ๊ฐ์๋ฅผ ๋ฃ๋ ์ค ๊ถ
๋ฅ๋ฌ๋pytorchchatgptllmllamadwkim401
ใป
4๋ฌ ์
0
99
1
- ๋ฏธํด๊ฒฐ
ใ6. LLM ์ฉ์ด ์ ๋ฆฌ - ์ธ์ปจํ ์คํธ ๋ฌ๋(In-context learning)ใ์ ๋ํ ๋ฌธ์
์๋ ํ์ธ์? "6. LLM ์ฉ์ด ์ ๋ฆฌ - ์ธ์ปจํ ์คํธ ๋ฌ๋(In-context learning)"์ ๋ํ ์ง๋ฌธ์ ๋๋ค. <p style=
๋ฅ๋ฌ๋pytorchchatgptllmllama๋ฐํฌ์
ใป
5๋ฌ ์
0
318
2
- ๋ฏธํด๊ฒฐ
trainer.train() ์คํํ๋๋ฐ API key๋ฅผ ์ ๋ ฅํ๋ผ๊ณ ํฉ๋๋ค. ใ
trainer = Trainer( model=model, args=training_args, train_dataset=tokenized_bionlp["train"],
๋ฅ๋ฌ๋pytorchchatgptllmllama์์ฑ์ ์์
ใป
7๋ฌ ์
0
124
2
- ๋ฏธํด๊ฒฐ
open api ์ด์ฉ ๋ฐฉ๋ฒ
OpenAI API๋ฅผ ์ด์ฉํ ์๋ฒ ๋ฉ(Emedding)์ 7๊ฐ์ง ํ์ฉ์ฌ๋ก(Use cases) ์ดํด๋ณด๊ธฐ (1/4)<p style
llm์ด๋
ใป
0
180
2
- ๋ฏธํด๊ฒฐ
Llama vision ์ด๋ฏธ์ง ํด์๋
์๋ ํ์ธ์, ์ง๊ธ ํ๋ฒ llama3.2 vision์ ๋ค๋ฅธ ์ด๋ฏธ์ง์ ํ ์คํธ๋ฅผ ํด๋ณด๊ณ ์๋๋ฐ, vision์ด ์ธ์ํ๊ธฐ ์ํ ์ต์ ์ด๋ฏธ์ง ์ฌ์ด์ฆ๋ ํด์๋๊ฐ ์๋์? <a target="_blank" rel="noopener noreferrer nofollow"
๋ฅ๋ฌ๋pytorchchatgptllmllama์ก์ ์ค
ใป
0
191
1
- ๋ฏธํด๊ฒฐ
API ํน์ ์ง๋ ๋ฒ
์๋ ํ์ธ์ ์ ์๋1. GPT๊ฐ ์ง๋ฌธ์ ๋ํ ์ ์ ํ ๋ต๋ณ์ ํ๊ธฐ ์ํด์ API ํธ์ถํ๋ ๊ฒ์ด ์ด๋ค ์๋ฆฌ์ธ์ง ์ ๋ชจ๋ฅด๊ฒ ์ต๋๋ค.2. ์ ํด์ง API ๋ง ์ฌ์ฉํ ์ ์๋๋ก ์ ํ๋ ๋ฐฉ๋ฒ์ด ์๋ค๋ฉด ๋ฌด์์ธ๊ฐ์? (์. ๊ธฐ์์ฒญ ๋ฐ์ดํฐ๋ง ์ฌ์ฉํ๊ณ ์ถ์
๋ฅ๋ฌ๋pytorchchatgptllmllamaAlex
ใป
0
132
2
- ๋ฏธํด๊ฒฐ
์๋์ fineTuning ์ด ๋ฏธ์น๋ ์ํฅ
์ฃผ์ด์ง ๋ฉ์ธ์ง๋ฅผ ํ์ตํ ๋ 20 ๊ฐ์ ๋ฐ์ดํฐ๋ฅผ ํ์ต์ํค๋๋ฐ ์ด๋ฏธ ์์ฒญ๋ ์์ ๋ฐ์ดํฐ๊ฐ ํ์ต์ด ๋์ด ์๋๋ฐ ์ด๋ฐ ์์(system)์ด ๋ฐ์๋ ์ ์๋๊ฑด๊ฐ์?
๋ฅ๋ฌ๋pytorchchatgptllmllamaAlex
ใป
0
229
2
- ๋ฏธํด๊ฒฐ
ํ์ธํ๋๋ชจ๋ธ์๊ฒ ์ผ๋ฐ์ ์ธ ์ง๋ฌธ ํ ๊ฒฝ์ฐ์ ๋ํ ๊ถ๊ธ์ฆ
Llama2 Fine-Tuning ์์ ๋ฅผ ๋ณด๋ฉฐ meta-llama/Llama-3.1-8BLlama-3.1์ ํ์ธํ๋์ ํ์์ต๋๋ค.ํ์ธํ๋ํ ๋ชจ๋ธ๊ณผ Lla
๋ฅ๋ฌ๋pytorchchatgptllmllamawoogeun.choi
ใป
0
212
2
- ๋ฏธํด๊ฒฐ
๋ชจ๋ธ์ ๋ํ ์ฑ๋ฅํ๊ฐ ๋ฐฉ๋ฒ
๋ค๋ฅธ ๋ชจ๋ธ๋ค์ ๋ํ ์ฑ๋ฅ์ ์ด๋ค ๋ฐฉ๋ฒ์ผ๋ก ๋น๊ต ํ์๋์?
๋ฅ๋ฌ๋pytorchchatgptllmllamaAlex
ใป
0
226
1
- ๋ฏธํด๊ฒฐ
๋ฐ์ดํฐ์ ์ ํ์ธํ๋ ํ๋ ๊ฒ๊ณผ ๋ฐ๋๋ก ํ์์๋ ๋ฐ์ดํฐ๋ฅผ ์ ๊ฑฐํ๋ ๋ฐฉ๋ฒ๋ ์๋์?
์ง๊ธ fine tuning ๋จ๊ณ์์ ์ด๋ค ๋ฐ์ดํฐ์ ์ ๊ธฐ์กด์ Llama์ ํ์ต์ ์ถ๊ฐ๋ก ์์ผ์ ์ ๋ณด๋ฅผ ๋ ์ถ๊ฐํ๋ ๋ฐฉ๋ฒ ๋ถ๋ถ์ ํ์ตํ๊ณ ์์ต๋๋ค.ํน์ ์ด ๋ฐ๋์ ๊ฐ์ ๊ฒฝ์ฐ๊ฐ ๊ฐ๋ฅํ ๊น์? ์๋ฅผ๋ค์ด์ Llama๋ชจ๋ธ์์ ํ๊ตญ์ด๋ก ์ด๋ฃจ์ด์ง ๋ชจ๋ ๋ฐ์ดํฐ๋ฅผ ์ ๋ถ
๋ฅ๋ฌ๋pytorchchatgptllmllama์ก์ ์ค
ใป
0
293
2
- ๋ฏธํด๊ฒฐ
Lora ๊ธฐ๋ฒ ์ง๋ฌธ
Lora ๊ธฐ๋ฒ์ผ๋ก ์ธํด์ ์ ์ฒด ๋ชจ๋ธ์ 56%์ ํ๋ผ๋ฏธํฐ๋ง fine tuning์ ์ฌ์ฉ๋๋ค๊ณ ํ๋๋ฐ, ๋ก์ง ๋ด์์ fine tuningํ๊ฒ ๋ค๊ณ ๊ฒฐ์ ํ๋ ๊ธฐ์ค์ด ์๋๊ฑด๊ฐ์?
๋ฅ๋ฌ๋pytorchchatgptllmllama์ก์ ์ค
ใป
0
163
1
- ๋ฏธํด๊ฒฐ
์์ค์ฝ๋ ๋ค์ด๋ฐ์ ์ฅ์๋ฅผ ์๋ ค ์ฃผ์ ์.
๊ฐ์์ ์ฌ์ฉ๋ ์์ค์ฝ๋๋ ์ด๋์ ์๋์ง ๋ฌธ์๋๋ฆฝ๋๋ค.PDFํ์ผ์ ์์ง๋ง, ์์ ํ์ด์ ์ฌ์ฉ๋๋ colab์์ ๋์์ํค๋ ์์ค์ฝ๋๋ฅผ ๋ค์ด ๋ฐ์ ์์น๋ฅผ ๊ฐ๋ฅด์ณ ์ฃผ์ จ์ผ๋ฉด ํฉ๋๋ค.
๋ฅ๋ฌ๋pytorchchatgptllmllama์กฐ์ํ
ใป
0
141
1
- ๋ฏธํด๊ฒฐ
์น์ 20~23 ๊ฐ์์๋ฃ๊ฐ ์์ต๋๋ค.
์๋ ํ์ธ์. ์น์ 20~23 colab๋งํฌ๋ ์๋๋ฐ์. ๊ฐ์์๋ฃ pdf๊ฐ ์์ด์ ๋ฌธ์ ๋๋ฆฝ๋๋ค.llama 3.1, 3.2 / LLM์ต์ ํ๋ฑ.<img src="https://cdn.inflearn.com/public/files/posts/a
๋ฅ๋ฌ๋pytorchchatgptllmllamatorres
ใป
0
133
1
- ๋ฏธํด๊ฒฐ
ํ์ต์ API Key๋ฅผ ์ ๋ ฅํ๋ผ๊ณ ํฉ๋๋ค.
ํ์ต ์์ํ๋ฉด wandb: Paste an API key from your profile and hit enter, or press ctrl+c to quit: ํ๊ณ ์ ๋ ฅ์
๋ฅ๋ฌ๋pytorchchatgptllmllamaSungHwan Kim
ใป
0
926
2
- ๋ฏธํด๊ฒฐ
OpenAI Assistants tools ์ค retrieval ๊ธฐ๋ฅ
์๋ ํ์ธ์OpenAI Assistants tools ๊ธฐ๋ฅ์ค retrieval ๊ธฐ๋ฅ ๋์ File Search ๊ธฐ๋ฅ์ด doc ํ์ด์ง์์ ๋ณด์ด๋๋ฐ ์ฌ์ฉ์๊ฐ upload ํ pdf file ์ ๊ธฐ๋ฐ์ผ๋ก QnA ๋ฅผ ํ ์ ์๋ ๊ธฐ๋ฅ์ ์ด์ ์ ๊ณต๋์ง ์๋์?
๋ฅ๋ฌ๋pytorchchatgptllmllamaokputto
ใป
0
131
0
- ๋ฏธํด๊ฒฐ
OpenAI Assistants API ๊ธฐ์ด ์์ ์ค client.beta.threads.message.list ํจ์
์๋ ํ์ธ์ ์์ ๋ ธํธ์ ์ฝ๋๋ฅผ ์คํํ์๋ Assistant's Response message value ์์ ์ค๊ฐ ํ์ด ๊ณผ์ ์ด ์ถ๋ ฅ๋์ง ์๋๋ฐ ๋์์๊ณผ ์ฐจ์ด๊ฐ ๋ญ๊น์?ใ ๋์์ Value = "I need to s
๋ฅ๋ฌ๋pytorchchatgptllmllamaokputto
ใป
0
128
1
- ํด๊ฒฐ
Fine Tuning ํ inference ํ๋ ์์(์ฝ๋) ์ง๋ฌธ
์๋ ํ์ธ์ ์ฐ์ ์ปค๋ฆฌํ๋ผ์ ์ฐจ๋ก๋๋ก ์ฌ๋ฐ๊ฒ ํ์ตํ๊ณ ์์ต๋๋คLLM finetuning ํ ์ถ๋ก ํ๋ ์์๋ฅผ ๋ฐ๋ผํ๊ณ ์๋๋ฐ์์๋ ๋ฐ์ค๋ ํน์ ํ์ ์๋ ๋ฌธ์ฅ์ด ์๋๊ฐ ํด์ ์ง๋ฌธ ๋๋ฆฝ๋๋ค๊ฐ์ฌํฉ๋๋ค <img s
๋ฅ๋ฌ๋pytorchchatgptllmllamaokputto
ใป
0
229
1
- ํด๊ฒฐ
PEFT_P-Tuning semantic similarity ์์ ์คํ ์ค๋ฅ
๋ฅ๋ฌ๋pytorchchatgptllmllamap-tuningokputto
ใป
0
287
4
- ๋ฏธํด๊ฒฐ
๊ฐ์ฌ๋ Step-back ํ์ต์๋ฃ๊ฐ ์์ต๋๋ค.
์ฃผ์ ์๋ฃ ์ค์ Step-back ์๋ฃ๊ฐ ์์ด์. ๋ถํ๋๋ฆด์ ์๋์ง์?
๋ฅ๋ฌ๋pytorchchatgptllmllama๋ด์ผ์ ํ๊ฑธ์ ๋ ๋์๊ฐ๊ฑฐ์ผ
ใป
0
155
2
- ๋ฏธํด๊ฒฐ
ํ์ต ์ค์ง ํ ์ฌํ์ต ๋ฐฉ๋ฒ(autotrain ์ต์ ๋ฒ์ )
autotrain ์ต์ ๋ฒ์ ์์๋ --merge-adapter ์ต์ ์ ์ถ๊ฐํ์ฌ๋ ํ์ต์ด ์ค๋จ๋๊ฑฐ๋ ์ด๋ฏธ ํ์ต๋ ๋ชจ๋ธ์ด ์ฌํ์ต ๋๋ ์ถ๊ฐํ์ต์ด ์๋๋์?--merge-adapter ์ต์ ์ ์ถ๊ฐํ
๋ฅ๋ฌ๋pytorchchatgptllmllamasdt
ใป
0
273
1






