OpenAI GPT-4์ ๋น์ +ํ ์คํธ ๋ชจ๋ธ, ๋ฐ์ดํฐ ๋ฐ ํ์ต ๋น์ฉ ๊ณต๊ฐ (์ถ์ธก)
OpenAI๋ GPT-4์ ์ํคํ ์ฒ, ํ๋ผ๋ฏธํฐ ์, ํ์ต ๋ฐ์ดํฐ ๋๋ ์ปดํจํ ์์ฐ์ ๊ณต๊ฐํ์ง ์๊ธฐ๋ก ์ ๋ช ๋์ผ๋ฉฐ, ์ด๋ ๊ธฐ์ ๋ณด๊ณ ์๋ฅผ ML ์ปค๋ฎค๋ํฐ๋ฅผ ์ํ ๋ก๋ฅด์คํ ํ ์คํธ๋ก ๋ฐ๊พธ์์ต๋๋ค.
GPT-4์ ๊ธฐ์ ๋ณด๊ณ ์ ๋ฆฌ๋ทฐ (ํ๋์ ๋ณด๋ GPT-4)
GPT-4์ ๊ธฐ์ ๋ณด๊ณ ์๋ ์ํคํ ์ฒ ์ธ๋ถ์ฌํญ์ด ๋ถ์กฑํ๊ณ ๋ฅ๋ ฅ ์ฃผ์ฅ์ด ๋ง๊ธฐ๋ก ์ ๋ช ๋์ผ๋ฉฐ, ์ด๋ ๋ช ํํ ๋ฆฌ๋ทฐ๋ฅผ ๊ทธ ์์ ๊ตฌ์ถํ๋ ๋ชจ๋ ์ฌ๋์ ์ํด ํ์ ์ฝ๊ธฐ๋ก ๋ง๋ญ๋๋ค.
OpenAI์ GPT-3์ ๋ํ ์ฌ์ธต ๋ฆฌ๋ทฐ : ์ธ์ด ๋ชจ๋ธ์ ์์ ์ท ํ์ต์์ ๋๋ค (ํํธ 3/3: ๊ฒฐ๊ณผ ๋ฐ ๋๋จธ์ง)
์ด 3๋ถ์ GPT-3 ์ฌ์ธต ๋ถ์์ ์ต์ข ํ์ฐจ๋ ๊ฒฐ๊ณผ์ ๋๋ฌํฉ๋๋ค: 1,750์ต ๊ฐ์ ํ๋ผ๋ฏธํฐ๋ฅผ ๋ฒค์น๋งํฌ ์ค์ํธ์ ํฌ์ ํ๊ณ ๋ฏธ์ธ ์กฐ์ ์ ์์ ํ ๊ฑด๋๋ธ ๋ ์ค์ ๋ก ์ด๋ค ์ผ์ด ๋ฐ์ํ๋์ง์ ๋ํด.
OpenAI์ GPT-3์ ๋ํ ์ฌ์ธต ๊ฒํ : ์ธ์ด ๋ชจ๋ธ์ Few-Shot ํ์ต์์ ๋๋ค (ํํธ 2/3: ๊ฒฐ๊ณผ)
์ด GPT-3 ์ฌ์ธต ๋ถ์์ 2๋ถ๋ ์ค์ ์ ๋์ด ์ค์ ๋ก ์ฌ๋๋ค์ด NLP๋ฅผ ์ฌ์๊ฐํ๊ฒ ํ ๊ฒฐ๊ณผ๋ก ์ด๋ํฉ๋๋ค.
ChatGPT/ChatGPT Plus/InstructGPT: ์ธ๊ฐ ํผ๋๋ฐฑ์ผ๋ก ์ง์๋ฅผ ๋ฐ๋ฅด๋๋ก ์ธ์ด ๋ชจ๋ธ ํ๋ จ
ChatGPT ์ ํ ๋ค์๋ InstructGPT ๋ ผ๋ฌธ์ด ์์ผ๋ฉฐ, ์ด ์์ธ ๋ฆฌ๋ทฐ๋ ์์ GPT-3์ ์ฌ๋๋ค์ด ์ค์ ๋ก ๋ํํ๊ณ ์ถ์ด ํ๋ ๊ฒ์ผ๋ก ๋ณํํ ํ์ดํ๋ผ์ธ์ ์์ธํ ๋ถ์ํฉ๋๋ค.
3๋ถ ์์ ChatGPT/ChatGPT Plus๊ฐ ์ด๋ป๊ฒ ์๋ํ๋์ง ์ค๋ช
ChatGPT๋ ์ธ๋ถ์์๋ ๋ง๋ฒ์ฒ๋ผ ๋ณด์ด์ง๋ง, ์ด๋๋ฅผ ๋ด์ผ ํ๋์ง ์๋ฉด ๋ ์ํผ๋ ์ ๋ฌธ์ํ๋์ด ์์ผ๋ฉฐ, ์ด 3๋ถ ์ค๋ช ์ ํต์ฌ ์์ด๋์ด๋ฅผ ์์ฝํฉ๋๋ค.
[Olewave's Review] CLIP (3/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
์ด CLIP ๊ฒํ ์ ๋ง์ง๋ง ๋ถ๋ถ์ ๊ฒฐ๊ณผ ์น์ ์ ๋๋ฌํ๋ฉฐ, ์ฌ๊ธฐ์ OpenAI์ ๋์กฐ์ ์ด๋ฏธ์ง-ํ ์คํธ ๋ชจ๋ธ์ด ํฅ๋ฏธ๋ก์ด ์์ด๋์ด์์ ์ ์ฒด ๋ฉํฐ๋ชจ๋ฌ ์คํ์ ๊ธฐ์ด ๊ณ์ธต ๊ธฐ๋ณธ ์์๋ก ์ ํ๋์์ต๋๋ค.
[Olewave's Review] CLIP (2/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
OpenAI์ CLIP์ ๊ณ ์ ๋ ์ด๋ธ ์ธํธ๋ฅผ ๋ฒ๋ฆฌ๊ณ ๋์ ์ธํฐ๋ท์์ ์์งํ 4์ต ๊ฐ์ (์ด๋ฏธ์ง, ํ ์คํธ) ์์ผ๋ก ํ๋ จํจ์ผ๋ก์จ ์ปดํจํฐ ๋น์ ์ ์คํฌ๋ฆฝํธ๋ฅผ ๋ค์ง์์ต๋๋ค.
[Olewave's Review] CLIP (1/3): ์์ฐ์ด ๊ฐ๋ ์ผ๋ก๋ถํฐ์ ์ ์ด ๊ฐ๋ฅํ ์๊ฐ ๋ชจ๋ธ ํ์ต
BLIP, LLaVA, ๋๋ ๊ฐ์น ์๋ ์์ฑ-LLM์ด ์๊ธฐ ์ ์ CLIP์ด ์์์ผ๋ฉฐ, ์ด๊ฒ์ด ์ด์ผ๊ธฐ๊ฐ ์์๋๋ ๊ณณ์ ๋๋ค.
