ฝฟษซตผบฝ

์ด์ง€หณ„
Senior Editor

๋ฉ”ํƒ€, ์ฐจ์„ธ๋Œ€ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI ๋ชจ๋ธ โ€˜๋ผ๋งˆ 4โ€™ ์‹œ๋ฆฌ์ฆˆ ๊ณต๊ฐœ

๋‰ด์Šค
2025.04.072๋ถ„
์ƒ์„ฑํ˜• AI์˜คํภฟ์†Œ์Šค

๋ฉ”ํƒ€๊ฐ€ ์ฐจ์„ธ๋Œ€ ์ธ๊ณต์งถฤต็ฅ ๋ชจ๋ธ ์‹œ๋ฆฌ์ฆˆ '๋ผ๋งˆ(Llama) 4'๋ฅผ ๊ณต๊ฐœํ•˜๋ฉฐ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI ๊ฒฝ์Ÿ์— ๋ณธ๊ฒฉ ์ง„์ž…ํ–ˆ๋‹ค. ์ด๋ฒˆ ๊ณต๊ฐœ๋œ ๋ชจ๋ธ์€ '๋ผ๋งˆ 4 ์Šค์นด์šฐํŠธ(Llama 4 Scout)'์™€ '๋ผ๋งˆ 4 ๋งค๋ฒ„๋ฆญ(Llama 4 Maverick)' ๋‘ ๊ฐ€์ง€๋‹ค.

Meta sign on building exterior
Credit: Skorzewiak / Shutterstock

๋Š” ๊ฐ€์ค‘์น˜๋ฅผ ๊ณต๊ฐœํ•œ ๋ฐฉ์‹(Open-weight)์œผ๋กœ ๋ฐฐํฌ๋˜์–ด ์™ธ๋ถ€ ๊ฐœ๋ฐœ์ž๊ฐ€ ์ž์œ ๋กญ๊ฒŒ ์—ฐ๊ตฌํ•˜๊ณ  ๋งž์ถค ํ™œ์šฉํ•  ์ˆ˜ ์žˆ๋‹ค. ์ด ๋ชจ๋ธ์€ ๋ฉ”ํƒ€๊ฐ€ ์ฒ˜์Œ์œผ๋กœ ์ „๋ฌธ๊ฐ€ ํ˜ผํ•ฉ(MoE) ์•„ํ‚คํ…์ฒ˜๋ฅผ ์ ์šฉํ•œ ์‚ฌ๋ก€๋กœ, ํ•˜๋‚˜์˜ ํ† ํฐ์„ ์ฒ˜๋ฆฌํ•  ๋•Œ ์ „์ฒด ํŒŒ๋ผ๋ฏธํ„ฐ ์ค‘ ์ผ๋ถ€๋งŒ ์‚ฌ์šฉํ•จ์œผ๋กœ์จ ์—ฐ์‚ฐ ํšจ์œจ์„ ํฌ๊ฒŒ ๋†’์˜€๋‹ค. ๋˜ํ•œ ํ…์ŠคํŠธ์™€ ์ด๋ฏธ์ง€๋ฅผ ํ•จ๊ป˜ ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ๋„๋ก ์ดˆ๊ธฐ ๋‹จ๊ณ„์—์„œ ์ •๋ณด๋ฅผ ๊ฒฐํ•ฉํ•˜๋Š” โ€˜์ดˆ๊ธฐ ์œตํ•ฉ(early fusion)โ€™ ๊ธฐ์ˆ ์„ ์ ์šฉํ•ด ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ๊ธฐ๋Šฅ์„ ๊ธฐ๋ณธ์œผ๋กœ ์ง€์›ํ•œ๋‹ค.

๋ฉ”ํƒ€์— ๋”ฐ๋ฅด๋ฉด, ๋ผ๋งˆ 4 ๋ชจ๋ธ์€ ๊ฐœ๋ฐœ ๊ณผ์ •์—์„œ ํŽธํ–ฅ์„ฑ ๋ฌธ์ œ๋„ ๊ฐœ์„ ํ–ˆ๋‹ค. ์ •์น˜์ , ์‚ฌํšŒ์  ์ฃผ์ œ์— ๋Œ€ํ•œ ๊ฑฐ๋ถ€์œจ์ด ๋ผ๋งˆ 3.3์˜ 7%์—์„œ 2% ๋ฏธ๋งŒ์œผ๋กœ ๊ฐ์†Œํ–ˆ์œผ๋ฉฐ, ๋ถˆ๊ท ํ˜•ํ•œ ์‘๋‹ต ๊ฑฐ๋ถ€์œจ๋„ 1% ๋ฏธ๋งŒ์œผ๋กœ ๋‚ฎ์•„์กŒ๋‹ค.

๋ผ๋งˆ 4 ์Šค์นด์šฐํŠธ๋Š” 170์–ต ๊ฐœ์˜ ํ™œ์„ฑ ํŒŒ๋ผ๋ฏธํ„ฐ์™€ 16๊ฐœ์˜ ์ „๋ฌธ๊ฐ€(Experts)๋ฅผ ๊ฐ–์ถ”์—ˆ์œผ๋ฉฐ, ๋‹จ์ผ ์—”๋น„๋””์•„ H100 GPU์—์„œ ๊ตฌ๋™ ๊ฐ€๋Šฅํ•˜๊ณ  ํ•œ ๋ฒˆ์— ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ๋Š” ํ…์ŠคํŠธ ๋ถ„๋Ÿ‰์ด ์ตœ๋Œ€ 1,000๋งŒ ํ† ํฐ์— ๋‹ฌํ•ด, ๊ธด ๋ฌธ์„œ๋‚˜ ๋Œ€ํ™”์—์„œ๋„ ์•ž๋’ค ๋งฅ๋ฝ์„ ์ดํ•ดํ•  ์ˆ˜ ์žˆ๋‹ค. ๋ฉ”ํƒ€๋Š” ์Šค์นด์šฐํŠธ๊ฐ€ ๊ธฐ์กด ๋ผ๋งˆ ์‹œ๋ฆฌ์ฆˆ๋ฟ ์•„๋‹ˆ๋ผ ์ ฌ๋งˆ 3, ์ œ๋ฏธ๋‚˜์ด 2.0 ํ”Œ๋ž˜์‹œ ๋ผ์ดํŠธ, ๋ฏธ์ŠคํŠธ๋ž„ 3.1๋ณด๋‹ค ์šฐ์ˆ˜ํ•œ ์„ฑ๋Šฅ์„ ๋ณด์ธ๋‹ค๊ณ  ๋ฐํ˜”๋‹ค.

๋ผ๋งˆ 4 ๋งค๋ฒ„๋ฆญ์€ 170์–ต ๊ฐœ์˜ ํ™œ์„ฑ ํŒŒ๋ผ๋ฏธํ„ฐ๋ฅผ ๊ฐ–์ถ”์—ˆ์œผ๋‚˜, 128๊ฐœ์˜ ์ „๋ฌธ๊ฐ€๋กœ ๊ตฌ์„ฑ๋˜์–ด ๋” ์ •๊ตํ•œ ์ถ”๋ก ๊ณผ ๋‹ค์–‘ํ•œ ์ž…๋ ฅ ๋ฐฉ์‹์— ๋Œ€์‘ํ•  ์ˆ˜ ์žˆ๋‹ค. ๋ฉ”ํƒ€๋Š” ์ด ๋ชจ๋ธ์ด GPT-4o ๋ฐ ์ œ๋ฏธ๋‚˜์ด 2.0 ํ”Œ๋ž˜์‹œ๋ณด๋‹ค ๋†’์€ ์„ฑ๋Šฅ์„ ๊ธฐ๋กํ–ˆ๋‹ค๊ณ  ์ฃผ์žฅํ–ˆ๋‹ค.

๋‘ ๋ชจ๋ธ์€ ๋ฉ”ํƒ€๊ฐ€ ์•„์ง ์™ธ๋ถ€์— ๊ณต์‹ ๊ณต๊ฐœํ•˜์ง€ ์•Š์€ โ€˜๋ผ๋งˆ 4 ๋น„ํžˆ๋ชจ์Šค(Llama 4 Behemoth)โ€™์—์„œ ์ง€์‹์„ ์ฆ๋ฅ˜(distillation)๋ฐ›์•„ ๊ฐœ๋ฐœ๋˜์—ˆ๋‹ค. ์—ฌ๊ธฐ์„œ ๋งํ•˜๋Š” ์ง€์‹ ์ฆ๋ฅ˜๋ž€ ๋Œ€๊ทœ๋ชจ ๊ณ ์„ฑ๋Šฅ ๋ชจ๋ธ์ด ํ•™์Šตํ•œ ๊ฒฐ๊ณผ๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ, ๋” ์ž‘๊ณ  ํšจ์œจ์ ์ธ ๋ชจ๋ธ์„ ํ•™์Šต์‹œํ‚ค๋Š” ๊ธฐ์ˆ ์ด๋‹ค. ๋ณต์žกํ•œ ๋ชจ๋ธ์˜ ํ’๋ถ€ํ•œ ์ง€์‹์—์„œ ํ•ต์‹ฌ๋งŒ ์ถ”์ถœํ•ด ์ž‘์€ ๋ชจ๋ธ์— ์ „๋‹ฌํ•˜๋Š” ๋ฐฉ์‹์ด๋ผ๋Š” ์ ์—์„œ, ์—…๊ณ„์—์„œ๋Š” ์ด๋ฅผ โ€˜์ฆ๋ฅ˜โ€™๋ผ๋Š” ํ‘œํ˜„์œผ๋กœ ๋ถ€๋ฅด๊ณ  ์žˆ๋‹ค.

โ€˜๊ฑฐ๋Œ€ ์กฐ์ง์ฒดโ€™๋ฅผ ์˜๋ฏธํ•˜๋Š” ๋น„ํžˆ๋ชจ์Šค๋Š” 2,880์–ต ๊ฐœ์˜ ํ™œ์„ฑ ํŒŒ๋ผ๋ฏธํ„ฐ์™€ ์•ฝ 2์กฐ ๊ฐœ์˜ ์ด ํŒŒ๋ผ๋ฏธํ„ฐ๋ฅผ ๊ฐ€์ง„ ์ดˆ๋Œ€๊ทœ๋ชจ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ๋ชจ๋ธ์ด๋‹ค. ๋ฉ”ํƒ€๋Š” ์ด ๋ชจ๋ธ์ด ์ž์‚ฌ๊ฐ€ ๊ฐœ๋ฐœํ•œ ๊ฐ€์žฅ ๊ฐ•๋ ฅํ•œ AI๋กœ, ์ˆ˜ํ•™, ์ฝ”๋”ฉ, ๊ณผํ•™ ๋ถ„์•ผ์—์„œ GPT-4.5, ํด๋กœ๋“œ ์†Œ๋„ท 3.7, ์ œ๋ฏธ๋‚˜์ด 2.0 ํ”„๋กœ๋ฅผ ๋Šฅ๊ฐ€ํ•˜๋Š” ์„ฑ๋Šฅ์„ ๋ณด์ธ๋‹ค๊ณ  ์ฃผ์žฅํ–ˆ๋‹ค. ๋˜ํ•œ ๋น„ํžˆ๋ชจ์Šค๋ฅผ ์ผ์ข…์˜ โ€˜์„ ์ƒ๋‹˜ ๋ชจ๋ธโ€™๋กœ ์‚ผ์•„, ๋” ์ž‘๊ณ  ํšจ์œจ์ ์ธ โ€˜ํ•™์ƒ ๋ชจ๋ธโ€™์„ ํ•™์Šต์‹œํ‚ค๋Š” ๋ฐฉ์‹์œผ๋กœ ํ’ˆ์งˆ๊ณผ ์„ฑ๋Šฅ์„ ๋™์‹œ์— ํ™•๋ณดํ•˜๊ณ  ์žˆ๋‹ค๊ณ  ์„ค๋ช…ํ–ˆ๋‹ค.

๋ผ๋งˆ 4 ์Šค์นด์šฐํŠธ์™€ ๋งค๋ฒ„๋ฆญ์€ ๋ฉ”ํƒ€ ๊ณต์‹ ์›น์‚ฌ์ดํŠธ์™€ ํ—ˆ๊น…ํŽ˜์ด์Šค๋ฅผ ํ†ตํ•ด ๋‹ค์šด๋กœ๋“œํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ์™“์ธ ์•ฑ, ๋ฉ”์‹ ์ €, ์ธ์Šคํƒ€๊ทธ๋žจ ๋‹ค์ด๋ ‰ํŠธ, ๋ฉ”ํƒ€.AI ๋“ฑ ๋ฉ”ํƒ€ ์ œํ’ˆ์—์„œ ๋ผ๋งˆ 4๊ฐ€ ์ ์šฉ๋œ AI ๊ธฐ๋Šฅ์„ ์ฒดํ—˜ํ•  ์ˆ˜ ์žˆ๋‹ค.
jihyun.lee@foundryco.com

์ด์ง€หณ„

ฝฟษซตผบฝ์ฝ”๋ฆฌ์•„์˜ ๊ธฐ์ž๋กœ์„œ ์ทจ์žฌ, ์ธํ„ฐ๋ทฐ, ๋ฒˆ์—ญ ์—…๋ฌด๋ฅผ ๋‹ด๋‹นํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. 2013๋…„๋ถ€ํ„ฐ IT ์ „๋ฌธ ๊ธฐ์ž๋กœ ํ™œ๋™ํ•˜๋ฉฐ, IT ์—…๊ณ„ ์ข…์‚ฌ์ž์™€ ๋ฆฌ๋”๋ฅผ ์œ„ํ•œ ์–‘์งˆ์˜ ์ฝ˜ํ…์ธ  ๋ฐœ๊ตด ๋ฐ ์ œ์ž‘์— ์ฃผ๋ ฅํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

์ด ์ €์ž์˜ ์ถ”๊ฐ€ ์ฝ˜ํ…์ธ 

Exit mobile version