๐Ÿง  DRAM

zHBM ๋ถ„์„

๊ฐœ์š”

zHBM์€ ์‚ผ์„ฑ์ „์ž๊ฐ€ 2026๋…„ 2์›” SEMICON Korea์—์„œ ๊ณต๊ฐœํ•œ ์ฐจ์„ธ๋Œ€ HBM ๊ฐœ๋ฐœ ์•„ํ‚คํ…์ฒ˜์ž…๋‹ˆ๋‹ค. ํ˜„์žฌ์˜ HBM์€ GPU์™€ HBM ์Šคํƒ์„ ์‹ค๋ฆฌ์ฝ˜ ์ธํ„ฐํฌ์ € ์œ„์— ๋‚˜๋ž€ํžˆ ๋ฐฐ์น˜ํ•˜๋Š” 2.5D ํŒจํ‚ค์ง•์ด ์ผ๋ฐ˜์ ์ด์ง€๋งŒ, zHBM์€ HBM์„ GPU ์œ„์— ์ˆ˜์ง์œผ๋กœ ๋ฐฐ์น˜ํ•ด ํŒจํ‚ค์ง€์˜ z์ถ•์„ ํ™œ์šฉํ•˜๋Š” ์™„์ „ํ•œ 3D ํ†ตํ•ฉ์„ ์ง€ํ–ฅํ•ฉ๋‹ˆ๋‹ค. ์ด๋ฆ„์˜ z๋Š” ์ด ์ˆ˜์ง ์ ์ธต ๋ฐฉํ–ฅ์„ ๋œปํ•ฉ๋‹ˆ๋‹ค.

zHBM์€ ์•„์ง JEDEC ํ‘œ์ค€์ด๋‚˜ ์ƒ์šฉ ์ œํ’ˆ๋ช…์ด ์•„๋‹ˆ๋ฉฐ, ๊ณต๊ฐœ๋œ ์„ธ๋ถ€ ์‚ฌ์–‘๊ณผ ์ƒ์‚ฐ ์ผ์ •๋„ ์ œํ•œ์ ์ž…๋‹ˆ๋‹ค. ์‚ผ์„ฑ ๋ฐœํ‘œ๋ฅผ ์ธ์šฉํ•œ ๋ณด๋„์— ๋”ฐ๋ฅด๋ฉด multi-wafer-to-wafer bonding๊ณผ ์ˆ˜๋งŒ ๊ฐœ์˜ I/O๋ฅผ ์‚ฌ์šฉํ•˜๊ณ  HBM4 ๋Œ€๋น„ ๋Œ€์—ญํญ์„ 4๋ฐฐ ์ด์ƒ ๋†’์ด๋Š” ๋™์‹œ์— ์ „๋ ฅ ์†Œ๋น„๋ฅผ 75% ์ค„์ด๋Š” ๋ชฉํ‘œ๊ฐ€ ์ œ์‹œ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ์ด ์ˆ˜์น˜๋Š” ์–‘์‚ฐ ์ œํ’ˆ์˜ ๋…๋ฆฝ ๋ฒค์น˜๋งˆํฌ๊ฐ€ ์•„๋‹ˆ๋ผ ๋ฐœํ‘œ ์ž๋ฃŒ์™€ ์ดˆ๊ธฐ ์‹œํ—˜ ๊ฒฐ๊ณผ์— ๊ธฐ๋ฐ˜ํ•œ ๋ชฉํ‘œ์น˜๋กœ ํ•ด์„ํ•ด์•ผ ํ•ฉ๋‹ˆ๋‹ค.

zHBM๊ณผ ๊ธฐ์กด HBM์˜ ํŒจํ‚ค์ง€ ๊ตฌ์กฐ ๋น„๊ต

๊ทธ๋ฆผ 1. ๊ธฐ์กด 2.5D HBM๊ณผ GPU ์ƒ๋ถ€์— HBM์„ ๋ฐฐ์น˜ํ•˜๋Š” zHBM์˜ ๊ตฌ์กฐ์  ์ฐจ์ด

ํ•ต์‹ฌ ๊ฐœ๋…

z์ถ• ํŒจํ‚ค์ง•

๊ธฐ์กด HBM ํŒจํ‚ค์ง€๋Š” GPU ๋˜๋Š” ASIC๊ณผ HBM ์Šคํƒ์„ ์ธํ„ฐํฌ์ € ์œ„์— ์ˆ˜ํ‰์œผ๋กœ ๋ฐฐ์น˜ํ•ฉ๋‹ˆ๋‹ค. ์ด ๋ฐฉ์‹์€ ๋งค์šฐ ๋„“์€ ๋ณ‘๋ ฌ ๋ฒ„์Šค๋ฅผ ์ œ๊ณตํ•˜์ง€๋งŒ, GPU์™€ ๋ฉ”๋ชจ๋ฆฌ ์Šคํƒ์ด ์ฐจ์ง€ํ•˜๋Š” ํŒจํ‚ค์ง€ ๋ฉด์ ๊ณผ ์ธํ„ฐํฌ์ € ๋ฐฐ์„  ์ž์›์ด ํ•จ๊ป˜ ์ฆ๊ฐ€ํ•ฉ๋‹ˆ๋‹ค.

zHBM์€ ์ด ์ˆ˜ํ‰ ๋ฐฐ์น˜์˜ ์ผ๋ถ€๋ฅผ ์ˆ˜์ง ๋ฐฉํ–ฅ์œผ๋กœ ์ „ํ™˜ํ•ฉ๋‹ˆ๋‹ค. HBM ์Šคํƒ์„ GPU ์œ„์— ์ง์ ‘ ๋˜๋Š” ๋งค์šฐ ๊ฐ€๊นŒ์šด ์ˆ˜์ง ์—ฐ๊ฒฐ ๊ตฌ์กฐ๋กœ ํ†ตํ•ฉํ•˜๋ฉด ๋ฉ”๋ชจ๋ฆฌ์™€ ์—ฐ์‚ฐ ๋‹ค์ด ์‚ฌ์ด์˜ ๊ฑฐ๋ฆฌ๋ฅผ ์ค„์ด๊ณ , ๊ฐ™์€ ํŒจํ‚ค์ง€ ๋ฉด์ ์—์„œ ๋” ๋งŽ์€ ์—ฐ๊ฒฐ์„ ๋ฐฐ์น˜ํ•  ์—ฌ์ง€๊ฐ€ ์ƒ๊น๋‹ˆ๋‹ค. ๋‹ค๋งŒ ์‹ค์ œ ๊ตฌ์กฐ๊ฐ€ GPU ์œ„์— HBM ์Šคํƒ์„ ์–ด๋–ป๊ฒŒ ์ง€์ง€ํ•˜๊ณ  ์—ด์„ ์–ด๋–ป๊ฒŒ ๋ฐฐ์ถœํ•˜๋Š”์ง€๋Š” ๊ณต๊ฐœ ์ž๋ฃŒ๋งŒ์œผ๋กœ ํ™•์ •ํ•  ์ˆ˜ ์—†์Šต๋‹ˆ๋‹ค.

Multi-wafer-to-wafer bonding

Wafer-to-wafer bonding์€ ๊ฐœ๋ณ„ ๋‹ค์ด๋ฅผ ํ•˜๋‚˜์”ฉ ์กฐ๋ฆฝํ•˜๋Š” ๋Œ€์‹  ์›จ์ดํผ ๋‹จ์œ„์—์„œ ๋‘ ์ธต์„ ์ •๋ ฌํ•˜๊ณ  ์ ‘ํ•ฉํ•˜๋Š” ๊ณต์ •์ž…๋‹ˆ๋‹ค. zHBM์— ์ด ๊ธฐ์ˆ ์„ ์ ์šฉํ•˜๋ฉด ๋ฏธ์„ธ ํ”ผ์น˜์˜ ์ˆ˜์ง ์—ฐ๊ฒฐ๊ณผ ๋Œ€๊ทœ๋ชจ I/O ๋ฐฐ์—ด์„ ๊ตฌํ˜„ํ•˜๋Š” ๋ฐ ์œ ๋ฆฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

  • ์›จ์ดํผ ์ „์ฒด๋ฅผ ์ •๋ ฌํ•˜๋ฏ€๋กœ ์ ‘ํ•ฉ ์ƒ์‚ฐ์„ฑ์ด ๋†’์•„์งˆ ๊ฐ€๋Šฅ์„ฑ์ด ์žˆ์Šต๋‹ˆ๋‹ค.
  • ์ ‘ํ•ฉ ํ”ผ์น˜๊ฐ€ ์ž‘์•„์ง€๋ฉด ๊ฐ™์€ ๋ฉด์ ์— ๋” ๋งŽ์€ ๋ฐ์ดํ„ฐยท์ „์›ยท์ œ์–ด ์—ฐ๊ฒฐ์„ ๋„ฃ์„ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ์›จ์ดํผ ํœจ, ์˜ค์—ผ, ์ •๋ ฌ ์˜ค์ฐจ, ์–‘ํ’ˆ ๋‹ค์ด ์†์‹ค์ด ์ˆ˜์œจ์— ์ง์ ‘ ์˜ํ–ฅ์„ ์ค๋‹ˆ๋‹ค.
  • ์‹ค์ œ zHBM์˜ bonding ์žฌ๋ฃŒ, ํ”ผ์น˜, ์ ์ธต ์ˆœ์„œ๋Š” ์‚ผ์„ฑ์˜ ๊ณต๊ฐœ ์ž๋ฃŒ์—์„œ ํ™•์ •๋˜์ง€ ์•Š์•˜์Šต๋‹ˆ๋‹ค.

TSV์™€ hybrid bonding์˜ ์—ญํ• 

ํ˜„์žฌ HBM์€ DRAM ๋‹ค์ด ์‚ฌ์ด์˜ TSV์™€ micro-bump๋ฅผ ์ด์šฉํ•ด ์ˆ˜์ง์œผ๋กœ ์‹ ํ˜ธ๋ฅผ ์ „๋‹ฌํ•˜๊ณ , ํ•˜๋ถ€ logic die๋ฅผ ํ†ตํ•ด ์™ธ๋ถ€ ์ธํ„ฐํŽ˜์ด์Šค๋ฅผ ์—ฐ๊ฒฐํ•ฉ๋‹ˆ๋‹ค. zHBM์€ HBM ๋‚ด๋ถ€ TSV ๊ตฌ์กฐ๋ฅผ ๋ฐ˜๋“œ์‹œ ํ๊ธฐํ•œ๋‹ค๋Š” ๋œป์ด ์•„๋‹ˆ๋ผ, HBM ์Šคํƒ๊ณผ GPU ์‚ฌ์ด์˜ ํŒจํ‚ค์ง€ ๊ฒฝ๊ณ„๊นŒ์ง€ 3D๋กœ ํ™•์žฅํ•˜๋Š” ๊ฐœ๋…์œผ๋กœ ๋ณด๋Š” ํŽธ์ด ์•ˆ์ „ํ•ฉ๋‹ˆ๋‹ค.

Hybrid bonding์€ ๊ธˆ์† ์ ‘์ ๊ณผ ์œ ์ „์ฒด ํ‘œ๋ฉด์„ ๋ฏธ์„ธ ํ”ผ์น˜๋กœ ์ง์ ‘ ์ ‘ํ•ฉํ•˜๋Š” ๊ณ„์—ด์˜ ๊ธฐ์ˆ ์ž…๋‹ˆ๋‹ค. TSV, micro-bump, hybrid bonding์€ ์„œ๋กœ ๋Œ€์ฒด ๊ด€๊ณ„๊ฐ€ ์•„๋‹ˆ๋ผ ์ ์ธต ์œ„์น˜์™€ ์—ฐ๊ฒฐ ํ”ผ์น˜์— ๋”ฐ๋ผ ์กฐํ•ฉ๋  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๋”ฐ๋ผ์„œ zHBM์˜ ํ•ต์‹ฌ์€ ํŠน์ • ๊ณต์ •๋ช… ํ•˜๋‚˜๋ณด๋‹ค DRAM ์Šคํƒ, logic die, GPU, ์ „์›ยท์—ด ๊ฒฝ๋กœ๋ฅผ ํ•จ๊ป˜ ์„ค๊ณ„ํ•˜๋Š” 3D co-design์— ์žˆ์Šต๋‹ˆ๋‹ค.

I/O ๋ฐ€๋„์™€ ๋Œ€์—ญํญ

HBM์€ ๋‚ฎ์€ ํ•€ ์†๋„์™€ ๋„“์€ ๋ฒ„์Šค๋ฅผ ์กฐํ•ฉํ•ด ๋Œ€์—ญํญ์„ ํ™•๋ณดํ•ฉ๋‹ˆ๋‹ค. zHBM์€ GPU์™€ ๋ฉ”๋ชจ๋ฆฌ ์‚ฌ์ด์˜ ์ˆ˜์ง ์—ฐ๊ฒฐ ๋ฉด์ ์„ ํ™œ์šฉํ•˜๊ณ  ์ˆ˜๋งŒ ๊ฐœ์˜ I/O๋ฅผ ํ™•๋ณดํ•˜๋Š” ๋ฐฉํ–ฅ์œผ๋กœ ์ด ์›๋ฆฌ๋ฅผ ํ™•์žฅํ•ฉ๋‹ˆ๋‹ค.

๋Œ€์—ญํญ์€ ๋‹จ์ˆœํžˆ I/O ๊ฐœ์ˆ˜๋งŒ์œผ๋กœ ๊ฒฐ์ •๋˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์‹ค์ œ ์„ฑ๋Šฅ์€ ๋‹ค์Œ ์š”์†Œ์˜ ๊ณฑ์œผ๋กœ ์ œํ•œ๋ฉ๋‹ˆ๋‹ค.

  • ์œ ํšจ I/O ์ˆ˜์™€ ์‹ ํ˜ธ ์†๋„
  • ์ „์› ๋ฌด๊ฒฐ์„ฑ ๋ฐ simultaneous switching noise
  • ๋ฉ”๋ชจ๋ฆฌ ์ปจํŠธ๋กค๋Ÿฌ์˜ ์ฑ„๋„ ์Šค์ผ€์ค„๋ง
  • bonding ๋ฐ TSV์˜ ๊ธฐ์ƒ ์ €ํ•ญยท์šฉ๋Ÿ‰ยท์ธ๋•ํ„ด์Šค
  • GPU ๋‚ด๋ถ€ fabric๊ณผ HBM controller์˜ ๋ฐ์ดํ„ฐ ๊ณต๊ธ‰ ๋Šฅ๋ ฅ

๋น„๊ต/๋ถ„์„

ํ•ญ๋ชฉ ๊ธฐ์กด HBM3E/HBM4 ํŒจํ‚ค์ง€ zHBM ํ•ด์„
ํ”„๋กœ์„ธ์„œ์™€ HBM ๋ฐฐ์น˜ ์ธํ„ฐํฌ์ € ์œ„์— ๋‚˜๋ž€ํžˆ ๋ฐฐ์น˜ํ•˜๋Š” 2.5D GPU ์œ„์— HBM์„ ์ˆ˜์ง ๋ฐฐ์น˜ํ•˜๋Š” 3D ์ง€ํ–ฅ ํŒจํ‚ค์ง€ ๋ฉด์ ๊ณผ ์—ฐ๊ฒฐ ๋ฐฉํ–ฅ์ด ๋‹ฌ๋ผ์ง
HBM ๋‚ด๋ถ€ ์—ฐ๊ฒฐ DRAM die, TSV, micro-bump, logic die HBM ๋‚ด๋ถ€ ๊ตฌ์กฐ๋ฅผ ์œ ์ง€ํ•˜๋ฉด์„œ ํŒจํ‚ค์ง€ ๊ฒฝ๊ณ„๋ฅผ 3D๋กœ ํ™•์žฅํ•  ๊ฐ€๋Šฅ์„ฑ ์ตœ์ข… ๊ณต์ • ์กฐํ•ฉ์€ ๋ฏธ๊ณต๊ฐœ
GPU-HBM ์—ฐ๊ฒฐ ์ธํ„ฐํฌ์ €์™€ ํŒจํ‚ค์ง€ micro-bump ์ค‘์‹ฌ multi-wafer-to-wafer bonding ๋ฐ ์ˆ˜์ง I/O๊ฐ€ ํ•ต์‹ฌ ํ›„๋ณด ์‚ผ์„ฑ ๋ฐœํ‘œ๋ฅผ ์ธ์šฉํ•œ ๋ณด๋„ ๊ธฐ์ค€
I/O ๋ฐฉํ–ฅ ํŒจํ‚ค์ง€ ํ‰๋ฉด์„ ๋”ฐ๋ผ ๋„“๊ฒŒ ๋ถ„์‚ฐ GPU ์ƒ๋ถ€ ์ ‘ํ•ฉ๋ฉด์„ ํ†ตํ•œ ๊ณ ๋ฐ€๋„ ์ˆ˜์ง ์—ฐ๊ฒฐ ์ˆ˜๋งŒ ๊ฐœ I/O๊ฐ€ ๊ณต๊ฐœ ๋ชฉํ‘œ๋กœ ์–ธ๊ธ‰๋จ
๋Œ€์—ญํญ HBM4 ํ‘œ์ค€ baseline ์•ฝ 2 TB/s/stack, ์ œํ’ˆ๋ณ„ ์ƒ์ด HBM4 ๋Œ€๋น„ 4๋ฐฐ ์ด์ƒ ๋ชฉํ‘œ/์ดˆ๊ธฐ ๊ฒฐ๊ณผ ๋ณด๋„ ์ œํ’ˆ ์‚ฌ์–‘์ด๋‚˜ ๋…๋ฆฝ ์ธก์ •๊ฐ’ ์•„๋‹˜
์ „๋ ฅ ์งง์€ ์ธํ„ฐํฌ์ € ๊ฒฝ๋กœ๋กœ ๋†’์€ ํšจ์œจ HBM4 ๋Œ€๋น„ 75% ์ ˆ๊ฐ ๋ชฉํ‘œ/์ดˆ๊ธฐ ๊ฒฐ๊ณผ ๋ณด๋„ ์‹œ์Šคํ…œ ์ „์ฒด ์ „๋ ฅ์œผ๋กœ ์ผ๋ฐ˜ํ™”ํ•  ์ˆ˜ ์—†์Œ
์—ด ๊ฒฝ๋กœ HBM๊ณผ GPU๊ฐ€ ๋‚˜๋ž€ํžˆ ์žˆ์–ด ๊ฐ๊ฐ์˜ ๋ฐฉ์—ด ๊ฒฝ๋กœ ์„ค๊ณ„ ๊ฐ€๋Šฅ GPU ์ƒ๋ถ€์— ๋ฉ”๋ชจ๋ฆฌ๊ฐ€ ๋†“์—ฌ hot spot๊ณผ ๋ฐฉ์—ด ๊ฒฝ๋กœ๊ฐ€ ๊ฒน์น  ์ˆ˜ ์žˆ์Œ ๊ฐ€์žฅ ํฐ ๊ฒ€์ฆ ๊ณผ์ œ ์ค‘ ํ•˜๋‚˜
์ƒํƒœ ์ƒ์šฉ ์„ธ๋Œ€ ๋ฐ JEDEC ํ‘œ์ค€ ์กด์žฌ ๊ฐœ๋ฐœยท๋กœ๋“œ๋งต ๋‹จ๊ณ„, ํ‘œ์ค€๊ณผ ์–‘์‚ฐ ์ผ์ • ๋ฏธ๊ณต๊ฐœ 2026๋…„ 7์›” ๊ณต๊ฐœ ์ž๋ฃŒ ๊ธฐ์ค€

HBM4์˜ ๊ธฐ์ค€ ๋Œ€์—ญํญ์€ JEDEC baseline์„ ๋‹จ์ˆœ ๊ณ„์‚ฐํ•œ ๊ฐ’์ด๋ฉฐ, ์‹ค์ œ ์ œํ’ˆ์€ ํ•€ ์†๋„์™€ ์ ์ธต ๋†’์ด์— ๋”ฐ๋ผ ๋‹ฌ๋ผ์ง‘๋‹ˆ๋‹ค. ๋”ฐ๋ผ์„œ zHBM์˜ 4๋ฐฐ๋Š” ๋ชจ๋“  HBM4 ์ œํ’ˆ๊ณผ ๋™์ผ ์กฐ๊ฑด์œผ๋กœ ๋น„๊ตํ•œ ๋ณดํŽธ์  ์„ฑ๋Šฅ ์ˆ˜์น˜๊ฐ€ ์•„๋‹™๋‹ˆ๋‹ค.

๋™์ž‘ ์›๋ฆฌ

๋ฐ์ดํ„ฐ ๊ฒฝ๋กœ

  1. GPU์˜ memory controller ๋˜๋Š” interconnect fabric์ด HBM ์ ‘๊ทผ์„ ๋ฐœํ–‰ํ•ฉ๋‹ˆ๋‹ค.
  2. zHBM์˜ ์ˆ˜์ง I/O ์ธํ„ฐํŽ˜์ด์Šค๊ฐ€ ๋ช…๋ น, ์ฃผ์†Œ, ๋ฐ์ดํ„ฐ, ํด๋ก, ์ „์› ์—ฐ๊ฒฐ์„ GPU ์ƒ๋ถ€์˜ ์ ‘ํ•ฉ๋ฉด์œผ๋กœ ์ „๋‹ฌํ•ฉ๋‹ˆ๋‹ค.
  3. HBM์˜ logic die๊ฐ€ ์ฑ„๋„๊ณผ pseudo channel์„ ๋ถ„๋ฐฐํ•˜๊ณ  ๊ฐ DRAM die์˜ bank๋ฅผ ์ œ์–ดํ•ฉ๋‹ˆ๋‹ค.
  4. DRAM array๋Š” row activate์™€ column read/write๋ฅผ ์ˆ˜ํ–‰ํ•˜๊ณ , ๋ฐ์ดํ„ฐ๋Š” ๋‹ค์‹œ ์ˆ˜์ง I/O๋ฅผ ํ†ตํ•ด GPU๋กœ ๋ฐ˜ํ™˜๋ฉ๋‹ˆ๋‹ค.
  5. ์—ฌ๋Ÿฌ ์ˆ˜์ง ์—ฐ๊ฒฐ์„ ๋ณ‘๋ ฌ๋กœ ์šด์šฉํ•˜๋ฉด ํ•€๋‹น ์†๋„๋ฅผ ๊ณผ๋„ํ•˜๊ฒŒ ๋†’์ด์ง€ ์•Š๊ณ ๋„ ํฐ aggregate bandwidth๋ฅผ ๋งŒ๋“ค ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

์ด ํ๋ฆ„์˜ 1~3๋‹จ๊ณ„๋Š” HBM์˜ ๊ธฐ์กด ๋™์ž‘ ๋ชจ๋ธ์„ 3D ํŒจํ‚ค์ง€ ์—ฐ๊ฒฐ์— ์ ์šฉํ•œ ๊ฐœ๋…์ž…๋‹ˆ๋‹ค. zHBM์˜ ์‹ค์ œ command protocol, cache coherence ๊ฒฝ๊ณ„, ECC ๋ฐฐ์น˜, GPU์™€ HBM ์‚ฌ์ด์˜ ๋…ผ๋ฆฌ์  ์ธํ„ฐํŽ˜์ด์Šค๋Š” ๊ณต๊ฐœ๋˜์ง€ ์•Š์•˜์Šต๋‹ˆ๋‹ค.

์ „๋ ฅ ํšจ์œจ์ด ๊ฐœ์„ ๋  ์ˆ˜ ์žˆ๋Š” ์ด์œ 

์ˆ˜์ง ์—ฐ๊ฒฐ์€ GPU์™€ ๋ฉ”๋ชจ๋ฆฌ ์‚ฌ์ด์˜ ๋ฌผ๋ฆฌ์  ๊ฑฐ๋ฆฌ๋ฅผ ์ค„์ด๊ณ , ๋„“์€ ๋ณ‘๋ ฌ ๊ฒฝ๋กœ๋ฅผ ํ†ตํ•ด ๋™์ผํ•œ ์ฒ˜๋ฆฌ๋Ÿ‰์„ ๋‚ฎ์€ ์‹ ํ˜ธ swing ๋˜๋Š” ๋‚ฎ์€ ํ•€ ์†๋„๋กœ ๋‚˜๋ˆ  ๋ณด๋‚ผ ๊ฐ€๋Šฅ์„ฑ์„ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค. ์ด ๊ฒฝ์šฐ ํŒจํ‚ค์ง€ ์ธํ„ฐ์ปค๋„ฅํŠธ์˜ pJ/bit๊ฐ€ ๋‚ฎ์•„์งˆ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

๊ทธ๋Ÿฌ๋‚˜ ์ „๋ ฅ ์ ˆ๊ฐ์€ ์ž๋™์œผ๋กœ ๋ณด์žฅ๋˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์ˆ˜์ง I/O๊ฐ€ ๋Š˜๋ฉด ๋“œ๋ผ์ด๋ฒ„, ์ „์›๋ง, clock distribution, thermal management์— ํ•„์š”ํ•œ ํšŒ๋กœ๋„ ์ฆ๊ฐ€ํ•ฉ๋‹ˆ๋‹ค. ๋ฉ”๋ชจ๋ฆฌ ์ ‘๊ทผ ํŒจํ„ด, ์œ ํœด ์ƒํƒœ, GPU ๋ถ€ํ•˜๊นŒ์ง€ ํฌํ•จํ•œ system-level workload์—์„œ ์ธก์ •ํ•ด์•ผ ํ•˜๋ฏ€๋กœ ๋ฐœํ‘œ๋œ 75% ์ˆ˜์น˜๋Š” ์กฐ๊ฑด๊ณผ ๊ธฐ์ค€์„ ํ™•์ธํ•˜๊ธฐ ์ „๊นŒ์ง€ ๋ชฉํ‘œ์น˜๋กœ ๋‚จ์Šต๋‹ˆ๋‹ค.

์—ดยท์ˆ˜์œจยท๊ฒ€์‚ฌ

GPU๋Š” HBM DRAM๋ณด๋‹ค ํ›จ์”ฌ ๋†’์€ ์ „๋ ฅ์„ ์†Œ๋น„ํ•˜๋Š” ๊ฒฝ์šฐ๊ฐ€ ๋งŽ์Šต๋‹ˆ๋‹ค. HBM์„ GPU ์œ„์— ๋ฐฐ์น˜ํ•˜๋ฉด ๋ฉ”๋ชจ๋ฆฌ์™€ GPU๊ฐ€ ๊ฐ™์€ ์ˆ˜์ง ์—ด ๊ฒฝ๋กœ๋ฅผ ๊ณต์œ ํ•  ์ˆ˜ ์žˆ์–ด, ๊ธฐ์กด 2.5D ํŒจํ‚ค์ง€์™€ ๋‹ค๋ฅธ ์—ด ์„ค๊ณ„๊ฐ€ ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค.

  • GPU hot spot์ด HBM์˜ ๋™์ž‘ ์˜จ๋„์™€ retention margin์— ์˜ํ–ฅ์„ ์ค„ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ์ ์ธต ๋†’์ด์™€ bonding ์ธต์€ ์—ด ์ €ํ•ญ๊ณผ ๊ธฐ๊ณ„์  ์‘๋ ฅ์„ ์ฆ๊ฐ€์‹œํ‚ฌ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ์›จ์ดํผ ์ ‘ํ•ฉ ํ›„ ์–ด๋А ํ•œ ์ธต์˜ ๋ถˆ๋Ÿ‰๋„ ์ „์ฒด ์ ์ธต ์ˆ˜์œจ์„ ๋‚ฎ์ถœ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • Known Good Die/Wafer ์„ ๋ณ„, bond alignment ๊ฒ€์‚ฌ, TSVยทI/O continuity ๊ฒ€์‚ฌ, burn-in์ด ์ค‘์š”ํ•ด์ง‘๋‹ˆ๋‹ค.
  • ํŒจํ‚ค์ง€ ์กฐ๋ฆฝ ์ „์— ์–ด๋А ์ •๋„์˜ pre-bond test๋ฅผ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ๋Š”์ง€๊ฐ€ ์ œ์กฐ ์›๊ฐ€์™€ ์ˆ˜์œจ์„ ์ขŒ์šฐํ•ฉ๋‹ˆ๋‹ค.

์‘์šฉ ๋ถ„์•ผ

AI ํ•™์Šต ๋ฐ ์ถ”๋ก 

๋Œ€ํ˜• ๋ชจ๋ธ์˜ ํ•™์Šต๊ณผ ์ถ”๋ก ์€ tensor ์—ฐ์‚ฐ๊ธฐ๋ณด๋‹ค HBM ์šฉ๋Ÿ‰ยท๋Œ€์—ญํญยท์ „๋ ฅ ์˜ˆ์‚ฐ์— ์˜ํ•ด ์ œํ•œ๋  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. zHBM์ด ์‹คํ˜„๋˜๋ฉด GPU์™€ HBM ์‚ฌ์ด์˜ ์—ฐ๊ฒฐ ๋ฐ€๋„๋ฅผ ๋†’์—ฌ attention, GEMM, embedding์ฒ˜๋Ÿผ ๋ฉ”๋ชจ๋ฆฌ ํŠธ๋ž˜ํ”ฝ์ด ํฐ ์—ฐ์‚ฐ์˜ ๊ณต๊ธ‰๋ฅ ์„ ๊ฐœ์„ ํ•˜๋Š” ๋ฐฉํ–ฅ์œผ๋กœ ํ™œ์šฉ๋  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

Physical AI์™€ ๊ณ ์ง‘์  ๊ฐ€์†๊ธฐ

์‚ผ์„ฑ์€ zHBM์„ agent AI์—์„œ physical AI๋กœ ์ด์–ด์ง€๋Š” ์‹œ์Šคํ…œ ์š”๊ตฌ์— ๋Œ€์‘ํ•˜๋Š” ๊ธฐ์ˆ ๋กœ ์„ค๋ช…ํ–ˆ์Šต๋‹ˆ๋‹ค. ๋กœ๋ด‡ยท์ž์œจ์ฃผํ–‰ยท์‹ค์‹œ๊ฐ„ ์„ผ์„œ ์ฒ˜๋ฆฌ์ฒ˜๋Ÿผ ๋‚ฎ์€ ์ง€์—ฐ๊ณผ ๋†’์€ ์ง€์† ๋Œ€์—ญํญ์ด ํ•„์š”ํ•œ ์‹œ์Šคํ…œ์€ ํŒจํ‚ค์ง€ ์•ˆ์—์„œ ์—ฐ์‚ฐ๊ณผ ๋ฉ”๋ชจ๋ฆฌ๋ฅผ ๋” ๋ฐ€์ ‘ํ•˜๊ฒŒ ๊ฒฐํ•ฉํ•˜๋Š” ์ด์ ์„ ์–ป์„ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๋‹ค๋งŒ ์‹ค์ œ ์ œํ’ˆ ์ ์šฉ์—๋Š” ์—ดยท์‹ ๋ขฐ์„ฑยท์ˆ˜์œจยท๊ณ ๊ฐ GPU ์„ค๊ณ„์™€์˜ ๊ณต๋™ ์ตœ์ ํ™”๊ฐ€ ์„ ํ–‰๋˜์–ด์•ผ ํ•ฉ๋‹ˆ๋‹ค.

์žฅ๋‹จ์ 

์žฅ์ 

  • GPU์™€ HBM ์‚ฌ์ด์˜ ์ˆ˜์ง ์—ฐ๊ฒฐ ๋ฉด์ ์„ ํ™œ์šฉํ•ด ๋Œ€์—ญํญ ๋ฐ€๋„๋ฅผ ๋†’์ผ ์ž ์žฌ๋ ฅ์ด ์žˆ์Šต๋‹ˆ๋‹ค.
  • ๊ฐ™์€ ์ฒ˜๋ฆฌ๋Ÿ‰์„ ๋” ๋งŽ์€ ๋ณ‘๋ ฌ I/O๋กœ ๋ถ„์‚ฐํ•˜๋ฉด signal rate์™€ link power๋ฅผ ๋‚ฎ์ถœ ์—ฌ์ง€๊ฐ€ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ํŒจํ‚ค์ง€ ๋ฉด์  ์ œ์•ฝ์ด ํฐ AI accelerator์—์„œ HBM ์šฉ๋Ÿ‰๊ณผ ์—ฐ์‚ฐ ๋‹ค์ด์˜ ํ†ตํ•ฉ๋„๋ฅผ ๋†’์ผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ๋ฉ”๋ชจ๋ฆฌ, logic, foundry, package๋ฅผ ํ•จ๊ป˜ ์ตœ์ ํ™”ํ•˜๋Š” co-design์„ ์ ์šฉํ•˜๊ธฐ ์‰ฝ์Šต๋‹ˆ๋‹ค.

๋‹จ์ ๊ณผ ์œ„ํ—˜

  • GPU hot spot ์œ„์— HBM์„ ๋†“๋Š” ๊ตฌ์กฐ๋Š” ์—ด ๋ฐฉ์ถœ๊ณผ ์˜จ๋„ ๊ท ์ผ๋„์— ๋ถˆ๋ฆฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • multi-wafer-to-wafer bonding์€ ์ •๋ ฌ, ์˜ค์—ผ, ์›จ์ดํผ ํœจ, ๋ถˆ๋Ÿ‰ ์ „ํŒŒ๋กœ ์ˆ˜์œจ ์œ„ํ—˜์„ ๋†’์ž…๋‹ˆ๋‹ค.
  • ์ ์ธต ํ›„ ๋ถˆ๋Ÿ‰ ๋ถ„์„๊ณผ ์ˆ˜๋ฆฌ๊ฐ€ ์–ด๋ ค์›Œ์ง€๊ณ , Known Good Die/Wafer ๊ฒ€์‚ฌ ๋น„์šฉ์ด ์ฆ๊ฐ€ํ•ฉ๋‹ˆ๋‹ค.
  • GPU์™€ HBM์˜ ๊ณต์ •ยท์„ค๊ณ„ยท์ˆ˜๋ช… ์กฐ๊ฑด์„ ํ•จ๊ป˜ ๋งž์ถฐ์•ผ ํ•˜๋ฏ€๋กœ ํŒจํ‚ค์ง€ ์ƒํƒœ๊ณ„ ์˜์กด์„ฑ์ด ์ปค์ง‘๋‹ˆ๋‹ค.
  • ๊ณต๊ฐœ๋œ ์„ฑ๋Šฅ ์ˆ˜์น˜๊ฐ€ ๋ชฉํ‘œ ๋˜๋Š” ์ดˆ๊ธฐ ์‹œํ—˜ ๊ฒฐ๊ณผ์ด๋ฏ€๋กœ ์‹ค์ œ ์ œํ’ˆ์˜ ๋Œ€์—ญํญยท์ „๋ ฅยท์—ด ํŠน์„ฑ์„ ์•„์ง ํ™•์ •ํ•  ์ˆ˜ ์—†์Šต๋‹ˆ๋‹ค.

๊ด€๋ จ ๊ธฐ์ˆ 

  • HBM ๋‚ด๋ถ€ ๊ตฌ์กฐ: TSV, logic die, pseudo channel, ์ธํ„ฐํฌ์ € ๊ตฌ์กฐ
  • HBM ์„ธ๋Œ€ ๋น„๊ต: HBM1๋ถ€ํ„ฐ HBM4๊นŒ์ง€์˜ ํ‘œ์ค€ยท๋Œ€์—ญํญยท์ฑ„๋„ ๋ณ€ํ™”
  • HBM3 Spec Summary: HBM3 ์ฑ„๋„, command, ECC, refresh ๋™์ž‘
  • HBM ์˜จ๋„ ๊ด€๋ฆฌ: ์ ์ธต DRAM์˜ ์—ด ์„ผ์„œยท๋ฐฉ์—ดยท์‹ ๋ขฐ์„ฑ ์ด์Šˆ
  • GPU ๋ฉ”๋ชจ๋ฆฌ ์•„ํ‚คํ…์ฒ˜ ๊ธฐ์ดˆ: GPUยทGDDRยทHBM ํŒจํ‚ค์ง€ ์„ ํƒ ๊ด€์ 
  • CXL ๊ธฐ๋ฐ˜ ์‹œ์Šคํ…œ: HBM๊ณผ ๋‹ค๋ฅธ ๋ฉ”๋ชจ๋ฆฌ ํ™•์žฅยท๊ณต์œ  ๊ฒฝ๋กœ ๋น„๊ต
  • JEDEC, JESD270-4, HBM4 Standard: https://www.jedec.org/standards-documents/docs/jesd270-4
  • Samsung Semiconductor, HBM: https://semiconductor.samsung.com/dram/hbm/
  • Samsung Electronics CTO ๋ฐœํ‘œ๋ฅผ ์ธ์šฉํ•œ ZDNet Korea, 2026-02-11: https://zdnet.co.kr/view/?no=20260211122505
  • Seoul Economic Daily, Samsung Unveils zHBM Technology, 2026-02-11: https://en.sedaily.com/finance/2026/02/11/samsung-unveils-zhbm-technology-to-stack-memory-on-gpus
  • TrendForce, Samsung's zHBM vs. Intel's Z-Angle Memory, 2026-02-18: https://www.trendforce.com/news/2026/02/18/news-breaking-hbm-barriers-samsungs-zhbm-vs-intels-z-angle-memory/
  • Cadence, Through-Silicon Vias: Interconnect Basics, Design Rules, and Performance, 2025-12-02: https://community.cadence.com/cadence_blogs_8/b/corporate-news/posts/through-silicon-vias-tsvs-interconnect-basics-design-rules-and-performance

ํ•ต์‹ฌ ์ •๋ฆฌ

zHBM์€ HBM ์Šคํƒ์„ GPU ์˜†์— ๋‘๋Š” ๊ธฐ์กด 2.5D ํŒจํ‚ค์ง•์—์„œ GPU ์œ„๋กœ ํ™•์žฅํ•˜๋Š” ์‚ผ์„ฑ์ „์ž์˜ 3D ๋ฉ”๋ชจ๋ฆฌ ๊ฐœ๋ฐœ ๊ฐœ๋…์ž…๋‹ˆ๋‹ค. Multi-wafer-to-wafer bonding๊ณผ ์ˆ˜์ง I/O๋ฅผ ํ™œ์šฉํ•ด ์—ฐ๊ฒฐ ๋ฐ€๋„์™€ ๋Œ€์—ญํญ์„ ๋†’์ด๋Š” ๊ฒƒ์ด ํ•ต์‹ฌ์ด๋ฉฐ, ์‚ผ์„ฑ ๋ฐœํ‘œ๋ฅผ ์ธ์šฉํ•œ ๋ณด๋„์—์„œ๋Š” HBM4 ๋Œ€๋น„ ๋Œ€์—ญํญ 4๋ฐฐ ์ด์ƒ๊ณผ ์ „๋ ฅ 75% ์ ˆ๊ฐ ๋ชฉํ‘œ๊ฐ€ ์ œ์‹œ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ๋Ÿฌ๋‚˜ zHBM์€ ์•„์ง ํ‘œ์ค€์ด๋‚˜ ์–‘์‚ฐ ์ œํ’ˆ์ด ์•„๋‹ˆ๋ฉฐ, ์ด ์ˆ˜์น˜๋Š” ์กฐ๊ฑด์ด ๊ณต๊ฐœ๋œ ๋…๋ฆฝ ๋ฒค์น˜๋งˆํฌ๊ฐ€ ์•„๋‹™๋‹ˆ๋‹ค. ์‹ค์ œ ์ƒ์šฉํ™”์˜ ๊ด€๊ฑด์€ ๋Œ€์—ญํญ๋ณด๋‹ค๋„ GPU hot spot์„ ํฌํ•จํ•œ ์—ด ์„ค๊ณ„, ์ ‘ํ•ฉ ์ˆ˜์œจ, ๊ฒ€์‚ฌยท์ˆ˜๋ฆฌ์„ฑ, ๊ทธ๋ฆฌ๊ณ  GPUยทHBMยทํŒจํ‚ค์ง€์˜ ๊ณต๋™ ์ตœ์ ํ™”์ž…๋‹ˆ๋‹ค.