
ÀÚ·á=¾÷½ºÅ×ÀÌ
¾÷½ºÅ×ÀÌÁö°¡ ÀÚ»çÀÇ Â÷¼¼´ë °Å´ë¾ð¾î¸ðµ¨(LLM) ‘¼Ö¶ó ÇÁ·Î 2’ÀÇ ÇÁ¸®ºä(preview) ¹öÀüÀ» °ø°³ÇÑ´Ù°í 20ÀÏ ¹àÇû´Ù.
¼Ö¶ó ÇÁ·Î 2´Â Áö³ 12¿ù Ãâ½ÃµÈ ‘¼Ö¶ó ÇÁ·Î’ÀÇ ÈļÓÀ¸·Î, ¸ðµ¨ ¸Å°³º¯¼ö(ÆÄ¶ó¹ÌÅÍ)´Â ±âÁ¸ 220¾ï¿¡¼ 310¾ïÀ¸·Î È®´ëµÇ°í ¼º´Éµµ ´ëÆø Çâ»óµÆ´Ù.
¾÷½ºÅ×ÀÌÁö´Â 7¿ù Á¤½Ä Ãâ½Ã¿¡ ¾Õ¼, Ãʱâ Å×½ºÆ®¿ëÀ¸·Î ÇÁ¸®ºä API(ÀÀ¿ëÇÁ·Î±×·¥ÀÎÅÍÆäÀ̽º)¸¦ ¹«·á·Î »ç¿ëÇÒ ¼ö ÀÖµµ·Ï °ø°³Çß´Ù.
¼Ö¶ó ÇÁ·Î 2´Â ‘MMLU(Á¾ÇÕ Áö½Ä)’, ‘IFEval(Áö½Ã ÀÌÇà)’ µî ÁÖ¿ä LLM º¥Ä¡¸¶Å© ¼º´É Æò±Õ¿¡¼ ¸ÞŸÀÇ ‘¶ó¸¶ 4 ½ºÄ«¿ìÆ®’´Â ¹°·Ð, ‘¶ó¸¶ 3.3 70B’, ¾Ë¸®¹Ù¹ÙÀÇ ‘Å¥¿ø 2.5 72B’ µî µÎ ¹è ÀÌ»ó Å« ºòÅ×Å© ¸ðµ¨µéµµ ¾ÕÁú·¶´Ù.
¶ÇÇÑ ‘KMMLU’, ‘ÇØ·Ê(HAE-RAE)’ µî Çѱ¹¾î ¼º´ÉÀ» Æò°¡ÇÏ´Â ´ëÇ¥ º¥Ä¡¸¶Å©¿¡¼ ³ôÀº Á¡¼ö¸¦ ±â·Ï, ÇöÀç °ø°³µÈ ¼ÒÇü¾ð¾î¸ðµ¨ Áß °¡Àå ¶Ù¾î³ ¼öÁØÀÓÀ» ÀÔÁõÇß´Ù.
Á¶¼±ÀϺ¸ µî ÁÖ¿ä ÆÄÆ®³Ê»ç¿ÍÀÇ Çù¾÷À» ÅëÇØ È®º¸ÇÑ °íǰÁú Çѱ¹¾î µ¥ÀÌÅ͸¦ ÇнÀ¿¡ Àû±Ø Ȱ¿ëÇÑ °ÍÀÌ ÁÖÈ¿Çß´Ù.
¾Æ¿ï·¯, ¼Ö¶ó ÇÁ·Î 2¿¡´Â ¾÷½ºÅ×ÀÌÁö LLM ÃÖÃÊ·Î ‘ÇÏÀ̺긮µå ¸ðµå’°¡ Àû¿ëµÈ´Ù.
¸ðµ¨ »ç¿ë ½Ã ºü¸¥ ÀÀ´ä¿¡ ÃÖÀûÈµÈ ‘ê ¸ðµå’¿Í, ´Ü°èÀû »ç°í¸¦ °ÅÃÄ ±¸Á¶ÈµÈ ´äº¯À» »ý¼ºÇÏ´Â ‘Ãß·Ð ¸ðµå’ Áß ¼±ÅÃÇÒ ¼ö ÀÖ´Ù.
Ãß·Ð ¸ðµå¿¡´Â ‘»ý°¢ »ç½½(Chain of Thought, CoT)’ ±â¹ýÀÌ Àû¿ëµÇ¾î, ¼öÇÐÀ̳ª ÄÚµùó·³ º¹ÀâÇÑ ¹®Á¦¿¡¼ ´õ¿í Á¤±³ÇÑ ´äº¯À» Á¦°øÇÑ´Ù.
»ç¿ë¼ºµµ °ÈµÆ´Ù.
±âÁ¸º¸´Ù 2¹è È®ÀåµÈ 6¸¸4000 ÅäÅ«±îÁö Áö¿øÇØ ´õ ±ä ¹®¼³ª ´ëȸ¦ ÇÑ ¹ø¿¡ ó¸®ÇÒ ¼ö ÀÖ´Ù.
¶ÇÇÑ, ÀÚü ÅäÅ©³ªÀÌÀú(tokenizer) °³¼±À» ÅëÇØ Çѱ¹¾î ¹× ¹®¼ ±â¹Ý ÀÛ¾÷¿¡¼ ÃÖ´ë 30%±îÁö ÅäÅ« Àý°¨ÀÌ °¡´ÉÇØÁ³À¸¸ç, ÀÌ¿¡ µû¶ó ÀÀ´ä ¼Óµµ¿Í ºñ¿ë È¿À²µµ ´ëÆø Çâ»óµÆ´Ù
¾÷½ºÅ×ÀÌÁö ±è¼ºÈÆ ´ëÇ¥´Â “¼Ö¶ó ÇÁ·Î 2´Â 31B¶ó´Â È¿À²ÀûÀÎ ±Ô¸ð·Îµµ 70B ¸ðµ¨ ¼öÁØÀÇ ¼º´ÉÀ» ±¸ÇöÇϸç ÀÛÁö¸¸ °·ÂÇÑ ¼ÒÇü¾ð¾î¸ðµ¨ÀÇ »õ ±âÁØÀ» Á¦½ÃÇÑ´Ù”¶ó¸ç “ƯÈ÷ ÃÖ°í Ãß·Ð ¼º´É¿¡ ¶Ù¾î³ Çѱ¹¾î ¼º´ÉÀ» °®Ãá À̹ø ¸ðµ¨À» ÅëÇØ ´õ ¸¹Àº ¾÷¹« Çõ½ÅÀ» ±â´ëÇÑ´Ù”°í ÀüÇß´Ù.
¾ÆÁÖ°æÁ¦=ÃÖ¿¬Àç ±âÀÚ ch0221@ajunews.com
<º» ÄÜÅÙÃ÷ÀÇ ÀúÀÛ±Ç ¹× ¹ýÀû Ã¥ÀÓÀº ¾ÆÁÖ°æÁ¦(www.ajunews.com)¿¡ ÀÖÀ¸¸ç, »Ë»Ñ´Â Á¦ÈÞ¸¦ ÅëÇØ Á¦°øÇϰí ÀÖ½À´Ï´Ù.>