- ÇöÀç À§Ä¡
- home > ÄÄÇ»ÅÍ¡¤ICT¡¤¾îÇÐ > ÄÄÇ»ÅÍ¡¤IT µµ¼ > ÄÄÇ»ÅÍ°øÇÐ > ¾ËÆÄ°í¸¦ ºÐ¼®ÇÏ¸ç ¹è¿ì´Â ÀΰøÁö´É[Á¦ÀÌÆà]
¾ËÆÄ°í¸¦ ÅëÇØ Àΰ£ÀÇ ÁöÇý¸¦ ³Ñ¾î¼± ÇÑ ¼öÀÇ ºñ¹ÐÀ» Ž±¸ÇÑ´Ù
¹ÙµÏ°èÀÇ ¾ç´ë »ê¸ÆÀÌ´ø À̼¼µ¹°ú Ä¿Á¦¸¦ À̱â°í Àü¼³ÀÌ µÈ ¹ÙµÏ ÀΰøÁö´É ¾ËÆÄ°í. ÀÌ Ã¥Àº ¾ËÆÄ°í¸¦ ź»ý½ÃÅ°°í ¼ºÀå½ÃŲ µö ·¯´×, °È ÇнÀ, ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö¿¡ ´ëÇØ ÀÚ¼¼È÷ ´Ù·é´Ù. ¶ÇÇÑ, ¾ËÆÄ°íÀÇ Â÷±â ¹öÀüÀÎ ¾ËÆÄ°í Á¦·Î¿¡ ´ëÇؼµµ ¾Ë¾Æº»´Ù. Àΰ£¿¡ ÀÇÇØ °³¹ßµÇ°í ÇнÀµÇ¾úÁö¸¸, Àΰ£ÀÇ Áö´ÉÀ» ´É°¡ÇØ ¹ö¸° ÀΰøÁö´ÉÀÇ ±¸Á¶¿Í ¿ø¸®¸¦ Ž»öÇÔÀ¸·Î½á ¹«±Ã¹«ÁøÇÑ ÀΰøÁö´ÉÀÇ ¹ßÀü ¹æÇâÀ» ¸ð»öÇÑ´Ù. ?
¹ÙµÏ°èÀÇ ¾ç´ë »ê¸ÆÀÌ´ø À̼¼µ¹°ú Ä¿Á¦¸¦ À̱â°í Àü¼³ÀÌ µÈ ¹ÙµÏ ÀΰøÁö´É ¾ËÆÄ°í. ÀÌ Ã¥Àº ¾ËÆÄ°í¸¦ ź»ý½ÃÅ°°í ¼ºÀå½ÃŲ µö ·¯´×, °È ÇнÀ, ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö¿¡ ´ëÇØ ÀÚ¼¼È÷ ´Ù·é´Ù. ¶ÇÇÑ, ¾ËÆÄ°íÀÇ Â÷±â ¹öÀüÀÎ ¾ËÆÄ°í Á¦·Î¿¡ ´ëÇؼµµ ¾Ë¾Æº»´Ù. Àΰ£¿¡ ÀÇÇØ °³¹ßµÇ°í ÇнÀµÇ¾úÁö¸¸, Àΰ£ÀÇ Áö´ÉÀ» ´É°¡ÇØ ¹ö¸° ÀΰøÁö´ÉÀÇ ±¸Á¶¿Í ¿ø¸®¸¦ Ž»öÇÔÀ¸·Î½á ¹«±Ã¹«ÁøÇÑ ÀΰøÁö´ÉÀÇ ¹ßÀü ¹æÇâÀ» ¸ð»öÇÑ´Ù. ?
ÀúÀÚ: ¿ÀÃ÷Å° Åä¸ð½Ã (ÁöÀºÀÌ), Á¤ÀÎ½Ä (¿Å±äÀÌ)
CHAPTER 1 ¾ËÆÄ°íÀÇ µîÀå 1
1.1 °ÔÀÓ AIÀÇ ¿ª»ç¿Í ¹ßÀü 2
1.1.1 ¾Ù·± Æ©¸µ°ú AI 2
1.2 õÀç µ¥¹Ì½º ÇÏ»çºñ½ºÀÇ µîÀå 5
1.2.1 ½Åµ¿ µ¥¹Ì½º ÇÏ»çºñ½º 5
1.3 ¾ËÆÄ°íÀÇ È°¾à 7
1.3.1 ¾ËÆÄ°íÀÇ È°¾à 7
1.4 ¹ÙµÏ AIÀÇ ±âÃÊ 13
1.4.1 ¹ÙµÏÀÇ ±ÔÄ¢ 13
1.4.2 ¹ÙµÏ AI¸¦ ±¸ÇöÇÑ´Ù´Â °ÍÀº ¹«¾ùÀΰ¡? 16
1.4.3 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ© 20
1.4.4 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ©ÀÇ ¾î·Á¿î Á¡ 21
1.4.5 ¸Ó½Å ·¯´×À» ÀÌ¿ëÇÑ ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ© 22
1.4.6 ¾ËÆÄ°íÀÇ ·Ñ ¾Æ¿ô Á¤Ã¥ ÇнÀ 26
1.5 Á¤¸® 30
CHAPTER 2 µö ·¯´× - ¹ÙµÏ AI´Â ¼ø°£ÀûÀ¸·Î ¼ö¸¦ ¶°¿Ã¸°´Ù 31
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 32
2.1 µö ·¯´×À̶õ? 34
2.1.1 AI´Â »ç¶÷ÀÇ Á÷°üÀ» ½ÇÇöÇÒ ¼ö ÀÖÀ»±î? 34
2.2 Çʱâü ¼ýÀÚ ÀνÄÀÇ ¿¹ 42
2.2.1 Çʱâü ¼ýÀÚ ÀνÄÀ̶õ? 42
2.2.2 Çʱâü ¼ýÀÚ ÀνÄÀÇ µ¥ÀÌÅÍ ¼¼Æ® ¡®MNIST¡¯ 42
2.2.3 ½Å°æ¸ÁÀ» »ç¿ëÇÑ Çʱâü ¼ýÀÚ ÀÎ½Ä 44
2.2.4 Çʱâü ¼ýÀÚ ÀνĿ¡ ´ëÇÑ ÄÁº¼·ç¼Ç ½Å°æ¸Á 47
2.2.5 ´Ù´Ü°èÀÇ ½Å°æ¸Á¿¡¼µµ À¯È¿ÇÑ È°¼ºÈ ÇÔ¼ö 51
2.2.6 ¿À·ù ¿ªÀüÆÄ ¹æ¹ý¿¡ ±âÃÊÇÑ CNNÀÇ ÇÊÅÍ °¡ÁßÄ¡ ÇнÀ 54
2.2.7 È»ó ó¸® CNNÀÇ ¹ßÀü 60
2.3 ¾ËÆÄ°íÀÇ ÄÁº¼·ç¼Ç ½Å°æ¸Á 64
2.3.1 ¾ËÆÄ°íÀÇ ÄÁº¼·ç¼Ç ½Å°æ¸Á 64
2.3.2 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ©¿Í È»ó ÀνÄÀÇ À¯»ç¼º 65
2.3.3 ¹ÙµÏÀÇ ¼ö¸¦ ¼±ÅÃÇÏ´Â CNN - SL Á¤Ã¥ ³×Æ®¿öÅ© 66
2.3.4 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÀÔ·Â 48ä³ÎÀÇ Æ¯Â¡ 71
2.3.5 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÄÁº¼·ç¼Ç °è»ê ¿¹ 75
2.3.6 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ °è»ê·® 77
2.3.7 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ¿ë µ¥ÀÌÅÍ È¹µæ 81
2.3.8 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ±â¹ý 84
2.3.9 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ °á°ú 87
2.3.10 ±¹¸éÀÇ À¯¸® ºÒ¸®¸¦ ¿¹ÃøÇÏ´Â CNN(¹ë·ù ³×Æ®¿öÅ©) 90
2.4 Chainer·Î CNN ÇнÀ½ÃÅ°±â 93
2.4.1 MNISTÀÇ ½Å°æ¸Á ÇнÀ ºÎºÐ ÀÛ¼ºÇϱâ 93
2.4.2 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ºÎºÐ ÀÛ¼ºÇϱâ 96
2.5 Á¤¸® 100
CHAPTER 3 °È ÇнÀ - ¹ÙµÏ AI´Â °æÇèÀ» ¹è¿î´Ù 101
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 102
3.1 °È ÇнÀÀ̶õ? 104
3.1.1 ¾î¶»°Ô °æÇè¿¡¼ ¹è¿ï °ÍÀΰ¡? 104
3.2 °È ÇнÀÀÇ ¿ª»ç 108
3.2.1 °È ÇнÀ 108
3.3 ¸ÖƼ ¾Ïµå ¹êµ÷ ¹®Á¦ 112
3.3.1 °È ÇнÀÀÇ »ç·Ê 112
3.3.2 UCB1 ¾Ë°í¸®Áò 116
3.4 ¹Ì·Î¸¦ Ç®±â À§ÇÑ °È ÇнÀ 118
3.4.1 4 ¡¿ 4ÄÀ¸·Î ÀÌ·ç¾îÁø ¹Ì·Î 118
3.4.2 °¡Ä¡ ±â¹ÝÀÇ ¹æ½Ä: Q ÇнÀÀ» ÅëÇØ ¹Ì·Î ÇØ°á 120
3.4.3 Á¤Ã¥ ±â¹Ý ¹æ½Ä: Á¤Ã¥ °æ»ç¹ýÀ» ÅëÇØ ¹Ì·Î ÇØ°á 124
3.5 ºñµð¿À °ÔÀÓ Á¶ÀÛ ½ºÅ³À» ¾ò±â À§ÇÑ °È ÇнÀ 127
3.5.1 DQN 127
3.6 ¾ËÆÄ°íÀÇ °È ÇнÀ 131
3.6.1 ¾ËÆÄ°íÀÇ °È ÇнÀ 131
3.6.2 Á¤Ã¥ °æ»ç¹ý¿¡ ±Ù°ÅÇÏ´Â °È ÇнÀ 134
3.6.3 RL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ¼º´É 137
3.6.4 ¹ë·ù ³×Æ®¿öÅ© ÇнÀ¿ëÀÇ µ¥ÀÌÅÍ ÀÛ¼º ±â¹ý 138
3.7 Á¤¸®¿Í °úÁ¦ 143
CHAPTER 4 Ž»ö - ¹ÙµÏ AI´Â ¾î¶»°Ô ¿¹ÃøÇÒ±î? 145
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 146
4.1 2ÀÎ Á¦·Î¼¶ À¯ÇÑ È®Á¤ ¿ÏÀü Á¤º¸ °ÔÀÓ 148
4.1.1 ¾î¶»°Ô ¼ö¸¦ ¿¹ÃøÇÒ±î? 148
4.2 °ÔÀÓ¿¡¼ÀÇ Å½»ö 153
4.2.1 SL Á¤Ã¥ ³×Æ®¿öÅ© 153
4.3 ±âÁ¸ÀÇ °ÔÀÓ Æ®¸® Ž»ö(¹Î¸Æ½º Æ®¸® Ž»ö) 155
4.3.1 ¡®¿ÏÀü Ž»ö¡¯ÀÇ °³³ä 155
4.3.2 Ž»ö Æ÷ÀÎÆ® - °¡ÁöÄ¡±â¿Í Æò°¡ ÇÔ¼ö 162
4.4 ¹ÙµÏ¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 165
4.4.1 ¸óÅ×Ä«¸¦·Î ¹æ¹ý 165
4.4.2 ¹ÙµÏ¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î ¹æ¹ý: ¿ø½Ã ¸óÅ×Ä«¸¦·Î 166
4.4.3 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 170
4.4.4 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ °á°ú¿Í ÃÖÁ¾ÀûÀÎ ¼ö Ž»ö 179
4.4.5 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ °³¼± 182
4.5 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ ¼º°ø ¿äÀΰú °úÁ¦ 185
4.5.1 CrazyStone°ú Gnu Go 185
4.5.2 ´Ü 1ÁÙ·Î ´Ù½Ã ÅÂ¾î³ CrazyStone 186
4.6 Á¤¸® 188
4.6.1 Ž»ö 188
CHAPTER 5 ¾ËÆÄ°íÀÇ ¿Ï¼º 189
5.1 ¾ËÆÄ°íÀÇ ¼³°èµµ 190
5.1.1 ¾ËÆÄ°íÀÇ Àç·á 190
5.1.2 Àüü¸¦ Á¦¾îÇÏ´Â AI 192
5.2 ºñµ¿±â Á¤Ã¥ °¡Ä¡ °»½Å ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 195
5.2.1 ¼¼ °¡Áö Á¤Ã¥ÀÇ Æ¯Â¡ 195
5.2.2 ºñµ¿±â Á¤Ã¥ °¡Ä¡ °»½Å ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 197
5.2.3 APV-MCTSÀÇ ¼±Åà ó¸® 200
5.2.4 APV-MCTSÀÇ Àü°³ ó¸® 201
5.2.5 APV-MCTSÀÇ Æò°¡ ó¸® 201
5.2.6 APV-MCTSÀÇ °»½Å ó¸® 202
5.3 ´ë·® CPU¡¤GPUÀÇ ÀÌ¿ë 204
5.3.1 ´ë·®ÀÇ CPU¿Í GPU¿¡ ÀÇÇÑ º´·Ä Ž»ö 204
5.3.2 ·ÎÅ©¸®½º Çؽà 206
5.3.3 °¡»ó ¼Õ½Ç 208
5.4 ¾ËÆÄ°íÀÇ °·ÂÇÔ 211
5.4.1 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö, ¹ë·ù ³×Æ®¿öÅ©, Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ Á¶ÇÕ È¿°ú 211
CHAPTER 6 ¾ËÆÄ°í¿¡¼ ¾ËÆÄ°í Á¦·Î·Î 213
6.1 ½ÃÀÛ¿¡ ¾Õ¼ 214
6.2 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ µö ·¯´× 216
6.2.1 µà¾ó ³×Æ®¿öÅ©ÀÇ ±¸Á¶ 218
6.2.2 µà¾ó ³×Æ®¿öÅ©ÀÇ ÇнÀ 224
6.2.3 ¾ËÆÄ°í Á¦·ÎÀÇ µö ·¯´× Á¤¸® 227
6.3 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 228
6.3.1 ¾ËÆÄ°í Á¦·ÎÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö °³¿ä 228
6.3.2 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ Ç÷ΠÂ÷Æ® 230
6.3.3 ¾ËÆÄ°í Á¦·ÎÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö Á¤¸® 233
6.4 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ °È ÇнÀ 234
6.4.1 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀ ±â¹ý 236
6.4.2 °È ÇнÀÀÇ °è»ê ½Ã°£ 242
6.4.3 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀÀº ¹«¾ùÀ» ÇÏ°í ÀÖ³ª? 245
6.4.4 °È ÇнÀÀÇ È¿°ú 247
6.4.5 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀ Á¤¸®¿Í ±× ÈÄÀÇ ÁøÀü 248
6.5 ¾ËÆÄ°í Á¦·ÎÀÇ °·ÂÇÔ 251
6.6 ¾ËÆÄ°í Á¦·Î´Â Áö½Ä ¾øÀÌ ¸¸µé ¼ö ÀÖÀ»±î? 253
6.7 ¾ËÆÄ°í³ª ¾ËÆÄ°í Á¦·Î¿¡ ¾àÁ¡Àº ÀÖÀ»±î? 255
6.7.1 ¾ËÆÄ°í¿Í ¾ËÆÄ°í Á¦·ÎÀÇ ¾àÁ¡ °¡´É¼º 255
6.8 ¾ËÆÄ°í Á¦·ÎÀÇ ÇâÈÄ ¹Ì·¡ 257
6.8.1 ¹ÙµÏ°èÀÇ ¹Ì·¡´Â ¾î¶»°Ô µÉ±î? 257
6.8.2 AIÀÇ °úÁ¦ 258
Appendix 1 ¼ö½Ä¿¡ °üÇÏ¿© 263
A1.1 Äܺ¼·ç¼Ç ½Å°æ¸ÁÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 264
A1.1.1 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 264
A1.1.2 ¹ë·ù ³×Æ®¿öÅ©ÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 265
A1.1.3 µà¾ó ³×Æ®¿öÅ©ÀÇ ¼Õ½Ç ÇÔ¼ö¿¡ °üÇÑ º¸Ãæ 267
A1.2 °È ÇнÀÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 269
A1.2.1 Æľ˰íÀÇ RL Á¤Ã¥ ³×Æ®¿öÅ© °È ÇнÀ ¹æ¹ýÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 269
A1.2.2 ¹Ì·Î¸¦ ¿¹·Î µç Á¤Ã¥ °æ»ç¹ýÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 271
Appendix 2 ¹ÙµÏ ÇÁ·Î±×·¥¿ë UI ¼ÒÇÁÆ®¿þ¾î GoGui ¹× GoGui¿ë ÇÁ·Î±×·¥ DeltaGo ÀÌ¿ë ¹æ¹ý 273
A2.1 DeltaGo¶õ? 274
A2.1.1 DeltaGoÀÇ Æ¯Â¡ 274
A2.2 GoGuiÀÇ ¼³Ä¡ ¹× GoGui¿ë ÇÁ·Î±×·¥ DeltaGo ÀÌ¿ë ¹æ¹ý 276
A2.2.1 DeltaGo ´Ù¿î·Îµå¿Í ¾ÐÃà Ç®±â 276
ã¾Æº¸±â 289
1.1 °ÔÀÓ AIÀÇ ¿ª»ç¿Í ¹ßÀü 2
1.1.1 ¾Ù·± Æ©¸µ°ú AI 2
1.2 õÀç µ¥¹Ì½º ÇÏ»çºñ½ºÀÇ µîÀå 5
1.2.1 ½Åµ¿ µ¥¹Ì½º ÇÏ»çºñ½º 5
1.3 ¾ËÆÄ°íÀÇ È°¾à 7
1.3.1 ¾ËÆÄ°íÀÇ È°¾à 7
1.4 ¹ÙµÏ AIÀÇ ±âÃÊ 13
1.4.1 ¹ÙµÏÀÇ ±ÔÄ¢ 13
1.4.2 ¹ÙµÏ AI¸¦ ±¸ÇöÇÑ´Ù´Â °ÍÀº ¹«¾ùÀΰ¡? 16
1.4.3 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ© 20
1.4.4 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ©ÀÇ ¾î·Á¿î Á¡ 21
1.4.5 ¸Ó½Å ·¯´×À» ÀÌ¿ëÇÑ ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ© 22
1.4.6 ¾ËÆÄ°íÀÇ ·Ñ ¾Æ¿ô Á¤Ã¥ ÇнÀ 26
1.5 Á¤¸® 30
CHAPTER 2 µö ·¯´× - ¹ÙµÏ AI´Â ¼ø°£ÀûÀ¸·Î ¼ö¸¦ ¶°¿Ã¸°´Ù 31
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 32
2.1 µö ·¯´×À̶õ? 34
2.1.1 AI´Â »ç¶÷ÀÇ Á÷°üÀ» ½ÇÇöÇÒ ¼ö ÀÖÀ»±î? 34
2.2 Çʱâü ¼ýÀÚ ÀνÄÀÇ ¿¹ 42
2.2.1 Çʱâü ¼ýÀÚ ÀνÄÀ̶õ? 42
2.2.2 Çʱâü ¼ýÀÚ ÀνÄÀÇ µ¥ÀÌÅÍ ¼¼Æ® ¡®MNIST¡¯ 42
2.2.3 ½Å°æ¸ÁÀ» »ç¿ëÇÑ Çʱâü ¼ýÀÚ ÀÎ½Ä 44
2.2.4 Çʱâü ¼ýÀÚ ÀνĿ¡ ´ëÇÑ ÄÁº¼·ç¼Ç ½Å°æ¸Á 47
2.2.5 ´Ù´Ü°èÀÇ ½Å°æ¸Á¿¡¼µµ À¯È¿ÇÑ È°¼ºÈ ÇÔ¼ö 51
2.2.6 ¿À·ù ¿ªÀüÆÄ ¹æ¹ý¿¡ ±âÃÊÇÑ CNNÀÇ ÇÊÅÍ °¡ÁßÄ¡ ÇнÀ 54
2.2.7 È»ó ó¸® CNNÀÇ ¹ßÀü 60
2.3 ¾ËÆÄ°íÀÇ ÄÁº¼·ç¼Ç ½Å°æ¸Á 64
2.3.1 ¾ËÆÄ°íÀÇ ÄÁº¼·ç¼Ç ½Å°æ¸Á 64
2.3.2 ¡®´ÙÀ½ÀÇ ÇÑ ¼ö¡¯ ŽºÅ©¿Í È»ó ÀνÄÀÇ À¯»ç¼º 65
2.3.3 ¹ÙµÏÀÇ ¼ö¸¦ ¼±ÅÃÇÏ´Â CNN - SL Á¤Ã¥ ³×Æ®¿öÅ© 66
2.3.4 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÀÔ·Â 48ä³ÎÀÇ Æ¯Â¡ 71
2.3.5 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÄÁº¼·ç¼Ç °è»ê ¿¹ 75
2.3.6 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ °è»ê·® 77
2.3.7 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ¿ë µ¥ÀÌÅÍ È¹µæ 81
2.3.8 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ±â¹ý 84
2.3.9 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ °á°ú 87
2.3.10 ±¹¸éÀÇ À¯¸® ºÒ¸®¸¦ ¿¹ÃøÇÏ´Â CNN(¹ë·ù ³×Æ®¿öÅ©) 90
2.4 Chainer·Î CNN ÇнÀ½ÃÅ°±â 93
2.4.1 MNISTÀÇ ½Å°æ¸Á ÇнÀ ºÎºÐ ÀÛ¼ºÇϱâ 93
2.4.2 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ºÎºÐ ÀÛ¼ºÇϱâ 96
2.5 Á¤¸® 100
CHAPTER 3 °È ÇнÀ - ¹ÙµÏ AI´Â °æÇèÀ» ¹è¿î´Ù 101
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 102
3.1 °È ÇнÀÀ̶õ? 104
3.1.1 ¾î¶»°Ô °æÇè¿¡¼ ¹è¿ï °ÍÀΰ¡? 104
3.2 °È ÇнÀÀÇ ¿ª»ç 108
3.2.1 °È ÇнÀ 108
3.3 ¸ÖƼ ¾Ïµå ¹êµ÷ ¹®Á¦ 112
3.3.1 °È ÇнÀÀÇ »ç·Ê 112
3.3.2 UCB1 ¾Ë°í¸®Áò 116
3.4 ¹Ì·Î¸¦ Ç®±â À§ÇÑ °È ÇнÀ 118
3.4.1 4 ¡¿ 4ÄÀ¸·Î ÀÌ·ç¾îÁø ¹Ì·Î 118
3.4.2 °¡Ä¡ ±â¹ÝÀÇ ¹æ½Ä: Q ÇнÀÀ» ÅëÇØ ¹Ì·Î ÇØ°á 120
3.4.3 Á¤Ã¥ ±â¹Ý ¹æ½Ä: Á¤Ã¥ °æ»ç¹ýÀ» ÅëÇØ ¹Ì·Î ÇØ°á 124
3.5 ºñµð¿À °ÔÀÓ Á¶ÀÛ ½ºÅ³À» ¾ò±â À§ÇÑ °È ÇнÀ 127
3.5.1 DQN 127
3.6 ¾ËÆÄ°íÀÇ °È ÇнÀ 131
3.6.1 ¾ËÆÄ°íÀÇ °È ÇнÀ 131
3.6.2 Á¤Ã¥ °æ»ç¹ý¿¡ ±Ù°ÅÇÏ´Â °È ÇнÀ 134
3.6.3 RL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ¼º´É 137
3.6.4 ¹ë·ù ³×Æ®¿öÅ© ÇнÀ¿ëÀÇ µ¥ÀÌÅÍ ÀÛ¼º ±â¹ý 138
3.7 Á¤¸®¿Í °úÁ¦ 143
CHAPTER 4 Ž»ö - ¹ÙµÏ AI´Â ¾î¶»°Ô ¿¹ÃøÇÒ±î? 145
ÀÌ Àå¿¡¼ ¼³¸íÇÒ ³»¿ë 146
4.1 2ÀÎ Á¦·Î¼¶ À¯ÇÑ È®Á¤ ¿ÏÀü Á¤º¸ °ÔÀÓ 148
4.1.1 ¾î¶»°Ô ¼ö¸¦ ¿¹ÃøÇÒ±î? 148
4.2 °ÔÀÓ¿¡¼ÀÇ Å½»ö 153
4.2.1 SL Á¤Ã¥ ³×Æ®¿öÅ© 153
4.3 ±âÁ¸ÀÇ °ÔÀÓ Æ®¸® Ž»ö(¹Î¸Æ½º Æ®¸® Ž»ö) 155
4.3.1 ¡®¿ÏÀü Ž»ö¡¯ÀÇ °³³ä 155
4.3.2 Ž»ö Æ÷ÀÎÆ® - °¡ÁöÄ¡±â¿Í Æò°¡ ÇÔ¼ö 162
4.4 ¹ÙµÏ¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 165
4.4.1 ¸óÅ×Ä«¸¦·Î ¹æ¹ý 165
4.4.2 ¹ÙµÏ¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î ¹æ¹ý: ¿ø½Ã ¸óÅ×Ä«¸¦·Î 166
4.4.3 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 170
4.4.4 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ °á°ú¿Í ÃÖÁ¾ÀûÀÎ ¼ö Ž»ö 179
4.4.5 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ °³¼± 182
4.5 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ ¼º°ø ¿äÀΰú °úÁ¦ 185
4.5.1 CrazyStone°ú Gnu Go 185
4.5.2 ´Ü 1ÁÙ·Î ´Ù½Ã ÅÂ¾î³ CrazyStone 186
4.6 Á¤¸® 188
4.6.1 Ž»ö 188
CHAPTER 5 ¾ËÆÄ°íÀÇ ¿Ï¼º 189
5.1 ¾ËÆÄ°íÀÇ ¼³°èµµ 190
5.1.1 ¾ËÆÄ°íÀÇ Àç·á 190
5.1.2 Àüü¸¦ Á¦¾îÇÏ´Â AI 192
5.2 ºñµ¿±â Á¤Ã¥ °¡Ä¡ °»½Å ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 195
5.2.1 ¼¼ °¡Áö Á¤Ã¥ÀÇ Æ¯Â¡ 195
5.2.2 ºñµ¿±â Á¤Ã¥ °¡Ä¡ °»½Å ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 197
5.2.3 APV-MCTSÀÇ ¼±Åà ó¸® 200
5.2.4 APV-MCTSÀÇ Àü°³ ó¸® 201
5.2.5 APV-MCTSÀÇ Æò°¡ ó¸® 201
5.2.6 APV-MCTSÀÇ °»½Å ó¸® 202
5.3 ´ë·® CPU¡¤GPUÀÇ ÀÌ¿ë 204
5.3.1 ´ë·®ÀÇ CPU¿Í GPU¿¡ ÀÇÇÑ º´·Ä Ž»ö 204
5.3.2 ·ÎÅ©¸®½º Çؽà 206
5.3.3 °¡»ó ¼Õ½Ç 208
5.4 ¾ËÆÄ°íÀÇ °·ÂÇÔ 211
5.4.1 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö, ¹ë·ù ³×Æ®¿öÅ©, Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ Á¶ÇÕ È¿°ú 211
CHAPTER 6 ¾ËÆÄ°í¿¡¼ ¾ËÆÄ°í Á¦·Î·Î 213
6.1 ½ÃÀÛ¿¡ ¾Õ¼ 214
6.2 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ µö ·¯´× 216
6.2.1 µà¾ó ³×Æ®¿öÅ©ÀÇ ±¸Á¶ 218
6.2.2 µà¾ó ³×Æ®¿öÅ©ÀÇ ÇнÀ 224
6.2.3 ¾ËÆÄ°í Á¦·ÎÀÇ µö ·¯´× Á¤¸® 227
6.3 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö 228
6.3.1 ¾ËÆÄ°í Á¦·ÎÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö °³¿ä 228
6.3.2 ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»öÀÇ Ç÷ΠÂ÷Æ® 230
6.3.3 ¾ËÆÄ°í Á¦·ÎÀÇ ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö Á¤¸® 233
6.4 ¾ËÆÄ°í Á¦·Î¿¡¼ÀÇ °È ÇнÀ 234
6.4.1 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀ ±â¹ý 236
6.4.2 °È ÇнÀÀÇ °è»ê ½Ã°£ 242
6.4.3 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀÀº ¹«¾ùÀ» ÇÏ°í ÀÖ³ª? 245
6.4.4 °È ÇнÀÀÇ È¿°ú 247
6.4.5 ¾ËÆÄ°í Á¦·ÎÀÇ °È ÇнÀ Á¤¸®¿Í ±× ÈÄÀÇ ÁøÀü 248
6.5 ¾ËÆÄ°í Á¦·ÎÀÇ °·ÂÇÔ 251
6.6 ¾ËÆÄ°í Á¦·Î´Â Áö½Ä ¾øÀÌ ¸¸µé ¼ö ÀÖÀ»±î? 253
6.7 ¾ËÆÄ°í³ª ¾ËÆÄ°í Á¦·Î¿¡ ¾àÁ¡Àº ÀÖÀ»±î? 255
6.7.1 ¾ËÆÄ°í¿Í ¾ËÆÄ°í Á¦·ÎÀÇ ¾àÁ¡ °¡´É¼º 255
6.8 ¾ËÆÄ°í Á¦·ÎÀÇ ÇâÈÄ ¹Ì·¡ 257
6.8.1 ¹ÙµÏ°èÀÇ ¹Ì·¡´Â ¾î¶»°Ô µÉ±î? 257
6.8.2 AIÀÇ °úÁ¦ 258
Appendix 1 ¼ö½Ä¿¡ °üÇÏ¿© 263
A1.1 Äܺ¼·ç¼Ç ½Å°æ¸ÁÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 264
A1.1.1 SL Á¤Ã¥ ³×Æ®¿öÅ©ÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 264
A1.1.2 ¹ë·ù ³×Æ®¿öÅ©ÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 265
A1.1.3 µà¾ó ³×Æ®¿öÅ©ÀÇ ¼Õ½Ç ÇÔ¼ö¿¡ °üÇÑ º¸Ãæ 267
A1.2 °È ÇнÀÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 269
A1.2.1 Æľ˰íÀÇ RL Á¤Ã¥ ³×Æ®¿öÅ© °È ÇнÀ ¹æ¹ýÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 269
A1.2.2 ¹Ì·Î¸¦ ¿¹·Î µç Á¤Ã¥ °æ»ç¹ýÀÇ ÇнÀ ¹ýÄ¢ µµÃâ 271
Appendix 2 ¹ÙµÏ ÇÁ·Î±×·¥¿ë UI ¼ÒÇÁÆ®¿þ¾î GoGui ¹× GoGui¿ë ÇÁ·Î±×·¥ DeltaGo ÀÌ¿ë ¹æ¹ý 273
A2.1 DeltaGo¶õ? 274
A2.1.1 DeltaGoÀÇ Æ¯Â¡ 274
A2.2 GoGuiÀÇ ¼³Ä¡ ¹× GoGui¿ë ÇÁ·Î±×·¥ DeltaGo ÀÌ¿ë ¹æ¹ý 276
A2.2.1 DeltaGo ´Ù¿î·Îµå¿Í ¾ÐÃà Ç®±â 276
ã¾Æº¸±â 289
¾ËÆÄ°í¸¦ ÅëÇØ Àΰ£ÀÇ ÁöÇý¸¦ ³Ñ¾î¼± ÇÑ ¼öÀÇ ºñ¹ÐÀ» Ž±¸ÇÑ´Ù!
ÀΰøÁö´ÉÀº ¾î¶»°Ô Àΰ£ÀÇ µÎ³ú¸¦ ¶Ù¾î³Ñµµ·Ï ¼³°èµÇ°í ÁøÈÇßÀ»±î?
À̼¼µ¹À» ºñ·ÔÇÑ ¸¹Àº ÇÁ·Î ¹ÙµÏ±â»ç¸¦ Á¦¾ÐÇÑ ¾ËÆÄ°í¸¦ ÅëÇØ ÀΰøÁö´ÉÀÇ ±¸Á¶¿Í ¿ø¸®¸¦ ÆÄÇìÄ£´Ù!
2016³â 3¿ù, À̼¼µ¹ 9´Ü°ú ¾ËÆÄ°íÀÇ ¼¼±âÀÇ ´ëÀüÀÌ ¿·È´Ù. °á°ú´Â 4½Â 1ÆзΠ¾ËÆÄ°íÀÇ ½Â¸®. 2017³â 5¿ù¿¡´Â Ä¿Á¦ 9´Ü°ú ¾ËÆÄ°íÀÇ ´ë±¹ÀÌ ¿·È´Ù. °á°ú´Â ¾ËÆÄ°íÀÇ 3¿¬½Â. ÀÌÈÄ ¾ËÆÄ°íÀÇ ÁøÈ´Â °è¼ÓµÇ¾ú°í, 2017³â 10¿ù¿¡´Â ¾ËÆÄ°í Á¦·Î¿¡ °üÇÑ ³í¹®ÀÌ ¹ßÇ¥µÇ¾ú´Ù. ±×¸®°í, ¾ËÆÄ°í Á¦·Î´Â ±âÁ¸ ¾ËÆÄ°í¿¡ 100¿¬½ÂÇÏ¿´´Ù. ÀÌ·¸µí ÀΰøÁö´É ±â¼úÀº ÀÏÃë¿ùÀåÇÏ°í ÀÖÀ¸¸ç, ƯÈ÷ ¸Ó½Å ·¯´×, µö ·¯´×, °È ÇнÀ ºÐ¾ß¿¡ ÁÖ·ÂÇÏ°í ÀÖ´Ù.
ÀúÀÚ ¿ÀÃ÷Å° Åä¸ð½Ã´Â [³×ÀÌó]¿¡ °ÔÀçµÈ ¾ËÆÄ°í ¹× ¾ËÆÄ°í Á¦·Î¿¡ °üÇÑ ³ÇØÇÑ Çмú ³í¹®À» Àаí Çؼ®Çؼ ¾ËÆÄ°í¿¡ ÀÌ¿ëµÇ´Â µö ·¯´×, °È ÇнÀ, ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö°ú ¾ËÆÄ°í Á¦·Î¿¡ ÀÌ¿ëµÇ´Â µà¾ó ³×Æ®¿öÅ©ÀÇ ±¸Á¶¿¡ ´ëÇØ ¾Ë±â ½±°Ô ¼³¸íÇß´Ù. ÀÌ Ã¥À» ÅëÇØ ÃֽŠÀΰøÁö´É ±â¼úÀÌ ¾ËÆÄ°í ¹× ¾ËÆÄ°í Á¦·Î¿¡ ¾î¶»°Ô ÀÌ¿ëµÇ´ÂÁö ÆľÇÇÏ°í, À̸¦ ´Ù¾çÇÑ ¿¬±¸ °³¹ß¿¡ È°¿ëÇϱâ À§ÇÑ ¾ÆÀ̵ð¾î¸¦ ¾òÀ» ¼ö ÀÖÀ» °ÍÀÌ´Ù.
ÀΰøÁö´ÉÀº ¾î¶»°Ô Àΰ£ÀÇ µÎ³ú¸¦ ¶Ù¾î³Ñµµ·Ï ¼³°èµÇ°í ÁøÈÇßÀ»±î?
À̼¼µ¹À» ºñ·ÔÇÑ ¸¹Àº ÇÁ·Î ¹ÙµÏ±â»ç¸¦ Á¦¾ÐÇÑ ¾ËÆÄ°í¸¦ ÅëÇØ ÀΰøÁö´ÉÀÇ ±¸Á¶¿Í ¿ø¸®¸¦ ÆÄÇìÄ£´Ù!
2016³â 3¿ù, À̼¼µ¹ 9´Ü°ú ¾ËÆÄ°íÀÇ ¼¼±âÀÇ ´ëÀüÀÌ ¿·È´Ù. °á°ú´Â 4½Â 1ÆзΠ¾ËÆÄ°íÀÇ ½Â¸®. 2017³â 5¿ù¿¡´Â Ä¿Á¦ 9´Ü°ú ¾ËÆÄ°íÀÇ ´ë±¹ÀÌ ¿·È´Ù. °á°ú´Â ¾ËÆÄ°íÀÇ 3¿¬½Â. ÀÌÈÄ ¾ËÆÄ°íÀÇ ÁøÈ´Â °è¼ÓµÇ¾ú°í, 2017³â 10¿ù¿¡´Â ¾ËÆÄ°í Á¦·Î¿¡ °üÇÑ ³í¹®ÀÌ ¹ßÇ¥µÇ¾ú´Ù. ±×¸®°í, ¾ËÆÄ°í Á¦·Î´Â ±âÁ¸ ¾ËÆÄ°í¿¡ 100¿¬½ÂÇÏ¿´´Ù. ÀÌ·¸µí ÀΰøÁö´É ±â¼úÀº ÀÏÃë¿ùÀåÇÏ°í ÀÖÀ¸¸ç, ƯÈ÷ ¸Ó½Å ·¯´×, µö ·¯´×, °È ÇнÀ ºÐ¾ß¿¡ ÁÖ·ÂÇÏ°í ÀÖ´Ù.
ÀúÀÚ ¿ÀÃ÷Å° Åä¸ð½Ã´Â [³×ÀÌó]¿¡ °ÔÀçµÈ ¾ËÆÄ°í ¹× ¾ËÆÄ°í Á¦·Î¿¡ °üÇÑ ³ÇØÇÑ Çмú ³í¹®À» Àаí Çؼ®Çؼ ¾ËÆÄ°í¿¡ ÀÌ¿ëµÇ´Â µö ·¯´×, °È ÇнÀ, ¸óÅ×Ä«¸¦·Î Æ®¸® Ž»ö°ú ¾ËÆÄ°í Á¦·Î¿¡ ÀÌ¿ëµÇ´Â µà¾ó ³×Æ®¿öÅ©ÀÇ ±¸Á¶¿¡ ´ëÇØ ¾Ë±â ½±°Ô ¼³¸íÇß´Ù. ÀÌ Ã¥À» ÅëÇØ ÃֽŠÀΰøÁö´É ±â¼úÀÌ ¾ËÆÄ°í ¹× ¾ËÆÄ°í Á¦·Î¿¡ ¾î¶»°Ô ÀÌ¿ëµÇ´ÂÁö ÆľÇÇÏ°í, À̸¦ ´Ù¾çÇÑ ¿¬±¸ °³¹ß¿¡ È°¿ëÇϱâ À§ÇÑ ¾ÆÀ̵ð¾î¸¦ ¾òÀ» ¼ö ÀÖÀ» °ÍÀÌ´Ù.