- ÇöÀç À§Ä¡
- home > ÄÄÇ»ÅÍ¡¤ICT¡¤¾îÇÐ > ÄÄÇ»ÅÍ¡¤IT µµ¼ > ÄÄÇ»ÅÍ°øÇÐ > ½ÉÃþ °ÈÇнÀ ÀÎ ¾×¼Ç[Á¦ÀÌÆà]
ÇÁ·ÎÁ§Æ®·Î ¹è¿ì´Â ½ÉÃþ °ÈÇнÀÀÇ À̷аú ½ÇÁ¦!
ÀÌ Ã¥ ¡º½ÉÃþ °ÈÇнÀ ÀÎ ¾×¼Ç¡»Àº ȯ°æÀÌ Á¦°øÇÏ´Â Á÷Á¢ÀûÀÎ Çǵå¹é¿¡ ±â¹ÝÇؼ ȯ°æ¿¡ ÀûÀÀÇÏ°í ÀÚ½ÅÀ» °³¼±ÇØ ³ª°¡´Â ¿¡ÀÌÀüÆ®ÀÇ ±¸Çö ¹æ¹ýÀ» ¼³¸íÇÑ´Ù. È帧ÀÌ ÀÖ´Â ÇϳªÀÇ °Á ÇüÅ·Π±¸¼ºµÈ ÀÌ Ã¥¿¡¼ ¿©·¯ºÐÀº ½ÉÃþ °ÈÇнÀÀÇ ±âº» ±â¹ý°ú °í±Þ ±â¹ýÀ» ¹Ì·Î Å»ÃâÀ̳ª ºñµð¿À °ÔÀÓ Ç÷¹ÀÌ °°Àº Èï¹Ì·Î¿î ¿¹Á¦¸¦ ÅëÇؼ ¹è¿ì°Ô µÈ´Ù. ±× °úÁ¤¿¡¼ ½ÉÃþ Q ½Å°æ¸Á°ú Á¤Ã¥ ±â¿ï±â ¹æ¹ýÀ» Æ÷ÇÔÇÑ ¿©·¯ ÇÙ½É ¾Ë°í¸®ÁòÀ» ÀÍÈú ¼ö ÀÖ°í, PyTorch¿Í OpenAI Gym °°Àº ¾÷°è Ç¥ÁØ¿¡ ÇØ´çÇÏ´Â ¶óÀ̺귯¸®¿¡µµ Àͼ÷ÇØÁú °ÍÀÌ´Ù.
?
ÀÌ Ã¥ ¡º½ÉÃþ °ÈÇнÀ ÀÎ ¾×¼Ç¡»Àº ȯ°æÀÌ Á¦°øÇÏ´Â Á÷Á¢ÀûÀÎ Çǵå¹é¿¡ ±â¹ÝÇؼ ȯ°æ¿¡ ÀûÀÀÇÏ°í ÀÚ½ÅÀ» °³¼±ÇØ ³ª°¡´Â ¿¡ÀÌÀüÆ®ÀÇ ±¸Çö ¹æ¹ýÀ» ¼³¸íÇÑ´Ù. È帧ÀÌ ÀÖ´Â ÇϳªÀÇ °Á ÇüÅ·Π±¸¼ºµÈ ÀÌ Ã¥¿¡¼ ¿©·¯ºÐÀº ½ÉÃþ °ÈÇнÀÀÇ ±âº» ±â¹ý°ú °í±Þ ±â¹ýÀ» ¹Ì·Î Å»ÃâÀ̳ª ºñµð¿À °ÔÀÓ Ç÷¹ÀÌ °°Àº Èï¹Ì·Î¿î ¿¹Á¦¸¦ ÅëÇؼ ¹è¿ì°Ô µÈ´Ù. ±× °úÁ¤¿¡¼ ½ÉÃþ Q ½Å°æ¸Á°ú Á¤Ã¥ ±â¿ï±â ¹æ¹ýÀ» Æ÷ÇÔÇÑ ¿©·¯ ÇÙ½É ¾Ë°í¸®ÁòÀ» ÀÍÈú ¼ö ÀÖ°í, PyTorch¿Í OpenAI Gym °°Àº ¾÷°è Ç¥ÁØ¿¡ ÇØ´çÇÏ´Â ¶óÀ̺귯¸®¿¡µµ Àͼ÷ÇØÁú °ÍÀÌ´Ù.
?
ÀúÀÚ: ¾Ë·º½º Â¥ÀÌ, ºê·£´ø ºê¶ó¿î (ÁöÀºÀÌ), ·ù±¤ (¿Å±äÀÌ)
PART I ±âÃÊ 1
CHAPTER 1 °ÈÇнÀÀ̶õ? 3
1.1 ½ÉÃþ °ÈÇнÀ¿¡¼ ¡®½ÉÃþ¡¯ÀÇ ÀÇ¹Ì 4
1.2 °ÈÇнÀ 6
1.3 µ¿Àû °èȹ¹ý°ú ¸óÅ×Ä«¸¦·Î ¹æ¹ý 9
1.4 °ÈÇнÀÀÇ Æ² 12
1.5 °ÈÇнÀÀ¸·Î ÇÒ ¼ö ÀÖ´Â ÀÏ 16
1.6 ¿Ö ½ÉÃþ °ÈÇнÀÀΰ¡? 18
1.7 ÀÌ Ã¥ÀÇ ÁÖ¿ä ¼³¸í ¼ö´Ü: ²ö ±×¸² 21
1.8 ¾ÕÀ¸·ÎÀÇ ¿©Á¤ 22
¿ä¾à 24
CHAPTER 2 °ÈÇнÀ ¹®Á¦ÀÇ ¸ðÇüÈ: ¸¶¸£ÄÚÇÁ °áÁ¤ °úÁ¤ 25
2.1 ²ö ±×¸²°ú ÀÌ Ã¥ÀÇ ±³À° ¹æ½Ä 25
2.2 ¿©·¯ ÆÈ °µµ ¹®Á¦ÀÇ Çعý 30
2.3 ¿©·¯ ÆÈ °µµ ¹®Á¦¸¦ ±¤°í ¹èÄ¡ ÃÖÀûÈ¿¡ Àû¿ë 41
2.4 PyTorch·Î ½Å°æ¸Á ¸¸µé±â 43
2.5 ¹®¸ÆÀû °µµ ¹®Á¦ÀÇ Çعý 47
2.6 ¸¶¸£ÄÚÇÁ ¼ºÁú 52
2.7 ÇâÈÄ º¸»óÀÇ ¿¹Ãø: °¡Ä¡¿Í Á¤Ã¥ ÇÔ¼ö 55
¿ä¾à 59
CHAPTER 3 °¡Àå ³ªÀº µ¿ÀÛÀÇ ¼±ÅÃ: ½ÉÃþ Q ½Å°æ¸Á(DQN) 61
3.1 Q ÇÔ¼ö 62
3.2 Q ÇнÀ °³¿ä 64
3.3 Æı¹Àû ¸Á°¢ ¹æÁö: °æÇè ÀçÇö 85
3.4 ¸ñÇ¥¸ÁÀ» ÀÌ¿ëÇÑ ¾ÈÁ¤¼º °³¼± 92
3.5 Á¤¸® 99
¿ä¾à 102
CHAPTER 4 Á¤Ã¥ ±â¿ï±â ¹æ¹ý 103
4.1 ½Å°æ¸ÁÀ» ÀÌ¿ëÇÑ Á¤Ã¥ ÇÔ¼ö ±¸Çö 104
4.2 ÁÁÀº µ¿ÀÛÀÇ °È: Á¤Ã¥ ±â¿ï±â ¾Ë°í¸®Áò 108
4.3 OpenAI Gym ´Ù·ç±â 114
4.4 REINFORCE ¾Ë°í¸®Áò 117
¿ä¾à 125
CHAPTER 5 Á» ´õ ¾î·Á¿î ¹®Á¦ Ç®±â: ÇàÀ§ÀÚ-ºñÆòÀÚ ¸ðÇü 127
5.1 °¡Ä¡ ÇÔ¼ö¿Í Á¤Ã¥ ÇÔ¼öÀÇ °áÇÕ 129
5.2 ºÐ»ê ÈÆ·Ã 135
5.3 ÀÌÀÍ ÇàÀ§ÀÚ-ºñÆòÀÚ 141
5.4 N-´Ü°è ÇàÀ§ÀÚ-ºñÆòÀÚ 151
¿ä¾à 157
PART I I ´õ ³ôÀº °÷À» ÇâÇÏ¿© 159
CHAPTER 6 ¶Ç ´Ù¸¥ ÃÖÀûÈ ¹æ¹ý: ÁøÈ ¾Ë°í¸®Áò 161
6.1 °ÈÇнÀÀÇ ¶Ç ´Ù¸¥ Á¢±Ù ¹æ½Ä 162
6.2 Áøȸ¦ ÀÌ¿ëÇÑ °ÈÇнÀ 163
6.3 CartPoleÀ» À§ÇÑ À¯Àü ¾Ë°í¸®Áò 172
6.4 ÁøÈ ¾Ë°í¸®ÁòÀÇ Àå´ÜÁ¡ 180
6.5 ±Ô¸ð°¡º¯Àû ´ë¾ÈÀ¸·Î¼ÀÇ ÁøÈ ¾Ë°í¸®Áò 182
6.5.6 ±â¿ï±â ±â¹Ý Á¢±Ù ¹æ½ÄÀÇ ±Ô¸ð È®Àå 189
¿ä¾à 189
CHAPTER 7 ¸ðµç °¡´É¼ºÀÇ Å½»ö: ºÐÆ÷ ½ÉÃþ Q ½Å°æ¸Á 191
7.1 ±â´ñ°ª Q ÇнÀÀÇ ¹®Á¦Á¡ 192
7.2 ´Ù½Ã »ìÆ캸´Â È®·ü°ú Åë°è 197
7.3 º§¸Õ ¹æÁ¤½Ä 204
7.4 ºÐÆ÷ Q ÇнÀ 206
7.5 È®·üºÐÆ÷ÀÇ ºñ±³ 219
7.6 °¡»óÀÇ µ¥ÀÌÅÍ¿¡ ´ëÇÑ ºÐÆ÷ DQN 225
7.7 ºÐÆ÷ DQNÀ» ÀÌ¿ëÇÑ ¾ÆŸ¸® ÇÁ¸®¿þÀÌ ÇнÀ 231
¿ä¾à 237
CHAPTER 8 È£±â½É ÁÖµµ ŽÇè 239
8.1 ¿¹Ãø ºÎȣȸ¦ ÀÌ¿ëÇÑ Èñ¼Ò º¸»ó ¹®Á¦ ÇØ°á 241
8.2 ¿ª¹æÇâ µ¿¿ªÇÐ ¿¹Ãø 244
8.3 ½´ÆÛ ¸¶¸®¿Àºê¶ó´õ½º ȯ°æ ¼³Á¤ 247
8.4 Q ½Å°æ¸Á Àüó¸® 250
8.5 Q ½Å°æ¸Á°ú Á¤Ã¥ ÇÔ¼ö ¼³Á¤ 253
8.6 ICM(³»ÀçÀû È£±â½É ¸ðµâ) 257
8.7 ±× ¹ÛÀÇ ³»ÀçÀû º¸»ó ¸ÞÄ¿´ÏÁòµé 271
¿ä¾à 274
CHAPTER 9 ´ÙÁß ¿¡ÀÌÀüÆ® °ÈÇнÀ 277
9.1 ´ÜÀÏ ¿¡ÀÌÀüÆ®¿¡¼ ´ÙÁß ¿¡ÀÌÀüÆ®·Î 278
9.2 ÀÌ¿ô Q ÇнÀ 282
9.3 1Â÷¿ø ÀÌ¡ ¸ðÇü 286
9.4 Æò±ÕÀå Q ÇнÀ°ú 2Â÷¿ø ÀÌ¡ ¸ðÇü 298
9.5 È¥ÇÕ ÇùÁ¶-°æÀï °ÔÀÓ 309
¿ä¾à 323
CHAPTER 10 Çؼ® °¡´ÉÇÑ °ÈÇнÀ: ÁÖÀÇ ¸ðÇü°ú °ü°è ¸ðÇü 325
10.1 ÁÖÀÇ¿Í °ü°è ÆíÇâÀ» ÀÌ¿ëÇÑ ±â°èÇнÀ Çؼ®¼º °³¼± 326
10.2 ÁÖÀÇ ¸ÞÄ¿´ÏÁòÀ» ÀÌ¿ëÇÑ °ü°è Ãß·Ð 330
10.3 MNIST À̹ÌÁö ºÐ·ù¸¦ À§ÇÑ ÀÚ°¡ ÁÖÀÇ ¸ðÇü ±¸Çö 342
10.4 ´ÙÁß Çìµå ÁÖÀÇ ¸ðÇü°ú °ü°è DQN 356
10.5 ÀÌÁß Q ÇнÀ 365
10.6 ÈƷðú ÁÖÀÇ ½Ã°¢È 367
¿ä¾à 376
CHAPTER 11 °á·Ð: µ¹¾Æº¸±â¿Í ³»´Ùº¸±â 379
11.1 ÇÙ½É Á¤¸® 380
11.2 ½ÉÃþ °ÈÇнÀ ºÐ¾ßÀÇ ¹Ì°³Ã´ ÁÖÁ¦µé 382
11.3 ¸¶Ä¡¸ç 386
APPENDIX A ¼öÇÐ, ½ÉÃþÇнÀ, PyTorch 387
A.1 ¼±Çü´ë¼ö 388
A.2 ¹ÌÀûºÐ 390
A.3 ½ÉÃþÇнÀ 396A.4 PyTorch 397
Âü°í¹®Çå 402
ã¾Æº¸±â 406
CHAPTER 1 °ÈÇнÀÀ̶õ? 3
1.1 ½ÉÃþ °ÈÇнÀ¿¡¼ ¡®½ÉÃþ¡¯ÀÇ ÀÇ¹Ì 4
1.2 °ÈÇнÀ 6
1.3 µ¿Àû °èȹ¹ý°ú ¸óÅ×Ä«¸¦·Î ¹æ¹ý 9
1.4 °ÈÇнÀÀÇ Æ² 12
1.5 °ÈÇнÀÀ¸·Î ÇÒ ¼ö ÀÖ´Â ÀÏ 16
1.6 ¿Ö ½ÉÃþ °ÈÇнÀÀΰ¡? 18
1.7 ÀÌ Ã¥ÀÇ ÁÖ¿ä ¼³¸í ¼ö´Ü: ²ö ±×¸² 21
1.8 ¾ÕÀ¸·ÎÀÇ ¿©Á¤ 22
¿ä¾à 24
CHAPTER 2 °ÈÇнÀ ¹®Á¦ÀÇ ¸ðÇüÈ: ¸¶¸£ÄÚÇÁ °áÁ¤ °úÁ¤ 25
2.1 ²ö ±×¸²°ú ÀÌ Ã¥ÀÇ ±³À° ¹æ½Ä 25
2.2 ¿©·¯ ÆÈ °µµ ¹®Á¦ÀÇ Çعý 30
2.3 ¿©·¯ ÆÈ °µµ ¹®Á¦¸¦ ±¤°í ¹èÄ¡ ÃÖÀûÈ¿¡ Àû¿ë 41
2.4 PyTorch·Î ½Å°æ¸Á ¸¸µé±â 43
2.5 ¹®¸ÆÀû °µµ ¹®Á¦ÀÇ Çعý 47
2.6 ¸¶¸£ÄÚÇÁ ¼ºÁú 52
2.7 ÇâÈÄ º¸»óÀÇ ¿¹Ãø: °¡Ä¡¿Í Á¤Ã¥ ÇÔ¼ö 55
¿ä¾à 59
CHAPTER 3 °¡Àå ³ªÀº µ¿ÀÛÀÇ ¼±ÅÃ: ½ÉÃþ Q ½Å°æ¸Á(DQN) 61
3.1 Q ÇÔ¼ö 62
3.2 Q ÇнÀ °³¿ä 64
3.3 Æı¹Àû ¸Á°¢ ¹æÁö: °æÇè ÀçÇö 85
3.4 ¸ñÇ¥¸ÁÀ» ÀÌ¿ëÇÑ ¾ÈÁ¤¼º °³¼± 92
3.5 Á¤¸® 99
¿ä¾à 102
CHAPTER 4 Á¤Ã¥ ±â¿ï±â ¹æ¹ý 103
4.1 ½Å°æ¸ÁÀ» ÀÌ¿ëÇÑ Á¤Ã¥ ÇÔ¼ö ±¸Çö 104
4.2 ÁÁÀº µ¿ÀÛÀÇ °È: Á¤Ã¥ ±â¿ï±â ¾Ë°í¸®Áò 108
4.3 OpenAI Gym ´Ù·ç±â 114
4.4 REINFORCE ¾Ë°í¸®Áò 117
¿ä¾à 125
CHAPTER 5 Á» ´õ ¾î·Á¿î ¹®Á¦ Ç®±â: ÇàÀ§ÀÚ-ºñÆòÀÚ ¸ðÇü 127
5.1 °¡Ä¡ ÇÔ¼ö¿Í Á¤Ã¥ ÇÔ¼öÀÇ °áÇÕ 129
5.2 ºÐ»ê ÈÆ·Ã 135
5.3 ÀÌÀÍ ÇàÀ§ÀÚ-ºñÆòÀÚ 141
5.4 N-´Ü°è ÇàÀ§ÀÚ-ºñÆòÀÚ 151
¿ä¾à 157
PART I I ´õ ³ôÀº °÷À» ÇâÇÏ¿© 159
CHAPTER 6 ¶Ç ´Ù¸¥ ÃÖÀûÈ ¹æ¹ý: ÁøÈ ¾Ë°í¸®Áò 161
6.1 °ÈÇнÀÀÇ ¶Ç ´Ù¸¥ Á¢±Ù ¹æ½Ä 162
6.2 Áøȸ¦ ÀÌ¿ëÇÑ °ÈÇнÀ 163
6.3 CartPoleÀ» À§ÇÑ À¯Àü ¾Ë°í¸®Áò 172
6.4 ÁøÈ ¾Ë°í¸®ÁòÀÇ Àå´ÜÁ¡ 180
6.5 ±Ô¸ð°¡º¯Àû ´ë¾ÈÀ¸·Î¼ÀÇ ÁøÈ ¾Ë°í¸®Áò 182
6.5.6 ±â¿ï±â ±â¹Ý Á¢±Ù ¹æ½ÄÀÇ ±Ô¸ð È®Àå 189
¿ä¾à 189
CHAPTER 7 ¸ðµç °¡´É¼ºÀÇ Å½»ö: ºÐÆ÷ ½ÉÃþ Q ½Å°æ¸Á 191
7.1 ±â´ñ°ª Q ÇнÀÀÇ ¹®Á¦Á¡ 192
7.2 ´Ù½Ã »ìÆ캸´Â È®·ü°ú Åë°è 197
7.3 º§¸Õ ¹æÁ¤½Ä 204
7.4 ºÐÆ÷ Q ÇнÀ 206
7.5 È®·üºÐÆ÷ÀÇ ºñ±³ 219
7.6 °¡»óÀÇ µ¥ÀÌÅÍ¿¡ ´ëÇÑ ºÐÆ÷ DQN 225
7.7 ºÐÆ÷ DQNÀ» ÀÌ¿ëÇÑ ¾ÆŸ¸® ÇÁ¸®¿þÀÌ ÇнÀ 231
¿ä¾à 237
CHAPTER 8 È£±â½É ÁÖµµ ŽÇè 239
8.1 ¿¹Ãø ºÎȣȸ¦ ÀÌ¿ëÇÑ Èñ¼Ò º¸»ó ¹®Á¦ ÇØ°á 241
8.2 ¿ª¹æÇâ µ¿¿ªÇÐ ¿¹Ãø 244
8.3 ½´ÆÛ ¸¶¸®¿Àºê¶ó´õ½º ȯ°æ ¼³Á¤ 247
8.4 Q ½Å°æ¸Á Àüó¸® 250
8.5 Q ½Å°æ¸Á°ú Á¤Ã¥ ÇÔ¼ö ¼³Á¤ 253
8.6 ICM(³»ÀçÀû È£±â½É ¸ðµâ) 257
8.7 ±× ¹ÛÀÇ ³»ÀçÀû º¸»ó ¸ÞÄ¿´ÏÁòµé 271
¿ä¾à 274
CHAPTER 9 ´ÙÁß ¿¡ÀÌÀüÆ® °ÈÇнÀ 277
9.1 ´ÜÀÏ ¿¡ÀÌÀüÆ®¿¡¼ ´ÙÁß ¿¡ÀÌÀüÆ®·Î 278
9.2 ÀÌ¿ô Q ÇнÀ 282
9.3 1Â÷¿ø ÀÌ¡ ¸ðÇü 286
9.4 Æò±ÕÀå Q ÇнÀ°ú 2Â÷¿ø ÀÌ¡ ¸ðÇü 298
9.5 È¥ÇÕ ÇùÁ¶-°æÀï °ÔÀÓ 309
¿ä¾à 323
CHAPTER 10 Çؼ® °¡´ÉÇÑ °ÈÇнÀ: ÁÖÀÇ ¸ðÇü°ú °ü°è ¸ðÇü 325
10.1 ÁÖÀÇ¿Í °ü°è ÆíÇâÀ» ÀÌ¿ëÇÑ ±â°èÇнÀ Çؼ®¼º °³¼± 326
10.2 ÁÖÀÇ ¸ÞÄ¿´ÏÁòÀ» ÀÌ¿ëÇÑ °ü°è Ãß·Ð 330
10.3 MNIST À̹ÌÁö ºÐ·ù¸¦ À§ÇÑ ÀÚ°¡ ÁÖÀÇ ¸ðÇü ±¸Çö 342
10.4 ´ÙÁß Çìµå ÁÖÀÇ ¸ðÇü°ú °ü°è DQN 356
10.5 ÀÌÁß Q ÇнÀ 365
10.6 ÈƷðú ÁÖÀÇ ½Ã°¢È 367
¿ä¾à 376
CHAPTER 11 °á·Ð: µ¹¾Æº¸±â¿Í ³»´Ùº¸±â 379
11.1 ÇÙ½É Á¤¸® 380
11.2 ½ÉÃþ °ÈÇнÀ ºÐ¾ßÀÇ ¹Ì°³Ã´ ÁÖÁ¦µé 382
11.3 ¸¶Ä¡¸ç 386
APPENDIX A ¼öÇÐ, ½ÉÃþÇнÀ, PyTorch 387
A.1 ¼±Çü´ë¼ö 388
A.2 ¹ÌÀûºÐ 390
A.3 ½ÉÃþÇнÀ 396A.4 PyTorch 397
Âü°í¹®Çå 402
ã¾Æº¸±â 406
ÇÁ·ÎÁ§Æ®·Î ¹è¿ì´Â ½ÉÃþ °ÈÇнÀÀÇ À̷аú ½ÇÁ¦!
½ÉÃþ °ÈÇнÀ ½Ã½ºÅÛÀº »õ·Î¿î ȯ°æ¿¡ ºü¸£°Ô ÀûÀÀÇÑ´Ù. ÀÌ·¯ÇÑ ´É·ÂÀº ±âÁ¸ÀÇ Ç¥ÁØÀûÀÎ ½Å°æ¸Á¿¡ ºñÇØ Ä¿´Ù¶õ Áøº¸¿¡ ÇØ´çÇÑ´Ù. »ç¶÷ÀÌ ¹º°¡¸¦ ¹è¿ì´Â °úÁ¤°ú ºñ½ÁÇÏ°Ô, ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®´Â °¨°¢ Á¤º¸¿¡ ÇØ´çÇÏ´Â ¿øº» µ¥ÀÌÅ͸¦ ÀÔ·Â¹Þ°í ½ÃÇàÂø¿À¸¦ °ÅÃļ ÀÚ½ÅÀÇ ¹ÝÀÀ°ú ¿¹ÃøÀ» Á¤·ÃÇØ ³ª°£´Ù.
ÀÌ Ã¥ ¡º½ÉÃþ °ÈÇнÀ ÀÎ ¾×¼Ç¡»Àº ȯ°æÀÌ Á¦°øÇÏ´Â Á÷Á¢ÀûÀÎ Çǵå¹é¿¡ ±â¹ÝÇؼ ȯ°æ¿¡ ÀûÀÀÇÏ°í ÀÚ½ÅÀ» °³¼±ÇØ ³ª°¡´Â ¿¡ÀÌÀüÆ®ÀÇ ±¸Çö ¹æ¹ýÀ» ¼³¸íÇÑ´Ù. È帧ÀÌ ÀÖ´Â ÇϳªÀÇ °Á ÇüÅ·Π±¸¼ºµÈ ÀÌ Ã¥¿¡¼ ¿©·¯ºÐÀº ½ÉÃþ °ÈÇнÀÀÇ ±âº» ±â¹ý°ú °í±Þ ±â¹ýÀ» ¹Ì·Î Å»ÃâÀ̳ª ºñµð¿À °ÔÀÓ Ç÷¹ÀÌ °°Àº Èï¹Ì·Î¿î ¿¹Á¦¸¦ ÅëÇؼ ¹è¿ì°Ô µÈ´Ù. ±× °úÁ¤¿¡¼ ½ÉÃþ Q ½Å°æ¸Á°ú Á¤Ã¥ ±â¿ï±â ¹æ¹ýÀ» Æ÷ÇÔÇÑ ¿©·¯ ÇÙ½É ¾Ë°í¸®ÁòÀ» ÀÍÈú ¼ö ÀÖ°í, PyTorch¿Í OpenAI Gym °°Àº ¾÷°è Ç¥ÁØ¿¡ ÇØ´çÇÏ´Â ¶óÀ̺귯¸®¿¡µµ Àͼ÷ÇØÁú °ÍÀÌ´Ù.
ÀÌ Ã¥ÀÇ ÁÖ¿ä ³»¿ë
¡á ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®ÀÇ ±¸Ãà°ú ÈÆ·Ã
¡á ÇнÀ°ú ¹®Á¦ ÇØ°á¿¡ °¡Àå ³Î¸® ¾²ÀÌ´Â ½ÉÃþ °ÈÇнÀ ¾Ë°í¸®Áò
¡á ÁøÈ ¾Ë°í¸®Áò, È£±â½É ±â¹Ý ÇнÀ, ´ÙÁß ¿¡ÀÌÀüÆ® ÇнÀ µîÀÇ °í±Þ ÁÖÁ¦
¡á ½ÇÇà °¡´ÉÇÑ ÆÄÀ̽㠿¹Á¦ ÄÚµå
̵̧ȍ
¡°»ó¼¼ÇÑ °ÈÇнÀ ÀÔ¹®¼. Àç¹ÌÀÖÀ» »Ó¸¸ ¾Æ´Ï¶ó Çö¾÷ÀÇ ÁÖ¿ä ³»¿ëÀ» ¸Á¶óÇÑ´Ù.¡±
¦¬ PharmaTraceÀÇ Ç﹫Ʈ ÇÏ¿ì½ÇÆ®
¡°½ÉÃþ °ÈÇнÀÀ» ¸¶½ºÅÍÇÏ·Á´Â ¸ðµç ÀÌÀÇ Çʵ¶¼!¡±
¦¬ ArisGlobalÀÇ Ä®¸®¾á ·¹µð
¡°AI/ML°ú °ÈÇнÀ¿¡ ±ò¸° ÀÌ·ÐÀÌ ±Ã±ÝÇÏ´Ù¸é, ±×¸®°í ±×·± ±â¹ýÀ» ¿©·¯ºÐÀÇ ÇÁ·ÎÁ§Æ®¿¡ Àû¿ëÇÏ´Â ¹æ¹ýÀ» ¾Ë°í ½Í´Ù¸é ÀÌ Ã¥ÀÌ Àû°ÝÀÌ´Ù.¡±
¦¬ OpenTextÀÇ Åäºñ¾Æ½º Ä«Ã÷
¡°DRLÀÇ ±âÃÊ¿¡ ¼÷´ÞÇÏ°íÀÚ ÇÏ´Â, ±×¸®°í ÀÌ Èï¹Ì·Î¿î ºÐ¾ß¿¡¼ ¿¬±¸ÀÚ³ª °³¹ßÀÚ·Î ÀÏÇÏ°íÀÚ ÇÏ´Â ¸ðµç ÀÌ¿¡°Ô ÀÌ Ã¥À» °·ÂÈ÷ ÃßõÇÑ´Ù.¡±
¦¬ ¾Æ¸¶Á¸ÀÇ ¾Ë ¶óÈ÷¹Ì
½ÉÃþ °ÈÇнÀ ½Ã½ºÅÛÀº »õ·Î¿î ȯ°æ¿¡ ºü¸£°Ô ÀûÀÀÇÑ´Ù. ÀÌ·¯ÇÑ ´É·ÂÀº ±âÁ¸ÀÇ Ç¥ÁØÀûÀÎ ½Å°æ¸Á¿¡ ºñÇØ Ä¿´Ù¶õ Áøº¸¿¡ ÇØ´çÇÑ´Ù. »ç¶÷ÀÌ ¹º°¡¸¦ ¹è¿ì´Â °úÁ¤°ú ºñ½ÁÇÏ°Ô, ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®´Â °¨°¢ Á¤º¸¿¡ ÇØ´çÇÏ´Â ¿øº» µ¥ÀÌÅ͸¦ ÀÔ·Â¹Þ°í ½ÃÇàÂø¿À¸¦ °ÅÃļ ÀÚ½ÅÀÇ ¹ÝÀÀ°ú ¿¹ÃøÀ» Á¤·ÃÇØ ³ª°£´Ù.
ÀÌ Ã¥ ¡º½ÉÃþ °ÈÇнÀ ÀÎ ¾×¼Ç¡»Àº ȯ°æÀÌ Á¦°øÇÏ´Â Á÷Á¢ÀûÀÎ Çǵå¹é¿¡ ±â¹ÝÇؼ ȯ°æ¿¡ ÀûÀÀÇÏ°í ÀÚ½ÅÀ» °³¼±ÇØ ³ª°¡´Â ¿¡ÀÌÀüÆ®ÀÇ ±¸Çö ¹æ¹ýÀ» ¼³¸íÇÑ´Ù. È帧ÀÌ ÀÖ´Â ÇϳªÀÇ °Á ÇüÅ·Π±¸¼ºµÈ ÀÌ Ã¥¿¡¼ ¿©·¯ºÐÀº ½ÉÃþ °ÈÇнÀÀÇ ±âº» ±â¹ý°ú °í±Þ ±â¹ýÀ» ¹Ì·Î Å»ÃâÀ̳ª ºñµð¿À °ÔÀÓ Ç÷¹ÀÌ °°Àº Èï¹Ì·Î¿î ¿¹Á¦¸¦ ÅëÇؼ ¹è¿ì°Ô µÈ´Ù. ±× °úÁ¤¿¡¼ ½ÉÃþ Q ½Å°æ¸Á°ú Á¤Ã¥ ±â¿ï±â ¹æ¹ýÀ» Æ÷ÇÔÇÑ ¿©·¯ ÇÙ½É ¾Ë°í¸®ÁòÀ» ÀÍÈú ¼ö ÀÖ°í, PyTorch¿Í OpenAI Gym °°Àº ¾÷°è Ç¥ÁØ¿¡ ÇØ´çÇÏ´Â ¶óÀ̺귯¸®¿¡µµ Àͼ÷ÇØÁú °ÍÀÌ´Ù.
ÀÌ Ã¥ÀÇ ÁÖ¿ä ³»¿ë
¡á ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®ÀÇ ±¸Ãà°ú ÈÆ·Ã
¡á ÇнÀ°ú ¹®Á¦ ÇØ°á¿¡ °¡Àå ³Î¸® ¾²ÀÌ´Â ½ÉÃþ °ÈÇнÀ ¾Ë°í¸®Áò
¡á ÁøÈ ¾Ë°í¸®Áò, È£±â½É ±â¹Ý ÇнÀ, ´ÙÁß ¿¡ÀÌÀüÆ® ÇнÀ µîÀÇ °í±Þ ÁÖÁ¦
¡á ½ÇÇà °¡´ÉÇÑ ÆÄÀ̽㠿¹Á¦ ÄÚµå
̵̧ȍ
¡°»ó¼¼ÇÑ °ÈÇнÀ ÀÔ¹®¼. Àç¹ÌÀÖÀ» »Ó¸¸ ¾Æ´Ï¶ó Çö¾÷ÀÇ ÁÖ¿ä ³»¿ëÀ» ¸Á¶óÇÑ´Ù.¡±
¦¬ PharmaTraceÀÇ Ç﹫Ʈ ÇÏ¿ì½ÇÆ®
¡°½ÉÃþ °ÈÇнÀÀ» ¸¶½ºÅÍÇÏ·Á´Â ¸ðµç ÀÌÀÇ Çʵ¶¼!¡±
¦¬ ArisGlobalÀÇ Ä®¸®¾á ·¹µð
¡°AI/ML°ú °ÈÇнÀ¿¡ ±ò¸° ÀÌ·ÐÀÌ ±Ã±ÝÇÏ´Ù¸é, ±×¸®°í ±×·± ±â¹ýÀ» ¿©·¯ºÐÀÇ ÇÁ·ÎÁ§Æ®¿¡ Àû¿ëÇÏ´Â ¹æ¹ýÀ» ¾Ë°í ½Í´Ù¸é ÀÌ Ã¥ÀÌ Àû°ÝÀÌ´Ù.¡±
¦¬ OpenTextÀÇ Åäºñ¾Æ½º Ä«Ã÷
¡°DRLÀÇ ±âÃÊ¿¡ ¼÷´ÞÇÏ°íÀÚ ÇÏ´Â, ±×¸®°í ÀÌ Èï¹Ì·Î¿î ºÐ¾ß¿¡¼ ¿¬±¸ÀÚ³ª °³¹ßÀÚ·Î ÀÏÇÏ°íÀÚ ÇÏ´Â ¸ðµç ÀÌ¿¡°Ô ÀÌ Ã¥À» °·ÂÈ÷ ÃßõÇÑ´Ù.¡±
¦¬ ¾Æ¸¶Á¸ÀÇ ¾Ë ¶óÈ÷¹Ì