Current Result Document :
| 한글제목(Korean Title) |
결정적 시기를 활용한 안티 커리큘럼 강화학습 |
| 영문제목(English Title) |
Anti-curriculum Reinforcement Learning throughout Critical Period |
| 저자(Author) |
박준석
이민후
황인우
정창훈
오현석
이민수
장병탁
Junseok Park
Min Whoo Lee
Inwoo Hwang
Changhoon Jeong
Hyunseok Oh
Minsu Lee
Byoung-Tak Zhang
|
| 원문수록처(Citation) |
VOL 49 NO. 01 PP. 0903 ~ 0905 (2022. 06) |
한글내용
(Korean Abstract) |
일반적으로 영유아 연령대의 초기 3년은 결정적 시기 (critical period)로 알려져 있으며, 이 초기 경험기간 동안 학습을 통해 충분히 받은 자극은 추후 학습에 필요한 전반적인 학습 능력 발달에 큰 영향을 미친다. 특히 결정적 시기에는 학습 자극에 매우 민감하여 이 시기에 뉴런 사이의 가소성이 더 크다는 것이 발견되었다. 이는 곧 초기 경험 동안 최적의 자극이 추후 학습 능력 발달에 매우 중요한 역할을 함을 의미한다. 최근 연구들에서 이러한 뉴런의 학습 방식을 모사한 딥러닝 기반 에이전트의 학습 사이클에서도 초기 경험의 양을 조절한 학습 방식을 통해 더 좋은 성능을 보였다. 그러나 결정적 시기를 고려한 기존의 학습 방식에서는 초기 경험 이후 단일 보상 이상의 함수나 페널티를 활용한 충분한 연구가 진행되지 않았다. 이에 본 연구에서는 초기 경험 이후의 보상 방식에서도 인간의 보상 방식을 본떠 안티 커리큘럼 방식의 충분한 단계의 보상 함수 (guidance)를 활용한 강화학습을 제안한다. 제안하는 방법을 검증하기 위해 각 1M, 2M, 3M frames 시점부터 총 3단계에 걸친 추가적인 보상함수를 설계하고 이를 통한 강화 학습 실험을 수행하였다. 실혐에서 시기별 성능변화를 측정한 결과, 최적의 자극인 step-2 guidance가 결정적 시기에 해당하는 2M∼4M에 주어졌을 때 가장 가파른 성능 향상을 확인하였다. |
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
