Earticle

현재 위치 Home

Subgoal Discovery in Reinforcement Learning Using Local Graph Clustering

첫 페이지 보기
  • 발행기관
    보안공학연구지원센터(IJFGCN) 바로가기
  • 간행물
    International Journal of Future Generation Communication and Networking 바로가기
  • 통권
    Vol.4 No.3 (2011.09)바로가기
  • 페이지
    pp.13-24
  • 저자
    Negin Entezari, Mohammad Ebrahim Shiri, Parham Moradi
  • 언어
    영어(ENG)
  • URL
    https://www.earticle.net/Article/A153569

※ 원문제공기관과의 협약기간이 종료되어 열람이 제한될 수 있습니다.

원문정보

초록

영어
Reinforcement Learning is an area of machine learning that studies the problem of solving sequential decision making problems. The agent must learn behavior through trial-and-error interaction with a dynamic environment. Learning efficiently in large scale problems and complex tasks demands a decomposition of the original complex task into simple and smaller subtasks. In this paper, we present a subgoal-based method for automatically creating useful skills in reinforcement Learning. Our method identifies subgoals using a local graph clustering algorithm. The main advantage of the proposed algorithm is that only the local information of the graph is considered to cluster the agent state space. Clustering of the transition graphs corresponding to MDPs can be performed in linear time using the proposed method. Subgoals discovered by the algorithm are then used to generate skills using the option framework. Experimental results show that the proposed subgoal discovery algorithm has a dramatic effect on the learning performance.

목차

Abstract
 1. Introduction
 2. Reinforcement Learning With Option
 3. Proposed Method
 4. Complexity Analysis
 5. Experimental Results
  5.1. Six-room Gridworld
  5.2. Soccer Simulation Test Bed
  5.3 Results
 6. Conclusion
 References

키워드

Hierarchical Reinforcement Learning Option Skill Acquisition Subgoal Discovery Graph Clustering

저자

  • Negin Entezari [ Department of Computer Sicence, Amirkabir University of Technology, Tehran, Iran ]
  • Mohammad Ebrahim Shiri [ Department of Computer Sicence, Amirkabir University of Technology, Tehran, Iran ]
  • Parham Moradi [ University of Kurdistan, Department of Electrical & Computer Engineering, Sanandaj, Iran ]

참고문헌

자료제공 : 네이버학술정보

간행물 정보

발행기관

  • 발행기관명
    보안공학연구지원센터(IJFGCN) [Science & Engineering Research Support Center, Republic of Korea(IJFGCN)]
  • 설립연도
    2006
  • 분야
    공학>컴퓨터학
  • 소개
    1. 보안공학에 대한 각종 조사 및 연구 2. 보안공학에 대한 응용기술 연구 및 발표 3. 보안공학에 관한 각종 학술 발표회 및 전시회 개최 4. 보안공학 기술의 상호 협조 및 정보교환 5. 보안공학에 관한 표준화 사업 및 규격의 제정 6. 보안공학에 관한 산학연 협동의 증진 7. 국제적 학술 교류 및 기술 협력 8. 보안공학에 관한 논문지 발간 9. 기타 본 회 목적 달성에 필요한 사업

간행물

  • 간행물명
    International Journal of Future Generation Communication and Networking
  • 간기
    격월간
  • pISSN
    2233-7857
  • 수록기간
    2008~2016
  • 십진분류
    KDC 505 DDC 605

이 권호 내 다른 논문 / International Journal of Future Generation Communication and Networking Vol.4 No.3

    피인용수 : 0(자료제공 : 네이버학술정보)

    함께 이용한 논문 이 논문을 다운로드한 분들이 이용한 다른 논문입니다.

      페이지 저장