Chapter 7. A3C Ho-Bin Choi LINK@KoreaTech http://link.koreatech.ac.kr 2018-02-28 A3C.

Slides:



Advertisements
Similar presentations
비즈쿨 - 정 성 욱 - - 금오공고 비즈쿨 - 정 성 욱 1. 나는 각 단원들의 활동들에 성실하게 참여 하겠습니다. 우리의 다짐 2. 나는 나와 전체의 발전을 위해 각 멘토들의 지도에 순종하겠습니다. 3. 나는 각 단원들을 숙지함으로써 비즈니스 마인드를 함양하고 자신의.
Advertisements

노인복지론 담당교수 : 최 병태 교수님 학과 : 보건복지경영학과 학번 : 이름 : 김 태인 날짜 :
Window media player 1. 윈도우 미디어 플레이어가 많이 끊길 때 윈도우 미디어 플레이어실행 > 도구 > 옵션 > 성능 > 연결 속도 > 연결 속도 선택 Lan(10Mbps) 선택 > 네트워크 버퍼링 버퍼 10 초 네트워크창 > 스트리밍 프로토콜 > UDP.
1)RACK 2)UPS 3)P D U 장치 4)Server Group 5)KVM Switch 7)UPS 를 위한 HUB 6) RACK Monitor.
Part 4 장치 관리하기 Chapter 13. 주변 장치 관리하기 Chapter 14. 하드디스크 관리하기
미국경제의 신용위기가 한국경제에 미치는 영향
암 보다 더 무서운 당뇨 2010년 [아시아경제 강경훈 기자 ].
2009-1학기 프로젝트 수업 프로젝트 I, III, V, VII 학기.
제14장 동적 메모리.
Chapter 3. Dynamic programming
전산회계1급 기출 50회 신성대학교 세무부동산과 김상진.
Chapter 5. Q-LEARNING & DEEP SARSA
Chapter 2. IP Address IP Address의 구성에 대한 자세한 설명과 함께 IP Address를 효율적으로 관리하기 위한 방법인 서브넷팅, 수퍼넷팅, VLSM 등에 대해서 단계별로 접근할 수 있다. 몇가지 예제를 통해서 서브넷팅에 대한 개념을 정리하고.
뇌를 자극하는 Windows Server 2012 R2
램( RAM ) 램의 개념 램 선택법 듀얼채널의 의미.
(개정판) 뇌를 자극하는 Red Hat Fedora 리눅스 서버 & 네트워크
네트워크 프로그래밍 및 실습.
윤성우의 열혈 C 프로그래밍 윤성우 저 열혈강의 C 프로그래밍 개정판 Chapter 12. 포인터의 이해.
네트워크 스캔하기 WiFi 시리얼 보드 활용가이드 김영준 헬로앱스 (
Chapter 13 Wired LANs: Ethernet.
임베디드 시스템 개론 크로스 플랫폼 설치 2일차 강의 자료 Embedded System Lab.
오브젝트 조합 회로 IT CookBook, VHDL을 이용한 디지털 회로 입문.
DVR eDVR MS400 preliminary Key Features MPEG4 4ch Stand Alone DVR
8장. 원격지 시스템 관리하기.
HomeNetWork의 개념과 실생활의 예
AC&T SYSTEM ETOS-X 교육자료
35.7Mpps per slot (locally or through the fabric)
NJM Messenger 박상원 박연호.
모바일 자바 프로그래밍 JDBC / WAP Ps lab 오민경.
차세대 인터넷 - 캐나다 발표자 : 이수미( ).
4. LAN의 배선체계 (3장. LAN: Local Area Network)
뇌를 자극하는 Windows Server 장. 장애 조치 클러스터.
소프트컴퓨팅 연구실 소개자료 . 소프트컴퓨팅연구실 조성배.
Malware (Sample) Static/Dynamic Analysis (no reversing)
Q. 방법#1을 해봐도 실행이 안될 때? Q. 점검 항목이 존재하지 않는다고 할 때?
TSRM 사용시 PC 기본환경설정 1. 로그인이 안되는 문제해결 1) Windows8 이상일때
2장. 데이터베이스 관리 시스템 데이터베이스 관리 시스템의 등장 배경 데이터베이스 관리 시스템의 정의
WIN32 API 대전 TETRIS 시스템제어 허준호 박정욱 손경원 신동헌.
플립플롭, 카운터, 레지스터 순서회로 플립플롭 카운터 레지스터.
칼빈의 생애와 개혁자로의 변모 사학과 김종식.
USN(Ubiquitous Sensor Network)
국제의료관광 관련 법, 제도.
DK-128 실습 내부 EEPROM 제어 아이티즌 기술연구소 김태성 연구원
ASP.NET AJAX / AJAX Control Toolkit 응용 2008 컴퓨터공학실험( I )
Eclipse CDT에서 프로젝트를 Export 하고 Import 하는 방법
Decision Tree & Ensemble methods
20 장 네트워킹과 인터네트워킹 장치 20.1 리피터(Repeaters) 20.2 브리지(Bridges)
인체 대 탐험 3D GAME ENGINE 게임 공학과 이성진.
메모리 타입 분석을 통한 안전하고 효율적인 메모리 재사용
자바로 만든 채팅 프로그램 임경진 조주경 지도교수님 : 이광세 교수님.
남아메리카 선교 김수정, 이하정 전희진, 장성경.
네트워크 환경 구축과 이미지 전송 호스트/타겟 통신 직렬 통신을 이용한 이미지 전송 수퍼 데몬 BOOTP 환경 구축
데이터 동적 할당 Collection class.
Chapter 27 Mobile IP.
CHAPTER 9-1 한국의 사회복지정책 - 사회보험제도 -
소리 편집 안 재 형.
가상화 소개자료 02학번 이동신.
LAN의 구성요소 학습내용 서버 클라이언트 NIC(Network Interface Card) 전송매체
STS 또는 Eclipse 에서 프로젝트를 Export 하고 Import 하는 방법
AT MEGA 128 기초와 응용 I 기본적인 구조.
7주차: Functions and Arrays
Homework #3 (1/3) 다음을 수행한 후, 결과 파일들을 출력하여 제출한다.
바이트 순서 변환 함수 주소 변환 함수 바이트 조작 함수 원격지 호스트 정보를 얻는 함수
내 마음 다해 내마음다해 주이름찬양해- 주사랑 깊어 말로다못하 네 주앞서 1-4.
CCIT 네트워크 발표 정보보호학과 평문 사이트와 SSL 사이트, SSL strip과 데이터 변조를 이용한 로그인 취약점
CHAP 15. 데이터 스토리지.
구글 계정 생성가이드.
3. 윈도우 미디어 플레이어 6.4 옵션(환경) 설정 변경
강화학습: 기초.
경찰학 세미나 제 5 강 경찰관직무집행법 2조 5호의 의미 신라대학교 법경찰학부 김순석.
Presentation transcript:

Chapter 7. A3C Ho-Bin Choi LINK@KoreaTech http://link.koreatech.ac.kr 2018-02-28 A3C

Asynchronous Advantage Actor-Critic ⇒ 경험 리플레이를 사용하지 않고 에이전트를 여러 개 사용 액터러너 : 샘플을 모으는 각 에이전트 + 글로벌신경망 Deep-Q-Network DQN ⇒ 샘플끼리의 연관성을 없애기 위해 경험 리플레이를 사용 ⇒ 메모리를 많이 차지해 느린 학습 속도의 원인 ⇒ 오프폴리시 강화학습만을 사용해야함 2018-02-28 A3C

글로벌신경망의 생성과 여러 개의(환경+액터러너) 생성 각 액터러너는 일정 타입스텝 동안 환경에서 자신의 모델로 샘플을 모음 일정 타입스텝이 끝나면 각 액터러너는 글로벌 네트워크를 모은 샘플로 업데이트 글로벌 신경망을 업데이트한 액터러너는 다시 글로벌신경망으로 자신을 업데이트 2018-02-28 A3C

■ 액터러너의 run 함수의 순서 (환경과의 상호작용) 액터러너의 로컬신경망에 따라 행동을 선택 환경으로부터 다음 상태와 보상을 받음 샘플을 저장 에이전트가 목숨을 읽거나 t_max 타임스텝 동안 반복 저장한 샘플로 글로벌신경망으로 보냄 글로벌신경망은 로컬신경망으로부터 받은 샘플로 자신을 업데이트 업데이트된 글로벌신경망으로 액터러너를 업데이트 2018-02-28 A3C