Oct
30
深層強化学習の研究トレンド(Rainbow、Ape-X、R2D2、R2D3)の解説を行うセミナー
Rainbow、Ape-X、R2D2、R2D3の論文を元に深層強化学習の研究トレンドの解説を行います
Registration info |
セミナー参加者枠 ¥4000(Pay at the door)
FCFS
|
---|
Description
内容概要
Deep Q-Network以降の深層強化学習について解説できればと思い企画してみました。 Deep Q-Network[2013/2015]、Rainbow[2017]、Ape-X[2018]、R2D2[2019]、R2D3[2019] などの論文を元に、研究トレンドの推移などについて解説します。 ↓Rainbow論文 https://arxiv.org/abs/1710.02298 ↓Ape-X論文 https://arxiv.org/abs/1803.00933 ↓R2D2論文 https://openreview.net/pdf?id=r1lyTjAqYX ↓R2D3論文 https://arxiv.org/abs/1909.01387 ※ 深層強化学習の基礎知識は前提としますので、自信のない方は下記の参加もあわせてご検討 いただけたらと思います。 https://liberal-arts-beginners.connpass.com/event/148868/
開催日程
10/30(火) 受付: 19:50〜20:00 講義: 20:00〜22:00 ※ 途中10分ほどの休憩を数回設ける予定です。 ※ 19:40より前の入室は原則としてお断りします。
アジェンダ
1. 事前知識の整理(10分) 系列モデリング復習&MDP(Markov Decision Process) Deep Q-Network 2. Rainbowについて(45分) Double DQN Prioritised Experience Replay Dueling Network Architecture Multi-step Returns Distributional RL Noisy Nets 3. Ape-X、R2D2、R2D3(50分) ※アジェンダの詳細については変更の可能性があります。(全体の流れが変わることはないです)
会場
水道橋駅、神保町駅、九段下駅周辺 千代田区西神田2-7-14 YS西神田ビル2F
対象者
・対象レベルとしては,CNNの基礎知識(AlexNet、VGGNet、ResNetなど)について知っており、 MNISTなどの画像分類の経験がある方を想定します。 ↓下記の理解は前提とします。 https://lib-arts.hatenablog.com/entry/math_nn4 https://lib-arts.hatenablog.com/entry/math_nn5 https://lib-arts.hatenablog.com/entry/math_nn6 https://lib-arts.hatenablog.com/entry/paper1_AlexNet https://lib-arts.hatenablog.com/entry/paper2_VGGNet https://lib-arts.hatenablog.com/entry/paper3_ResNet ・また強化学習の基本についてはわかっている方を想定します。(Deep Q-Networkがシンプルかつ それなりに良いモデルなので、Deep Q-Networkまでなんとなくわかるを想定して話を進めていきます) 自信のない方は下記もあわせてご検討ください。 https://liberal-arts-beginners.connpass.com/event/144716/
講師プロフィール
東大工学部卒。 データ分析/AI開発の仕事の経験は7年ほどで、理論/開発/ビジネスのどれも経験があり強い。 また、多くの業界のプロジェクトに関わったためドメイン知識も豊富。 初心者向けの指導実績も多く、1,000名近い。
当日のお持物
・筆記用具 ・PC(手元にある方が進行の確認ができて便利だと思います) ※ 題材によって変更の可能性があります
当日までの準備
余裕のある方は下記を元にRainbowについて軽く掴んできていただけると、当日理解がスムーズかと 思われます。(こちらについては余裕があればなのでマストではありません) https://lib-arts.hatenablog.com/entry/rl_trend6
費用
4,000円 (2時間) ※ ・領収書発行の際は事務手数料として追加1,000円のお支払いをよろしくお願いいたします
定員
8名(人数に合わせて調整します、別媒体でも募集していますので申し込み人数は当日参加者数を反映しません)
ご参加にあたってのお願い
無断欠席や前日以降のキャンセルに関しては当日人数読めなくなり非常に迷惑なので 基本的に行わないようにお願いします。(直前参加は定員的に問題なければ歓迎です!) 体調不良、職務都合、ご家庭の事情などどうしてものケースは別途ご連絡いただくか、 イベントへのお問い合わせよりご連絡いただけますと嬉しいです。 上記がひどいアカウントに関してはブラックリスト処理を行い以後の参加をお断りさせて いただきますので、その点だけ予めご了承ください。 (7割以上来れる前提でのお申し込みと前日以降のキャンセルはメッセージでのご連絡を いただくということだけ気をつけていただければ大丈夫だと思います) モチベーションの高い参加者の方を重視する運営としていきたいと考えています。 ご協力のほど、よろしくお願いいたします。