- 【nnablaRLアルゴリズム解説】強化学習の概要

【nnablaRLアルゴリズム解説】強化学習の概要

nnablaRLアルゴリズム解説は、Neural Network Librariesを利用して強化学習を実行するためのライブラリ、nnablaRLを使うにあたり、必要となる強化学習の各アルゴリズムの概要などを説明していく動画です。

今回はシリーズの第1回として、強化学習の概要について説明しました。

nnabla-rlのプロジェクトページはこちら...
nnablaRLアルゴリズム解説は、Neural Network Librariesを利用して強化学習を実行するためのライブラリ、nnablaRLを使うにあたり、必要となる強化学習の各アルゴリズムの概要などを説明していく動画です。

今回はシリーズの第1回として、強化学習の概要について説明しました。

nnabla-rlのプロジェクトページはこちら:https://github.com/sony/nnabla-rl

【参考文献】
Sutton, Richard S., and Andrew G. Barto. (2018). Reinforcement learning: An introduction.(三上貞芳、皆川雅章(訳)、(2000)、強化学習、森北出版)

--
ソニーが提供するオープンソースのディープラーニング(深層学習)フレームワークソフトウェアのNeural Network Libraries( https://nnabla.org/, https://github.com/sony/nnabla/ )に関連する情報を紹介する動画チャンネルを開設しました( https://www.youtube.com/c/nnabla )。Neural Network Librariesのチュートリアル・Tipsに加え、最先端のディープラーニングの技術情報(講義、最先端論文紹介)などを発信していきます。チャンネル登録と応援よろしくおねがいします!

同じくソニーが提供する直感的なGUIベースの深層学習開発環境のNeural Network Console( https://dl.sony.com/ )が発信する大人気のYouTubeチャンネル( https://www.youtube.com/channel/UCRTV5p4JsXV3YTdYpTJECRA )でもディープラーニングの技術講座やツールのチュートリアルを多数公開しています。こちらもチャンネル登録と応援よろしくおねがいします。
nnabla ディープラーニングチャンネル

nnabla ディープラーニングチャンネル

🎉 6,300 人達成! 🎉

【予測】7000人まであと55日(2022年11月28日)

チャンネル登録 RSS
ソニーで働く研究者たちが、
自社開発中のオープンソースソフトウェアや最先端論文などの最新AI情報をお届けします。
チャンネル登録と応援よろしくおねがいします!

■ ソニーによるディープラーニング開発用ソフトウェア
Neural Network Libraries (nnabla)
オープンソースの深層学習フレームワーク

Neural Network C...
ソニーで働く研究者たちが、
自社開発中のオープンソースソフトウェアや最先端論文などの最新AI情報をお届けします。
チャンネル登録と応援よろしくおねがいします!

■ ソニーによるディープラーニング開発用ソフトウェア
Neural Network Libraries (nnabla)
オープンソースの深層学習フレームワーク

Neural Network Console
直感的なGUIベースの深層学習開発環境

Timetable

動画タイムテーブル

動画数:9件

本動画の概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

本動画の概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:00:00 - 00:00:43
【VQ-Diffusion】概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【VQ-Diffusion】概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:00:43 - 00:01:14
【VQ-Diffusion】取り組んだ問題と背景 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【VQ-Diffusion】取り組んだ問題と背景

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:01:14 - 00:01:45
【VQ-Diffusion】関連研究と既存手法 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【VQ-Diffusion】関連研究と既存手法

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:01:45 - 00:03:04
【VQ-Diffusion】提案手法とその妥当性 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【VQ-Diffusion】提案手法とその妥当性

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:03:04 - 00:09:46
【VQ-Diffusion】有効性の確認 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【VQ-Diffusion】有効性の確認

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:09:46 - 00:14:47
【一枚紹介】Global Context with Discrete Diffusion in Vector Quantised Modelling for Image Generation - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【一枚紹介】Global Context with Discrete Diffusion in Vector Quantised Modelling for Image Generation

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:14:47 - 00:18:03
【一枚紹介】Generating High Fidelity Data from Low-density Regions using Diffusion Models - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【一枚紹介】Generating High Fidelity Data from Low-density Regions using Diffusion Models

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:18:03 - 00:19:47
【一枚紹介】Perception Prioritized Training of Diffusion Models - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【一枚紹介】Perception Prioritized Training of Diffusion Models

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:19:47 - 00:22:47
【一枚紹介】Stochastic Trajectory Prediction via Motion Indeterminacy Diffusion--ソニーが提供するオープンソースのディープラーニング(深層学習)フレームワークソフトウェアのNeural Network Libraries( https://nnabla.org/, https://github.com/sony/nnabla/ )に関連する情報を紹介する動画チャンネルを開設しました( https://www.youtube.com/c/nnabla )。Neural Network Librariesのチュートリアル・Tipsに加え、最先端のディープラーニングの技術情報(講義、最先端論文紹介)などを発信していきます。チャンネル登録と応援よろしくおねがいします! - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編

【一枚紹介】Stochastic Trajectory Prediction via Motion Indeterminacy Diffusion--ソニーが提供するオープンソースのディープラーニング(深層学習)フレームワークソフトウェアのNeural Network Libraries( https://nnabla.org/, https://github.com/sony/nnabla/ )に関連する情報を紹介する動画チャンネルを開設しました( https://www.youtube.com/c/nnabla )。Neural Network Librariesのチュートリアル・Tipsに加え、最先端のディープラーニングの技術情報(講義、最先端論文紹介)などを発信していきます。チャンネル登録と応援よろしくおねがいします!

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part3 その他編
2022年07月29日
00:22:47 - 00:24:22
本動画の概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

本動画の概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:00:00 - 00:00:42
【Latent Diffusion】概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【Latent Diffusion】概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:00:42 - 00:01:21
【Latent Diffusion】取り組んだ問題と背景 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【Latent Diffusion】取り組んだ問題と背景

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:01:21 - 00:02:20
【Latent Diffusion】関連研究と既存手法 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【Latent Diffusion】関連研究と既存手法

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:02:20 - 00:02:51
【Latent Diffusion】提案手法とその妥当性 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【Latent Diffusion】提案手法とその妥当性

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:02:51 - 00:08:09
【Latent Diffusion】有効性の確認 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【Latent Diffusion】有効性の確認

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:08:09 - 00:15:24
【一枚紹介】Come-Closer-Diffuse-Faster: Accelerating Conditional Diffusion Models for Inverse Problems Through Stochastic Contraction - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【一枚紹介】Come-Closer-Diffuse-Faster: Accelerating Conditional Diffusion Models for Inverse Problems Through Stochastic Contraction

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:15:24 - 00:17:30
【一枚紹介】Dynamic Dual-Output Diffusion Models - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編

【一枚紹介】Dynamic Dual-Output Diffusion Models

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part2 計算コスト削減編
2022年07月28日
00:17:30 - 00:19:09
本動画の概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

本動画の概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:00:00 - 00:00:55
【Diffusion CLIP】 概要 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【Diffusion CLIP】 概要

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:00:55 - 00:01:32
【Diffusion CLIP】取り組んだ問題と背景 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【Diffusion CLIP】取り組んだ問題と背景

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:01:32 - 00:02:42
【Diffusion CLIP】関連研究と既存手法 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【Diffusion CLIP】関連研究と既存手法

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:02:42 - 00:04:04
【Diffusion CLIP】提案手法とその妥当性 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【Diffusion CLIP】提案手法とその妥当性

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:04:04 - 00:10:06
【Diffusion CLIP】有効性の確認 - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【Diffusion CLIP】有効性の確認

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:10:06 - 00:16:23
【一枚紹介】Blended Diffusion - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【一枚紹介】Blended Diffusion

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:16:23 - 00:18:54
【一枚紹介】 Repaint - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【一枚紹介】 Repaint

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:18:54 - 00:20:58
【一枚紹介】Diffusion Autoencoders - 【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編

【一枚紹介】Diffusion Autoencoders

【学会聴講報告】CVPR2022におけるDiffusion Model 関連論文紹介 Part1 画像編集・操作編
2022年07月27日
00:20:58 - 00:23:21
- Intro - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- Intro

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:00:00 - 00:00:27
- CVPR2022学会概要 - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- CVPR2022学会概要

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:00:27 - 00:01:50
- トレンド分析 - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- トレンド分析

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:01:50 - 00:05:14
- 技術トピック① Vision Transformers - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- 技術トピック① Vision Transformers

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:05:14 - 00:16:50
- 技術トピック② Self-Supervised Learning - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- 技術トピック② Self-Supervised Learning

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:16:50 - 00:22:20
※~のSimMIMの引用に誤りがあり、正しくは[2] Zhenda Xie et al., “SimMIM: a Simple Framework for Masked Image Modeling, ” CVPR, 2022.となります。 - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

※~のSimMIMの引用に誤りがあり、正しくは[2] Zhenda Xie et al., “SimMIM: a Simple Framework for Masked Image Modeling, ” CVPR, 2022.となります。

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:18:56 - 00:28:32
- 技術トピック③ NeRF for SLAM - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- 技術トピック③ NeRF for SLAM

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:22:20 - 00:27:19
- CVPR2022全体まとめ - 【学会聴講報告】CVPR2022からみるVision最先端トレンド

- CVPR2022全体まとめ

【学会聴講報告】CVPR2022からみるVision最先端トレンド
2022年06月30日
00:27:19 - 00:18:56
Introduction - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Introduction

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:00:00 - 00:00:48
Interesting Demos - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Interesting Demos

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:00:48 - 00:04:03
Technical Paper summaries - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Technical Paper summaries

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:04:03 - 00:04:45
Face / Body Generation - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Face / Body Generation

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:04:45 - 00:25:27
Neural Rendering - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Neural Rendering

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:25:27 - 00:35:01
Character Simulation - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Character Simulation

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:35:01 - 00:44:16
Others - 【学会聴講報告】Siggraph Asia 2021: Paper Summaries

Others

【学会聴講報告】Siggraph Asia 2021: Paper Summaries
2022年04月07日
00:44:16 - 00:47:29
イントロダクション - 【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)

イントロダクション

【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)
2022年01月31日
00:00:00 - 00:01:11
Deep Q-Network (DQN) とは何か? - 【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)

Deep Q-Network (DQN) とは何か?

【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)
2022年01月31日
00:01:11 - 00:10:42
nnablaRLでDQNを利用する方法は? - 【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)

nnablaRLでDQNを利用する方法は?

【nnablaRLアルゴリズム解説】Deep Q-Network (DQN)
2022年01月31日
00:10:42 - 00:15:36
Introduction - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

Introduction

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:00:00 - 00:00:51
生成モデル(GAN) - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

生成モデル(GAN)

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:00:51 - 00:07:28
生成モデル(diffusion models) - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

生成モデル(diffusion models)

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:07:28 - 00:11:50
予測の不確実性・ロバスト性 - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

予測の不確実性・ロバスト性

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:11:50 - 00:17:56
DNN一般(MLP-Mixer and gMLP) - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

DNN一般(MLP-Mixer and gMLP)

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:17:56 - 00:19:51
表現学習 - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

表現学習

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:19:51 - 00:26:25
NAS(Neural Architecture Search) - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

NAS(Neural Architecture Search)

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:26:25 - 00:30:51
その他 - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

その他

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:30:51 - 00:32:34
One-sentence summary - 【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介

One-sentence summary

【学会聴講報告】NeurIPS2021の注目論文をまとめて紹介
2022年01月17日
00:32:34 - 00:34:53
- Intro - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- Intro

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:00:00 - 00:00:25
- CVPR2021学会概要 - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- CVPR2021学会概要

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:00:25 - 00:02:10
- 技術トピック① Vision Transformersの広がり - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- 技術トピック① Vision Transformersの広がり

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:02:10 - 00:20:30
- 技術トピック② NeRF (Neural Radiance Fields)の広がり - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- 技術トピック② NeRF (Neural Radiance Fields)の広がり

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:20:30 - 00:28:06
- 技術トピック③ Self-Supervised Learning動向 - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- 技術トピック③ Self-Supervised Learning動向

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:28:06 - 00:39:28
- 技術トピック④ 軽量化のためのMobile / Dynamic Networks - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- 技術トピック④ 軽量化のためのMobile / Dynamic Networks

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:39:28 - 00:47:56
- 技術トピック⑤ SLAM / 3次元幾何 x Deep Learning - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- 技術トピック⑤ SLAM / 3次元幾何 x Deep Learning

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:47:56 - 00:55:32
- CVPR2021全体まとめ - 【学会聴講報告】CVPR2021からみるVision最先端トレンド

- CVPR2021全体まとめ

【学会聴講報告】CVPR2021からみるVision最先端トレンド
2021年08月27日
00:55:32 - 00:57:38
あたりの、q(x_t | x_0)と q(x_(t-1) | x_t, x_0) の導出がわからずに探しているのですがどなたかご存知でしょうか。 - 【AI論文解説】物理学の知識を背景とした画像生成手法Part2  Diffusion Probabilistic Models

あたりの、q(x_t | x_0)と q(x_(t-1) | x_t, x_0) の導出がわからずに探しているのですがどなたかご存知でしょうか。

【AI論文解説】物理学の知識を背景とした画像生成手法Part2 Diffusion Probabilistic Models
2021年07月06日
00:07:15 - 00:26:02