Video není dostupné.
Omlouváme se.
It was too amazing to let AI learn Super Mario Bros. 1-2【Reinforcement Learning】
Vložit
- čas přidán 6. 05. 2021
- 過去動画の面白いネタを集めた本を出版しました！
【Amazon】www.amazon.co.jp/dp/404605736X/
Twitter： / physicskj
Instagram： / physicskj
Twitter ID：@PhysicsKJ
【ゲームチャンネル】
/ @ko-ji_vt
【サブチャンネル】
/ @ko-ji2
こーじ公式LINE友達追加はこちら：lin.ee/GG4tG0n
主にタイムラインに緩い動画を不定期で挙げます。
再生リスト
・物理エンジン： • 【物理エンジン】高速移動したらサッカーゴール...
使用ソフト
・Unity(メイン)
・Blender(3Dモデリング)
・Tinkercad(3Dモデリング)
・Mixamo(アニメーション)
・Axis Neuron(モーションキャプチャー)
よく使用させて頂いている音源
MusMus：musmus.main.jp/
Music is VFR：musicisvfr.com/
フリー効果音 On-Jin ～音人～：on-jin.com
効果音ラボ：soundeffect-lab.info/
フリーBGM DOVA-SYNDROME：dova-s.jp/
#物理エンジンこーじ #こーじ
![I became a gymnast when I let AI learn swings [Reinforcement learning]](http://i.ytimg.com/vi/3sInWiKB1Ao/mqdefault.jpg)
2:58 しょぼんのアクションしたあとのマリオ
警戒しすぎで草
1-2からワープするのが当たり前になりすぎて、1-3が思い出せない件。
そして最近のマリオの感覚で木の地面を下から上に行けると思ってしまって落っこちるところまで経験済み
キノコ足場の空でリフトが左右上下に動いてマリオメーカー3DSで収録されたステージ
500万ステップ学習後とかの動き、若干TAS感があって好き
6:32 辺りの無駄なジャンプが人間らしくて面白い
観察するような感覚でゲームを見れる唯一のチャンネル
わかりみ
1-1面の動画はこちら
czcams.com/video/M3-vIh4h-7I/video.html
見ます
お～
懐かしい
しっかりと点を取るために敵同時撃破してるの最高
本家と同じく得点の概念も入れてほしい！
・ブロックを壊して得点
・敵を踏んで得点→連続で踏んだら得点が倍
・ポールの上にタッチするほど高得点
・残りタイムで加点
この条件で何点でクリアできるようになるのかが見てみたいです！
超魔界村で学習させるのも面白そう！
やってほしいw
700万回くらいいるんやない？（）
お前を消す方法思い出した
ロックマンでボス倒せるか見てみたい
これは見たい！笑
超魔界村を再現させるのがすごく大変そう。
3:41
そのうちすり抜けそう(小並感)
てー♪
学習が進むごとに明らかに効率的になってて見てて気持ちいい
M
😊
人工知能って自分で判断して学習するのもすごいけど、そうなるように作った人も相当すごい！
これから色んな場面でAIが活躍するんだろうな
AIが数百万回試行して習得する操作をその日のうちに習得できる人間ってすごいんだなと思った
まあただ人口知能は多重影分身学習ができますからね
数百万回の試行を一瞬でこなせるようになった時すごいことになる
土管を飛び越える所辺りスピード感があって3段ジャンプみたいだった
お久しぶりです！AIの強化学習好きです
この学習方法で1-1またやってみてほしい
ついに、配管工も AI に取って代わる職業になってしまったんですね
これも時代ですかね...
敵を踏んだ反動でジャンプできるってところもしっかり学習してるのやべぇ
強化学習型のテトリスAIも見てみたいです
常人にはクリア不可能みたいなゲームを強化学習でクリアしてるのを見たいなｗ
たけしの挑戦状
改造マリオ
@@sonic-bn4bt あれはまだ行ける
ブロック破壊をするたびに、負の報酬（極微小）を与えると「破壊活動が収まり敵を待ってから動く」のか「気にせず破壊してスピードクリアする」のか気になります。
個人的には、両方試してから「こっちが多く報酬がもらえる」とaiが考察してほしい
そのブロック破壊した時の負の報酬の量によって決まりそう
7:12位からの別視点カメラのこーじ、頭ポヨポヨしててジワる
待ってました!!
土管の間の敵をわざわざ踏んで進むところ好き
シューティングゲーム系はすごいのが出来そう
2Dも3Dも見てみたい
某弾幕ゲームとか
東方みたいな避ける系のシューティングゲームでできたら見応えありそう
たしかに
次はクッパ戦ですね!(鬼畜)
それは草
まずクッパ作るのがむずそうw
@@user-ti3op8yu2t 棒読みちゃんでいいのでは
@@NT-zf8dx システム面の話では？
今回も楽しませていただきました。次回はエキサイトバイクとか見てみたいす。
この時を待っていたぞこーずぃ
素晴らしい研究
アフロじゃなかったら死んでそう
凄いですね！
カメラ画像での学習でも、戻ったり少しまったり、ジャンプの微調整したりもするようになるんですね。
こういう報酬にしたら上手くいかなかった、とか、センサーでやると上手くいかなかった、みたいな話はいろんなアプローチが知れるので失敗も話して貰えるのは楽しいな、って思います！
途中からTASのRTAみたいな動きになるの好き。
ジャンプ回数やブロック破壊回数が少ないほど報酬が多くなれば
スムーズな攻略するようになるのかな？
3:11 無駄なジャンプを減らすようにジャンプしたら微小の罰が設定されていますが確かにもう少し値が大きくてもいいかもしれませんね
格闘ゲームをAIで強化学習したら
各キャラに対応して挙動が変わるのかなぁ
かなりするのは難しいでしょうけどダクソの強化学習を見れたら最高ですね
色んなステージで学習させたAIが全く新しいステージをクリアできるのかとか面白そうですね
最初クリアできるかも怪しいのに最後RTAみたいな動きしてるの草
TAの理想ルート取りをこうやって探す時代も遠くなさそう
強化学習大好きだなｗ
いつか生成モデルも試してほしい
うぽつ
動画面白かったです
こういうのがこーじって感じして好き
ツムツムとかテトリスとかのパズルゲーム学習させるの面白そう！
3:12 敵を倒した時の報酬を無くせば最速クリアしようとするんですかね…？
1フレーム毎の罰を増やしても良いかと思いますね。
早くクリアすればするほど報酬...とか？
@@user-ss5wl8ub2r 上から4行目見てみ
無駄なジャンプ減らせるように、ジャンプしたら罰／ブロック壊せたら報酬／敵を踏んだら報酬とかも面白そうだな
@@user-bk3sb6ij4g そしたら初期段階で困惑し始めるのでは？ジャンプは必須動作なので
この学習をしたものを別のステージで適用したらどのくらいのもんなのか気になります。
初代ロックマンのイエローデビルの攻撃(分離→合体)を、AIがどのように成長してかわすのか見てみたいです🤗
1ジャンプ2キルしてる辺り
そこそこゲームが上手い人がプレイしてる様に錯覚した
しかも多分あんまり操作性良くない中でこれは凄い
うぽつです！
マリオ2とか、難しいステージも見てみたいですね〜
あ、水中も面白そうですね！！
す、すごい！アクションゲームを学習しているっ！！
まったくのノーヒントから一つ一つ積み上げての学習だから
人間のプレイヤーがやるような推測と飛躍がないかわりに途方もない回数の試行を繰り返してクリアしている！
移動、移動量の調整、ルート選定、タイミングを計り、回避、踏みつけ……
これだけの要素があるというのに、それぞれを理解しているわけでもなく最適化されているっ！
こんな面白い事があるんだ！強化学習ってすんごい！
ばりばり壁破壊しながら進むの面白かった。もっと難しいアクションのも見てみたい。
アクションじゃないけどアモングアスとかもAIにできるのかな
今回は画像情報(恐らくCNNベースを使ってる？)にしたんですね。
恐らくレーザーで認知する方法だと、エージェントが認識する範囲が局所的過ぎるのに、移動に伴って激しく情報が変化するので、その場その場で反応してピクピク動くのだと想像します。
一方、画像全体だと、行動の後の穴や敵の位置など、広い範囲で認識できるので、より賢い動作に見えるようになったのだと思います。
また、画像認識は強化学習同様にかなり進歩してるので、大変良い組合せだと思います。
AIを学習させる方法を学習していく主の成長が一番の伸び代。
画面の画像から学習できるとかすごく人間に近づいてる
有名ゲームはわかりやすくていいですね
おもしろかった
FCテニスとかゴルフ（マリオゴルフ含む）みたいなのも楽しそうですね。今でも遊びたい一品。
学習した個体で何面まで進めるかやってみて欲しいです。残機付けちゃうと無理そうなのでとりあえず今回と同じルールで何回もくりかえせる形にした方が良さそうですかね
AIのゲーム挑戦面白い！色んなゲームでやって欲しい！
5:21 嬉しそう
天才ですね
すごーい！
このやり方で1-1再挑戦
からの比較って、
動画に出来ませんか？
カップヘッドのAI学習見てみたい🤤
すげーむずそー
タワーディフェンス系のゲームで最適解を教えてくれるAIが見てみたい。
スーパーキノコやフラワー、テンコインブロック等ケチをつければキリがないけどこれは素晴らしいです
レースゲームの学習を見たいな。
実際の自動運転と違う所が有るなら、違う所の解説とかも聞きたい。
複数プレイヤーがいて踏んだら倒せるとかの環境で学習してレースとかさせたらどうなるんだろうと思った
おもしろい！
この学習法でしょぼんのアクションとかできたらすごいですよね！挑戦お願いします笑
横シュー(STG)みたいな、敵の弾を避けつつ倒す様なゲームを学習させてみて欲しいです
弾幕ゲーとかも面白そうですね
次の機会があれば、ゴールポールの高いところほど報酬がデカい、を入れて欲しいですね。
最後の旗に触る時、1番上に触る時高得点だからそれにも報酬を設定して再現して欲しかったです。
爽快感が違うと思いますw
2ブロック同時に破壊するAI凄すぎ
階段から敵が降りてくるところすごすぎ。
マリオは人でもrtaできちゃうくらい最適化されてるので、超人になれるやつ見たいなー。ぷよぷよとか？
ストリートファイターみたいな2D格ゲーでAI同士で戦わせてみて欲しい
今度ダッシュも入れて欲しいです！笑
ひたすらにブロック壊してスペース作りしてたのでブロック破壊を最小限に抑えてクリアする姿もみてみたいです！
【リクエスト】8-4もクリアさせてみてほしいです｡(ファイアーバーの攻略方法が気になるため)
AIにマリオメーカーの難しい学習させてみたいですね
あと、マリオメーカーでギリギリクリアできる難しいステージ作って欲しいですね
しょぼんのアクションみたいに最適解の動きをすると確定でトラップが仕掛けてある場合はどんな反応するか
fpsシューティングのゲームとか覚えさせても面白そう。
スペランカー見てみたい
ほんの僅かな坂でも落下死するのをAImどう乗り越えるのか
これ！
言おうと思ったらもうコメントあった。
これ、お願いします
パックマンの強化学習気になります….！
これ見るとTASさんの凄さがわかるな
TASとAIは全然違うでしょ。
シューティングゲームとか楽しそう
横幅が短い足場が進行方向に動くタイプのステージでやってみてほしいです…！！
ロックマンのステージ攻略してみて欲しいなぁ。消えたりするブロックとか動く足場を突破出来るのか気になる
是非、8-4を学習するところを見てみたいです。
あの、迷路のような構造をどうやってクリアしていくかが見てみたい。
素晴らしい！
前に魔界村1面クリアに挑戦しましたがうまく行きませんでした。。ぜひ挑戦していただきたいです。
強化学習のやり方とか解説して欲しいです！
量子コンピュータとかが普及したらAIの学習速度も上がるんだろうなぁ
現実世界に近いルールを作ってAIぶち込んで観察したい
音ゲーをIA学習でフルコンまで持っていくの面白そう
フレームごとの罰、ジャンプの罰、敵を倒した報酬辺りの比重は変えたら挙動が大きく違いそうですね
魔界村やJump King、壺男みたいに人間にも難しいゲームとか強化学習の凄さがより分かる気がします
しょぼんのアクションのステージをAIに学習させてほしいですかねｗ
将来的にFPSや横スクロールシューティングゲームとかやってみてほしいです
学習するって凄いな
マリオメーカーにもこのAI機能搭載してほしい
ロードランナーとかドアドアとか面白そう
シリーズ化してほしい！
ファミコン版マリオ全ステージ！
自分も影分身で知識共有して効率的な学習したかった😭
AIの研究してプログラミングを作っている人凄い！
しょぼんのアクションみたいな初見殺し要素も学習できるのだろうか...