
MuJoCo
ニセ Microduck つくってみた
前回は高トルクで高速のPWMサーボ PTK7465 Plus で二足歩行ロボットを楽しみました。 https://homemadegarbage.com/ptk7465plus-02// その際に PTK7465 Plus のモデリングがうまいことできましたので、更な...
PTK7465 Plus を真面目にモデリングしてみる
前回はPWMサーボ PTK7465 Plus を購入し4脚ロボや倒立振子で性能を味見しました。 https://homemadegarbage.com/ptk7465plus-01/ 実際に触れることで旧モデルのPTK7465より優れていることを実感いたしました。 ...
PWMマイクロサーボで2足歩行ロボット2
今話題の ミニロボット Microduck We built a small biped robot you can teach new tricks to. Train it in simulation, run it on the real thing. Meet Microduck 🦆...
PWMマイクロサーボで2足歩行ロボット
前回はPWMマイクロサーボ PTK7465のSim.モデルをこしらえて、2足歩行ロボの歩行動作を検証しました。 https://homemadegarbage.com/servomodel01/ ロボのSim.モデルをもとにAIエージェント Codexで最適動作を探索して実機で検証しまし...
PWMマイクロサーボを真面目にモデリングしてみる — PTK7465を同定してMuJoCoでSim2Real歩行 —
最近はAIエージェント Codexを使って方針や報酬設計丸投げの強化学習にハマっています。 PWMマイクロサーボを用いたロボでも結果が出ており大変に満足しております。 https://homemadegarbage.com/rl13// https://homemadegarbage.com/...
AIエージェント Codex で 強化学習4 車輪倒立振子
最近はCodexを当たり前のように使って生活しており、 わざわざ "AIエージェント Codex を使ってます" なんてことを言うのも今回が最後になるのではないでしょうか? ここでは以前挑戦したゲームコントローラで操作する倒立振子の強化学習に再挑戦します。 ROBSTRIDE 05 倒立...
AIエージェント Codex で 強化学習3 起き上がり4脚ロボット
前回はAIエージェント Codex で簡素な2軸の起き上がりロボの強化学習を実施いたしました。 https://homemadegarbage.com/rl13// 簡単なPWMサーボでも強化学習によって見事な起き上がりロボになりました。 フィジカルAIって、心を鬼にしないといけない...
AIエージェント Codex で 強化学習2 起き上がりロボ
前回はAIエージェント Codexに強化学習を実施してもらい2足歩行ロボットのバランス動作を実現しました。 https://homemadegarbage.com/rl12// Codex先生が学習の環境構築、報酬設計、学習フローすべて考えてくださり、長年憧れていた動作ができました。 C...
AIエージェント Codex で 強化学習2足歩行ロボット HM-01
最近はAIエージェント Codexをさわって色々楽しませていただいております。 今回はCodexで強化学習を楽しみましたので報告いたします。 テーマとして2足歩行ロボットのバランス動作を選択しました。 これまた生活変わるレベルで驚かされました。 2足歩行ロボットの強化学習...
AIエージェント Codex で ドローン2MuJoCo で シミュレーション
前回はAIエージェント Codex を活用してドローンの学習を開始しました。 https://homemadegarbage.com/drone04/ Codex先生のおかげで姿勢制御やゲームコントローラによる位置制御を数日で実現できてしまいました。 Codex先生にドローン制御コー...
AIエージェント Codex で 倒立振子3 ーモータモデルの同定手法を確立ー
前回は Codex に倒立振子の制御そのものを考えてもらい、見事実機でも素晴らしい倒立制御が実現されました。 https://homemadegarbage.com/codex02 AIエージェントによるバイブコーディングで倒立振子の動作実現は無理であると考えていたため、非常に驚きました。 C...
2足歩行ロボット HM-01 の強化学習3
以前実施した自作2足歩行ロボ HM-01の強化学習について改めて考えてみました。 https://homemadegarbage.com/rl09/ ロボットの強化学習による動作生成は今や当たり前のように実用され、フレームワークも進化し整ってきているように感じます。 GPU...
強化学習入門レシピ本を書きたい俺5 祝出版!! 涙の最終回
HomeMadeGarbage Advent Calendar 2025 |11日目 前回はレシピ用のリアクションホイール倒立振子機体で強化学習Sim2Realまで確認しました。 https://homemadegarbage.com/rl-recipe04/ 本連載を通して容易に組める実機で...
強化学習入門レシピ本を書きたい俺4
HomeMadeGarbage Advent Calendar 2025 |9日目 前回はレシピ本用の倒立振子実機の開発を行い、さらにMuJoCoモデルも完成させました。 https://homemadegarbage.com/rl-recipe03// ここではついに強化学習を実施します。 ...
強化学習入門レシピ本を書きたい俺3
HomeMadeGarbage Advent Calendar 2025 |6日目 前回は強化学習入門レシピ本の制作をめざして、ブラシレスモータによるリアクションホイール倒立振子の強化学習Sim2Real実施までおさらいしました。 https://homemadegarbage.com/rl-r...