世界を動かす技術を、日本語で。

ロボティクス用のジェミニ4アルゴン

概要

Gemini 4 Argon は、物理理解・コード生成・視覚-意味推論で画期的な進化を実現。 ERQAベンチマーク で87%のスコアを達成し、他の最先端モデルを凌駕。 ロボティクス全体のワークフローを刷新し、 物理AGI への進展を加速。 実際のロボット制御からシミュレーション、自己改善まで多様な応用例を紹介。 本記事では、Argonの代表的なプロンプトと活用事例を4分野で解説。

Gemini 4 Argon:物理理解とロボティクス革新

  • Gemini 4 Argon は、物理的推論・コード生成・視覚意味推論の能力で飛躍的進歩を遂げた新世代AIモデル
  • ERQA(Embodied Reasoning)ベンチマーク では、3D環境での物理・空間問題解決力を純粋な推論で87%達成
  • 物理推論の汎用モデルとして、ロボティクス全ライフサイクルで利用可能
  • 本記事では、Argonが実現するロボット制御、Real2Sim、物理理解、研究・自己改善の4分野の代表プロンプトを紹介

ロボット制御の革新

  • Boston Dynamics Spot® を使ったモバイルマニピュレーション:MuJoCoでデジタルツインを作成し、足ペダル式ゴミ箱の操作を事前練習
    • 2エージェント検証スワーム(足・手)で3D位置合わせと動作の正確性を確認
  • ゼロショット制御 :視覚座標ハーネスとアクションプリミティブで、倒れたマグカップを立て直し、ナプキンを中へ投入
    • obs.jsonとwrist_cam.pngに基づき、観察・計画・実行をシンプルなcurlコマンドで反復
  • Omni制御 :Gemini Omni World Model内で、スクラブルタイル5枚をA-R-G-O-Nと一直線に並べる
    • 各アクションをタイムスタンプ付きで記録し、逐次的な視覚フィードバックループで最適化

Real2Sim:現実からシミュレーションへの橋渡し

  • ロボット視点→シミュレーション :実ロボットのテレオペエピソードからデジタルツインを生成
    • MuJoCo上で物理的・視覚的マッチングを反復検証し、現実の接触力・動作を忠実に再現
  • 人間視点→シミュレーション :エゴセントリックな人間動画から、操作対象物の3Dメッシュ化・手の動作を76-DoFヒューマノイドにリターゲット
    • 500Hzの高精度物理シミュレーションで、実際の操作タスクの再現性を検証
  • スケッチ→シミュレーション :手描きスケッチを撮影し、Apollo 2ヒューマノイドがボールを投げて箱を倒す物理シーンを自動構築
    • GPU加速MuJoCoシーンの自動生成、全身・指の動作合成、物理検証・Blenderエクスポートまで自動化

物理理解と自己改善の最前線

  • マルチモーダルな後付けラベリング :手の巧緻性や進捗推定など、詳細な物理理解を実現
  • シミュレーションを活用した自己改善 :ハードウェア上での反復試行とシミュレーションによるアクション最適化

まとめ:Argonがもたらす新しいロボティクスの地平

  • Gemini 4 Argon は、物理推論・ロボティクス制御・シミュレーション・自己進化の全領域で新たなワークフローを解放
  • 物理AGIへの道を加速し、現実と仮想の垣根を超えた応用が現実味を帯びる時代の到来

参考リンク

  • Main thread: Gemini 4 Argon - https://news.ycombinator.com/item?id=50073879

Hackerたちの意見

もしモデルが18ヶ月ごとに90%効率が上がって、ハードウェアが2年ごとにワットあたり2倍のパワーになるとしたら… アルゴンモデルがバッテリーで合理的な時間動くのは、まだ10年くらい先じゃない?学校バスのサイズじゃないロボットに収まるくらいの時間で。さらに、一般的に使えるようになるために必要なスピードに達するまで、もう数年かかるだろうし。まあ、なんとか古い掃除機みたいに壁にプラグを差し込める価格のロボットが出るのは、5~7年後くらいかな。

└

僕はちょっとお花畑だけど、工業用途はこれで実現できるんじゃない?ロボットがローカルネットワークを通じて話せるインファレンス用のハードウェアが社内にあるし。モデルも、ロボットを制御するためにそんなに多くの知識は必要ないと思うよ。

└

それで?5~7年なんて、現代社会のスケールからしたら何でもないし、君が言ってる結果はものすごいことになるかもしれないよ。

└

95%以上のアプリケーションには、どこかのデータセンターへのリンクがあれば十分だと思う。僕の予想では、ハードウェアには移動やバランス用の小さなモデルがいくつか動いてるはず。それからハードウェアは「家に電話」して、意思決定や計画をする感じ。要するに、計画はデバイスの近くにある必要はなくて、ローカルモデルが計画の実行の一部を処理して、ロボットが倒れないようにすればいい。レイテンシーは問題にならないはず。実際、より強力な集中型コンピュータは、遅いローカルコンピュータに対してエンドツーエンドの計画で優位性を生むからね。

└

アルゴンモデルがバッテリーで合理的な時間動くのは、まだ10年くらい先じゃない? いずれ、モデルの改善は止まるだろうね。その後は、最高のモデルがモデル専用のASICに刻まれて、重みがマスクROMに固定される(タアラスがすでにやってるように)。これによって、推論効率が桁違いに向上するはずだよ。

└

おそらく、フルAIコンピュートがデバイスにローカルで必要なアプリケーションはあまり多くないと思う(自動運転車や軍事用途が思い浮かぶ)。

└

学校バスのサイズじゃないもので、最先端のモデルをすでに動かせるよ。ただ、必要な数キロワットが問題なんだ。超高性能なハードウェアなら効率が倍になるかもしれないけど。ロボットのスタンドアロンAIは、バッチモードみたいなものからあんまり恩恵を受けないから、LLMはできるだけ高レベルに保って、ロボットのサブシステムはできるだけ自律的にして、二つの間の結合は軽く、絶対に時間が重要なものは避けるべきなんだ。それが課題なんだよね。ロボティクスではほとんどすべてが時間にシビアだから。

僕はロボティクス初心者で、今自分のデザインで雪掃除ロボットのプロトタイプを作ってるんだけど(www.frost-e.com)、実際に似たような取り組みが進んでるのを見ると励みになるよ。具体的には、- ビジュアルハーネスとアクションプリミティブを使ったゼロショット制御。これ、他のいくつかの場所でも見たことあるし(https://tml.stanford.edu/homebody/)、基本的には一般的なLLMが事前定義されたアクションのセットを通じてロボットを指揮するって感じ。多くのロボットやタスクはこのアプローチでできると思う。だって、すべてが超複雑な6DoFアームや器用さを必要とするわけじゃないし。- シミュレーションの立ち上げ:衛星画像を取り込んで、ロットや家を3D環境で再構築し、雪を降らせて、仮想ロボットが掃除を学べるようにしてる。最新のモデルを使えば、もっと高精度なデジタルツインを直接作れるはず。- 自己改善:これらのモデル(アルゴン、アストラなど)はロボット自体を操作できないけど、実際に使える小さなモデルに精製するためのデータを作成できると思う。

└

それってAI生成の製品デモ動画?だとしたら、メインのデモ動画が本物じゃないなら、月1000ドルのサービスには申し込まないな…。

工場を作るための工場ができることになるね… そんなコンセプトを「ファクトリオ」って呼んでもいいかも!このコンセプトを基にしたゲームを誰か作るべきだと思う。

└

俺たちの中には、モデルが準備できる時に備えてずっとそれに取り組んでる人もいるよ。もうすぐだね!

└

それって、俺たちがビターズってことになるの?

Hacker Newsで議論の続きを見る