ロボット分野で使われる生成AIについて調べてみた.pdf

「製造業でも生成AI活用したい！名古屋LLM MeetUp #2」での発表資料です。

Transcript

1. ロボット分野で使われる 生成AIについて調べてみた （＋αで未来の話も）
2. 自己紹介 • 氏名：赤見坂篤記 • 所属：名古屋大学大学院情報学研究科 • 趣味：ロボット開発 ヒューマノイドロボットを 個人開発してます！ • 最近のニュース： Station Aiに入居できた！
3. 一般的にいわれる生成AIとは 生成AI Aa （代表サービス） ChatGPT Stable Diffusion Voice Engine プロンプト LLM, VLM, 拡散モデル, マルチモーダル 基盤モデル, etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, etc…
4. 一般的にいわれる生成AIとは 生成AI Aa （代表サービス） ChatGPT Stable Diffusion Voice Engine プロンプト LLM, VLM, 拡散モデル, マルチモーダル 基盤モデル, etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, etc… 行動（Action）が 含まれていない
5. ロボットで使われる生成AI 生成AI Aa プロンプト LLM, VLM, VLAM 拡散モデル, マルチモーダル 基盤モデル, etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, センサ情報, etc… （無い場合も） 話す 動く
6. 遠隔操作データを用いてAIを学習 • 大規模言語モデルの仕組みと 同様の要領で動作系列を学習 • エキスパートによる遠隔操作 データが50個ほどあれば 十分な精度が出る • カメラ情報も学習に含める ことで臨機応変な動作が可能 https://youtu.be/4VfNskoPUZg?si=Uz9gd7odgiqeySYB
7. DENSO WAVEのAI模倣学習 https://youtu.be/wZBAZGH6JUw?si=g4j_NykFP4Mas7lY
8. この流れはヒューマノイドロボットへ
9. 具体的に何ができる？ https://youtu.be/Sq1QZB5baNw?si=ZKARj7YmxC70pp6z
10. 具体的に何ができる？ https://youtu.be/q8IdbodRG14?si=_g9Z2WeJMTna268U
11. ようするに？ • 製造業で生成AIにより大きく変わるのはこれから 製造業が強い愛知県だからこそ・・・ • この世界的な流れに後れをとるわけにはいかない！