2026_05_26 Visual IoTLT AIxNode-REDxtoioxダンス
>100 Views
May 27, 26
スライド概要
関連スライド
Meta XR SDK(V66-74)でQuestアプリを開発
あうぜん
1.2M
各ページのテキスト
AI x Node-RED x toioでダンスさせたい まつした＠野良ハック 2026/5/26 ビジュアルプログラミングIoTLT
自己紹介 まつした Twitter: @yskmjp ・野良ハックチーム → 趣味の電子工作 ・現代アート、演劇、ダンス ・おもちゃドクター ・エレクトロニコス・ファンタスティコス
前回の発表 システム構成 Node-RED Dashboard ⑤上演（会話） ・セリフを再生 ・台本、美術を表示 ①台本のお題を インプット ChatGPT ②台本作成 ・お題、ルール（行数、フォー マット）をインプット ・台本（セリフ、声質、感情、照 明）をアウトプット ⑥上演（照明） ・照明を表示 Koeiromap ③音声合成 ・セリフ、声質、感情をイン プット ・音声ファイル、音素数をアウ トプット DALL-E ④舞台美術 ・お題とプロンプトをインプット ・画像ファイルをアウトプット
前回の発表 ChatGPTダンスシステム ③舞踊譜 →モーション変換 ・舞踊譜をtoioのモーター制御 命令に変換 ①ダンスのお題 をインプット toio モーター 制御命令 舞踊譜 ChatGPT ②舞踊譜作成 ・お題、ルール（行数、フォー マット）をインプット ③ダンス上演 ・モーター制御命令を元にダ ンス
プロンプトと舞踊譜 前回の発表
2025->2026の間に ● やりたい事はあるのだが実装が面倒 … ↓ ● Claude Codeをはじめとする生成 AIにより、コーディングの労力が劇 的に減少 （arduino、Node-REDなども含む）
システム構成 全てをCodexで実装 （Node-RED、toio制御、arduinoサーボ制御、バックエンド処理） AtomS3 Lite ChatGPT Node-RED ⑤上演 （腕の動き） ②振付として JSONを生成 Atom Mate for toio ④振付指示、 音楽再生 ①テーマを インプット SUNO toio FastAPI ③音楽として mp3を生成 ⑤上演 （移動）
デモ
人間との協同振付 Node-REDを使う理由 タイムラインが左から右に流れる 形が人間には理解しやすい 前後入れ替えの演出など 時間軸が左から右へ
人間の見る舞踊譜 Anna Halprin's "The Five Legged Stool" 時間軸が左から右へ
（ 舞踊譜とシステム化 ダンスの舞踊譜 ラバノーテーション Microsoft Applied Robotics Research Library 舞踊譜のフォーマット化は 論文では多数研究あり ラバノーテーションの JSONフォーマットGitHubで公開 林夏木 2022「舞踊記譜法の論点と課題」
AI演劇 やんツー個展「浮遊する器官」 BUGアートセンター 2/25 - 4/5
● ● ● ● ● ● ● ● ● ● ● （ 今後の課題 振付（振付家）ー 振付を作る 演出（演出家）ー 舞台上の演出をする 出演（ダンサー）ー ダンスを踊る 舞台監督 ー 舞台上での進行管理 美術 ー 舞台上の美術、小道具 全てを 照明 ー 舞台上の照明 自動化したい！ 衣装 ー 上演で利用する衣装 音響 ー 舞台上の音響 音楽 ー 上演で利用する音楽の作成・演奏 企画 ー 上演作品の企画 制作 ー 上演に向けての進行管理
生成AIの創作 確率論的に決まる生成 AIは趣味の創作に適している？ （vs ハーネスエンジニアリング）
ありがとうございました