Upgrade to Pro — share decks privately, control downloads, hide ads and more …

わたしの事例紹介

1ft-seabass
May 31, 2024
86

 わたしの事例紹介

生成AI オンラインハッカソン4 by #protopedia「わたしの事例紹介」の登壇資料です。

◆スライド内の素材は以下を使用させていただいております。ありがとうございます!

・シルエットデザイン http://kage-design.com/
・human pictogram 2.0 http://pictogram2.com
・ICOOON MONO http://icooon-mono.com/
・Adobe Stock https://stock.adobe.com/jp

1ft-seabass

May 31, 2024
Tweet

More Decks by 1ft-seabass

Transcript

  1. こんな仕組み XREAL Air が AR モードで動作してAndroid アプリとして位置情報を常に把握。 しゃべると位置情報つき質問が Node-RED に渡され

    HERE API と ChatGPT API で良い感じに回答します。 Whisper API Node-RED +HERE API Unity Android アプリとして位置情報を常に把握 マイク入力 WAV データ 文字 起こし 位置つき 質問 回答
  2. 他の LLM 活用 + xR + 音声認識 + 設備制御 OpenAI

    や Genimi や Bing などの前線以外の生成 AI もうまく活用したい
  3. Unity 実際の仕組み Meta Quest 3 で音声を取得して Whisper API で文字起こしをしつつ IBM

    Cloud Code Engine で作った watson.ai API 連携プログラムで帰ってきたオンオフの値を設備制御に命令するイメージ Whisper API IBM Cloud Code Engine + watsonx.ai マイク入力 文字起こし 質問 回答(JSON) Node-RED エアコン 照明 スマートライト社 設備制御
  4. Windows の WSL2 で入れた Ubuntu で Docker + Ollama +

    llama3 を動かしたメモ https://www.1ft-seabass.jp/memo/2024/05/26/windows-wsl2-ubuntu-docker-ollama-llama3/