開発した生成AI活用アプリ

Transcript

1. 1 遅刻しなAI アプリ紹介 自然言語からスケジュール登録と 移動スケジュールも同時に登録 LINE友達登録URL WEB簡易版
2. スケジュールURL生成 アーキテクチャ図 2 GPT-3.5-turbo-instruct スケジュール情報 Googleカレンダー 登録URL プロンプトにて 日付/時間/場所/イベント 名/イベント内容を分類 URLをZero Shotで生成 https://www.google.com/calendar/event?action=TEMPLATE&text=LLM+Application+Meetup+vol.99&dates =20231212T100000Z/20231212T120000Z&details=https://llm-app.connpass.com/event/297732/&location= 品川グランドセントラルタワー+日本マイクロソフト品川本社+31F+セミナールーム+A&trp=false ＜URL生成例＞ Olemi-llm-apprentice/Dont_be_late_AI: 遅刻しなAI (github.com)
3. 動画→議事録化AIエージェント（11月末無料公開目標） Web会議 録画 レポート 議事録 現場打合せ 録音 様々な動画や音声データ
4. 動画→議事録化AI アーキテクチャ図 4 GPT-3.5-turbo 動画 .mp4 音声 .mp3 文字起こし 全文 テキスト 分割 テキスト 要約 要約 テキスト 合成 合成 テキスト マークダウン 記事化 議事録化 全体要約 テキスト 分割 テキスト 分割 テキスト 分割 テキスト 要約 テキスト 要約 テキスト 要約 ffmpeg GPT-3.5-turbo Olemi-llm-apprentice/-whisper_test- (github.com)
5. 動画に一語一語字幕（形態素解析） カラオケのように字幕が単語ごとに強調 (形態素解析したものは日本初？) 出展：https://www.youtube.com/watch?v=Gh0xzbgCIgg&pp=ygUc44K944OV44OI44OQ44Oz44KvIOWtq-ato-e-qQ%3D%3D
6. 一語一語字幕 アーキテクチャ図 動画 .mp4 文字 起こし .json フォント 付字幕 .ass ffmpeg WhisperX 単語から 形態素解析 .json janome 字幕付き 動画 .mp4
7. 二つを合成して目指す最終系 M365 CopilotのTeams会議議事録機能 ＜機能＞ ・動画記録 ・議事録、タスク化 ・話者認識 ・会議内容をRAGでAI チャット ・議事録から動画の再生 場面へジャンプ ・ネガポジ発言探知
8. 生成AI系 MeetUpイベント 参加実績 ※オンライン含む
9. 生成AI系 MeetUpイベント LT登壇実績 MicrosoftにてLT登壇 生成AI高専人会を 主催しLT登壇