AIで何が改善できるのか？

Transcript

1. AIで何が改善できるのか︖ Sato Takumi MCPD Rakuten Group, Inc.
2. 2 ⾃⼰紹介 • Software Engineer →Assistant Manager of Project Manager Team • 2020年4⽉ 新卒⼊社 • 趣味 • ドライブ • サウナ • AI歴 • 修⼠2年間AIベンチャーでインターン • 新卒最初のプロジェクトで機械学習を利⽤ して個⼈情報の取得につながる質問を検知 するシステムを構築。楽天賞受賞。 佐藤 匠(さとう たくみ)
3. 3 今⽇お話しすること AIを実業務に取り⼊れる計画を紹介します。 計画を⽴てるまでの過程をもとに、AIを業務に導⼊するまで のステップを提案します。 また、その過程で得た気づきを共有します。
4. 4 アジェンダ 1. 私たちは何をやっているの︖ 2.チームの課題は何︖ 3.AIで何ができるの︖ 4.AIで業務改善できるか試してみよう︕ 5.AIの導⼊価値を考えてみよう︕ 6.まとめ
5. 5 私たちは何をやっているの︖
6. 6 私たちは何をやっているの︖ 楽天グループ全体で利⽤される様々なプラットフォームの開発・運⽤を担当 Campaign Application Tool キャンペーン管理 Lottery Platform くじ管理 Questionnaire Platform アンケート管理 ShortURL Platform ショートURL管理 SUSUMERU Platform SNS投稿管理 Video Platform 動画管理 Digital Media Center 画像管理 +2 Products
7. 7 私たちは何をやっているの︖ エンジニア • DevOps • SRE DevRel • 問い合わせ対応 • ドキュメント管理 • アナウンス Project Manager • プロジェクト計画 • QCD管理 • クライアントコ ミュニケーション 予算管理 • 予算の予実管理 チーム構成
8. 8 チームの課題は何︖
9. 9 チームの課題は何︖ • 下記プレゼンテーションでAIの活⽤事例が考えられているため、割愛 https://speakerdeck.com/jun_komori/chatgptdehe-gagai-shan-dekirunoka エンジニア • ⼈が問い合わせ対応しており、業務時間の約5割を占めている。 • 利⽤ユーザーへのアナウンスに⽉5時間程度(40分/回)の時間がかかっている。 • 利⽤ユーザー向けのドキュメントが古い/情報が探しにくい DevRel • プロジェクトを進める上で必要なドキュメントを作成およびレビューするのに時間がかかっている。 Project Manager • 予実を報告するための資料作成に時間がかかっている。 • Excelでの計算ミスがある状態でクライアントに配賦額を伝えてしまいコミュニケーションミスが発⽣する。 予算管理チーム
10. 10 チームの課題は何︖ • 下記プレゼンテーションでAIの活⽤事例が考えられているため、割愛 https://speakerdeck.com/jun_komori/chatgptdehe-gagai-shan-dekirunoka エンジニア • ⼈が問い合わせ対応しており、業務時間の約5割を占めている。 • 利⽤ユーザーへのアナウンスに⽉5時間程度(40分/回)の時間がかかっている。 • 利⽤ユーザー向けのドキュメントが古い/情報が探しにくい DevRel • プロジェクトを進める上で必要なドキュメントを作成およびレビューするのに時間がかかっている。 Project Manager • 予実を報告するための資料作成に時間がかかっている。 • Excelでの計算ミスがある状態でクライアントに配賦額を伝えてしまいコミュニケーションミスが発⽣する。 予算管理チーム AIを使って何が解決できるだろうか︖
11. 11 まずはAIを知ろう︕
12. 12 AIを知ろう AIとは︖ 知的な機械、特に、知的なコンピュータプログラムを作る科学と技術 ※そもそも知的/知能/知性の定義が曖昧なので、科学者の中でも定義が異なってい るのが現状
13. 13 AIを知ろう AIの分類 「特化型AI」 Ø特定の分野に特化したタスクへ対応したAI。具体的には、画像認識や⾳声認識、 翻訳、要約、株価予測、天気予報、⾃動運転など。すでに利⽤されている 「汎⽤型AI」 Ø⼈間の知性を完全に模倣し、⼈間と同様の知的⾏動ができるAI。ドラえもんみた いなイメージ。真の意味での汎⽤型AIは存在しない。
14. 14 AIを知ろう AIでできること AIの実⽤化における機能領域 識別 予測 実⾏ ⾳声認識 数値予測 表現⽣成 画像認識 マッチング デザイン 動画認識 意図予測 ⾏動最適化 ⾔語解析 ニーズ予測 作業の⾃動化 （出典）総務省「ICTの進化が雇⽤と働き⽅に及ぼす影響に関する調査研究」（平成28年） https://www.soumu.go.jp/johotsusintokei/linkdata/h28_03_houkoku.pdf
15. 15 もう⼀度課題を⾒直してみる
16. 16 チームの課題は何︖ • 表現⽣成: ⼈が問い合わせ対応しており、業務時間の約5割を占めている。 • 表現⽣成: 利⽤ユーザーへのアナウンスに⽉5時間程度(40分/回)の時間がかかっている。 • 表現⽣成: 利⽤ユーザー向けのドキュメントが古い/情報が探しにくい DevRel • 表現⽣成: プロジェクトを進める上で必要なドキュメントを作成およびレビューするのに時間がかかっている。 Project Manager • AI以外の⽅が確実: 予実を報告するための資料作成に時間がかかっている。 • 表現⽣成: Excelでの計算ミスがある状態でクライアントに配賦額を伝えてしまいコミュニケーションミスが発⽣する。 予算管理チーム
17. 17 AIを知ろう 表現⽣成が使えそう︕ AIの実⽤化における機能領域 識別 予測 実⾏ ⾳声認識 数値予測 表現⽣成 画像認識 マッチング デザイン 動画認識 意図予測 ⾏動最適化 ⾔語解析 ニーズ予測 作業の⾃動化 （出典）総務省「ICTの進化が雇⽤と働き⽅に及ぼす影響に関する調査研究」（平成28年） https://www.soumu.go.jp/johotsusintokei/linkdata/h28_03_houkoku.pdf
18. 18 AIを知ろう 表現⽣成でできること →やはり、ChatGPTでしょう︕ ChatGPTとは︖ • OpenAIが開発した対話特化型AIのこと • 2022年11末に発表 • 質問に対して、⼈間のように答えてくれる ※ChatGPTにより作成された回答
19. 19 AIで業務改善できるか試してみよう︕
20. 20 AIで業務改善できるか試してみよう • アナウンス⽂の作成 • プロジェクトを進める上で必要なドキュメントの作成およびレビュー • 配賦計算⽤excelシートの作成 • 問い合わせ対応Chatbot • 利⽤ユーザー向けドキュメントの更新←別プレゼンで話すので割愛
21. 21 AIで業務改善できるか試してみよう • アナウンス⽂の作成 • プロジェクトを進める上で必要なドキュメントの作成およびレビュー • 配賦計算⽤excelシートの作成 • 問い合わせ対応Chatbot
22. 22 AIで業務改善できるか試してみよう~アナウンス⽂の作成~ 開発資料の内容を要約してアナウンス⽂を作れないか考えてみる →リリース承認をもらうドキュメントに書かれている内容からアナウンス⽂を作成してみる
23. 23 AIで業務改善できるか試してみよう~アナウンス⽂の作成~ • 少し⼿直しをすればクライアントにアナウンスできる ような⽂章を作成してくれた︕ • 経験や知識が求められる要約作業、⽂章作成作業を ChatGPTが⾏い、質の⾼いアウトプットを出してくれ るため、教育コスト、レビューコストの削減も⾒込め る。 ※ChatGPTにより作成された回答
24. 24 AIで業務改善できるか試してみよう~アナウンス⽂の作成~ Execellent! ※ChatGPTにより作成された回答
25. 25 AIで業務改善できるか試してみよう~アナウンス⽂の作成~ 英⽂もほぼ⼿直しなしで利⽤できる →英訳コストおよび、レビューコストの削減が⾒込める ※ChatGPTにより作成された回答
26. 26 AIで業務改善できるか試してみよう~アナウンス⽂の作成~ Execellent! ※ChatGPTにより作成された回答
27. 27 AIで業務改善できるか試してみよう • アナウンス⽂の作成 • プロジェクトを進める上で必要なドキュメントの作成およびレビュー • 配賦計算⽤excelシートの作成 • 問い合わせ対応Chatbot
28. 28 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ ドキュメントの作成作業は下記のステップで⾏う。 1. 必要な情報の収集 2. ドキュメントの作成 3. ドキュメントのレビュー →それぞれのステップでAIが活⽤できないか検証してみる︕
29. 29 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ ステップ1: 情報収集 どんな情報を収集すべきか聞いてみた
30. 30 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ • プロジェクトを⽴ち上げるために必要な情報を列挙して くれた︕ • ⼈間が⾏うフィードバックをChatGPTが代わりに⾏って くれるため教育コストの削減が⾒込める ※ChatGPTにより作成された回答
31. 31 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ ステップ1: 情報収集 さらに、プロジェクト特有の課題、リスクがないか聞いてみた
32. 32 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ • 都道府県限定くじという点から、データ整合性や、法的 規制の課題など想定される課題を指摘してくれた︕ • こちらも⼈間がするフィードバックをChatGPTが代わり に⾏ってくれるためレビューコスト/教育コストの削減 が⾒込める ※ChatGPTにより作成された回答
33. 33 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ Execellent! ※ChatGPTにより作成された回答
34. 34 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ ステップ2: ドキュメントの作成 収集した情報からプロダクト要求仕様書を作成してもらった
35. 35 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ • ちゃんと構造化してくれている • リスク対策についても⾜りない内容を補完してくれている︕ • ドキュメント作成作業の削減が⾒込める ※ChatGPTにより作成された回答
36. 36 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ Execellent! ※ChatGPTにより作成された回答
37. 37 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ ステップ3: ドキュメントのレビュー ドキュメントのレビューをさせてみた
38. 38 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ • 指摘が的を射ている • 具体例がわかりやすく、どう修正すればいいかわかりやすい︕ • レビューコストの削減が⾒込める︕ ※ChatGPTにより作成された回答
39. 39 AIで業務改善できるか試してみよう~ドキュメントの作成とレビュー~ Execellent! ※ChatGPTにより作成された回答
40. 40 AIで業務改善できるか試してみよう • アナウンス⽂の作成 • プロジェクトを進める上で必要なドキュメントの作成およびレビュー • 配賦計算⽤excelシートの作成 • 問い合わせ対応Chatbot
41. 41 AIで業務改善できるか試してみよう~配賦計算⽤excelシートの作成~ 計算⽤のexcelファイルを作成してもらった
42. 42 AIで業務改善できるか試してみよう~配賦計算⽤excelシートの作成~ • Excelファイルで出⼒できない︕ • ChatGPTのAdvanced data analysis機能を利⽤ することでexcelファイルの取り扱いが可能だが 、有料枠のため割愛 • Excelに慣れている⼈であれば、プロンプトを考える より、⼿を動かしてExcelで計算し始めた⽅が速そう • Excel初⼼者にとってはいいサポートになりそう︕ ※ChatGPTにより作成された回答
43. 43 AIで業務改善できるか試してみよう~配賦計算⽤excelシートの作成~ good ※ChatGPTにより作成された回答
44. 44 AIで業務改善できるか試してみよう • アナウンス⽂の作成 • プロジェクトを進める上で必要なドキュメントの作成およびレビュー • 配賦計算⽤excelシートの作成 • 問い合わせ対応Chatbot
45. 45 AIで業務改善できるか試してみよう~Chatbot~ チャットボットの作り⽅を聞いてみた
46. 46 AIで業務改善できるか試してみよう~Chatbot~ コードを⽣成してくれた︕ 動かしてみよう︕
47. 47 AIで業務改善できるか試してみよう~Chatbot~ 想定していたQ&A AIが返したQ&A Question: What can this chatbot do? Answer: This chatbot can answer questions, assist with conversations, and provide information on various topics.
48. 48 AIで業務改善できるか試してみよう~Chatbot~ 想定していたQ&A AIが返したQ&A Question: What can this chatbot do? Answer: This chatbot can answer questions, assist with conversations, and provide information on various topics. 精度は全然だけど、学習→モデルの利⽤まではすぐにできた︕ モデルの精度を向上させれば使えそう︕
49. 49 AIで業務改善できるか試してみよう~Chatbot~ 想定していたQ&A AIが返したQ&A Question: What can this chatbot do? Answer: This chatbot can answer questions, assist with conversations, and provide information on various topics. good
50. 50 AIで業務改善できるか試してみよう • Excellent: アナウンス⽂の作成 • Excellent: プロジェクトを進める上で必要なドキュメントの作成およびレビュー • Good: 配賦計算⽤excelシートの作成 • Good: 問い合わせ対応Chatbot
51. 51 AIの導⼊価値を考えてみよう︕
52. 52 AIの導⼊価値を考える AIの導⼊コスト 今回のケースだとChat GPTの機能を社内で利⽤できるようにする必要がある。 →Azure Open AI Serviceが社内利⽤に対応︕ • チャット⽤のUIをAzureが⽤意してくれる • 料⾦はGPT-3.5-Turbo、トークン上限4Kのモデルを利⽤して、23⼈チームの場合、1,264 円/⽉ 23⼈×10回/⽇×21⽇/⽉×(0.2245 × 0.5 + 0.2993 × 0.5 )円/チャット = 1,264 円/⽉ • 1⽇あれば導⼊可能 モデル トークン上限 プロンプト (1,000 トークンあたり) 完了 (1,000 トークンあたり) GPT-3.5-Turbo 4K ¥0.2245 ¥0.2993 GPT-3.5-Turbo 16K ¥0.449 ¥0.599 GPT-4 8K ¥4.489 ¥8.977 GPT-4 32K ¥8.977 ¥17.953 https://azure.microsoft.com/ja-jp/pricing/details/cognitive-services/openai-service/
53. 53 AIの導⼊価値を考える AIの導⼊によるリターン 作業 AI導⼊前 AI導⼊後⾒積もり 削減⼯数 アナウンス⽂章の 作成 320分/⽉ (8回/⽉×40分/回) 160分/⽉ (8回/⽉×20分/回) 160分/⽉ ドキュメントの作 成/レビュー 1,500分/⽉ (5回/⽉×300分/回) 1,000分/⽉ (5回/⽉×200分/回) 500分/⽉ 教育コスト 600分/⽉ (10⽇/⽉×30分/回×2⼈) 300分/⽉ (10⽇/⽉15分/回×2⼈) 300分/⽉ 合計 960分/⽉ • 今回考えた作業だけでも960分/⽉の⼯数削減が⾒込める︕ • ⽉1,300円程度の投資でこのリターンは⼤きい︕ • 今回考えた作業以外でもAIを活⽤することでより⼤きな⼯数削減が⾒込める︕
54. 54 AIの導⼊価値を考える AIの導⼊によるリターン • 今回考えた作業だけでも960分/⽉の⼯数削減が⾒込める︕ • ⽉1,300円程度の投資でこのリターンは⼤きい︕ • 今回考えた作業以外でもAIを活⽤することでより⼤きな⼯数削減が⾒込める︕ 作業 AI導⼊前 AI導⼊後⾒積もり 削減⼯数 アナウンス⽂章の 作成 320分/⽉ (8回/⽉×40分/回) 160分/⽉ (8回/⽉×20分/回) 160分/⽉ ドキュメントの作 成/レビュー 1,500分/⽉ (5回/⽉×300分/回) 1,000分/⽉ (5回/⽉×200分/回) 500分/⽉ 教育コスト 600分/⽉ (10⽇/⽉×30分/回×2⼈) 300分/⽉ (10⽇/⽉15分/回×2⼈) 300分/⽉ 合計 960分/⽉ AIを導⼊すべし︕
55. 55 まとめ • AIの導⼊は下記のステップで進めると良いのではないでしょうか︖ 1. AIで何ができるのかを理解する 2. ⾃社の業務課題がAIで解決できるのか試してみる 3. 数値的なビジネスインパクトが出せるのかを判断する 4.ビジネスインパクトが出るようであれば導⼊する • ChatGPTは経験や知識が必要になるような要約作業やレビュー作業を ⾏ってくれるため、⽂章作成作業、レビュー、教育コストの削減が⾒ 込める。 • ChatGPTの導⼊は想像以上に安い
56. 56 おまけ 発表のアジェンダもChatGPTに作ってもらって いました︕