Upgrade to Pro — share decks privately, control downloads, hide ads and more …

LayerXにおけるAI・機械学習技術の活用と展望 / layerx-ai-jsai2024

shimacos
May 30, 2024

LayerXにおけるAI・機械学習技術の活用と展望 / layerx-ai-jsai2024

JSAI2024(第38回 人工知能学会全国大会)で登壇させていただいた際の資料です。
LayerXにおけるAI活用事例やAI-UXで成し遂げたいことについてなど話しました。

タイトル:LayerXにおけるAI・機械学習技術の活用と展望
セッション:[2E4-IND-4] インダストリアルセッション4
日時:2024年5月29日(水) 13:30 〜 15:10 【E会場】

shimacos

May 30, 2024
Tweet

More Decks by shimacos

Other Decks in Research

Transcript

  1. © 2024 LayerX Inc. 2 バクラク事業部 機械学習グループ Tech Lead/ 機械学習エンジニア

    経歴 • 2019/04 京都大学大学院 工学研究科 修士課程修了 • 新卒では、事業会社でタクシー配車アプリに関する機械学習 システムの構築や、ライブストリーミングサービスにおける推 薦システム構築に携わる • 現在 ◦ 株式会社LayerX 機械学習グループ Tech Lead ◦ バクラク事業部において、AI-OCRの改善や 新しい機械学習システムの構築を担当 ◦ Kaggle Competitions Grandmaster 自己紹介 島越 直人(Naoto Shimakoshi) @nt_4o54
  2. © 2024 LayerX Inc. 5 なぜやるのか なぜやるのか 人口減少社会 人の生産性 “すべての経済活動を、デジタル化する”

    日本社会の構造的課題 LayerXの課題認識 LayerXの事業/ミッションとのつながり 人口減少社会で起こる課題の解決を、ソフトウェアでサポートする お金の生産性 データの生産性 バクラク事業 Fintech事業 AI・LLM事業
  3. © 2024 LayerX Inc. 9 バクラクシリーズラインナップ 稟議・支払申請・経費精算 仕訳・支払処理効率化 法人カードの発行・管理 帳票保存・ストレージ

    帳票発行 * 経費精算のSlack連携は申請内容の通知のみ ・AIが領収書を5秒でデータ化 ・スマホアプリとSlack連携あり ・領収書の重複申請などミス防止機能 ・AIが請求書を5秒でデータ化 ・仕訳・振込データを自動作成 ・稟議から会計までスムーズに連携 ・年会費無料で何枚でも発行可 ・インボイス制度・電帳法対応 ・すべての決済で1%以上の還元 ・AIが書類を5秒でデータ化 ・あらゆる書類の電子保管に対応 ・電子取引・スキャナ保存に完全対応 ・帳票の一括作成も個別作成も自由自在 ・帳票の作成・稟議・送付・保存を一本化 ・レイアウトや項目のカスタマイズも可能
  4. © 2024 LayerX Inc. 13 • ChatGPTを始めとしたアイデアから生まれた体験を、「AI-UX」(AIを前提とした理想のUX)と呼ぶ • AI-UXは、「AIを前提とした理想のUX」を作るために、AIだけでなく、AI以外のあらゆる手段も総動員 する

    • AIを知り尽くした上で、何のタスクを、どう解くかをデザインし、体験に落とし込む。どこでAIを使い、ど こであえてAIを使わないかを、全体の体験としてどう落とし込むかが鍵(ソフトウェアとデザインの総合 格闘技戦) • AI-UXはマーケティング、営業、カスタマーサクセス、サポートなどビジネス組織にも変化を及ぼしてい く • 洗練されたAI-UXで、ユーザーの体験を再構築していくことをAX(AI Transformation)と呼ぶ AI-UXとAX(AI Transformation) 2024年の注力ポイント 日経COMEMO「AI-UXとAX(AI Transformation)というLayerXの挑戦」より
  5. © 2024 LayerX Inc. 14 業務そのものをなくす(powered by AI-UX) AIによる業務のre-design 紙の台帳管理・記帳

    SaaS第1世代 AIによる自動化 クラウド (インターネット) 紙 AI 入力レス・自動化 どこに入力するかが変わっただけで業務の本質は変わっていない 業務そのものをなくせる LayerXはここにBet! オンプレ業務システム オンプレ (コンピュータ)
  6. © 2024 LayerX Inc. 15 目指す未来 システム システム AI ・・・

    領収書の写真を撮ったら 全て入力される 領収書を見ながら、 金額、社名などを手入力... 出張の手配は全て自分でし 申請も全て自分で入力... カレンダーの出張予定を見て 最適な旅程を提案→決済 カレンダー, システムの履歴 から自動で勤怠を作成 勤怠を自分で振り返り、上長 承認のためのシステム入力... 削れる費用をサジェスト、 最適な働き方を提案 システムに溜まったデータを分 析し、費用削減プランを実行... 人がシステムに合わせて仕事 入力は自動化、データからサジェスト 人がシステムに合わせる → システムが人に合わせる システムはデータを入れる箱 システムは人を助けるアシスタント
  7. © 2024 LayerX Inc. 18 企業間の取引や企業内の日常業務に使用されるデータ LayerXで扱うデータ バクラク事業 請求書処理・経費精算・稟議申請・法人カードなどの 支出管理を一本化。

    企業間の取引に使われるありとあらゆる書類を扱う。 AI・LLM事業 これまで単体では事業が成立しなかったニッチな書類 に対する業務の効率化。 思考力・集中力が必要なドキュメントワークをLLMで代替。 
  8. © 2024 LayerX Inc. 19 AI-OCRによる経理業務に必要な項目の抽出 バクラク事業における項目抽出 請求書や領収書などの帳票に記載された項目(支払期日や支払金額、取引先名など)を抽出。 • 帳票のフォーマットは多種に渡り、

    目視で必要な項目を探すのは手間がかかる • ミスが許されないため、ダブルチェック等の 確認作業にも追加でコストが必要 • 色塗りをすることで、AIが間違った際の 「気づきやすさ」などの体験を設計
  9. © 2024 LayerX Inc. 20 契約・購買稟議項目 ・・・ 購買理由 契約書情報 契約先情報

    購買金額 契約期間 締結方法 予算コード 前回稟議 得意先コード 郵送先住所 押印有無 印鑑種別 既存の機械学習ベースのAI-OCRでは解決できない課題 既存の機械学習ベースのAI-OCRではすべての項目には対応不可 契約書 見積書 前回稟議情報 自動読み取りが 難しい 機械学習ベースの AI-OCRで自動読取 ? 多種多様な項目ごとに十分なデータが蓄積されない ソースとなる書類・帳票も複数あり複雑性が高い
  10. © 2024 LayerX Inc. 21 LLMを用いた複数の書類から任意の項目の情報抽出 既存の機械学習ベースのAI-OCRでは解決できない課題 十分な精度がでない場合やハルシネーションを考慮した体験面(AI-UX)の設計は必須 ソースとなる関連する情報を特定する部分も技術的なチャレンジ 契約・購買稟議項目

    ・・・ 購買理由 契約書情報 契約先情報 購買金額 契約期間 締結方法 予算コード 前回稟議 得意先コード 郵送先住所 押印有無 印鑑種別 契約書 見積書 前回稟議情報 LLMが任意の稟議 項目を自動抽出 機械学習ベースの AI-OCRで自動読取
  11. © 2024 LayerX Inc. 26 書類単体の情報だけでは解決できない課題 項目抽出だけでは解決できない課題 経費精算時必要となる情報 立て替えをした日 立て替えした金額

    立て替え先のお店情報 社内ルールに基づいた区分 飲食の場合、出席者情報 ・・・ 領収書からは得られず、各社独自のルールに基づく入 力項目のため、依然として手入力が存在 機械学習ベースの AI-OCRで自動読取 書類以外のソースや履歴データを参照した上で解決する必要がある
  12. © 2024 LayerX Inc. 34 本当に解きたい課題 例1 支払期日として2021年2月28日(日)を検出 顧客「実際に支払うのは平日の26日(金)だから変更しないと!」 例2

    支払金額として500,000円を検出 顧客「実際に支払うのは源泉税10.21%を差し引いた448,950円だから変更しないと!」 例3 電子帳簿保存法観点では領収日(カードで支払った日)を取りたいが、 経費精算観点では計上日(新幹線に乗車した日)を取りたい。 お客様が本当に欲しているのは「実際の運用に即した値」 項目抽出をするだけでは、お客様の「本当の課題」を解決できない
  13. © 2024 LayerX Inc. 35 機械学習とルールベースやUXを組み合わせたアプローチ AI-OCRの課題へのアプローチ 帳票ファイル (画像・PDF) 支払期日

    支払金額 2021/02/28 取引先名 500,000 株式会社テンプレ 帳票に記載の 項目ごとの値 支払期日 支払金額 2021/02/26 取引先名 448,950 株式会社テンプレ 帳票に記載の 項目ごとの値に基づく 実際の運用に即した値 ルールベースやプロダク トの体験(UX)で実現 機械学習で実現 • 帳票に記載の項目ごとの値 ◦ 大量に蓄積された顧客の利用データやアノテーションデータを用いて学習された機械学習モデル を利用 • 実際の運用に即した値 ◦ 「帳票に記載の項目ごとの値」と異なる場合は、ルールベースやプロダクトの体験(UX)でカバー
  14. © 2024 LayerX Inc. 36 ルールベースやUXだけでは解決できない課題 その先の課題 同じ帳票に対してもお客様のコンテキストによって解釈が異なることがある • 例)

    A社に対するX円のB銀行への振り込み明細書という書類 ◦ パターン1:A社に対してX円支払ったことを証明するための書類として使いたい ◦ パターン2:B銀行に対して振り込み手数料を支払ったことを証明するための書類として使いたい • 同じフォーマットの帳票なのに両方の学習データが入ることになり、ラベルノイズになる。 「どういうシチュエーションで」「どういうコンテキストの値」を選んでいるかの情報を蓄積する必要がある。 • アノテーションの仕方、ユーザのデータの貯め方などなど、ドメインにDeepDiveしながら 多角的に解決していく。 • 現状、ルールベースやお客様が設定しなければいけない部分も自動化し、Wowを届けていきたい。
  15. © 2024 LayerX Inc. 38 「AIを前提とした理想のUX」であるAI-UXを探究し、人がシステムに合わせる時代からシステ ムが人に合わせる時代へとユーザーの体験を再構築(AX: AI transformation)する まとめ

    LayerXにおけるAI・機械学習技術の活用と展望についてご紹介 • AI-UXを実現するために、経済活動で使用される書類などを起点に、多種多様な機械学習技術とルー ルベースなどを組み合わせ、お客様の体験を向上させるプロダクトを展開しています。 • バクラク事業 ◦ AI-OCRによる項目抽出 ◦ 構造化データを利用した内訳推薦や証憑マッチング • AI・LLM事業 ◦ 「知的単純作業」をLLMのワークフローに置換する