LangGraphでのHuman-in-the-Loopの実装

イベントページ：https://studyco.connpass.com/event/328389/

ソースコード：https://github.com/os1ma/langgraph-human-in-the-loop-demo

Transcript

1. 2024/09/05 #StudyCo LangGraphでの Human-in-the-Loopの実装
2. 自己紹介 大嶋勇樹（おおしまゆうき） https://x.com/oshima_123 株式会社ジェネラティブエージェンツ取締役CTO/Co-founder 大規模言語モデルを組み込んだアプリケーションやAIエージェントの開発を実施 個人ではエンジニア向けの勉強会開催やUdemy講座の作成など 勉強会コミュニティStudyCo運営 「ChatGPT/LangChainによるチャットシステム構築［実践］入門」（共著）
3. 会社名 株式会社ジェネラティブエージェンツ （英文：Generative Agents, Inc.） 所在地 東京都港区 ※ 全社員リモート勤務 役員構成 CEO 西見 公宏 COO 吉田 真吾 CTO 大嶋 勇樹 設立年月 2024年3月14日 事業内容 AIエージェントによるBPaaSの提供／生成AIを活用し たソフトウェア開発／技術顧問、AIエージェントに関 わるコミュニティ運営、法人向けコンサルティング AIエージェントによるBPaaSの提供 複雑な業務管理を自律的におこなうLLMエージェントサービスを提 供します。独自のワークフローエンジンと複数プロフィールを設 定したマルチエージェントシステムが御社のワークフォースとし て業務を遂行します。 生成AIを活用したソフトウェア開発支援 AIエージェントの開発技術をコアに、生成AIを活用したソフトウェ ア開発をレンタルCAIO（最高AI責任者）として支援します。 株式会社ジェネラティブエージェンツ - 会社概要 AIエージェントが「ハブ」となり 人間とAIエージェントの協働が 当たり前になる世界を実現する
4. 代表取締役CEO / Founder 西見 公宏 Masahiro Nishimi 事業会社の顧問CTOとして活動するソフトウェア開発のスペシャリス ト。AIエージェントを経営に導入することにより、あらゆる業種業態の 生産性を高めるための活動に尽力している。 「その仕事、AIエージェントがやっておきました。――ChatGPTの次に 来る自律型AI革命」（技術評論社）単著、Software Design「実践LLMア プリケーション開発」（技術評論社）連載。 主な著書 『その仕事、AIエージェントがやっておきました』 取締役COO / Co-founder 吉田 真吾 Shingo Yoshida AWS Serverless Heroとして日本におけるサーバーレスの普及を促進。 「ChatGPT/LangChainによるチャットシステム構築［実践］入門」（技 術評論社）共著、「Azure OpenAI ServiceではじめるChatGPT/LLMシス テム構築入門」（技術評論社）共著、「AWSによるサーバーレスアーキ テクチャ」（翔泳社）監修、「サーバーレスシングルページアプリケー ション」（オライリー）監訳、「AWSエキスパート養成読本」（技術評 論社）共著。ChatGPT Community（JP）主催 主な著書 『ChatGPT/LangChainによるチャットシステム構築［実践］入門』 『Azure OpenAI ServiceではじめるChatGPT/LLMシステム構築入門 　エンジニア選書』 取締役CTO / Co-founder 大嶋 勇樹 Yuki Oshima 大規模言語モデルを組み込んだアプリケーションやAIエージェントの開 発を実施。 個人ではエンジニア向けの勉強会開催や教材作成など。オンラインコー スUdemyではベストセラー講座多数。 「ChatGPT/LangChainによるチャットシステム構築［実践］入門」（技 術評論社）共著。勉強会コミュニティStudyCo運営。 主な著書 『ChatGPT/LangChainによるチャットシステム構築 ［実践］入門』 運営メンバー
5. 2024/09/05 #StudyCo LangGraphでの Human-in-the-Loopの実装
6. LangGraphとは LangGraphは、LangChain社が提供するLLMエージェントを実装するためのパッケージです LangChain・LangSmithとシームレスに統合されています
7. エージェントの処理の基本的な流れ シンプルなLLMエージェントは、LLMによる推論・ツールの使用（アクション）・観察を繰り返し、 ユーザの入力から最終的な応答まで下図の流れで動作します OpenAI's Bet on a Cognitive Architecture https://blog.langchain.dev/openais-bet-on-a-cognitive-architecture/
8. LangGraphでのエージェントの実装 LangGraphでは、「ノード」と「エッジ」を定義してワークフローのグラフを作成して実行します シンプルなLLMエージェントのグラフは以下のように定義できます
9. Human-in-the-Loopを入れるとしたら... • 人間によるツールの利用の承認 LLMがツールを使いたいと判断した際に、人間の承認を得るようにする • 人間によるツールの引数の修正 LLMが生成したツールの引数を、人間が修正可能にする • 人間に質問する ツールに加えて、LLMが人間に質問できるようにする
10. 人間による承認を実装した例 https://github.com/os1ma/langgraph-human-in-the-loop-demo
11. LangGraphでの人間による承認の実装 LangGraphで人間による承認を実装する例は、以下のようになります human_review_nodeが追加されていることに加えて、 「checkpointer」「interrupt_before」の2つがポイントです
12. checkpointer checkpointerは、LangGraphでのグラフの実行状況を保存する機能です • MemorySaver：インメモリで保存する • SQLiteSaver：SQLiteに保存する • PostgresSaver：PostgreSQLに保存する • カスタム：BaseCheckpointSaverを継承して独自に実装可能 公式ドキュメント：https://langchain-ai.github.io/langgraph/how-tos/persistence/
13. interrupt_before グラフの構築時に「interrupt_before」を設定すると、指定したノードの手前で処理が一時停止します 処理が一時停止したタイミングで承認ボタンを表示して、 承認されたら処理の続きを進めることができます （どこまで処理したかはcheckpointerで保存されています）
14. （再掲）LangGraphでの人間による承認の実装 LangGraphで人間による承認を実装する例は、以下のようになります human_review_nodeが追加されていることに加えて、 「checkpointer」「interrupt_before」の2つがポイントです
15. ちなみに... 承認する代わりに人間から追加の指示があったケースには、 ツールの呼び出しに失敗したメッセージをStateに追加することで対応できます https://github.com/os1ma/langgraph-human-in-the-loop-demo/blob/14e09b6cbf9cde9602d5e3542cd773d24d8faf4d/agent.py#L76 https://langchain-ai.github.io/langgraph/how-tos/human_in_the_loop/review-tool-calls/#give-feedback-to-a-tool-call
16. まとめ • LangGraphでのHuman-in-the-Loopの実装を紹介しました • checkpointerとinterrupt_beforeの設定がポイントでした • 人間によるツールの利用の承認以外にも、ツールの引数の修正や、人間への質問も実装可能です https://langchain-ai.github.io/langgraph/how-tos/human_in_the_loop/edit-graph-state/ https://langchain-ai.github.io/langgraph/how-tos/human_in_the_loop/wait-user-input/ 最近はLangGraphのアップデートがとても活発です 今後のアップデートにも期待しましょう！
17. （宣伝）LangChain公式エキスパートに認定 株式会社ジェネラティブエージェンツは、日本企業初のLangChain公式エキスパートに認定されました https://www.langchain.com/experts 法人向けの研修もご提供しているので、SNS（https://x.com/oshima_123）や 会社サイト（https://www.generative-agents.co.jp/）からご相談ください
18. ご清聴ありがとうございました