APIを使わずWinActorでAIを使ってみた話

Transcript

1. APIを使わず WinActorでAIを 使ってみた話
2. 目次 1. 本日の内容と作ろうと思ったきっかけ 2. 無料の生成AIチャットサービスについて 3. どうやってUIを操作するか 4. 実際にWinActorで自動化してみた 5. まとめ
3. １．本日の内容と作ろうと思ったきっかけ
4. １．本日の内容と作ろうと思ったきっかけ ① WinActorで無料の生成AIチャットサービスを操作 ② 今回はAPIがないのでWinActorでUI操作を自動化 ③ プロンプトで指定しても想定外の回答が出ることもある
5. １．本日の内容と作ろうと思ったきっかけ 企業ブログを作ることになったよ！ SEO対策もしてがっつり作るから 下調べしてから記事を書いてね♪ めんどくさいにゃ～… はい、よろこんで！ ……たまいさん！ 本音が駄々洩れですよ。 作成にあたってのルールもあるので マニュアルを参考に作ってください
6. １．本日の内容と作ろうと思ったきっかけ チートシートを作成 マニュアルをいちいち見なくていいし、 リンクをまとめたから調査しやすく なったぞ！ ……でも調査結果をコピー＆ペースト で まとめる作業が手間だなぁ～。 コピペ作業をWinActorで自動化したい！
7. ２．無料の生成AIチャットサービスについて
8. ２．無料の生成AIチャットサービスについて 今回使用するサービスについて 無料・回数制限なしのアプリなのでいろんなプロンプトを試せる！ ◆ 無料で生成回数など制限なしで利用可能。 ◆ 生成物は個人的用途、商業的用途を問わず利用可能。 ◆ 日本語向けに最適化されている。 ◆ 用途別にカスタマイズされた生成ツールが多数用意 されており、プロンプトを試行錯誤しなくても意図 した文章を得られる。 ◆ 今後以下の機能が追加される予定。  私だけの生成AIツールツールビルダー  画像も生成可能な便利なチャット  文書ファイルも認識するスマートチャット
9. ３．どうやってUIを操作するか
10. ３．どうやってUIを操作するか プロンプトをチャットに入力して生成されたコードブロックをコピー
11. ４．実際にWinActorで自動化してみた
12. ３．どうやってUIを操作するか 上図の手順で自動化したWinActorのシナリオの動画をご覧ください メモ帳からプロンプトをコピー 得られた記事をメモ帳へ上書き保存 プロンプト.txt
13. ５．まとめ
14. まとめ ① WinActorで無料の生成AIチャットサービスを操作 • 意外とUI操作は可能だったがブラウザ操作関連の知識や代替の手段が必要だった • 無料かつ回数制限なしのサービスなので試行錯誤しやすかった • ただし「現段階」の話なので利用規約が変わり有料になることも考慮する必要がある ② 今回はAPIがないのでWinActorでUI操作を自動化 • APIがなくてもUI操作で自動化は可能 • アプリがどこまで自動化の操作ができるかWinActorで探る必要がある • APIでしか実現できないこともあるので今回の方法がベストでない場合もある ③ プロンプトで指定しても想定外の回答が出ることもある • そもそも生成AIでの回答が正しいとは限らない • プロンプトでコントロールできる部分は書き方の基本と試行錯誤が必要 • 今回のブログ記事も「たたき台」として生成しあとで自分で内容を精査する