Slide 1

Slide 1 text

APIを使わず WinActorでAIを 使ってみた話

Slide 2

Slide 2 text

目次 1. 本日の内容と作ろうと思ったきっかけ 2. 無料の生成AIチャットサービスについて 3. どうやってUIを操作するか 4. 実際にWinActorで自動化してみた 5. まとめ

Slide 3

Slide 3 text

1.本日の内容と作ろうと思ったきっかけ

Slide 4

Slide 4 text

1.本日の内容と作ろうと思ったきっかけ ① WinActorで無料の生成AIチャットサービスを操作 ② 今回はAPIがないのでWinActorでUI操作を自動化 ③ プロンプトで指定しても想定外の回答が出ることもある

Slide 5

Slide 5 text

1.本日の内容と作ろうと思ったきっかけ 企業ブログを作ることになったよ! SEO対策もしてがっつり作るから 下調べしてから記事を書いてね♪ めんどくさいにゃ~… はい、よろこんで! ……たまいさん! 本音が駄々洩れですよ。 作成にあたってのルールもあるので マニュアルを参考に作ってください

Slide 6

Slide 6 text

1.本日の内容と作ろうと思ったきっかけ チートシートを作成 マニュアルをいちいち見なくていいし、 リンクをまとめたから調査しやすく なったぞ! ……でも調査結果をコピー&ペースト で まとめる作業が手間だなぁ~。 コピペ作業をWinActorで自動化したい!

Slide 7

Slide 7 text

2.無料の生成AIチャットサービスについて

Slide 8

Slide 8 text

2.無料の生成AIチャットサービスについて 今回使用するサービスについて 無料・回数制限なしのアプリなのでいろんなプロンプトを試せる! ◆ 無料で生成回数など制限なしで利用可能。 ◆ 生成物は個人的用途、商業的用途を問わず利用可能。 ◆ 日本語向けに最適化されている。 ◆ 用途別にカスタマイズされた生成ツールが多数用意 されており、プロンプトを試行錯誤しなくても意図 した文章を得られる。 ◆ 今後以下の機能が追加される予定。  私だけの生成AIツールツールビルダー  画像も生成可能な便利なチャット  文書ファイルも認識するスマートチャット

Slide 9

Slide 9 text

3.どうやってUIを操作するか

Slide 10

Slide 10 text

3.どうやってUIを操作するか プロンプトをチャットに入力して生成されたコードブロックをコピー

Slide 11

Slide 11 text

4.実際にWinActorで自動化してみた

Slide 12

Slide 12 text

3.どうやってUIを操作するか 上図の手順で自動化したWinActorのシナリオの動画をご覧ください メモ帳からプロンプトをコピー 得られた記事をメモ帳へ上書き保存 プロンプト.txt

Slide 13

Slide 13 text

5.まとめ

Slide 14

Slide 14 text

まとめ ① WinActorで無料の生成AIチャットサービスを操作 • 意外とUI操作は可能だったがブラウザ操作関連の知識や代替の手段が必要だった • 無料かつ回数制限なしのサービスなので試行錯誤しやすかった • ただし「現段階」の話なので利用規約が変わり有料になることも考慮する必要がある ② 今回はAPIがないのでWinActorでUI操作を自動化 • APIがなくてもUI操作で自動化は可能 • アプリがどこまで自動化の操作ができるかWinActorで探る必要がある • APIでしか実現できないこともあるので今回の方法がベストでない場合もある ③ プロンプトで指定しても想定外の回答が出ることもある • そもそも生成AIでの回答が正しいとは限らない • プロンプトでコントロールできる部分は書き方の基本と試行錯誤が必要 • 今回のブログ記事も「たたき台」として生成しあとで自分で内容を精査する