Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
APIを使わずWinActorでAIを使ってみた話
Search
Sponsored
·
SiteGround - Reliable hosting with speed, security, and support you can count on.
→
たまい
December 19, 2023
Technology
1.7k
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
APIを使わずWinActorでAIを使ってみた話
たまい
December 19, 2023
Transcript
14 slides
APIを使わず WinActorでAIを 使ってみた話
目次 1. 本日の内容と作ろうと思ったきっかけ 2. 無料の生成AIチャットサービスについて 3. どうやってUIを操作するか 4. 実際にWinActorで自動化してみた 5.
まとめ
1.本日の内容と作ろうと思ったきっかけ
1.本日の内容と作ろうと思ったきっかけ ① WinActorで無料の生成AIチャットサービスを操作 ② 今回はAPIがないのでWinActorでUI操作を自動化 ③ プロンプトで指定しても想定外の回答が出ることもある
1.本日の内容と作ろうと思ったきっかけ 企業ブログを作ることになったよ! SEO対策もしてがっつり作るから 下調べしてから記事を書いてね♪ めんどくさいにゃ~… はい、よろこんで! ……たまいさん! 本音が駄々洩れですよ。 作成にあたってのルールもあるので マニュアルを参考に作ってください
1.本日の内容と作ろうと思ったきっかけ チートシートを作成 マニュアルをいちいち見なくていいし、 リンクをまとめたから調査しやすく なったぞ! ……でも調査結果をコピー&ペースト で まとめる作業が手間だなぁ~。 コピペ作業をWinActorで自動化したい!
2.無料の生成AIチャットサービスについて
2.無料の生成AIチャットサービスについて 今回使用するサービスについて 無料・回数制限なしのアプリなのでいろんなプロンプトを試せる! ◆ 無料で生成回数など制限なしで利用可能。 ◆ 生成物は個人的用途、商業的用途を問わず利用可能。 ◆ 日本語向けに最適化されている。 ◆
用途別にカスタマイズされた生成ツールが多数用意 されており、プロンプトを試行錯誤しなくても意図 した文章を得られる。 ◆ 今後以下の機能が追加される予定。 私だけの生成AIツールツールビルダー 画像も生成可能な便利なチャット 文書ファイルも認識するスマートチャット
3.どうやってUIを操作するか
3.どうやってUIを操作するか プロンプトをチャットに入力して生成されたコードブロックをコピー
4.実際にWinActorで自動化してみた
3.どうやってUIを操作するか 上図の手順で自動化したWinActorのシナリオの動画をご覧ください メモ帳からプロンプトをコピー 得られた記事をメモ帳へ上書き保存 プロンプト.txt
5.まとめ
まとめ ① WinActorで無料の生成AIチャットサービスを操作 • 意外とUI操作は可能だったがブラウザ操作関連の知識や代替の手段が必要だった • 無料かつ回数制限なしのサービスなので試行錯誤しやすかった • ただし「現段階」の話なので利用規約が変わり有料になることも考慮する必要がある ②
今回はAPIがないのでWinActorでUI操作を自動化 • APIがなくてもUI操作で自動化は可能 • アプリがどこまで自動化の操作ができるかWinActorで探る必要がある • APIでしか実現できないこともあるので今回の方法がベストでない場合もある ③ プロンプトで指定しても想定外の回答が出ることもある • そもそも生成AIでの回答が正しいとは限らない • プロンプトでコントロールできる部分は書き方の基本と試行錯誤が必要 • 今回のブログ記事も「たたき台」として生成しあとで自分で内容を精査する
More Decks by たまい
See All by たまい
シナリオを作る前に行うべきこと2点
tamai_63
0
380
自治体×RPAの世界、のぞいてみませんか?
tamai_63
0
370
自治体業務における RPA活用のリアル
tamai_63
0
110
WinActor_バージョンアップや環境変化への注意点
tamai_63
0
640
WinActor ver7.6.0 新機能紹介
tamai_63
0
840
業務ヒアリングと知識の呪い
tamai_63
0
790
どこよりも遅めなWinActor Ver.7.5.0 新機能紹介
tamai_63
0
1.2k
今のうちにデータを整理しておこう
tamai_63
1
1.2k
技術サポートでよく見かけるパターンと便利な活用方法
tamai_63
0
960
Other Decks in Technology
See All in Technology
20261113_JAWS_Osaka
takuyay0ne
1
590
アラートを見直していたら営業組織への理解にちょっとだけ繋がった話
z63d
1
210
ぼくのClaude Codeの使い方
falken
PRO
5
7.6k
市販IoT機器や自作IoT機器とHomeAssistantを駆使して家の電気代をできる限り見える化する方法の考案
harutiro
0
390
マネージャーをエスパーにしない マネジメントされる側から始める、働きやすい現場づくり
comi190327
1
810
個人ASを取得して、自宅Kubernetes上のVMをグローバルIPで公開した話
munenick
0
210
SREのためのFinOps入門
muziyoshiz
3
1.7k
Terraform 0 to 100:100個以上のリポジトリを常に最新にし続けるための自動化
sue445
2
890
その修正で本当に速くなったのか? k6とOpenTelemetryで確かめる性能改善 / Performance review with k6 and OpenTelemetry
ymotongpoo
3
310
gem install とrequire のむこうがわ
ydah
0
240
Amazon Bedrock AgentCore の基礎とセキュリティ・ガバナンス
ren8k
0
190
Why start a new company, on Rails and AI, today. SF Ruby Conf 2026, Irina Nazarova
irinanazarova
0
180
Featured
See All Featured
Hiding What from Whom? A Critical Review of the History of Programming languages for Music
tomoyanonymous
3
1.5k
職位にかかわらず全員がリーダーシップを発揮するチーム作り / Building a team where everyone can demonstrate leadership regardless of position
madoxten
70
69k
Lessons Learnt from Crawling 1000+ Websites
charlesmeaden
PRO
1
1.8k
Organizational Design Perspectives: An Ontology of Organizational Design Elements
kimpetersen
PRO
1
880
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4.6k
Bootstrapping a Software Product
garrettdimon
PRO
306
120k
コードの90%をAIが書く世界で何が待っているのか / What awaits us in a world where 90% of the code is written by AI
rkaga
63
48k
The Pragmatic Product Professional
lauravandoore
37
7.5k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
194
17k
YesSQL, Process and Tooling at Scale
rocio
174
15k
The Spectacular Lies of Maps
axbom
PRO
1
1.1k
Building the Perfect Custom Keyboard
takai
2
960