Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
テスト自動化プラットフォーム「Autify」におけるAI
Search
Autify
September 15, 2023
Technology
0
1.2k
テスト自動化プラットフォーム「Autify」におけるAI
Tech Street主催 テスト自動化の先駆者3社が集結!今後の自動化の方向性
におけるAutifyによる発表
Autify
September 15, 2023
Tweet
Share
More Decks by Autify
See All by Autify
オーティファイ会社紹介資料 / Autify Company Deck
autifyhq
8
100k
Autify Company Deck
autifyhq
1
31k
テスト自動化プラットフォームAutifyはどのようにAutify自身を自動テストしているか
autifyhq
0
1.8k
テスト自動化から、 開発を支える継続的テストへ
autifyhq
26
11k
AWSコスト削減事例祭り
autifyhq
1
2.9k
Autifyの海外進出で得た世界のQA事情
autifyhq
0
630
JaSST'22 Tokyo 未来の開発組織でQAが担う役割とは
autifyhq
0
540
AgilityとQualityを両立し競争力を高めるプロダクト開発手法
autifyhq
7
2.2k
開発者目線からユーザ目線へ / DX from a user standpoint
autifyhq
1
1.7k
Other Decks in Technology
See All in Technology
ゼロから始めるVue.jsコミュニティ貢献 / first-vuejs-community-contribution-link-and-motivation
lmi
1
150
「見せ球」「作って終わり」のLLM機能卒業のために
ryokaneoka0406
0
140
実例で紹介するRAG導入時の知見と精度向上の勘所
yamahiro
7
2.1k
エンジニア候補者向け資料2024.04.24.pdf
macloud
0
3.4k
データベース03: 関係データモデル
trycycle
0
110
MixIT 2024 - Pulumi : Gérer son infra avec son langage de programmation préféré
ju_hnny5
1
120
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Musicを例に~
otanet
0
320
IaCジェネレーターとBedrockで詳細設計書を生成してみた
tsukasa_ishimaru
4
940
KubeConにproposalを送りたい人へのアドバイス
sat
PRO
3
280
Building Dashboards as a Hobby
egmc
0
410
チームでロジカルシンキングに改めて向き合っている話 〜学習環境と実践⽅法〜
sansantech
PRO
3
3.3k
プロンプトエンジニアリングでがんばらない-Agentic Workflow へ-近藤憲児
kenjikondobai
6
1.3k
Featured
See All Featured
Git: the NoSQL Database
bkeepers
PRO
423
63k
The Cult of Friendly URLs
andyhume
74
5.7k
Reflections from 52 weeks, 52 projects
jeffersonlam
345
19k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
21
1.9k
Designing on Purpose - Digital PM Summit 2013
jponch
111
6.5k
Automating Front-end Workflow
addyosmani
1357
200k
ParisWeb 2013: Learning to Love: Crash Course in Emotional UX Design
dotmariusz
104
6.6k
Large-scale JavaScript Application Architecture
addyosmani
504
110k
The Brand Is Dead. Long Live the Brand.
mthomps
49
29k
Into the Great Unknown - MozCon
thekraken
15
1k
Building Effective Engineering Teams - LeadDev
addyosmani
32
1.9k
What's in a price? How to price your products and services
michaelherold
238
11k
Transcript
テスト自動化プラットフォーム「Autify」におけるAI Sep. 12, 2023 Autify 松浦隼人
概要 沿革 80名
https://autify.com/ja
Autify for Webデモ Youtubeのデモビデオをご覧いただくか デモリクエストをお申し込みください! https://www.youtube.com/watch?v=03u34_qo8LY https://autify.com/ja/
https://autify.com/ja/mobile
テスト自動化の利点・欠点おさらい
テスト自動化の必要性・利点 • 複雑化するアプリケーション → 手動ではカバーしきれない • 改善スピードを上げる必要性 → リリース頻度・テスト頻度を上げる必要性 •
同じテストの繰り返し増 → 自動化による手動工数削減
テスト自動化の問題点 • 手動テストとは違った スキルが必要 ◦ テストコードを書く
テスト自動化の問題点 • 自動化ならではの問題 ◦ 人間なら自然に回避できる問題を明示的に回避する必要がある ▪ 例 : 時差をつけて現れる要素をクリックする ▪
例 : 要素の情報(idやclassなど)が動的に変わる
テスト自動化の問題点 • 作成した自動テストのメンテナンスコスト ◦ テスト対象が変わった時のシナリオのアップデート
AIを使ったテスト自動化 : 問題点を解決・緩和 • 手動テストとは違ったスキルが必要 ◦ コードを(ほとんど)書かなくてもOK • 自動化ならではの問題 ◦
AIがサポート • 作成した自動テストのメンテナンスコスト ◦ AIがサポート
AutifyにおけるAI
AutifyにおけるAI • 変化した要素の探索 ◦ 主にHTMLを使用 ◦ 要素の特徴情報から、変化した要素を高精度で特定 ▪ 人間はそれが正しいかチェックするだけ ▪
テストシナリオのメンテナンスが短時間で容易に
AutifyにおけるAI • ビジュアルリグレッションテスト ◦ テスト実行時のスクリーンショットを比較して差分を検出 ◦ 画面全体だけでなく要素単位でも比較可能
AutifyにおけるAI • 画像情報を用いた要素の特定、 変化した要素の探索 ◦ モバイルアプリのテストの問題 ▪ 構造化された要素情報がない(乏しい) ▪ 画像情報に依存する必要
◦ 画像情報を元に、指定した要素を AIが抽出・特定 ◦ 同様に画像情報を元に、変化があった 要素を探索
AutifyにおけるAI • これまでは主にテスト作成と実行 ◦ テスト戦略、設計などの上流工程は引き続き経験と知識が必要 1. 要件分析 2. テスト計画の作成 3.
テストケースの開発 4. テスト環境の作成 5. テストの実行 6. テストサイクルの完結 Autifyがサポート
AutifyにおけるAI • これまでは主にテスト作成と実行 ◦ テスト戦略、設計などの上流工程は引き続き経験と知識が必要 1. 要件分析 2. テスト計画の作成 3.
テストケースの開発 4. テスト環境の作成 5. テストの実行 6. テストサイクルの完結 Autifyがサポート
AutifyにおけるさらなるAIの活用 • Autify AI Labs ◦ https://autify.com/ja/ai-labs • さらに進んだ利用 :
シナリオの作成支援 ◦ テストステップごとの提案 (Autify Step Suggestions) ▪ レコーディング時、ステップごとに何をテストすべきか提案 ▪ 従うだけでテストシナリオが作成できる
Step Suggestionsデモ Youtubeのデモビデオをご覧ください https://www.youtube.com/watch?v=6QlORqpfAVY
まとめ • テスト、品質保証は人の目が大事、職人芸 • AIを使えばその一部を代替できる ◦ テスト実行部分への適用 ◦ さらにテスト自動化をスムーズにする分野へ •
人間はテスト設計など、より高度な仕事を
Autify for Web Autify for Web デモリクエスト/トライアルリクエスト受付中 デモ トライアル
None