Upgrade to Pro — share decks privately, control downloads, hide ads and more …

自動テストの世界に、この5年間で起きたこと

Autify
February 13, 2025

 自動テストの世界に、この5年間で起きたこと

自動テストの世界に、この5年間で起きたこと
2025/02/13 Developer Summit 2025
Quality Evangelist 末村拓也による発表

Autify

February 13, 2025

Transcript

44 slides
  1. タイトルタイトルタイトルタイトルタ イトルタイトルタイトル 小見出し小見出し小見出し小見出し 末村 拓也 (Takuya Suemura) Autify, Inc. (2019

    -) Quality Evangelist • Ex. QA Manager • Ex. Senior Technical Support Engineer • Ex. Test Automation Engineer OPENLOGI (2017 - 2019) QA Engineer それより前はPHP開発をしていたり 倉庫でフォークリフトに載ったりしていました ソフトウェア品質や自動テストのあるべき姿を 業界の皆さんと一緒に考えるのが仕事です
  2. • 当時は id や class などの内部構造を要素探索のキーにするのが一般的 • テストコードを書くたびにDevToolsと格闘 • リーダビリティ上も問題があった

    当時の課題感 (1) テストコードの作成 ぼくのかんがえたさいきょうのE2Eフレームワーク with CodeceptJS
  3. Autify Recorderで記録した要素のメタ情報を元に DOM上の「一番近い要素」を探索 ソリューション (2) メンテナンス AI メタ情報の例 • タグ名

    • アクセシブルロール • id や class などの属性 • 文言 • 親要素や兄弟要素 • 要素の座標 • 絶対パス
  4. 色々なところに互換性バグの種があった • Webサイトとブラウザの互換性(←見つけたいやつ) • WebサイトとWebDriverの互換性 • ブラウザとWebDriverの互換性 • 自動化コードとWebDriverの互換性 •

    WebDriver自体のバグ 自分のプロダクトの自動テストをしたいのに 自動テストフレームワークのデバッグからはじめないといけない E2E自動テストは本質的に複雑
  5. Webサイト <> Selenium/Appium間で発生する ありとあらゆるエッジケースを踏み抜いたものたちだ、面構えが違う • deprecatedのCSSスタイル zoom を使うとクリック位置がおかしくなる • 古いバージョンの

    prototype.js は Array.reduce() などの prototypeを書き換えておりSeleniumを壊す • AMPのサイトは HTMLElement を上書きしており、 instanceof HTMLElement が期待した値を返さない • Appiumの nativeWebTap を有効にした状態で JSの scrollTo() でスクロールされる とタップ位置がズレる 余談)Autifyのテクニカルサポート
  6. ソリューション (3) Out of the box Autifyクラウド(エミュレーター環境) Autify実機環境(Device Farm) Windows

    10.11 macOS 80種類を超える端末から 自由選択 Edge/Windows server Chrome/Linux Chrome / iOS,Android 「箱から出してすぐ」並列実行やクロスブラウザテストができる • Autifyがホストしているクラウド環境は並列実行向き • デバイスファーム上でクロスデバイス・クロスブラウザテストが可能
  7. • フロントエンドエコシステムとの統合 • リッチなデバッグ体験 • CI/CDパイプラインへの組み込みが楽になった ◦ 同時期に登場した GitHub Actions

    / CircleCI Orb などが後押しした • クロスブラウザ環境構築が楽に 新たなツール群はテストのハードルを下げた
  8. • テストはテスト対象のふるまいに依存すべきである • E2Eテストは技術的制約から内部構造に依存しがちであった ◦ ID, class, タグ名など • Testing

    Libraryの登場と共に 文字列、セマンティクス、 alt-textなど アクセシブルな属性をロケーターに使う考え方が普及した アクセシビリティベースのロケーター Testing Library page.getByRole('button', { name: '送信' }); page.locator('input[type="button"]');
  9. 何でも相談に乗ってくれる Testing Baby 自動化関係ない、Autify関係ないことでもOK テストとDevOpsのスペシャリストとして 何でも相談に乗ります • 自社の開発プロセスについて第三者の目線から意見を聞 きたい •

    理想の自動テストのあり方についてエンジニアたちとざっく ばらんに意見交換してほしい • 講演しにきてほしい • サインほしい 詳しくはAutifyブース or 懇親会でつかまえてください

More Decks by Autify

Other Decks in Technology