Share
Embed
RWC2025 Ninja-testing with smart playlist
RWC2025
本日のおすすめテストの作り方
~忍者式テストのテスト抽出アルゴリズム~
seki at druby.org
November 07, 2025
Transcript
50 slides
-
ऀࣜςετ5%%ͷࣗવͳ֦ு ✦ ςετۦಈ։ൃʢ5%%ʣΛड͚ೖΕςετͷϨϕϧͰߦ͏ϓϥΫςΟε ✤ Y6OJUΛͬͨ5%%ͷΑ͏ʹɺड͚ೖΕςετ͔Β͡ΊΔ։ൃ ✤ ςετίʔυʹಋ͔ΕͯϓϩάϥϜΛ։ൃ͢ΔΑ͏ʹɺड͚ೖΕςετʹಋ͔ΕͯετʔϦʔΛ࣮ݱ͢Δ ✤ ετʔϦʔ͕૿͑ΔͨͼʹɺͦΕ·Ͱʹ࡞ͬͨͯ͢ͷετʔϦʔͷड͚ೖΕςετΛΓ͢ ऀ͕ຖ͢Δຑͷ্Λඈͼӽ͑Δमߦʹ༝དྷɻ໊લʮςετʯͰ͕͢ςετ͚ͩͰͳ͘ɺιϑτΣΞ։ൃશମͷ׆ಈͰ͢ɻ
➢ テスト駆動開発(TDD)を受け入れテストのレベルで行うプラクティス ⚫ xUnitを使ったTDDのように、受け入れテストからはじめる開発 ⚫ テストコードに導かれてプログラムを開発するように、受け入れテストに導かれてストー リーを実現する ⚫ ストーリーが増えるたびに、それまでに作ったすべてのストーリーの受け入れテストをやり 直す 忍者式テスト 11 September 2023 名前は「テスト」ですがテストだけでなく、ソフトウェア開発全体の活動です -
ʲਤղʳऀࣜςετ ࣮ࡍͷ։ൃͰΠςϨʔγϣϯͰෳͷετʔϦʔΛѻ͍ͬͯΔ 【図解】忍者式テスト 15 September 2023 実際の開発では1イテレーションで複数のストーリーを扱っている Day1 V1
Story1 Day2 V2 Day3 V3 Story2 Story3 -
͍ͨΜͳ͜ͱʹͳΓ·͢ ͰΔΜͩΑ たいへんなことになります Day n+1 Vn+1 Story n+1 Day
n+2 Vn+2 Day n+3 Vn+3 Story n+2 Story n+3 Day n Vn Day n+ Vn+4 Story n+4 -
ऀࣜςετͷςετΛ୳͢ςετ ιϑτΣΞͷςετͱͳʹ͔ ✦ ؾʹೖΒͳ͍͜ͱΛ୳ͯ͠ɺͬͱྑ͘͢ΔͨΊʹςετ͢Δ ✤ ͏·͍ͬͨ͘ςετɺͱ͍͏ͷ৽͍͠Λݟ͚ͭΒΕͨςετ ✤ ࣦഊͨ͠ςετɺͱ͍͏ͷͳʹ͕ݟ͔ͭΒͳ͔ͬͨςετ Λݟ͚ͭΔͨΊʹखಈͰςετ͠·͢ʂʂʢࣗಈςετͰΒͳ͍Λݟ͚ͭΔͷ͍͠ʣ
ΤϥʔΛൃݟ͢ΔతͰϓϩάϥϜΛ࣮ߦ͢Δաఔ͕ ςετͰ͋Δɽ ιϑτΣΞͷ৴པੑQ -
͍ͨΜͳ͜ͱʹͳΓ·͢ ͰΔΜͩΑ たいへんなことになります Day n+1 Vn+1 Story n+1 Day
n+2 Vn+2 Day n+3 Vn+3 Story n+2 Story n+3 Day n Vn Day n+ Vn+4 Story n+4 -
نͱ͖߹͏ ✦ ۙͷมߋૣ͔֬͘Ί͍ͨʗͯ͢ͷςετέʔεΛ͔֬Ί͍ͨ ✦ ҰͰͳ͘ɺ͋ΔظؒͰςετέʔεΛͯ͢ճ͢࡞ઓʹΓସ͑ͨ ✦ ·ΜΜͳ͘ɺ͔ͭɺޮՌͷߴ͍ςετέʔεΛநग़͢ΔΞϧΰϦζϜͷ։ൃ ✤ ৽͍͠ετʔϦʔɺमਖ਼͔ͨ͠ΓͷνέοτͷςετέʔεΛ࠷༏ઌ ✤
લճͷςετ݁Ռ͕ύεͨ͠ςετέʔεͷग़ݱසΛঃʑʹམͱ͢ ✤ ։ൃͷঢ়گʹԠͯ͡ػೳ͝ͱʹग़ݱසΛௐ ✤ ͋ΔظؒͰݟΔͱɺͯ͢ͷςετέʔε͕࣮ߦͰ͖Δ ✦ ΞϧΰϦζϜʹΑΓநग़ͨ͠ࠓͷςετεΠʔτˠʮຊͷ͓͢͢Ίςετʯ ✤ ҰʹͰ͖ͦ͏ͳྔͷςετέʔε͔͠දࣔ͠ͳ͍ʢྔʹѹ͞Εͳ͍Α͏ʹ͢Δʣ 👏ͬͱຊฤ͕͡·Γ·͢Αʂ -
毎日一回再生するプレイリスト 1日に同じ曲を何度も聴かない! 16 再生 するとリストから消えて、次の日に復活する 🕙 🕚 🕐 🕑
🕒 🕓 🕔 🕙 🕚 🕐 🕑 🕒 🕓 🕔 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 -
ある期間で全部再生するプレイリスト 一度聴いた曲はしばらく再生されなくていい感じ! 21
㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 㽈 再生したらしばらくお休み -
テストする頻度を調整する レートによって休ませる期間を増減します 25 テストごとに★レートを設定する ★★☆☆☆ 自然に毎日さわる機能 (例)起動終了とか ★☆☆☆☆ 準備が大変→頻繁にはやりたくない (例)ディスクフルの用意とか
★★★★★ なんとなくあやしいから毎日試したい そういう機能あるでしょ? -
実装 休ませるテストの判定をするメソッドと、それを呼ぶ並べ替えのふたつ 27 休ませるテストの判定 並べ替え def idle_period?(item) return false unless
item.last_result period = [300, 90, 28, 14, 7, 1].fetch(item.test_rate) item.last_date > Time.now - period * 24 * 60 *60 end ... list.delete_if { |item| idle_period?(item) }.sort_by { |item| [item.last_result ? 1 : 0, item.last_date, item.name] }.first(25) -
休ませるテストの判定 trueだと休みだよ 28 最後のテストが設定された期間より新しいものは休み 最後の結果がNGのものは休ませない def idle_period?(item) return false unless
item.last_result period = [300, 90, 28, 14, 7, 1].fetch(item.test_rate) item.last_date > Time.now - period * 24 * 60 *60 end -
休ませるテストの判定 trueだと休みだよ 29 最後のテストが設定された期間より新しいものは休み 最後の結果がNGのものは休ませない def idle_period?(item) return false unless
item.last_result period = [300, 90, 28, 14, 7, 1].fetch(item.test_rate) item.last_date > Time.now - period * 24 * 60 *60 end -
並べ替え 30 休ませるテストを取り除く 最後のテストの実施が古い順に並べてN件選ぶ list.delete_if { |item| idle_period?(item) }.sort_by {
|item| [item.last_result ? 1 : 0, item.last_date, item.name] }.first(25) -
並べ替え 31 休ませるテストを取り除く 最後のテストの実施が古い順に並べてN件選ぶ list.delete_if { |item| idle_period?(item) }.sort_by {
|item| [item.last_result ? 1 : 0, item.last_date, item.name] }.first(25) -
並べ替え 32 休ませるテストを取り除く 最後のテストの実施が古い順に並べてN件選ぶ list.delete_if { |item| idle_period?(item) }.sort_by {
|item| [item.last_result ? 1 : 0, # 最後の結果がNGを優先 item.last_date, # 最後の実施日が古いものを優先 item.name] # 安定ソートのために名前順 }.first(25) -
完成! テストケースごとの結果の履歴は各自準備してください!レートや分類のタグ付けはオプションだよ 33 あなたのチケットシステムに組み込もう! def idle_period?(item) return false unless item.last_result
period = [300, 90, 28, 14, 7, 1].fetch(item.test_rate) item.last_date > Time.now - period * 24 * 60 *60 end ... list.delete_if { |item| idle_period?(item) }.sort_by { |item| [item.last_result ? 1 : 0, item.last_date, item.name] }.first(25) -
テストスイート生成ツールの抜粋 ツールはRWikiと別のプロセスだよ 41 index = rwiki['test-v1'] # タグのページを取得 list =
index.rev_links.map {|name| # 逆リンクでmap rwiki[name].prop(:story) # propを集める } # さっき説明した選択と並び替え処理 rwiki['sorted-test-v1'].src = rd # テストスイートの # ページを作成 -
RWikiのObjectを外から使う 青いところがRWikiのObjectへの参照、赤いところがRMI 42 dRubyがちゃんと実用になっててすごい! RWiki ツール index = rwiki['test-v1'] #
タグのページを取得 list = index.rev_links.map {|name| # 逆リンクでmap rwiki[name].prop(:story) # propを集める } # さっき説明した選択と並び替え処理 rwiki['sorted-test-v1'].src = rd # テストスイートの # ページを作成 -
ςετ࣮ࢪͷهʢʣ /(ͷΑ͘ݟ͑ΔΑ͏ʹڧௐ͍ͯ͠·͢ テスト実施の記録(20年分) 57 営業日 チケット番号 September 2023 NGの点はよく見えるように強調しています
0,ςετέʔεͱͦͷपลΛ୳ࡧ͕ͯ͠ݟ͔ͭΒͳ͔ͬͨͷ /(ςετέʔε͕௨Βͳ͍͚ͩͰͳ͘ɺ༷௨Γ͚ͩͲ͍ͮΒ͍ɺ༷͕৽ ͍༷͠ʹΑ্ͬͯॻ͖͞Εͯ͠·ͬͨɺख৮ΓʢͪΒ͖ͭɺΘ͔ͣͳԆʣʹ ҧײ͕͋ΔͳͲɺؾʹೖΒͳ͍ͷશ͕ͯ/(ɻڱٛͷόάগͳ͍ -
ςετ࣮ࢪͷهʢʣ ʢΞϧΰϦζϜͱผʹɺऑ͍෦νέοτՃ͞ΕΔͷͰࣗવͱςετέʔεް͘ͳΔʣ テスト実施の記録(20年分) 57 営業日 チケット番号 September 2023 NGの点はよく見えるように強調しています
৽͍͠ɾमਖ਼͔ͨ͠ΓͷνέοτͷςετέʔεΛ࠷༏ઌ ͜ͷΑ͏ͳνέοτ৽ͨͳ͕ൃݟ͞Εࠩ͠͞ΕΔ͜ͱ͕ଟ͍ ։ൃதʹٞΛਚͯ͘͠ɺຊΛ৮Δ͜ͱͰͬͱΑ͍༷ʹؾ͍ͮͯ͠ ·͏ -
ςετ࣮ࢪͷهʢʣ テスト実施の記録(20年分) 57 営業日 チケット番号 September 2023 NGの点はよく見えるように強調しています ͜ͷۭനଳ࣍ੈͷʹγϑτͨ࣌͠ظ
ࣄۀܭըʹैͬͯςετͷྗΛௐͨ͠ ͦͷޙɺঃʑʹ·ΜΜͳ͘ςετ͢ΔΑ͏ʹճ෮