正解がないシステムをテストする @ JaSST'22 Kansai / Testing Oracle-less AI & Cyber-Physical Systems

JaSST'22 Kansai （ソフトウェアテストシンポジウム）での講演資料です。
「正解がないシステムをテストする」

自動運転や教育推薦、ゲームなど産学連携でのテスト研究事例と、
機械学習型システムのテストの話を概観しています。

Transcript

2. ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼
3. ◼ ◼ ◼ ◼ ◼ ◼ ◼
5. ◼ ◼ ◼ ◼ ◼ ◼
6. ◼ ◼ ◼ ◼ ◼
8. ◼ ◼
9. ◼ ◼
10. ◼ ◼
11. ◼ ◼
12. ◼ ◼ ◼ ◼ ◼ ◼ ◼
13. ◼ ◼ ◼ ◼ ◼
14. ◼ ◼ ◼ ◼ ◼
15. ◼ ◼ ◼
16. ◼ ◼ ◼
17. ◼
18. ◼ ◼ ◼ ◼
19. ◼ ◼ ◼ ◼ ◼ ◼
20. ◼ ◼ ◼ ◼ ◼
21. ◼ ◼ ◼ ◼ ◼ ◼
24. ◼ ◼ 𝑦 = 𝑎𝑥 + 𝑏 𝑎, 𝑏 ◼ ◼ ◼
26. ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼
27. ◼ ◼ = 𝑇𝑃 + 𝑇𝑁 𝑇𝑃 + 𝐹𝑃 + 𝐹𝑁 + 𝑇𝑁 = 465 500 = 0.93
28. ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼
29. ◼ ◼ ◼ ◼
30. ◼ ◼
31. ◼ ◼
32. ◼ ◼ ◼ ◼ ◼ ◼
33. ◼ ◼ ◼ ◼ ◼ ◼
34. ◼ ◼ ◼ ◼ ◼ ◼ ◼ →
35. ◼ ◼ ◼
36. ◼ ◼ ◼ ◼ ◼
37. ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼
42. ◼ ◼ ◼ ◼ ◼
43. ◼ ◼ ◼
44. ◼ ◼ ◼ ◼ ◼ ◼
45. ◼
46. ◼
47. ◼
48. ◼ ◼ ◼
49. ◼
50. ◼ ◼ ◼
51. ◼
52. ◼ ◼ ◼
53. ◼ ◼ ◼ ◼
54. ◼ ◼
55. • •
56. ◼ ◼ ◼
58. ◼ ◼ ◼ ◼ ◼
59. ◼ ◼ ◼ ◼ ◼ ◼ ◼ ◼
60. ◼ ◼ ◼ ◼ ◼ ◼