AI Lightning Talk · 2026.11
ブラウザの
コンソールに
貼るだけ
Claude Code で作ったスクリプトで回した、
2つのサイトの受け入れテスト
About Me
自己紹介
吉田 勝大
Yoshida Katsuhiro
株式会社ヤエノワ
代表取締役
- ECサイトと他システムの連携の、要件定義・設計を担当
- 業務システムやECサイトの運用・保守を担当
- 基幹システムとEC・OMSの連携設計が専門(SAP連携など)
- 2025年4月にヤエノワを設立。要件定義・設計を軸に、生成AI活用・アプリ開発まで
要件定義システム設計基幹システム連携EC・OMSPM生成AIShopify生成AIパスポート
yaenowa.co.jp
Basics
そもそも自動テストとは
専用のツールでテストを自動で流し、実際の結果を期待結果と比べること
静的テスト
動かさずに確かめる
ソフトウェアを実行しないテスト。レビューや静的解析
動的テスト
動かして確かめる
ソフトウェアを実行して確かめるテスト。画面を操作するテストもここに入る
今日の話は、画面を動かして確かめるテストを、自動で流す話です
JSTQB Foundation Level シラバス(2023V4.0.J02)1.1、テスト自動化エンジニア シラバス(v2.0.J01)1.1.1(2026-11-13確認)
00 · Without AI
AIを使わずにテストを作って動かすサービス
人力
人が作って、人が流す
人がテストシナリオを作って、人が目で見て、手で実行する
テスト自動化ツール
人が作って、ツールが流す
人が画面の操作を記録して、ツールが何度でも流す
金額を1日あたりで比べると
マウスを乗せると出ます
人力(外部に委託する場合)
約3.2万〜18万円
1日(8時間)あたり
テスト自動化ツール
約170〜250円
月 約5千円〜を1日あたりに直したもの
各社の公式サイト(2026-11-13確認)。料金は税抜か税表記なし。人力は外部委託(テスター10とSHIFTのUIテスト)、ツールはT-DASHの年払いを月額にし、30日〜20日で割ったもの
01 · With AI
AIでテストを作って動かすサービス
仕様から作る
テストケースをAIが作る
仕様書や要件から、テストの観点とケースを作る。例:Autify Genesis、Katalon
文章で頼む
指示からテストを作って流す
日本語や文章の指示で、テストを作ってブラウザを動かす。例:MagicPod、QA Wolf
自動で直す
壊れたテストをAIが直す
画面が変わったときに直し、失敗の原因も調べる。例:mabl、BrowserStack
受け入れテスト
判定と記録まで受け持つ
設計書からテストケース、実行、合否判定、不具合の記録まで。例:AGEST の TFACT
金額を1日あたりで比べると
マウスを乗せると出ます
仕様から作る
約360〜640円
Katalon TestOps 1シート 月 約1.1万〜1.3万円
文章で頼む
約1,300〜2,700円
MagicPod 月 約4万〜5.5万円。QA Wolf は1回 約160円〜
自動で直す
約530〜2,200円
BrowserStack 月 約1.6万〜4.4万円。mabl は見積
受け入れテスト
約70〜100円
TFACT 1シート 月2,000円+AIの従量
各社の公式サイト(2026-11-13確認)。税抜か税表記なし、1ドル=159.91円(三菱UFJ銀行 TTM)で換算。1日あたりは、月額を30日〜20日で割ったもの
02 · Project 1/2
案件1 業務システムの改修
範囲
修正箇所と回帰テスト
修正した箇所を確かめ、既存機能に影響がないかも回帰テストで確かめる
通常のやり方
人力で、画面から回す
テストケースを作り、画面からの操作だけで対象データを選んで確かめる
通常は、人が次の流れを1ケースずつ回します
テストケース作成
対象データの選定画面から
修正箇所の確認商品を選んで
発注の確認
回帰テスト既存機能
02 · Project 2/2
案件2 Webサイトの新商品
範囲
新商品の全バリエーション
商品ごとに、選択肢の組み合わせを手順に沿って確かめる
バリエーション
商品ごとの選択肢
選択肢を選び、ON/OFFができるかなどを確かめる
通常はこちらも人力で、次の流れを全商品で通して確かめます
商品の選択バリエーション
数量選択
注文確定
受付と確定管理側
出力データ作成
03 · How It Works
AIが書いて、人が貼って、AIが確かめる
1 書くClaude Code
2 貼って流す人
3 結果をJSONで出すスクリプト
4 読んで判定Claude Code
5 記録・共有チェックシート
人
コンソールに貼って流す
ほかのサードパーティのツールは、導入するまでのプロセスが難しいため
Claude Code
読んで判定し、記録する
結果のJSONを読み、OK/NGをチェックシートに記録する
NGのとき
原因と再現性も残す
期待値と実際の結果、考えられる原因、ほかのバリエーションでの再現性を記録し、開発チームと共有する
04 · Steps
仕様書からチェックシートまでの手順
準備
1 テスト仕様書
をつくるAI
2 テスト
シナリオを作る人がプロンプトに
3 商品データを
ダウンロード付随するデータも
4 テストデータ
を選定AI
5 スクリプト
を作成Claude Code
実行と記録
6 ブラウザで実行人
7 実行結果を検証JSONのログを Claude Code が
8 チェックシートに
OK/NGを記入Claude Code
9 指摘点を
チェックシートに記入Claude Code
人がやるのは、最初にシナリオを打ち込むことと、ブラウザで流すこと
05 · Agents
4つのエージェントを紹介します
test-run-planner · 読むだけ
実行計画係
次にどのスクリプトを、どのアカウント・設定で流すかを決め、いまの進み具合を伝える
test-script-builder · 流さない
スクリプト作成係
画面の帯や保存先の確認など、決めた作りを守ってスクリプトを作り、直す
test-result-recorder · 許可制
結果記録係
OK・NG・要確認・保留を判定してシートに記録する。書き込むのは「書き込んでよい」と言われたときだけ
spec-finder · 読むだけ
仕様調査係
仕様書や経緯の記録を横断して調べ、ファイル・シート・セルの根拠つきで返す
両方の案件で使った4つ。役割と権限を分け、シートに書けるのは結果記録係だけにした
06 · Stop 1/2
想定と違えば、押さずに止まる
前提の確認 · 共通
違えば発注しない
開始前に実行環境・カート・アカウントを確かめ、どれか一つでも違えば実行しない
金額と番号 · 共通
合わなければ押さない
金額をその場で計算して違えば止まり、注文番号が予想とずれたら押さずに止まる
二重注文の防止 · 共通
「済み」を記録する
流し終えた注文をブラウザに記録し、同じ注文を二度流さない
実行中も、想定外のエラーや期待どおりのボタンが無いときは、その場の画面の情報を取って止まる
06 · Stop 2/2
案件1のスクリプトに入れた7つの型
- 実行中のスクリプト名と進み具合を、画面の上に出す
- Wake Lock で、実行中に画面をスリープさせない
- 開始前にカートが空かを確かめ、1ケースごとに空に戻す
- アカウントが違えば、発注しない
- 商品は、流すときに在庫などを読んで選ぶ
- 発注した直後に、画面からキャンセルして在庫を戻す
- 結果は文字で残す(画像は撮らない)
どのスクリプトにも同じ形で入れた共通の作り
07 · Remember
ルールと訂正を、次の会話に残す
CLAUDE.md · 案件1
全セッションのルール
例:流してもらう前に毎回、ファイル名・設定・アカウント・注意を伝える
メモリ · 両方
決めたことと訂正を残す
例:判断できない結果は「要確認」にする
根拠 · 案件2
OKの理由を書く
どのログ・どのPDFで確かめたか、または「担当判断」かを備考に
案件2では、途中から伝えた「いちいち確認しなくていい」も、メモリに残した
08 · Results
回帰テストなど決まった手順が、圧倒的に速くなった
どちらの案件でも同じでした。3つの数字は案件2のものです
- 案件2では、照合用のExcel 約1万2千行を全件照合し、差がないことを確かめた
- 案件1では、スクリプト約15本。1本をコピーして作り替えた
- テストデータの選定と回帰テストが楽になり、前回との差も見分けられる
09 · Compared
似たサービスとの違い
組み合わせないとまかなえず、1日約1,750〜3,500円。Claude(Ultra)は約1,070〜1,600円
前工程
仕様書とテストデータから作る
多くは仕様や要件を受け取るところから。こちらはテストデータもAIが組み合わせや網羅性を見て選ぶ
テスト環境への入り方
お客様の環境に何も入れない
多くはトンネルや固定IPの許可、PCへの導入が要る。こちらはログイン済みのブラウザに貼るだけ
記録先
お客様のチェックシートに書く
多くは自社の管理画面や課題管理に結果を持つ。こちらはお客様のExcelやスプレッドシートに直接
弱いところ
繰り返しの自動化はツールが上
画面が変わったときの自動修復や、回帰テストを定期的に回す仕組みは、ツールのほうが整っている
まとめると、柔軟に作れて、お客様の環境に何も足さずに始められる
組み合わせ=Katalon TestOps+MagicPod+TFACT(AIの従量は別)。公式サイト(2026-11-13確認)、1ドル=159.91円、1日=月額÷30〜20日
10 · Limits
このテストで確かめられないこと
見た目
レイアウトや色は確かめられない
結果は文字で残し、画像は撮らない(案件1)。
見た目で決めるところは人が判断した(案件2)
画面の裏側
データベースは見られない
見られるのはテスト環境の画面だけ。データベースの中身は、直接は確かめられない(案件1)
無人の実行
決まった時刻に無人では流せない
流すのは人なので、人が貼らないと始まらない
本番の環境
流したのはテスト環境だけ
本番だけで起きることは、別のやり方で確かめる必要がある
画面や商品が変わると、スクリプトの直しも要る
11 · Other Uses
同じ型が使えそうな仕事
同じ手順を何度も流すか、期待する結果を文字で書けるか。この2つで見分けられると思います
今回に近い
リリースごとの回帰テスト
同じ手順と期待結果を流し直す。直った不具合の確認にも使える
今回に近い
帳票と出力の検算
注文の金額をその場で計算し直し、注文書やデータと突き合わせる
使えそう
移行後のデータ照合
移行先の管理画面を読み、移行元のデータと突き合わせる。読むだけで済む
使えそう
受注システムと基幹の突き合わせ
受注番号をキーに両方の画面やCSVを読み、件数と中身を合わせる
Takeaways
AIを使った自動テスト、超便利でした
01注文1件、10分以上が約30秒に
決まった手順の回帰テストが、圧倒的に速くなった(案件2)
02約1万2千行を全件照合して、差はゼロ
照合用のExcelを、全件で照合できた(案件2)
031日あたり約1,070〜1,600円
Claude の Ultra プラン。サービスを組み合わせると約1,750〜3,500円かかる
Message
大事だったのは、
自動化よりも
止まる・残す・照合する
仕組みでした。