AI Lightning Talk · 2026.11

ブラウザの
コンソールに
貼るだけ

Claude Code で作ったスクリプトで回した、
2つのサイトの受け入れテスト

ヤエノワロゴ
株式会社ヤエノワ 代表取締役
吉田 勝大
About Me

自己紹介

ヤエノワロゴ
吉田 勝大
Yoshida Katsuhiro
株式会社ヤエノワ
代表取締役
  • ECサイトと他システムの連携の、要件定義・設計を担当
  • 業務システムやECサイトの運用・保守を担当
  • 基幹システムとEC・OMSの連携設計が専門(SAP連携など)
  • 2025年4月にヤエノワを設立。要件定義・設計を軸に、生成AI活用・アプリ開発まで
要件定義システム設計基幹システム連携EC・OMSPM生成AIShopify生成AIパスポート

yaenowa.co.jp

Basics

そもそも自動テストとは

専用のツールでテストを自動で流し、実際の結果を期待結果と比べること

静的テスト

動かさずに確かめる

ソフトウェアを実行しないテスト。レビューや静的解析

動的テスト

動かして確かめる

ソフトウェアを実行して確かめるテスト。画面を操作するテストもここに入る

今日の話は、画面を動かして確かめるテストを、自動で流す話です

JSTQB Foundation Level シラバス(2023V4.0.J02)1.1、テスト自動化エンジニア シラバス(v2.0.J01)1.1.1(2026-11-13確認)

00 · Without AI

AIを使わずにテストを作って動かすサービス

人力

人が作って、人が流す

人がテストシナリオを作って、人が目で見て、手で実行する

テスト自動化ツール

人が作って、ツールが流す

人が画面の操作を記録して、ツールが何度でも流す

金額を1日あたりで比べると

マウスを乗せると出ます
人力(外部に委託する場合)
約3.2万〜18万円
1日(8時間)あたり
テスト自動化ツール
約170〜250円
月 約5千円〜を1日あたりに直したもの

各社の公式サイト(2026-11-13確認)。料金は税抜か税表記なし。人力は外部委託(テスター10とSHIFTのUIテスト)、ツールはT-DASHの年払いを月額にし、30日〜20日で割ったもの

01 · With AI

AIでテストを作って動かすサービス

仕様から作る

テストケースをAIが作る

仕様書や要件から、テストの観点とケースを作る。例:Autify Genesis、Katalon

文章で頼む

指示からテストを作って流す

日本語や文章の指示で、テストを作ってブラウザを動かす。例:MagicPod、QA Wolf

自動で直す

壊れたテストをAIが直す

画面が変わったときに直し、失敗の原因も調べる。例:mabl、BrowserStack

受け入れテスト

判定と記録まで受け持つ

設計書からテストケース、実行、合否判定、不具合の記録まで。例:AGEST の TFACT

金額を1日あたりで比べると

マウスを乗せると出ます
仕様から作る
約360〜640円
Katalon TestOps 1シート 月 約1.1万〜1.3万円
文章で頼む
約1,300〜2,700円
MagicPod 月 約4万〜5.5万円。QA Wolf は1回 約160円〜
自動で直す
約530〜2,200円
BrowserStack 月 約1.6万〜4.4万円。mabl は見積
受け入れテスト
約70〜100円
TFACT 1シート 月2,000円+AIの従量

各社の公式サイト(2026-11-13確認)。税抜か税表記なし、1ドル=159.91円(三菱UFJ銀行 TTM)で換算。1日あたりは、月額を30日〜20日で割ったもの

02 · Project 1/2

案件1 業務システムの改修

範囲

修正箇所と回帰テスト

修正した箇所を確かめ、既存機能に影響がないかも回帰テストで確かめる

通常のやり方

人力で、画面から回す

テストケースを作り、画面からの操作だけで対象データを選んで確かめる

通常は、人が次の流れを1ケースずつ回します

テストケース作成
対象データの選定画面から
修正箇所の確認商品を選んで
発注の確認
回帰テスト既存機能
02 · Project 2/2

案件2 Webサイトの新商品

範囲

新商品の全バリエーション

商品ごとに、選択肢の組み合わせを手順に沿って確かめる

バリエーション

商品ごとの選択肢

選択肢を選び、ON/OFFができるかなどを確かめる

通常はこちらも人力で、次の流れを全商品で通して確かめます

商品の選択バリエーション
数量選択
注文確定
受付と確定管理側
出力データ作成
03 · How It Works

AIが書いて、人が貼って、AIが確かめる

1 書くClaude Code
2 貼って流す人
3 結果をJSONで出すスクリプト
4 読んで判定Claude Code
5 記録・共有チェックシート
人

コンソールに貼って流す

ほかのサードパーティのツールは、導入するまでのプロセスが難しいため

Claude Code

読んで判定し、記録する

結果のJSONを読み、OK/NGをチェックシートに記録する

NGのとき

原因と再現性も残す

期待値と実際の結果、考えられる原因、ほかのバリエーションでの再現性を記録し、開発チームと共有する

04 · Steps

仕様書からチェックシートまでの手順

準備

1 テスト仕様書
をつくるAI
2 テスト
シナリオを作る人がプロンプトに
3 商品データを
ダウンロード付随するデータも
4 テストデータ
を選定AI
5 スクリプト
を作成Claude Code

実行と記録

6 ブラウザで実行人
7 実行結果を検証JSONのログを Claude Code が
8 チェックシートに
OK/NGを記入Claude Code
9 指摘点を
チェックシートに記入Claude Code

人がやるのは、最初にシナリオを打ち込むことと、ブラウザで流すこと

05 · Agents

4つのエージェントを紹介します

test-run-planner · 読むだけ

実行計画係

次にどのスクリプトを、どのアカウント・設定で流すかを決め、いまの進み具合を伝える

test-script-builder · 流さない

スクリプト作成係

画面の帯や保存先の確認など、決めた作りを守ってスクリプトを作り、直す

test-result-recorder · 許可制

結果記録係

OK・NG・要確認・保留を判定してシートに記録する。書き込むのは「書き込んでよい」と言われたときだけ

spec-finder · 読むだけ

仕様調査係

仕様書や経緯の記録を横断して調べ、ファイル・シート・セルの根拠つきで返す

両方の案件で使った4つ。役割と権限を分け、シートに書けるのは結果記録係だけにした

06 · Stop 1/2

想定と違えば、押さずに止まる

前提の確認 · 共通

違えば発注しない

開始前に実行環境・カート・アカウントを確かめ、どれか一つでも違えば実行しない

金額と番号 · 共通

合わなければ押さない

金額をその場で計算して違えば止まり、注文番号が予想とずれたら押さずに止まる

二重注文の防止 · 共通

「済み」を記録する

流し終えた注文をブラウザに記録し、同じ注文を二度流さない

実行中も、想定外のエラーや期待どおりのボタンが無いときは、その場の画面の情報を取って止まる

06 · Stop 2/2

案件1のスクリプトに入れた7つの型

  1. 実行中のスクリプト名と進み具合を、画面の上に出す
  2. Wake Lock で、実行中に画面をスリープさせない
  3. 開始前にカートが空かを確かめ、1ケースごとに空に戻す
  4. アカウントが違えば、発注しない
  5. 商品は、流すときに在庫などを読んで選ぶ
  6. 発注した直後に、画面からキャンセルして在庫を戻す
  7. 結果は文字で残す(画像は撮らない)

どのスクリプトにも同じ形で入れた共通の作り

07 · Remember

ルールと訂正を、次の会話に残す

CLAUDE.md · 案件1

全セッションのルール

例:流してもらう前に毎回、ファイル名・設定・アカウント・注意を伝える

メモリ · 両方

決めたことと訂正を残す

例:判断できない結果は「要確認」にする

根拠 · 案件2

OKの理由を書く

どのログ・どのPDFで確かめたか、または「担当判断」かを備考に

案件2では、途中から伝えた「いちいち確認しなくていい」も、メモリに残した

08 · Results

回帰テストなど決まった手順が、圧倒的に速くなった

どちらの案件でも同じでした。3つの数字は案件2のものです

約30秒
注文1件(手作業では10分以上)
約30件
作成から確定・データ取得まで
約180
出力データのファイル数
09 · Compared

似たサービスとの違い

組み合わせないとまかなえず、1日約1,750〜3,500円。Claude(Ultra)は約1,070〜1,600円

前工程

仕様書とテストデータから作る

多くは仕様や要件を受け取るところから。こちらはテストデータもAIが組み合わせや網羅性を見て選ぶ

テスト環境への入り方

お客様の環境に何も入れない

多くはトンネルや固定IPの許可、PCへの導入が要る。こちらはログイン済みのブラウザに貼るだけ

記録先

お客様のチェックシートに書く

多くは自社の管理画面や課題管理に結果を持つ。こちらはお客様のExcelやスプレッドシートに直接

弱いところ

繰り返しの自動化はツールが上

画面が変わったときの自動修復や、回帰テストを定期的に回す仕組みは、ツールのほうが整っている

まとめると、柔軟に作れて、お客様の環境に何も足さずに始められる

組み合わせ=Katalon TestOps+MagicPod+TFACT(AIの従量は別)。公式サイト(2026-11-13確認)、1ドル=159.91円、1日=月額÷30〜20日

10 · Limits

このテストで確かめられないこと

見た目

レイアウトや色は確かめられない

結果は文字で残し、画像は撮らない(案件1)。
見た目で決めるところは人が判断した(案件2)

画面の裏側

データベースは見られない

見られるのはテスト環境の画面だけ。データベースの中身は、直接は確かめられない(案件1)

無人の実行

決まった時刻に無人では流せない

流すのは人なので、人が貼らないと始まらない

本番の環境

流したのはテスト環境だけ

本番だけで起きることは、別のやり方で確かめる必要がある

画面や商品が変わると、スクリプトの直しも要る

11 · Other Uses

同じ型が使えそうな仕事

同じ手順を何度も流すか、期待する結果を文字で書けるか。この2つで見分けられると思います

今回に近い

リリースごとの回帰テスト

同じ手順と期待結果を流し直す。直った不具合の確認にも使える

今回に近い

帳票と出力の検算

注文の金額をその場で計算し直し、注文書やデータと突き合わせる

使えそう

移行後のデータ照合

移行先の管理画面を読み、移行元のデータと突き合わせる。読むだけで済む

使えそう

受注システムと基幹の突き合わせ

受注番号をキーに両方の画面やCSVを読み、件数と中身を合わせる

Takeaways

AIを使った自動テスト、超便利でした

01

注文1件、10分以上が約30秒に

決まった手順の回帰テストが、圧倒的に速くなった(案件2)

02

約1万2千行を全件照合して、差はゼロ

照合用のExcelを、全件で照合できた(案件2)

03

1日あたり約1,070〜1,600円

Claude の Ultra プラン。サービスを組み合わせると約1,750〜3,500円かかる

Message

大事だったのは、
自動化よりも
止まる・残す・照合する
仕組みでした。

← → / 左右の余白をクリックで移動 · F で全画面