Getting it into your agent
One page per mod, every tool's command on it. A separate URL per tool would split the same page into five that compete with each other.
npx agentmods add commands/anhtester/claudecode_playwright_demo/analyze_flaky_testsgit clone --depth 1 https://github.com/anhtester/ClaudeCode_Playwright_DemoWrote this? Show the measurements
A badge with what this costs and how it scanned, read live from this page, so it follows the numbers instead of freezing them. Markdown for a README, HTML for a documentation site or a project page.
[](https://agentmods.dev/commands/anhtester/claudecode_playwright_demo/analyze_flaky_tests)<a href="https://agentmods.dev/commands/anhtester/claudecode_playwright_demo/analyze_flaky_tests"><img src="https://agentmods.dev/badge/commands/anhtester/claudecode_playwright_demo/analyze_flaky_tests.svg" alt="Measured on agentmods" height="20"></a>What it costs to keep this loaded
Counted locally with the o200k_base tokenizer, which is exact for GPT models; Claude uses its own tokenizer and its counts differ. Treat this as one consistent yardstick across the catalogue rather than a bill. Prices are per million input tokens.
| Model | Per session | Once invoked |
|---|---|---|
| Fable 5.1 | $0.00052 | $0.03108 |
| Opus 5 | $0.00026 | $0.01554 |
| Sonnet 5 | $0.00010 | $0.00622 |
| Haiku 4.5 | $0.00005 | $0.00311 |
Grade A, and why
analyze_flaky_tests scanned grade A with 0 findings against 26 rules in 11 categories — prompt injection, anti-refusal, data exfiltration, privilege escalation, supply chain, agent snooping, system-prompt leakage, SSRF and excessive agency — measured 5d ago.
A static scan of the body, not an audit. Every finding is printed with the line that produced it so you can judge whether it matters here. A mod is markdown that instructs an agent; that is exactly why what it instructs is worth reading.
Nothing flagged
None of the 26 patterns this scan looks for appear in this file: no shell pipes, no recursive deletes, no credential paths, no hidden text, no instruction-override or anti-refusal phrasing, no agent-config snooping. That is not a guarantee, it is the absence of the things that are checkable.
This is a copy
86% identical to analyze_flaky_tests — 18 lines differ, which has more behind it and is treated as the original. This page carries a canonical link to it rather than competing with it.
How it starts
The opening of the file, as written. The whole thing — 244 lines — stays where its author put it; the contents beside it link to each section on GitHub.
Workflow: Phân Tích & Khắc Phục Flaky Tests
BẮT BUỘC (MANDATORY SKILL): Bạn PHẢI nạp và đọc kỹ nội dung của skill
flaky_test_analyzer(tại.agent/skills/flaky_test_analyzer/SKILL.md) trước khi bắt đầu. Ngoài ra, tham khảo thêm skillsmart_locator_agentvàlocator_healer_agentkhi cần sửa/thay locator.
Workflow này giúp agent tự động phân tích các automation test không ổn định (lúc pass lúc fail), xác định root cause chính xác, và (tùy mode) tự động sửa code để stabilize test.
⚠️ Nguyên tắc thực thi
- Tất cả output bằng Tiếng Việt
- KHÔNG đoán nguyên nhân — phải phân tích log, code, và DOM thực tế
- Phải chờ user xác nhận danh sách fix tại Bước 3 trước khi sửa code (Mode FIX)
- Nếu user chưa cung cấp test file/error log → hỏi trước khi bắt đầu
- ⚠️ Sau khi user xác nhận fix → agent tự sửa + verify, KHÔNG hỏi lại trong quá trình fix
2 Chế độ (Mode)
| Mode | Khi nào sử dụng | Output |
|---|---|---|
| ANALYZE (mặc định) | User cần hiểu nguyên nhân flaky, chưa muốn sửa code | Báo cáo phân tích + Đề xuất fix |
| FIX | User muốn agent tự sửa code luôn | Như ANALYZE + Code đã sửa + Kết quả verify |
Nếu user nói "sửa luôn", "fix giùm", "khắc phục test này", hoặc yêu cầu agent sửa code → tự động chuyển sang Mode FIX.
Input cần thu thập
Agent cần ít nhất 1 trong các input sau từ user:
| Input | Cách lấy | Độ ưu tiên |
|---|---|---|
| Test file path | User cung cấp hoặc agent tìm trong project | ⭐ Bắt buộc |
| Error log / stack trace | User paste hoặc agent chạy test để thu thập | ⭐ Bắt buộc |
| CI/CD log | User cung cấp URL hoặc file log | Tùy chọn |
| Test report (HTML/JSON) | Playwright report, Allure, TestNG report | Tùy chọn |
| Lịch sử fail | Số lần fail / tổng số lần chạy | Tùy chọn |
Các bước thực hiện
Bước 1: Thu thập thông tin & Tái hiện lỗi (Detect & Reproduce)
- Đọc test file bằng
view_file:- Xác định framework (Playwright / Selenium / Appium / Pytest / TestNG)
- Ghi nhận cấu trúc: Page Objects, fixtures, helper functions
- Đánh dấu các vùng code nghi ngờ (waits, locators, assertions, setup/teardown)
What this file has done since we first saw it
Hashed on every crawl. A supply-chain change to an agent config is a question of when, not whether, so the history is kept rather than the latest state alone.
- 5d ago First seen · 244 lines · 52 tokens per session scan A 6d78c4797016
analyze_flaky_tests is a command published in the GitHub repository anhtester/ClaudeCode_Playwright_Demo (2 stars, last pushed 3mo ago), licensed MIT. It adds 52 tokens to every session and 3,108 once invoked, about $0.0003 per session on Opus 5. A static security scan graded it A with 0 findings. It is 86% identical to analyze_flaky_tests, differing in 18 lines, and is treated as a copy.
Other commands, from other repositories
analyze_requirement_document
Phân tích requirement document (Jira ticket, .docx/.pdf/.xlsx/.csv/.xml, user story) — sinh tài liệu phân tích chi tiết, KHÔNG sinh test cases.
generate_cross_module_test_plan
Phân tích tính năng đi qua nhiều modules nối tiếp, xây dựng Module Map + Dimension Catalog, và sinh ma trận kết hợp (Output-Class Coverage/Pairwise/Full Cartesian). Hỗ trợ 2 modes — DOCUMENT (từ tài liệu) và BROWSER (inspect DOM thực tế).
generate_automation_framework
Thiết kế và scaffold automation framework hoàn chỉnh. Hỗ trợ Playwright, Selenium, Appium — Web, Mobile, API.
generate_automation_from_testcases
Convert manual test cases into automation scripts autonomously using the 6-step AI-RBT Framework via Claude Code Capabilities.
generate_combinatorial_test_data
Sinh test data cho ma trận kết hợp đa chiều bằng pipeline chạy thật qua nhiều modules. Input từ /generatecrossmoduletestplan.
analyze_flaky_tests
Phân tích automation tests không ổn định (flaky), xác định root cause và tự động khắc phục. Hỗ trợ 2 mode — ANALYZE (chỉ báo cáo) và FIX (báo cáo + tự sửa code).