Kiểm thử synthetic browser monitoring: từ page load đến giao dịch người dùng

HTTP probe kiểm tra endpoint/protocol; browser probe tải HTML, script, CSS và thực thi trang; transaction journey mô phỏng chuỗi như đăng nhập, tìm kiếm, thêm dữ liệu và xác nhận. Ba lớp trả lời câu hỏi khác nhau, không thay thế lẫn nhau.

Mục tiêu có thể là availability, page usability, latency, dependency, regional reachability hoặc business outcome. “DOM loaded” chưa chắc button usable; “click thành công” chưa chắc giao dịch backend commit. Vì vậy assertion cần cả UI state, network response và marker nghiệp vụ khi phù hợp.

Synthetic là traffic chủ động, có lịch và dữ liệu kiểm soát. Nó hỗ trợ phát hiện sớm nhưng không đại diện đầy đủ người dùng thật, thiết bị thật và distribution traffic. Nên đối chiếu RUM/APM/log khi có.

Topology gồm nhiều probe location, DNS, CDN/WAF, load balancer, web/app/API, identity provider và dependency. Backend thêm trace/correlation ID dành cho synthetic để tìm đường đi mà không làm dashboard business bị nhiễu.

Đặt ít nhất một probe nội bộ và các probe ngoài vùng/ASN đại diện nếu mục tiêu là Internet service. Tách probe engine health khỏi target health; một location mất mạng không nên tạo kết luận toàn dịch vụ down.

Đồng bộ clock probe và backend. Ghi egress IP, DNS resolver, browser/OS, viewport, locale, cache/cookie state và network profile; đây đều là biến của kết quả.

Journey phải ổn định, dùng selector chống thay đổi vô nghĩa và assertion theo business state. Tách bước authentication, navigation, action và confirmation. Dữ liệu thử nghiệm có vòng đời riêng, tránh ghi vào production report hoặc làm đầy hệ thống.

Khóa browser version, headless/headed mode, cache cold/warm, cookie/session, device/viewport, DNS, TLS, content variant, feature flag, third-party script và consent banner. Nếu A/B test hoặc personalization tồn tại, route synthetic vào cohort cố định.

Biến · Mức thử · Rủi ro nếu không khóa

Cache · cold/warm · Kết quả không so được

Login/session · mới/tái sử dụng · Che lỗi IdP hoặc refresh

Location · nhiều vùng/ASN · Nhầm lỗi cục bộ thành toàn cục

Browser · exact version · Timing/JS khác nhau

Third-party · bật/giả lập theo phạm vi · Alert do dependency ngoài quyền

Test data · unique/cleanup · Duplicate và nhiễu nghiệp vụ

KPI protocol gồm DNS, connect, TLS và TTFB. KPI browser gồm navigation/resource timing, First Contentful Paint, Largest Contentful Paint, Cumulative Layout Shift và Interaction to Next Paint khi phép đo phù hợp. KPI journey gồm step success, business confirmation, total duration và cleanup success.

Không trộn lab measurement với ngưỡng Core Web Vitals một cách máy móc: synthetic environment và RUM population khác nhau. Dùng metric để regression và alert theo SLO đã thống nhất; ghi browser/location/network profile.

Bằng chứng gồm HAR/network log đã redaction, screenshot khi fail, console error, trace/correlation ID, backend assertion, probe health, DNS/TLS metadata và timeline. Không lưu password, token, cookie hoặc PII trong artifact.

Test · Assertion · KPI · Bằng chứng

Landing page · element chính usable · navigation/LCP · timing + screenshot

Login · user test vào đúng tenant · step success/latency · IdP + app trace

Search/API · kết quả marker đúng · p95/p99/error · HAR + backend ID

Write transaction · commit một lần · success/duplicate · business record

Third-party slow · core journey theo policy · timeout/fallback · resource waterfall

Region fault · quorum cảnh báo đúng · detection/recovery · location timeline

Certificate rotation · TLS liên tục · handshake/error · cert fingerprint

Mỗi assertion phải nói rõ fail điều gì. Selector không thấy có thể do UI đổi, page chưa usable, authorization hoặc probe script lỗi. Tự retry ngay lập tức có thể che outage ngắn; nếu retry, báo first-attempt và eventual success riêng.

Chạy cadence đủ nhỏ để phát hiện theo SLO nhưng không biến synthetic thành load test. Capacity test là bài riêng; tăng probe không kiểm soát có thể làm quá tải identity hoặc backend.

• Chốt SLO, journey owner, dữ liệu test và cleanup.
• Chạy từng bước thủ công bằng đúng browser/profile.
• Bật correlation ID; xác minh probe→backend trace.
• Thu baseline nhiều location, cache cold/warm và giờ đại diện.
• Đặt alert theo step/business assertion, không chỉ HTTP status.
• Chèn latency/loss hoặc làm chậm dependency trong lab.
• Thử DNS/CDN/backend/IdP failure theo phạm vi.
• Rotate certificate, deploy canary và rollback có kiểm soát.
• Xác minh alert route, dedup, escalation và recovery notification.
• Kiểm tra cleanup dữ liệu, secret rotation và artifact redaction.

Alert nên dùng quorum/location policy, ví dụ phân biệt một probe lỗi với nhiều vùng cùng lỗi. Tuy nhiên quorum không được che lỗi khách hàng chỉ ở một thị trường quan trọng. Severity cần gắn business journey và phạm vi người dùng.

Đo detection time, alert delivery, acknowledgement, false-positive rate và recovery confirmation. Alert tự đóng khi một lần pass có thể flapping; dùng số lần pass liên tiếp hoặc stable window theo SLO. Ghi rõ maintenance suppression và expiry.

Phân tích fail theo tầng: probe engine/resource; DNS/network/TLS; browser/runtime; identity; application; dependency; business assertion. Điều này rút ngắn MTTR hơn một thông báo “journey failed”.

• [ ] Synthetic account có least privilege và owner.
• [ ] Secret nằm trong vault, không trong script/log.
• [ ] Test data có prefix, retention và cleanup.
• [ ] Browser, OS, location và cache state được version hóa.
• [ ] Journey có assertion UI, network và business phù hợp.
• [ ] Correlation ID nối được probe với backend.
• [ ] HAR/screenshot/log đã redaction.
• [ ] Alert quorum, retry và recovery window đã thử.
• [ ] Maintenance suppression có thời hạn.
• [ ] Script change có review, canary và rollback.

Synthetic không đại diện distribution thiết bị, mạng, user behavior hoặc personalization thật. Headless browser có thể khác browser người dùng; probe location cloud không thay field probe tại chi nhánh. Third-party content và consent flow thay đổi có thể làm script dễ vỡ.

Một journey pass không chứng minh toàn bộ site; một probe fail không chứng minh người dùng đều fail. Dùng synthetic cùng RUM, APM, logs và active network tests để tăng độ tin cậy, không biến nó thành nguồn duy nhất.

• Synthetic monitoring: Phép đo chủ động theo kịch bản và lịch.
• User journey: Chuỗi bước thể hiện mục tiêu người dùng/nghiệp vụ.
• Navigation/Resource Timing: API/metric timing chuẩn trong browser.
• TTFB: Thời gian tới byte đầu tiên.
• Web Vitals: Nhóm chỉ số trải nghiệm web; cần diễn giải theo ngữ cảnh.
• RUM: Real User Monitoring từ phiên người dùng thật.
• Assertion: Điều kiện xác nhận bước đạt đúng trạng thái.
• Quorum: Quy tắc kết hợp kết quả nhiều probe/location.