Appearance
Tạo Chiến dịch A/B Test
A/B Test giúp bạn gửi các phiên bản email khác nhau tới một phần danh sách, so sánh kết quả rồi dùng biến thể chiến thắng cho những người đăng ký còn lại.
A/B Test là gì?
Mỗi A/B Test gồm ít nhất hai biến thể. Mỗi biến thể có thể dùng tiêu đề, nội dung xem trước, thông tin người gửi và thiết kế email riêng.
Bạn chọn một phần danh sách làm nhóm thử nghiệm. Mailix chia nhóm này cho các biến thể theo tỷ lệ đã cấu hình. Sau giai đoạn thử nghiệm, Mailix chọn biến thể chiến thắng tự động hoặc chờ bạn chọn thủ công.
A/B Test giúp so sánh kết quả giữa các biến thể. Tính năng này không bảo đảm một biến thể sẽ có hiệu quả cao hơn và không tự đánh giá ý nghĩa thống kê trước khi chọn biến thể chiến thắng tự động.
Trước khi bắt đầu
Bạn cần:
- Có quyền tạo và chỉnh sửa chiến dịch.
- Có ít nhất một danh sách.
- Có phương thức gửi khả dụng khi khởi chạy.
- Còn hạn mức tạo chiến dịch và hạn mức gửi của tài khoản.
Việc tạo A/B Test có thể phụ thuộc quyền tài khoản và cấu hình hệ thống. Trang tạo hiện không hiển thị yêu cầu về một gói riêng dành cho A/B Test.
Cách tạo Chiến dịch A/B Test
- Mở Chiến dịch → Thư điện tử.
- Chọn Tạo chiến dịch.
- Chọn Thử nghiệm A/B.
Mailix tạo ngay một chiến dịch ở trạng thái Mới với tên mặc định, sau đó mở trang Thiết lập A/B Test. A/B Test dùng quy trình riêng gồm Chiến dịch, Biến thể và Quy tắc chiến thắng; không dùng wizard năm bước của chiến dịch thông thường.
Thiết lập Người nhận
Trong bước Chiến dịch:
- Nhập Tên chiến dịch.
- Chọn một Danh sách người nhận.
- Chọn tỷ lệ Nhóm thử nghiệm từ 1% đến 100%.
- Chọn cách chia nhóm.
- Lưu để chuyển sang Biến thể.
A/B Test hiện chỉ chọn một danh sách đầy đủ. Trang thiết lập không có lựa chọn nhiều danh sách, Phân khúc hoặc nhóm loại trừ.
Tỷ lệ nhóm thử nghiệm xác định phần người đăng ký dùng để so sánh các biến thể. Nếu chọn dưới 100%, phần còn lại sẽ nhận biến thể chiến thắng. Nếu chọn 100%, toàn bộ nhóm đủ điều kiện tham gia thử nghiệm và không còn nhóm để gửi biến thể chiến thắng.
Người đăng ký vẫn phải đáp ứng điều kiện gửi tại thời điểm xử lý, gồm trạng thái đăng ký và các kết quả xác minh email được cấu hình cho hệ thống. Chiến dịch A/B Test không tự xác minh email.
Lưu ý: Số người đăng ký hiển thị ở màn hình kiểm tra có thể là tổng số của danh sách, không phải số email cuối cùng sẽ được gửi. Trạng thái đăng ký, kết quả xác minh và email trùng có thể làm số thực tế thấp hơn.
Chọn cách chia nhóm
Mailix cung cấp hai lựa chọn:
| Cách chia | Ý nghĩa |
|---|---|
| Phân chia chính xác | Phân bổ theo số lượng đã tính, chỉ có thể chênh lệch một người đăng ký do làm tròn. Đây là lựa chọn được đề xuất cho hầu hết danh sách. |
| Phân chia nhanh | Phân bổ xấp xỉ theo tỷ lệ. Giao diện đề xuất lựa chọn này cho danh sách rất lớn và lưu ý kết quả có thể lệch nhẹ. |
Hai cách này tạo nhóm ổn định theo dữ liệu hiện có. Trang thiết lập không có lựa chọn xáo trộn ngẫu nhiên.
Với danh sách nhỏ, tỷ lệ thấp có thể tạo nhóm thử nghiệm bằng 0 sau khi làm tròn. Hãy kiểm tra quy mô danh sách và chọn tỷ lệ đủ lớn trước khi khởi chạy.
Thiết lập các biến thể
Bạn cần ít nhất hai biến thể. Trang thiết lập không nêu giới hạn tối đa, nhưng một số khu vực chỉ gắn nhãn chữ cái rõ ràng cho sáu biến thể đầu tiên.
Khi thêm biến thể, nhập:
- Tên biến thể.
- Tiêu đề email.
- Nội dung xem trước nếu cần.
- Tên người gửi.
- Email người gửi.
- Email trả lời.
- Mẫu và nội dung email.
Mỗi biến thể dùng nội dung độc lập. Bạn có thể chọn mẫu hệ thống, mẫu của tài khoản, chỉnh bằng trình dựng hoặc dùng HTML tùy chỉnh. A/B Test không có lựa chọn biến thể dạng chiến dịch Văn bản thuần.
Bạn có thể thêm, chỉnh sửa, nhân bản hoặc xóa biến thể. Biến thể đầu tiên được đánh dấu là biến thể đối chứng. Trang thiết lập không có thao tác đổi một biến thể khác thành đối chứng.
Khi thêm, nhân bản hoặc xóa biến thể, Mailix tự cân bằng lại tỷ lệ. Chọn Cân bằng phân phối để điều chỉnh trọng số của từng biến thể. Tổng tỷ lệ trong nhóm thử nghiệm phải bằng 100%.
Nhân bản một biến thể
Nhân bản tạo một biến thể độc lập với nội dung và thông tin gửi giống bản gốc tại thời điểm sao chép. Sau đó, chỉnh sửa bản sao không làm thay đổi biến thể nguồn.
Xóa một biến thể
Xóa biến thể cũng xóa nội dung email riêng của biến thể đó. Mailix cân bằng lại tỷ lệ của các biến thể còn lại.
Quan trọng: Hãy kiểm tra đúng biến thể trước khi xác nhận xóa. Giao diện không có thao tác hoàn tác.
Chọn cách xác định biến thể chiến thắng
Trong bước Quy tắc chiến thắng, chọn một trong ba cách:
| Cách chọn | Mailix thực hiện |
|---|---|
| Tỷ lệ mở cao nhất | So sánh tỷ lệ mở duy nhất trên số email đã gửi của từng biến thể. |
| Tỷ lệ nhấp cao nhất | So sánh tỷ lệ nhấp duy nhất trên số email đã gửi của từng biến thể. |
| Chọn thủ công | Chờ bạn xem báo cáo và chọn một biến thể. |
Với cách tự động, biến thể có tỷ lệ cao nhất tại thời điểm đánh giá được chọn. Mailix không yêu cầu quy mô mẫu tối thiểu hoặc mức ý nghĩa thống kê trước khi chọn biến thể chiến thắng. Nếu các biến thể bằng nhau hoặc đều chưa có tương tác, Mailix vẫn chọn một biến thể theo thứ tự hiện có thay vì tiếp tục chờ.
Theo dõi lượt mở và lượt nhấp mặc định được bật khi tạo A/B Test mới. Trang A/B Test không có công tắc theo dõi riêng và không kiểm tra xem loại theo dõi tương ứng có đang hoạt động trước khi chọn biến thể chiến thắng tự động. Hãy bảo đảm dữ liệu mở hoặc nhấp tương ứng đang được ghi nhận; nếu muốn tự đánh giá dữ liệu, hãy chọn Chọn thủ công.
Thiết lập thời gian thử nghiệm
Khi chọn biến thể chiến thắng tự động, nhập thời gian chờ từ 1 đến 720 giờ.
Khoảng chờ bắt đầu sau khi Mailix gửi xong nhóm thử nghiệm. Khi hết thời gian, Mailix đánh giá tỷ lệ mở hoặc tỷ lệ nhấp đã chọn và tự gửi biến thể chiến thắng cho nhóm còn lại.
Với Chọn thủ công, không có thời gian chờ. Sau khi nhóm thử nghiệm gửi xong, A/B Test chuyển sang Chờ chọn biến thể chiến thắng.
Chọn biến thể chiến thắng thủ công
- Chờ A/B Test chuyển sang Chờ chọn biến thể chiến thắng.
- Mở báo cáo A/B Test.
- So sánh kết quả các biến thể.
- Chọn Chọn làm biến thể chiến thắng trên biến thể phù hợp.
- Xác nhận lựa chọn.
Nếu còn nhóm người nhận, Mailix bắt đầu gửi biến thể đã chọn cho nhóm đó. Hộp thoại xác nhận xuất hiện trước thao tác. Sau khi xác nhận, bạn không thể chọn lại hoặc hoàn tác biến thể chiến thắng.
Quan trọng: Nút chọn biến thể chiến thắng có thể xuất hiện khi nhóm thử nghiệm vẫn đang gửi. Chọn lúc này có thể bắt đầu gửi biến thể chiến thắng trong khi phần thử nghiệm chưa xử lý xong. Chỉ chọn sau khi A/B Test chuyển sang Chờ chọn biến thể chiến thắng.
Xem trước và gửi thử
Mỗi biến thể có thao tác Xem trước email để kiểm tra thiết kế đã lưu.
Xem trước không gửi email thật và không đại diện đầy đủ cho dữ liệu cá nhân hóa của một người đăng ký cụ thể.
Luồng A/B Test hiện tại chưa xác minh thao tác gửi email thử riêng cho một biến thể. Thao tác gửi thử chung của chiến dịch không cho chọn rõ biến thể, vì vậy không nên dùng nó để kết luận một biến thể cụ thể đã được kiểm tra.
Kiểm tra và khởi chạy A/B Test
Sau khi lưu Quy tắc chiến thắng, Mailix mở trang Kiểm tra và khởi chạy. Trang này kiểm tra:
- Đã chọn danh sách.
- Có ít nhất hai biến thể.
- Tổng tỷ lệ biến thể bằng 100%.
- Mỗi biến thể có mẫu email và tiêu đề.
- Mỗi biến thể có thông tin người gửi.
Email trả lời cũng bắt buộc khi khởi chạy, dù hàng kiểm tra người gửi trên trang này có thể chưa hiển thị thiếu sót đó.
Bạn có thể chọn:
- Gửi ngay để bắt đầu A/B Test sau khi chọn Khởi chạy A/B Test.
- Lên lịch gửi sau để chọn ngày và giờ theo múi giờ tài khoản, rồi chọn Khởi chạy A/B Test.
Đây là thao tác khởi chạy cuối cùng. A/B Test lên lịch chỉ chuyển sang Đã lên lịch sau khi bạn gửi biểu mẫu tại trang này.
Theo dõi quá trình thử nghiệm
Các trạng thái chính gồm:
| Trạng thái | Ý nghĩa |
|---|---|
| Mới | A/B Test đang được cấu hình và chưa khởi chạy. |
| Đã lên lịch | A/B Test chờ tới thời gian đã chọn. |
| Đang thử nghiệm | Mailix đang gửi các biến thể tới nhóm thử nghiệm. |
| Chờ chọn biến thể chiến thắng | Nhóm thử nghiệm đã gửi xong; Mailix đang chờ hết thời gian đánh giá hoặc chờ bạn chọn. |
| Đang gửi biến thể chiến thắng | Biến thể chiến thắng đang được gửi tới nhóm còn lại. |
| Hoàn thành | Các giai đoạn cần thiết đã kết thúc. |
| Đã tạm dừng | Quá trình đang tạm ngưng ở giai đoạn hiện tại. |
| Lỗi | A/B Test không thể tiếp tục và cần được kiểm tra. |
Bạn có thể tạm dừng khi A/B Test đã lên lịch, đang thử nghiệm, chờ biến thể chiến thắng hoặc đang gửi biến thể chiến thắng. Tiếp tục sẽ xử lý phần còn lại của giai đoạn hiện tại; không gửi lại từ đầu những email đã hoàn tất.
Hãy hoàn tất chỉnh sửa biến thể trước khi khởi chạy. Các thao tác chỉnh sửa thay đổi theo trạng thái và không phải giai đoạn nào cũng cho phép mở lại phần thiết lập.
Xem kết quả và biến thể chiến thắng
Báo cáo A/B Test hiển thị theo từng biến thể:
- Số người nhận được phân bổ.
- Số email đã gửi thành công và thất bại.
- Lượt mở và tỷ lệ mở.
- Lượt nhấp và tỷ lệ nhấp.
- Bounce.
- Hủy đăng ký.
- Biến thể chiến thắng và tiêu chí đã dùng.
Nếu biến thể chiến thắng được gửi cho nhóm còn lại, thống kê của biến thể đó có thể gồm cả nhóm thử nghiệm và nhóm nhận biến thể chiến thắng. Báo cáo không tách toàn bộ các chỉ số thành hai chiến dịch độc lập.
Với đúng hai biến thể, báo cáo hiển thị mục Độ tin cậy thống kê khi dữ liệu tạo ra được một kết quả có thể tính. Mục này gồm mức độ tin cậy, độ nâng, quy mô mẫu và các chỉ số so sánh. Đây chỉ là thông tin báo cáo; Mailix không dùng ngưỡng này làm điều kiện chọn biến thể chiến thắng tự động.
Gửi lại, sao chép, lưu trữ hoặc xóa A/B Test
Gửi lại A/B Test
Quan trọng: Gửi lại xóa phân bổ người nhận, biến thể chiến thắng và toàn bộ dữ liệu theo dõi cũ của A/B Test trước khi chạy lại. Hãy lưu hoặc kiểm tra báo cáo hiện tại trước khi xác nhận.
Gửi lại dùng chính chiến dịch hiện tại, không tạo chiến dịch mới. Mailix giữ:
- Danh sách người nhận.
- Các biến thể cùng nội dung và mẫu email của từng biến thể.
- Tỷ lệ nhóm thử nghiệm và tỷ lệ phân phối giữa các biến thể.
- Tiêu chí chọn biến thể chiến thắng và thời gian chờ.
Mailix xóa phân bổ người nhận cũ, biến thể chiến thắng cũ, dữ liệu gửi, mở, nhấp, bounce, phản hồi và hủy đăng ký của lần chạy trước. Trạng thái được đặt lại rồi A/B Test bắt đầu gửi lại từ đầu. Cửa sổ Gửi lại mô tả tác động nhưng không có thêm hộp thoại xác nhận thứ hai.
Sao chép A/B Test
Cảnh báo: Không dùng Sao chép chiến dịch để tạo một bản A/B Test mới.
Thao tác này tạo một chiến dịch thường ở trạng thái Mới. Chiến dịch mới có thể giữ Danh sách và một số cài đặt chung, nhưng không có các biến thể, nội dung riêng của biến thể, tỷ lệ mẫu, tỷ lệ phân phối, quy tắc chọn biến thể chiến thắng hoặc thời gian chờ của A/B Test. Lịch gửi và báo cáo cũ cũng không được sao chép.
Muốn tạo A/B Test khác, hãy chọn Tạo chiến dịch → Thử nghiệm A/B và cấu hình lại.
Lưu trữ A/B Test
Quan trọng: Lưu trữ không dừng A/B Test đang chạy, không hủy A/B Test đã lên lịch và không dừng giai đoạn gửi biến thể chiến thắng. Thao tác này dọn dữ liệu theo dõi chi tiết, vì vậy báo cáo A/B có thể không còn hiển thị các số liệu chi tiết như trước. Chỉ lưu trữ khi bạn không còn cần dữ liệu đó.
Chiến dịch vẫn nằm trong danh sách chiến dịch sau khi lưu trữ. Giao diện yêu cầu xác nhận trước thao tác và không có lựa chọn Bỏ lưu trữ.
Xóa A/B Test
Quan trọng: Xóa là thao tác không thể hoàn tác. Mailix hủy phần xử lý đang chờ, xóa chiến dịch, cấu hình A/B, phân bổ người nhận và dữ liệu báo cáo liên quan. Các biến thể và nội dung của chúng không còn truy cập được từ giao diện.
Giao diện yêu cầu xác nhận và thông báo rằng thao tác không thể hoàn tác. Không có quy trình khôi phục dành cho khách hàng.
Lưu ý quan trọng
- A/B Test chỉ dùng một danh sách đầy đủ; trang thiết lập không có lựa chọn Phân khúc hoặc loại trừ.
- Tỷ lệ của từng biến thể là tỷ lệ bên trong nhóm thử nghiệm, không phải toàn bộ danh sách.
- Nếu loại tương tác dùng làm tiêu chí không được ghi nhận, biến thể chiến thắng tự động vẫn có thể được chọn từ các tỷ lệ bằng 0.
- Người đăng ký hủy đăng ký, bị chặn hoặc không còn đủ điều kiện trước giai đoạn gửi biến thể chiến thắng sẽ không được gửi như một người nhận hợp lệ.
- Khi nhóm thử nghiệm là 100%, Mailix vẫn phải xác định biến thể chiến thắng để hoàn thành A/B Test. Với cách thủ công, bạn vẫn cần chọn một biến thể dù không còn nhóm người nhận để gửi tiếp.
Khi A/B Test chưa thể khởi chạy
Kiểm tra các nguyên nhân sau:
- Chưa chọn danh sách hoặc danh sách không còn người đăng ký phù hợp.
- Có ít hơn hai biến thể.
- Tổng tỷ lệ biến thể không bằng 100%.
- Một biến thể thiếu tiêu đề, mẫu email, người gửi hoặc Email trả lời.
- Nhóm thử nghiệm quá nhỏ sau khi tính tỷ lệ.
- Tài khoản không còn quyền hoặc hạn mức gửi.
- Không có phương thức gửi khả dụng.
- Thời gian lên lịch không hợp lệ hoặc đã qua.
Nếu A/B Test gặp lỗi sau khi khởi chạy, kiểm tra thông báo trên báo cáo rồi sửa nguyên nhân trước khi tiếp tục. Mailix không bảo đảm gửi một phần khi hạn mức không đủ.
Câu hỏi thường gặp
A/B Test có giới hạn ở hai biến thể không?
Không. Bạn có thể tạo nhiều hơn hai biến thể và cần ít nhất hai biến thể để khởi chạy. Trang thiết lập không nêu giới hạn tối đa.
Tôi có thể thử nghiệm những yếu tố nào?
Mỗi biến thể có thể khác về tiêu đề, nội dung xem trước, tên và email người gửi, Email trả lời, mẫu và nội dung email. Mailix đánh giá toàn bộ biến thể; báo cáo không tự chứng minh yếu tố riêng lẻ nào tạo ra khác biệt.
Người nhận có được chia ngẫu nhiên không?
Không có lựa chọn chia ngẫu nhiên trên trang thiết lập. Mailix cung cấp cách chia chính xác và cách chia nhanh, xấp xỉ cho danh sách lớn.
Tôi có thể chọn biến thể chiến thắng thủ công không?
Có. Chọn Chọn thủ công, chờ nhóm thử nghiệm gửi xong rồi chọn biến thể chiến thắng trong báo cáo.
Biến thể chiến thắng tự động dựa trên chỉ số nào?
Bạn có thể chọn tỷ lệ mở hoặc tỷ lệ nhấp. Trang thiết lập không có tiêu chí chuyển đổi hoặc tối ưu thời gian gửi.
Nếu không có lượt mở hoặc lượt nhấp thì sao?
Mailix không yêu cầu số liệu tối thiểu. Khi các tỷ lệ bằng nhau hoặc đều bằng 0, Mailix vẫn chọn một biến thể theo thứ tự hiện có. Hãy dùng Chọn thủ công nếu bạn muốn xem dữ liệu trước khi quyết định.
Có thể lên lịch A/B Test không?
Có. Tại trang Kiểm tra và khởi chạy, chọn Lên lịch gửi sau, ngày và giờ, sau đó chọn Khởi chạy A/B Test.
Có thể chọn Phân khúc không?
Không. Trong A/B Test, bạn chỉ có thể chọn một danh sách đầy đủ.