Gói thuê bao để chạy đánh giá lặp lại trên bộ kiểm thử riêng của bạn, qua các mảng đánh giá hiện có: AB-VietLLM, AB-Doc, AB-Voice và AB-Memory. Giá đang được thử với nhóm pilot đầu tiên.
Cả ba gói trả phí dùng chung các mảng đánh giá hiện có, khác nhau ở quy mô, mức tự động hóa và quản trị. Không thu khoản riêng cho từng mảng.
Xem benchmark công khai. Workspace dùng thử đang xây dựng.
Đội nhỏ bắt đầu kiểm thử có hệ thống.
Kiểm thử lặp lại, phối hợp trong đội, bắt lỗi trước khi phát hành.
Nhiều hệ thống, cần quản trị và khối lượng lớn hơn.
Theo yêu cầu triển khai và hỗ trợ.
Mỗi mảng hiện đơn vị sử dụng dễ hiểu. Cách tính dưới đây là dự kiến và sẽ được chốt cùng bảng đơn giá sau pilot.
| Mã | Mảng | Đánh giá gì | Đơn vị sử dụng (dự kiến) |
|---|---|---|---|
| AB-VietLLM | Mô hình ngôn ngữ | So sánh model theo tác vụ tiếng Việt: chất lượng, làm theo chỉ dẫn, dùng công cụ, tốc độ và chi phí | Số test case, số model, lượng token thực tế |
| AB-Doc | Xử lý tài liệu | Độ chính xác của trường dữ liệu quan trọng, công kiểm tra và sửa lỗi, thời gian và chi phí xử lý | Số trang được xử lý, số giải pháp so sánh, cấu hình chấm |
| AB-Voice | Voicebot | Hoàn thành nghiệp vụ, lỗi nghiêm trọng, độ trễ, ngắt lời, chuyển tiếp cho người | Phút mô phỏng và phút âm thanh được đánh giá, tính riêng hai loại |
| AB-Memory | Bộ nhớ dài hạn | Ngữ cảnh dài (đo model nền) và nhớ qua nhiều phiên (đo cả hệ thống) | Số kịch bản, số phiên và lượt tương tác, lượng token |
Quyền truy cập nền tảng và lượng sử dụng được tách riêng, để bạn thấy mình trả tiền cho cái gì.
Mặc định lượt chạy dừng khi hết ngân sách đi kèm. Bạn tự bật chi vượt mức và đặt trần.
Trước mỗi lượt chạy, giao diện hiện số lượt thực thi và dự toán. Một test case chạy trên 3 model, lặp lại 5 lần là 15 lượt.
Khi đó phí do nhà cung cấp model thu trực tiếp được tách rõ khỏi phí AsiaBench.
Công bố sau pilot, khi đã đo chi phí tạo đầu vào, gọi hệ thống cần kiểm thử, chấm kết quả, chạy lại và lưu trữ.
Đơn giá thật chưa công bố, nên đây chỉ là cách cộng. Phần vượt chỉ phát sinh khi bạn chủ động bật chi vượt mức. Chưa gồm khoản bên thứ ba thu trực tiếp (nếu dùng API key riêng) và thuế nếu có.
Gói thuê bao gồm tài liệu hướng dẫn và hỗ trợ sử dụng theo gói. Gói không gồm lượng tư vấn, gán nhãn hay phân tích thủ công không giới hạn.
Ba loại kết quả được phân biệt rõ, để người đọc biết mỗi con số đến từ đâu.
AsiaBench chạy theo quy trình công bố. Luôn miễn phí.
Báo cáo theo phạm vi hợp đồng, có người chịu trách nhiệm phương pháp.
Ghi rõ cấu hình và nguồn dữ liệu. Không tự động thành chứng nhận độc lập và không mang nhãn AsiaBench Verified.
Doanh nghiệp, nhà cung cấp hay lab mô hình: để lại email, chúng tôi liên hệ trong vài ngày làm việc.