Mô tả công việc:
Về KiotViet:
Sản phẩm công nghệ của KiotViet được nghiên cứu và sáng tạo tại Việt Nam, bởi kỹ sư phần mềm Việt, dựa vào đóng góp từ hàng trăm nghìn chủ doanh nghiệp, với sứ mệnh mang lại giá trị cho cộng đồng kinh doanh lớn nhỏ trên khắp mọi miền tổ quốc và các quốc gia đang trên đà phát triển hưng thịnh. KiotViet cam kết đồng hành cùng cộng đồng kinh doanh vừa, nhỏ và siêu nhỏ.
Với hơn 13 năm và trên 1,500 con người để tạo nên một KiotViet của ngày hôm nay, chúng tôi hiểu rằng các thành viên, từ quá khứ tới tương lai, là nền tảng cho KiotViet của ngày hôm nay và bệ phóng để vươn tới một KiotViet của ngày mai. KiotViet cam kết một môi trường làm việc chia sẻ thành công, cùng chung trách nhiệm.
Bạn sẽ làm gì:
1. MỤC TIÊU VAI TRÒ (ROLE MISSION)
- Tham gia xây dựng và duy trì hệ thống đánh giá chất lượng cho các sản phẩm AI Agent. - - Vai trò tập trung vào việc đảm bảo sản phẩm AI mang lại giá trị thực tế cho khách hàng, xác định và cải thiện các vấn đề chất lượng thông qua phân tích dữ liệu và đánh giá liên tục.
- Bạn sẽ làm việc chặt chẽ với domain experts để align tiêu chuẩn chất lượng với nhu cầu kinh doanh.
2. TRÁCH NHIỆM CHÍNH (KEY RESPONSIBILITIES)
2.1. Phân Tích và Đánh Giá Chất Lượng
- Xem xét và phân tích dữ liệu tương tác (logs, outputs) từ sản phẩm AI, Data để xác định vấn đề chất lượng.
- Ghi chép và phân loại các hành vi không mong muốn, hỗ trợ xây dựng danh mục lỗi cơ bản.
- Đánh giá kết quả đầu ra của AI dựa trên tiêu chuẩn đơn giản (pass/fail) và diễn giải giải thích chi tiết.
2.2. Xây dựng và
Quản lý Dữ Liệu Đánh Giá
- Hỗ trợ tạo và duy trì bộ dữ liệu đánh giá, đảm bảo cân bằng giữa các trường hợp tốt/xấu.
- Sử dụng công cụ cơ bản để tạo dữ liệu tổng hợp đơn giản, bao gồm các kịch bản thực tế.
2.3. Hợp Tác và Cải Thiện Liên Tục
- Làm việc với domain experts để đánh giá và cải thiện chất lượng.
- Hỗ trợ xây dựng quy trình đánh giá tự động cơ bản và theo dõi kết quả.
- Tham gia các buổi phân tích lỗi định kỳ để đề xuất cải tiến.
Yêu cầu công việc:
- Tốt nghiệp Đại học chuyên ngành CNTT, Kỹ thuật Phần mềm, hoặc lĩnh vực liên quan;
- Kinh nghiệm 2 năm làm Manual Tester/Automation Tester/QC ở môi trường product (ưu tiên sản phẩm có yếu tố AI hoặc data-driven như e-commerce, POS)
- Kiến thức cơ bản về
kiểm thử phần mềm (unit test, regression test), tư duy phân tích (phân tích logs, metrics, tổng hợp dữ liệu và insights), kiểm thử dữ liệu (kiểm thử đúng đắn, chính xác, gần chính xác, ...)
- Kiến thức và kinh nghiệm sử dụng SQL, Python (điểm cộng) và các công cụ kiểm thử như Postman, JMeter;
- Ưu tiên kinh nghiệm domain: Sale, thương mại điện tử, kinh doanh, tư vấn/
hỗ trợ khách hàng (e.g., sản phẩm SaaS cho merchants, hệ thống chat hỗ trợ như Freshchat)
- Có hiểu biết cơ bản về các Evaluation Metrics/Ranking metrics;
- Kỹ năng mềm: Chủ động (proactive - tự đề xuất cải tiến quy trình test, chủ động học hỏi công cụ mới), cởi mở với cách tiếp cận mới (không cứng nhắc, góc nhìn khách quan và khả năng lắng nghe), ham học hỏi (chủ động và có kinh nghiệm áp dụng các công cụ AI vào trong công việc hoặc cuộc sống), tư duy phân tích, hệ thống hóa;
- Tính cách: Trách nhiệm (luôn đảm bảo quality Dataset trước khi scale), transparent (minh bạch chia sẻ insights, issues với team), value-driven (hướng giá trị kinh doanh - ưu tiên metrics link tới outcomes), teamwork tốt (hợp tác cross-team với domain experts)
- Ưu tiên: Có kinh nghiệm kiểm thử hệ thống Agentic (AI Agent) - hiểu quy trình multi-step reasoning, tool-calling;.... Biết Python cơ bản hoặc công cụ testing (Selenium, JUnit); Tiếng Anh đọc hiểu tốt. Giỏi toán là điểm cộng.