Công nghệ & AIKỹ sư hoặc nhóm kỹ thuật gắn mô hình vào sản phẩm đang chạy

Khi cùng một đầu vào cho ra kết quả khác nhau mỗi lần, tôi muốn kiểm thử được nó, để biết một thay đổi làm hệ tốt lên hay tệ đi.

When the same input gives different output each time, I want to test it, so I know whether a change made things better or worse.

Hoàn cảnh của Job

Ai: Kỹ sư chịu trách nhiệm về chất lượng phần AI
Khi nào: Mỗi lần đổi lời nhắc, đổi mô hình hoặc đổi dữ liệu
Điều kích hoạt: Một thay đổi nhỏ làm hỏng một trường hợp không ai nghĩ tới
Tình thế: Không có khẳng định đúng sai nào áp được cho một câu trả lời bằng chữ
Giới hạn: Không có tập kiểm chuẩn, và đánh giá thủ công thì không chạy trong quy trình tự động được

Bốn góc nhìn quanh Job này nằm trong cộng đồng, dành cho Pro Member.