Insurance GenAI Claims

Insurance GenAI Claims

Feedback 05: Model change control

Risk compliance › Feedbacks

61 of 61 in this book · 1 min read

Challenge: ../challenges/05-model-change-control.md · Người hỏi: Robert Tan (Chief Risk & Compliance Officer)

1. Intention: khách thực sự muốn biết gì?

Robert cần quy trình quản lý thay đổi.

2. Điều nên tránh

  • Tự động cập nhật mô hình mới nhất.
  • Không kiểm thử lại.
  • Bỏ qua phê duyệt.

3. Cách trả lời

CCA (Control – Compliance – Audit)

Khung nói ngắn gọn:

  1. Biện pháp kiểm soát
  2. Tuân thủ: xác nhận cùng pháp chế/khách, không đoán
  3. Bằng chứng kiểm toán (log, báo cáo)
  4. Hỏi đầu mối hoặc chính sách hiện có

4. Câu trả lời mẫu (ngắn gọn)

We pin a specific model version, so nothing changes without us knowing. Any new version is tested on your test set, compared with the current one, and approved by your team before going live. If results are worse, we stay on the old version. Who should approve model changes on your side?

Khoảng 52 từ, nói trong khoảng 25 giây.

Cách giữ ngắn gọn mà vẫn đạt mục tiêu: mở bằng kết luận, mỗi ý một câu, không giải thích kỹ thuật trừ khi được hỏi, và dừng lại bằng câu hỏi để khách dẫn tiếp.

5. Vì sao câu trả lời này hiệu quả

Khoá phiên bản, kiểm thử, phê duyệt: quy trình thay đổi chuẩn.