inflearn logo

Thực tiễn đánh giá và đảm bảo an toàn LLM của kỹ sư AI ở Thung lũng Silicon

Xây dựng một hệ thống đánh giá thực tiễn để đo lường và quản lý chất lượng, mức độ an toàn của các hệ thống LLM trong môi trường production. Phân tích nhật ký hoạt động thực tế của chatbot cửa hàng trực tuyến giả lập, đồng thời tự tay xây dựng toàn bộ quy trình đánh giá, từ phân loại các trường hợp thất bại, kiểm chứng LLM-as-a-Judge, Safety Eval đến kiểm thử hồi quy CI.

1 học viên đang tham gia khóa học này

Độ khó Trung cấp trở lên

Thời gian Không giới hạn

CI/CD
CI/CD
nullsafe
nullsafe
LLM
LLM
RAG
RAG
CI/CD
CI/CD
nullsafe
nullsafe
LLM
LLM
RAG
RAG

Bạn sẽ nhận được điều này sau khi học.

  • Phân tích danh sách lỗi và xây dựng bộ dữ liệu đánh giá, phát triển bộ chấm điểm bằng Python và bộ phân xử bằng LLM

  • Triển khai hệ thống xác thực lời gọi công cụ và đánh giá an toàn (Agent Eval·Safety Eval)

  • Kiểm tra độ tin cậy vận hành, kiểm thử hồi quy tích hợp với CI và lập báo cáo phát hành

Khuyến nghị cho
những người này

Khóa học này dành cho ai?

  • Kỹ sư backend/AI từng xây dựng chatbot hoặc chức năng RAG bằng API LLM

  • Nhà phát triển cần giải thích định lượng những thay đổi về chất lượng trước khi triển khai.

  • Trưởng nhóm kỹ thuật thiết kế tiêu chí đánh giá và chiến lược kiểm thử

Cần biết trước khi bắt đầu?

  • Kinh nghiệm gọi API LLM bằng Python

  • Kinh nghiệm phát triển chatbot hoặc hệ thống RAG

  • Hiểu các khái niệm cơ bản về kiểm thử phần mềm

Xin chào
Đây là codebridge

Xác minh Inflearn

Xác minh sự nghiệp

2,207

Học viên

227

Đánh giá

37

Trả lời

4.7

Xếp hạng

18

Các khóa học

Tôi chia sẻ những kinh nghiệm và bí quyết tích lũy được qua quá trình trực tiếp thử sức tại Thung lũng Silicon.

Kinh nghiệm

- Hiện đang theo học chương trình thạc sĩ AI tại một trường cao học ở Thung lũng Silicon, Hoa Kỳ

- Nghiên cứu viên tại Phòng thí nghiệm Hệ thống AI và Dữ liệu

- Cựu kỹ sư nghiên cứu và phát triển phần mềm tại Tập đoàn H (hơn 6 năm)

- Người đóng góp cho các dự án mã nguồn mở như AWS, Qualcomm

- Đã thực hiện nhiều dự án phát triển phần mềm dựa trên lập trình AI và tác tử AI.

- Vận hành nội dung đào tạo phát triển AI và phần mềm 'Codebridge'

 

[Tiếng Anh]

Dựa trên kinh nghiệm và trải nghiệm của mình, tôi muốn chia sẻ những bí quyết và mẹo hữu ích, đồng thời cập nhật các xu hướng trên thế giới. Cảm ơn bạn đã hợp tác!

Kinh nghiệm

Nhà phát triển tại một tập đoàn CNTT lớn ở Hàn Quốc (hơn 6 năm)

Bằng cử nhân Kỹ thuật máy tính

Thêm

Chương trình giảng dạy

Tất cả

21 bài giảng ∙ (3giờ 51phút)

Tài liệu khóa học:

Tài liệu bài giảng
Ngày đăng: 
Cập nhật lần cuối: 

Đánh giá

Chưa có đủ đánh giá.
Hãy trở thành tác giả của một đánh giá giúp mọi người!

Khóa học khác của codebridge

Hãy khám phá các khóa học khác của giảng viên!

Khóa học tương tự

Khám phá các khóa học khác trong cùng lĩnh vực!

Ưu đãi có thời hạn

1.110.858 ₫

29%

1.578.587 ₫