Học tăng cường cho lập trình viên (tác giả trực tiếp giảng dạy)

'Học tăng cường', công nghệ cốt lõi cho doanh nghiệp tương lai
Chúng tôi sẽ giải thích các khái niệm cơ bản một cách dễ hiểu và chi tiết. 🦾

■ Tổng quan về khóa học

Bài giảng này được biên soạn dựa trên cuốn sách “ Học tăng cường cho lập trình viên ” . Tác giả sẽ đích thân giảng dạy những nội dung không thể đưa vào bài báo . Trong 17 ngày, 2 giờ mỗi ngày , bạn có thể biến học tăng cường thành công nghệ của riêng mình . Từ thời điểm này, học tăng cường sẽ không còn là bức tường khó khăn và khó hiểu nữa mà sẽ là một công cụ tuyệt vời mà bạn có thể thoải mái sử dụng để gia tăng giá trị của mình .

Các ví dụ được sử dụng trong bài giảng có thể được tải xuống từ trang web https://github.com/multicore-it/rl .

■ Phiên bản sửa đổi của bài giảng đã được phát hành.

Phiên bản sửa đổi của 『Học tăng cường cho lập trình viên』 cuối cùng đã được phát hành cho những ai còn ngần ngại học học tăng cường vì lý thuyết toán học và mã phức tạp. Thông qua học tăng cường, bạn sẽ phát triển các kỹ năng phát triển thực tế có thể tạo ra các hệ thống thông minh có thể đưa ra phán đoán và tự thích ứng trong các tình huống không thể đoán trước. 🔗Phím tắt

• Thêm các giải thích thân thiện và trực quan hơn.
• Đã thêm các công cụ thực hành hiện đại (Stable Baselines3) và các kỹ thuật (Optuna).
• Chúng tôi đã triển khai rất nhiều dự án ví dụ thực tế (chiến lược phân bổ tài sản, luân chuyển chi nhánh).

■ Tại sao lại là Học tăng cường?

Học tăng cường dựa trên kỹ năng chứ không phải vốn.

Học tăng cường không học từ dữ liệu được gắn nhãn trước mà tự tạo dữ liệu trong khi chạy tác nhân, do đó, gánh nặng về dữ liệu ít hơn và yêu cầu ít năng lực tính toán hơn . Đây là một lĩnh vực có thể bị loại vì nó phụ thuộc rất nhiều vào sự hiểu biết sâu sắc về các thuật toán học tăng cường và kỹ năng lập trình để giải quyết vấn đề.

Học tăng cường là công nghệ quan trọng cho sự đổi mới kinh doanh trong tương lai.

Học tăng cường là công nghệ AI phù hợp với môi trường có vốn hạn chế như Hàn Quốc . Nhiều vấn đề phát sinh trong môi trường kinh doanh có thể được giải quyết bằng kỹ năng lập trình và thuật toán học tăng cường , và các dịch vụ và sản phẩm tiên tiến hơn có thể được tạo ra dựa trên các đặc điểm này .

■ Tính năng của khóa học

■ Nội dung học tập

Trong phần về các khái niệm cơ bản của học tăng cường, trước tiên chúng tôi giải thích các lý thuyết thống kê và toán học cần thiết cho học tăng cường, sau đó giải thích chi tiết quá trình từ thuật toán MDP đến thuật toán DQN .

Trong phần về mạng nơ-ron nhân tạo, thay vì tập trung vào mạng nơ-ron nhân tạo, quá trình dẫn đến mạng nơ-ron nhân tạo được giải thích từng bước, bắt đầu từ hồi quy tuyến tính . Vì nó giải thích từ những điều cơ bản để ngay cả những người không có khái niệm về trí tuệ nhân tạo cũng có thể hiểu được , bất kỳ ai chỉ có một chút kiến ​​thức về lập trình cũng có thể dễ dàng hiểu được .

Trong phần học tăng cường dựa trên giá trị , thuật toán DQN được giải thích theo hướng tập trung vào mã . Trong số các thuật toán học tăng cường khác nhau, học tăng cường dựa trên giá trị tương đối dễ hiểu, vì vậy nó được giới thiệu đầu tiên .

Trong phần học tăng cường dựa trên chính sách , các thuật toán REINFORCE, A2C và PPO được giải thích thông qua mã và được hướng dẫn thực hiện trực tiếp . Các thuật toán dựa trên chính sách khó hiểu hơn các thuật toán dựa trên giá trị, nhưng chúng cho thấy hiệu suất tương đối ổn định, do đó cần dành nhiều thời gian để giải thích chúng .

Cuối cùng, chúng tôi giải thích về điều chỉnh học tăng cường . Nó bao gồm mọi thứ từ lý thuyết chi tiết về mạng nơ-ron nhân tạo, điều cần thiết để điều chỉnh , đến các kỹ thuật tối ưu hóa Bayesian, giúp điều chỉnh hiệu quả các tham số thuật toán .

■ Đo lường lỗi chương trình

Vui lòng tham khảo tin tức mới nhất "Hướng dẫn hành động lỗi chương trình (ngày 10 tháng 12 năm 2022)"