Bài 6/12 · Máy học như thế nào · Giáo án
Học từ phần thưởng
Một trò vỗ tay nóng lạnh và một phòng thí nghiệm trên trình duyệt, nơi học sinh thiết kế phần thưởng cho một con robot tập đi, cho thấy máy học đúng những gì mình thưởng.
Học sinh có thể
- mô tả học từ phần thưởng là thử, nhận phản hồi rồi điều chỉnh
- giải thích rằng máy học đúng thứ mà phần thưởng đo, có thể khác với điều mình muốn
- phát hiện kẽ hở trong một phần thưởng và đề xuất phần thưởng tốt hơn
- so sánh học từ phần thưởng với học từ ví dụ có nhãn
Chuẩn bị
- Một nhiệm vụ bí mật viết trong mẩu giấy gấp, ví dụ "chạm vào cửa sổ" hoặc "cầm cây bút đỏ lên"
- Máy chiếu và một máy của thầy cô có internet, hoặc vài máy cho học sinh làm theo cặp
- Mở sẵn trang ManuAI /play/lab/kit-learns-to-walk (miễn phí, không cần tài khoản)
- Mỗi học sinh một phiếu học tập
Từ cần biết
- Phần thưởng:
- Tín hiệu báo "làm vậy là tốt", đưa ra sau một hành động.
- Phản hồi:
- Thông tin cho biết mình làm tốt đến đâu, để điều chỉnh lần sau.
- Kẽ hở:
- Cách lấy được phần thưởng mà không làm đúng điều người ta thật sự muốn.
Hoạt động chính · Trên trình duyệt: ManuAI
Nóng hay lạnh, rồi dạy robot tập đi
Một bạn đi tìm nhiệm vụ bí mật chỉ nhờ cả lớp vỗ tay to dần hay nhỏ dần. Sau đó, trên một màn hình chiếu chung hoặc theo cặp, cả lớp thiết kế phần thưởng trong một phòng thí nghiệm của ManuAI, nơi chương trình dạy chú cáo tập đi, và xem nó lách luật khi phần thưởng được đặt cẩu thả.
Trang ManuAI cho bài này
- Kit tập đi ai.manusignal.com/vi/play/lab/kit-learns-to-walk
- Dạy Kit một điệu nhạc (thêm) ai.manusignal.com/vi/play/lab/teach-kit-a-beat
Tiến trình 45 phút · 45 phút
| Khởi động8 phút | Vỗ tay nóng hay lạnh
|
|---|---|
| Hoạt động17 phút | Kit tập đi
|
| Luyện tập15 phút | Thiết kế phần thưởng trên giấy
|
| Tổng kết5 phút | Thưởng gì được nấy
|
Lưu ý cho thầy cô
- Thiết bị: một màn hình chiếu là đủ cho bài này. Các phòng thí nghiệm của ManuAI miễn phí và không cần tài khoản. Không bao giờ yêu cầu học sinh tạo tài khoản trên trang khác.
- Trò vỗ tay ở lớp đông: cho từng dãy vỗ lần lượt, hoặc chỉ một bạn gõ bàn hay gõ trống cho đỡ ồn. Chọn nhiệm vụ an toàn và ở ngay trong lớp.
- Hiểu lầm: "robot hư" hay "cố tình gian lận". Nó không có ý định gì cả. Nó lặp lại bất cứ điều gì làm điểm tăng lên, nên kẽ hở là dấu hiệu phần thưởng được viết chưa chặt.
Đáp án phiếu kiểm tra nhanh
- Một robot tập đi chỉ được thưởng theo quãng đường tiến về phía trước. Nó học cách lao người về trước rồi ngã. Vì sao? B. Ngã về phía trước vẫn được thưởng, mà phần thưởng không nhắc gì đến việc đứng thẳng
- Kẽ hở trong một phần thưởng là gì? Cho một ví dụ. Câu trả lời tốt: Là cách lấy được điểm mà không làm đúng điều người ta thật sự muốn. Ví dụ robot được thưởng khi nhặt rác có thể làm rơi rác rồi nhặt lại.
- Khi học từ phần thưởng, sau mỗi lần thử người học nhận được gì? D. Một điểm số hay tín hiệu cho biết lần thử đó tốt đến đâu
Miễn phí in và chia sẻ trong lớp học và ở nhà.ManuAI · học AI miễn phí cho mọi người · ai.manusignal.com/vi