Giảm cân giảm cân là gì?


10

Tôi đang bắt đầu với việc học sâu và tôi có một câu hỏi mà tôi không thể tìm thấy câu trả lời, có lẽ tôi đã không tìm kiếm đúng. Tôi đã thấy câu trả lời này , nhưng vẫn chưa rõ giảm cân giảm cân là gì và nó liên quan đến chức năng giảm cân như thế nào.

Câu trả lời:


9

Phân rã trọng lượng chỉ định chính quy trong mạng lưới thần kinh.

Trong quá trình đào tạo, một thuật ngữ chính quy được thêm vào tổn thất của mạng để tính toán độ dốc backpropagation. Các weight decaygiá trị xác định cách chi phối hạn quy tắc này sẽ nằm trong tính toán gradient.

Theo nguyên tắc thông thường, bạn càng có nhiều ví dụ đào tạo, thuật ngữ này càng yếu. Càng nhiều tham số bạn có thuật ngữ này càng cao.

Vì vậy, Trọng lượng phân rã là một thuật ngữ chính quy hóa phạt trọng lượng lớn. Khi hệ số phân rã trọng lượng lớn, hình phạt cho trọng lượng lớn cũng lớn, khi đó trọng lượng nhỏ có thể tự do phát triển.

Vì vậy, bây giờ nếu bạn quay lại đọc câu trả lời mà bạn đã liên kết trong câu hỏi của mình, nó sẽ hoàn toàn có ý nghĩa ngay bây giờ.


1
Tôi nghĩ rằng nó đang bắt đầu có ý nghĩa ... Cảm ơn bạn!
Pablo Arnau González
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.