რატომ გამოვიყენოთ კატეგორიული ჯვარედინი ენტროპია?

Სარჩევი:

რატომ გამოვიყენოთ კატეგორიული ჯვარედინი ენტროპია?
რატომ გამოვიყენოთ კატეგორიული ჯვარედინი ენტროპია?
Anonim

კატეგორიული კროსენტროპია არის ზარალის ფუნქცია, რომელიც გამოიყენება მრავალკლასიანი კლასიფიკაციის ამოცანებში. ეს არის ამოცანები, სადაც მაგალითი შეიძლება მიეკუთვნებოდეს მხოლოდ ერთს მრავალი შესაძლო კატეგორიიდან და მოდელმა უნდა გადაწყვიტოს რომელი. ფორმალურად, ის არის შექმნილია იმისათვის, რომ რაოდენობრივად გამოავლინოს განსხვავება ორ ალბათობის განაწილებას შორის.

რატომ გამოვიყენოთ ჯვარედინი ენტროპია MSE-ის ნაცვლად?

პირველი, ჯვარედინი ენტროპია (ან softmax დაკარგვა, მაგრამ ჯვარედინი ენტროპია უკეთ მუშაობს) კლასიფიკაციისთვის MSE-ზე უკეთესი საზომია, რადგან გადაწყვეტილების ზღვარი კლასიფიკაციის ამოცანაში დიდია(რეგრესიასთან შედარებით). … რეგრესიის პრობლემებისთვის, თქვენ თითქმის ყოველთვის იყენებდით MSE-ს.

რა განსხვავებაა იშვიათ ჯვარედინი ენტროპიასა და კატეგორიულ ჯვარედინი ენტროპიას შორის?

ერთადერთი განსხვავება იშვიათ კატეგორიულ ჯვარედინი ენტროპიასა და კატეგორიულ ჯვარედინი ენტროპიას შორის არის ნამდვილი ეტიკეტების ფორმატი. როდესაც გვაქვს ერთი ეტიკეტის, მრავალკლასიანი კლასიფიკაციის პრობლემა, ეტიკეტები ურთიერთგამომრიცხავია თითოეული მონაცემისთვის, რაც ნიშნავს, რომ თითოეული მონაცემის ჩანაწერი შეიძლება მიეკუთვნებოდეს მხოლოდ ერთ კლასს.

როგორ განმარტავთ კატეგორიულ ჯვარედინი ენტროპიის დაკარგვას?

ჯვარედინი ენტროპია იზრდება, როდესაც ნიმუშის სავარაუდო ალბათობა განსხვავდება რეალური მნიშვნელობიდან. მაშასადამე, 0.05 ალბათობის პროგნოზირება, როდესაც რეალურ ეტიკეტს აქვს 1 მნიშვნელობა, ზრდის ჯვარედინი ენტროპიის დაკარგვას. აღნიშნავს სავარაუდო ალბათობას 0-დან 1-მდე ამ ნიმუშისთვის.

რატომ არის ჯვარედინი ენტროპია კარგი?

საერთო ჯამში, როგორც ვხედავთ, ჯვარედინი ენტროპია უბრალოდ მოდელის ალბათობის გაზომვის საშუალებაა. ჯვარედინი ენტროპია სასარგებლოა, რადგან მას შეუძლია აღწეროს რამდენად სავარაუდოა მოდელი და თითოეული მონაცემთა წერტილის შეცდომის ფუნქცია. ის ასევე შეიძლება გამოყენებულ იქნას პროგნოზირებული შედეგის აღსაწერად ნამდვილ შედეგთან შედარებით.

გირჩევთ:

საინტერესო სტატიები
ჰყავდა თუ არა ოკეანეს და-ძმა?
Წაიკითხე მეტი

ჰყავდა თუ არა ოკეანეს და-ძმა?

ოკეანუსი იყო ურანის (ცა) და გაიას (დედამიწა) ტიტანის შთამომავლებიდან ყველაზე უფროსი. ჰესიოდე ჰესიოდე შემორჩენილია სამი ნაშრომი, რომლებიც ჰესიოდეს მიაწერეს ძველი კომენტატორების მიერ: საქმეები და დღეები, თეოგონია და ჰერაკლეს ფარი. მხოლოდ ფრაგმენტებია მასზე მიკუთვნებული სხვა ნაწარმოებებიდან.

დამზადდა კუმინსი?
Წაიკითხე მეტი

დამზადდა კუმინსი?

ისინი დამზადებულია Columbus-ის საშუალო დონის ძრავის ქარხანაში (CMEP), კამინსის მსოფლიო შტაბ-ბინის სამხრეთით კოლუმბუსში, ინდ. ჩვენ შევჩერდით, რომ გვენახა ეს პოპულარული სატვირთო ძრავა. აშენებულია. ვინ შექმნა თავდაპირველად კამინსი? 1919 წელს, Clessie Cummins დააარსა Cummins Engine Co, Inc (ახლანდელი Cummins, Inc).

არის სიტყვა ემპათიური?
Წაიკითხე მეტი

არის სიტყვა ემპათიური?

Empathetic არის ზედსართავი სახელი, რომელიც აღწერს ვინმეს ან რაღაცას, რომელიც გამოხატავს თანაგრძნობას. თანაგრძნობა არის სხვა ადამიანების ემოციების გაგების მაღალი ხარისხი. თანაგრძნობა და თანაგრძნობა ურთიერთშემცვლელია, მაგრამ სიმპათიურს ოდნავ განსხვავებული მნიშვნელობა აქვს.