Ünite 02 / 03
Yorumlanabilirlik
Modelin sayıyı neye dayanarak ürettiğinin okunabilir olup olmadığının ölçülmesi: bir kararla ilgili sorulabilecek sorulardan kaçının çıktıyla, kaçının bir açıklamayla cevaplandığı, modelden okunan önem sırasıyla bozarak ölçülen sıranın kaç sırada ayrıştığı ve ilişkili iki özniteliğin önemi nasıl bölüştüğü, yerel vekil modelin asıl modelin kararını kaç örnekte doğru anlattığı ve aynı örneğe iki yöntemin iki ayrı açıklama vermesi, kısmi bağımlılığın bütünde düz görünürken iki alt grupta ters yönde eğimli olması, kural listesi uzadıkça doğruluğun nereye geldiği ve hangi alt grupta en iyi aileye yaklaşılamadığı.
Yayın Güncelleme
Dersler
- 01 Yorumlanabilirlik İhtiyacı Bir karar hakkında sorulabilecek on iki sorunun kaçının modelin çıktısıyla, kaçının bir açıklamayla, kaçının hiçbiriyle kapanmadığının sayılması: çıktı tek başına 4 soruyu kapatıyor, açıklama ortalamada 8,58'e çıkarıyor, üç soru hiçbir açıklamayla kapanmıyor. Kararın döndüğü tek adımlık değişim sınama kümesinin 159 abonesinde bulunuyor, batı bölgesinde otuz iki abonenin ikisinde bulunuyor; on üç alt gruba bakıldı ve eşiği geçen on ikisinde kapanan soru sayısı en iyi 8,89 ile en kötü 7,88 arasında değişiyor, açıklık 1,02 sorudur. 6 dk okuma
- 02 Öznitelik Önemi Aynı model üzerinde iki küresel önem sıralamasının yan yana ölçülmesi: katsayılardan okunan sıra ile sütunu bozarak ölçülen sıra on iki sütunun onunda ayrışıyor ve en büyük kayma beş sıradır. Oynaklık katsayı sırasında üçüncü, bozma sırasında sekizincidir. İlişkili iki sütun önemi bölüşüyor: kişi başına tüketimin önemi tam modelde 0,0018, ortalama tüketim çıkarılıp model yeniden eğitildiğinde 0,0387'ye çıkıyor. On üç alt grupta ölçülen en önemli sütunun kayıp artışı 0,0162 ile 0,1882 arasında değişiyor ve bir alt grupta ilk sıra değişiyor. 5 dk okuma
- 03 Yerel Açıklama Yöntemleri Tek bir tahmini açıklayan iki yöntemin aynı abonelere sorulması ve açıklamanın sadakatinin ölçülmesi: yerel vekil model komşuluktaki kararların ortalama 0,9417'sini doğru veriyor, ama 252 abonenin 41'inde komşuluk tek etiket taşıdığı için açıklama boş çıkıyor. Vekil modelle katkı payı dağıtımı 211 dolu açıklamanın 145'inde ayrı sütun gösteriyor. Sadakat batı bölgesinde 0,9664 ile en yüksek, orada boş açıklama oranı 0,4688; en düşük sadakat 0,9027 ile en üst tarife basamağındadır ve açıklık 0,0637'dir. 7 dk okuma
- 04 Kısmi Bağımlılık ve Etkileşim Bir sütunun modele bütün olarak ne yaptığının sayı olarak basılması ve ortalamanın ne gizlediğinin sayılması: karar ağacında beş sütunun üçü bütünde düz görünüyor, bunların ikisinde alt gruplar ters yönde eğimli. Hane büyüklüğünün kısmi bağımlılığı bütünde -0,0069 ile düzdür, üçüncü tarife basamağında +0,1301, doğu bölgesinde -0,1891 ve açıklık 0,3192'dir. Memnuniyette açıklık 0,2189'dur. Okuma sayısı hem bütünde hem on iki alt grupta tam olarak 0,0000 eğimlidir: düz görünen her sayı bir etkileşim gizlemiyor. 4 dk okuma
- 05 Doğası Gereği Yorumlanabilir Modeller Açıklamayı sonradan üretmek yerine modeli baştan okunabilir kurmanın bedelinin ölçülmesi: iki kurallık, dört koşullu bir sıralı liste sınamada 0,7897 veriyor, otuz üç sütunlu en iyi ailenin 0,8056'sına 0,0159 yani dört abone kalıyor. Listeyi üç ve dört kurala uzatmak yaklaştırmıyor, 0,7857'ye geri düşürüyor. On üç alt gruba bakıldı, okunan on ikisinin altısında en iyi aileye 0,02 içinde yaklaşılamıyor; en uzağı merkez bölgesidir, 0,7414 yerine 0,6552 ve fark 0,0862. Üç alt grupta kural listesi en iyi aileyi geçiyor. 5 dk okuma