01
Yeniden Üretilebilirlik
Aynı veriyle aynı modelin yeniden üretilip üretilemediğinin kalem kalem sayılması: sürümsüz ve sabitlemesiz tabanda üç koşumun üç ayrı sınama isabeti vermesi, deney takibinde parametre, ölçüt ve çıktı kaydının hangi koşumu yeniden bulunabilir kıldığı ve kaydın kendi bedeli, veri ile model sürümlemesinin aynı ada verilen iki farklı içeriği ayırması, öznitelik deposunun eğitim ile çıkarım arasında tuttuğu tutarlılık ve aynı ağırlıklarla isabetin eğitim yolunda 0,8067 sunum yolunda 0,7800 çıkması, sapmanın öznitelik penceresi ikiye çıkarıldığında tümüyle kapanması, ortam sabitlemede beş kalemden üçünün üç koşumu birebir aynı yapması ile ızgara ve yuvarlama kalemlerinin katkısının ölçülememesi, model kayıt defterinde aşama geçişlerinin hangi koşuma bağlandığı.
- 01 MLOps Nedir Yazılım mühendisliği pratiğinin model üreten bir hatta uygulanmasının kurulması ve sabitlemesiz tabanın ölçülmesi: hattan çıkan 2200 satır 40 m3 eşiğiyle etiketlendiğinde dağılım 1752 ile 448 oluyor, taban sınıf oranı 0,7964 çıkıyor, 27 adaylık ızgarada aranan model eğitimde 0,7931 sınamada 0,8067 veriyor, ama sınama kümesinin kendi taban oranı da 0,8067 olduğu için model 600 sınama satırının hiçbirine yüksek demiyor ve duyarlılığı 0,0000 kalıyor; hiçbir kalem sabitlenmediğinde aynı iş üç kez koşturulduğunda ağırlık üç koşumda da aynı kalırken sınama isabeti 0,8067, 0,7955 ve 0,8078 çıkıyor ve üç sayının üçü de kendi sınama kümesinin taban oranına eşit olduğu için fark modelden değil kümenin değişmesinden geliyor.
- 02 Deney Takibi Parametre, ölçüt ve çıktı kaydının bir koşumu yeniden bulunabilir kılmasının ölçülmesi: on sekiz koşumluk bir uzayda kayıt tutulmadığında bildirilen bir sayıyı üreten ağırlığı bulmak için 0,8078 hedefinde 3, 0,7955 hedefinde 2, 0,7950 hedefinde 5, 0,8067 hedefinde 1 ve hiç üretilmemiş bir hedefte 18 koşum yeniden koşturuluyor, tam kayıtla beşinde de 0 koşum tekrarlanıyor; sayının kendisi koşumu tanımlamıyor çünkü on sekiz koşumun on dördü 0,8067 veriyor ve yeniden koşturarak bulunan aday on dört adaydan yalnız biri oluyor; kaydın bedeli koşum başına dokuz alan ve toplam 162 alan, yalnız ölçüt kaydeden 36 alanlık defter ise beş aramadan yalnız birini kısaltıyor.
- 03 Veri ve Model Sürümleme Aynı ada verilen iki farklı içeriğin ayrılmasının ölçülmesi: dört teslim aynı `olcum-2026` adı altında 2200, 2180, 2160 ve yine 2200 satır getirdiğinde sürümsüz kurulumda tek bir ad dört koşumun tamamını belirsiz bırakıyor ve üç ayrı sınama sayısı 0,8067, 0,8064 ile 0,8078 aynı adın arkasında duruyor, içerik imzasıyla adlandırıldığında üç ad doğuyor ve belirsiz koşum sıfıra iniyor; model tarafında dört koşumun ağırlığı birebir aynı olduğu için yalnız ağırlığa bakan bir model kimliği dört koşumu tek sürümde topluyor ve ancak veri imzası eklendiğinde üç sürüm ayrılıyor; bedel olarak tarih adlı şema 8740 satır saklarken içerik adlı şema 6540 satır saklıyor ve her teslimde imza için 8740 satır okunuyor; çıktı imzası hattın yuttuğu değişikliği görmüyor, altmış kayıt iki kez geldiğinde kaynak imzası değişirken çıktı imzası ve isabet birebir aynı kalıyor.
- 04 Öznitelik Depoları Eğitim ile çıkarım arasında özniteliğin aynı yolla hesaplanmasının ölçülmesi: aynı ağırlıklarla sınama isabeti eğitim yoluyla 0,8067, sunum yoluyla 0,7800 çıkıyor ve model hiç değişmiyor. Aradaki 0,0267 tümüyle özniteliğin hangi geçmişle hesaplandığından geliyor, 600 sınama satırının 22'sinde tahmini çeviriyor, 19'unu bozup üçünü düzeltiyor ve öznitelik penceresi ikiye çıkarıldığında tümüyle kapanıyor. Öznitelik deposu iki hesabı tek hesaba indirip sapmayı sıfırlıyor; karşılığında 6600 değerlik bir saklama, modele bakan kolda dördüncü bir aşama ve öznitelik kodu değiştiğinde saklananın tamamının yeniden yazılması bedelini getiriyor.
- 05 Ortam Sabitleme Bir koşumu ikinci kez aynı sonuca ulaştıran kalemlerin tek tek sayılması: sabitlemesiz kurulumda üç koşum aynı ağırlığı bulduğu hâlde 0,8067, 0,7955 ve 0,8078 gibi üç ayrı sınama isabeti veriyor, çünkü okunan satır, öznitelik penceresi, yuvarlama basamağı, aranan ızgara ve sınama bölünmesi her koşumda oynuyor. Beş kalemden üçü sabitlendiğinde üç koşum birebir aynı çıkıyor, ızgara ile yuvarlama sabitlenmese de sonuç değişmiyor ve teker teker sınandığında katkısı ölçülebilen yalnız iki kalem kalıyor. Sabitlemenin kendi bedeli on beş kalem kaydı, on sekiz fazladan aday değerlendirmesi ve altmış fazladan satır okumasıdır.
- 06 Model Kayıt Defteri Bir modelin yaşam döngüsü aşamalarının ve her aşama geçişinin hangi koşuma bağlandığının sayılması: on altı koşumluk bir kayıtta yalnız iki ayrı ağırlık üçlüsü çıkıyor, üretimdeki üçlüyü on iki koşum birebir taşıyor ve bu on iki koşum kendi sonucunu 0,7950 ile 0,8067 gibi iki ayrı sayıyla bildiriyor. Kayıt defteri olmadan üretimdeki modelin hangi koşumdan geldiğini bulmak için on altı kaydın tamamına bakılıyor ve arama on iki adaydan aşağı inmiyor, geri alınacak önceki üretim koşumu ise hiç bulunamıyor; dört aşama ve beş geçişi koşum kimliğine bağlayan defterle iki sorunun ikisi de tek kayıt okunarak yanıtlanıyor ve defterin bedeli yirmi bir kayıttır.