Offline AUC’si ürkütücü derecede yüksek hurda tahmin modeli, canlı skorlamanın ilk haftasında sık düşer. Alışılmış bahaneler drift ve eksik tag’dir. Daha sessiz bir başarısızlık look-ahead’tir: eğitim birleştirmesi, özelliklerin temsil ettiğini iddia ettiği karar anında henüz var olmayan bir final-test veya disposition etiketini yapıştırmıştır. Offline’ta etiket korele geç sensörlere sızar. Online’da o sütunlar boş veya hâlâ sıfırdır. Doğruluk çöker. Kimse “yanlış yeniden eğitmedi”—tablo dünyanın ne zaman bilindiği hakkında yalan söyledi.
Bu, historian’lar arası NTP saat kayması değildir, hurda kodu taksonomi birleşmesi değildir, operatör override telemetrisi de değildir. Birleştirmede olay-zamanı dürüstlüğüdür.
Yalan nasıl kurulur
Bir lot satırında t0…tn proses tag’leri ve saatler sonra final testte damgalanmış bir fail bayrağı vardır. Veri mühendisi seri üzerinden birleştirir ve “kolaylık için” fail bayrağını her erken pencerede tutar. Aslında geç bir metroloji sonucu olan bir özellik aynı çerçeveye sızar. Çapraz doğrulama yine iyi görünür çünkü her fold aynı kirli tabloyu görür.
Nokta-zaman doğru eğitim demektir: her karar zaman damgası için yalnızca o anda bilinebilir sütunlar. Etiketler gelecekten gelebilir; özellikler gelemez.
Her şampiyon modelden önceki kapılar
Nokta-zaman denetimi zorunlu kılın: eğitim satırlarından bir örneklem için her özelliğin kaynak olay zamanının ≤ karar zamanı olduğunu kanıtlayın. Disposition kodunu önceki istasyonlara, skorlama kodunun asla okumadığı açık bir “yalnızca etiket” kanalı olmadan yayan birleştirmeleri yasaklayın.
Online yol bir sütunu üretemiyorsa o sütun eğitimde de olmamalıdır—veya offline değerlendirmede aynı şekilde maskelenmelidir. Train–serve paritesi slogan değil şema sözleşmesidir.
Panoların göstermesi gereken
Train–serve çarpıklığını izleyin: offline’ta yoğun özelliklerde null’ı olan skorlanmış satır oranı ve haftalık karar-zamanı denetim örneklemi. Offline metrikler bir “veri hattı iyileştirmesi”nden sonra sıçrarsa, çerçeveye gelecek bir sütunun inip inmediğini sorun.
Kısa kural: model dünün hatalarından öğrenebilir. Yarına ait cevabı sensör kılığında eline alamaz.