Sensör CSV verisi nasıl temizlenir?

Ayırıcı ve ondalık işareti

Sensör dışa aktarımları, onları üreten yazılıma ve bölgesel ayarlara göre değişir. Türkçe ayarlı dışa aktarımlar genellikle sütun ayırıcı olarak noktalı virgül, ondalık işareti olarak virgül kullanır; varsayılan bir içe aktarma bunları yanlış okuyabilir. Önce ayırıcıyı ve ondalık işaretini doğrulayın. '4,20' yazılı bir değer, ayrıştırıcı virgülü binlik ayırıcı sanırsa 420 olur. Ardından kodlamayı, başlık satırını, zaman damgası biçimini ve saat dilimini kontrol edin; her sütunun tek bir birimi olduğundan emin olun.

Temizliğe başlamadan önce dosyanın değiştirilmemiş bir kopyasını saklayın. Sonraki her adım, o kopyaya uygulanan kayıtlı bir kural olmalıdır ki sonuç yeniden üretilebilsin ve sorgulanabilsin.

Hipotetik bir basınç kaydı

Hipotetik bir basınç kaydı: ayırıcı noktalı virgül, ondalık işareti virgül. Üç satır: 08:00:00;4,20, 08:00:01;-999, 08:00:02;4,25.

• Ayırıcı ';', ondalık işareti ',' olarak okunur: 4,20 bar. Ondalık işaret yanlış okunursa aynı değer 420 olabilir.
• Bu örnekte -999 bir sensör hata kodudur. Eksik olarak işaretlenir; sıfır yapılmaz, değer olarak tutulmaz.
• Geçerli okumaların ortalaması: (4,20 + 4,25) / 2 = 4,225 bar.

-999 bırakılırsa ortalama (4,20 − 999 + 4,25) / 3 ≈ −330,18 bar çıkar; bu sensör için fiziksel olarak anlamsızdır. Ham dosyada üç satır da durur, bu yüzden adım sonradan denetlenebilir.

Temizlik hataları

Birinci hata, eksik ile sıfırı karıştırmaktır. Bağlantı koptuğunda sıfır yazılmışsa veri, sensörün gerçekten sıfır ölçtüğünü söyler. İkincisi, aykırı değerleri bakmadan silmektir; bir pik gerçek bir olay olabilir. Üçüncüsü, zaman damgası aynı olan satırların hepsini hata saymaktır: değerleri farklıysa önce nedenini bulun, tam kopya değilse silmeyin. Son olarak, temizlenmiş dosyanın üzerine yazmak, ham veriye dönüş yolunu kapatır.

Sık sorulanlar