Makaleler
Kusur genellikle ölçüm aracındadır
Son ayların en pahalı dersi, aynı zamanda en gösterişsiz olanı. Bir ölçüm tuhaf bir sayı verdiğinde, hata genellikle ölçülen şeyde değil, ölçümü yapan araçtadır. Aşağıdaki liste bir katalog niteliğindedir. Her madde, yanlış yerde saatlerce arama yapmaya mal olmuş gerçek bir vakadır.
Kendi araçlarımızın bizi yanılttığı durumlar
Araç, ürünü tekrar eder. Kontrol ettiği kodla aynı parçalardan oluşturulmuş bir kontrol betiği doğruluğu değil, birebir aynı olmayı teyit eder; yani ürünle tamamen aynı hatalara karşı kördür. Çözüm, farklı bir yoldan, farklı bir mekanizmayla veya doğrudan okuyarak ölçüm yapmaktır.
Araç yalnızca ilk eşleşmeyi okur. Bir betik, kurala uyan ilk öğeyi aldı ve beş eşleşme olan yerde "bir eşleşme" raporladı. Aracın sonuna kadar okuma yaptığı kanıtlanmadıkça, böyle bir araçtan gelen sıfır veya bir sonucunun hiçbir anlamı yoktur.
Bir koruma aracı yapısı gereği kördür. Araçlarımızdan biri, dosyaları alıntı ifadeler için tarıyor ancak yalnızca tırnak işareti içindeki metinleri çekiyordu. Köşeli parantez içine alınmış bir alıntı parçasını ise göremiyordu. Yeşil ışık yakan bir koruma aracı, yalnızca görebildiği sorun sınıfının yokluğunu kanıtlar, ötesini değil.
Boş dönen bir arama, temiz sonuç demek değildir. Çıktı olmaması "bulunamadı" anlamına gelir ve "bulunamadı" sonucu sorgudaki bir yazım hatasından da kaynaklanabilir. Negatif bir sonuç, ancak aynı sorgu var olduğu bilinen bir şeyi bulduktan sonra kabul edilir.
Kontrolden önceki onay geçerli değildir. Araç henüz çalışmadan yazılan "düzeltildi" raporu, mevcut durumu değil niyeti beyan eder. Biz durumu raporlarız.
Kendi sınırımız başkasının kusuru gibi görünür. Bizim tarafımızdaki bir istek sınırı (rate limit), bir ölçümde dış servisin hatası gibi göründü. Ölçülen şeyi suçlamadan önce, ölçüm aracının kendi tavanına çarpıp çarpmadığını kontrol edin.
İşe yarayan yöntemler
Ölçü birimini koddan alın. Araç, işine gelen bir ölçü birimi uydurmak yerine, birimini ölçülen koddan almalıdır. Bir kontrolün cümle içinde ne kadar ilerlediğini ölçtüğümüzde, kısmi denemeler ürünün kullandığı aynı mekanizma tarafından çalıştırıldı. Ortaya çıkan sayılara güvenilebilmesinin nedeni buydu: İzlenen yol ürünün bir taslağı değil, kendi yoluydu.
Her ölçümde tek bir değişiklik yapın. İki ölçüm arasında yalnızca tek bir şey değişir. Varyantlar numaralandırılır, her biri bir öncekinden tek bir düzenlemeyle ayrılır ve yalnızca kazanan tutulur. Aksi takdirde hangi düzenlemenin etkiyi, hangisinin maliyeti yarattığını söylemenin bir yolu kalmaz.
Hatalı olduğu anlaşılan araç kendi sayılarını geri çeker. Bir ölçüm aracının bozuk olduğu ortaya çıktığında, işimize gelenler de dahil olmak üzere ürettiği her sayı açıkça geri çekilir. Bu kendini cezalandırmak değildir; kayıtların kullanılabilir kalmasının tek yoludur.
Hala açık olan konular
Ölçüm araçlarının kendisini kontrol eden, yani "verdiği sıfır sonucuna inanılmadan önce bu aracın var olduğu bilinen bir şeyi bulmasını" şart koşan otomatik bir adımımız yok. Bu durum testi çalıştıran kişinin disiplinine bağlıdır, ki bu da yorgun bir akşamda atlanacağı anlamına gelir. Test maliyetini ikiye katlamadan bunu her çalıştırmaya nasıl dahil edeceğimiz hala açık bir sorudur.
Bununla bağlantılı bir sınırı da belirtmek gerekir: Bir ölçüm aracı her zaman sizin aklınızdaki durumu değil, çağrıldığı andaki durumu ölçer. Üzerinde çalışılan kopyadan alınan bir ölçüm yayındaki sürüm hakkında hiçbir şey söylemez ve eski verilerle alınan olumlu bir sonuç yalnızca dün hakkında bir beyandır.
Tüm yazılar
Her kural için ücretsiz alıştırma
Sitedeki her dil bilgisi kuralının bir alıştırma aracı vardır. Ücretsizdir ve kayıt gerektirmez.