Bu tür bir performans testi için, basit bir geçiş/başarısız sonuç verecek bir sistem diye bir şey yoktur. Gerçek hayatta, sisteminizi değiştirmek bazı şeyleri daha hızlı ve diğer bazı şeyleri yavaşlatır, bu yüzden genellikle “daha iyi” ve “daha iyi değil” arasında bir seçim değildir, daha iyi farklı türler arasında bir seçimdir. (Tabii ki, kesinlikle daha kötü olan durumlardan kaçınmak istersiniz.)
Geçmişte yaptığım bu, istatistikleri zaman içinde tutmaktır. Testlerinizi her çalıştırdığınızda, sonuçları revizyon numarası ve test zamanlamaları ile bir SQL veritabanına bırakın. Ardından istediğiniz zaman ve istediğiniz zaman grafikleri çizebilirsiniz (ideal olarak küçük bir web uygulamasında, ekibindeki herkes bunları inceleyebilir) ve performansınızın yükselip düşmediğini veya performansın belirli bir revizyondan sonra nasıl emildiğini görün. Bununla birlikte, burada önemli olan, grafiğinin olması gerektiğidir. Bu şekilde insan gözü ona bakıp eğilimleri bulabilir. Tüm hafta boyunca, verileri sayısal olarak analiz etmek için bir AI algoritması oluşturmaya çalışabilirdiniz, ama asla bir insanın desen tanıma yeteneğini yitirmezdi.