Teslimat sistemini ölçün

Vermeniz gereken kararla başlayın

Ekip, yapay zekânın teslimatı iyileştirip iyileştirmediğini bilmek istiyor. Üretilen satırları saymak farklı soruyu yanıtlar. Metrik seçmeden önce yararlı sonucu ve kalite koşullarını tanımlayın.

Kurgusal dışa aktarma hizmetinde istenen sonuç, kabul edilen değişikliklerin daha az toplam çabayla güvenilir teslimatıdır. Hazırlığı, uygulamayı, incelemeyi, düzeltmeyi ve beklemeyi kaydedin. Başarısız olan veya terk edilen değişiklikleri dahil edin.

Sınırı açık tek hizmet kullanın. Deneysel web sitesini kritik ödeme hizmetiyle birleştirmek, ikisini de açıklamayan sayı üretebilir. Dönemleri veya ekipleri karşılaştırmadan önce bağlamı açıklayın.

Güncel tanımları kullanın

DORA’nın güncel teslimat modeli beş metrik içerir. Bunların kapsamı her özelliğin değeri veya kişinin katkısı değil, teslimat performansıdır. DORA metrik tanımları.

Gösterge paneli başka tanım kullanabilir. Sonucu yorumlamadan önce okuyun. Taiga’nın güncel dağıtım belgeleri, sağlayıcı dağıtım kayıtlarından türetilen dört metriği açıklar. Kurtarma ölçümü, sonraki başarılı dağıtımı kullanır. Bu, her üretim olayının eksiksiz kaydı değildir. Taiga tanımları.

Kurgusal değişiklik dizisini inceleyin

Hizmetin bir ayda on iki dağıtım yaptığını varsayın. Sekizi planlı değişiklikleri teslim eder. Dördü önceki yayınların sorunlarını onarır. Sayı on ikidir, ancak bileşim önemlidir.

Sonraki ay ekip on dağıtım yapar: dokuz planlı değişiklik ve bir onarım. Daha az dağıtım, daha çok yararlı işle birlikte gerçekleşebilir. Bu sayılar yorumlamayı gösterir; performans karşılaştırma ölçütü değildir.

Dağılımı da inceleyin. Uzun bir inceleme beklemesi ortalamada kaybolabilir. Tek hatadan gelen kurtarma ölçümü, gelecekteki güvenilirlik için zayıf kanıttır. Gözlem sayısını ve önemli istisnaları raporlayın.

Akışı sonuçlarla birlikte değerlendirin

Teslimat değişikliklerinin kullanıcıları etkileyip etkilemediğini kontrol etmek için hizmet sinyallerini kullanın. Dışa aktarmalar daha sık başarısız oluyorsa daha hızlı pipeline yeterli değildir. Uygun SLO veya açıkça tanımlanmış başka sonuç ölçüsü kullanın. SLO rehberi.

İnceleme çabası ve yeniden çalışma, sonucu açıklamaya yardımcı olur. Yapay zekâ uygulama süresini kısaltıyor ancak büyük diff’ler üretiyorsa inceleme kısıta dönüşebilir. Ortamları edinmek günler sürüyorsa hızlı kodlama toplam teslimat süresini az etkileyebilir.

Gözlenen kısıtı ele alan bir iyileştirme seçin. Örneğin desteklenen test ortamı sağlayın veya değişiklik boyutunu küçültün. Ekibin zayıflatılmış kontrollerden kaynaklanan görünürdeki hız kazanımını tespit edebilmesi için dengeleyici kalite metriği tanımlayın.

Ölçümü yararlı tutun

PR sayısı veya üretilen kod üzerinden kişisel sıralamalardan kaçının. Bu ölçüler işi yapay biçimde bölmeyi, zor bakım işinden kaçınmayı veya inceleme çabasını çalışma arkadaşlarına aktarmayı ödüllendirebilir.

Sonucu, hizmetin tamamından sorumlu kişilerle inceleyin. Araçta, iş bileşiminde, ekipte ve ortamda neyin değiştiğini kaydedin. Öncesi-sonrası karşılaştırmasını, otomatik nedensellik kanıtı değil, sınırları olan kanıt olarak ele alın.

Amaç, sonraki kararı iyileştirmektir. Doğrulanmış iyileştirmeye yol açan küçük ve güvenilir ölçüm, anlamı üzerinde anlaşılmamış büyük gösterge panelinden daha yararlıdır.

On değişiklikle uygulama yapın

Bu ayrı kurgusal veri kümesi, on planlı değişikliği kaydeder. Tüm saatler, gösterilen tarihte UTC’dir. Boş düzeltme alanı, bu veri kümesinde düzeltme kaydedilmediği anlamına gelir.

Kodun hazır olmasından incelemenin başlamasına, ardından kabulden yayına kadar geçen süreyi karşılaştırın. Görünen en uzun beklemeyi belirleyin. Önlenebilir demeden önce nedenini araştırın. Bu zaman damgaları etkin çabayı ölçmez veya olayın ne zaman başladığını belirlemez. Düzeltme yayını tek başına başarısız dağıtım sonrası kurtarma süresini ortaya koyamaz.

Kurgusal veri kümesini indirin (CSV)