“100 lisans atadık, demek ki yaygınlaştırma değer üretti.” Bu cümle, aradaki işin büyük kısmını atlar. Lisans atanmış olabilir, biri giriş yapmış olabilir, senaryo tekrarlanmış olabilir ve iş sonucu iyileşmiş olabilir. Bu iddiaların her biri farklı kanıt ister.
Bu derste haftalık yönetim güncellemeleri için Copilot kullanan küçük bir hizmet operasyonları ekibini izleyeceğiz. Senaryoyu seçecek, ölçümleri etiketleyecek, lisansları kişi bazında inceleyecek ve eldeki kanıta göre genişleme kararı vereceğiz.
Pilot senaryosu üç geçidi aşmalıdır
Senaryo, sınırları belli bir iş sonucunu tarif eder. “Copilot'u daha fazla kullan” gibi belirsiz bir niyet senaryo sayılmaz. “Onaylı operasyon notlarından, pilot yöneticisinin adları, tarihleri ve rakamları doğruladığı haftalık yönetim güncellemesi hazırla” ifadesi ise bir senaryodur. Rolü, tetikleyiciyi, onaylı kaynağı, beklenen çıktıyı, insan kararını ve iyileşmenin nasıl anlaşılacağını açıkça belirtir.
Adayları iş değeri, sıklık, hazırlık, benimseme etkisi ve risk kontrolü boyutlarında 0–2 arasında yerel olarak puanlayın. Her puanın yanına onu destekleyen kanıtı yazın. Sıralamadan sonra üç kesin geçidi ayrıca uygulayın:
- Adı belli bir sorumlu vardır.
- Kaynak onaylı ve erişilebilirdir.
- Çıktı için tanımlı insan incelemesi vardır.
Bir geçitten kalan aday, toplam puanı ne olursa olsun pilota giremez. Haftalık yönetim güncellemesinin sorumlusu, onaylı notları ve inceleme adımı var, bu yüzden değerlendirmede kalır. HR politika agent'ı yüksek puan alabilir, ancak kaynağı onaylanmadıysa ve katılımcı erişimi bilinmiyorsa ertelenir. Proje portföyü özetinin kaynakları hazır olsa da işi üstlenen kişi ve inceleme listesi yok. İki geçitten kalır. Haftalık güncelleme üç koşulu karşılayan adaylar arasında en yüksek puanı aldığı için pilota girer.
Her rakamın yanında kanıt türü dursun
Pilot başladıktan sonra asıl risk, her rakamın neyi destekleyebileceğini yanlış okumaktır. Ölçüm paketindeki her sayıyı şu dört türden biriyle etiketleyin:
- Gözlemlenen: Panel, sistem veya ankette doğrudan kaydedilen değerdir. Aktif kullanıcı sayısının 8'den 14'e çıkması buna örnektir.
- Hesaplanan: Gözlemlenen değerlerden görünür aritmetikle türetilir. 14 ÷ 20 = %70 aktif kullanıcı oranı buna örnektir.
- Modellenen: Bir varsayıma bağlıdır. %50 gerçekleşme oranı ve saatlik değerle yıllık değer hesaplamak bu gruba girer.
- Dış kaynak: Başka bir grupta yayımlanmış kanıttır. Forrester araştırmasındaki sonuç buna örnektir.
Bu kanıtlar hazırlık, etkinleştirme, benimseme, etki ve değer zincirinin farklı noktalarında durur. Kullanım, Copilot'un kullanıldığını gösterir. Etki, çalışma biçiminde bir değişiklik olduğuna işaret eder. ROI ise bu değişimin finansal yorumudur. Bu iddiaları birbirine karıştırmayın. Desteklenen saatlerin artması etki sinyalidir, bankadaki para değildir. Paraya çevirmek için sorumlunun onayladığı açık gerçekleşme oranına ve bu saatlerin kullanılabilir kapasiteye nasıl dönüştüğünü gösteren kanıta ihtiyacınız vardır.
Modellenen rakamı ne kadar dikkatli sunmanız gerektiğine bakalım. Ekip ayda 240 haftalık güncelleme üretsin ve her birinin hazırlığı 11 dakika azalsın. Modellenen %50 gerçekleşme oranı ve örnek saatlik $40 değer kullanıldığında yıllık değer 240 × 11 ÷ 60 × %50 × $40 × 12 ≈ $10,560 olur. Bu saatlik değer Microsoft fiyatı değildir. Modellenen program maliyeti $9,600 ise modellenen ROI yaklaşık %10'dur. Bütün bu sonucun varsayımlara bağlı olduğunu açıkça belirtin ve bunu gerçekleşmiş tasarruf gibi sunmayın. Forrester'ın üç yıllık, riske göre düzeltilmiş %116 ROI dış ölçütüyle de bire bir karşılaştırmayın. Gruplar, süreler ve yöntemler farklıdır.
Hangi lisanslar gerçekten işe yarıyor?
Ölçüm yalnızca toplam oranlardan ibaret değildir. Kişi bazında lisans denetimi, “kimde lisans var?” sorusunu “kimin amacı var?” sorusuna çevirir:
- Tut: İlgili senaryo ve sorumlu vardır. Güncel kullanım veya aktif pratik kanıtı bulunur.
- Koçluk Ver: Senaryo ve sorumlu vardır. Erişim, beceri, güven veya pekiştirme desteği gerekir.
- Yeniden Ata: Desteklenen senaryo veya sorumlu yoktur. Gerçek ihtiyacı olan, adı belli onaylı bir alıcı beklemektedir.
- Beklet: Lisans, sorumlusu ve başlangıç tarihi belgelenmiş gelecekteki bir gruba ayrılmıştır.
“Belki sonra gerekir” demek Beklet kararı için yeterli değildir. Bu kararda gelecekteki grubun adı, sorumlusu ve başlangıç tarihi bulunmalıdır. Telemetri birinin Copilot'u kullanmayı bıraktığını gösteriyorsa nedeni tahmin etmeyin. Örnek bir grupla görüşün. Görüşemediğiniz herkesi bilinmiyor, görüşme yapılmadı diye kaydedin. Telemetri olası sorunu bulur, ancak nedenini açıklayamaz.
Ne zaman genişletebilirsiniz?
Genişleme, hareketli panelin ödülü veya takvimdeki bir kilometre taşı değildir. Beş geçidin her birini Geçti, Kaldı veya Bilinmiyor olarak işaretleyin. Ortalama almayın ve kısmi puan vermeyin:
Ardından karar verin. Beş geçit de geçerse Genişlet kararı uygundur. Senaryo geçer ama başka bir geçit kalır veya bilinmiyorsa Düzelt kararı verin ve her boşluğa bir sorumlu ile inceleme tarihi atayın. Senaryo kalırsa ya da sonraki döngüyü üstlenen yoksa Duraklat kararı verin.
Ekibimize dönelim. Yönlendirmeli pratikten sonra tekrar kullanım sürdü ve ikinci gün çıktıları kontrol listesini geçti. Ancak aktif grupta bir erişim sorunu açıktı ve daha büyük grup için destek kapasitesi planlanmamıştı. Senaryo, Tekrar ve Ölçüm geçitleri Geçti. Erişim ile Destek geçitleri Kaldı. Doğru karar Düzelttir. Mevcut grupla devam edin, erişim sorununu çözün, desteği planlayın ve geçitleri yeniden değerlendirin. Üç geçidin geçmesi, genişleme için yeterli değildir. İkinci haftadaki kullanım düşüşünü de araştırmaya değer bir uyarı olarak ele alın. Bu, her pilotun ikinci hafta düşeceği anlamına gelmez.
Agent senaryoları için bir not
Senaryo bir prompt yerine agent kullandığında aynı disiplini dört başlıkla kurun: Amaç, İzin, Pratik, Kanıt. Amaç iş sorununu tanımlar. İzin, erişimle kontrolleri ve onaylı kaynak sınırını belirler. Pratik, geri bildirimli tekrarlı denemelerdir. Kanıt ise agent'ın yararlı ve güvenli olduğunu gösteren kayıttır. Bu sırayı koruyun. Agent'ın görünür olması, gerekli izinlerin bulunduğunu göstermez. Katılımcı erişimi doğrulanmamış ve kaynak onaylanmamışsa demo ne kadar iyi görünürse görünsün senaryoyu duraklatın. Heyecan ve katılım, doğrulanmış erişimin, tekrarlı pratiğin ve incelenmiş çıktıların yerini alamaz.
