Blog
Son adımı hala biri kopyalayıp yapıştırıyor
Kısaca: Model cevabı üretiyor, o cevabı kurumsal sisteme yazan hala bir insan. Bu son adım hiçbir akış şemasında yok, hiçbir kayıtta görünmüyor. Kazandığınız sürenin bir kısmı ve izlenebilirliğin tamamı orada eriyor. Son adımı görmeden otomasyonun gerçek faydasını ölçemezsiniz.
Otomasyon sununuzda süreç üç adımda bitiyor. Veri geliyor, model işliyor, cevap çıkıyor. Grafikte güzel durur.
Gerçekte dördüncü bir adım var. Biri modelin cevabını açıyor, ilgili kısmı seçiyor, kurumsal sistemdeki alanlara kopyalıyor, kaydediyor. Bu adım sunumda yok çünkü kimse onu iş saymıyor. Kopyalamak iş gibi görünmüyor.
Otomasyon üçüncü adımda bitiyor, iş dördüncüde
Yapay zeka projelerinin büyük kısmı tek bir pencerede çalışıyor. Kurumun asıl kayıtları başka pencerelerde duruyor: kurumsal kaynak planlama, müşteri yönetimi, bakım sistemi, teklif ekranı, muhasebe.
İki pencere arasında entegrasyon yoksa köprü insandır. Model cevabı üretir, insan o cevabı taşır.
Bu köprü projeyi hızlı başlatmanın en pratik yolu. Entegrasyon beklenmez, pilot iki haftada ayağa kalkar. Sorun pilotun bitmesiyle başlar: geçici olduğu söylenen köprü kalıcı hale gelir ve bir daha kimse açıp bakmaz.
Yayına alma kararını verirken konuşulan tek şey modelin doğruluğudur. Köprünün kendisi karar metninde geçmez, çünkü o bir sistem değil, birinin alışkanlığıdır.
Bu tablo enerji tarafında da aynı. Model bakım önceliği öneriyor, öneri bir ekranda duruyor, iş emrini açan kişi onu başka bir sisteme elle yazıyor. Önerinin kendisi kayıtlı, iş emrine dönüşmüş hali kayıtsız. Sonradan hangi önerinin tuttuğunu ölçmek isterseniz eşleştirecek alan bulamazsınız.
Son adımın üç maliyeti
Birincisi süre. Modelin kazandırdığı dakikaların bir kısmı aktarmada geri gider. Çıktıyı okumak, doğru alanı bulmak, biçimi düzeltmek, iki pencere arasında gidip gelmek. Tek kayıtta küçük görünür, aylık hacimde görünmez olmaz.
Süreyi tartışırken en sık yapılan hata kayıt başına bakmaktır. Üç dakika kimseyi rahatsız etmez. Aynı adım günde kırk kez tekrarlanıyorsa bir kişinin iki saati her gün iki pencere arasında geçiyor demektir.
İkincisi iz. Sisteme giren kaydın yanında o değerin nereden geldiği yazmaz. Altı ay sonra kayda bakan kişi onu bir insanın kendi başına yazdığını sanır. Denetimde modelin hangi kayıtlara dokunduğunu söyleyemezsiniz, çünkü kayıt modelin dokunmadığını gösteriyor.
Üçüncüsü hata. Aktarma hatası modelin hatasından farklıdır: model doğru, kayıt yanlış. Yanlış satır seçilir, virgül kayar, çıktının eski sürümü kopyalanır. Bu hata fark edildiğinde fatura modele yazılır. Model, kendi yapmadığı bir hatadan güvenilmez damgası yer.
Son adımı haritalayın
Haritayı çıkarmadan üç maliyetten hangisinin büyük olduğunu bilemezsiniz. Modele süreci adım adım ayrıştırtın ve özellikle bilginin iz bırakmadan taşındığı yerleri işaretletin.
Bir surecte yapay zeka cikti uretiyor, sonra bir calisan bu ciktiyi
elle baska bir sisteme giriyor. Bu sureci adim adim ayristir.
Surec: [surecin adi]
Modelin urettigi cikti: [cikti neye benziyor - metin, tablo, oneri]
Ciktinin girildigi sistem: [sistemin adi, hangi ekran ve alanlar]
Her adim icin yaz: adimi hangi rol yapiyor, ne kadar suruyor,
bilgi nasil tasiniyor (kopyala-yapistir, yeniden yazma, dosya
indirme), adimin izi nerede kaliyor.
Sonunda ayri bir baslik altinda sunu listele: hangi adimlarda
bilgi bir sistemden cikip digerine girerken IZ BIRAKMIYOR.
Sadece anlattigim adimlari yaz, varsaydigin adim ekleme.Bu prompt bir süreç haritası değil, bir taşıma haritası üretir. İşe yarayan kısım son başlık: bilginin bir sistemden çıkıp diğerine izsiz girdiği adımlar. Çoğu kurumda o liste bir satırdan uzun çıkar.
Aktarma hatasını ölçün
Aktarma hatası konuşulurken herkes tahmin yürütür. Kimisi hiç olmadığını söyler, kimisi çok olduğunu. Ölçmek zor değil: modelin ürettiği çıktı ile sisteme girilmiş kayıt yan yana konur.
Modelin urettigi cikti ile sisteme elle girilmis kaydi
karsilastiracak bir kontrol plani yaz.
Cikti alanlari: [alan adlari - ornek: tutar, tarih, kategori]
Kayit sayisi: [son bir ayda kac kayit girildi]
Plan sunlari icersin: kac kayit incelenecek, kayitlar hangi
olcute gore secilecek, her alan icin hangi fark TUTARSIZLIK
sayilacak, hangi fark MESRU DUZELTME sayilacak.
Tutarsizliklari uc gruba ayiran bir tablo tasarla: eksik
aktarilan alan, yanlis aktarilan deger, modelin ciktisinda
olmayip sonradan eklenmis deger.
Kisi adi gecmeyen bir rapor bicimi oner.Ölçümün tek kuralı var: bakılan şey alan, kişi değil. Hangi alanın hangi sıklıkla yanlış aktarıldığını arıyorsunuz. Raporda isim geçerse bir daha dürüst veri alamazsınız; hatalar düzelmez, görünmez olur.
Kayıtları rastgele seçmeyin. Yarısı en yoğun günden, yarısı en sakin günden gelsin. Aktarma hatası genelde yoğunlukla birlikte artar ve ortalama bunu gizler.
Meşru düzeltmeyi tutarsızlıktan ayırmayı atlama. Çalışan modelin cevabını bilerek değiştiriyorsa bu hata değil, bilgidir: modelin göremediği bir şeyi o görüyor. O farklar ayrı bir listede toplanırsa modelin eksik gördüğü alanları gösterir.
Hangi alan modelden geldi
İz sorununun çözümü entegrasyon olmak zorunda değil. Kaydın yanına üç değerli küçük bir işaret koymak bugün yapılabilir.
Bir kaydin hangi alanlarinin yapay zeka ciktisindan geldigini
isaretleyecek bir yontem tasarla.
Sistem: [sistemin adi]
Degistirilebilir alanlar: [serbest metin alani var mi, not alani
var mi, etiket eklenebiliyor mu]
Uc degerli bir isaret oner: model ciktisi oldugu gibi girildi,
model ciktisi degistirilerek girildi, model kullanilmadi.
Isaretin kaydin akisini yavaslatmayacak sekilde nereye
yazilacagini soyle.
Isaret eksik oldugunda ne yapilacagini da yaz: eksik isaret,
model kullanilmadi anlamina GELMEZ.İşaretin değeri sonradan ortaya çıkar. Bir hata zinciri araştırıldığında ilk soru şudur: bu değer nereden geldi. İşaret yoksa cevap tahmin olur ve tahmin genelde modelin aleyhine döner.
İşaretin bir faydası da ölçümü kolaylaştırması. İşaret varsa aktarma hatasını her ay elle yeniden eşleştirmeniz gerekmez; işaretli kayıtları filtreleyip örneklem alırsınız.
Eksik işareti doğru okumak önemli. Boş işaret, model kullanılmadı demek değil, işaretlenmedi demektir. İkisini karıştıran rapor kullanımı olduğundan düşük gösterir ve yanlış yere yatırım yaptırır.
Entegre et, standartlaştır, ya da elde bırak
Her aktarma adımı entegre edilecek diye bir kural yok. Üç yol var ve üçü de meşru.
Elle aktarma adimi icin uc yol var: sistemler arasini entegre
etmek, aktarmayi standart bir sablona baglamak, adimi elde
birakmak. Hangisinin uygun oldugunu dort soruyla degerlendir.
Adim: [adimin tanimi]
Aylik hacim: [kac kayit]
Adim basina sure: [dakika]
Hata gorulme sikligi: [gozleminiz]
Dort soru: aktarilan alanlarin tanimi sabit mi, kayit yanlis
girilirse geri alinabilir mi, adim sirasinda insan bir karar
veriyor mu, hacim onumuzdeki alti ayda artacak mi.
Her yol icin yaz: hangi kosulda dogru secim, hangi kosulda
yanlis, secilirse ilk otuz gunde ne yapilmali.
Tek bir yolu onerme, kosullari yaz.Kararı hacim tek başına vermez. Alan tanımları hala oynuyorsa entegrasyon pahalı bir hataya dönüşür; yanlış kaydın geri alınması zorsa adımı elde tutmak doğru olabilir.
Orta yol en çok atlanan yoldur. Entegrasyon bütçe ve zaman isterken, aktarmayı sabit bir şablona bağlamak genelde bir haftalık iş. Çıktı hep aynı sırada ve aynı alan adlarıyla gelirse hem süre düşer hem hata azalır. Model çıktısının biçimini kurumsal ekranın alan sırasına göre istemek hiçbir yazılım değişikliği gerektirmez.
Adımda insan gerçekten bir karar veriyorsa o adım aktarma değildir, kontrol noktasıdır. Onu otomatikleştirmek kontrolü silmek olur ve bunu fark etmeniz aylar sürer.
Tek sayfalık aktarma notu
Bulduklarınız bir yerde yazılı kalmazsa altı ay sonra aynı haritayı yeniden çıkarırsınız. Not kısa olsun, sahibi belli olsun.
Asagidaki bilgilerle tek sayfalik bir aktarma notu yaz.
Surec: [ad]
Aktarilan alanlar: [liste]
Aktaran rol: [rol adi, kisi adi degil]
Aylik hacim ve adim basina sure: [sayilar]
Olculen tutarsizlik orani: [yuzde ve olcum tarihi]
Not su basliklari icersin: aktarilan alanlar, aktarmayi yapan
rol, kaynak isareti nereye yaziliyor, bu alanlarla yapilmamasi
gereken karar, tutarsizlik orani ve son olcum tarihi, yeniden
olcum tarihi, ESIK: tutarsizlik orani hangi seviyeyi gecerse
adim durdurulup yeniden tasarlanacak.
Esik satirini bos birakma, bir sayi oner ve gerekcesini yaz.Notun en kıymetli satırı eşik. Tutarsızlık oranı hangi seviyeyi geçerse adımın durup yeniden tasarlanacağını bugünden yazarsanız, o gün geldiğinde tartışma açılmaz. Yazmazsanız oran yükselir, herkes görür, kimse karar vermez.
Sınırlar: modelin çıkardığı harita sizin anlattığınız kadar doğrudur, en az bir adımı sahada izleyerek doğrulayın. Ölçüm kişi performansı değildir ve performans konuşmasına girmemelidir. Kaynak işareti bir güvence değil, bir ipucudur; modelin çıktısı işaretli diye doğru olmaz. Ve son adımı otomatikleştirmek her zaman doğru karar değildir, bazı kayıtlar için araya bir insanın girmesi tam olarak istediğiniz şeydir.
Otomasyonu üçüncü adımda bitirip dördüncüyü kimseye sormazsanız, kazandığınız süreyi de izi de birinin panosunda bırakmış olursunuz.