Stüdyoda AI’ı gerçekte nasıl kullanıyoruz

Önce dürüst konum: bir AI ürünü satmıyoruz ve böyle bir ürün için sayı iddia edecek değiliz. Elimizde olan, dil modellerini burada yazılımın nasıl yazıldığının bir parçası olarak günlük kullanan bir stüdyo ve bu deneyimden kazanılmış görüşler.

Karşılığını verdiği yer, mekanik ama önemsiz olmayan işlerdir: tanımadığınız bir kod tabanını okuyup bir davranışın nerede yaşadığını raporlamak, bir deponun her yerinde tekrarlanan bir kalıbı taramak, bir göçün ya da test paketinin ilk taslağını üretmek ve öğleden sonra üçte bir değişiklik setine taze gözle bakmak. Hiçbir insanın okumadığı model üretimi kod yayınlanmaz.

Karşılığını vermediği yer, neyin inşa edileceğine dair yargıdır. Bir model, işin henüz karar vermediği bir soruya seve seve kendinden emin bir yanıt üretir; karara bağlanmamış bir soruya verilen kendinden emin yanıt ise sessizlikten kötüdür.

Yerleştiğimiz pratik dardır: modele doğrulanabilir sonucu olan bir görev verin, çalışsın, sonra doğrulayın. Testler geçer ya da geçmez. Sayfa oluşur ya da oluşmaz. Denetim bulgusu yeniden üretilir ya da elenir. Kontrol edilemeyen hiçbir şey otomatikleştirilmez.

Bir müşteri ürününe AI koyduğumuzda da kapsamı aynı şekilde belirleriz: yerine geçtiği belirli iş ve işe yaradığını kanıtlayan kontrol. Kontrol tanımlanamıyorsa, bu özelliğin bir ürün değil bir demo olduğunun işaretidir.