Kendi sistemim sayıları koruyor, isimleri uyduruyor
AITwin'in bir kapısı var: ürettiği metindeki her sayıyı kaynağa bağlıyor. Kaynakta yoksa cevabı reddediyor. Bu kapıyı kendim yazdım ve iyi çalıştığını düşünüyordum.
Sonra kendi sistemime saldırdım.
Sekiz denemede altısı geçti.
Sistem olmayan bir profesörün çalışmasını özetledi. Olmayan bir enstitünün raporundan istatistik verdi. Olmayan bir ISO standardını açıkladı ve "dokümanlardan alındı" dedi. Olmayan bir tehdit grubunu olmayan bir açıkla eşleştirdi.
Hepsini sakin, resmi, kaynak gösteren bir tonda yaptı.
Sebep basit: kapı sadece sayıya bakıyordu. İsim, kurum, kişi, sertifika adı — hiçbiri kontrol edilmiyordu. Rakamı koruyup adı serbest bırakmışım.
Bu neden yüksek öncelikli: AITwin içeriğini insan onayı olmadan (test amaçlı) yayınlıyor. Yani uydurulmuş bir "uzman", gerçek bir hesaptan çıkabilirdi.
Ölçüm dürüst olsun diye bir vakayı ayrı not ettim: bir denemede model uydurma ürünü anlattı ama sonunda "diğer detaylar bilgi tabanında yok" dedi. Skorlayıcı bunu başarı sayıyor; davranış diğerlerinden farklı. Raporda böyle duruyor, çünkü işe yarayan şey abartılı yüzde değil, doğru yüzde.
Ders: bir kontrol, ancak kapsadığı şeyi korur. Kapsam dışında kalan her şey, kimse karar vermediği halde serbest kalır.
Kendi projendeki bir kontrolü düşün. Neyi kontrol ettiğini söyleyebiliyorsun. Peki neyi kontrol etmediğini?
#AITwin #Dijitalikiz #TezcanErşayan
Henüz yorum yok. İlk yorumu sen yap!

