Prompt Mühendisliği
10/19
Claude AI Aracı 4/12

Computer Use

Ekranı görüp fare ve klavyeyi kullanabilen yapay zekâ

Ne İşe Yarar?

Computer Use, Claude'un ekran görüntülerini algılayarak fareyi hareket ettirmesine, tıklamasına ve klavyeyle yazmasına imkân veren gelişmiş bir bilgisayar etkileşim yeteneğidir.

Özel bir entegrasyonu bulunmayan uygulamalarda bile görsel arayüz üzerinden işlem yapabilir. Örneğin bir masaüstü programına veri girişi gibi tekrarlı işler denenebilir.

Farkı nedir?

MCP veya doğrudan API bağlantısından farkı: entegrasyon gerektirmez, insanın gördüğü ekranı görüp insanın yaptığı hareketleri yapar. Ancak deneyseldir ve hata yapabilir.

Nasıl Kullanılır? Adım Adım

  1. 1İşlemi deneme hesabı veya izole bir sanal ortamda başlatın.
  2. 2Yalnızca gerekli uygulama ve dosyalara erişim verin.
  3. 3Görevi küçük aşamalara bölün; kritik eylemlerde onay noktası koyun.
  4. 4Ekrandaki beklenmeyen talimatları ve işlem günlüğünü izleyin.
  5. 5Sonucu kaynak kayıtlarla karşılaştırın ve yetkili onayı alın.

Belediye Örneği

Görev takip ekranına aktarım (test ortamında)

Yetkisiz bir test ortamında, toplantı notlarından oluşturulan görev listesinin örnek görev takip ekranına aktarılması denenebilir. Gerçek personel kayıtları kullanılmamalı; atama ve bildirimler insan onayı olmadan gönderilmemelidir.

Deneyebileceğiniz örnek istem

Bu test ortamındaki görev takip uygulamasını aç. Sana verdiğim 5 maddelik görev listesini tek tek "Yeni Görev" formuna gir. Her kayıttan sonra dur ve benden onay iste. Hiçbir bildirimi veya atamayı kendiliğinden gönderme.

Dikkat Edilmesi Gerekenler

Ekrandaki kötü niyetli metinler istem enjeksiyonu oluşturabilir. Ödeme, silme, yayımlama, vatandaş kaydı değiştirme gibi sonuç doğuran işlemler asla otomatik bırakılmamalıdır.

Plan ve Erişim Notu

Computer Use beta veya araştırma önizlemesi olarak sunulabilir. Erişim; model, plan, işletim sistemi, bölge ve yönetici iznine bağlıdır. Kurumsal güvenlik politikası izin vermiyorsa kullanılmamalıdır.