Apple Ferret-UI Lite İle Siri Ekranınızı Kontrol Edecek

Apple Ferret-UI Lite teknolojisi sayesinde Siri, gelecekte iPhone ekranındaki uygulamaları tıpkı bir insan gibi görebilecek ve yönetebilecek. Apple ve Cornell Üniversitesi araştırmacıları tarafından geliştirilen bu yeni yapay zeka modeli, kullanıcı arayüzlerini (UI) anlamlandırma konusunda devrimsel bir adım atıyor. Şirketin yeni yayınladığı makale, Siri’nin uygulamalar üzerinde tam hakimiyet kurma yolunda ilerlediğini gösteriyor.

Apple Ferret-UI Lite Nedir ve Neler Sunuyor?

Apple, yapay zeka sistemlerini diğer akıllı telefon rakipleriyle rekabet edebilecek seviyeye getirmek için çalışmalarını hızlandırıyor. Ferret-UI Lite, aslında 2023 yılında duyurulan açık kaynaklı bir çok modlu büyük dil modelinin (LLM) geliştirilmiş versiyonudur. Bu model, ekran görüntülerini analiz ederek önemli öğeleri belirliyor ve bu öğelerle nasıl etkileşime geçileceğini anlıyor.

Cihaz İçi İşlem ve Gizlilik Odağı

Eski modellerin aksine bu yeni sürüm, verileri bulut sunucularına göndermek yerine doğrudan iPhone üzerinde işlem yapmayı hedefliyor. 3 milyar parametre ile oluşturulan model, gerçek ve sentetik verilerle eğitildi. Bu sayede kullanıcı verileri cihazda kalarak gizlilik korunuyor. Ayrıca, "zincirleme düşünme" ve görsel araç kullanımı gibi yöntemlerle işlem performansı ciddi oranda artırılıyor.

İnsan Gibi Görme Yeteneği

Araştırmacılar, Ferret-UI Lite modeline bir "yakınlaştırma mekanizması" ekleyerek sistemin insan davranışlarını taklit etmesini sağladı. Yapay zeka, ekranın belirli bir bölgesine odaklanarak görüntüyü kırpıyor ve detayları daha net analiz ediyor. Bu yöntem, sistemin daha az veriyle daha doğru tahminler yapmasına olanak tanıyor. Bazı testlerde, bu küçük modelin kendisinden çok daha büyük bulut tabanlı modelleri geride bıraktığı görüldü.