WebOverlay: Web Sayfalarındaki Açılır Pencereleri Hızlı Tespit Etme

Web tarama araçları, çerez onayı bannerları, haber bülteni açılır pencereleri ve yaş doğrulama kapıları gibi overlay'lerle sürekli uğraşıyor. Bu engeller, sayfa içeriğini gizliyor ve otomatik indeksleme işlemlerini bozuyor. Şimdiye kadar bu sorun, güçlü dil-görüntü modelleriyle çözülüyordu ama bu yaklaşımlar yavaş ve pahalıydı.

Araştırmacılar WebOverlay adlı yeni bir sistem geliştirdi. Temel farkı, yalnızca görüntü işleme kullanarak overlay'leri tanıması ve çok daha hızlı çalışması. Sistem, daha gelişmiş bir model tarafından eğitiliyor (distillation tekniği), böylece hafif kalıp yüksek doğruluk elde ediyor.

Web sayfaları dikey olarak çok uzun olabiliyor, standart bir görüntü işleme modeli bunu işlemeye çalışırken, sayfa küçültülüyor ve metin kaybolabiliyor. WebOverlay buna çözüm buldu: sayfayı akıllıca bölüyor, her parçayı kendi en-boy oranını koruyarak işliyor, sonra sonuçları birleştiriyor. Sınır bölgelerinde hata oluşmaması için özel bir mekanizma var.

Bu yaklaşım, web ölçeğinde (milyonlarca sayfada) otomatik tarama yapmak isteyenler için kritik. Hız ve maliyet avantajı, gerçek dünyada uygulanabilir kılıyor. Özellikle büyük arama motorları veya veri toplama projeleri için ideal, overlay'leri tanıyıp atlamak, daha temiz ve doğru sayfa temsilini sağlıyor.