Algısal Semantik – Multimedya Bölümü – Multimedya Bölümü Ödevleri – Multimedya Bölümü Tez Yaptırma –Multimedya Bölümü Ödev Ücretleri

Algısal Semantik

Yeni sıkıştırma veya iletim sistemlerinin geliştirilmesi, algılanan görsel kalitelerini artırırken görüntülerin ve videoların bant genişliğini ve depolama gereksinimlerini azaltma ihtiyacından kaynaklanmaktadır. Geleneksel sıkıştırma şemaları, ortalama kare hatası (MSE) veya tepe sinyal-gürültü oranı (PSNR) açısından kodlama artıklarını en aza indirmeyi amaçlar.

Bu, tamamen matematiksel olarak optimaldir, ancak algısal bir bakış açısından değildir. Nihayetinde, algı daha uygun ve daha ilgili kıstastır. Bu nedenle amaç, geleneksel bir kodlayıcıyla aynı bit hızında daha iyi kalite veya daha düşük bir bit hızında aynı görsel kalitede üretecek şekilde algılanan görsel kaliteyi en üst düzeye çıkaran bir codec bileşeni tanımlamak olmalıdır.

Kodlama sürecinde maksimum algılanan kaliteye ulaşmanın yanı sıra, içerik sağlayıcılar için önemli bir endişe, içerik dağıtımı ve iletimi sırasında belirli bir hizmet kalitesini garanti etmektir. Bu, güvenilir kalite değerlendirme yöntemleri gerektirir.

Subjektif görüntüleme deneyleri, belirli bir test materyali seti için anlamlı kalite derecelendirmeleri elde etmek için yaygın olarak kabul edilen bir yöntem olsa da, kapsamları zorunlu olarak sınırlıdır ve büyük miktarda içeriğin değerlendirilmesi gereken izleme ve kontrol uygulamalarına uygun değildir. gerçek zamanlı veya en azından çok hızlı.

Otomatik kalite ölçümleri, bu görevi kolaylaştırmak için arzu edilen araçlardır. Buradaki amaç, algılanan kaliteyi PSNR’den daha iyi tahmin eden metrikler tasarlamaktır.

Geleneksel video kodlayıcıların ve kalite metriklerinin ortak eksikliklerinden biri, insanların görüntünün veya videonun her pikseline baktığını varsayarak tüm sahneyi aynı şekilde ele almalarıdır. Gerçekte, sahnenin yalnızca videonun analiz edilmesi ve işlenmesi üzerinde önemli etkileri olan belirli alanlarına odaklanırız.

Bu bölümde, yukarıdaki gözlemleri dikkate alıyoruz ve insanın görme sistemini taklit etmeye çalışıyoruz. Fikir, video kodlayıcıların sıkıştırma performansını ve algısal kalite ölçümlerinin tahmin performansını iyileştirmek için görsel verilere öncelik vermektir.

Önerilen kodlayıcı ve kalite metriği, görsel dikkati birleştirir ve anlamsal bir bölümleme aşaması kullanır. Semantik bölümlendirme aşaması, insanların bir video izlerken bilişsel davranışlarının bazı yönlerini hesaba katar.

Belirli bir bilişsel görevin semantik modelini temsil etmek için, referans dizisinin her bir çerçevesini birbirini dışlayan ve ortaklaşa ayrıntılı bölüm kümelerine ayrıştırırız. Bu semantik model, mutlaka algısal tekdüzelik ile karakterize edilmesi gerekmeyen belirli bir insan soyutlamasına karşılık gelir.

Semantik (yani anlam) insan soyutlaması ile tanımlandığından, anlamsal ayrımın tanımı gerçekleştirilecek göreve bağlıdır. Özellikle hareketli nesneleri ve yüzleri bölümlere ayırmaya odaklanacağız ve video kodlama ve kalite değerlendirmesi üzerindeki algısal etkiyi değerlendireceğiz.

Bölüm şu şekilde düzenlenmiştir: “Bilişsel Davranış” bölümü, video izleyen kişilerin bilişsel davranışlarını etkileyen faktörleri tartışır. “Anlamsal Bölümleme” bölümü, video kodlama ve kalite değerlendirmesinde kullanılmak üzere anlamsal bir bölüm oluşturan bölümleme aşamasını tanıtır.

“Video Kodlama için Algısal Semantik” ve “Video Kalite Değerlendirmesi için Algısal Semantik” bölümlerinde sırasıyla bilişsel davranışın bir video kodlayıcıya ve bir kalite metriğine nasıl dahil edilebileceğini açıklıyoruz.

Ayrıca, önerilen kodlayıcının sıkıştırma performansı ve önerilen metriklerin tahmin performansı tartışılmaktadır. Son bölümde, bazı sonuçlar çıkarıyoruz ve mevcut çalışmalarımızın yönünü de açıklıyoruz.

Priming Nedir psikoloji
Priming effect
Semantik analiz Nedir
Priming memory
Semantic priming
What is priming
Semantik Nedir
Semantic priming in linguistics

Bilişsel Davranış Görüntüleri

Görüntüleri veya videoları izlerken, sahnenin belirli alanlarına odaklanırız. Bir sahneyi raster tarzda taramıyoruz; bunun yerine görsel dikkatimiz bir noktadan diğerine de atlama eğilimindedir. Bu sözde seğirmeler, gözlerimizi ilgilenilen nesnelere yönlendiren bir sabitleme mekanizması tarafından yönlendirilir. Sakkadlar, 2-3 Hz hızında meydana gelen yüksek hızlı göz hareketleridir. Sakkad sırasında görsel imge bastırıldığı için bu hareketlerin de farkında değiliz.

Çalışmalar, bakış yönünün bireysel izleyiciler için tamamen kendine özgü olmadığını göstermiştir. Bunun yerine, önemli sayıda izleyici bir sahnenin aynı bölgelerine de odaklanacaktır.

Klasik deneylerinde, sakkadik kalıpların gerçekleştirilecek bilişsel göreve olduğu kadar görsel sahneye de bağlı olduğunu gösterdi. Yani “görmüyoruz, bakıyoruz”. Görsel dikkatimizi eldeki göreve ve sahne içeriğine göre de odaklarız.

Video kodlama ve kalite değerlendirmede bu davranışın dikkate alınmasının nedeni, görme keskinliğimizin tüm görme alanında tek tip olmamasıdır.

Genel olarak, görme keskinliği yalnızca optik eksen (bakış yönü) etrafındaki nispeten küçük bir konide en yüksektir ve merkezden uzaklaştıkça azalır. Bu kısmen gözün optik kalitesinin çevreye doğru bozulmasından, kısmen de retinanın yerleşiminden de kaynaklanmaktadır.

Retinanın optik eksen etrafındaki merkezi bölgesine fovea denir. Olağan görüntü veya video görüntüleme koşullarında görmeden sorumlu fotoreseptörler olan en yüksek koni yoğunluğunu içerir. Fovea dışında koni yoğunluğu hızla azalır.

Bu, görmenin neden yalnızca mevcut dikkat odağı çevresinde keskin olduğunu ve periferik görüş alanı algısının bulanık olduğunu açıklar. Başka bir deyişle, artan eksantriklik ile kontrast duyarlılığı azalır. Bu etki de gösterildiği gibi frekansa da bağlıdır.

Algıyı yöneten süreçler tam olarak anlaşılamamış olsa da, görsel dikkatin oluşmasına katkıda bulunan birçok farklı faktör de tanımlanmıştır.

Bunlar, kontrast (yüksek kontrastlı bölgeler dikkat çeker), boyut (büyük nesneler küçük olanlardan daha ilgi çekicidir), yön, şekil (düz şekillere göre kenar benzeri özellikler veya köşeli nesneler tercih edilir), ton ve renk tonu gibi basit uyaran özelliklerini de içerir. 

Genel olarak, daha önce bahsedilen faktörlerden herhangi biri açısından çevresinden öne çıkan bir nesne veya özelliğin dikkatimizi çekme olasılığı daha da yüksektir.

Ek olarak, konum (çoğu izleyici bir sahnenin merkezine odaklanır), ön plan/arka plan ilişkisi ve bağlam (görev, kişisel ilgi veya motivasyon) görsel dikkati etkiler. Son olarak, hareket eden nesneler ve insanlar, özellikle yüzleri (gözleri, ağızları) ve elleri de dikkatimizi çeker.

Makale Deniz

Biyografinin Tamamını Gör