WIMI Hologram Akademisi: VR Panoramik Video İletiminde Araştırma İlerlemesi


HONG KONG, 18 Ağustos 2022 (GLOBE NEWSWIRE) — Holografik Bilim İnovasyon Merkezi ile ortaklaşa çalışan WIMI Hologram Akademisi, VR panoramik Video iletimindeki araştırma ilerlemelerini açıklayan yeni bir teknik makale yazdı. Bu makale aşağıdadır:

Son yıllarda bilgi işlem, iletişim ve diğer teknolojilerin hızlı gelişimi ve 5G ağlarının yüksek hızlı dağıtımı ile VR uygulamaları gelişti. Bunların arasında, 360 derece video veya sürükleyici video olarak da bilinen panoramik video, akademik araştırma ve endüstriyel uygulamalar alanında sanal gerçeklik uygulamalarının önemli bileşenlerinden biridir. WIMI Hologram Bulut A.Ş.’nin (NASDAQ: WIMI) WIMI Hologram Akademisi’nden bilim adamları, VR panoramik Video iletimindeki ilerlemeyi inceledi. Anket verilerine göre, panoramik videonun pazar payı 2018’den 2024’e kadar yıllık ortalama %34 büyüme oranıyla büyümeye devam edecek. Uluslararası ünlü yatırım bankaları ayrıca panoramik videoya dayalı VR işinin hızla büyüdüğünü bildirdi. VR uygulama alanındaki beklenen toplam kullanıcı sayısının (130 milyon) %40’ı için. 2025 yılına kadar VR panoramik video kullanıcılarının sayısının yaklaşık 200 milyona ulaşacağı tahmin ediliyor.

Yeni bir sürükleyici medya uygulaması olarak yalnızca iki boyutlu bir düzlemde sunulan geleneksel videodan farklı olarak, panoramik video, kullanıcıların 360 derecelik küresel videoda tam bir sahne yelpazesi elde etmelerine ve sırasında görüş Alanı ile FOV arasında rastgele geçiş yapmalarına olanak tanır. oynatma işlemi. Günümüzde kullanıcılar bilgisayarları, akıllı telefonları, başa takılan görüntüleme cihazlarını (HMD) ve diğerlerini kullanarak panoramik video oynatabilir. Kullanıcılar için daha iyi bir panoramik video kalitesi deneyimi yaratmak için QoE, artan görüş alanı aralığı aynı zamanda daha yüksek çözünürlük gereksinimleri ve bant genişliği gereksinimleri anlamına gelir. Giriş seviyesi panoramik video için tam ekran çözünürlüğü 8K’dır, monoküler çözünürlük 1920*1920’dir ve ağ bant genişliği gereksinimi yaklaşık 100 Mbps’dir. Bu kadar büyük miktarda veri iletimi göz korkutucu bir zorluktur.

2018’de, Hareketli Resim Uzmanları Grubu, MPEG standartlaştırılmış panoramik video (MPEG-I), Ortak Video Keşif Ekibi, JVET; Panoramik video iletimi için ilgili desteğe sahip yüksek verimli video, HEVC.

1. Panoramik video ile geleneksel video arasındaki fark

Panoramik video, geleneksel videodan tamamen farklıdır, çünkü panoramik videonun genel sunumu geleneksel videodan farklıdır. Tam aralığı nedeniyle, kullanıcı pazarı sınırlıdır, bu nedenle kullanıcılar mevcut resmin yalnızca küçük bir bölümünü izleyebilir. Bant genişliği tasarrufuna dayalı yüksek hızlı, pürüzsüz ve yüksek çözünürlüklü video sağlamak için panoramik video iletimi günümüzde bir araştırma etkin noktası haline geldi. Panoramik video, geleneksel videoya göre aşağıdaki avantajlara sahiptir:

(1) Güçlü etkileşim

VR panoramik video sahnesinde, metin, çizelgeler, fotoğraflar ve web sayfaları gibi etkileşimli içerik eklenebilir, böylece video deneyimci önceden ayarlanmış görüntü içeriğiyle derinlemesine etkileşim kurabilir ve video içeriğinin çekiciliğini ve çekiciliğini etkin bir şekilde geliştirebilir. .

(2) Giriş duygusunu güçlendirin

Geleneksel video çekiminde video içeriğine göre çeşitli çekimler değiştirilebilir. Bununla birlikte, VR panoramik video birinci şahısta tanıtılır, izleyici “gerçek” bir ortamda olur, kontrol çok uygundur ve panoramik yukarı ve aşağı perspektif sınırlı değildir, bu nedenle güçlü bir sahne girişi hissi yaratır.

(3) Yeni dijital pazarlama modeli

Büyük işletmeler için yeni bir pazarlama hizmeti modeli sağlayan VR panoramik teknolojisi dönemi başladı. Daha fazla işletme, uçak çağından üç boyutlu sanal dijital çağa girecek. Dijital pazarlamanın geleneksel iş modelini değiştireceğine ve işletmelerin gelişimi için yepyeni bir endüstriyel değer yaratacağına inanıyorum.

VR panoramik video artı 3D efekti, geleneksel video ile karşılaştırıldığında, niteliksel bir sıçrama yaptı ve uygulama alanı da çok geniş, denemeye ve keşfetmeye değer.

2. VR panoramik video iletiminin araştırılması ve görünümü

(1) Panoramik video eşleme formatı seçimi, kodlama ve diğer parçalar üzerinde önemli bir etkiye sahiptir. İlgili araştırması, ilk ERP tek taraflı haritalamadan mevcut çoklu ödünleşmelere kadar geliştirilmiştir, ancak hala karşı karşıya olduğu önemli bir zorluk, haritalama sürecinde mevcut olan aşırı örnekleme veya eksik örnekleme sorunlarıdır. Bu durumda içerik özellikleri, nesne hareketi, görünüm alanı tahmini ve kullanıcı davranışı özellikleri gibi unsurlar, göz önünde bulundurularak haritalama formatına dahil edilir. Görünüm alanına ve belirginlik öğelerine daha fazla piksel atanarak, bant genişliği kullanımının sağlanmasına dayalı olarak haritalama işlevi geliştirilmiştir. Örneğin, CHEC eşleme, içerik özelliklerini HEC eşlemeye göre birleştirerek eşleme verimliliğini daha da artırır.

(2) Panoramik videonun yüksek çözünürlüğü nedeniyle, codec bileşeninin her iki ucunda büyük bir veri sıkıştırması ve hesaplama karmaşıklığı vardır, bu da codec bileşeniyle ilgili panoramik video teknolojisinde birçok soruna yol açar. Bu nedenle, daha verimli sıkıştırma, daha düşük gecikme süresi ve kesintisiz resim değiştirme elde etmek ve daha yüksek kalitede kullanıcı deneyimi kalitesi sağlamak için yeni video codec teknolojisinin geliştirilmesi gerekiyor. Codec geliştirme sürecinde, hareket tahmini uyarlama, örnekleme yoğunluğu düzeltme, yeniden projeksiyon ve çerçeve içi tahmin yöntemleri dikkate alınır. Ayrıca, Karo tabanlı HEVC tasarımı, kodlayıcı ve kod çözücünün yüksek düzeyde paralel performansını gerçekleştirebilir ve kodek teknolojisinin geliştirilmesi için yeni bir fikir sağlar.

(3) Mevcut panoramik video kalitesi değerlendirme yöntemlerinde, öznel kalite değerlendirmesi, veri kümeleri için öznel kalite puanları sağlar ve nesnel kalite değerlendirmesi, her biri kendi özellikleri ve avantajları olan öznel kalite puanlarını tahmin etmeyi amaçlar. Subjektif değerlendirme için gerekli test protokolünün standartlaştırılmış tanım sistemi, büyük ölçekli veri setleri durumunda etkinliğin objektif olarak değerlendirilmesinin istatistiksel analizi ve farklı ölçeklerdeki farklı kullanıcıların kalite değerlendirme istatistiklerinin tümü çözülmesi gereken acil sorunlardır. Halihazırda, çoğu kalite değerlendirmesi, ekran hastalığı, kullanıcının fizyolojik semptomları, kullanıcının cinsiyeti ve yaşı, görüntüleme ekipmanı, sanal gerçeklik sesi gibi kullanıcı faktörleri gibi diğer faktörler de dahil olmak üzere, kamera hareketi izleme ve video içeriği özelliklerinin kalite değerlendirmesi üzerindeki etkisini dikkate almaktadır. ve video ekipmanı, ağ gecikmesi, resim titremesi gibi ağ faktörleri; kamera hareketi, kare hızı, eşleme kodlaması gibi video içerik faktörleri; görüntü alanı tahmin hatası ve oynatma önbelleği gibi video iletim faktörleri. Mevcut veri merkezi simüle edilmiş kullanıcı dikkat dağıtım yöntemleri daha iyi sonuçlar alırken, algısal yöntemler genellikle daha iyi performans gösterir, ancak riske aşırı uyum sağlama ve örnekleme ile algıyı birleştirme, gelecekteki araştırma eğilimleri olarak kabul edilebilir. Vitrinlerin tanıtılmasıyla, vitrinlerin ve kürenin kapsamlı içeriğinin dikkate alınması da yönlerden biridir.

(4) Çini iletimine dayalı araştırma, yüksek çözünürlük sağlamak ve bant genişliği tüketim oranını azaltmak için kullanıcının görünümlerine göre farklı kalitede dilimler iletebilen günümüzde ana akımdır. Görüntülemede kullanıcının baş hareketi çok değişken olduğundan, mevcut Döşeme tabanlı yöntemler karmaşık görünüm değişiklikleriyle başa çıkmak için yetersizdir, bu nedenle, sayıyı dinamik olarak seçmek gibi öncelikli panoramik video dağıtımı durumunda dilimlerin etkileşimli seçimi dikkate alınmalıdır. İletimdeki Karo’nun veya dilimleri farklı ağ koşulları için dinamik olarak ayarlamanın yanı sıra, dilimler, dilim önceden getirme zamanlaması için derin pekiştirmeli öğrenmeyi de kullanabilir. Ayrıca, çok yolun yüksek çözünürlüklü dilim iletimi için, yüksek öncelikli dilimler, sırasız teslimin önlenmesine yönelik mevcut en iyi yollar aracılığıyla hiyerarşik sırayla sağlanabilir. Bununla birlikte, farklı kalite seviyelerindeki Karo ekranları, resimde, özellikle sınırda, eserler yaratabilir. Döşeme miktarını veya kalite seviyesini artırarak, kalite geçiş düzgünlüğünü iyileştirmek, kullanıcının görüntüleme deneyimini geliştirmek için önemlidir.

(5) Görünüm alanı tahmin çabalarındaki ilerlemeler, haritalama ve aktarımla ilgili temel adımları büyük ölçüde optimize edebilir. Mevcut yörünge tabanlı görüntü alanı tahmin şemaları, görüntü alanlarını 10 saniyeye kadar makul bir doğrulukla tahmin edebilirken, içerik tabanlı görüntü alanı tahmin şemaları doğrulukta iyileşir, ancak her ikisi de yüksek kalite düzeyine ulaşmaz. Bu nedenle, uzun vadeli tahmin hatası için, video görüntüsünün zamansal ve uzamsal özellikleri, uygun bir kodlayıcı ve evrişimli LSTM mimarisi kullanılarak belirlenir. Belirginlik özelliklerine, kullanıcı ilgi bölgesi algılamasına ve kullanıcının baş hareketi yörüngesine bağlı olarak, görünüm alanı tahmini için referans faktörlerine araştırma yönünü ekler.

Ağustos 2020’de kurulan WIMI Hologram Academy, holografik AI vizyon keşfine adanmıştır ve insan vizyonu tarafından yönlendirilen temel bilim ve yenilikçi teknolojileri araştırır. Holografik Bilim İnovasyon Merkezi, WIMI Hologram Akademisi ile ortaklaşa olarak, holografik AI vizyonunun bilinmeyen teknolojisini keşfetmeye, ilgili küresel kaynakları ve üstün güçleri çekmeye, toplamaya ve entegre etmeye, kapsamlı inovasyonu temel olarak bilimsel ve teknolojik inovasyonla teşvik etmeye kararlıdır. ve temel bilim ve yenilikçi teknoloji araştırmalarını yürütmek.

Kişiler

Holografik Bilim İnovasyon Merkezi

E-posta: pr@holo-science. com

İçerik GlobeNewswire’a aittir. DKODING Medya, sağlanan içerikten veya bu içerikle ilgili herhangi bir bağlantıdan sorumlu değildir. DKODING Medya içeriğin doğruluğundan, güncelliğinden veya kalitesinden sorumlu değildir.

WIMI Hologram Akademisi: VR Panoramik Video İletiminde Araştırma İlerlemesi


Kaynak : https://www.dkoding.in/press-release/wimi-hologram-academy-research-progress-in-vr-panoramic-video-transmission/”>Source link

Yorum yapın

SMM Panel PDF Kitap indir