Automatic 3D-Display-Friendly Scene Extraction from Video Sequences and Optimal Focusing Distance Identification

dc.contributor.authorChlubna, Tomášcs
dc.contributor.authorMilet, Tomášcs
dc.contributor.authorZemčík, Pavelcs
dc.coverage.issue7cs
dc.coverage.volume83cs
dc.date.accessioned2025-06-19T08:56:19Z
dc.date.available2025-06-19T08:56:19Z
dc.date.issued2024-02-16cs
dc.description.abstractThis paper proposes a method for an automatic detection of 3D-display-friendly scenes from video sequences.  Manual selection of such scenes by a human user would be extremely time consuming and would require additional evaluation of the result on 3D display. The input videos can be intentionally captured or taken from other sources, such as films.  First, the input video is analyzed and the camera trajectory is estimated.  The optimal frame sequence that follows defined rules, based on optical attributes of the display, is then extracted.  This ensures the best visual quality and viewing comfort.  The following identification of a correct focusing distance is an important step to produce a sharp and artifact-free result on a 3D display.  Two novel and equally efficient focus metrics for 3D displays are proposed and evaluated.  Further scene enhancements are proposed to correct the unsuitably captured video. Multiple image analysis approaches used in the proposal are compared in terms of both quality and time performance. The proposal is experimentally evaluated on a state-of-the-art 3D display by Looking Glass Factory and is suitable even for other multi-view devices. The problem of optimal scene detection, which includes the input frames extraction, resampling, and focusing, was not addressed in any previous research. Separate stages of the proposal were compared with existing methods, but the results show that the proposed scheme is optimal and cannot be replaced by other state-of-the-art approaches.en
dc.description.abstractTento článek popisuje metodu pro automatickou detekci scén z video sekvencí vhodných pro 3D displeje. Ruční výběr takových scén lidským uživatelem by byl extrémně časově náročný a vyžadoval by dodatečné vyhodnocení výsledku na 3D displeji. Vstupní videa mohou být záměrně pořízena nebo převzata z jiných zdrojů, jako jsou filmy. Nejprve se analyzuje vstupní video a odhadne se trajektorie kamery. Poté je extrahována optimální sekvence snímků, která se řídí definovanými pravidly na základě optických vlastností displeje. To zajišťuje nejlepší vizuální kvalitu a pohodlí při sledování. Následující identifikace správné zaostřovací vzdálenosti je důležitým krokem k vytvoření ostrého výsledku bez artefaktů na 3D displeji. Jsou navrženy a vyhodnoceny dvě nové a stejně účinné metriky zaostření pro 3D displeje. Pro korekci nevhodně zachyceného videa jsou navržena další vylepšení scény. V návrhu jsou porovnány různé přístupy analýzy obrazu z hlediska kvality a časové náročnosti. Návrh je experimentálně vyhodnocen na nejmodernějším 3D displeji od Looking Glass Factory a je vhodný i pro další vícepohledová zařízení. Problém optimální detekce scény, který zahrnuje extrakci vstupních snímků, převzorkování a zaostření, nebyl v žádném předchozím výzkumu řešen. Jednotlivé fáze metody byly porovnány se stávajícími metodami, ale výsledky ukazují, že navržené schéma je optimální a nelze jej nahradit jinými existujícími přístupy.cs
dc.formattextcs
dc.format.extent74535-74562cs
dc.format.mimetypeapplication/pdfcs
dc.identifier.citationMULTIMEDIA TOOLS AND APPLICATIONS. 2024, vol. 83, issue 7, p. 74535-74562.en
dc.identifier.doi10.1007/s11042-024-18573-6cs
dc.identifier.issn1573-7721cs
dc.identifier.orcid0000-0003-3126-0545cs
dc.identifier.orcid0000-0003-0841-4198cs
dc.identifier.orcid0000-0001-7969-5877cs
dc.identifier.other187829cs
dc.identifier.researcheridY-7496-2018cs
dc.identifier.researcheridG-6439-2010cs
dc.identifier.scopus57214242961cs
dc.identifier.scopus56156667500cs
dc.identifier.scopus6507084407cs
dc.identifier.urihttps://hdl.handle.net/11012/254264
dc.language.isoencs
dc.publisherSpringer Naturecs
dc.relation.ispartofMULTIMEDIA TOOLS AND APPLICATIONScs
dc.relation.urihttps://link.springer.com/article/10.1007/s11042-024-18573-6cs
dc.rightsCreative Commons Attribution 4.0 Internationalcs
dc.rights.accessopenAccesscs
dc.rights.sherpahttp://www.sherpa.ac.uk/romeo/issn/1573-7721/cs
dc.rights.urihttp://creativecommons.org/licenses/by/4.0/cs
dc.subject3D displayen
dc.subjectlooking glassen
dc.subjectframes extractionen
dc.subjectvideo analysisen
dc.subjectoptical flowen
dc.subjectlight fielden
dc.subject3D displej
dc.subjectlooking glass
dc.subjectextrakce snímků
dc.subjectanalýza videa
dc.subjectoptický tok
dc.subjectlight field
dc.titleAutomatic 3D-Display-Friendly Scene Extraction from Video Sequences and Optimal Focusing Distance Identificationen
dc.title.alternativeAutomatická extrakce scén z video sekvencí pro 3D displeje a identifikace optimální zaostřovací vzdálenostics
dc.type.driverarticleen
dc.type.statusPeer-revieweden
dc.type.versionpublishedVersionen
sync.item.dbidVAV-187829en
sync.item.dbtypeVAVen
sync.item.insts2025.06.19 10:56:19en
sync.item.modts2025.06.19 10:33:14en
thesis.grantorVysoké učení technické v Brně. Fakulta informačních technologií. Ústav počítačové grafiky a multimédiícs
Files
Original bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
s11042024185736.pdf
Size:
4.73 MB
Format:
Adobe Portable Document Format
Description:
file s11042024185736.pdf