Forskningsprojekt lader autonom robot overtage instruktion af film
Lige siden introduktionen af flyvende droner har filmproducenter brugt dem til de fugleperspektivistiske optagelser, der tidligere kun var mulige fra helikopter.
Men nu giver ny teknologi mulighed for, at dronerne egenhændigt kan overtage og styre filmoptagelser. Den indbyggede kunstige intelligens giver nemlig mulighed for et fuldt autonomt optagesystem, der lærer menneskers visuelle og artistiske præferencer.
Teknologien er i øjeblikket ved at blive udviklet af et team af forskere fra Institut for Ingeniørvidenskab, Aarhus Universitet, Carnegie Mellon University i Pennsylvania, det tekniske universitet i München og Nanyang Technological University, Singapore.
”Dronen lærer at filme på en måde, der behager vores visuelle præferencer for filmkunst. Det betyder, at dronen autonomt skal forstå, hvilke vinkler og perspektiver der vil skabe de mest kunstneriske og interessante scener, samtidig med at den integrerer hele scenens kontekst for f.eks. at undgå forhindringer og være opmærksom på skuespillere,” siger lektor Erdal Kayacan, der leder den danske del af projektet.
Brugerinput styrer filmkunsten
Det er dog ofte ganske subjektivt, hvad den ’mest interessante scene’ er, og mange filminstruktører kunne sikkert diskutere længe over, hvilken vinkel gjorde sig bedst til en given optagelse. Derfor bruger den autonome drone såkaldt deep reinforcement learning - en teknik baseret på undersøgelser af menneskelige input.
I jagten på at lære den kunstige intelligens generaliserbare regler til optagelser af de mest optimale vinkler og perspektiver på skuespillerbevægelser og scener, har man i projektet således ladet en flok mennesker stemme på favorit-kameravinkler og skuespillerpositioner – altså, hvad gør sig bedst visuelt i en given situation. Og det input har man fodret robotten med.
”Kommercielle autonome droner følger i dag normalt den åbne, sikre vej bag en skuespiller, hvilket kun tillader kontinuerlige optagelser bagfra. Det er ikke super interessant at kigge på, og derfor oplærer vi dronen i konstant at finde det optimale perspektiv for den bedste publikumsoplevelse,” siger Erdal Kayacan.
Smart genkendelse og planlægning
Samtidig registrerer dronen automatisk obstruktioner, der ellers blokerer kameraets udsigt til fokusområdet, og kan endda kvantificere dem for at bevare et klart udsyn. Dronen er ligeledes i stand til at forudse skuespillerbevægelse og planlægge sin egen bane, mens den kontinuerligt kortlægger omgivelserne ved hjælp af LiDAR.
Desuden kræver teknologien ingen prædefinerede sekvenser, GPS-tags eller kort over området for at navigere til optagelserne.
Det autonome optagesystem er ikke beregnet til filmfremstilling alene, og lektor Erdal Kayacan forestiller sig mange forskellige scenarier, hvor teknologien kan bruges:
”Trafikovervågning, monitorering ved store forsamlinger af mennesker, byggepladser, til sikkerhedsmæssige og politimæssige anvendelser osv. Droner bruges allerede i dag til en lang række ting, men kræver meget opmærksomhed. Vores system kan lære at optage på andre måder, som således kan bruges til andre ting end filmoptagelser,” siger han.
Projektet - som også er kandidat til at vinde prisen for Best Paper - vil blive præsenteret på den internationale konference om Intelligente Robotter og Systemer (IROS) i 2019, der foregår i Kina fra den 4.-8. november.
For at se denne video fra www.youtube.com, så skal du aceptere cookies på toppen af denne side.Autonomous Aerial Cinematography In Unstructured Environments With Online Artistic Decision-MakingVideokanal
Nøgleord
Kontakter
Lektor Erdal Kayacan
mail: erdal@eng.au.dk
tlf.: 93521062
Billeder
Information om Aarhus Universitet Technical Sciences
Institut for Ingeniørvidenskab, Aarhus Universitet
Institut for Ingeniørvidenskab blev etableret i 2011 og samler i dag Aarhus Universitets forskningsaktiviteter inden for det teknisk videnskabelige område: Biological and chemical engineering, Civil and architectural engineering, Electrical and computer engineering og Mechanical engineering, hvor der bliver undervist af forskere med basis i allernyeste viden for at bygge Danmarks nye elite ingeniørvidenskabelige miljø.
Som en del af en større strategisk satsning på det teknisk videnskabelige område åbnede Aarhus Universitet i 2019 tre nye 5-årige civilingeniøruddannelser. Endnu en uddannelse åbner i 2020. Målet er at uddanne ingeniører, som kan udvikle den højteknologi, der er nødvendig for at løse vores største globale udfordringer.
Følg pressemeddelelser fra Aarhus Universitet Technical Sciences
Skriv dig op her, og modtag pressemeddelelser på e-mail. Indtast din e-mail, klik på abonner, og følg instruktionerne i den udsendte e-mail.
Flere pressemeddelelser fra Aarhus Universitet Technical Sciences
DCE bringer satellitter længere ind i miljøovervågningen1.5.2024 09:31:07 CEST | Pressemeddelelse
Aarhus Universitet tilbyder hjælp til brug af europæiske satellitdata og går i dialog med amerikanske myndigheder om overvågningen af miljø og natur.
Stor energiudvikler går sammen med forskere fra Aarhus Universitet om biodiversitet og miljø1.5.2024 08:00:00 CEST | Pressemeddelelse
Gæs og grøn energi skal kunne eksistere side om side i projektet Viborg Go Green i Vinge ved Viborg. En samarbejdsaftale i millionklassen og ansættelsen af en ph.d. skal sikre, at projektet og andre tilsvarende projekter kan udvikles under iagttagelse af gældende fuglebeskyttelsesregler.
Sjældne gæs står i vejen for den grønne omstilling1.5.2024 08:00:00 CEST | Pressemeddelelse
En gruppe sjældne gæs overvintrer på én bestemt mark ved Viborg, hvor kommunen og en virksomhed har planer om at opføre en energi-park. Men hvordan flytter man en stædig gås, der ikke gider lette rumpetten?
Orme kan gøre fiskeopdræt langt grønnere29.4.2024 08:47:42 CEST | Pressemeddelelse
Et nyt forskningsprojekt skal udvikle masseproduktion af orme, der kan erstatte både kosttilskud og vaccinere fiskene tidligere end hidtil. Noget, der gør opdræt mere effektivt og dermed nedsætter CO2-aftrykket.
Forsker: Aktivistiske enkeltindivider spænder ben for den forskning, der kan sikre dyrevelfærd26.4.2024 08:42:45 CEST | Pressemeddelelse
Når aktivistiske enkeltindivider tilskudsfodrer heste i naturpleje og chikanerer dyreholderne, spænder de ben for den forskning, der skal sikre netop den velfærd, de hævder at gå op i.
I vores nyhedsrum kan du læse alle vores pressemeddelelser, tilgå materiale i form af billeder og dokumenter samt finde vores kontaktoplysninger.
Besøg vores nyhedsrum