• Home
  • Kemi
  • Astronomien
  • Energi
  • Naturen
  • Biologi
  • Fysik
  • Elektronik
  • AI uppskalar Apollo lunar-bilder till 60 FPS

    Kredit:Dutchsteammachine

    Lika spännande och spännande som det är att se alla historiska bilder från Apollo-månlandningarna, du måste erkänna, kvaliteten är ibland inte så bra. Även om NASA har arbetat med att återställa och förbättra några av de mest populära Apollo-filmerna, en del av det är fortfarande kornigt eller suddigt.

    Men nu, ny utveckling inom artificiell intelligens har kommit till undsättning, ger tittarna en nästan helt ny upplevelse när de tittar på historisk Apollo-video.

    En foto- och filmrestaureringsspecialist som går under namnet DutchSteamMachine har arbetat med lite AI-magi för att förbättra original Apollo-film, skapa slående tydliga och levande videoklipp och bilder.

    "Jag ville verkligen ge en upplevelse på detta gamla filmmaterial som inte har setts tidigare, " berättade han för Universe Today.

    Ta en titt på denna förbättrade film från en Apollo 16 lunar rover travers med Charlie Duke och John Young, där materialet som ursprungligen togs med 12 bilder per sekund (fps) har ökats till 60 fps:

    Fantastisk, höger? Och jag blev imponerad av den skarpa utsikten över månens yta i den här förbättrade utsikten över Apollo 15:s landningsplats vid Hadley Rille:

    Kredit:Dutchsteammachine

    Eller ta en titt på hur tydligt Neil Armstrong är synlig i den här förbättrade versionen av den ofta sedda "första steget"-videon från Apollo 11 tagen av en 16 mm videokamera inuti Lunar Module:

    Kredit:Dutchsteammachine

    Den AI som DutchSteamMachine använder kallas Depth-Aware video frame INTErpolation, eller DAIN för kort. Denna AI är öppen källkod, gratis och ständigt utvecklas och förbättras. Rörelseinterpolation eller rörelsekompenserad bildruteinterpolation är en form av videobearbetning där mellanliggande animationsbildrutor genereras mellan befintliga i ett försök att göra videon mer flytande, för att kompensera för suddighet, etc.

    "Människor har använt samma AI-program för att väcka gamla filminspelningar från 1900-talet till liv igen, i hög upplösning och färg, " sade han. "Den här tekniken verkade vara en bra sak att tillämpa på mycket nyare film."

    Men du kanske inte kan prova detta hemma. Det krävs en kraftfull, avancerad GPU med speciella kylfläktar. DutchSteamMachine sa att en video på bara fem minuter kan ta allt från sex till 20 timmar att slutföra. Men resultaten talar för sig själva.

    Han förklarade hur han gör det här:"Först satte jag mig för att hitta källvideor av högsta kvalitet, som jag tack och lov hittade som videofiler med hög bithastighet på 720p, " sa han. "Så kvalitetsproblemet var löst. Det är viktigt att börja med högsta möjliga källa och redigera därifrån. Dock, de flesta av sekvenserna som togs var fortfarande väldigt hackiga. Detta beror på att för att spara film och spela in under långa tidsperioder, det mesta av roverfilmerna sköts vid 12, sex eller till och med en bild(ar) per sekund. Medan människor tidigare har försökt använda stabilisering och/eller typer av ramblandning för att underlätta denna effekt, Jag har aldrig riktigt varit nöjd med det."

    DutchSteamMachine försöker bestämma bildhastigheten för originalfilmen, som vanligtvis finns i NASA-dokument eller, som i fallet med Apollo 16-filmerna ovan, astronauterna meddelar det när de sätter på kameran.

    "Tyvärr, ibland, bildhastigheten verkar vara avstängd eller fluktuerande, fungerar inte alltid som tänkt, " sa han. "Så det bästa sättet att hitta bildhastigheten är att lyssna på landmärken som astronauterna pratar om och matcha bilderna till det. Jag delar upp källfilen i individuella PNG-ramar, mata in dem till AI tillsammans med ingångsbildhastigheten (en, sex, 12 eller 24) och den önskade utgångshastigheten efter interpolationshastighet (2x, 4x, 8x). AI:n börjar använda min GPU och ser på två riktiga, på varandra följande ramar. Med hjälp av algoritmer, den analyserar rörelser av objekt i de två ramarna och renderar helt nya. Med en interpolationshastighet på, till exempel, 5x, den kan rendera fem "falska" ramar från bara två riktiga ramar. Om bilder spelades in med 12 fps och interpolationshastigheten är inställd på 5x, den slutliga bildhastigheten blir 60, vilket betyder att med bara 12 riktiga ramar, den gjorde 48 "falska" ramar. Båda exporteras sedan tillbaka till en video och spelas upp i 60 fps med både verkliga och falska bildrutor. Jag tillämpar färgkorrigering, så ofta har källfilerna en blå eller orange nyans. Jag synkroniserar filmen med ljud, och om möjligt, även tv och bilder tagna samtidigt. Ibland, två 16 mm kameror kördes samtidigt, så jag kan spela upp dem bredvid varandra."

    Här är en video han delade om sin studio och sin specialiserade utrustning:

    Kredit:Dutchsteammachine

    DutchSteamMachine gör detta arbete på sin fritid, och lägger upp det gratis på sin YouTube-sida. Hans slagord är "Bevara det förflutna för framtiden, "och han använder också samma teknik för att förbättra gammal hemmavideo, bilder och diabilder.

    "Det är fantastiskt att läsa folks reaktioner på mina filmer, " sa han. "Så när folk lägger upp saker som 'Wow! Det här är otroligt! Jag har aldrig sett detta förut!, "det här håller mig igång."

    Om du vill stödja det fantastiska restaurerings-/förbättringsarbete som DutchSteamMachine gör för Apollo-filmerna, här är hans Patreon-sida. Genom att stödja hans arbete, du får extramaterial, tidig åtkomst och förhandstitt på kommande arbete, och en chans att ställa frågor om processen. Och han planerar att fortsätta med allt.

    "Jag planerar att förbättra massor av Apollo-filmer så här, " sa han. "Mycket mer utrymme och historiskt relaterade filmmaterial kommer att publiceras på min YT-kanal kontinuerligt." Han har också en Flickr-sida med mer förbättrade bilder.


    © Vetenskap https://sv.scienceaq.com