Hur påverkar ljudtranskodning en mediaservers uppspelningspipeline?

Ljudtranskodning ändrar en mediasevers uppspelningspipeline när klienten kan acceptera videon men inte kan avkoda den valda ljudcodecen, kanaluppsättningen, samplingsformatet eller behållarkombinationen. Servern kan behålla den ursprungliga videobitströmmen medan den endast avkodar och bygger om ljudvägen.

Det är betydligt billigare än fullständig videotranskodning, men det är inte gratis. Servern utför fortfarande codecförhandling, ljudavkodning, kanalremixning eller omprovtagning, kodning, tidsstämpeljustering, remuxning och ibland segmentgenerering innan uppspelningen kan fortsätta.

Vilken kompatibilitetskontroll utlöser ljudtranskodning?

Mediasevern jämför källströmmarna med klientprofilen innan den väljer en uppspelningsväg. klientens codec-stöd avgör uppspelningsmetoden. En TV kan stödja videocodec men avvisa TrueHD, DTS, flerspårigt AAC eller en viss kanaluppsättning.

Direct Play kräver att klienten accepterar hela filen som den är lagrad. Direct Stream kan bevara kompatibla strömmar samtidigt som behållaren ändras, och ljudtranskodning kan ersätta en inkompatibel ljudström utan att avkoda videon.

Beslutet kan också ändras beroende på vald undertext, fjärrbandbreddsinställning, uppspelningsapplikation, HDMI-ljudenhet eller webbläsare. Kompatibilitet gäller hela uppspelningskedjan, inte bara bildskärmen.

Varför kan videoströmmen förbli oförändrad?

En mediabehållare innehåller separata video-, ljud- och undertextströmmar. videon kan förbli kopierad medan ljudet konverteras, vilket gör att servern kan kopiera komprimerade videopaket till en ny utdata istället för att avkoda varje bildruta.

Kopiering av videoström bevarar den ursprungliga codec, upplösning, bildfrekvens, HDR-information och komprimerad kvalitet. Det undviker också GPU- eller CPU-arbetet som är förknippat med avkodning, skalning, tonmappning och videokodning.

Utdata behöver fortfarande synkroniserade tidsstämplar och en behållare eller leveransmetod som klienten accepterar. Att behålla videon oförändrad tar därför bort den mest kostsamma omvandlingen men kringgår inte resten av processen.

Vad händer under avkodning, remixning, omprovtagning och kodning?

Transkodning omvandlar en komprimerad källa till en annan representation. ljudtranskodning avkodar och kodar om en ström. För ljud avkodar servern först komprimerade prover till en mellanliggande PCM-liknande form.

Den kan sedan nedmixa 7.1 eller 5.1 kanaler till stereo, ändra kanalplacering, justera samplingsfrekvens eller konvertera samplingsformat innan resultatet kodas som AAC, AC-3, Opus, MP3 eller en annan klientstödd codec.

Varje steg förbrukar CPU och minnesbandbredd och kan buffra prover. Ljudkodning är vanligtvis mycket lättare än videokodning, men flera samtidiga strömmar, högupplöst ljud, mjukvarubaserade codecs eller en liten hemmabaserad server kan ändå göra belastningen märkbar.

Varför kan behållaren eller leveransprotokollet också ändras?

Det konverterade ljudet och den kopierade videon måste levereras i en kompatibel struktur. HLS-paketering lägger till manifest och mediesegment, så en server kan remuxa strömmar och producera manifest och segment även när videopixlarna är oförändrade.

En klient som avvisar den ursprungliga MKV-behållaren kan acceptera samma video i fragmenterad MP4, MPEG-TS eller ett annat strömningsformat. Denna väg kallas ofta Direktström eftersom komprimeringen bevaras för kompatibla strömmar medan paketeringen ändras.

Segmentering inför buffring och tidsstämpelgränser. Servern måste hålla det nykodade ljudet synkroniserat med kopierad video vid sökningar, spårbyten, avbrott och uppdateringar av live-spellistor.

Hur påverkar ljudval synk, kvalitet och serverbelastning?

Varje förlustfylld omkodning kan förändra kvaliteten, medan transkodning byter kompatibilitet mot beräkningskraft och kvalitet. En lägre bithastighet eller stereonedmix minskar leveranskraven men kan inte bevara alla egenskaper hos den ursprungliga immersiva ljudspåret.

Ljudfilter lägger till fördröjning och måste bevara presentations-tidsstämplar. Felaktig hantering av tidsstämplar, långa kodarbuffertar eller en omstart av pipeline kan skapa läpprörelsesynkroniseringsavvikelse även om videoströmmen aldrig kodades om.

Hårdvaruacceleration kan hjälpa video men inte den valda ljudcodecen, så en instrumentpanel kan visa videoströmskopiering bredvid icke-noll CPU-användning. Den korrekta jämförelsen är endast ljudtranskodning mot full videotranskodning, inte mot en helt inaktiv server.

När eskalerar ljudtranskodning till full videotranskodning?

Inbränning av undertexter ändrar själva videoströmmen. En inkompatibel videocodec, upplösningsgräns, bithastighetsgräns, tonmappningskrav eller bildundertext kan på liknande sätt tvinga servern att avkoda och koda om video.

Processen blir då mycket tyngre: videodekodning, filtrering, skalning eller tonmappning, videokodning, ljudkonvertering och muxning kan alla ske samtidigt. Ljudinkompatibilitet var bara en anledning till att den ursprungliga filen inte kunde levereras direkt.

Kontrollera serverns uppspelningsbeslut per ström istället för att märka hela sessionen som ”transkodning”. Strömkopiering plus ljudkonvertering har en annan kvalitet, effekt och samtidighetsgräns än en fullständig videotranskodning.

Vanliga frågor

Minskar ljudtranskodning videokvaliteten?

Inte när videoströmmen kopieras oförändrad. Videokvaliteten ändras endast om servern också avkodar och kodar om video.

Varför triggar en stereoklient transkodning?

Källan kan använda en icke-stödd codec eller flerkanalslayout, vilket kräver att servern avkodar, mixar ner och kodar en kompatibel stereospår.

Kan ljudtranskodning orsaka buffring?

Ja, när servern inte kan koda tillräckligt snabbt, segmentgenerering väntar, tidsstämplar driver iväg eller den återstående nätverks- och lagringsvägen är begränsad.

Är Direct Stream samma som Direct Play?

Nej. Direct Play skickar den ursprungliga filstrukturen, medan Direct Stream remuxar kompatibla strömmar och kan transkoda endast en icke-stödd ström.

Slutsats

Ljudtranskodning ersätter en inkompatibel ljudström samtidigt som den ofta bevarar den ursprungliga videoströmmen. Servern avkodar, mixar om, resamplar, kodar, synkroniserar och paketerar om media, så sessionen använder fler resurser än Direct Play men betydligt färre än en fullständig videotranskodning. Diagnostisera uppspelning per ström för att förstå den verkliga processen.