Co powoduje rozjeżdżanie się synchronizacji dźwięku dopiero po transkodowaniu?

Eva Wong jest redaktorką techniczną i rezydentką majsterkowania w ZimaSpace. Jest geekiem od zawsze, z pasją do domowych laboratoriów i oprogramowania open source, a jej specjalnością jest przekładanie złożonych zagadnień technicznych na przystępne, praktyczne poradniki. Eva wierzy, że samodzielne hostowanie powinno sprawiać radość, a nie onieśmielać. Dzięki swoim samouczkom pomaga społeczności oswoić konfigurację sprzętu, od budowy pierwszego serwera NAS po opanowanie kontenerów Docker.

Dźwięk traci synchronizację po transkodowaniu, gdy wygenerowana oś czasu dźwięku przestaje postępować dokładnie w tym samym tempie lub od tej samej granicy czasowej co wideo.

Odtwarzanie bezpośrednie może ukrywać problem, ponieważ klient korzysta z oryginalnego kontenera i jego natywnych instrukcji dotyczących synchronizacji, podczas gdy transkodowanie obejmuje dekodowanie, resampling, ponowne kodowanie, nadawanie znaczników czasu, segmentowanie i remuksowanie jednego lub obu strumieni. Zacznij od ustalenia, czy błąd polega na stałym przesunięciu, stopniowo narastającym rozsynchronizowaniu czy skoku pojawiającym się po przewinięciu lub wznowieniu odtwarzania. Każdy z tych objawów wskazuje na inną część potoku przetwarzania multimediów.

Określ rodzaj błędu synchronizacji przed zmianą ustawień transkodera

Odtwórz materiał od początku bez przewijania i zanotuj przesunięcie na początku, w środku i na końcu. Wybierz scenę z widocznym uderzeniem lub spółgłoską w wypowiedzi, zamiast oceniać synchronizację na podstawie muzyki w tle.

Stałe przesunięcie, które się nie zmienia, wskazuje na początkowy znacznik czasu, listę edycji, opóźnienie odbiornika lub ustawienie klienta. Stopniowo narastająca różnica sugeruje niezgodne częstotliwości zegara, błędną interpretację liczby klatek na sekundę, rozciąganie dźwięku lub resampling. Nagły skok po przewinięciu lub wznowieniu odtwarzania wskazuje na znaczniki czasu segmentów i ponownego uruchomienia.

Powtórz pomiar z wyłączonymi napisami i ręcznym opóźnieniem dźwięku klienta ustawionym na zero. Skorygowanie narastającego rozsynchronizowania jednym stałym przesunięciem jedynie ukrywa objaw w jednym momencie.

Potwierdź, że oryginalny plik jest zsynchronizowany

Odtwórz źródło lokalnie w zaufanym odtwarzaczu komputerowym i włącz odtwarzanie bezpośrednie w zgodnym kliencie multimediów. Sprawdź ten sam zakres czasu, w którym podczas transkodowania dochodzi do rozsynchronizowania.

Jeśli źródło również traci synchronizację podczas odtwarzania lokalnego, sprawdź lub napraw plik multimedialny, zanim zmienisz ustawienia serwera. Jeśli źródło zachowuje synchronizację wszędzie poza transkodowaną ścieżką, zachowaj plik i zarejestruj decyzję serwera multimediów dotyczącą odtwarzania, polecenie FFmpeg oraz wersję klienta.

Użyj drugiego pliku z tymi samymi kodekami i znaną poprawną synchronizacją jako materiału kontrolnego. Jeśli problem dotyczy jednego tytułu, przyczyną mogą być znaczniki czasu źródła lub metadane kontenera; jeśli wiele tytułów nie działa na jednym kliencie, problem może leżeć we wspólnej ścieżce transkodera, segmentera lub odtwarzacza.

Ustal, które strumienie są faktycznie konwertowane

Sprawdź, czy sesja obejmuje transkodowanie wyłącznie dźwięku z kopiowaniem strumienia wideo, remuksowanie bez konwersji kodeków czy pełne transkodowanie wideo i dźwięku. Każda z tych ścieżek wiąże się z innymi granicami czasowymi.

Konwersja samego dźwięku również może powodować desynchronizację po przewinięciu. W zgłoszeniu problemu Jellyfin odtworzono przypadek desynchronizacji dźwięku po przewinięciu, gdy E-AC-3 lub DTS konwertowano do AAC, a strumień wideo pozostawał kopiowany bez zmian.

Przełącz na ścieżkę dźwiękową obsługiwaną przez klienta, nie zmieniając obrazu, jakości ani napisów. Jeśli sesja przełączy się na odtwarzanie bezpośrednie, a rozjazd synchronizacji zniknie, skup się na znacznikach czasu dźwięku, ponownym próbkowaniu, konwersji kanałów lub wygenerowanym kontenerze dostarczania, a nie na wydajności kodowania wideo.

Opis ZimaSpace potoku transkodowania dźwięku przedstawia dodatkowy mechanizm pomocny w interpretacji tego testu na poziomie strumienia.

Przetestuj odtwarzanie od początku, po przewinięciu i po wznowieniu

Przeprowadź trzy kontrolowane sesje z użyciem tego samego klienta i pliku: nieprzerwane odtwarzanie od początku, przewinięcie poza zakres bufora oraz wznowienie od zapisanego miejsca. Dokładnie zanotuj, kiedy zmienia się synchronizacja.

Zgłaszano, że odtwarzanie materiałów 4K po transkodowaniu jest zsynchronizowane od początku, ale przesuwa się po przewinięciu, zmianie rozdziału lub wznowieniu. Cechą wyróżniającą jest zmiana osi czasu podczas transkodowania, a nie sama możliwość dekodowania multimediów.

Osobne zgłoszenie Jellyfin wskazuje na desynchronizację występującą przy wznawianiu odtwarzania, nawet gdy plik źródłowy jest poprawny. Taki wzorzec pozwala wskazać obsługę wznawiania odtwarzania, zanim przeprowadzisz remuksowanie całej biblioteki.

Jeśli nie działa tylko przewijanie lub wznawianie, przetestuj inny kontener dostarczania lub odtwarzacz kliencki, jeśli aplikacja udostępnia taką opcję. Nieprzerwane odtwarzanie potraktuj jako próbę kontrolną, aby wynik można było przypisać zachowaniu znaczników czasu przy ponownym rozpoczęciu odtwarzania.

Sprawdź metadane dotyczące synchronizacji źródła, liczby klatek na sekundę i rozciągnięcia dźwięku

Użyj analizatora multimediów, aby zarejestrować liczbę klatek na sekundę i bazę czasu wideo, częstotliwość próbkowania dźwięku, czasy rozpoczęcia strumieni, czas trwania, ujemne znaczniki czasu, listy edycji oraz wartości opóźnienia lub rozciągnięcia ścieżek. Porównaj pierwszy i ostatni znacznik czasu prezentacji.

Niektóre ścieżki Matroska celowo zawierają liniową korektę synchronizacji, aby dopasować audio ze źródła o innej liczbie klatek na sekundę. W jednym z opisów problemów Jellyfin wskazano liniowo rozjeżdżające się ścieżki audio, które działają prawidłowo w oryginalnym kontenerze, ale są nieprawidłowo obsługiwane podczas transkodowania.

Jeśli czas trwania audio różni się od czasu trwania wideo w sposób proporcjonalny, utwórz poprawioną kopię testową, jawnie zmieniając częstotliwość próbkowania lub rozciągając audio w czasie jeden raz, a następnie zmiksuj je ponownie z czystymi znacznikami czasu. Zachowaj oryginał i przetestuj jeden tytuł przed zastosowaniem naprawy zbiorczej.

Sprawdź zachowanie znaczników czasu segmentów HLS lub fMP4

Sprawdź polecenie transkodera pod kątem flag wyszukiwania, kopiowania znaczników czasu, obsługi ujemnych znaczników czasu, typu segmentów HLS, czasu trwania segmentu oraz tego, czy po przejściu klienta poza buforowaną zawartość uruchamia się nowy proces transkodowania.

Analiza znaczników czasu w Jellyfin wykazała, że niedokładne wyszukiwanie może powodować ponowne uruchomienie strumienia HLS z przesunięciem względem pierwotnej osi czasu. Głównym problemem były niezsynchronizowane znaczniki czasu transkodowanego materiału, które wpływały następnie na synchronizację odtwarzania po stronie klienta.

Nie kopiuj flag wiersza poleceń z niepowiązanej wersji do kontenera produkcyjnego. Najpierw zaktualizuj lub cofnij wersję serwera i klienta w ramach obsługiwanych ścieżek, wyczyść tylko możliwe do odtworzenia segmenty transkodowania i porównaj działanie MPEG-TS, fMP4 lub natywnego odtwarzacza, jeśli aplikacja udostępnia takie opcje.

Zastosuj najmniejszą możliwą poprawkę i zweryfikuj materiał w pełnym czasie trwania

Zastosuj rozwiązanie potwierdzone testami: wybierz zgodną ścieżkę audio lub klienta, unikaj problematycznej ścieżki wyszukiwania i wznawiania, zmień obsługiwany kontener strumieniowania, zaktualizuj lub przypnij wersję serwera multimediów albo znormalizuj jedno źródło z uszkodzonymi metadanymi synchronizacji.

Nie transkoduj wszystkich filmów tylko dlatego, że w jednej aplikacji telewizyjnej występuje rozjeżdżanie synchronizacji. Problem dotyczący konkretnego klienta należy rozwiązać po stronie klienta lub profilu odtwarzania, natomiast liniowe rozjeżdżanie synchronizacji dotyczące konkretnego źródła wymaga naprawy synchronizacji tego pliku.

Zweryfikuj naprawioną ścieżkę od początku do końca, a następnie ponownie wykonaj wyszukiwanie i wznów odtwarzanie w pobliżu pierwotnego miejsca awarii. Problem jest rozwiązany dopiero wtedy, gdy przesunięcie pozostaje stabilne przez cały czas trwania materiału, wygenerowane segmenty zachowują oczekiwaną oś czasu, a te same ustawienia działają po ponownym uruchomieniu klienta i odtworzeniu serwera.

Wsparcie i porady

Więcej do przeczytania

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.