Text tracks in CMAF and MPEG-DASH

OtwieranieZapisywanieStreamingBinarny

Napisy spakowane tak, jak streaming pakuje wideo: w pudełka MP4, pocięte na fragmenty po kilka sekund. Tekst w środku to WebVTT lub TTML. Plik ścieżki CMAF zawiera całą ścieżkę; manifest DASH wymienia jej segmenty, które pobiera odtwarzacz.

W skrócie

Typ mediówŚcieżka: application/mp4. Manifest: application/dash+xml.
SpecyfikacjaPudełka: ISO/IEC 14496-30, na bazie ISO base media file format. Ścieżka: CMAF, ISO/IEC 23000-19. Manifest: MPEG-DASH, ISO/IEC 23009-1.
Precyzja czasuTiki zegara ścieżki: w tym, co zapisuje Subtitld, milisekundy
Kodowanie tekstuUTF-8, wewnątrz binarnych pudełek
StylizacjaTa z WebVTT albo z TTML w jego profilu
PozycjonowanieUstawienia napisów WebVTT albo regiony TTML
MówcyZnaczniki głosu WebVTT albo agenci TTML
W kontenerachSamo MP4: ta sama ścieżka może leżeć obok wideo w pliku .mp4. HLS także wymienia segmenty CMAF.

Budowa ścieżki

Nie tekst, lecz pudełka: każde z rozmiarem, czterema literami i zawartością, a niektóre zawierają własne pudełka. Plik .cmft zapisany przez Subtitld, z napisami w WebVTT:

ftyp  cmfc · iso6 cmfc cwvt dash
moov
  trak · mdia
    mdhd   1,000 ticks a second · eng
    elng   en
    hdlr   text · WebVTT
    stsd · wvtt · vttC  WEBVTT
  mvex · trex
moof  1 · from 0
mdat  vtte · vttc
moof  2 · from 6000
mdat  vttc · vtte · vttc · vtte
moof  3 · from 12000
mdat  vtte
  1. 1 · Typ pliku

    Czym jest plik: ścieżką CMAF (cmfc) z WebVTT (cwvt) albo z IMSC 1.1 (im2t) lub IMSC 1.0.1 (im1t).

  2. 2 · Film

    Jedyna ścieżka: jej zegar, język, handler (text dla WebVTT, subt dla TTML) i czym są jej próbki, tutaj WebVTT z jego nagłówkiem.

  3. 3 · Fragment

    Segment ścieżki: jego numer, kiedy się zaczyna na zegarze ścieżki i jak długo trwa każda próbka w nim.

  4. 4 · Próbki

    Napisy fragmentu, próbka po próbce.

Dwa sposoby przenoszenia tekstu

WebVTT (wvtt) TTML (stpp)
Opis próbki Nagłówek pliku, w pudełku vttC Przestrzeń nazw TTML i typ MIME wskazujący profil
Próbka Napisy wyświetlane przez cały jej czas Cały dokument TTML
Nic na ekranie Puste pudełko napisu, vtte Dokument bez napisu w tym czasie
Czasy Każdej próbki, ze ścieżki; żadnych w tekście W dokumencie, liczone na zegarze ścieżki
Kodeki, jak nazywają je DASH i HLS wvtt stpp.ttml.im2t, stpp.ttml.im1t, stpp.ttml.etd1

Próbka WebVTT

WebVTT w MP4 nie ma własnych czasów napisów. Za każdym razem, gdy napis się zaczyna lub kończy, kończy się próbka i zaczyna następna, więc próbka zawiera napisy wyświetlane przez cały jej czas, każdy w pudełku:

Pudełko Co zawiera
vttc Jeden napis
payl Jego tekst: <v Celia>You're a jerk, i Thom.
sttg Jego ustawienia, gdy jakieś ma: line:0
vtte Nic do pokazania w czasie tej próbki

Drugi fragment powyżej, od 6 do 12 sekund: napis Celii, który zaczął się po 4, do 7.5; nic do 8; napis Thoma do 9.6; nic do 12. Napis, który obejmuje dwa fragmenty, jest w obu.

Próbka TTML

Każdy fragment zawiera jeden dokument TTML, z napisami wyświetlanymi w jego trakcie, przyciętymi do jego czasu. Jego czasy liczą się od początku ścieżki, a nie fragmentu.

<tt xmlns="http://www.w3.org/ns/ttml" … ttp:contentProfiles="http://www.w3.org/ns/ttml/profile/imsc1.1/text" xml:lang="en">
  …
  <p begin="00:00:04.000" end="00:00:06.000" region="bottom">You're a jerk,<br/>Thom.</p>

To pierwszy fragment, od 0 do 6 sekund: napis od 4 do 7.5 kończy się tu na 6 i zaczyna ponownie od 6 w następnym.

Profil Gdzie jest wymagany
IMSC 1.1 Text Odtwarzacze czytające IMSC 1.1, nowszy z dwóch
IMSC 1.0.1 Text HLS od Apple, który nazywa go stpp.ttml.im1t, i starsze odtwarzacze
EBU-TT-D Odtwarzacze internetowe europejskich nadawców, przez DVB-DASH

Budowa manifestu DASH

<MPD xmlns="urn:mpeg:dash:schema:mpd:2011" profiles="urn:mpeg:dash:profile:isoff-live:2011" type="static" mediaPresentationDuration="PT14.000S" minBufferTime="PT6S">
  <Period id="1" start="PT0S">
    <AdaptationSet id="1" contentType="text" mimeType="application/mp4" lang="en" segmentAlignment="true">
      <Role schemeIdUri="urn:mpeg:dash:role:2011" value="subtitle"/>
      <SegmentTemplate timescale="1000" duration="6000" startNumber="1" initialization="movie_segments/init.mp4" media="movie_segments/$Number%05d$.m4s"/>
      <Representation id="stpp" codecs="stpp.ttml.im2t" bandwidth="1398"/>
    </AdaptationSet>
  </Period>
</MPD>
Element Co to jest
mediaPresentationDuration Jak długo trwa program
<AdaptationSet> Ścieżka tekstowa, w jej języku, z rolą napisów
<SegmentTemplate> Gdzie są jej pliki: inicjalizacja, czyli samo pudełko filmu, potem fragmenty, 00001.m4s i dalej, jeden co 6 sekund
codecs Co niesie ścieżka: tutaj IMSC 1.1 Text

Manifest całego strumienia ma obok wideo i audio w innych zestawach adaptacji.

CMAF, DASH czy HLS?

Ścieżka CMAF (.cmft) DASH (.mpd) HLS (.m3u8)
Pliki Jeden Manifest, potem film i plik na fragment Playlista, potem plik na segment
Napisy WebVTT lub TTML w MP4 WebVTT lub TTML w MP4 Pliki tekstowe WebVTT; IMSC w MP4
Odtwarzane przez Packagery i odtwarzacze przyjmujące CMAF Odtwarzacze DASH: dash.js, Shaka Player, telewizory smart Odtwarzacze Apple, hls.js

CMAF i DASH w Subtitld

Zachowane w ścieżce
  • Tekst każdego napisu i podziały wierszy
  • Kursywa, pogrubienie, podkreślenie i kolor
  • Położenie: ustawienia napisu albo regiony TTML
  • Mówcy, jako znaczniki głosu lub agenci
  • Język zapisanego tekstu
  • Początek i koniec co do milisekundy
Brak miejsca
  • Tłumaczenia obok oryginału
  • Dubbingi, twarze i kolory mówców

Zapisz projekt .usfx, aby je zachować.

Otwieranie ścieżki lub manifestu

Subtitld otwiera plik .cmft albo manifest .mpd i wskazane w nim pliki, i:

  • odczytuje ścieżki WebVTT czytnikiem WebVTT Subtitld, a ścieżki TTML jego czytnikiem TTML;
  • znajduje próbki w każdym fragmencie albo w tabeli próbek zwykłego MP4;
  • łączy napis, który ciągnie się bez zmian z jednej próbki lub fragmentu do następnego;
  • odczytuje dokument TTML, który liczy czasy od początku swojej próbki, jak dawniej zapisywały go niektóre packagery;
  • podąża od manifestu do jego ścieżki tekstowej w języku projektu, a bez niej do pierwszej, i do jej segmentów: według szablonu, numerowanych lub z czasami, według listy albo w jednym pliku; obok niego, pod jego adresem bazowym albo na serwerze WWW;
  • odczytuje plik WebVTT lub TTML, który manifest wskazuje samodzielnie, taki, jaki jest;
  • przyjmuje język ścieżki jako język projektu.

Plik bez ścieżki WebVTT lub TTML albo urwany to zgłasza. Plik .mp4 otwiera się jako wideo, a nie jako ścieżka tekstowa.

Eksportowanie CMAF i DASH

Okno eksportu Subtitld z wybranym DASH, ścieżką IMSC 1.1 Text, segmentami po 6 sekund i białym tekstem z czarnym obrysem

Eksportuj, potem Napisy i CMFT lub DASH, oferuje:

  • TekstOryginał, tłumaczenie lub oba, z tłumaczeniem pod spodem.
  • Nazwy mówcówPominięte, przed tekstem (Thom: …), jako znaczniki głosu WebVTT (<v Thom>) albo agenci TTML (ttm:agent).
  • FormatowanieZachowane albo usunięte.
  • Przesunięcie czasówKażdy napis wcześniej lub później o tę samą wartość.
  • ŚcieżkaWebVTT (wvtt), IMSC 1.1 Text, IMSC 1.0.1 Text albo EBU-TT-D dla DVB-DASH: trzy ostatnie to TTML (stpp).
  • Długość segmentu2, 4, 6 lub 10 sekund. 6 zaleca Apple.
  • WyglądDla ścieżki TTML: biały z czarnym obrysem albo taki, jak rysuje go podgląd Subtitld.

CMFT zapisuje jeden plik: film, potem fragment dla każdego segmentu. DASH zapisuje manifest, a w folderze obok niego, nazwanym od niego (movie.mpd, movie_segments), film jako init.mp4 i każdy fragment jako 00001.m4s i dalej; ścieżka EBU-TT-D dodaje do manifestu profil DVB-DASH. W obu przypadkach zegar liczy milisekundy, ścieżka jest w języku zapisanego tekstu i trwa tak długo jak wideo albo tak długo jak napisy, gdy nie ma wideo.

Ciekawostki

2012

MPEG-DASH opublikowano jako ISO/IEC 23009-1 w kwietniu 2012 roku, kilka miesięcy po ratyfikacji przez MPEG.

14496-30

Część MPEG-4, która umieszcza WebVTT i TTML w plikach MP4. Jej pierwsze wydanie pochodzi z 2014 roku.

.cmft

Pliki ścieżek CMAF mają rozszerzenie mówiące, co zawierają: .cmfv dla wideo, .cmfa dla audio, .cmft dla tekstu.

Powiązane formaty

Masz plik cmft mpd do poprawienia?

Otwórz go w Subtitld razem z wideo i dopasuj czasy na przebiegu fali dźwiękowej.

Pobierz Subtitld