Text tracks in CMAF and MPEG-DASH

OtevřeníUloženíStreamováníBinární

Titulky zabalené tak, jak streamování balí video: do boxů MP4, rozřezané na fragmenty dlouhé několik sekund. Text uvnitř je WebVTT nebo TTML. Stopový soubor CMAF drží celou stopu; manifest DASH jmenuje její segmenty, aby si je přehrávač stáhl.

Na první pohled

Typ médiaStopa: application/mp4. Manifest: application/dash+xml.
SpecifikaceBoxy: ISO/IEC 14496-30, nad formátem ISO base media file format. Stopa: CMAF, ISO/IEC 23000-19. Manifest: MPEG-DASH, ISO/IEC 23009-1.
Přesnost časuTiky hodin stopy: v tom, co Subtitld zapisuje, milisekundy
Kódování textuUTF-8, uvnitř binárních boxů
StylJako WebVTT, nebo jako TTML v jeho profilu
UmístěníNastavení cue z WebVTT, nebo oblasti TTML
MluvčíHlasové značky WebVTT, nebo agenti TTML
V kontejnerechSamotné MP4: stejná stopa může sedět vedle videa v .mp4. Segmenty CMAF jmenuje i HLS.

Stavba stopy

Ne text, ale boxy: každý se svou velikostí, čtyřmi písmeny a obsahem, některé s vlastními boxy uvnitř. .cmft, který Subtitld zapíše, s titulky ve WebVTT:

ftyp  cmfc · iso6 cmfc cwvt dash
moov
  trak · mdia
    mdhd   1,000 ticks a second · eng
    elng   en
    hdlr   text · WebVTT
    stsd · wvtt · vttC  WEBVTT
  mvex · trex
moof  1 · from 0
mdat  vtte · vttc
moof  2 · from 6000
mdat  vttc · vtte · vttc · vtte
moof  3 · from 12000
mdat  vtte
  1. 1 · Typ souboru

    Co soubor je: stopa CMAF (cmfc) s WebVTT (cwvt), nebo s IMSC 1.1 (im2t) či IMSC 1.0.1 (im1t).

  2. 2 · Film

    Jediná stopa: její hodiny, jazyk, handler (text pro WebVTT, subt pro TTML) a čím jsou její vzorky, zde WebVTT s jeho hlavičkou.

  3. 3 · Fragment

    Segment stopy: jeho číslo, kdy začíná na hodinách stopy a jak dlouho trvá každý vzorek v něm.

  4. 4 · Vzorky

    Titulky fragmentu, vzorek po vzorku.

Dva způsoby, jak nést text

WebVTT (wvtt) TTML (stpp)
Popis vzorku Hlavička souboru, v boxu vttC Jmenný prostor TTML a typ MIME jmenující profil
Vzorek Cue zobrazené po celý jeho čas Celý dokument TTML
Nic na obrazovce Prázdný box cue, vtte Dokument bez titulku v tom čase
Časy Každého vzorku, ze stopy; v textu žádné V dokumentu, počítané na hodinách stopy
Kodeky, jak je jmenují DASH a HLS wvtt stpp.ttml.im2t, stpp.ttml.im1t, stpp.ttml.etd1

Vzorek WebVTT

WebVTT v MP4 nemá vlastní časy cue. Pokaždé, když cue začne nebo skončí, vzorek skončí a začne další, takže vzorek drží cue zobrazené po celý jeho čas, každou v boxu:

Box Co obsahuje
vttc Jednu cue
payl Její text: <v Celia>You're a jerk, a Thom.
sttg Její nastavení, pokud nějaká má: line:0
vtte Nic k zobrazení po čas tohoto vzorku

Druhý fragment výše, 6 až 12 sekund: cue Celie, která začala ve 4, do 7,5; nic do 8; cue Thoma do 9,6; nic do 12. Cue, která sahá přes dva fragmenty, je v obou.

Vzorek TTML

Každý fragment drží jeden dokument TTML s titulky zobrazenými během něj, oříznutými na jeho čas. Jeho časy se počítají od začátku stopy, ne fragmentu.

<tt xmlns="http://www.w3.org/ns/ttml" … ttp:contentProfiles="http://www.w3.org/ns/ttml/profile/imsc1.1/text" xml:lang="en">
  …
  <p begin="00:00:04.000" end="00:00:06.000" region="bottom">You're a jerk,<br/>Thom.</p>

To je první fragment, 0 až 6 sekund: cue od 4 do 7,5 zde končí v 6 a v dalším začíná znovu v 6.

Profil Kde se požaduje
IMSC 1.1 Text Přehrávače, které čtou IMSC 1.1, novější z obou
IMSC 1.0.1 Text HLS od Applu, které ho jmenuje stpp.ttml.im1t, a starší přehrávače
EBU-TT-D Online přehrávače evropských vysílatelů, přes DVB-DASH

Stavba manifestu DASH

<MPD xmlns="urn:mpeg:dash:schema:mpd:2011" profiles="urn:mpeg:dash:profile:isoff-live:2011" type="static" mediaPresentationDuration="PT14.000S" minBufferTime="PT6S">
  <Period id="1" start="PT0S">
    <AdaptationSet id="1" contentType="text" mimeType="application/mp4" lang="en" segmentAlignment="true">
      <Role schemeIdUri="urn:mpeg:dash:role:2011" value="subtitle"/>
      <SegmentTemplate timescale="1000" duration="6000" startNumber="1" initialization="movie_segments/init.mp4" media="movie_segments/$Number%05d$.m4s"/>
      <Representation id="stpp" codecs="stpp.ttml.im2t" bandwidth="1398"/>
    </AdaptationSet>
  </Period>
</MPD>
Část Co to je
mediaPresentationDuration Jak dlouho pořad trvá
<AdaptationSet> Textová stopa, ve svém jazyce, s rolí titulků
<SegmentTemplate> Kde jsou její soubory: inicializace, samotný box filmu, potom fragmenty, 00001.m4s a dále, jeden každých 6 sekund
codecs Co stopa nese: zde IMSC 1.1 Text

Manifest celého proudu má vedle ní video a zvuk v jiných adaptačních sadách.

CMAF, DASH, nebo HLS?

Stopa CMAF (.cmft) DASH (.mpd) HLS (.m3u8)
Soubory Jeden Manifest, potom film a soubor na fragment Playlist, potom soubor na segment
Titulky WebVTT nebo TTML v MP4 WebVTT nebo TTML v MP4 Textové soubory WebVTT; IMSC v MP4
Přehrávají je Packagery a přehrávače, které berou CMAF Přehrávače DASH: dash.js, Shaka Player, chytré televizory Přehrávače Applu, hls.js

CMAF a DASH v Subtitldu

Uloženo ve stopě
  • Text a zalomení řádků každého titulku
  • Kurzíva, tučné písmo, podtržení a barva
  • Kde titulek sedí: nastavení cue, nebo oblasti TTML
  • Mluvčí jako hlasové značky nebo agenti
  • Jazyk zapsaného textu
  • Začátek a konec po milisekundách
Nemá kam jít
  • Překlady vedle originálu
  • Dabing, tváře a barvy mluvčích

Pro uchování použijte projekt .usfx.

Otevření stopy nebo manifestu

Subtitld otevře soubor .cmft, nebo manifest .mpd a soubory, které jmenuje, a:

  • čte stopy WebVTT svým čtením WebVTT a stopy TTML svým čtením TTML;
  • najde vzorky v každém fragmentu, nebo v tabulce vzorků obyčejného MP4;
  • spojí cue, která beze změny pokračuje z jednoho vzorku nebo fragmentu do dalšího;
  • čte dokument TTML, který počítá své časy od začátku svého vzorku, jak ho kdysi zapisovaly některé packagery;
  • sleduje manifest k jeho textové stopě v jazyce projektu, jinak k první, a k jejím segmentům: podle šablony, číslovaným nebo časovaným, podle seznamu, nebo jednomu souboru; vedle něj, pod jeho základní adresou, nebo na webovém serveru;
  • čte soubor WebVTT nebo TTML, který manifest jmenuje samostatně, tak, jak je;
  • vezme jazyk stopy jako jazyk projektu.

Soubor bez stopy WebVTT nebo TTML, nebo useknutý, to oznámí. Soubor .mp4 se otevře jako video, ne jako textová stopa.

Export do CMAF a DASH

Dialog exportu Subtitldu se zvoleným DASH, stopou IMSC 1.1 Text, segmenty po 6 sekundách a bílým textem s černým obrysem

Export, pak v Titulky zvolte CMFT nebo DASH, nabídne:

  • TextOriginál, překlad, nebo obojí, překlad pod originálem.
  • Jména mluvčíchVynechána, před textem (Thom: …), nebo hlasové značky WebVTT (<v Thom>), či agenti TTML (ttm:agent).
  • FormátováníZachováno, nebo odstraněno.
  • Posun časuKaždý titulek dříve nebo později o stejnou hodnotu.
  • StopaWebVTT (wvtt), IMSC 1.1 Text, IMSC 1.0.1 Text, nebo EBU-TT-D pro DVB-DASH: poslední tři jsou TTML (stpp).
  • Délka segmentu2, 4, 6 nebo 10 sekund. 6 doporučuje Apple.
  • VzhledU stopy TTML: bílá s černým obrysem, nebo tak, jak ji kreslí náhled Subtitldu.

CMFT zapíše jeden soubor: film, potom fragment pro každý segment. DASH zapíše manifest a ve složce vedle něj pojmenované podle něj (movie.mpd, movie_segments) film jako init.mp4 a každý fragment jako 00001.m4s a dále; stopa EBU-TT-D přidá do manifestu profil DVB-DASH. V obou případech hodiny počítají milisekundy, stopa je v jazyce zapsaného textu a trvá tak dlouho jako video, nebo jako titulky, když video není.

Zajímavosti

2012

MPEG-DASH vyšel jako ISO/IEC 23009-1 v dubnu 2012, několik měsíců poté, co ho MPEG schválil.

14496-30

Část MPEG-4, která dává WebVTT a TTML do souborů MP4. Její první vydání je z roku 2014.

.cmft

Stopové soubory CMAF mají příponu, která říká, co drží: .cmfv pro video, .cmfa pro zvuk, .cmft pro text.

Související formáty

Máte soubor cmft mpd, který potřebuje opravit?

Otevřete ho v Subtitld spolu s videem a upravte časování na zvukové vlně.

Stáhnout Subtitld