Text tracks in CMAF and MPEG-DASH
Titulky zabalené tak, jak streamování balí video: do boxů MP4, rozřezané na fragmenty dlouhé několik sekund. Text uvnitř je WebVTT nebo TTML. Stopový soubor CMAF drží celou stopu; manifest DASH jmenuje její segmenty, aby si je přehrávač stáhl.
Na první pohled
| Typ média | Stopa: application/mp4. Manifest: application/dash+xml. |
|---|---|
| Specifikace | Boxy: ISO/IEC 14496-30, nad formátem ISO base media file format. Stopa: CMAF, ISO/IEC 23000-19. Manifest: MPEG-DASH, ISO/IEC 23009-1. |
| Přesnost času | Tiky hodin stopy: v tom, co Subtitld zapisuje, milisekundy |
| Kódování textu | UTF-8, uvnitř binárních boxů |
| Styl | Jako WebVTT, nebo jako TTML v jeho profilu |
| Umístění | Nastavení cue z WebVTT, nebo oblasti TTML |
| Mluvčí | Hlasové značky WebVTT, nebo agenti TTML |
| V kontejnerech | Samotné MP4: stejná stopa může sedět vedle videa v .mp4. Segmenty CMAF jmenuje i HLS. |
Stavba stopy
Ne text, ale boxy: každý se svou velikostí, čtyřmi písmeny a obsahem, některé s vlastními boxy uvnitř. .cmft, který Subtitld zapíše, s titulky ve WebVTT:
ftyp cmfc · iso6 cmfc cwvt dash moov trak · mdia mdhd 1,000 ticks a second · eng elng en hdlr text · WebVTT stsd · wvtt · vttC WEBVTT mvex · trex moof 1 · from 0 mdat vtte · vttc moof 2 · from 6000 mdat vttc · vtte · vttc · vtte moof 3 · from 12000 mdat vtte
- 1 · Typ souboru
Co soubor je: stopa CMAF (
cmfc) s WebVTT (cwvt), nebo s IMSC 1.1 (im2t) či IMSC 1.0.1 (im1t). - 2 · Film
Jediná stopa: její hodiny, jazyk, handler (
textpro WebVTT,subtpro TTML) a čím jsou její vzorky, zde WebVTT s jeho hlavičkou. - 3 · Fragment
Segment stopy: jeho číslo, kdy začíná na hodinách stopy a jak dlouho trvá každý vzorek v něm.
- 4 · Vzorky
Titulky fragmentu, vzorek po vzorku.
Dva způsoby, jak nést text
WebVTT (wvtt) |
TTML (stpp) |
|
|---|---|---|
| Popis vzorku | Hlavička souboru, v boxu vttC |
Jmenný prostor TTML a typ MIME jmenující profil |
| Vzorek | Cue zobrazené po celý jeho čas | Celý dokument TTML |
| Nic na obrazovce | Prázdný box cue, vtte |
Dokument bez titulku v tom čase |
| Časy | Každého vzorku, ze stopy; v textu žádné | V dokumentu, počítané na hodinách stopy |
| Kodeky, jak je jmenují DASH a HLS | wvtt |
stpp.ttml.im2t, stpp.ttml.im1t, stpp.ttml.etd1 |
Vzorek WebVTT
WebVTT v MP4 nemá vlastní časy cue. Pokaždé, když cue začne nebo skončí, vzorek skončí a začne další, takže vzorek drží cue zobrazené po celý jeho čas, každou v boxu:
| Box | Co obsahuje |
|---|---|
vttc |
Jednu cue |
payl |
Její text: <v Celia>You're a jerk, a Thom. |
sttg |
Její nastavení, pokud nějaká má: line:0 |
vtte |
Nic k zobrazení po čas tohoto vzorku |
Druhý fragment výše, 6 až 12 sekund: cue Celie, která začala ve 4, do 7,5; nic do 8; cue Thoma do 9,6; nic do 12. Cue, která sahá přes dva fragmenty, je v obou.
Vzorek TTML
Každý fragment drží jeden dokument TTML s titulky zobrazenými během něj, oříznutými na jeho čas. Jeho časy se počítají od začátku stopy, ne fragmentu.
<tt xmlns="http://www.w3.org/ns/ttml" … ttp:contentProfiles="http://www.w3.org/ns/ttml/profile/imsc1.1/text" xml:lang="en">
…
<p begin="00:00:04.000" end="00:00:06.000" region="bottom">You're a jerk,<br/>Thom.</p>
To je první fragment, 0 až 6 sekund: cue od 4 do 7,5 zde končí v 6 a v dalším začíná znovu v 6.
| Profil | Kde se požaduje |
|---|---|
| IMSC 1.1 Text | Přehrávače, které čtou IMSC 1.1, novější z obou |
| IMSC 1.0.1 Text | HLS od Applu, které ho jmenuje stpp.ttml.im1t, a starší přehrávače |
| EBU-TT-D | Online přehrávače evropských vysílatelů, přes DVB-DASH |
Stavba manifestu DASH
<MPD xmlns="urn:mpeg:dash:schema:mpd:2011" profiles="urn:mpeg:dash:profile:isoff-live:2011" type="static" mediaPresentationDuration="PT14.000S" minBufferTime="PT6S">
<Period id="1" start="PT0S">
<AdaptationSet id="1" contentType="text" mimeType="application/mp4" lang="en" segmentAlignment="true">
<Role schemeIdUri="urn:mpeg:dash:role:2011" value="subtitle"/>
<SegmentTemplate timescale="1000" duration="6000" startNumber="1" initialization="movie_segments/init.mp4" media="movie_segments/$Number%05d$.m4s"/>
<Representation id="stpp" codecs="stpp.ttml.im2t" bandwidth="1398"/>
</AdaptationSet>
</Period>
</MPD>
| Část | Co to je |
|---|---|
mediaPresentationDuration |
Jak dlouho pořad trvá |
<AdaptationSet> |
Textová stopa, ve svém jazyce, s rolí titulků |
<SegmentTemplate> |
Kde jsou její soubory: inicializace, samotný box filmu, potom fragmenty, 00001.m4s a dále, jeden každých 6 sekund |
codecs |
Co stopa nese: zde IMSC 1.1 Text |
Manifest celého proudu má vedle ní video a zvuk v jiných adaptačních sadách.
CMAF, DASH, nebo HLS?
Stopa CMAF (.cmft) |
DASH (.mpd) |
HLS (.m3u8) |
|
|---|---|---|---|
| Soubory | Jeden | Manifest, potom film a soubor na fragment | Playlist, potom soubor na segment |
| Titulky | WebVTT nebo TTML v MP4 | WebVTT nebo TTML v MP4 | Textové soubory WebVTT; IMSC v MP4 |
| Přehrávají je | Packagery a přehrávače, které berou CMAF | Přehrávače DASH: dash.js, Shaka Player, chytré televizory | Přehrávače Applu, hls.js |
CMAF a DASH v Subtitldu
- Text a zalomení řádků každého titulku
- Kurzíva, tučné písmo, podtržení a barva
- Kde titulek sedí: nastavení cue, nebo oblasti TTML
- Mluvčí jako hlasové značky nebo agenti
- Jazyk zapsaného textu
- Začátek a konec po milisekundách
- Překlady vedle originálu
- Dabing, tváře a barvy mluvčích
Pro uchování použijte projekt .usfx.
Otevření stopy nebo manifestu
Subtitld otevře soubor .cmft, nebo manifest .mpd a soubory, které jmenuje, a:
- čte stopy WebVTT svým čtením WebVTT a stopy TTML svým čtením TTML;
- najde vzorky v každém fragmentu, nebo v tabulce vzorků obyčejného MP4;
- spojí cue, která beze změny pokračuje z jednoho vzorku nebo fragmentu do dalšího;
- čte dokument TTML, který počítá své časy od začátku svého vzorku, jak ho kdysi zapisovaly některé packagery;
- sleduje manifest k jeho textové stopě v jazyce projektu, jinak k první, a k jejím segmentům: podle šablony, číslovaným nebo časovaným, podle seznamu, nebo jednomu souboru; vedle něj, pod jeho základní adresou, nebo na webovém serveru;
- čte soubor WebVTT nebo TTML, který manifest jmenuje samostatně, tak, jak je;
- vezme jazyk stopy jako jazyk projektu.
Soubor bez stopy WebVTT nebo TTML, nebo useknutý, to oznámí. Soubor .mp4 se otevře jako video, ne jako textová stopa.
Export do CMAF a DASH
Export, pak v Titulky zvolte CMFT nebo DASH, nabídne:
- TextOriginál, překlad, nebo obojí, překlad pod originálem.
- Jména mluvčíchVynechána, před textem (Thom: …), nebo hlasové značky WebVTT (
<v Thom>), či agenti TTML (ttm:agent). - FormátováníZachováno, nebo odstraněno.
- Posun časuKaždý titulek dříve nebo později o stejnou hodnotu.
- StopaWebVTT (
wvtt), IMSC 1.1 Text, IMSC 1.0.1 Text, nebo EBU-TT-D pro DVB-DASH: poslední tři jsou TTML (stpp). - Délka segmentu2, 4, 6 nebo 10 sekund. 6 doporučuje Apple.
- VzhledU stopy TTML: bílá s černým obrysem, nebo tak, jak ji kreslí náhled Subtitldu.
CMFT zapíše jeden soubor: film, potom fragment pro každý segment. DASH zapíše manifest a ve složce vedle něj pojmenované podle něj (movie.mpd, movie_segments) film jako init.mp4 a každý fragment jako 00001.m4s a dále; stopa EBU-TT-D přidá do manifestu profil DVB-DASH. V obou případech hodiny počítají milisekundy, stopa je v jazyce zapsaného textu a trvá tak dlouho jako video, nebo jako titulky, když video není.
Zajímavosti
MPEG-DASH vyšel jako ISO/IEC 23009-1 v dubnu 2012, několik měsíců poté, co ho MPEG schválil.
Část MPEG-4, která dává WebVTT a TTML do souborů MP4. Její první vydání je z roku 2014.
Stopové soubory CMAF mají příponu, která říká, co drží: .cmfv pro video, .cmfa pro zvuk, .cmft pro text.
Související formáty
Otevřete ho v Subtitld spolu s videem a upravte časování na zvukové vlně.