Text tracks in CMAF and MPEG-DASH
Napisy spakowane tak, jak streaming pakuje wideo: w pudełka MP4, pocięte na fragmenty po kilka sekund. Tekst w środku to WebVTT lub TTML. Plik ścieżki CMAF zawiera całą ścieżkę; manifest DASH wymienia jej segmenty, które pobiera odtwarzacz.
W skrócie
| Typ mediów | Ścieżka: application/mp4. Manifest: application/dash+xml. |
|---|---|
| Specyfikacja | Pudełka: ISO/IEC 14496-30, na bazie ISO base media file format. Ścieżka: CMAF, ISO/IEC 23000-19. Manifest: MPEG-DASH, ISO/IEC 23009-1. |
| Precyzja czasu | Tiki zegara ścieżki: w tym, co zapisuje Subtitld, milisekundy |
| Kodowanie tekstu | UTF-8, wewnątrz binarnych pudełek |
| Stylizacja | Ta z WebVTT albo z TTML w jego profilu |
| Pozycjonowanie | Ustawienia napisów WebVTT albo regiony TTML |
| Mówcy | Znaczniki głosu WebVTT albo agenci TTML |
| W kontenerach | Samo MP4: ta sama ścieżka może leżeć obok wideo w pliku .mp4. HLS także wymienia segmenty CMAF. |
Budowa ścieżki
Nie tekst, lecz pudełka: każde z rozmiarem, czterema literami i zawartością, a niektóre zawierają własne pudełka. Plik .cmft zapisany przez Subtitld, z napisami w WebVTT:
ftyp cmfc · iso6 cmfc cwvt dash moov trak · mdia mdhd 1,000 ticks a second · eng elng en hdlr text · WebVTT stsd · wvtt · vttC WEBVTT mvex · trex moof 1 · from 0 mdat vtte · vttc moof 2 · from 6000 mdat vttc · vtte · vttc · vtte moof 3 · from 12000 mdat vtte
- 1 · Typ pliku
Czym jest plik: ścieżką CMAF (
cmfc) z WebVTT (cwvt) albo z IMSC 1.1 (im2t) lub IMSC 1.0.1 (im1t). - 2 · Film
Jedyna ścieżka: jej zegar, język, handler (
textdla WebVTT,subtdla TTML) i czym są jej próbki, tutaj WebVTT z jego nagłówkiem. - 3 · Fragment
Segment ścieżki: jego numer, kiedy się zaczyna na zegarze ścieżki i jak długo trwa każda próbka w nim.
- 4 · Próbki
Napisy fragmentu, próbka po próbce.
Dwa sposoby przenoszenia tekstu
WebVTT (wvtt) |
TTML (stpp) |
|
|---|---|---|
| Opis próbki | Nagłówek pliku, w pudełku vttC |
Przestrzeń nazw TTML i typ MIME wskazujący profil |
| Próbka | Napisy wyświetlane przez cały jej czas | Cały dokument TTML |
| Nic na ekranie | Puste pudełko napisu, vtte |
Dokument bez napisu w tym czasie |
| Czasy | Każdej próbki, ze ścieżki; żadnych w tekście | W dokumencie, liczone na zegarze ścieżki |
| Kodeki, jak nazywają je DASH i HLS | wvtt |
stpp.ttml.im2t, stpp.ttml.im1t, stpp.ttml.etd1 |
Próbka WebVTT
WebVTT w MP4 nie ma własnych czasów napisów. Za każdym razem, gdy napis się zaczyna lub kończy, kończy się próbka i zaczyna następna, więc próbka zawiera napisy wyświetlane przez cały jej czas, każdy w pudełku:
| Pudełko | Co zawiera |
|---|---|
vttc |
Jeden napis |
payl |
Jego tekst: <v Celia>You're a jerk, i Thom. |
sttg |
Jego ustawienia, gdy jakieś ma: line:0 |
vtte |
Nic do pokazania w czasie tej próbki |
Drugi fragment powyżej, od 6 do 12 sekund: napis Celii, który zaczął się po 4, do 7.5; nic do 8; napis Thoma do 9.6; nic do 12. Napis, który obejmuje dwa fragmenty, jest w obu.
Próbka TTML
Każdy fragment zawiera jeden dokument TTML, z napisami wyświetlanymi w jego trakcie, przyciętymi do jego czasu. Jego czasy liczą się od początku ścieżki, a nie fragmentu.
<tt xmlns="http://www.w3.org/ns/ttml" … ttp:contentProfiles="http://www.w3.org/ns/ttml/profile/imsc1.1/text" xml:lang="en">
…
<p begin="00:00:04.000" end="00:00:06.000" region="bottom">You're a jerk,<br/>Thom.</p>
To pierwszy fragment, od 0 do 6 sekund: napis od 4 do 7.5 kończy się tu na 6 i zaczyna ponownie od 6 w następnym.
| Profil | Gdzie jest wymagany |
|---|---|
| IMSC 1.1 Text | Odtwarzacze czytające IMSC 1.1, nowszy z dwóch |
| IMSC 1.0.1 Text | HLS od Apple, który nazywa go stpp.ttml.im1t, i starsze odtwarzacze |
| EBU-TT-D | Odtwarzacze internetowe europejskich nadawców, przez DVB-DASH |
Budowa manifestu DASH
<MPD xmlns="urn:mpeg:dash:schema:mpd:2011" profiles="urn:mpeg:dash:profile:isoff-live:2011" type="static" mediaPresentationDuration="PT14.000S" minBufferTime="PT6S">
<Period id="1" start="PT0S">
<AdaptationSet id="1" contentType="text" mimeType="application/mp4" lang="en" segmentAlignment="true">
<Role schemeIdUri="urn:mpeg:dash:role:2011" value="subtitle"/>
<SegmentTemplate timescale="1000" duration="6000" startNumber="1" initialization="movie_segments/init.mp4" media="movie_segments/$Number%05d$.m4s"/>
<Representation id="stpp" codecs="stpp.ttml.im2t" bandwidth="1398"/>
</AdaptationSet>
</Period>
</MPD>
| Element | Co to jest |
|---|---|
mediaPresentationDuration |
Jak długo trwa program |
<AdaptationSet> |
Ścieżka tekstowa, w jej języku, z rolą napisów |
<SegmentTemplate> |
Gdzie są jej pliki: inicjalizacja, czyli samo pudełko filmu, potem fragmenty, 00001.m4s i dalej, jeden co 6 sekund |
codecs |
Co niesie ścieżka: tutaj IMSC 1.1 Text |
Manifest całego strumienia ma obok wideo i audio w innych zestawach adaptacji.
CMAF, DASH czy HLS?
Ścieżka CMAF (.cmft) |
DASH (.mpd) |
HLS (.m3u8) |
|
|---|---|---|---|
| Pliki | Jeden | Manifest, potem film i plik na fragment | Playlista, potem plik na segment |
| Napisy | WebVTT lub TTML w MP4 | WebVTT lub TTML w MP4 | Pliki tekstowe WebVTT; IMSC w MP4 |
| Odtwarzane przez | Packagery i odtwarzacze przyjmujące CMAF | Odtwarzacze DASH: dash.js, Shaka Player, telewizory smart | Odtwarzacze Apple, hls.js |
CMAF i DASH w Subtitld
- Tekst każdego napisu i podziały wierszy
- Kursywa, pogrubienie, podkreślenie i kolor
- Położenie: ustawienia napisu albo regiony TTML
- Mówcy, jako znaczniki głosu lub agenci
- Język zapisanego tekstu
- Początek i koniec co do milisekundy
- Tłumaczenia obok oryginału
- Dubbingi, twarze i kolory mówców
Zapisz projekt .usfx, aby je zachować.
Otwieranie ścieżki lub manifestu
Subtitld otwiera plik .cmft albo manifest .mpd i wskazane w nim pliki, i:
- odczytuje ścieżki WebVTT czytnikiem WebVTT Subtitld, a ścieżki TTML jego czytnikiem TTML;
- znajduje próbki w każdym fragmencie albo w tabeli próbek zwykłego MP4;
- łączy napis, który ciągnie się bez zmian z jednej próbki lub fragmentu do następnego;
- odczytuje dokument TTML, który liczy czasy od początku swojej próbki, jak dawniej zapisywały go niektóre packagery;
- podąża od manifestu do jego ścieżki tekstowej w języku projektu, a bez niej do pierwszej, i do jej segmentów: według szablonu, numerowanych lub z czasami, według listy albo w jednym pliku; obok niego, pod jego adresem bazowym albo na serwerze WWW;
- odczytuje plik WebVTT lub TTML, który manifest wskazuje samodzielnie, taki, jaki jest;
- przyjmuje język ścieżki jako język projektu.
Plik bez ścieżki WebVTT lub TTML albo urwany to zgłasza. Plik .mp4 otwiera się jako wideo, a nie jako ścieżka tekstowa.
Eksportowanie CMAF i DASH
Eksportuj, potem Napisy i CMFT lub DASH, oferuje:
- TekstOryginał, tłumaczenie lub oba, z tłumaczeniem pod spodem.
- Nazwy mówcówPominięte, przed tekstem (Thom: …), jako znaczniki głosu WebVTT (
<v Thom>) albo agenci TTML (ttm:agent). - FormatowanieZachowane albo usunięte.
- Przesunięcie czasówKażdy napis wcześniej lub później o tę samą wartość.
- ŚcieżkaWebVTT (
wvtt), IMSC 1.1 Text, IMSC 1.0.1 Text albo EBU-TT-D dla DVB-DASH: trzy ostatnie to TTML (stpp). - Długość segmentu2, 4, 6 lub 10 sekund. 6 zaleca Apple.
- WyglądDla ścieżki TTML: biały z czarnym obrysem albo taki, jak rysuje go podgląd Subtitld.
CMFT zapisuje jeden plik: film, potem fragment dla każdego segmentu. DASH zapisuje manifest, a w folderze obok niego, nazwanym od niego (movie.mpd, movie_segments), film jako init.mp4 i każdy fragment jako 00001.m4s i dalej; ścieżka EBU-TT-D dodaje do manifestu profil DVB-DASH. W obu przypadkach zegar liczy milisekundy, ścieżka jest w języku zapisanego tekstu i trwa tak długo jak wideo albo tak długo jak napisy, gdy nie ma wideo.
Ciekawostki
MPEG-DASH opublikowano jako ISO/IEC 23009-1 w kwietniu 2012 roku, kilka miesięcy po ratyfikacji przez MPEG.
Część MPEG-4, która umieszcza WebVTT i TTML w plikach MP4. Jej pierwsze wydanie pochodzi z 2014 roku.
Pliki ścieżek CMAF mają rozszerzenie mówiące, co zawierają: .cmfv dla wideo, .cmfa dla audio, .cmft dla tekstu.
Powiązane formaty
Otwórz go w Subtitld razem z wideo i dopasuj czasy na przebiegu fali dźwiękowej.