Первый день в Индии: HEVC без картинки, RTMP вместо SRT и четыре записи на 25,6 ГБ
Первый поток с площадки пришёл в HEVC. HLS-плейлист MistServer содержал звук и не содержал видео, кодер показывал 0 fps при реальных 30. Поток был, зритель ничего не видел, и ни одна проверка этого не заметила. Хуже простоя я считаю именно такой сбой: простой хотя бы замечают.
Перед матчем мы перевели кодер на H.264. 15 ноября Glydecast вёл и записывал два матча мужской волейбольной лиги CAVA с площадки KIIT, корт 1. Начало по журналу: 08:30 и 14:00 UTC. Зрители получали H.264 1080p50 по HLS.
Камеру по SRT я проверил за день до матча и отказался от неё
14 ноября картинка с камеры по SRT была побита: превью в Chrome умерло примерно через 10 секунд, в 40-секундном образце нашлось семь ошибок декодера. Mist показывал около 1,6 % потерь пакетов и ни одного восстановленного. Показание задержки выглядело неверным, но единицы и причину я не подтвердил, поэтому диагноз закрытым не считаю.
Камеру перевели на RTMP по TCP. За 35 секунд живого теста плеер показал 1 715 кадров без потерь, в отдельном 45-секундном образце ошибок декодера не было. Матч идёт два часа, тест — полминуты. ТВ-сигнал самой площадки шёл по SRT и продержался оба матча, так что вывода про SRT из этого дня не получается.
В Пакистане в июле было то же самое: SRT рассыпался, поток с площадки мы перевели на RTMP/TCP. По записи инцидента виноваты UDP на стороне площадки и на международном участке. В Индии у меня те же симптомы, а доказательств той же причины нет. Правило, с которым я пошёл на матч, короткое: проверять реальный маршрут и оставлять тот транспорт, где картинка чистая.
Запись на приёме, одна копия и четыре хэша
Прежний рекордер читал зрительский HLS. Для Индии мы пишем входящие потоки прямо на приёме MistServer, поэтому сбой раздачи запись не заберёт. Копия при этом одна.
Два матча дали четыре MKV: камера и ТВ-сигнал на каждый матч. Везде H.264 1080p50 и AAC, камера около 2,6 Мбит/с, ТВ около 8,2 Мбит/с, всего 25,6 ГБ. Первый матч: 4,3 ГБ камеры и 13,5 ГБ ТВ. Последние 30 секунд каждого файла декодировались без ошибок.
После матчей я залил все четыре файла в закрытый бакет Cloudflare R2. Первая попытка вернула 403 на каждый файл: rclone сначала пытался создать бакет. Потом выяснилось, что rclone 1.60 печатает ошибку 501 даже при удачной загрузке. Журналу верить нельзя, поэтому я сверяю только SHA-256: на источнике и после полного чтения обратно из R2. Размеры и хэши совпали у всех четырёх.
Загрузка шла на 20 МБ/с. Этот потолок я скопировал из настроек для времени живого матча и оставил включённым при простаивающей машине. (Двадцать были моими.) Без потолка вышло около 106 МБ/с. Локальные копии пока лежат на приёме.
Что ещё пошло не так
Сервер авторизации упёрся в лимит проверок сессии в минуту, и Ops дважды ответил «Authentication service unavailable» до первого матча. Лимит я поднял и посмотрю на следующем матче. Час чистого журнала проверкой я не считаю.
В 15:26 UTC сработала моя собственная тревога: правило потерь приняло поток, которому не с чем сравнивать, за 100 % потерь. Это вероятная причина, вывод проверки за ту минуту я не читал.
Один замер изменил схему до свистка. Холодный путь воспроизведения, который поднимается по запросу, отдавал первый HLS-плейлист за 16–24 секунды. Поэтому прогрев остался, и в 08:00 UTC он отработал. Это время плейлиста, а до первого декодированного кадра я не мерил.
Что не измерено
→ Декодирование файлов целиком: проверены только последние 30 секунд каждого.
→ Длительность записей: у MKV нет заголовка длительности.
→ Общая ли причина у SRT-сбоя в Индии и у июльского в Пакистане.
→ Выдержит ли лимит авторизации целый день матчей и кто делал лишние запросы.
→ Почему сработала тревога в 15:26: вывод проверки я не читал.
→ Время до первого кадра у зрителя.
→ Остальные матчи турнира: пока их два.
Ошибся я трижды: в команде rclone, в потолке скорости и в правиле тревоги. Следующий матч начну с журнала входа, потом проверю файлы.