Блог

Я наткнулся на несколько примеров кодов, в которых набор изображений добавляется для создания QTMovie.

Я ориентируюсь на платформу OS X без каких-либо фреймворков QT. У меня возникла идея создать файл с расширением и внедрить в него соответствующие метаданные, а также найти способ вставки изображений и аудио в требуемом формате. Таким образом, когда файл создан, его можно просто воспроизвести.

Я не уверен, какой формат / расширение лучше. указатели очень ценятся.

Без QuickTime (или эквивалентной мультимедийной платформы) то, что вы описываете, представляет собой довольно много работы. Обычно для кодирования изображений в видео используется алгоритм сжатия видео (например, H.264), а для кодирования звуковой дорожки — алгоритм сжатия аудио (например, AAC). Затем вы должны записать эти потоки в файл-контейнер, такой как файл MPEG-4, который чередует потоки для воспроизведения, содержит метаданные и индексы и так далее. Затем для воспроизведения вы анализируете файл, декодируете видео- и аудиоданные и планируете их воспроизведение, заботясь о том, чтобы они были синхронизированы.

QuickTime делает все это (и не только) за вас, и было бы огромным усилием написать все это самостоятельно. Есть ли какая-то причина, по которой вы работаете на OS X, но не можете использовать QuickTime?

Учитывая, что вопрос помечен iPhone, почему вы не можете просто использовать QTKit?

Если бы вам пришлось делать это с нуля, вы могли бы принять очень простое решение, при котором вы сохраняете последовательность изображений в виде набора файлов JPEG (но тогда вам потребуется libjpeg ; используйте raw RGB или PPM, если необходимо), звуковую дорожку в виде необработанных данных WAV, а затем иметь другой файл (текстовый файл, который вы определяете), в котором хранится информация о времени, так что вы могли бы просто транслировать аудио и сохранять номера кадров изображений с соответствующим временным кодом / смещением выборки. Это очень простое решение, которое можно заставить работать без особых усилий.

Если вы дадите нам некоторое представление о том, чего вы пытаетесь достичь, мы могли бы предложить несколько более конкретных предложений.

Если вы хотите написать программу для этого, вы могли бы использовать Xuggler на Java, чтобы сделать это. Это позволит вам сохранить ваше окончательное видео в формате, воспроизводимом практически любым медиаплеером.

Начните с понимания того, как видеофайлы (например, MP4, Quicktime) на самом деле представляют аудио и видео с помощью этого чрезмерно упрощенного руководства по интернет-видео.

Затем поиграйте с руководствами MediaTool. Вы можете написать программы, которые преобразуют изображения raw в видеофайлы (смотрите Этот пример кода). Наконец, чтобы написать программу, которая синхронизирует аудио и видео, смотрите это руководство; она генерирует набор изображений и издает некоторый звуковой шум, который изменяется по времени, когда мяч ударяется о край коробки.

Надеюсь, это поможет.

Рисунки