{"id":14284,"url":"\/distributions\/14284\/click?bit=1&hash=82a231c769d1e10ea56c30ae286f090fbb4a445600cfa9e05037db7a74b1dda9","title":"\u041f\u043e\u043b\u0443\u0447\u0438\u0442\u044c \u0444\u0438\u043d\u0430\u043d\u0441\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u0435 \u043d\u0430 \u0442\u0430\u043d\u0446\u044b \u0441 \u0441\u043e\u0431\u0430\u043a\u0430\u043c\u0438","buttonText":"","imageUuid":""}
NTA

Как обработать аудио с помощью ffmpeg?

Python и Google творят чудеса! Ffmpeg — это набор свободных библиотек с открытым исходным кодом, который позволяет записывать, конвертировать и передавать цифровые аудио- и видеозаписи в различных форматах.

Зачем мне еще одна библиотека, если в Python и родных модулей достаточно?

FFmpeg позволяет делать с аудио ВСЁ. Например, во время реализации AI-проекта по распознаванию аудио, возникла необходимость предобработки. Основные frameworks по распознаванию речи deepspeach2, pocketsphinx работают только с аудио формата .wav 16kHz mono. Руководствуясь ранее изложенным принципом — мы не изобретаем велосипед, а используем готовый метод вызова из Python библиотеки FFmpeg.

Как это работает? Для запуска FFmpeg используем модуль subprocess и os.

import subprocess, os

Запакуем все необходимые методы внутрь класса. Чтобы класс смог опознать ffmpeg*и ffprobe** пропишем пути до исполняемых файлов .exe.

class FFmpeg: cmds = '\\ffmpeg\\bin\\ffmpeg.exe' cmds_probe = '\\ffmpeg\\bin\\ffprobe.exe'

При создании экземпляра класса указывается путь, где лежат аудиофайлы (переменная mypath) и желаемая длительность аудиофайлов после нарезки (переменная cut_duration).

def __init__(self, mypath, cut_duration): self.mypath = mypath self.cut_duration = cut_duration

Любой аудиофайл можно преобразовать из одного формата в другой, передав команду FFmpeg в командную строку. Например, команда, приведенная ниже, преобразует файл input формата .mp3 в файл output формата - wav 16kHz mono.

ffmpeg -i input.mp3 -acodec pcm_s16le -ac 1 -ar 16000 output.wav

Обернем это с помощью функции subprocess.Popen (параметр функции file – это имя аудиофайла, который нужно обработать).

def mp3_wav(self, file): if file.endswith('mp3'): output = file[:-4] + ".wav" p = self.Popen(FFmpeg.cmds+" -i "+file+" -acodec pcm_s16le -ac 1 -ar 16000 "+output) p.communicate() os.remove(file) return output else: return file

А как распознать свойства аудиофайла, например, длительность?

За получение свойств файла отвечает утилита ffprobe, но она выдает сразу все свойства. Чтобы получить именно длительность - через командную строку запускаем следующую команду и на выходе получаем значение показателя в секундах для аудиофайла с именем input.mp3.

ffprobe -v error -show_entries format=duration -of default=noprint_wrappers=1:nokey=1 input.mp3

Как и ранее обернем эту команду с помощью subprocess.Popen.

def duration(self, file): p = self.Popen(FFmpeg.cmds_probe+" -v error -show_entries format=duration -of default=noprint_wrappers=1:nokey=1 " + file) output, _ = p.communicate() return output.decode('ascii')[:-4]

Аналогично можно обернуть любую команду FFmpeg, а именно - получить класс, который будет использовать любые необходимые команды библиотек FFmpeg для обработки аудио или видео. Похожим способом мы пользовались для реализации AI-проекта по распознаванию аудио и у нас всё получилось.

* ffmpeg — утилита командной строки для конвертирования видеофайла из одного формата в другой. С её помощью можно также захватывать видео в реальном времени с TV-карты.

** ffprobe — консольная утилита, позволяющая собирать и отображать информацию о медиафайлах (как MediaInfo) и мультимедиа потоках, доступных устройствах, кодеках, форматах, протоколах и др.

3 показа
4.5K открытий
0
Комментарии
Написать комментарий...
-3 комментариев
Раскрывать всегда