Документация
Audio Toolbox™ обеспечивает инструменты для обработки аудиоданных, речевого анализа и акустического измерения. Это включает алгоритмы для обработки звукового сигнала (такие как коррекция и управление динамическим диапазоном) и акустическое измерение (такие как импульсная оценка ответа, фильтрация октавы и перцепционное взвешивание). Это также предоставляет алгоритмы для аудио и речевого выделения признаков (такие как MFCC и подача) и преобразование звукового сигнала (такие как набор фильтров gammatone и Mel-расположенная-с-интервалами спектрограмма).
Поддержка приложений тулбокса живое тестирование алгоритма, импульсное измерение ответа и маркировка звукового сигнала. Тулбокс обеспечивает интерфейсы потоковой передачи к ASIO™, WASAPI, ALSA, и звуковым картам CoreAudio и MIDI-устройствам и инструментам для генерации и хостинга стандартных аудио плагинов, таких как VST и Аудиоустройства.
Примеры
Обработка аудиоданных в реальном времени
Создайте скрипт, чтобы обработать и анализировать оперативные звуковые сигналы.
Создайте модель с помощью шаблонов Simulink ® и блоков для обработки аудиоданных.
Аудио плагины в MATLAB
Узнайте о роли, определении и проекте аудио плагинов в Audio Toolbox.
Повторно группируйте процедурный потоковый алгоритм обработки как допустимый аудио сменный объект.
Идите посредством процесса для хостинга внешне созданных плагинов в MATLAB.
Развертывание
Разработайте и сгенерируйте аудио плагины для использования в DAW.
Этот пример показывает, как использовать MATLAB Compiler™, чтобы создать автономное приложение от функции MATLAB.
Этот пример показывает, как сгенерировать независимый исполняемый файл для параметрической коррекции с помощью MATLAB Coder™ и использовать его на звуковом файле.
Об обработке аудиоданных
Узнайте о роли цифровых звуковых рабочих станций (ГАЛКИ), аудио плагины и контроллеры Цифрового интерфейса музыкальных инструментов (MIDI) в разработке алгоритмов обработки аудиоданных.
Изучите ключевую терминологию и основные методы для оптимизации потоковых алгоритмов обработки.
Audio Toolbox
Audio Toolbox™ provides tools for audio processing, speech analysis, and acoustic measurement. It includes algorithms for processing audio signals such as equalization and time stretching, estimating acoustic signal metrics such as loudness and sharpness, and extracting audio features such as MFCC and pitch. It also provides advanced machine learning models, including i-vectors, and pretrained deep learning networks, including VGGish and CREPE. Toolbox apps support live algorithm testing, impulse response measurement, and signal labeling. The toolbox provides streaming interfaces to ASIO™, CoreAudio, and other sound cards; MIDI devices; and tools for generating and hosting VST and Audio Units plugins.
With Audio Toolbox you can import, label, and augment audio data sets, as well as extract features to train machine learning and deep learning models. The pre-trained models provided can be applied to audio recordings for high-level semantic analysis.
You can prototype audio processing algorithms in real time or run custom acoustic measurements by streaming low-latency audio to and from sound cards. You can validate your algorithm by turning it into an audio plugin to run in external host applications such as Digital Audio Workstations. Plugin hosting lets you use external audio plugins as regular MATLAB ® objects.
Get Started
Learn the basics of Audio Toolbox
Audio I/O and Waveform Generation
Record and play audio from devices, read and write audio files, generate waveforms
Audio Processing Algorithm Design
Audio processing tools, algorithm design and modularization, stream processing
Machine Learning and Deep Learning for Audio
Dataset management, labeling, and augmentation; segmentation and feature extraction for audio, speech, and acoustic applications
Measurements and Spatial Audio
Acoustics, psychoacoustics, room impulse response, HRTF, SPL metering
Simulation, Tuning, and Visualization
Real-time prototyping and tuning, MIDI, audio test bench
Musical Instrument Digital Interface (MIDI)
Create, send, and receive MIDI messages
Audio Plugin Creation and Hosting
VST and AU generation, testing, validation, and hosting
Code Generation and Deployment
Generate standalone applications for desktop computers, mobile devices, and embedded targets
MATLAB Command
You clicked a link that corresponds to this MATLAB command:
Run the command by entering it in the MATLAB Command Window. Web browsers do not support MATLAB commands.
Select a Web Site
You can also select a web site from the following list:
How to Get Best Site Performance
Select the China site (in Chinese or English) for best site performance. Other MathWorks country sites are not optimized for visits from your location.
Audio Toolbox
Audio Toolbox™ provides tools for audio processing, speech analysis, and acoustic measurement. It includes algorithms for processing audio signals such as equalization and time stretching, estimating acoustic signal metrics such as loudness and sharpness, and extracting audio features such as MFCC and pitch. It also provides advanced machine learning models, including i-vectors, and pretrained deep learning networks, including VGGish and CREPE. Toolbox apps support live algorithm testing, impulse response measurement, and signal labeling. The toolbox provides streaming interfaces to ASIO™, CoreAudio, and other sound cards; MIDI devices; and tools for generating and hosting VST and Audio Units plugins.
With Audio Toolbox you can import, label, and augment audio data sets, as well as extract features to train machine learning and deep learning models. The pre-trained models provided can be applied to audio recordings for high-level semantic analysis.
You can prototype audio processing algorithms in real time or run custom acoustic measurements by streaming low-latency audio to and from sound cards. You can validate your algorithm by turning it into an audio plugin to run in external host applications such as Digital Audio Workstations. Plugin hosting lets you use external audio plugins as regular MATLAB ® objects.
Get Started
Learn the basics of Audio Toolbox
Audio I/O and Waveform Generation
Record and play audio from devices, read and write audio files, generate waveforms
Audio Processing Algorithm Design
Audio processing tools, algorithm design and modularization, stream processing
Machine Learning and Deep Learning for Audio
Dataset management, labeling, and augmentation; segmentation and feature extraction for audio, speech, and acoustic applications
Measurements and Spatial Audio
Acoustics, psychoacoustics, room impulse response, HRTF, SPL metering
Simulation, Tuning, and Visualization
Real-time prototyping and tuning, MIDI, audio test bench
Musical Instrument Digital Interface (MIDI)
Create, send, and receive MIDI messages
Audio Plugin Creation and Hosting
VST and AU generation, testing, validation, and hosting
Code Generation and Deployment
Generate standalone applications for desktop computers, mobile devices, and embedded targets
MATLAB Command
You clicked a link that corresponds to this MATLAB command:
Run the command by entering it in the MATLAB Command Window. Web browsers do not support MATLAB commands.
Select a Web Site
You can also select a web site from the following list:
How to Get Best Site Performance
Select the China site (in Chinese or English) for best site performance. Other MathWorks country sites are not optimized for visits from your location.
Get Started with Audio Toolbox
Audio Toolbox™ provides tools for audio processing, speech analysis, and acoustic measurement. It includes algorithms for processing audio signals such as equalization and time stretching, estimating acoustic signal metrics such as loudness and sharpness, and extracting audio features such as MFCC and pitch. It also provides advanced machine learning models, including i-vectors, and pretrained deep learning networks, including VGGish and CREPE. Toolbox apps support live algorithm testing, impulse response measurement, and signal labeling. The toolbox provides streaming interfaces to ASIO™, CoreAudio, and other sound cards; MIDI devices; and tools for generating and hosting VST and Audio Units plugins.
With Audio Toolbox you can import, label, and augment audio data sets, as well as extract features to train machine learning and deep learning models. The pre-trained models provided can be applied to audio recordings for high-level semantic analysis.
You can prototype audio processing algorithms in real time or run custom acoustic measurements by streaming low-latency audio to and from sound cards. You can validate your algorithm by turning it into an audio plugin to run in external host applications such as Digital Audio Workstations. Plugin hosting lets you use external audio plugins as regular MATLAB ® objects.
Tutorials
Read audio from a file and write audio to speakers.
Create an audio test bench and apply real-time processing.
Create a model using the Simulink ® templates and blocks for audio processing.
Train, validate, and test a simple long short-term memory (LSTM) to classify sounds.
Use transfer learning to retrain YAMNet, a pretrained convolutional neural network (CNN), to classify a new set of audio signals.
Create a simple audio plugin in MATLAB and then use it to generate a VST plugin.
About Audio Plugins
Learn about the role of digital audio workstations (DAWs), audio plugins, and Musical Instrument Digital Interface (MIDI) controllers in designing audio processing algorithms.
About Deep Learning and Machine Learning for Audio
Learn common tools and workflows to apply deep learning to audio applications.
Документация
Audio Toolbox™ обеспечивает инструменты для обработки аудиоданных, речевого анализа и акустического измерения. Это включает алгоритмы для обработки звуковых сигналов, таких как эквализация и время, простираясь, оценивая акустические метрики сигнала, такие как громкость и резкость, и извлекая функции аудио, такие как MFCC и тангаж. Это также предоставляет усовершенствованные модели машинного обучения, включая i-векторы и предварительно обученные нейронные сети для глубокого обучения, включая VGGish и CREPE. Поддержка приложений тулбокса живое тестирование алгоритма, измерение импульсной характеристики и маркировка сигнала. Тулбокс обеспечивает интерфейсы потоковой передачи к ASIO™, CoreAudio и другим звуковым картам; MIDI-устройства; и инструменты для генерации и хостинга VST и плагинов Аудиоустройств.
С Audio Toolbox можно импортировать, пометить, и увеличить наборы аудиоданных, а также извлечь функции, чтобы обучить модели глубокого обучения и машинное обучение. Предварительно обученные предоставленные модели могут быть применены к аудиозаписям для высокоуровневого семантического анализа.
Можно моделировать алгоритмы обработки аудиоданных в режиме реального времени или запустить пользовательские акустические измерения путем потоковой передачи аудио низкой задержки к и со звуковых карт. Можно подтвердить алгоритм путем превращения его в аудио плагин, чтобы запуститься во внешних хост-приложениях, таких как Цифровые звуковые рабочие станции. Сменный хостинг позволяет вам использовать внешние аудио плагины в качестве регулярного MATLAB ® объекты.
Запуск
Изучите основы Audio Toolbox
Аудио ввод-вывод и Генерация сигналов
Запишите и проигрывайте аудио от устройств, считайте и запишите звуковые файлы, сгенерируйте формы волны
Проект алгоритма обработки аудиоданных
Инструменты обработки аудиоданных, проект алгоритма и модуляризация, потоковая обработка
Машинное обучение и глубокое обучение для аудио
Управление набором данных, маркировка и увеличение; сегментация и извлечение признаков для аудио, речи и акустических приложений
Измерения и пространственное аудио
Акустика, психоакустика, импульсная характеристика помещения, HRTF, измерение SPL
Симуляция, настройка и визуализация
Прототипирование в реальном времени и настройка, MIDI, аудио испытательный стенд
Цифровой интерфейс музыкальных инструментов (MIDI)
Создайте, отправьте и получите сообщения MIDI
Аудио сменное создание и хостинг
VST и генерация AU, тестирование, валидация и хостинг
Генерация кода и развертывание
Сгенерируйте автономные приложения для рабочих компьютеров, мобильных устройств и целевых процессоров
