В прошлой статье я затронул тему генерации звука с помощью диффузионной модели. Но какие методы существуют вообще и какой из них сейчас наиболее перспективен? Сегодня мы рассмотрим долгий путь этого направления в машинном обучении. Послушаем результаты, посмотрим метрики и просто взглянем на новые технологии, применяемые в совершенно разных нейросетях для аудиосинтеза.Читать полностью »
Рубрика «звук» - 3
Какой метод генерации аудио лучший? Сравнение GAN, VAE и Diffusion
2023-02-07 в 13:00, admin, рубрики: mashine learning, python, ruvds_статьи, аудио синтез, Блог компании RUVDS.com, генерация музыки, звук, ИИ, машинное обучение, нейронные сети, нейросетиВ прошлой статье я затронул тему генерации звука с помощью диффузионной модели. Но какие методы существуют вообще и какой из них сейчас наиболее перспективен? Сегодня мы рассмотрим долгий путь этого направления в машинном обучении. Послушаем результаты, посмотрим метрики и просто взглянем на новые технологии, применяемые в совершенно разных нейросетях для аудиосинтеза.Читать полностью »
Схема простой звуковой карты (ЦАП)
2023-02-03 в 17:17, admin, рубрики: adc, Audio-Technica, dac, diy или сделай сам, аудиотехника, ацп, звук, Производство и разработка электроники, Слономышь, схемотехника, цап, Электроника для начинающихЭтому проекту уже более 7 лет. Есть обстоятельства, когда требуется иметь внешнюю звуковую карту. Иногда это отсутствие встроенной, иногда поломка встроенной, иногда не качественная встроенная, а порой требуется специфический буфер на выходе с возможностью сделать сигнал +-7В, иногда питание компьютера ухудшает параметры встроенной карточки и так далее и тому подобное…
Устройства для цветомузыки: откуда они появились и как я собрал их в коллекцию
2023-01-27 в 7:15, admin, рубрики: Блог компании Яндекс, выставки, звук, изобретения, коллекционирование, музеи, музыкальное оборудование, музыкальные гаджеты, Производство и разработка электроники, светомузыка, старое железо, цветомузыкаВ больших концертных залах проходили цветомузыкальные концерты, а в Казани и других городах проводились научные конференции, на которых учёные делились достижениями в сфере цветомузыкальной инженерии. Цветомузыкальные технологии использовались для решения проблемы сенсорной депривации во время долгих космических полетов. Проще говоря, чтобы не сойти с ума в космическом корабле, космонавты проводили время перед светорелаксирующими экранами.
Меня зовут Роман Крылов, я восстанавливаю и коллекционирую советские цветомузыкальные устройства. С декабря в Яндекс Музее в Москве и Санкт-Петербурге проходит выставка моей коллекции, она завершится 31 января. В этой статье я расскажу об экспонатах, но сначала немного поговорим об истории появления самой цветомузыки.
Читать полностью »
Генерация музыки из изображений с помощью Python
2023-01-06 в 13:00, admin, рубрики: librosa, numpy, python, ruvds_перевод, Блог компании RUVDS.com, генерация музыки, звукСказать, что музыка является частью моей жизни, будет серьёзным преуменьшением. Я более 20 лет играю на гитаре, и каждый день слушаю других гитаристов. По правде говоря, прежде чем начать свой академический путь в качестве физхимика двенадцать лет назад, я был намерен строить музыкальную карьеру.
И хотя этим моим планам ну было суждено осуществиться, я всё равно продолжаю наслаждаться музыкой и делать с её помощью всякие крутые штуки. К примеру, этот проект возник из идеи написать программу, которая бы создавала музыку из изображений. В прошлом уже были довольно интересные попытки сделать нечто подобное, но вот результаты оказывались не особо музыкальными.
Далее в этой статье я расскажу о своём подходе к генерации из картинок аудиотреков, которые, имхо, звучат весьма неплохо. Здесь я опишу основные результаты и покажу некоторые удачные примеры программы. Если вы захотите посмотреть весь код, то он лежит на моём сайте и в репозитории GitHub. Я также создал с помощью Streamlit приложение, с которым вы можете поэкспериментировать здесь.Читать полностью »
«Персеверанс» записал звук «пылевого демона» Марса
2022-12-14 в 16:11, admin, рубрики: астрономия, звук, звуки марса, марс, марсоход, Научно-популярное, персеверансНаполненные пылью марсианские вихри, они же «пылевые демоны», были записаны на микрофоны прибора SuperCam марсохода «Персеверанс». Одновременно с этим навигационная камера Navcam записывала передвижение вихря, проходящего через марсоход. Объединив полученные данные с данными датчиков Mars Environmental Dynamics Analyzer и моделированием исследователи выяснили, что вихрь был диаметром около 25 метров и высотой примерно 118 метров. Он двигался со средней скоростью примерно 5,3 м/с или 11 м/с в пике.
Как мы ищем дефекты оборудования ультразвуковыми микрофонами
2022-12-13 в 7:01, admin, рубрики: Блог компании Группа НЛМК, завод, звук, инженерные системы, оборудование, оптимизация, производство, ремонт, ультразвук, управление проектами, шумГде-то год назад на производстве ВИЗ-Сталь мы решили проверить, можно ли с помощью поиска ультразвуковых аномалий определить, что происходит с агрегатом в тот момент, когда он ещё только собирается начать ломаться.
Решение выглядит вот так:
На фото вы видите микрофонную решётку с камерой в середине, способную построить акустическую карту пространства. Решётка подключается к ноутбуку, где уже проводится уже анализ звука.
Результаты получились очень интересные.
Читать полностью »
Термодатчик из звуковой карты
2022-12-10 в 14:32, admin, рубрики: C#, DIY, diy или сделай сам, звук, преобразование фурье, термисторВсем привет!
Датировка звукозаписи по гулу в энергосети
2022-12-06 в 8:45, admin, рубрики: ENF, OSINT, Блог компании GlobalSign, видеозапись, звук, информационная безопасность, метка времени, Научно-популярное, Работа с видео, синхронная сеть, фингерпринтинг, цифровая криминалистика, электрический шумСравнение колебания частоты тока в целевом сигнале (target) и референсной базе данных (ref) относительно несущей частоты 50 Гц с помощью программы enf-matching, источник
В современную эпоху очень важно иметь инструменты, которые позволяют точно верифицировать аудио/видеозапись, выявить следы монтажа и поставить точную метку времени.
Рутинная цифровая криминалистика включает изучение метатегов, где указано время записи файла, но эти теги легко подделать. Но есть одна физическая характеристика, которую подделать практически невозможно без предварительных измерений частоты электрического напряжения в сети.
Речь о специфическом гудении энергосети в виде электрического шума, который всегда записывается на аудиодорожку.
Читать полностью »
Тридцатилетие минидиска, элитный хайфай и немного аудиофилии
2022-12-01 в 14:51, admin, рубрики: minidisc, sony, Блог компании «Лаборатория Касперского», звук, потрачено, старое железо
Впрочем, у меня дома минидиск живее всех живых. Недавно моя коллекция пополнилась еще одним очень интересным экспонатом. Это стационарный минидисковый рекордер Sony MDS-JA30ES, выпущенный в 1998 году. Это довольно нестандартное устройство: большой, тяжелый аппарат с классическим дизайном, принадлежащий серии ES, в которой компания Sony традиционно выпускала наиболее качественные компоненты. Это, если хотите, аудиофильское устройство, в котором какие-то решения действительно влияют на объективные характеристики, а некоторые просто призваны радовать владельца крайне недешевой техники без какой-либо реальной пользы. Давайте обсудим разницу между объективным и субъективным, и заодно попробуем ответить на вопрос: как так получилось, что в аудиофильском устройстве используется сжатие с потерями, наподобие MP3.
Читать полностью »
Вычисление значения частоты любой ноты и интересное звучание «псевдонатурального» строя
2022-11-26 в 20:44, admin, рубрики: python, звук, музыка, музыкальная индустрия, физикаЯ занимаюсь написанием различных мелодий в разных жанрах довольно давно, но только недавно решил соотнести это занятие с научным подходом.
Что, если существует формула нахождения частоты любой выбранной ноты на любом аккорде? Что ж, углубившись в построение частот нот и настройку музыкальных инструментов, можно выяснить, что, во-первых, лучше использовать алгоритм, а во-вторых - всё будет зависеть от того, какой звукоряд используется: