SlideShare a Scribd company logo
1 of 63
Министерство образования и науки Российской Федерации
Федеральное государственное автономное образовательное учреждение
высшего профессионального образования
«Уральский федеральныйуниверситетимени первого Президента России
Б.Н.Ельцина»
Физико-технологический институт
Кафедра вычислительной техники
ДОПУСТИТЬ К ЗАЩИТЕ
Зав. кафедрой вычислительнойтехники
______________ С.Л. Гольдштейн
(подпись)
«______»__________________2015 г.
РАЗРАБОТКА СИСТЕМЫ ВИЗУАЛИЗАЦИИ ЗВУКОВОГО ПОЛЯ С
ПРИМЕНЕНИЕМ КАМЕРЫ И МИКРОФОНА
ВЫПУСКНАЯ КВАЛИФИКАЦИОННАЯ РАБОТА
БАКАЛАВРА
Пояснительная записка
09.03.01 46 ПЗ
Руководитель, доц., к. т. н. ____________ Г. Б. Захарова
Консультант, н.с. ИММ УрО РАН ____________ Д.С. Перевалов
Нормоконтролер,доц., к.т.н. ____________ В.В. Ковалев
Студент гр. Фт-410802 ____________ С.И. Шляхова
Екатеринбург 2015
2
Реферат
Пояснительная записка 47 страниц, 13 рисунков, 4 таблицы, 15
источников, 2 приложения.
Актуальность работы. В настоящее время существует достаточно
большое количество способов визуализации звукового поля (ВЗП), которые
применяются для изучения звуковых полей сложной формы для целей
дефектоскопии и медицинской диагностики, а также для визуализации
акустических изображений предметов. Одним из важнейших направлений
развития систем ВЗП является изучение распространения звука в помещении
с целью создания оптимального его пути распространения (выборположения
микрофона и колонок в зале кинотеатра, клуба или любого другого
помещения).
Цель исследования – создание технологии ВЗП в режиме реального
времени с применением микрофона и камеры, а также создания
программного продукта по этой технологии.
Для достижения поставленной цели нужно решить следующие задачи:
 проанализировать существующие в настоящее время системы
визуализации звуковых полей;
 произвести отбор аналогов из существующих систем ВЗП;
 разработать пакет моделей на создание программного продукта;
 разработать ТЗ для программного продукта;
 реализовать и протестировать полученный программный
продукт.
3
Содержание
Нормативные ссылки........................................................................................5
Обозначения и сокращения..............................................................................6
Введение...........................................................................................................7
1 Проблематика визуализации звукового поля ............................................ 9
1.1 Направления поиска информации и ключевые слова...........................9
1.2 Алгоритмы поиска информации......................................................... 15
1.3 Литературно – аналитический обзор.................................................. 19
1.4 Определение аналогов........................................................................ 19
1.4.1 Краткая характеристика аналогов метода ВЗП............................. 19
1.4.2 Критерии оценки аналогов метода ВЗП ....................................... 24
1.5 Выбор и обоснование программного продукта .................................. 26
1.5.1 Краткая характеристика найденных программных продуктов..... 26
1.5.2 Критерии оценки апрограммного продукта.................................. 27
1.6 Цели и задачи...................................................................................... 28
1.7 Результаты и выводы по 1 главе......................................................... 29
2 Моделирование системы ВЗП.................................................................. 30
2.1 Моделирование предлагаемых решений ............................................ 30
2.1.1 Системно-структурная модель...................................................... 30
2.1.2 Алгоритмическая модель.............................................................. 31
2.2 Пакет концептуальных моделей ......................................................... 31
2.2.1 Общая концептуальная модель..................................................... 32
2.2.2 Базово – уровневая концептуальная модель................................. 32
2.2.3 Модификационная концептуальная модель.................................. 33
2.3 Результаты и выводы по главе 2......................................................... 33
4
3 Проектирование системы ВЗП ................................................................. 35
3.1 Внешнее проектирование ................................................................... 35
3.2 Внутреннее проектирование............................................................... 35
3.2.1 Выбор парадигмы программирования.......................................... 35
3.2.2 Выбор средств программирования ............................................... 36
3.2.3 Эскизный проект........................................................................... 36
3.3 Результаты и выводы по главе 3......................................................... 37
4 Инженерная реализация ВЗП.................................................................... 38
4.1 Общее описание.................................................................................. 38
4.2 Требования к программному обеспечению и характеристикам
конфигурации компьютера.......................................................................... 38
4.3 Пример работы программы ................................................................ 39
4.4 Результаты и выводы по главе 4......................................................... 43
Заключение..................................................................................................... 45
Список использованных источников.............................................................. 46
Приложение А. Техническое задание............................................................. 48
Приложение Б. Программный код системы ВЗП........................................... 55
5
Нормативные ссылки
ГОСТ 19.504-79 ЕСПД Руководство программиста
ГОСТ 19.701-90 ЕСПД Схемы алгоритмов, программ,
данных и систем
ГОСТ 34.201-89 ИТ. ЕКСАС Виды, комплектность и обозначение
документов при создании
автоматизированных систем
ГОСТ 34.601-90 ИТ. ЕКСАС Автоматизированные системы.
Стадии создания
ГОСТ 34.602-89 ИТ. ЕКСАС Техническое задание на создание
автоматизированной системы
ГОСТ Р ИСО/МЭК 9294-93 ИТ Руководство по управлению
документированием
программного обеспечения
ГОСТ Р ИСО/МЭК 12119-2000 ИТ Процессы жизненного цикла
программных средств
ГОСТ Р ИСО/МЭК 12207-99 ИТ Пакеты программ. Требования к
качеству и тестированию
6
Обозначения и сокращения
ПЗ Пояснительная записка
ЗП Звуковое поле
ВЗП Визуализация звукового поля
ТЗ Техническое задание
7
Введение
Звук – это то, что сопровождает нас на протяжении всей жизни. Мало
что является настолько неотъемлемым в жизни человека. Именно поэтому
его так много и тщательно изучают. И, казалось бы, что в наше время сделать
что-то новое в этой сфере уже невозможно, но и по сей день ученые и
обычные исследователи строят теории и концепции.
В настоящее время существует достаточно большое количество
способов визуализации звуковых полей, которые применяются для изучения
звуковых полей сложной формы для целей дефектоскопии и медицинской
диагностики, а также для визуализации акустических изображений
предметов, которыеполучены либо с помощью акустических фокусирующих
систем, интеллектуальных информационных систем и т.д. Так же получение
подробной информации о такой характеристике звука, как частота, позволит
избежать крупных потерь в высокоточной химической промышленности,
когда нельзя позволить веществам смешиваться друг с другом. А для
получения характеристик о частоте звука нужно лишь заменить микрофон на
пьезоприёмник низких частот. Именно поэтому технология визуализации
звука с помощью микрофона и камеры так важна на данный момент.
Если рассмотреть системуВЗП стоячихволн, то мы обнаружим только
опасный способ при помощи трубки Рубенса. Но если бы существовал
способ ВЗПпри помощи программногопродукта, у каждого школьника была
бы возможность провести этот интересный эксперимент.
Последним и самым перспективным направлением развития систем
ВЗП является изучение распространения звука в помещении с целью
создания оптимального его пути распространения (выбор положения
микрофона и колонок в зале кинотеатра, клуба или любого другого
помещения). Автоматизация этого процесса значительно бы помогла
звуковым операторам в их работе.
8
Данная выпускная квалификационная работа посвящена как раз
созданию такой системы ВЗП, созданиютехнологииВЗП с помощью камеры
и микрофона, которая сможет быть применена для построения карты
громкости в помещении в режиме реального времени.
9
1 Проблематика визуализации звукового поля
1.1 Направления поиска информации и ключевые слова
Для поиска информации была выбрана тема «Разработка системы
визуализации звукового поля с применением камеры и микрофона».
Ключевыми словами для поиска стали:
Звук — физическоеявление, представляющее собойраспространениев
виде упругих волн механических колебаний в твёрдой, жидкой или
газообразнойсреде. В узком смысле под звуком имеют в виду эти колебания,
рассматриваемые в связи с тем, как они воспринимаются органами чувств
животных и человека. Как и любая волна, звук характеризуется амплитудой и
спектром частот. Обычныйчеловек способен слышать звуковые колебания в
диапазоне частот от 16—20 Гц до 15—20 кГц. Звук ниже диапазона
слышимости человека называют инфразвуком; выше: до 1 ГГц, —
ультразвуком, от 1 ГГц — гиперзвуком. Громкость звука сложным образом
зависит от эффективного звукового давления, частоты и формы колебаний, а
высота звука — не только от частоты, но и от величины звукового
давления[1].
Частота звука - количество колебаний воздуха в секунду. Частота
измеряется в Герцах (Гц): 1 Гц = 1 колебание в секунду; или килогерцах
(кГц): 1кГц = 1000 Гц.
Длина волны - отрезок на оси распространения волны, в котором
умещается полный цикл (период) изменения плотности воздуха. Частота
волны обратно пропорциональна длине волны. Чем больше частота звука,
тем меньше длина волны и наоборот. Длину волны очень легко вычислить по
формуле l=C/f, где C - скорость звука (340 м/с), а f - частота звуковых
колебаний. Например, волна, имеющая частоту 100 Гц, имеет длину
340/100=3.4 м.
Амплитуда звуковой волны - половина разницы между самым
высоким и самым низким значением плотности. На графике амплитуде будет
10
соответствовать разницамежду самой высокой (или низкой) точкой волны и
горизонтальной осью графика.
Для описания относительных временных свойств двух звуковых волн
(или разных частей одной волны) вводится понятие фазы звуковой волны
(см. рисунок 1.1). На первом графике показаны две волны, которые
полностью совпадают друг с другом. В этом случае говорят, что волны
находятся в фазе. На третьем графике в том месте, где у одной волны
находится область высокойплотности, у другой - область низкой плотности.
В этом случае говорят, что волны находятся в противофазе. При этом, если
волны одинаковые, происходит их взаимное уничтожение (в природе это
бывает крайне редко, чаще противофазные волны при наложении сильно
искажают звук). Средний график показывает некое промежуточное
положение. В этом случае говорят, что фаза одной волны сдвинута
относительно другой.
а б в
Рисунок 1.1 – Графики фаз звуковой волны
Звуковое поле — область пространства, в которой распространяются
звуковыеволны, то есть происходят акустические колебания частиц упругой
среды (твердой, жидкой или газообразной), заполняющей эту область.
Понятие звукового поля применяется обычнодля областей, размеры которых
порядка или больше длины звуковой волны. С энергетической стороны
звуковое поле характеризуется плотностью звуковой энергии (энергией
колебательного процесса, приходящейся на единицу объема) и
интенсивностью звука [2].
11
Акустическое поле - это область какой-либо упругой поверхности
которая выполняет роль передачи акустических волн, и характеризуется
только по двум параметрам. А именно: звуковым давлением и акустическим
сопротивлением. Звуковое давление измеряется в единицах Паскалях, а
акустическое сопротивление - Паскаль сантиметр площади [3].
Звуковое давление - это показатель, который измеряется в разнице
давления в средераспространения волни обычным атмосферным давлением.
Акустическое сопротивление - это отношение звукового давления к
скорости колебания микроскопических частиц среды.
Акустическое поле имеет также характеристики, у которых есть две
позиции, а именно интенсивность и мощность звука. С интенсивностью и
мощностьюзвука, здесь всепонятно. Зато есть одна характеристика, которая
играет важную роль при формировании акустического поля - это
направленность звука излучения. Есть угловое пространственное
распространение давления создаваемого вокруг источника звукового
давления.
Визуализациязвуковыхполей - методы получения видимой картины
распределения величин, характеризующих звуковое поле. ВЗП применяется
для изучения полей сложной формы, для целей дефектоскопии и
медицинской диагностики, а также для визуализации акустических
изображений предметов, получаемых либо с помощью акустических
фокусирующих систем, либо методами акустической голографии [4].
Колебательное смещениечастиц (акустическое смещение), смещение
x бесконечно малой части среды по отношению к среде в целом,
обусловленноепрохождением звуковойволны. Направление колебательного
смещения может совпадать или не совпадать с направлением
распространения волны в зависимости от типа волны. При всех достижимых
интенсивностяхзвука Колебательное смещение x < l, где l — длина звуковой
волны[5].
12
Пьезоприёмник - пьезоэлектрический преобразователь,
предназначенный для восприятия акустических сигналов и преобразования
их в электрические с целью измерения, передачи, воспроизведения, записи
или анализа. Статические пьезоприёмники применяют, например, в
тензометрии для регистрации и измерения статических величин - давления,
силы или смещения. Конструктивно такие пьезоприёмники могут быть
выполнены в различных вариантах в зависимости от величины
воспринимаемогосигналаи требуемого выходного напряжения. Резонансные
пьезоприёмники широко используются в акустике, гидроакустике,
дефектоскопиии др. Отличаются повышенной чувствительностью, однако их
рабочая полосачастотограничена из-за быстрого падения чувствительности
по обе стороны относительно резонансной частоты. Широкополосные
(нерезонансные) пьезоприёмники служат для неискажённого приёма
сложных сигналов (например, импульсных), в спектре которых содержится
большоечисло составляющих. Подразделяются на микрофоны (для приёма в
воздушной среде), гидрофоны (в жидкости) и пьезоприёмники для твёрдых
тел. В качестве микрофонов применяют пьезоприёмники, выполненные на
основе двойных (биморфных) пьезоэлементов с использованием изгибных
колебаний и металлических резонаторов для согласования со средой.
Гидрофонами служат пьезоприёмники, выполненные как на основе
одиночных пьезоэлементов, так и систем пьезоэлементов, соединённых
между собой электрически и механически. В твёрдых телах для приёма
колебаний, вызванных волнами различныхтипов - объёмными(продольными
или сдвиговыми), поверхностными,- в большинстве случаев применяют
контактные пьезоприёмники. Такие пьезоприёмники предназначены для
измерения амплитуды смещений поверхности (виброметры), колебательные
скорости (велосиметры), ускорения (акселерометры). Минимальные
амплитуды смещений, измеряемые широкополосными пьезоприёмниками,
ограничены шумами и обычно составляют 10-10 мкм. Пьезоприёмники для
твёрдых тел реагируют в основном на определённый тип волн, для чего
13
используютпластины из пьезоэлектрическихкристаллов специальных срезов
(например, для продольных волн - Х-срез кварца, 2-срез ниобата лития; для
сдвиговых - У-срез кварца), или на определённую поляризацию пьезо-
керамических преобразователей, или на особую конфигурацию электродов
на пьезоэлементе (например, для приёма поверхностных волн - встречно-
штыревые преобразователи) [6].
Акустические течения (акустический, или звуковой, ветер),
регулярные течения среды в звуковое поле большой интенсивности. Могут
возникать как в свободном неоднородном звуковом поле, так и (особенно)
вблизи различного рода препятствий, помещённых в звуковое поле.
Акустические течения всегда имеют вихревой характер и обычно возникают
в результате того, что количество движения, связанноес колебаниями частиц
среды в волне и переносимое ею, при поглощении волны передаётся среде,
вызывая регулярное движение последней. Поэтому скорость акустических
течений пропорциональна коэффициенту поглощения звука и его
интенсивности, но обычно непревосходитвеличины колебательной скорости
частиц в звуковой волне. После включения источника звука акустическое
течение устанавливается не сразу, а «разгоняется» постепенно до тех пор,
пока торможение за счёт вязкости среды не скомпенсирует увеличение его
скорости под действием звука [7].
Диск Рэлея - звукометрическое устройство, основанное на развороте
легкого диска перпендикулярно направлению распространения звуковых
волн. Принцип действия диска Рэлея основан на возникновении в поле
звуковой волны вращающего момента D, действующего на плоский предмет
(диск, пластинку), подвешенный на тонкой закручивающейся нити
D = (2¤3)ЧU 2ЧrЧr3Чsin2a,
где r - радиус диска;
r - плотность окружающей среды;
U - колебательная скорость частиц среды;
14
а - угол между нормалью к поверхности диска и направлением
распространения звука [8].
Акустическаякавитация -явление образования в жидкости полостей
заполненных газом, паром или их смесью (кавитационные пузырьки или
каверны). Кавитационные пузырьки образуются в тех местах, где давление в
жидкости становится ниже критического значения Рcr (в реальной жидксти
Рcr приближенно равно давлению насыщенного пара этой жидкости при
данной температуре). Акустическая кавитация, в отличие от
гидродинамической (обусловленной понижением давления вследствие
больших локальных значений скорости в потоке движущейся жидкости),
возникает при прохождении звуковых волн высокой интенсивности и
амплитуды звукового давления, превосходящей некоторую пороговую
величину. Кавитационные пузырьки возникают во время полупериода
разрежения на так называемых кавитационных зародышах, которыми чаще
всего являются газовые включения, содержащиеся в жидкости и на
колеблющейся поверхности акустического излучателя. Поэтому
кавитационный порог повышается по мере снижения содержания газа в
жидкости, при увеличении гидростатического давления, после “обжатия”
газа в жидкости (~108 Па) гидростатическим давлением и при охлаждении
жидкости, а кроме того, при увеличении частоты звука и при сокращении
продолжительности озвучивания. Порог для бегущей акустической волны
выше, чем для стоячей. Пузырьки захлопываются во время полупериодов
сжатия, создавая кратковременные (длительностью ~10-6 с) импульсы
давления (до 108 Па и выше), способные разрушить даже весьма прочные
материалы. Такое разрушение имеет место на поверхности мощных
акустических излучателей, работающих в жидкости. При температуре
жидкости, близкой к точке кипения, доминирующий вклад в образование
пузырьков вносит испарение жидкости; такие процессы наблюдаются,
например, при возникновении кавитации в криогенных жидкостях. Звуковое
15
поле в жидкости, вызывающее кавитацию, обычно неоднородно по
пространству. Это приводит к тому, что наряду с пульсациями, пузырек
движется поступательно. В стоячей ультразвуковой волне направление
движения пузырька зависит от соотношения между его радиусом Rрез
пузырька, частота собственных колебаний которого совпадает с частотой
ультразвуковойволны. При размерепузырькаменьше резонансного(R<Rres)
пузырьки пульсируют в фазе с колебаниями давления и мигрируют по
направлению к пучностидавления, а при (R>Rres) пузырьки перемещаются к
узлам давления. Скорость n поступательных (трансляционных) движений
пузырьков радиуса R0 при гидростатическом давлении Р0 , находящихся в
ультразвуковом поле со звуковым давлением Ра равна:
,
где h - коэффициент кинематической вязкости жидкости;
s - коэффициент поверхностного натяжения;
х i - пространственная координата (i=1,2,3…) [9].
1.2 Алгоритмы поиска информации
Поиск информации осуществлялся в трех направлениях:
 интернет: использовались поисковые системы Google и
Яндекс, а также материалы из Википедии (Алгоритм поиска
представлен на рисунке 1.2);
 библиотека (печатные издания): были изучены публикации
различных авторов, посвященные компьютерной лингвистике
(Алгоритм поиска представлен на рисунке 1.3);
 эксперты: был проведен опрос некоторых экспертов с кафедры
вычислительной техники (Алгоритм поиска представлен на
рисунке 1.4).
16
Рисунок 1.2 – Алгоритм поиска информации в интернете
17
Рисунок 1.3 – Алгоритм поиска информации в библиотеке
18
Рисунок 1.4 – Алгоритм поиска информации у экспертов
19
1.3 Литературно – аналитический обзор
Поиск информации осуществлялся с помощью интернета
(использовались поисковые системы Google, Yandex) и печатных изданий
(литература, посвященная теме исследования).
1.4 Определение аналогов
В данном пункте будет проведен обзор аналогов, их критериальная
оценка и выбор прототипа.
1.4.1 Краткая характеристика аналогов метода ВЗП
В зависимости от характера используемого эффекта все методы ВЗП
можно подразделить на три группы:
 методы, в которыхиспользуются основные параметры звукового
поля - звуковое давление, колебательное смещение частиц, переменная
плотность среды;
 методы, основанныена квадратичныхэффектах в звуковом поле -
деформация воднойповерхностипод действием пондеромоторных сил
звукового поля, на акустических течениях, эффекте Рэлея диска;
 методы, использующие вторичные эффекты, возникающие при
распространении звуковых волн достаточной интенсивности в
жидкости,- тепловые эффекты, ускорение процессов диффузии,
дегазация жидкости, акустическая кавитация, эффекты гашения и
возбуждения люминесценции, изменения цвета красителей,
непосредственного воздействия ультразвука на фотослой и т. д.
Среди методов первой группы самый распространённый -
сканирование исследуемого поля миниатюрным приёмником звукового
давления, электрический сигнал с которогo преобразуется в световой,
например, с помощью электрической лампочки или путём модуляции
яркости луча электронной лучевой трубки. Сканирование одиночным
приёмником может быть использовано для ВЗП стоячих волн, а для
20
визуализации поля бегущей волны необходим набор (мозаика) приёмников,
быстро переключаемых с помощью электронного устройства.
Методы механического сканирования обычно применяют в
диапазоне до 100 кГц; в диапазоне от 100 кГц до нескольких десятков МГц
используют электронные методы сканирования мозаики пьезоприёмников
или сплошной пьезопластины с секционированным электродом на
внутренней (тыльной) стороне. В последнем случае посредством
пьезоэффекта картина распределения звукового давления преобразуется в
соответствующий электрический потенциальный рельеф на приёмном
элементе, этот рельеф считывается электронным лучом и далее
преобразуется в видимое изображение.
Изменение плотности среды в звуковом поле и соответствующее
изменение показателя преломления для световых лучей приводят к
модуляции светового потока по фазе. Для визуализации этих фазовых
изменений применяется метод Тёплера ( Теневой метод ), в котором
используется рефракция света в среде с переменным показателем
преломления. Его модификация - метод фазового контраста, в котором
модуляция светового луча по фазе преобразуется в модуляцию по амплитуде,
дающую видимое изображение.
Частными примерами такого метода являются труба Рубенса и
огненная доска.
Труба Рубенса (Rubens’ Tube) – это отрезок трубы, перфорированный
по всей длине. Один конец подключается к маленькому динамику, а второй
— к источнику горючего газа (баллону с пропаном). Труба заполнена
горючим газом, так что просачивающийся через отверстия газ горит. Если
используется постоянная частота, то в пределах трубы может
сформироваться стоячая волна. Когда динамик включен, в трубе
формируются области повышенного и пониженного давления. Там, где
благодаря звуковым волнам находится область повышенного давления, через
отверстия просачивается больше газа и высота пламени больше. Благодаря
21
этому можно измерить длину волны просто измеряя рулеткой расстояние
между пиками [10].
Огненная доска(Pyro Board) в отличие от трубы Рубенса состоит не из
однойтрубы с отверстиями, а представляет собойцелую систему, состоящую
из 2500 горелок. Вся эта система весьма эффектно реагирует на изменение
давления вследствие влияния звуковых волн и позволяет в буквальном
смысле «видеть» звук [11].
Для неразрушающего контроля применяют методы ВЗП, основанные
на оптической голографической интерференции: на одной и той же
фотопластинке формируют две, три и т. д. оптические голограммы
колеблющегося, излучающего звук тела; на восстановленном изображении
этого тела видны интерференционные полосы, соответствующие
распределению амплитуды колебаний по его поверхности. Методы
голографической интерферометрии обладают высокой чувствительностью и
позволяют обнаруживать весьма малые (0,0002 мм) деформации. Среди
методов второй группы наиб. распространение получил метод
поверхностного рельефа, основанный на эффекте вспучивания свободной
поверхности жидкости под воздействием пондеромоторных сил
ультразвукового поля. Обусловленный ультразвуковой рельеф
визуализируют с помощью направленного на поверхность жидкости
светового пучка, используя различныеметоды, в т. ч. и теневой. В диапазоне
частот 0,5-5 МГц применяется голографическая модификация этого метода;
при этом в образовании рельефа поверхности участвуют интерферирующие
акустические волны - исследуемая и опорная. В этом случае получают
информациюне только об амплитудном распределении звукового поля, но и
о его фазовой структуре.
При реализации метода диска Рэлея в смеси воды и ксилола образуют
взвесь мельчайших чешуек лёгкого металла, например, алюминия, которые в
отсутствие акустического поля выглядят при освещении как матовая серая
поверхность. Переориентация частиц под действием звуковой волны создаёт
22
условия для зеркального отражения света, в результате чего на сером фоне
появляется видимое изображение звукового поля.
Действие ультразвука на упорядоченную ориентацию молекул в
жидких кристаллах обусловливает акустооптические эффекты в этих
веществах, используемые для ВЗП. Эффект динамического рассеяния света
состоит в том, что при помещении в ультразвуковое поле тонкого слоя
прозрачного жидкокристаллического вещества с предварительно
ориентированными молекулами в местах с большой интенсивностью
происходит нарушение ориентации и соответственно сильное рассеяние
проходящего через слой света. Эффект двулучепреломления света в жидких
кристаллах основан на том, что вызванная колебательным смещением одной
из стеклянных пластинок, между которыми располагается слой жидких
кристаллов, переменная деформация слоя приводит к соответствующему
изменению поляризации проходящего через слой света. С помощью
поляроида это изменение поляризации преобразуется в изменение
интенсивности светового потока, пропорциональное либо звуковому
давлению, либо колебательному смещению.
К третьей группе относятся методы, основанные на тепловом
воздействииультразвука и на его способностиускорятьпроцессы диффузии.
Для реализации тепловых эффектов в исследуемое звуковое поле помещают
тонкий, поглощающий звук экран, неравномерное нагревание которого
можно визуализировать с помощью термо-чувствительных красок или
жидких кристаллов, нанесённых тонким слоем на поглощающий экран,
применением электронно-оптических преобразователей, чувствительных в
инфракрасной области, возбуждением или гашением люминесценции
нанесённых на экране специальных люминофоров и др. На эффекте
ускорения диффузии в ультразвуковом поле основан фотодиффузионный
метод ВЗП: предварительно засвеченная фотобумага погружается в
озвучиваемый раствор проявителя; в местах с большей интенсивностью
ультразвука диффузия проявителя ускоряется и бумага быстро чернеет.
23
Для ВЗП используются также кавитационная эрозия фольги,
помещённой в ультразвуковое поле, звукохимические эффекты, среди
которых наиболее нагляден эффект потемнения крахмала в растворе
йодистого калия, разлагающегося под действием ультразвуковой кавитации в
слабо подкислённой среде.
Сравнительные характеристики различных методов визуализации
звуковых полей приведены в таблице 1.1.
Таблица 1.1 – Сравнительные характеристики различных методов
визуализации звуковых полей
Первая
группа
Метод Характеристики
I, Вт/см2 f, МГц t, c
Механическое сканирование
пьезоприёмником
10-12 Практически
любая
10-7- -10-8
Электронное сканирование
пьезокерамической пластины
10-11 0,1-103 10-7-10-8
Пьезоэлектрический эл. -
люминесцентный датчик
10-3 0, 1-2 0,1-1
Теневой метод, метод фазового
контраста, дифракция света на УЗ
10-3-10-5 0,5-30 10-5-20-6
Голографическая интерферометрия 10-3-10-5 Не ограничена 10-5-20-6
Вторая
группа
Метод поверхностного рельефа
- в жидкости 2*10-3 0,3-10 0,1
- в твёрдом теле 3-10-5 0,5-15 0,01
Акустооптические эффекты в
жидких кристаллах
10-2-10-3 0,7-10 -
Метод диска Рэлея 2*10-6 0,1-1 1
Третья
группа
Ускорение процесса фотограф.
проявления
0,1 0,1-1 10 - 100
Потемнение пластинки со слоем
крахмала в йодном растворе
1 0, 1 - 1 100
Обесцвечивание красителя из-за
диффузии
0,5-1 0,1-1 10-150
Возбуждение люминесценции 1 0,1-1 0,1-1
Гашение люминесценции - - 0,1-1
Изменение цвета
термочувствительных красок
1 0,01-10 0, 1
Изменение фотоэмиссии 0,1 0,1-1 0,1
24
В таблице приведено сравнение методов ВЗП с указанием пороговой
интенсивностиI и частоты f (или диапазон частот), а также ориентировочные
значения минимумов времён экспозиций t.
1.4.2 Критерии оценки аналогов метода ВЗП
В результате литературного обзора были выделены методы, наиболее
часто рекомендуемые для ВЗП и проведен их сравнительный анализ по
выбранным критериям.
Критерии, выбранные для сравнения:
1 – Возможность количественной оценки;
2 – Высокая наглядность полученной картины;
3 – Простота расчетов;
4 – Универсальность (возможность использования метода для
организаций любой специфики);
5 – Динамическая оценка (возможность измерения в разные периоды
времени);
6 – Возможность отображать полученные данные в электронном
варианте;
7 – Затратность (возможность использования метода).
Был использован дихотомический метод сравнения (да-1, нет-0).
Результаты сравнения представлены в таблице 1.2.
Исходя из сравнения, видно, что наиболее подходящими являются
методы с использованием пьезоприёмников, так как согласно идее
предполагается использование микрофона для считывания сигнала частотой
1-3кГц и передача его в программу на openFrameworks для преобразования в
картинку. Так же в рамках исследования пьезоприёмник можно считать
нерасходуемым ресурсом, что ведет к значительной экономии относительно
использования прочих средств визуализации звуковых полей. И, конечно,
важным фактором является возможность его подключения к любому
компьютеру.
25
Таблица 1.2 - Сравнение методов ВЗП
Название метода Оценки по критериям
1 2 3 4 5 6 7 8 Суммарная
оценка
Механическое
сканирование
пьезоприёмником
1 1 1 1 1 1 1 7
Электронноесканирование
пьезокерамической
пластины
1 1 1 1 1 1 0 6
Пьезоэлектрический эл. -
люминесцентный датчик
1 1 1 0 1 1 0 5
Теневой метод, метод
фазового контраста,
дифракция света на УЗ
1 1 1 0 0 0 0 3
Голографическая
интерферометрия
1 1 1 0 0 0 0 3
Метод поверхностного
рельефа
1 0 0 0 0 0 0 1
- в жидкости 1 0 0 0 0 0 0 1
- в твёрдом теле 1 0 0 0 0 0 0 1
Акустооптические
эффекты в жидких
кристаллах
1 0 0 0 0 0 0 1
Метод дискаРэлея 1 0 0 0 0 0 0 1
Ускорениепроцесса
фотограф. проявления
0 1 0 0 0 0 0 1
Потемнение пластинки со
слоем крахмала в йодном
растворе
0 1 0 0 0 0 0 1
Обесцвечиваниекрасителя
из-за диффузии
0 1 0 0 0 0 0 1
Возбуждение
люминесценции
0 1 0 0 0 0 0 1
Гашение люминесценции 0 1 0 0 0 0 0 1
Изменение цвета
термочувствительных
красок
0 1 0 0 0 0 0 1
Изменение фотоэмиссии 0 1 0 0 0 0 0 1
26
1.5 Выбор и обоснование программного продукта
В силу специфики данной работы необходим программный продукт,
который позволит работать со звуком и обладать возможностью его
графической визуализации. Далее рассмотрим несколько возможных
решений данной задачи.
1.5.1 Краткаяхарактеристиканайденных программных продуктов
Processing — открытый язык программирования, основанный на Java.
Представляет собой лёгкий и быстрый инструментарий для людей, которые
хотят программировать изображения,анимацию и интерфейсы. Используется
студентами, художниками, дизайнерами, исследователямии любителями, для
изучения, прототипирования и производства. Он создан для изучения основ
компьютерного программирования в визуальном контексте и служит
альбомным программным обеспечением (имеется в виду то, что каждый
*.pde файл визуальной оболочки Processing’а представляет собой отдельное
изображениеили анимацию, и т. д.) и профессиональным производственным
инструментом.
Программа на Processing называется скетч (от англ. sketch — эскиз).
Идея состоит в том, чтобы программирование в Java-стиле было похоже на
скриптование, и взятиина вооружение процесса скриптования для быстрого
написания кода.
Перед выполнением скетча он преобразуется в код на языке Java для
выполнения в среде Windows/Linux/MacOS/Android либо в Javascript-код для
выполнения в браузере внутри Canvas.
При программировании на языке Processing все создаваемые классы
являются внутренними классами основного. Это накладывает определённые
ограничения при разработке.
27
OpenFrameworks — это бесплатная платформа на основе С++ вокруг
нескольких библиотек, т.е. служит для соединения этих библиотек в единое
целое:
 OpenGL — для отображения графики;
 FreeImage — для манипуляций с изображениями;
 Freetype — для отображения и работы со шрифтами;
 rtAudio — для аудио;
 Quicktime (mac или pc) — для проигрывания видео и
видеозахвата.
Ключевые концепции openFrameworks:
 упрощение вещей;
 возможность использовать любую из его частей независимо от
других;
 предоставление прямого доступа к данным, например, к
пикселям изображения.
OpenFrameworks предназначен для «творческого кодинга» («creative
coding») и может работать под Windows, MacOS X и Linux.
Cinder – библиотека программирования, основанная на языке C++.
Обладает продвинутымиспособностямивизуализации. Стал общедоступным
в 2010 году и, следовательно, ещё не вполне адаптирован для удобного и
простого программирования.
Во многом схож с платформой openFrameworks. Главное отличие
состоит в том, что в Cinder используется больше системных библиотек для
повышения производительности, а openFrameworks обеспечивает лучший
контроль над лежащими в её основе библиотеками.
В отличие от Processing не требует наличия браузера, но в свою
очередь в связис высоким качеством визуализации процессов необходимым
является наличие у компьютера высоких вычислительных мощностей.
28
1.5.2 Критерии оценки программного продукта
1 – скорость обработки информации (быстрая работа на «слабых»
компьютерах);
2 – высокое качество полученного изображения;
3 – простота программирования;
4 – наличие опыта работы с программой;
5 – бесплатное скачивание.
Был использован дихотомический метод сравнения (да-1, нет-0).
Результаты сравнения представлены в таблице 1.3.
Таблица 1.3 - Оценка программных продуктов по критериям
№ Название Критерии Суммарный
показатель
1 2 3 4 5
1 Processing 0 0 1 0 1 2
2 openFrameworks 1 1 1 1 1 5
3 Cinder 1 1 0 0 1 3
В качестве среды разработки выбрана платформа для творческого
программирования openFrameworks, так как практическипо всем параметрам
идеально подходит для поставленной задачи. Единственным недостатком
этого ПП является «не идеальная» визуализация звукового поля, но с учётом
ограниченных вычислительных возможностей имеющегося компьютера
данный недостаток можно считать приемлемым.
1.6 Цели и задачи
Глобальная цель – создание технологии ВЗП с помощью камеры и
микрофона.
29
Локальная цель – написание программного продукта, который
позволит визуализировать ЗП по данным, полученным с камеры и
микрофона.
Задачи:
 разработать модель системы ВЗП;
 спроектировать систему ВЗП;
 реализовать систему ВЗП.
1.7 Результаты и выводы по главе 1
В ходе работы были получены следующие результаты:
 рассмотрены источники информации;
 проведен литературный обзор, рассмотрены аналоги;
 выбраны критерии для оценки аналогов;
 произведен анализ аналогов, выбран прототип;
 проведена критика прототипа;
 поставлены цели и задачи.
Вывод: собранной информации достаточно для достижения
поставленных целей и задач.
30
2 Моделирование системы ВЗП
В этой главе будут рассмотрены некоторые виды моделей моего
объекта изучения. Для начала дадим определения основным понятиям.
Моделирование – исследование объектов познания на их моделях;
построение и изучение моделей реально существующих предметов,
процессов илиявлений с целью получения объяснений этих явлений, а также
для предсказания явлений, интересующих исследователя [12].
Модель – это объект-заместитель объекта-оригинала, инструмент для
познания, который исследователь ставит между собой и объектом и с
помощью которого изучает некоторые свойства оригинала. В качестве
модели выступает другой материальный или мысленно представляемый
объект, замещающий в процессе исследования объект-оригинал [13].
В данной главе приведены модели, созданные в процессе изучения
предметной среды, они будут использоваться для проектирования системы
ВЗП.
2.1 Моделирование предлагаемых решений
2.1.1 Системно-структурная модель
На рисунке 2.1 представлена системно – структурная модель
предлагаемого решения.
Рисунок 2.1 – Системно – структурная модель предлагаемого решения
31
2.1.2 Алгоритмическая модель
На рисунке 2.2 представлена алгоритмическая модель предлагаемого
решения.
Рисунок 2.2 – Алгоритмическая модель предлагаемого решения
2.2 Пакет концептуальных моделей
Для описания концептуальной модели используется фреймовый
формализм, а именно описание концептуальной модели в соответствии с
ролевым фреймом [14]:
32
КОНЦЕПЦИЯ = <ОФС, ПРОФ, СОС, НФ, ЦФ>, (1)
где ОФС – основные функции системы;
ПРОФ – путь реализации основных функций;
СОС – структурная основа системы;
НФ – направленность функционирования;
ЦФ – цель функционирования.
2.2.1 Общая концептуальная модель
Прототип системы ВЗП по данным с пьезоприёмника.
Основные функции системы: извлечение данных с пьезоприёмника,
формированиеиз полученных данных карты громкости, выдача результата
технического процесса.
Структурная основа системы: блок воспроизведения звука, блок
рисования карты громкости.
Направленность функционирования: составление изображения для
визуализации звуковых полей, с помощью которой можно изучить
отдельные характеристики звука.
Цель: составление карты громкости по данным, полученным с
микрофона и камеры.
Свойства системы: возможное последующее модифицирование для
разных направлений деятельности.
2.2.2 Базово – уровневая концептуальная модель
Извлекатель данных с микрофона и камеры.
Основные функции системы: извлечение данных с микрофона,
извлечение данных с камеры, выдача результата технического процесса.
Структурная основа системы: блок воспроизведения звука, блоки
распознавания изображения микрофона и определения по черно-белой
картинке его координат, блок определения громкости.
33
Направленность функционирования: получение информации скамеры и
микрофона, пригодной для дальнейшего её использования.
Цель: получение данных с микрофона и камеры, пригодных для
дальнейшего использования.
Свойства системы: встраиваемость в системы ВЗП.
2.2.3 Модификационная концептуальная модель
Система ВЗП по данным с микрофона и камеры и составления из них
гарты громкости.
Основные функции системы: извлечение данных с микрофона,
извлечение данных с камеры, формирование из полученных данных карты
громкости, выдача результата технического процесса.
Структурная основа системы: блоки распознавания изображения
микрофона и определения по черно-белой картинке его координат, блок
определения громкости, блок рисования карты громкости.
Направленность функционирования: использование в залах театров
или кино для составления карты громкости помещения, с помощью которой
можно определить наилучшее расположение микрофона и колонок.
Цель: составление карты громкости по данным, полученным с
микрофона и камеры.
Свойства системы: возможное последующее модифицирование для
разных направлений деятельности. Возможность замены микрофона
более точным пьезодатчиком для получения более точных показателей
громкости или любых других характеристик звука. Возможность замены
камеры на автоматизированного робота, который будет ездить по
помещению и передавать данные своего положения и данные с микрофона в
программу.
34
2.3 Результаты и выводы по главе 2
В результате проделанной работы были сделаны следующие модели:
 системно – структурная;
 алгоритмическая;
 концептуальная.
Вывод: полученный пакет моделей дает представление о процессе и
функционировании системы ВЗП с помощью данных, полученных с
микрофонаи камеры. Модели позволяютпровести проектирование системы.
35
3 Проектирование системы ВЗП
В данной главе рассмотрено внешнее и внутренне проектирование. Во
внешнем проектированиипроведенобзор проблемы исформулированы цели.
Во внутреннем проектировании были описаны парадигма и средства
программирования, создан эскизный проект.
3.1 Внешнее проектирование
В результате внешнего проектирования было составлено техническое
задание, которое представлено в приложении А.
3.2 Внутреннее проектирование
3.2.1 Выбор парадигмы программирования
Парадигма программирования – это совокупность идей и понятий,
определяющая стиль написания программ [15].
Существует несколько основных парадигм программирования:
 процедурное;
 структурное;
 функциональное;
 логическое;
 объектно-ориентированное.
Процедурное программирование используется для вычислительных
процессов и представляет из себя последовательность инструкций.
В основе структурного программирования лежит структурное
разбиение программы иданных на блоки, которые выполняют определенные
функции.
Функциональное программирование используется для
программирования вычисления математической функции.
Логическое программирование используется для автоматического
доказательства теорем.
36
Объектно-ориентированное программирование основано на
концепции использования объектов и классов. Класс – это тип, который
описывает объект. Объект – это область адресного пространства в
программе, как правило, они соответствуют объектам предметной области.
Для реализации нашей программы нам подходит структурная
парадигма программирования, именно эта парадигма позволяет
структурировать данные и использовать входные данные. Также при
разработке интеллектуальных систем используются в основном структурная
и объектно-ориентированная парадигмы, поэтому наш выбор обусловлен
именно этим.
3.2.2 Выбор средств программирования
Основные требования для выбора средства программирования:
 поддержка структурной парадигмы программирования;
 направленность на язык программирования С++;
 простой и удобный графический интерфейс.
Исходя из требований, для программирования была выбрана
платформа openFrameworks, главным достоинством которой является
относительная простота работы. OpenFrameworks - это современная
платформа программирования, использующая новейшие библиотеки для
творческого кодинга, методы визуального программирования и достаточно
большие возможности.
3.2.3 Эскизный проект
В результате анализа технического задания, требований консультанта
предметнойобласти и моделирования, был создан эскизный проект системы
ВЗС с помощью камеры и микрофона, который представлен в виде
кортежной модели:
СВЗПСПКИМ = <ВЗ, ВИ, ХУ, Г, КГ>, (2)
где ВЗ – входной звук;
37
ВИ – входноеизображение;
ХУ – координаты микрофона(x,y);
Г – данные громкости,полученныймикрофоном в координатах (x,y);
КГ – карта громкости.
3.3 Результаты и выводы по главе 3
В ходе выполнения проектирования на разных стадиях были получены
следующие результаты:
 произведен анализ проблем;
 выбрана парадигма программирования;
 составлено техническое задание;
 составлен эскизный проект.
На основании полученных результатов можно сделать вывод, что
информации, полученной на стадии проектирования достаточно для
инженерной реализации проекта.
38
4 Инженерная реализация системы ВЗП
4.1 Общее описание
На основании результатов проектирования была создана программа,
позволяющая сократить до минимума время изучения распространения звука
в помещении. Данная программасостоит из нескольких блоков, отвечающих
за выполнение определенных функций: определение громкости по звуку,
поступающему на микрофон; распознавание микрофона на изображении,
поступающем с камеры в программу; составление по полученному с камеры
изображения черно-белоймаскии дальнейшее определение по ней координат
микрофона; составление по полученным данным карты громкости.
Данная программа работает следующим образом: в программу с
камеры поступает изображение, на основе которого стоится черно-белая
маска. Далее методом поиска по ширине мы определяем самый большой
объект на изображении, а именно микрофон, и его координаты.
Одновременно с этим с микрофонав программу поступает звук, по которому
определяется его громкость. Координаты микрофона и величина громкости
сопоставляются, и на основании полученных данных генерируется
изображение, представляющее из себя карту громкости. Данные операции
проводятся моментально и практически автоматически с минимальным
участием пользователя (в нашем случае нужно только направлять микрофон,
но и этот процесс в дальнейшем можно полностью автоматизировать), что
очень упрощает его работу и затрачивает меньше времени.
4.2 Требования к программному обеспечению и
характеристикам конфигурации компьютера
Наличие установленного на компьютере обеспечения:
 операционная система Windows;
 «Microsoft Visual С++» любого года;
 мультимедийный фреймворк QuickTime;
39
 платформа для творческого кодинга openFrameworks
соответствующего года.
Характеристики конфигурации компьютера пользователя для
эксплуатации ПП не должны быть ниже следующих:
 процессор «Intel Pentium IV», 2 ГГц;
 оперативная память 512 МБ RAM;
 жёсткий диск HDD 2 GB и более;
 сетевая карта;
 интегрированная видеокарта 64МБ;
 встроенная звуковая карта с поддержкой входа микрофона.
Непосредственно для работы технологии ВЗП необходимы:
 веб-камера любой модели;
 микрофон с чувствительностью не менее -58 дБ/кГц.
4.3 Пример работы программы
Приведем пример работы созданной программы для визуализации
звуковых полей.
У нас имеется программныйпродукт, на вход которому поступают два
потока информации: изображение с веб-камеры и звук с микрофона.
Рассмотрим последовательно блокиПП, через которыепроходит полученная
информация, и разберем принцип работы каждого из них.
На рисунке 4.2 представлена обработка исходного изображения,
полученного с веб-камеры в черно-белую маску, которая получается
следующим способом: изображение с камеры, полученное в режиме
цветовой модели RGB переводится в модель Grayscale, после чего
определяется яркость каждого пикселя и её значение сравнивается с
пороговым (см. рисунок 4.1). Если значение больше порогового, то пикселю
присваивается значение 255, если меньше – 0.
40
Рисунок 4.1 – Определение яркости пикселей и отображение значений,
больше пороговых
Рисунок 4.2 – Блок обработки исходного изображения в черно-белую маску
Так получается черно-белая маска, по которой методом поиска по
ширине определяется координата микрофона (см. рисунок 4.3).
Метод поиска по ширине работает следующим образом:
последовательно перебираются все пиксели изображения и вычисляется
ширина черных полос. После нахождения максимального значения, оно
делится на два. Сопоставление полученного значения по оси Oy с ранее
известным значением по оси Ox и даёт координаты положения микрофона.
41
Рисунок 4.3 – Блок определения координатмикрофона по черно-белой маске
На рисунке 4.5 представлена обработка звука в настоящий момент
времени. Громкость представленав процентном соотношениик максимально
возможнойгромкости, которуюможетвоспринять микрофон. Вкоординатах,
где замер не был произведен, цвет остаётся белым. Для визуализации
величины громкости было решено использовать палитру (см.рисунок 4.4)
шириной 256 пикселей, каждый из которых соответствует определенной
величине громкости.
Рисунок 4.4 – Палитра цветов для системы ВЗП
Иными словами, если цвет пикселя синий, то микрофон не получает
никакого звука. Или звук тише, чем способенвоспринять, а это значит, что и
человеческоеухо не воспримет никакого сигнала в этой точке пространства.
Красным цветом отображается громкость, максимально возможная для
восприятия микрофоном ивыше, а это значит, что при прослушивании звука
42
с этой точки, человек может испытывать дискомфорт или даже повредить
слух.
Рисунок 4.5 – Блок обработки поступающего с микрофона звука и
определения его громкости
На рисунке 4.6 представлен результат работы блока генерации карты
громкости. Вручную передвигая микрофон, постепенно заполняем карту
значениями громкости, уже переведенными в цветовой эквивалент.
Рисунок 4.6 – Блок генерации карты громкости
В результате получаем наглядную картину распространения звукового
поля в пространстве, по которомуможно с четкостьюопределить положение,
например, колонок. Специалист же сможет почерпнуть из такой карты, в
43
какие места в помещении микрофон ставить не следует, дабы избежать
ситуаций, когда микрофон начинает «фонить».
Для большего комфорта работы с программой были добавлены
клавиши управления:
 'q' || 'й' – настройки веб камеры (см. рисунок 4.7);
 'z' || 'я' – уменьшение порога яркости пикселей на 10;
 'x' || 'ч' – увеличение порога яркости пикселей на 10;
 'a' || 'ф' – уменьшить размер «зерна» сетки;
 's' || 'ы' – увеличить размер «зерна» сетки;
 'g' || 'п' – вкл/выкл сетку.
Рисунок 4.6 – Окно настройки веб-камеры
4.4 Результаты и выводы по главе 4
В ходе инженерной реализации программы ВЗП были получены
следующие результаты:
 выявлены минимальные системные требования к ПО и
конфигурации компьютера;
 приведен наглядный пример использования созданной программы;
44
 поставлены эксперименты на работоспособность системы.
Программный код программных блоков приведен в приложении Б.
На основании полученных результатов можно сделать вывод, что
достигнутацель работы – созданатехнология визуализации звуковыхполей с
применением микрофонаи камеры, а также создан программный продукт по
этой технологии.
45
Заключение
В процессе анализа проблематики предметной области были найдены
аналоги систем предназначенных для визуализации звуковых полей.
Моделирование привело к созданию системно-структурных,
алгоритмических и концептуальных моделей. Это позволило четко понять
функции и структуру требуемого программного продукта для визуализации
звукового поля.
В ходе выполнения проектирования на разных стадиях были получены
следующие результаты: произведен анализ проблем, выбрана парадигма
программирования, составлено техническое задание, составлен эскизный
проект на программный продукт системы визуализации звукового поля,
автоматизирующий процесс составления карты громкости помещения.
В результате инженерной реализации был создан программный
продукт почти полностью автоматизированного процесса визуализации
звуковых полей с применением камеры и микрофона, в результате
генерирующий карту громкости. Работоспособность этого программного
продукта подтверждена тестированием.
Вывод: была достигнута поставленная цель, а именно написан
программный продукт, который позволит визуализировать ЗП по данным,
полученным с камеры и микрофона.
46
Список использованных источников
1 И. П. Голямина. Звук. Физическая энциклопедия. Д. М. Алексеев, А. М.
Балдин, А. М. Бонч-Бруевич, А. С. Боровик-Романов, Б. К. Вайнштейн,
С. В. Вонсовский, А. В. Гапонов-Грехов, С. С. Герштейн, И. И.
Гуревич, А. А. Гусев, М. А. Ельяшевич, М. Е. Жаботинский, Д. Н.
Зубарев, Б. Б. Кадомцев, И. С. Шапиро, Д. В. Ширков; под общ. ред. А.
М. Прохорова [Текст] — М.: Советская энциклопедия, 1988—1999.
2 Большая энциклопедия Кирилла и Мефодия 2000 [Электронный
ресурс]. – М.: Кирилл и Мефодий, 2000. – 2 электрон. опт. диск
3 Мир звука. Устройства, схемы, программы для работы со звуком
[Электронный ресурс]. Режим доступа:
http://infrazvuk.info/xarakteristiki-zvukovogo-polya/
4 Визуализация звуковых полей – Энциклопедия физики и техники
[Электронный ресурс]. Режим доступа:
http://www.femto.com.ua/articles/part_1/0488.html
5 Большая советская энциклопедия : в 30 т. / гл. ред. А. М. Прохоров. —
3-е изд.[Текст] — М. : Сов. энцикл., 1969–1978. — 30 т.
6 Пьезоприёмник [Электронный ресурс]. Режим доступа:
http://www.ravnopravie.kharkov.ua/pezopriemnik.php
7 Физическая энциклопедия / Гл. ред. А.М. Прохоров [Текст] – М.: Сов.
энциклопедия, 1988. – Т. 1. – 704 с.
8 Диск Рэлея - Виртуальный фонд естественнонаучных и научно-
технических эффектов "Эффективная физика" [Электронный ресурс].
Режим доступа: http://www.effects.ru/science/271/index.htm
9 Акустическая кавитация - Виртуальный фонд естественнонаучных и
научно-технических эффектов "Эффективная физика" [Электронный
ресурс]. Режим доступа: http://www.effects.ru/science/64/index.htm
10 Труба Рубенса – Википедия [Электронный ресурс]. Режим доступа:
ru.wikipedia.org/wiki/Труба_Рубенса
47
11 Две с половиной тысячи бунзеновских горелок и визуализация
звуковых волн [Электронный ресурс]. Режим доступа:
http://habrahabr.ru/post/220159/
12 Моделирование – Википедия [Электронный ресурс]. Режим доступа:
ru.wikipedia.org/wiki/Моделирование
13 Модель – Википедия [Электронный ресурс]. Режим доступа:
ru.wikipedia.org/wiki/Модель
14 Гольдштейн С. Л. Введение в системологию и системотехнику /
С. Л. Гольдштейн, Т.Я. Ткаченко [Текст] – Екатеринбург: ИРРО. 1994 –
200 с.
15 Парадигма программирования — Википедия [Электронный ресурс].
Режим доступа: ru.wikipedia.org/wiki/Парадигма_программирования.
48
Приложение А
Техническое задание
49
Министерство образования и науки Российской Федерации
Федеральное государственное автономное образовательное учреждение
высшего профессионального образования
«Уральский федеральныйуниверситетимени первого Президента России
Б.Н.Ельцина»
Физико-технологический институт
Кафедра вычислительной техники
УТВЕРЖДАЮ:
зав. кафедройВТ,
академик МАИ и РАЕН,
д.т.н., профессор
С.Л. Гольдштейн
“____”________2014 г.
ПРОГРАММА СИСТЕМЫ ВИЗУАЛИЗАЦИИ ЗВУКОВОГО ПОЛЯ
С ПРИМЕНЕНИЕМ КАМЕРЫ И МИКРОФОНА
техническое задание
на 6 листах
действует с 1 октября 2014 г.
Согласовано:
канд. тех. наук, доцент
Захарова Г.Б.
“____”________2014 г.
2014
50
1. ОБЩИЕ СВЕДЕНИЯ
А1.1 Полное наименование разработки и ее условное обозначение
Исследование и разработка моделей, алгоритмов системы визуализации
звуковыхполей (ВЗП) в программе openFrameworks с применением камеры и
микрофона.
А1.2 Шифр темы
Дипломная работа.
А1.3 Наименование заказчика, разработчика и пользователя
Заказчика нет. Инициативная разработка.
Пользователи – специалисты в области исследования звукового поля,
звукорежиссеры, звуковые операторы.
Разработчик - студент группы Фт-410802 Шляхова С.И.
А1.4 Перечень документов, на основании которыхсоздается разработка,
кем и когда были утверждены эти документы
Учебный план подготовкипо специальности 09.03.01: «Информатика и
вычислительная техника».
А1.5 Плановые сроки начала и окончания работы
Начало - 01.10.14.
Окончание - 01.06.15.
А1.6 Порядок оформленияи представлениязаказчикурезультатовработ
Оформление пояснительной записки.
Защита результатов работы в ГЭК.
А2 НАЗНАЧЕНИЕ И ЦЕЛИ РАЗРАБОТКИ
А2.1 Назначение
Предлагаемая программа визуализации звуковых полей предназначена
для составления карты громкости по данным, полученным с камеры и
микрофона. Программа проектировалась специально для работы с
небольшими пространствами, но предполагает расширение и модернизацию
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы
Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы

More Related Content

What's hot

Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...
Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...
Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...abazulin
 
Лазерный тир Рубин — Кадет
Лазерный тир Рубин — КадетЛазерный тир Рубин — Кадет
Лазерный тир Рубин — Кадетtirrubin
 
ФИНАЛЬНАЯ ЗАПИСКА
ФИНАЛЬНАЯ ЗАПИСКАФИНАЛЬНАЯ ЗАПИСКА
ФИНАЛЬНАЯ ЗАПИСКАFarah Adibah
 
Решение AFS химия
Решение AFS химияРешение AFS химия
Решение AFS химияmfrognet
 
Ультразвуковой идентификатор
Ультразвуковой идентификаторУльтразвуковой идентификатор
Ультразвуковой идентификаторkulibin
 
Этапы разработки цифрового сканирующего флюорографа ПроСкан
Этапы разработки цифрового сканирующего флюорографа ПроСканЭтапы разработки цифрового сканирующего флюорографа ПроСкан
Этапы разработки цифрового сканирующего флюорографа ПроСканПавел Куликов
 
презентация по л.р.№1
презентация по л.р.№1презентация по л.р.№1
презентация по л.р.№1student_kai
 

What's hot (9)

Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...
Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...
Полуавтоматизированная сплошная толщинометрия с применением фазированных анте...
 
Kuykin_diploma
Kuykin_diplomaKuykin_diploma
Kuykin_diploma
 
Лазерный тир Рубин — Кадет
Лазерный тир Рубин — КадетЛазерный тир Рубин — Кадет
Лазерный тир Рубин — Кадет
 
ФИНАЛЬНАЯ ЗАПИСКА
ФИНАЛЬНАЯ ЗАПИСКАФИНАЛЬНАЯ ЗАПИСКА
ФИНАЛЬНАЯ ЗАПИСКА
 
Решение AFS химия
Решение AFS химияРешение AFS химия
Решение AFS химия
 
Ультразвуковой идентификатор
Ультразвуковой идентификаторУльтразвуковой идентификатор
Ультразвуковой идентификатор
 
Этапы разработки цифрового сканирующего флюорографа ПроСкан
Этапы разработки цифрового сканирующего флюорографа ПроСканЭтапы разработки цифрового сканирующего флюорографа ПроСкан
Этапы разработки цифрового сканирующего флюорографа ПроСкан
 
Ask radio project
Ask radio projectAsk radio project
Ask radio project
 
презентация по л.р.№1
презентация по л.р.№1презентация по л.р.№1
презентация по л.р.№1
 

Similar to Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы

Бизнес-разведка как инструмент коммерциализации результатов научной деятельности
Бизнес-разведка как инструмент коммерциализации результатов научной деятельностиБизнес-разведка как инструмент коммерциализации результатов научной деятельности
Бизнес-разведка как инструмент коммерциализации результатов научной деятельностиПрограмма Развития
 
Статистическая система машинного перевода, текст диплома
Статистическая система машинного перевода, текст диплома Статистическая система машинного перевода, текст диплома
Статистическая система машинного перевода, текст диплома Ilya w-495 Nikitin (official)
 
Описание задач «Научного Хакатона»
Описание задач «Научного Хакатона»Описание задач «Научного Хакатона»
Описание задач «Научного Хакатона»Sciencehit.by
 
презентация нсл
презентация нслпрезентация нсл
презентация нслncl_medical
 
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...Иван Иванов
 
сдать на тасо
сдать на тасосдать на тасо
сдать на тасоbenny
 
Газоанализатор ООО НПП Импульс
Газоанализатор ООО НПП ИмпульсГазоанализатор ООО НПП Импульс
Газоанализатор ООО НПП Импульсkulibin
 
мультимедийные проекторы
мультимедийные проекторымультимедийные проекторы
мультимедийные проекторыguest1b3814
 
сдать на тасо
сдать на тасосдать на тасо
сдать на тасоbenny
 
ооо фнмт 2
ооо фнмт 2ооо фнмт 2
ооо фнмт 2smolyaninov
 
6.ангиоскан public-rus
6.ангиоскан public-rus6.ангиоскан public-rus
6.ангиоскан public-rusSkolkovoMD
 
Презентация ТЭС Мобайл
Презентация ТЭС МобайлПрезентация ТЭС Мобайл
Презентация ТЭС МобайлKatrinZ
 
Phasellus m.u. рубидиевый стандарт частоты porta
Phasellus m.u. рубидиевый стандарт частоты portaPhasellus m.u. рубидиевый стандарт частоты porta
Phasellus m.u. рубидиевый стандарт частоты portaAlexander Ivlev
 
мгу абруков-чувгу
мгу абруков-чувгумгу абруков-чувгу
мгу абруков-чувгуabrukov
 
PerfectRootCS
PerfectRootCSPerfectRootCS
PerfectRootCSDentoSvet
 
инт тех до_ пособие
инт тех до_ пособиеинт тех до_ пособие
инт тех до_ пособиеSerghei Urban
 
Технологические платформы и инновационные кластеры
Технологические платформы и инновационные кластерыТехнологические платформы и инновационные кластеры
Технологические платформы и инновационные кластерыRussian Foundation for Technological Development
 

Similar to Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы (20)

Бизнес-разведка как инструмент коммерциализации результатов научной деятельности
Бизнес-разведка как инструмент коммерциализации результатов научной деятельностиБизнес-разведка как инструмент коммерциализации результатов научной деятельности
Бизнес-разведка как инструмент коммерциализации результатов научной деятельности
 
Статистическая система машинного перевода, текст диплома
Статистическая система машинного перевода, текст диплома Статистическая система машинного перевода, текст диплома
Статистическая система машинного перевода, текст диплома
 
Описание задач «Научного Хакатона»
Описание задач «Научного Хакатона»Описание задач «Научного Хакатона»
Описание задач «Научного Хакатона»
 
презентация нсл
презентация нслпрезентация нсл
презентация нсл
 
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...
бифуркации, катастрофы, синергетика, фракталы и нейронные сети в физических, ...
 
сдать на тасо
сдать на тасосдать на тасо
сдать на тасо
 
Газоанализатор ООО НПП Импульс
Газоанализатор ООО НПП ИмпульсГазоанализатор ООО НПП Импульс
Газоанализатор ООО НПП Импульс
 
мультимедийные проекторы
мультимедийные проекторымультимедийные проекторы
мультимедийные проекторы
 
сдать на тасо
сдать на тасосдать на тасо
сдать на тасо
 
презентация цнирти
презентация цниртипрезентация цнирти
презентация цнирти
 
Vocal print
Vocal print Vocal print
Vocal print
 
ооо фнмт 2
ооо фнмт 2ооо фнмт 2
ооо фнмт 2
 
6.ангиоскан public-rus
6.ангиоскан public-rus6.ангиоскан public-rus
6.ангиоскан public-rus
 
SECON'2014 - Андрей Устюжанин - Маленькие секреты больших данных
SECON'2014 - Андрей Устюжанин - Маленькие секреты больших данныхSECON'2014 - Андрей Устюжанин - Маленькие секреты больших данных
SECON'2014 - Андрей Устюжанин - Маленькие секреты больших данных
 
Презентация ТЭС Мобайл
Презентация ТЭС МобайлПрезентация ТЭС Мобайл
Презентация ТЭС Мобайл
 
Phasellus m.u. рубидиевый стандарт частоты porta
Phasellus m.u. рубидиевый стандарт частоты portaPhasellus m.u. рубидиевый стандарт частоты porta
Phasellus m.u. рубидиевый стандарт частоты porta
 
мгу абруков-чувгу
мгу абруков-чувгумгу абруков-чувгу
мгу абруков-чувгу
 
PerfectRootCS
PerfectRootCSPerfectRootCS
PerfectRootCS
 
инт тех до_ пособие
инт тех до_ пособиеинт тех до_ пособие
инт тех до_ пособие
 
Технологические платформы и инновационные кластеры
Технологические платформы и инновационные кластерыТехнологические платформы и инновационные кластеры
Технологические платформы и инновационные кластеры
 

More from Denis Perevalov

Mobile Projections in Urban Spaces
Mobile Projections in Urban SpacesMobile Projections in Urban Spaces
Mobile Projections in Urban SpacesDenis Perevalov
 
Мобильные проекции в городских пространствах
Мобильные проекции в городских пространствахМобильные проекции в городских пространствах
Мобильные проекции в городских пространствахDenis Perevalov
 
Telepresense projects in open spaces
Telepresense projects in open spacesTelepresense projects in open spaces
Telepresense projects in open spacesDenis Perevalov
 
Проекты Telepresense в открытых пространствах
Проекты Telepresense в открытых пространствахПроекты Telepresense в открытых пространствах
Проекты Telepresense в открытых пространствахDenis Perevalov
 
С.Киселёва. БПЛА и задачи машинного зрения в БПЛА
С.Киселёва. БПЛА и задачи машинного зрения в БПЛАС.Киселёва. БПЛА и задачи машинного зрения в БПЛА
С.Киселёва. БПЛА и задачи машинного зрения в БПЛАDenis Perevalov
 
Программирование будущего - 2015
Программирование будущего - 2015Программирование будущего - 2015
Программирование будущего - 2015Denis Perevalov
 
Cветовые перформансы: примеры и технологии
Cветовые перформансы: примеры и технологииCветовые перформансы: примеры и технологии
Cветовые перформансы: примеры и технологииDenis Perevalov
 
Интерактивный звук (АГВЗ'15:3)
Интерактивный звук (АГВЗ'15:3)Интерактивный звук (АГВЗ'15:3)
Интерактивный звук (АГВЗ'15:3)Denis Perevalov
 
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.Denis Perevalov
 

More from Denis Perevalov (11)

Kuflex #1 Exhibition
Kuflex #1 Exhibition Kuflex #1 Exhibition
Kuflex #1 Exhibition
 
Mobile Projections in Urban Spaces
Mobile Projections in Urban SpacesMobile Projections in Urban Spaces
Mobile Projections in Urban Spaces
 
Мобильные проекции в городских пространствах
Мобильные проекции в городских пространствахМобильные проекции в городских пространствах
Мобильные проекции в городских пространствах
 
Telepresense projects in open spaces
Telepresense projects in open spacesTelepresense projects in open spaces
Telepresense projects in open spaces
 
Проекты Telepresense в открытых пространствах
Проекты Telepresense в открытых пространствахПроекты Telepresense в открытых пространствах
Проекты Telepresense в открытых пространствах
 
С.Киселёва. БПЛА и задачи машинного зрения в БПЛА
С.Киселёва. БПЛА и задачи машинного зрения в БПЛАС.Киселёва. БПЛА и задачи машинного зрения в БПЛА
С.Киселёва. БПЛА и задачи машинного зрения в БПЛА
 
Программирование будущего - 2015
Программирование будущего - 2015Программирование будущего - 2015
Программирование будущего - 2015
 
Cветовые перформансы: примеры и технологии
Cветовые перформансы: примеры и технологииCветовые перформансы: примеры и технологии
Cветовые перформансы: примеры и технологии
 
Интерактивный звук (АГВЗ'15:3)
Интерактивный звук (АГВЗ'15:3)Интерактивный звук (АГВЗ'15:3)
Интерактивный звук (АГВЗ'15:3)
 
Обзор курса
Обзор курсаОбзор курса
Обзор курса
 
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.
Распознавание листьев, Агеев П., Кузнецов А., Самойленко М.
 

Шляхова С.И., Визуализация звукового поля с применением камеры и микрофона - текст дипломной работы

  • 1. Министерство образования и науки Российской Федерации Федеральное государственное автономное образовательное учреждение высшего профессионального образования «Уральский федеральныйуниверситетимени первого Президента России Б.Н.Ельцина» Физико-технологический институт Кафедра вычислительной техники ДОПУСТИТЬ К ЗАЩИТЕ Зав. кафедрой вычислительнойтехники ______________ С.Л. Гольдштейн (подпись) «______»__________________2015 г. РАЗРАБОТКА СИСТЕМЫ ВИЗУАЛИЗАЦИИ ЗВУКОВОГО ПОЛЯ С ПРИМЕНЕНИЕМ КАМЕРЫ И МИКРОФОНА ВЫПУСКНАЯ КВАЛИФИКАЦИОННАЯ РАБОТА БАКАЛАВРА Пояснительная записка 09.03.01 46 ПЗ Руководитель, доц., к. т. н. ____________ Г. Б. Захарова Консультант, н.с. ИММ УрО РАН ____________ Д.С. Перевалов Нормоконтролер,доц., к.т.н. ____________ В.В. Ковалев Студент гр. Фт-410802 ____________ С.И. Шляхова Екатеринбург 2015
  • 2. 2 Реферат Пояснительная записка 47 страниц, 13 рисунков, 4 таблицы, 15 источников, 2 приложения. Актуальность работы. В настоящее время существует достаточно большое количество способов визуализации звукового поля (ВЗП), которые применяются для изучения звуковых полей сложной формы для целей дефектоскопии и медицинской диагностики, а также для визуализации акустических изображений предметов. Одним из важнейших направлений развития систем ВЗП является изучение распространения звука в помещении с целью создания оптимального его пути распространения (выборположения микрофона и колонок в зале кинотеатра, клуба или любого другого помещения). Цель исследования – создание технологии ВЗП в режиме реального времени с применением микрофона и камеры, а также создания программного продукта по этой технологии. Для достижения поставленной цели нужно решить следующие задачи:  проанализировать существующие в настоящее время системы визуализации звуковых полей;  произвести отбор аналогов из существующих систем ВЗП;  разработать пакет моделей на создание программного продукта;  разработать ТЗ для программного продукта;  реализовать и протестировать полученный программный продукт.
  • 3. 3 Содержание Нормативные ссылки........................................................................................5 Обозначения и сокращения..............................................................................6 Введение...........................................................................................................7 1 Проблематика визуализации звукового поля ............................................ 9 1.1 Направления поиска информации и ключевые слова...........................9 1.2 Алгоритмы поиска информации......................................................... 15 1.3 Литературно – аналитический обзор.................................................. 19 1.4 Определение аналогов........................................................................ 19 1.4.1 Краткая характеристика аналогов метода ВЗП............................. 19 1.4.2 Критерии оценки аналогов метода ВЗП ....................................... 24 1.5 Выбор и обоснование программного продукта .................................. 26 1.5.1 Краткая характеристика найденных программных продуктов..... 26 1.5.2 Критерии оценки апрограммного продукта.................................. 27 1.6 Цели и задачи...................................................................................... 28 1.7 Результаты и выводы по 1 главе......................................................... 29 2 Моделирование системы ВЗП.................................................................. 30 2.1 Моделирование предлагаемых решений ............................................ 30 2.1.1 Системно-структурная модель...................................................... 30 2.1.2 Алгоритмическая модель.............................................................. 31 2.2 Пакет концептуальных моделей ......................................................... 31 2.2.1 Общая концептуальная модель..................................................... 32 2.2.2 Базово – уровневая концептуальная модель................................. 32 2.2.3 Модификационная концептуальная модель.................................. 33 2.3 Результаты и выводы по главе 2......................................................... 33
  • 4. 4 3 Проектирование системы ВЗП ................................................................. 35 3.1 Внешнее проектирование ................................................................... 35 3.2 Внутреннее проектирование............................................................... 35 3.2.1 Выбор парадигмы программирования.......................................... 35 3.2.2 Выбор средств программирования ............................................... 36 3.2.3 Эскизный проект........................................................................... 36 3.3 Результаты и выводы по главе 3......................................................... 37 4 Инженерная реализация ВЗП.................................................................... 38 4.1 Общее описание.................................................................................. 38 4.2 Требования к программному обеспечению и характеристикам конфигурации компьютера.......................................................................... 38 4.3 Пример работы программы ................................................................ 39 4.4 Результаты и выводы по главе 4......................................................... 43 Заключение..................................................................................................... 45 Список использованных источников.............................................................. 46 Приложение А. Техническое задание............................................................. 48 Приложение Б. Программный код системы ВЗП........................................... 55
  • 5. 5 Нормативные ссылки ГОСТ 19.504-79 ЕСПД Руководство программиста ГОСТ 19.701-90 ЕСПД Схемы алгоритмов, программ, данных и систем ГОСТ 34.201-89 ИТ. ЕКСАС Виды, комплектность и обозначение документов при создании автоматизированных систем ГОСТ 34.601-90 ИТ. ЕКСАС Автоматизированные системы. Стадии создания ГОСТ 34.602-89 ИТ. ЕКСАС Техническое задание на создание автоматизированной системы ГОСТ Р ИСО/МЭК 9294-93 ИТ Руководство по управлению документированием программного обеспечения ГОСТ Р ИСО/МЭК 12119-2000 ИТ Процессы жизненного цикла программных средств ГОСТ Р ИСО/МЭК 12207-99 ИТ Пакеты программ. Требования к качеству и тестированию
  • 6. 6 Обозначения и сокращения ПЗ Пояснительная записка ЗП Звуковое поле ВЗП Визуализация звукового поля ТЗ Техническое задание
  • 7. 7 Введение Звук – это то, что сопровождает нас на протяжении всей жизни. Мало что является настолько неотъемлемым в жизни человека. Именно поэтому его так много и тщательно изучают. И, казалось бы, что в наше время сделать что-то новое в этой сфере уже невозможно, но и по сей день ученые и обычные исследователи строят теории и концепции. В настоящее время существует достаточно большое количество способов визуализации звуковых полей, которые применяются для изучения звуковых полей сложной формы для целей дефектоскопии и медицинской диагностики, а также для визуализации акустических изображений предметов, которыеполучены либо с помощью акустических фокусирующих систем, интеллектуальных информационных систем и т.д. Так же получение подробной информации о такой характеристике звука, как частота, позволит избежать крупных потерь в высокоточной химической промышленности, когда нельзя позволить веществам смешиваться друг с другом. А для получения характеристик о частоте звука нужно лишь заменить микрофон на пьезоприёмник низких частот. Именно поэтому технология визуализации звука с помощью микрофона и камеры так важна на данный момент. Если рассмотреть системуВЗП стоячихволн, то мы обнаружим только опасный способ при помощи трубки Рубенса. Но если бы существовал способ ВЗПпри помощи программногопродукта, у каждого школьника была бы возможность провести этот интересный эксперимент. Последним и самым перспективным направлением развития систем ВЗП является изучение распространения звука в помещении с целью создания оптимального его пути распространения (выбор положения микрофона и колонок в зале кинотеатра, клуба или любого другого помещения). Автоматизация этого процесса значительно бы помогла звуковым операторам в их работе.
  • 8. 8 Данная выпускная квалификационная работа посвящена как раз созданию такой системы ВЗП, созданиютехнологииВЗП с помощью камеры и микрофона, которая сможет быть применена для построения карты громкости в помещении в режиме реального времени.
  • 9. 9 1 Проблематика визуализации звукового поля 1.1 Направления поиска информации и ключевые слова Для поиска информации была выбрана тема «Разработка системы визуализации звукового поля с применением камеры и микрофона». Ключевыми словами для поиска стали: Звук — физическоеявление, представляющее собойраспространениев виде упругих волн механических колебаний в твёрдой, жидкой или газообразнойсреде. В узком смысле под звуком имеют в виду эти колебания, рассматриваемые в связи с тем, как они воспринимаются органами чувств животных и человека. Как и любая волна, звук характеризуется амплитудой и спектром частот. Обычныйчеловек способен слышать звуковые колебания в диапазоне частот от 16—20 Гц до 15—20 кГц. Звук ниже диапазона слышимости человека называют инфразвуком; выше: до 1 ГГц, — ультразвуком, от 1 ГГц — гиперзвуком. Громкость звука сложным образом зависит от эффективного звукового давления, частоты и формы колебаний, а высота звука — не только от частоты, но и от величины звукового давления[1]. Частота звука - количество колебаний воздуха в секунду. Частота измеряется в Герцах (Гц): 1 Гц = 1 колебание в секунду; или килогерцах (кГц): 1кГц = 1000 Гц. Длина волны - отрезок на оси распространения волны, в котором умещается полный цикл (период) изменения плотности воздуха. Частота волны обратно пропорциональна длине волны. Чем больше частота звука, тем меньше длина волны и наоборот. Длину волны очень легко вычислить по формуле l=C/f, где C - скорость звука (340 м/с), а f - частота звуковых колебаний. Например, волна, имеющая частоту 100 Гц, имеет длину 340/100=3.4 м. Амплитуда звуковой волны - половина разницы между самым высоким и самым низким значением плотности. На графике амплитуде будет
  • 10. 10 соответствовать разницамежду самой высокой (или низкой) точкой волны и горизонтальной осью графика. Для описания относительных временных свойств двух звуковых волн (или разных частей одной волны) вводится понятие фазы звуковой волны (см. рисунок 1.1). На первом графике показаны две волны, которые полностью совпадают друг с другом. В этом случае говорят, что волны находятся в фазе. На третьем графике в том месте, где у одной волны находится область высокойплотности, у другой - область низкой плотности. В этом случае говорят, что волны находятся в противофазе. При этом, если волны одинаковые, происходит их взаимное уничтожение (в природе это бывает крайне редко, чаще противофазные волны при наложении сильно искажают звук). Средний график показывает некое промежуточное положение. В этом случае говорят, что фаза одной волны сдвинута относительно другой. а б в Рисунок 1.1 – Графики фаз звуковой волны Звуковое поле — область пространства, в которой распространяются звуковыеволны, то есть происходят акустические колебания частиц упругой среды (твердой, жидкой или газообразной), заполняющей эту область. Понятие звукового поля применяется обычнодля областей, размеры которых порядка или больше длины звуковой волны. С энергетической стороны звуковое поле характеризуется плотностью звуковой энергии (энергией колебательного процесса, приходящейся на единицу объема) и интенсивностью звука [2].
  • 11. 11 Акустическое поле - это область какой-либо упругой поверхности которая выполняет роль передачи акустических волн, и характеризуется только по двум параметрам. А именно: звуковым давлением и акустическим сопротивлением. Звуковое давление измеряется в единицах Паскалях, а акустическое сопротивление - Паскаль сантиметр площади [3]. Звуковое давление - это показатель, который измеряется в разнице давления в средераспространения волни обычным атмосферным давлением. Акустическое сопротивление - это отношение звукового давления к скорости колебания микроскопических частиц среды. Акустическое поле имеет также характеристики, у которых есть две позиции, а именно интенсивность и мощность звука. С интенсивностью и мощностьюзвука, здесь всепонятно. Зато есть одна характеристика, которая играет важную роль при формировании акустического поля - это направленность звука излучения. Есть угловое пространственное распространение давления создаваемого вокруг источника звукового давления. Визуализациязвуковыхполей - методы получения видимой картины распределения величин, характеризующих звуковое поле. ВЗП применяется для изучения полей сложной формы, для целей дефектоскопии и медицинской диагностики, а также для визуализации акустических изображений предметов, получаемых либо с помощью акустических фокусирующих систем, либо методами акустической голографии [4]. Колебательное смещениечастиц (акустическое смещение), смещение x бесконечно малой части среды по отношению к среде в целом, обусловленноепрохождением звуковойволны. Направление колебательного смещения может совпадать или не совпадать с направлением распространения волны в зависимости от типа волны. При всех достижимых интенсивностяхзвука Колебательное смещение x < l, где l — длина звуковой волны[5].
  • 12. 12 Пьезоприёмник - пьезоэлектрический преобразователь, предназначенный для восприятия акустических сигналов и преобразования их в электрические с целью измерения, передачи, воспроизведения, записи или анализа. Статические пьезоприёмники применяют, например, в тензометрии для регистрации и измерения статических величин - давления, силы или смещения. Конструктивно такие пьезоприёмники могут быть выполнены в различных вариантах в зависимости от величины воспринимаемогосигналаи требуемого выходного напряжения. Резонансные пьезоприёмники широко используются в акустике, гидроакустике, дефектоскопиии др. Отличаются повышенной чувствительностью, однако их рабочая полосачастотограничена из-за быстрого падения чувствительности по обе стороны относительно резонансной частоты. Широкополосные (нерезонансные) пьезоприёмники служат для неискажённого приёма сложных сигналов (например, импульсных), в спектре которых содержится большоечисло составляющих. Подразделяются на микрофоны (для приёма в воздушной среде), гидрофоны (в жидкости) и пьезоприёмники для твёрдых тел. В качестве микрофонов применяют пьезоприёмники, выполненные на основе двойных (биморфных) пьезоэлементов с использованием изгибных колебаний и металлических резонаторов для согласования со средой. Гидрофонами служат пьезоприёмники, выполненные как на основе одиночных пьезоэлементов, так и систем пьезоэлементов, соединённых между собой электрически и механически. В твёрдых телах для приёма колебаний, вызванных волнами различныхтипов - объёмными(продольными или сдвиговыми), поверхностными,- в большинстве случаев применяют контактные пьезоприёмники. Такие пьезоприёмники предназначены для измерения амплитуды смещений поверхности (виброметры), колебательные скорости (велосиметры), ускорения (акселерометры). Минимальные амплитуды смещений, измеряемые широкополосными пьезоприёмниками, ограничены шумами и обычно составляют 10-10 мкм. Пьезоприёмники для твёрдых тел реагируют в основном на определённый тип волн, для чего
  • 13. 13 используютпластины из пьезоэлектрическихкристаллов специальных срезов (например, для продольных волн - Х-срез кварца, 2-срез ниобата лития; для сдвиговых - У-срез кварца), или на определённую поляризацию пьезо- керамических преобразователей, или на особую конфигурацию электродов на пьезоэлементе (например, для приёма поверхностных волн - встречно- штыревые преобразователи) [6]. Акустические течения (акустический, или звуковой, ветер), регулярные течения среды в звуковое поле большой интенсивности. Могут возникать как в свободном неоднородном звуковом поле, так и (особенно) вблизи различного рода препятствий, помещённых в звуковое поле. Акустические течения всегда имеют вихревой характер и обычно возникают в результате того, что количество движения, связанноес колебаниями частиц среды в волне и переносимое ею, при поглощении волны передаётся среде, вызывая регулярное движение последней. Поэтому скорость акустических течений пропорциональна коэффициенту поглощения звука и его интенсивности, но обычно непревосходитвеличины колебательной скорости частиц в звуковой волне. После включения источника звука акустическое течение устанавливается не сразу, а «разгоняется» постепенно до тех пор, пока торможение за счёт вязкости среды не скомпенсирует увеличение его скорости под действием звука [7]. Диск Рэлея - звукометрическое устройство, основанное на развороте легкого диска перпендикулярно направлению распространения звуковых волн. Принцип действия диска Рэлея основан на возникновении в поле звуковой волны вращающего момента D, действующего на плоский предмет (диск, пластинку), подвешенный на тонкой закручивающейся нити D = (2¤3)ЧU 2ЧrЧr3Чsin2a, где r - радиус диска; r - плотность окружающей среды; U - колебательная скорость частиц среды;
  • 14. 14 а - угол между нормалью к поверхности диска и направлением распространения звука [8]. Акустическаякавитация -явление образования в жидкости полостей заполненных газом, паром или их смесью (кавитационные пузырьки или каверны). Кавитационные пузырьки образуются в тех местах, где давление в жидкости становится ниже критического значения Рcr (в реальной жидксти Рcr приближенно равно давлению насыщенного пара этой жидкости при данной температуре). Акустическая кавитация, в отличие от гидродинамической (обусловленной понижением давления вследствие больших локальных значений скорости в потоке движущейся жидкости), возникает при прохождении звуковых волн высокой интенсивности и амплитуды звукового давления, превосходящей некоторую пороговую величину. Кавитационные пузырьки возникают во время полупериода разрежения на так называемых кавитационных зародышах, которыми чаще всего являются газовые включения, содержащиеся в жидкости и на колеблющейся поверхности акустического излучателя. Поэтому кавитационный порог повышается по мере снижения содержания газа в жидкости, при увеличении гидростатического давления, после “обжатия” газа в жидкости (~108 Па) гидростатическим давлением и при охлаждении жидкости, а кроме того, при увеличении частоты звука и при сокращении продолжительности озвучивания. Порог для бегущей акустической волны выше, чем для стоячей. Пузырьки захлопываются во время полупериодов сжатия, создавая кратковременные (длительностью ~10-6 с) импульсы давления (до 108 Па и выше), способные разрушить даже весьма прочные материалы. Такое разрушение имеет место на поверхности мощных акустических излучателей, работающих в жидкости. При температуре жидкости, близкой к точке кипения, доминирующий вклад в образование пузырьков вносит испарение жидкости; такие процессы наблюдаются, например, при возникновении кавитации в криогенных жидкостях. Звуковое
  • 15. 15 поле в жидкости, вызывающее кавитацию, обычно неоднородно по пространству. Это приводит к тому, что наряду с пульсациями, пузырек движется поступательно. В стоячей ультразвуковой волне направление движения пузырька зависит от соотношения между его радиусом Rрез пузырька, частота собственных колебаний которого совпадает с частотой ультразвуковойволны. При размерепузырькаменьше резонансного(R<Rres) пузырьки пульсируют в фазе с колебаниями давления и мигрируют по направлению к пучностидавления, а при (R>Rres) пузырьки перемещаются к узлам давления. Скорость n поступательных (трансляционных) движений пузырьков радиуса R0 при гидростатическом давлении Р0 , находящихся в ультразвуковом поле со звуковым давлением Ра равна: , где h - коэффициент кинематической вязкости жидкости; s - коэффициент поверхностного натяжения; х i - пространственная координата (i=1,2,3…) [9]. 1.2 Алгоритмы поиска информации Поиск информации осуществлялся в трех направлениях:  интернет: использовались поисковые системы Google и Яндекс, а также материалы из Википедии (Алгоритм поиска представлен на рисунке 1.2);  библиотека (печатные издания): были изучены публикации различных авторов, посвященные компьютерной лингвистике (Алгоритм поиска представлен на рисунке 1.3);  эксперты: был проведен опрос некоторых экспертов с кафедры вычислительной техники (Алгоритм поиска представлен на рисунке 1.4).
  • 16. 16 Рисунок 1.2 – Алгоритм поиска информации в интернете
  • 17. 17 Рисунок 1.3 – Алгоритм поиска информации в библиотеке
  • 18. 18 Рисунок 1.4 – Алгоритм поиска информации у экспертов
  • 19. 19 1.3 Литературно – аналитический обзор Поиск информации осуществлялся с помощью интернета (использовались поисковые системы Google, Yandex) и печатных изданий (литература, посвященная теме исследования). 1.4 Определение аналогов В данном пункте будет проведен обзор аналогов, их критериальная оценка и выбор прототипа. 1.4.1 Краткая характеристика аналогов метода ВЗП В зависимости от характера используемого эффекта все методы ВЗП можно подразделить на три группы:  методы, в которыхиспользуются основные параметры звукового поля - звуковое давление, колебательное смещение частиц, переменная плотность среды;  методы, основанныена квадратичныхэффектах в звуковом поле - деформация воднойповерхностипод действием пондеромоторных сил звукового поля, на акустических течениях, эффекте Рэлея диска;  методы, использующие вторичные эффекты, возникающие при распространении звуковых волн достаточной интенсивности в жидкости,- тепловые эффекты, ускорение процессов диффузии, дегазация жидкости, акустическая кавитация, эффекты гашения и возбуждения люминесценции, изменения цвета красителей, непосредственного воздействия ультразвука на фотослой и т. д. Среди методов первой группы самый распространённый - сканирование исследуемого поля миниатюрным приёмником звукового давления, электрический сигнал с которогo преобразуется в световой, например, с помощью электрической лампочки или путём модуляции яркости луча электронной лучевой трубки. Сканирование одиночным приёмником может быть использовано для ВЗП стоячих волн, а для
  • 20. 20 визуализации поля бегущей волны необходим набор (мозаика) приёмников, быстро переключаемых с помощью электронного устройства. Методы механического сканирования обычно применяют в диапазоне до 100 кГц; в диапазоне от 100 кГц до нескольких десятков МГц используют электронные методы сканирования мозаики пьезоприёмников или сплошной пьезопластины с секционированным электродом на внутренней (тыльной) стороне. В последнем случае посредством пьезоэффекта картина распределения звукового давления преобразуется в соответствующий электрический потенциальный рельеф на приёмном элементе, этот рельеф считывается электронным лучом и далее преобразуется в видимое изображение. Изменение плотности среды в звуковом поле и соответствующее изменение показателя преломления для световых лучей приводят к модуляции светового потока по фазе. Для визуализации этих фазовых изменений применяется метод Тёплера ( Теневой метод ), в котором используется рефракция света в среде с переменным показателем преломления. Его модификация - метод фазового контраста, в котором модуляция светового луча по фазе преобразуется в модуляцию по амплитуде, дающую видимое изображение. Частными примерами такого метода являются труба Рубенса и огненная доска. Труба Рубенса (Rubens’ Tube) – это отрезок трубы, перфорированный по всей длине. Один конец подключается к маленькому динамику, а второй — к источнику горючего газа (баллону с пропаном). Труба заполнена горючим газом, так что просачивающийся через отверстия газ горит. Если используется постоянная частота, то в пределах трубы может сформироваться стоячая волна. Когда динамик включен, в трубе формируются области повышенного и пониженного давления. Там, где благодаря звуковым волнам находится область повышенного давления, через отверстия просачивается больше газа и высота пламени больше. Благодаря
  • 21. 21 этому можно измерить длину волны просто измеряя рулеткой расстояние между пиками [10]. Огненная доска(Pyro Board) в отличие от трубы Рубенса состоит не из однойтрубы с отверстиями, а представляет собойцелую систему, состоящую из 2500 горелок. Вся эта система весьма эффектно реагирует на изменение давления вследствие влияния звуковых волн и позволяет в буквальном смысле «видеть» звук [11]. Для неразрушающего контроля применяют методы ВЗП, основанные на оптической голографической интерференции: на одной и той же фотопластинке формируют две, три и т. д. оптические голограммы колеблющегося, излучающего звук тела; на восстановленном изображении этого тела видны интерференционные полосы, соответствующие распределению амплитуды колебаний по его поверхности. Методы голографической интерферометрии обладают высокой чувствительностью и позволяют обнаруживать весьма малые (0,0002 мм) деформации. Среди методов второй группы наиб. распространение получил метод поверхностного рельефа, основанный на эффекте вспучивания свободной поверхности жидкости под воздействием пондеромоторных сил ультразвукового поля. Обусловленный ультразвуковой рельеф визуализируют с помощью направленного на поверхность жидкости светового пучка, используя различныеметоды, в т. ч. и теневой. В диапазоне частот 0,5-5 МГц применяется голографическая модификация этого метода; при этом в образовании рельефа поверхности участвуют интерферирующие акустические волны - исследуемая и опорная. В этом случае получают информациюне только об амплитудном распределении звукового поля, но и о его фазовой структуре. При реализации метода диска Рэлея в смеси воды и ксилола образуют взвесь мельчайших чешуек лёгкого металла, например, алюминия, которые в отсутствие акустического поля выглядят при освещении как матовая серая поверхность. Переориентация частиц под действием звуковой волны создаёт
  • 22. 22 условия для зеркального отражения света, в результате чего на сером фоне появляется видимое изображение звукового поля. Действие ультразвука на упорядоченную ориентацию молекул в жидких кристаллах обусловливает акустооптические эффекты в этих веществах, используемые для ВЗП. Эффект динамического рассеяния света состоит в том, что при помещении в ультразвуковое поле тонкого слоя прозрачного жидкокристаллического вещества с предварительно ориентированными молекулами в местах с большой интенсивностью происходит нарушение ориентации и соответственно сильное рассеяние проходящего через слой света. Эффект двулучепреломления света в жидких кристаллах основан на том, что вызванная колебательным смещением одной из стеклянных пластинок, между которыми располагается слой жидких кристаллов, переменная деформация слоя приводит к соответствующему изменению поляризации проходящего через слой света. С помощью поляроида это изменение поляризации преобразуется в изменение интенсивности светового потока, пропорциональное либо звуковому давлению, либо колебательному смещению. К третьей группе относятся методы, основанные на тепловом воздействииультразвука и на его способностиускорятьпроцессы диффузии. Для реализации тепловых эффектов в исследуемое звуковое поле помещают тонкий, поглощающий звук экран, неравномерное нагревание которого можно визуализировать с помощью термо-чувствительных красок или жидких кристаллов, нанесённых тонким слоем на поглощающий экран, применением электронно-оптических преобразователей, чувствительных в инфракрасной области, возбуждением или гашением люминесценции нанесённых на экране специальных люминофоров и др. На эффекте ускорения диффузии в ультразвуковом поле основан фотодиффузионный метод ВЗП: предварительно засвеченная фотобумага погружается в озвучиваемый раствор проявителя; в местах с большей интенсивностью ультразвука диффузия проявителя ускоряется и бумага быстро чернеет.
  • 23. 23 Для ВЗП используются также кавитационная эрозия фольги, помещённой в ультразвуковое поле, звукохимические эффекты, среди которых наиболее нагляден эффект потемнения крахмала в растворе йодистого калия, разлагающегося под действием ультразвуковой кавитации в слабо подкислённой среде. Сравнительные характеристики различных методов визуализации звуковых полей приведены в таблице 1.1. Таблица 1.1 – Сравнительные характеристики различных методов визуализации звуковых полей Первая группа Метод Характеристики I, Вт/см2 f, МГц t, c Механическое сканирование пьезоприёмником 10-12 Практически любая 10-7- -10-8 Электронное сканирование пьезокерамической пластины 10-11 0,1-103 10-7-10-8 Пьезоэлектрический эл. - люминесцентный датчик 10-3 0, 1-2 0,1-1 Теневой метод, метод фазового контраста, дифракция света на УЗ 10-3-10-5 0,5-30 10-5-20-6 Голографическая интерферометрия 10-3-10-5 Не ограничена 10-5-20-6 Вторая группа Метод поверхностного рельефа - в жидкости 2*10-3 0,3-10 0,1 - в твёрдом теле 3-10-5 0,5-15 0,01 Акустооптические эффекты в жидких кристаллах 10-2-10-3 0,7-10 - Метод диска Рэлея 2*10-6 0,1-1 1 Третья группа Ускорение процесса фотограф. проявления 0,1 0,1-1 10 - 100 Потемнение пластинки со слоем крахмала в йодном растворе 1 0, 1 - 1 100 Обесцвечивание красителя из-за диффузии 0,5-1 0,1-1 10-150 Возбуждение люминесценции 1 0,1-1 0,1-1 Гашение люминесценции - - 0,1-1 Изменение цвета термочувствительных красок 1 0,01-10 0, 1 Изменение фотоэмиссии 0,1 0,1-1 0,1
  • 24. 24 В таблице приведено сравнение методов ВЗП с указанием пороговой интенсивностиI и частоты f (или диапазон частот), а также ориентировочные значения минимумов времён экспозиций t. 1.4.2 Критерии оценки аналогов метода ВЗП В результате литературного обзора были выделены методы, наиболее часто рекомендуемые для ВЗП и проведен их сравнительный анализ по выбранным критериям. Критерии, выбранные для сравнения: 1 – Возможность количественной оценки; 2 – Высокая наглядность полученной картины; 3 – Простота расчетов; 4 – Универсальность (возможность использования метода для организаций любой специфики); 5 – Динамическая оценка (возможность измерения в разные периоды времени); 6 – Возможность отображать полученные данные в электронном варианте; 7 – Затратность (возможность использования метода). Был использован дихотомический метод сравнения (да-1, нет-0). Результаты сравнения представлены в таблице 1.2. Исходя из сравнения, видно, что наиболее подходящими являются методы с использованием пьезоприёмников, так как согласно идее предполагается использование микрофона для считывания сигнала частотой 1-3кГц и передача его в программу на openFrameworks для преобразования в картинку. Так же в рамках исследования пьезоприёмник можно считать нерасходуемым ресурсом, что ведет к значительной экономии относительно использования прочих средств визуализации звуковых полей. И, конечно, важным фактором является возможность его подключения к любому компьютеру.
  • 25. 25 Таблица 1.2 - Сравнение методов ВЗП Название метода Оценки по критериям 1 2 3 4 5 6 7 8 Суммарная оценка Механическое сканирование пьезоприёмником 1 1 1 1 1 1 1 7 Электронноесканирование пьезокерамической пластины 1 1 1 1 1 1 0 6 Пьезоэлектрический эл. - люминесцентный датчик 1 1 1 0 1 1 0 5 Теневой метод, метод фазового контраста, дифракция света на УЗ 1 1 1 0 0 0 0 3 Голографическая интерферометрия 1 1 1 0 0 0 0 3 Метод поверхностного рельефа 1 0 0 0 0 0 0 1 - в жидкости 1 0 0 0 0 0 0 1 - в твёрдом теле 1 0 0 0 0 0 0 1 Акустооптические эффекты в жидких кристаллах 1 0 0 0 0 0 0 1 Метод дискаРэлея 1 0 0 0 0 0 0 1 Ускорениепроцесса фотограф. проявления 0 1 0 0 0 0 0 1 Потемнение пластинки со слоем крахмала в йодном растворе 0 1 0 0 0 0 0 1 Обесцвечиваниекрасителя из-за диффузии 0 1 0 0 0 0 0 1 Возбуждение люминесценции 0 1 0 0 0 0 0 1 Гашение люминесценции 0 1 0 0 0 0 0 1 Изменение цвета термочувствительных красок 0 1 0 0 0 0 0 1 Изменение фотоэмиссии 0 1 0 0 0 0 0 1
  • 26. 26 1.5 Выбор и обоснование программного продукта В силу специфики данной работы необходим программный продукт, который позволит работать со звуком и обладать возможностью его графической визуализации. Далее рассмотрим несколько возможных решений данной задачи. 1.5.1 Краткаяхарактеристиканайденных программных продуктов Processing — открытый язык программирования, основанный на Java. Представляет собой лёгкий и быстрый инструментарий для людей, которые хотят программировать изображения,анимацию и интерфейсы. Используется студентами, художниками, дизайнерами, исследователямии любителями, для изучения, прототипирования и производства. Он создан для изучения основ компьютерного программирования в визуальном контексте и служит альбомным программным обеспечением (имеется в виду то, что каждый *.pde файл визуальной оболочки Processing’а представляет собой отдельное изображениеили анимацию, и т. д.) и профессиональным производственным инструментом. Программа на Processing называется скетч (от англ. sketch — эскиз). Идея состоит в том, чтобы программирование в Java-стиле было похоже на скриптование, и взятиина вооружение процесса скриптования для быстрого написания кода. Перед выполнением скетча он преобразуется в код на языке Java для выполнения в среде Windows/Linux/MacOS/Android либо в Javascript-код для выполнения в браузере внутри Canvas. При программировании на языке Processing все создаваемые классы являются внутренними классами основного. Это накладывает определённые ограничения при разработке.
  • 27. 27 OpenFrameworks — это бесплатная платформа на основе С++ вокруг нескольких библиотек, т.е. служит для соединения этих библиотек в единое целое:  OpenGL — для отображения графики;  FreeImage — для манипуляций с изображениями;  Freetype — для отображения и работы со шрифтами;  rtAudio — для аудио;  Quicktime (mac или pc) — для проигрывания видео и видеозахвата. Ключевые концепции openFrameworks:  упрощение вещей;  возможность использовать любую из его частей независимо от других;  предоставление прямого доступа к данным, например, к пикселям изображения. OpenFrameworks предназначен для «творческого кодинга» («creative coding») и может работать под Windows, MacOS X и Linux. Cinder – библиотека программирования, основанная на языке C++. Обладает продвинутымиспособностямивизуализации. Стал общедоступным в 2010 году и, следовательно, ещё не вполне адаптирован для удобного и простого программирования. Во многом схож с платформой openFrameworks. Главное отличие состоит в том, что в Cinder используется больше системных библиотек для повышения производительности, а openFrameworks обеспечивает лучший контроль над лежащими в её основе библиотеками. В отличие от Processing не требует наличия браузера, но в свою очередь в связис высоким качеством визуализации процессов необходимым является наличие у компьютера высоких вычислительных мощностей.
  • 28. 28 1.5.2 Критерии оценки программного продукта 1 – скорость обработки информации (быстрая работа на «слабых» компьютерах); 2 – высокое качество полученного изображения; 3 – простота программирования; 4 – наличие опыта работы с программой; 5 – бесплатное скачивание. Был использован дихотомический метод сравнения (да-1, нет-0). Результаты сравнения представлены в таблице 1.3. Таблица 1.3 - Оценка программных продуктов по критериям № Название Критерии Суммарный показатель 1 2 3 4 5 1 Processing 0 0 1 0 1 2 2 openFrameworks 1 1 1 1 1 5 3 Cinder 1 1 0 0 1 3 В качестве среды разработки выбрана платформа для творческого программирования openFrameworks, так как практическипо всем параметрам идеально подходит для поставленной задачи. Единственным недостатком этого ПП является «не идеальная» визуализация звукового поля, но с учётом ограниченных вычислительных возможностей имеющегося компьютера данный недостаток можно считать приемлемым. 1.6 Цели и задачи Глобальная цель – создание технологии ВЗП с помощью камеры и микрофона.
  • 29. 29 Локальная цель – написание программного продукта, который позволит визуализировать ЗП по данным, полученным с камеры и микрофона. Задачи:  разработать модель системы ВЗП;  спроектировать систему ВЗП;  реализовать систему ВЗП. 1.7 Результаты и выводы по главе 1 В ходе работы были получены следующие результаты:  рассмотрены источники информации;  проведен литературный обзор, рассмотрены аналоги;  выбраны критерии для оценки аналогов;  произведен анализ аналогов, выбран прототип;  проведена критика прототипа;  поставлены цели и задачи. Вывод: собранной информации достаточно для достижения поставленных целей и задач.
  • 30. 30 2 Моделирование системы ВЗП В этой главе будут рассмотрены некоторые виды моделей моего объекта изучения. Для начала дадим определения основным понятиям. Моделирование – исследование объектов познания на их моделях; построение и изучение моделей реально существующих предметов, процессов илиявлений с целью получения объяснений этих явлений, а также для предсказания явлений, интересующих исследователя [12]. Модель – это объект-заместитель объекта-оригинала, инструмент для познания, который исследователь ставит между собой и объектом и с помощью которого изучает некоторые свойства оригинала. В качестве модели выступает другой материальный или мысленно представляемый объект, замещающий в процессе исследования объект-оригинал [13]. В данной главе приведены модели, созданные в процессе изучения предметной среды, они будут использоваться для проектирования системы ВЗП. 2.1 Моделирование предлагаемых решений 2.1.1 Системно-структурная модель На рисунке 2.1 представлена системно – структурная модель предлагаемого решения. Рисунок 2.1 – Системно – структурная модель предлагаемого решения
  • 31. 31 2.1.2 Алгоритмическая модель На рисунке 2.2 представлена алгоритмическая модель предлагаемого решения. Рисунок 2.2 – Алгоритмическая модель предлагаемого решения 2.2 Пакет концептуальных моделей Для описания концептуальной модели используется фреймовый формализм, а именно описание концептуальной модели в соответствии с ролевым фреймом [14]:
  • 32. 32 КОНЦЕПЦИЯ = <ОФС, ПРОФ, СОС, НФ, ЦФ>, (1) где ОФС – основные функции системы; ПРОФ – путь реализации основных функций; СОС – структурная основа системы; НФ – направленность функционирования; ЦФ – цель функционирования. 2.2.1 Общая концептуальная модель Прототип системы ВЗП по данным с пьезоприёмника. Основные функции системы: извлечение данных с пьезоприёмника, формированиеиз полученных данных карты громкости, выдача результата технического процесса. Структурная основа системы: блок воспроизведения звука, блок рисования карты громкости. Направленность функционирования: составление изображения для визуализации звуковых полей, с помощью которой можно изучить отдельные характеристики звука. Цель: составление карты громкости по данным, полученным с микрофона и камеры. Свойства системы: возможное последующее модифицирование для разных направлений деятельности. 2.2.2 Базово – уровневая концептуальная модель Извлекатель данных с микрофона и камеры. Основные функции системы: извлечение данных с микрофона, извлечение данных с камеры, выдача результата технического процесса. Структурная основа системы: блок воспроизведения звука, блоки распознавания изображения микрофона и определения по черно-белой картинке его координат, блок определения громкости.
  • 33. 33 Направленность функционирования: получение информации скамеры и микрофона, пригодной для дальнейшего её использования. Цель: получение данных с микрофона и камеры, пригодных для дальнейшего использования. Свойства системы: встраиваемость в системы ВЗП. 2.2.3 Модификационная концептуальная модель Система ВЗП по данным с микрофона и камеры и составления из них гарты громкости. Основные функции системы: извлечение данных с микрофона, извлечение данных с камеры, формирование из полученных данных карты громкости, выдача результата технического процесса. Структурная основа системы: блоки распознавания изображения микрофона и определения по черно-белой картинке его координат, блок определения громкости, блок рисования карты громкости. Направленность функционирования: использование в залах театров или кино для составления карты громкости помещения, с помощью которой можно определить наилучшее расположение микрофона и колонок. Цель: составление карты громкости по данным, полученным с микрофона и камеры. Свойства системы: возможное последующее модифицирование для разных направлений деятельности. Возможность замены микрофона более точным пьезодатчиком для получения более точных показателей громкости или любых других характеристик звука. Возможность замены камеры на автоматизированного робота, который будет ездить по помещению и передавать данные своего положения и данные с микрофона в программу.
  • 34. 34 2.3 Результаты и выводы по главе 2 В результате проделанной работы были сделаны следующие модели:  системно – структурная;  алгоритмическая;  концептуальная. Вывод: полученный пакет моделей дает представление о процессе и функционировании системы ВЗП с помощью данных, полученных с микрофонаи камеры. Модели позволяютпровести проектирование системы.
  • 35. 35 3 Проектирование системы ВЗП В данной главе рассмотрено внешнее и внутренне проектирование. Во внешнем проектированиипроведенобзор проблемы исформулированы цели. Во внутреннем проектировании были описаны парадигма и средства программирования, создан эскизный проект. 3.1 Внешнее проектирование В результате внешнего проектирования было составлено техническое задание, которое представлено в приложении А. 3.2 Внутреннее проектирование 3.2.1 Выбор парадигмы программирования Парадигма программирования – это совокупность идей и понятий, определяющая стиль написания программ [15]. Существует несколько основных парадигм программирования:  процедурное;  структурное;  функциональное;  логическое;  объектно-ориентированное. Процедурное программирование используется для вычислительных процессов и представляет из себя последовательность инструкций. В основе структурного программирования лежит структурное разбиение программы иданных на блоки, которые выполняют определенные функции. Функциональное программирование используется для программирования вычисления математической функции. Логическое программирование используется для автоматического доказательства теорем.
  • 36. 36 Объектно-ориентированное программирование основано на концепции использования объектов и классов. Класс – это тип, который описывает объект. Объект – это область адресного пространства в программе, как правило, они соответствуют объектам предметной области. Для реализации нашей программы нам подходит структурная парадигма программирования, именно эта парадигма позволяет структурировать данные и использовать входные данные. Также при разработке интеллектуальных систем используются в основном структурная и объектно-ориентированная парадигмы, поэтому наш выбор обусловлен именно этим. 3.2.2 Выбор средств программирования Основные требования для выбора средства программирования:  поддержка структурной парадигмы программирования;  направленность на язык программирования С++;  простой и удобный графический интерфейс. Исходя из требований, для программирования была выбрана платформа openFrameworks, главным достоинством которой является относительная простота работы. OpenFrameworks - это современная платформа программирования, использующая новейшие библиотеки для творческого кодинга, методы визуального программирования и достаточно большие возможности. 3.2.3 Эскизный проект В результате анализа технического задания, требований консультанта предметнойобласти и моделирования, был создан эскизный проект системы ВЗС с помощью камеры и микрофона, который представлен в виде кортежной модели: СВЗПСПКИМ = <ВЗ, ВИ, ХУ, Г, КГ>, (2) где ВЗ – входной звук;
  • 37. 37 ВИ – входноеизображение; ХУ – координаты микрофона(x,y); Г – данные громкости,полученныймикрофоном в координатах (x,y); КГ – карта громкости. 3.3 Результаты и выводы по главе 3 В ходе выполнения проектирования на разных стадиях были получены следующие результаты:  произведен анализ проблем;  выбрана парадигма программирования;  составлено техническое задание;  составлен эскизный проект. На основании полученных результатов можно сделать вывод, что информации, полученной на стадии проектирования достаточно для инженерной реализации проекта.
  • 38. 38 4 Инженерная реализация системы ВЗП 4.1 Общее описание На основании результатов проектирования была создана программа, позволяющая сократить до минимума время изучения распространения звука в помещении. Данная программасостоит из нескольких блоков, отвечающих за выполнение определенных функций: определение громкости по звуку, поступающему на микрофон; распознавание микрофона на изображении, поступающем с камеры в программу; составление по полученному с камеры изображения черно-белоймаскии дальнейшее определение по ней координат микрофона; составление по полученным данным карты громкости. Данная программа работает следующим образом: в программу с камеры поступает изображение, на основе которого стоится черно-белая маска. Далее методом поиска по ширине мы определяем самый большой объект на изображении, а именно микрофон, и его координаты. Одновременно с этим с микрофонав программу поступает звук, по которому определяется его громкость. Координаты микрофона и величина громкости сопоставляются, и на основании полученных данных генерируется изображение, представляющее из себя карту громкости. Данные операции проводятся моментально и практически автоматически с минимальным участием пользователя (в нашем случае нужно только направлять микрофон, но и этот процесс в дальнейшем можно полностью автоматизировать), что очень упрощает его работу и затрачивает меньше времени. 4.2 Требования к программному обеспечению и характеристикам конфигурации компьютера Наличие установленного на компьютере обеспечения:  операционная система Windows;  «Microsoft Visual С++» любого года;  мультимедийный фреймворк QuickTime;
  • 39. 39  платформа для творческого кодинга openFrameworks соответствующего года. Характеристики конфигурации компьютера пользователя для эксплуатации ПП не должны быть ниже следующих:  процессор «Intel Pentium IV», 2 ГГц;  оперативная память 512 МБ RAM;  жёсткий диск HDD 2 GB и более;  сетевая карта;  интегрированная видеокарта 64МБ;  встроенная звуковая карта с поддержкой входа микрофона. Непосредственно для работы технологии ВЗП необходимы:  веб-камера любой модели;  микрофон с чувствительностью не менее -58 дБ/кГц. 4.3 Пример работы программы Приведем пример работы созданной программы для визуализации звуковых полей. У нас имеется программныйпродукт, на вход которому поступают два потока информации: изображение с веб-камеры и звук с микрофона. Рассмотрим последовательно блокиПП, через которыепроходит полученная информация, и разберем принцип работы каждого из них. На рисунке 4.2 представлена обработка исходного изображения, полученного с веб-камеры в черно-белую маску, которая получается следующим способом: изображение с камеры, полученное в режиме цветовой модели RGB переводится в модель Grayscale, после чего определяется яркость каждого пикселя и её значение сравнивается с пороговым (см. рисунок 4.1). Если значение больше порогового, то пикселю присваивается значение 255, если меньше – 0.
  • 40. 40 Рисунок 4.1 – Определение яркости пикселей и отображение значений, больше пороговых Рисунок 4.2 – Блок обработки исходного изображения в черно-белую маску Так получается черно-белая маска, по которой методом поиска по ширине определяется координата микрофона (см. рисунок 4.3). Метод поиска по ширине работает следующим образом: последовательно перебираются все пиксели изображения и вычисляется ширина черных полос. После нахождения максимального значения, оно делится на два. Сопоставление полученного значения по оси Oy с ранее известным значением по оси Ox и даёт координаты положения микрофона.
  • 41. 41 Рисунок 4.3 – Блок определения координатмикрофона по черно-белой маске На рисунке 4.5 представлена обработка звука в настоящий момент времени. Громкость представленав процентном соотношениик максимально возможнойгромкости, которуюможетвоспринять микрофон. Вкоординатах, где замер не был произведен, цвет остаётся белым. Для визуализации величины громкости было решено использовать палитру (см.рисунок 4.4) шириной 256 пикселей, каждый из которых соответствует определенной величине громкости. Рисунок 4.4 – Палитра цветов для системы ВЗП Иными словами, если цвет пикселя синий, то микрофон не получает никакого звука. Или звук тише, чем способенвоспринять, а это значит, что и человеческоеухо не воспримет никакого сигнала в этой точке пространства. Красным цветом отображается громкость, максимально возможная для восприятия микрофоном ивыше, а это значит, что при прослушивании звука
  • 42. 42 с этой точки, человек может испытывать дискомфорт или даже повредить слух. Рисунок 4.5 – Блок обработки поступающего с микрофона звука и определения его громкости На рисунке 4.6 представлен результат работы блока генерации карты громкости. Вручную передвигая микрофон, постепенно заполняем карту значениями громкости, уже переведенными в цветовой эквивалент. Рисунок 4.6 – Блок генерации карты громкости В результате получаем наглядную картину распространения звукового поля в пространстве, по которомуможно с четкостьюопределить положение, например, колонок. Специалист же сможет почерпнуть из такой карты, в
  • 43. 43 какие места в помещении микрофон ставить не следует, дабы избежать ситуаций, когда микрофон начинает «фонить». Для большего комфорта работы с программой были добавлены клавиши управления:  'q' || 'й' – настройки веб камеры (см. рисунок 4.7);  'z' || 'я' – уменьшение порога яркости пикселей на 10;  'x' || 'ч' – увеличение порога яркости пикселей на 10;  'a' || 'ф' – уменьшить размер «зерна» сетки;  's' || 'ы' – увеличить размер «зерна» сетки;  'g' || 'п' – вкл/выкл сетку. Рисунок 4.6 – Окно настройки веб-камеры 4.4 Результаты и выводы по главе 4 В ходе инженерной реализации программы ВЗП были получены следующие результаты:  выявлены минимальные системные требования к ПО и конфигурации компьютера;  приведен наглядный пример использования созданной программы;
  • 44. 44  поставлены эксперименты на работоспособность системы. Программный код программных блоков приведен в приложении Б. На основании полученных результатов можно сделать вывод, что достигнутацель работы – созданатехнология визуализации звуковыхполей с применением микрофонаи камеры, а также создан программный продукт по этой технологии.
  • 45. 45 Заключение В процессе анализа проблематики предметной области были найдены аналоги систем предназначенных для визуализации звуковых полей. Моделирование привело к созданию системно-структурных, алгоритмических и концептуальных моделей. Это позволило четко понять функции и структуру требуемого программного продукта для визуализации звукового поля. В ходе выполнения проектирования на разных стадиях были получены следующие результаты: произведен анализ проблем, выбрана парадигма программирования, составлено техническое задание, составлен эскизный проект на программный продукт системы визуализации звукового поля, автоматизирующий процесс составления карты громкости помещения. В результате инженерной реализации был создан программный продукт почти полностью автоматизированного процесса визуализации звуковых полей с применением камеры и микрофона, в результате генерирующий карту громкости. Работоспособность этого программного продукта подтверждена тестированием. Вывод: была достигнута поставленная цель, а именно написан программный продукт, который позволит визуализировать ЗП по данным, полученным с камеры и микрофона.
  • 46. 46 Список использованных источников 1 И. П. Голямина. Звук. Физическая энциклопедия. Д. М. Алексеев, А. М. Балдин, А. М. Бонч-Бруевич, А. С. Боровик-Романов, Б. К. Вайнштейн, С. В. Вонсовский, А. В. Гапонов-Грехов, С. С. Герштейн, И. И. Гуревич, А. А. Гусев, М. А. Ельяшевич, М. Е. Жаботинский, Д. Н. Зубарев, Б. Б. Кадомцев, И. С. Шапиро, Д. В. Ширков; под общ. ред. А. М. Прохорова [Текст] — М.: Советская энциклопедия, 1988—1999. 2 Большая энциклопедия Кирилла и Мефодия 2000 [Электронный ресурс]. – М.: Кирилл и Мефодий, 2000. – 2 электрон. опт. диск 3 Мир звука. Устройства, схемы, программы для работы со звуком [Электронный ресурс]. Режим доступа: http://infrazvuk.info/xarakteristiki-zvukovogo-polya/ 4 Визуализация звуковых полей – Энциклопедия физики и техники [Электронный ресурс]. Режим доступа: http://www.femto.com.ua/articles/part_1/0488.html 5 Большая советская энциклопедия : в 30 т. / гл. ред. А. М. Прохоров. — 3-е изд.[Текст] — М. : Сов. энцикл., 1969–1978. — 30 т. 6 Пьезоприёмник [Электронный ресурс]. Режим доступа: http://www.ravnopravie.kharkov.ua/pezopriemnik.php 7 Физическая энциклопедия / Гл. ред. А.М. Прохоров [Текст] – М.: Сов. энциклопедия, 1988. – Т. 1. – 704 с. 8 Диск Рэлея - Виртуальный фонд естественнонаучных и научно- технических эффектов "Эффективная физика" [Электронный ресурс]. Режим доступа: http://www.effects.ru/science/271/index.htm 9 Акустическая кавитация - Виртуальный фонд естественнонаучных и научно-технических эффектов "Эффективная физика" [Электронный ресурс]. Режим доступа: http://www.effects.ru/science/64/index.htm 10 Труба Рубенса – Википедия [Электронный ресурс]. Режим доступа: ru.wikipedia.org/wiki/Труба_Рубенса
  • 47. 47 11 Две с половиной тысячи бунзеновских горелок и визуализация звуковых волн [Электронный ресурс]. Режим доступа: http://habrahabr.ru/post/220159/ 12 Моделирование – Википедия [Электронный ресурс]. Режим доступа: ru.wikipedia.org/wiki/Моделирование 13 Модель – Википедия [Электронный ресурс]. Режим доступа: ru.wikipedia.org/wiki/Модель 14 Гольдштейн С. Л. Введение в системологию и системотехнику / С. Л. Гольдштейн, Т.Я. Ткаченко [Текст] – Екатеринбург: ИРРО. 1994 – 200 с. 15 Парадигма программирования — Википедия [Электронный ресурс]. Режим доступа: ru.wikipedia.org/wiki/Парадигма_программирования.
  • 49. 49 Министерство образования и науки Российской Федерации Федеральное государственное автономное образовательное учреждение высшего профессионального образования «Уральский федеральныйуниверситетимени первого Президента России Б.Н.Ельцина» Физико-технологический институт Кафедра вычислительной техники УТВЕРЖДАЮ: зав. кафедройВТ, академик МАИ и РАЕН, д.т.н., профессор С.Л. Гольдштейн “____”________2014 г. ПРОГРАММА СИСТЕМЫ ВИЗУАЛИЗАЦИИ ЗВУКОВОГО ПОЛЯ С ПРИМЕНЕНИЕМ КАМЕРЫ И МИКРОФОНА техническое задание на 6 листах действует с 1 октября 2014 г. Согласовано: канд. тех. наук, доцент Захарова Г.Б. “____”________2014 г. 2014
  • 50. 50 1. ОБЩИЕ СВЕДЕНИЯ А1.1 Полное наименование разработки и ее условное обозначение Исследование и разработка моделей, алгоритмов системы визуализации звуковыхполей (ВЗП) в программе openFrameworks с применением камеры и микрофона. А1.2 Шифр темы Дипломная работа. А1.3 Наименование заказчика, разработчика и пользователя Заказчика нет. Инициативная разработка. Пользователи – специалисты в области исследования звукового поля, звукорежиссеры, звуковые операторы. Разработчик - студент группы Фт-410802 Шляхова С.И. А1.4 Перечень документов, на основании которыхсоздается разработка, кем и когда были утверждены эти документы Учебный план подготовкипо специальности 09.03.01: «Информатика и вычислительная техника». А1.5 Плановые сроки начала и окончания работы Начало - 01.10.14. Окончание - 01.06.15. А1.6 Порядок оформленияи представлениязаказчикурезультатовработ Оформление пояснительной записки. Защита результатов работы в ГЭК. А2 НАЗНАЧЕНИЕ И ЦЕЛИ РАЗРАБОТКИ А2.1 Назначение Предлагаемая программа визуализации звуковых полей предназначена для составления карты громкости по данным, полученным с камеры и микрофона. Программа проектировалась специально для работы с небольшими пространствами, но предполагает расширение и модернизацию