Мультимедийная система для авто: главные функции. Реферат мультимедийные системы

Понимая перспективность рынка автомобильной электроники, современные производители систем мультимедиа стремятся использовать все последние технологии в создании новых моделей. Еще недавно наличие в магнитоле системы навигации воспринималось как нечто диковинное и эксклюзивное. Для нынешнего рынка такой функционал является базовым, а конкурентная борьба постепенно смещается в область беспроводных средств коммуникации. Кроме этого, автомобильная мультимедийная система нового поколения располагает улучшенными возможностями воспроизведения аудио- и видеоматериалов. И это не говоря о способностях подключения к широкому перечню устройств и носителей, которые могут выступать источниками контента.

Общие сведения о системах мультимедиа для авто

Несмотря на развитие функционального наполнения и технической начинки, форм-фактор и конструкционные параметры таких устройств остаются прежними. В этом отношении создатели стремятся делать оборудование как можно проще, компактнее и надежнее. Обычно это небольшой блок, который внедряется в специальную нишу, расположенную на передней панели. Конечно, нельзя отрицать, что мультимедийная система для авто оказывает влияние на эстетические достоинства интерьера в салоне, поэтому дизайнерское исполнение устройства имеет особое значение. Наличие тачскрин-дисплея также стало обязательным компонентом в современных Именно через него происходит управление функциями прибора - от смены треков до назначения маршрута в навигаторе. Требования к автомобильной электронике отличаются особой жесткостью в отношении эргономики, поэтому конструкция и способ управления должны подбираться с детальным изучением мельчайших деталей.

Акустические возможности

В последние годы аудиосистемы стали трансформироваться в многофункциональную аппаратуру. Но изначальная задача подобных систем, как и прежде, заключается в воспроизведении звука. И в этом направлении производители развивают свою продукцию не менее активно. В лучших современных исполнениях мультимедийная акустическая система представляет собой целый комплекс, который снабжен всеми возможностями аудио-плеера, а также способен работать с широким спектром сторонней техники. Такие модели, как правило, располагают звуковым процессором, поэтому их можно подключают и к сабвуферу. Также немало вариантов с интегрированными колонками, но в любом случае такие устройства позволят настраивать звуковую картину на любой вкус по обширной шкале параметров.

Что касается возможностей подключения, то в первую очередь они предполагают стандартные Если требуется для просмотра видео, то будет не лишним обратить внимание на разъем HDMI, который считается лучшим каналом для воспроизведения звука и кинофильмов.

Функция навигатора

Хотя данная опция давно стала едва ли не обязательной для автомагнитол, такие системы все еще рассматриваются в качестве гибридных. На рынке подобные устройства легко найти по маркировке 2DIN, которая и указывает на поддержку функции навигатора. С таким оснащением водитель получает возможность цифровой прокладки маршрута с выводом карты на экран дисплея. Сегодня даже мультимедийная из бюджетного сегмента обеспечивает довольно привлекательный набор инструментов для работы с картами. Их можно поворачивать, увеличивать и уменьшать, делать отметки и, конечно, регулярно обновлять и пополнять базу данных с маршрутами. Самым искушенным автовладельцам стоит рекомендовать более функциональные гибриды, снабженные GPS-антеннами и видеорегистраторами. Такая комплектация избавит от необходимости приобретения отдельного средства видеозаписи. Но и это не все. Чтобы избежать неприятностей с дорожной инспекцией, можно приобрести устройство, в котором также будет присутствовать антирадар. За несколько сотен метров до приближения к месту фиксации скоростных режимов данный прибор оповестит об этом участке водителя.

Коммуникационные способности

Наряду с традиционными возможностями подключения устройства мультимедиа оснащаются и множеством технологичных интерфейсов. Среди них стоит отметить USB, посредством которого можно подключать аудио- и видеоаппаратуру, а также связывать систему с мобильными устройствами и компьютером. Кроме этого, мультимедийная система для авто в современном исполнении может обеспечивать беспроводные соединения с мобильными гаджетами и носимой электроникой. Одной из самых популярных опций в этом плане стало подключение модуля Bluetooth для связи с телефоном. При таком соединении водитель может совершать звонки и отправлять SMS с помощью системы мультимедиа, не доставая мобильное устройство из кармана. Кроме того, «синий зуб» позволяет настраивать воспроизведение звука от того же смартфона. Для большинства моделей нового поколения открыта и возможность выхода в Интернет.

Цифровое ТВ

Телевидение на центральной панели автомобиля может показаться неуместным, но и эта функция не будет лишней. Производители обычно комплектуют такие устройства специальными антеннами с магнитными держателями и широким набором опций. Собственно, в плане управления цифровое автомобильное ТВ можно сравнить с полноценными ресиверами и тюнерами. Те же настройки с поддержкой объемного звучания, автоматического поиска, эквалайзера и т.д. Помимо этого, мультимедийная система, в зависимости от модификации, может активно работать с местными передающими сетями. Для этого используется система LCN, улучшающая эффективность приема сигнала и качество трансляции.

Что еще учесть при выборе?

Перед покупкой головного устройства для автомобиля следует определить перечень задач, которые должна будет выполнять система. В частности, следует определиться с источниками контента и устройствами, которые должны будут подключаться к аппаратуре. Также следует оценить необходимость наличия GPS-датчика, радиоприемника, модуля Bluetooth и цифрового ТВ. Это, конечно, полезные опции, но в таком оснащении мультимедийная система стоит в разы дороже, чем предназначенная исключительно для воспроизведения звука. Правда, в случае с гибридными устройствами - напротив, функциональность помогает сэкономить. Дело в том, что многофункциональные комплексы исключают необходимость покупки отдельного видеорегистратора и навигационной системы.

Установка мультимедийной системы

Монтаж устройств такого типа обычно выполняется по стандартной схеме. Производители комплектуют оборудование специальными рамками для панелей и крепежными приспособлениями, которые позволяют без труда интегрировать аппаратуру в подготовленные для этих целей ниши. Правда, если планируется установка монитора с несколькими колонками, то конфигурация монтажа может быть нестандартной. Если штатная мультимедийная система устанавливается в центральную панель, то оборудование с крупными дисплеями обычно интегрируют в потолочную нишу. Но такая конфигурация чаще встречается при оснащении минивэнов и внедорожников.

Заключение

Системы мультимедиа, предназначенные для автомобилей, внешне напоминают развлекательные комплексы, а в некоторых модификациях - и домашние кинотеатры. Разумеется, по характеристикам мощности и габаритам о подобных сравнениях говорить не приходится, но некоторые функциональные «фишки» от традиционных систем давно перекочевали в сферу автомобильной электроники. Достаточно сказать, что современная мультимедийная система позволяет любому водителю пользоваться такими средствами коммуникации, как Bluetooth, USB и HDMI. И это не говоря о встроенной навигационной системе, цифровом телевидении и возможности выхода в Интернет. Другое дело, что столь богатая начинка может не потребоваться автовладельцу. Особенно с учетом стоимости подобных устройств, которая может достигать 50-60 тыс. руб.

Аннотация: В данной лекции мы обсудим возможности использования естественно-интуитивного подхода в современных мультимедийных приложениях. Синергия нового интерфейсного подхода и технологии мультимедиа позволяет создавать программные средства нового поколения, обладающие крайне высокой интерактивностью и эффективностью в применении. В качестве примера, мы рассмотрим графический редактор с жестовым управлением и голосовое управление в стандартных сервисных приложениях.

Презентацию к данной лекции можно скачать .

5.1. Краткое понятие мультимедиа и мультимедийных приложений

Мультимедиа ( multimedia ) - это совокупность компьютерных технологий, одновременно использующих несколько информационных сред: графику, текст, видео, фотографию, анимацию, звуковые эффекты, звуковое сопровождение, человеческую речь.

Мультимедийные технологии - это совокупность современных цифровых средств аудио-, теле-, визуальных и виртуальных коммуникаций, которые позволяют вводить, сохранять, перерабатывать и воспроизводить текстовую, аудиовизуальную, графическую, трёхмерную и иную информацию.

Связывание элементов мультимедиа в единый проект выполняется с помощью программных средств. Результаты представления элементов мультимедиа на экране и средства управления мультимедиа , называются пользовательским интерфейсом, а аппаратные и программные средства , обеспечивающие воспроизведение мультимедиа , - платформой.

К разновидностям мультимедиа относятся:

  • Линейное мультимедиа - простейшая форма представления множества элементов мультимедиа, когда пользователь может выполнять только пассивный просмотр элементов мультимедиа, а последовательность просмотра элементов мультимедиа определяется сценарием.
  • Нелинейное (интерактивное) мультимедиа - форма представления множества элементов мультимедиа, в которой пользователю предоставлена возможность выбора и управления элементами в режиме диалога.
  • Гипермедиа - интерактивное мультимедиа, в котором пользователю предоставляется структура связанных элементов мультимедиа, которые он может последовательно выбирать.
  • Реальное видео - форма мультимедиа, моментально транслирующая поток данных с одного устройства на другое, предоставляющая пользователю просматривать видео и звуковое сопровождение в режиме реального времени.

В целом, под мультимедиа могут понимать и мультимедийную программу-оболочку, и продукт, сделанный на основе мультимедийной технологии, и компьютерное оснащение. Поскольку технологии мультимедиа являются комплексными, то и отдельные элементы этих технологий характеризуются многосредностью и ведением диалога с пользователем. Мультимедийные ресурсы, например, содержат различные виды информации, их существенной особенностью является активное взаимодействие ресурса и человека.

Технология мультимедиа является одной из новых технологических форм информационного общества. Она открывает принципиально новый уровень обработки информации и интерактивного взаимодействия человека с компьютером. Отличительной чертой современных мультимедийных технологий является их способность не только производить некий предназначенный для употребления продукт, но и оказывать косвенное влияние на пользующегося ими человека. Новые виды обработки и предоставления информации, новые способы доступа к информации позволяют разнообразить нашу культуру, содействуют глобальному обмену культурными ценностями, информацией и знаниями, способствуют более интенсивной коммуникации между людьми.

Исторической спецификой современной электронно-коммуникационной системы является то, что в отличие от прежних форм и стадий культурного развития человечества нынешняя характеризуется глобальными масштабами своего распространения и воздействия на все сферы общественной жизни.

Поскольку обмен информацией - необходимая составляющая жизни общества, то медиа технологии, как опосредующее звено человеческой деятельности, являются одним из способов коммуникации, условием человеческой активности. При этом интеграция в одной системе различных источников и форм информации в условиях открытого доступа фундаментально изменила характер коммуникации. Электронные цифровые медиаресурсы создают техническую возможность существования сверхнасыщенного информационного поля, которое практически повсеместно окружает современного человека.

Мультимедиа , помимо значительного ускорения коммуникативных процессов, позволяет на качественно новом уровне организовать процессы производства, хранения и распространения информации.

Активно внедряясь в деловую среду, мультимедиа влияет на ход экономического развития общества, рождая новое направление - электронный бизнес . Мультимедиа технологии широко используются в рекламной деятельности, при управлении маркетингом и организации продвижения товаров и услуг различными методами. Мультимедийные технологии становятся самостоятельным бизнесом и профессиональной областью деятельности, предметом бизнеса.

Невозможно переоценить значение мультимедиа в развитии индустрии развлечении, создании компьютерных игр, киноиндустрии.

Мультимедиа следует рассматривать и как искусство, где особое место принадлежит наглядно-образным способам передачи информации. Как новая форма художественного творчества, мультимедиа выступает не столько продуктом технологической революции, сколько цифровым воплощением идей, которые не находили перспектив реализации в традиционных рамках изобразительного искусства и других видах культуры. При этом компьютер становится еще одним перспективным инструментом для всех искусств, альтернативной средой, способной по -новому реконструировать культуру и творить собственное искусство, он осознается как средство создания видов искусства. Сформировалось несколько направлений компьютерных искусств: цифровая музыка, интерактивный перформанс, компьютерная графика и анимация . Одним из основных преимуществ этих видов творчества считается открытость художественного пространства.

Одна из возможностей продуктивного использования мультимедиа - обучение. Мультимедийная технология позволяет увеличить степень усвояемости изучаемого материала, так как предоставляет возможность синергетического обучения. Под этим понимается обеспечение одновременно зрительного и слухового восприятия материала, активного участия в управлении его подачей, возвращения к тем разделам, которые требуют повторного анализа. Особенно велика роль мультимедиа технологий в развитии дистанционного образования. В будущем роль мультимедиа в области образования будет возрастать, так как знания, обеспечивающие высокий уровень профессиональной квалификации, всегда подвержены быстрым изменениям.

Существует большое множество программных средств для работы с мультимедиа файлами. Такие приложения можно разделить на несколько основных категорий:

  • Средства создания и обработки изображения
  • Средства создания и обработки 2D и 3D - графики
  • Средства создания и обработки видео и анимации
  • Средства создания и обработки звука
  • Средства создания презентации

Компьютерное представление графической информации реализуется с помощью растрового или векторного подхода. В первом случае изображение делится на пиксели, цвет каждого пикселя кодируется определенным числом битов. Векторные изображения сохраняются в виде геометрического описания объектов, составляющих рисунок.

Графические редакторы ориентированы на манипулирование существующими изображениями и обладают набором инструментов, позволяющих корректировать любой аспект изображения. Профессиональные графические редакторы поддерживают работу со слоями и экспорт объектов из программ векторной графики, обладают полным набором инструментов для коррекции цвета, ретуширования, регулировки контрастности и насыщенности цветов, маскирования, создания различных цветовых эффектов, имитирующих определенные художественные техники.

В программах векторной графики объекты и изображения, которые сохраняются в виде геометрического описания, существуют независимо друг от друга, что позволяет в любой момент изменять слой, расположение и любые другие атрибуты объекта, создавая произвольную композицию. В таких программах иллюстрации создаются с помощью фигур произвольной формы, их масштабирования, вращения, деформации, а также степени прозрачности и цветовой заливки. Современные программы векторной графики содержат также инструменты для работы с растровыми изображениями и текстами.

Трехмерная графика реализуется путем создания каркасов объектов, определения обтягивающих их материалов, компоновки всех объектов в единую сцену, установки освещение и точку визуализации - камеру. Для трехмерной анимации необходимо настроить перемещения объектов сцены и задать количество кадров. Движение объектов в трехмерном пространстве задается по траекториям, ключевым кадрам и с помощью формул, связывающих движение частей сложных конструкций. После задания нужного движения, освещения и материалов запускается процесс визуализации, в ходе которого просчитываются характеристики всех объектов сцены и генерируется последовательность изображений. Двухмерная анимация также использует традиционный покадровый принцип, только для создания последовательности используются двумерные изображения.

Для редактирования видео существует большое количество программных продуктов. Профессиональные видео-редакторы позволяют редактировать несколько видео- и звуковых каналов и осуществлять монтаж видеофрагментов в единую композицию. Они содержат наборы переходов между кадрами, синхронизируют звук и изображение, а также поддерживают редактирование и сохранение наиболее популярных форматов видеофайлов.

Программы для работы со звуком можно условно разделить на две большие группы: звуковые редакторы, ориентированные на цифровые технологии записи звука, и программы-секвенсоры.

Секвенсоры предназначены для создания музыки, с их помощью выполняется кодировка музыкальных композиций, они используются для аранжировки, позволяя прописывать отдельные партии, назначать тембры инструментов, выстраивать уровни и балансы каналов, вводить музыкальные штрихи. Звуковые редакторы позволяют записывать звук в режиме реального времени на жесткий диск компьютера и преобразовывать его, используя возможности цифровой обработки звуковых частот и объединения различных каналов.

Средства создания презентаций, первоначально предназначенные для создания электронных слайдов, помогающих иллюстрировать сообщение докладчика, теперь все более ориентируются на применение мультимедиа . Существует большое количество таких программ, различающихся набором изобразительных и анимационных эффектов, способов управления презентаций и набором поддерживаемых мультимедиа файлов для импорта в качестве содержимого слайдов. По сути, презентация является информационным продуктом, объединяющим все мультимедиа форматы в одно целое.

Перспективы мультимедиа разнообразны, области применения будут расширяться, в том числе, благодаря появлению новых информационных технологий и способов обработки информации. Грамотное сочетание мультимедиа с другими технологиями будет способствовать более динамичному их развитию и еще большей интеграции во все сферы общества.

Для того, чтобы реализовывать эффектные и полезные мультимедиа приложения с использованием технологии Intel Perceptual Computing , в первую очередь , необходимо четко определить, какие именно мультимедиа форматы и в какой степени будут задействованы в конкретном приложении и какие технологии нужны для работы с этими мультимедиа форматами. Успех таких приложений будет в большей степени зависеть от того, насколько разработчики опытны в использовании тех или иных подключаемых библиотек функций, с помощью которых происходит обработка мультимедиа потока. Такое приложение будет полезно пользователю только в том случае, если оно корректно обрабатывает мультимедиа содержимое и является правильно реализованным с технической точки зрения. Поэтому, прежде чем начинать разработку мультимедиа приложения с использованием Intel Perceptual Computing , необходимо детально изучить принципы и особенности технологии обработки мультимедиа потоков, библиотеки функций и примеры программ. Только при условии, что управление с помощью технологии Intel Perceptual Computing будет дополнять полезный и корректно работающий мультимедиа -функционал, разработчику удастся воплотить все преимущества от синергии мультимедиа и Perceptual Computing .

5.2. Преимущества от использования Intel Perceptual Computing SDK при разработке мультимедиа приложений

Поскольку технология Intel Perceptual Computing позволяет создавать совершенно новый тип человеко-компьютерных интерфейсов, можно говорить о появлении нового поколения мультимедийных приложений, имеющих гораздо более широкий спектр возможностей по обработке различных типов файлов и потоков данных. Управление мультимедиа файлами теперь выходит за рамки классических представлений о взаимодействии человека и компьютера и превращается в увлекательный творческий процесс. Использование технологии Perceptual Computing увеличивает степень интерактивности мультимедиа приложений, которые сами по себе являются действенным инструментом вовлечения. Симбиоз технологий мультимедиа и Perceptual Computing особенно эффективен в образовательной и развлекательной сферах человеческой деятельности, но также может быть применим в коммерческих и рекламных целях, на различных презентациях и демонстрациях.

При грамотном сочетании двух технологий готовые приложения позволяют как решать простые и бытовые пользовательские задачи, так и выступать в качестве гибкого и сложного инструмента в различных сферах, включая медиа-искусство и digital-индустрию. С помощью Perceptual Computing можно облегчить управление сложными программными комплексами, где используется несколько мультимедиа технологий и сделать параллельную работу, например, с графикой и звуком, более удобной для пользователя. При продуманной агрегации нескольких мультимедиа технологий в одном приложении пользователю предоставляется больше возможностей для работы с цифровой информацией, что только усиливается при использовании жестового или голосового управления.

Одним из наиболее распространенных способов комбинирования технологий мультимедиа и Perceptual Computing является создание различных симуляторов, которые позволяют тренировать определенные навыки, в том числе симуляторы игры на музыкальных инструментах. Приложения, позволяющие пользователю играть на виртуальных музыкальных инструментах, не являются принципиально новыми, однако использование жестового интерфейса позволяет достигнуть гораздо большей реалистичности. Еще одни преимуществом таких симуляторов перед стандартными нежестовыми реализациями является возможность параллельного управления приложением двумя руками, что также приближает виртуальные музыкальные инструменты к реальным.

Простейшим примером музыкального симулятора является приложение Drummer, которое позволяет имитировать игру на ударных ( рис. 5.1). Основная функция приложения - запись звуковой и нотной дорожки. Пользователь может скомпоновать ударную установку из нескольких предметов, начать сеанс записи, остановить запись . В управлении симулятором используются жесты обеих рук. Предпочтение отдано динамическим жестам, с помощью жестов захвата происходит перемещение объектов приложения, двойной жест "большой палец вверх" используется для остановки записи. Голосовое управление в приложении не предусмотрено.


Рис. 5.1.

Другой вариант применения Intel Perceptual Computing - дирижер виртуального оркестра ( рис. 5.2). Приложение следит за частотой и размером жестов пользователя и в зависимости от этих характеристик меняет громкость и скорость звучания воспроизводимой музыкальной дорожки. Управление программой осуществляется с помощью характерных дирижерских жестов, причем жесты должны соответствовать размеру музыкального такта проигрываемой композиции. По факту, программой распознаются последовательности горизонтальных и вертикальных взмахов, из которых состоят движения дирижера. Дополнительной функциональностью является графическое отображение активных в данный момент партий оркестра. Аналогичное приложение можно реализовать как надстройку над любой популярной программой, читающей и воспроизводящей нотные табулатуры.


Рис. 5.2.

Поскольку разработчики ничем не ограничены в выборе мультимедиа технологий и способах их использования, возможны более функционально сложные реализации музыкальных симуляторов, предназначенных как для обучающих, так и досуговых целей, сочетающих в себе несколько мультимедийных технологий. Возможно создание симуляторов с различными уровнями сложности или использующих дополнительные устройства, такие как портативный мультимедиа проектор. Качественным примером такого приложения может быть программный комплекс, обучающий пользователя игре на виртуальном пианино. Отображая с помощью проектора виртуальные клавиши на горизонтальной поверхности, приложение изменяет цвет клавиш, на который нужно нажать в тот или иной момент проигрываемой композиции. При этом отслеживаются движения рук пользователя и закрываемые его пальцами клавиши. По "нажатию" клавиши воспроизводится соответствующий звук, что дает понять пользователю, насколько верно он играет композицию. Также к основному функционалу можно добавить отображение нот и перемещающейся метки проигрывателя. Более простая реализация такого типа приложений - имитация игры на ксилофоне.

Другой тип мультимедиа приложений с главенствующей музыкальной составляющей - синтезаторы. Они применимы, в основном, в развлекательных целях, но их жестовые реализации потенциально могут стать неотъемлемым атрибутом digital-искусства. Одной из реализаций такого типа синтезаторов является приложение JOY ( рис. 5.3). При его разработке использовались не только аудио технологии, но и различный инструментарий для графического моделирования и генерирования изображений. При старте приложения пользователь выбирает аудиокомпозицию и запускает воспроизведение. Композиция состоит из 10 дорожек, управление которыми происходит с помощью поднятия и опускания пальцев. Изменение расстояния между кистей рук меняет эффект реверберации (отражения) звука. Вертикальное перемещение ладоней в разные стороны регулирует частоту колебаний, баланс звука и эхо изменяются при отдалении и приближении ладоней к камере с сенсорами глубины. Параллельно происходит управление видеорядом. На экране точками отображаются активные звуковые дорожки, геометрические объекты также зависят от количества поднятых пальцев, распознанных приложением, и пульсируют в соответствии с ритмом воспроизводимой композиции.


Рис. 5.3.

Управление генерацией видеоряда в режиме реального времени может быть реализовано как отдельное приложение . В данном случае основной функциональностью станет генерация последовательности изображений, регулируемая голосовыми и жестовыми командами пользователя. Многообразие инструментов для работы с графическими данными способствует созданию огромного множества подобных приложений, различающихся способами генерации изображений и подходами к управлению этими процессами. В первую очередь , следует подразделить такие приложения по типу генерируемой графики на двумерные и трехмерные. От того, какой вид графики выбран, будут зависеть сложность реализации, спектр возможностей приложения и количество управляющих команд.

Реализация приложений, генерирующих видеопоток из двумерных изображений, является более простой и подходит для разработчиков, которые только начинают знакомиться с технологиями и инструментами обработки графики. Видеопоток, создаваемый с помощью таких приложений, содержит в основном абстрактные графические образы, которые деформируются и изменяются с течением времени. Существует большое количество различных библиотек, содержащих классы и методы для работы с графическими объектами, их свойствами и характеристиками, использование которых упростит создание анимационной части приложения. В данном случае реализация управления через жестовый интерфейс осуществляется путем разделения функций редактирования свойств графического объекта с функциями изменения траектории и скорости его движения. Для облегчения управления приложением и создания гармоничной анимации рекомендуется выделять один главный графический объект , а поведение всех остальных реализовывать как зависимое от характеристик и свойств главного объекта. В качестве примера распределения функций управления графическим объектом можно рассмотреть вариант, когда размер объекта и его положение на экране регулируется жестами одной руки, а такие характеристики, как цвет, форма, угол вращения задаются с помощью жестов другой руки. Дополнительной функцией такого приложения может быть сохранение сгенерированного видеопотока в файл с возможностью последующего воспроизведения с помощью любого мультимедиа проигрывателя.

Генерация трехмерного видеопотока в режиме реального времени ( рис. 5.4) осуществляется по сходному принципу, однако, является более сложной задачей, поскольку требует от разработчика понимания принципов построения трехмерных изображений и продвинутых навыков работы с 3D-библиотеками. Графическая составляющая такого приложения может быть реализована как пространственное движение скопления нескольких однородных объектов с варьирующимися свойствами, например, несколько не одинаковых по размеру кубов разных оттенков зеленого или более сложные трехмерные модели, например, имитация хаотично движущейся стаи рыб. Для удобства реализации функций управления графикой рекомендуется задавать в скоплении один главный элемент, а все параметры всех остальных объектов ставить в зависимость от положения и состояния главного объекта.

Управление свойствами объектов и их местоположением, как и в случае с двумерной графикой, рекомендуется разделять. В данном случае, возможно реализовать дополнительные функции изменения точки обзора путем контроля положения лица пользователя и при наклоне головы поворачивать трехмерную сцену в соответствующую сторону. Также возможно разработать систему голосовых команд, управляющих трехмерной сценой и средой, окружающей основные объекты. Например, можно предусмотреть варианты управления оттенком фона, степенью освещенности и прозрачностью объектов, моделированием дополнительных эффектов, имитирующих с помощью различных текстур различные явления реального мира, например, морскую воду, ураганный ветер, сильное пламя. Аналогичный прием будет приемлем и для приложений, генерирующих двумерный видеоряд. графический редактор ( рис. 5.5) обеспечивает функциональность по созданию и редактированию объемных тел из простейших элементов, а также индивидуальное задание свойства цвета для каждого элементу, из которого состоит создаваемое тело. Контроль над приложением осуществляется с помощью двух курсоров, которые управляются простейшими жестовыми командами - двумя раскрытыми ладонями и движениями указательными пальцами. Трехмерный объект создается из базовых элементов - кубов единого размера, для каждого из них существует возможность определения цвета из палитры-спектра. Реализованы такие возможности управления трехмерным рабочим пространством, как вращение вокруг объекта, приближение, отдаление и перемещение


Содержание

Введение

Что означает мультимедиа? Каковы сферы ее применения? Целесообразно начать рассмотрение вопросов данной работы с главных исходных понятий, просмотреть существующие варианты определений, далее рассмотреть какие задачи в зависимости от требований сферы применения решают мультимедийные системы, что входит в их состав, как использовать компьютер в качестве основы для создания звукозаписывающей студии.
Мультимедиа – это технология, позволяющая объединить данные, звук, анимацию и графические изображения, переводить их из аналоговой формы в цифровую и обратно. «Мультимедиа» – сложное слово, состоящее из двух простых: «мульти» – много и «медиа» – носитель, среда, средства общения, т.е. мультимедиа – это «многосредность».
Таким образом, термин «мультимедиа» можно перевести как «множество носителей», то есть мультимедиа подразумевает множество различных способов хранения и представления информации (звука, графики, анимации и так далее).
Мультимедийные системы превратились в популярную тему многих конференций по информатике, научно-технической информации, искусственному интеллекту, лингвистике, психологии и теории обучения. Интерес вызывает принципиально нелинейная организация информационных единиц, которые могут быть представлены текстом, аудио и видео информацией, дружелюбная и гибкая форма нелинейного управления этими единицами в мультимедийных системах.
Быстро расширяется спектр успешного применения мультимедийных систем во многих сферах науки, техники, образования, экономики, искусства.
Системы мультимедиа коммерческого или общего назначения предназначены для организации комфортных и прогрессивных условий работы сотрудников на переговорах, совещаниях, проведении конференций. Они широко применяются в учебных классах, в диспетчерских, в центрах обработки информации и пр. Коммерческие системы мультимедиа включают в себя: систему аудио и видео конференц-связи (конгресс-система, система голосования, терминалы ВКС и проч.), систему видеоотображения (плазменные панели, видеостены, мониторы LCD, электронные доски и проч.), систему интегрированного управления (управление видео и аудио системами, электрическими системами, климатическим оборудованием, освещением и проч.).
Коммерческие мультимедийные системы выполняют функции сопровождения бизнес-процессов (сюда относится оптимизация работы сотрудников, организация ситуационных центров и диспетчерских и т. п.), а также служат для повышения их эффективности.
Отдых и общение современного человека автоматизированы настолько, что нет необходимости отслеживать какую-либо систему или функцию, если под рукой пульт управления с заданными заранее сценариями. Современные системы мультимедиа – это новый уровень комфорта дома и в офисе.
Резкий рывок, произошедший в этом направлении, обеспечен, прежде всего, развитием технических и системных средств. Это и прогресс в развитии ЭВМ: резко возросшие объем памяти, быстродействие, графические возможности, характеристики внешней памяти, и достижения в области видеотехники, лазерных дисков – аналоговых и CD-ROM, а также их массовое внедрение.
Сегодня персональный компьютер (ПК) настолько прочно вошел в нашу жизнь, что многие без него не представляют своего существования. Компьютер используют как вычислитель, игровую приставку, телевизор, факс, записную книжку и т. д. Но есть еще одна очень интересная возможность использования компьютера – музыка. И здесь ПК – основа для создания небольшой личной «звукозаписывающей студии».

1. Мультимедийные системы

1.1. Основные понятия и разновидности мультимедиа

Мультимедиа – это интерактивные системы, обеспечивающие работу с неподвижными изображениями и движущимся видео, анимированной компьютерной графикой и текстом, речью и высококачественным звуком.
Мультимедиа – объединение в одном пользовательском продукте текста, графики, аудио- и видео информации, анимации, при этом для пользователя добавляется возможность обратной связи, свойство интерактивности. А значит, мультимедиа – это средства обмена информацией между компьютером и внешней средой.
Интерактивность (от латинского интер – между), возможность активно взаимодействовать с экраном, организовывать с ним своего рода дружественный «междусобойчик» – запрашивать подробности, задавать вопросы и даже менять ход событий, предлагать экрану разные их варианты.
Мультимедиа может быть классифицирована как линейная и нелинейная.
Простейшая форма представления множества элементов мультимедиа – линейный проект. В случае линейной мультимедиа человек никаким образом не может повлиять на вывод информации. В этом случае пользователь может выполнять только пассивный просмотр элементов мультимедиа. Последовательность просмотра элементов мультимедиа определяется сценарием.
Нелинейный способ представления информации позволяет человеку участвовать в выводе информации, взаимодействуя каким-либо образом со средством отображения мультимедийных данных.
Если пользователю предоставлена возможность выбора и управления, то мультимедиа становится нелинейным и интерактивным. Такой способ взаимодействия человека и компьютера наиболее полным образом представлен в категориях компьютерных игр.
В качестве примера линейного и нелинейного способа представления информации, можно рассматривать такую ситуацию, как проведение презентации.
Если презентация была записана на пленку и показывается аудитории, то этот способ донесения информации может быть назван линейным, так как просматривающие данную презентацию не имеют возможности влиять на докладчика.
В случае же живой презентации, аудитория имеет возможность задавать докладчику вопросы и взаимодействовать с ним прочим образом, что позволяет докладчику отходить от темы презентации, например, поясняя некоторые термины или более подробно освещая спорные части доклада.
Таким образом, живая презентация может быть представлена, как нелинейный (интерактивный) способ подачи информации.
Если пользователю предоставляется структура связанных элементов мультимедиа, которые он может последовательно выбирать, интерактивное мультимедиа становится гипермедиа.
Live video – « Реальное / живое видео» – характеристика системы мультимедиа с точки зрения ее способности работать в реальном времени.
Связывание элементов мультимедиа в проект выполняется с помощью программных инструментальных средств. Результаты представления элементов мультимедиа на экране и средства управления мультимедиа, называется пользовательским интерфейсом. Аппаратные и программные средства, обеспечивающие воспроизведение мультимедиа и ограничивающие возможности проекта, называются платформой или средой мультимедиа.
Мультимедийный продукт – интерактивная компьютерная разработка, в состав которой могут входить:
      музыкальное и речевое сопровождение;
      видеоклипы;
      анимация;
      графические изображения и слайды;
      базы данных;
      текст и т.д.
Важной характеристикой мультимедийных систем является высокое качество воспроизведения всех составляющих ее компонент данных, а также возможность их взаимосвязанного или взаимодополняющего использования. Например, сочетания видеоряда с текстом и звуковым сопровождением; звуковых фрагментов музыкального произведения с текстовыми данными об исполняющих его музыкантах и инструментах; изображения художественного произведения с музыкальным фоном и текстом и т.п.
Стандарты, устанавливающие для разработчиков ПО состав аппаратных средств, относящихся к технологии мультимедиа: МРС-1, МРС-2, МРС-3.
Аппаратные средства мультимедиа
Основные – компьютер с высокопроизводительным процессором, большим объемом оперативной памяти, жёстким диском от 100 Гбайт и выше, манипуляторами, мультимедиа-монитором со встроенными стереодинамиками и видеоадаптером SVGA.
Специальные – приводы CD-ROM, CD-R, CD-RW, DVD; TV-тюнеры и фрейм-грабберы; графические акселераторы (ускорители), в том числе, для поддержки трёхмерной графики; платы видеовоспроизведения; устройства для ввода видеопоследовательностей; звуковые платы с установленными микшерами и музыкальными синтезаторами, воспроизводящими звучание реальных музыкальных инструментов; акустические системы с наушниками или динамиками и др.
Программные средства мультимедиа
Мультимедийные приложения:
      энциклопедии;
      интерактивные курсы обучения по всевозможным предметам;
      игры и развлечения;
      работа с Интернет;
      тренажёры;
      средства торговой рекламы;
      электронные презентации и др.
Средства создания мультимедийных приложений:
      редакторы видеоизображений;
      профессиональные графические редакторы;
      средства для записи, создания и редактирования звуковой информации, позволяющие подготавливать звуковые файлы для включения в программы, изменять амплитуду сигнала, наложить или убрать фон, вырезать или вставить блоки данных на каком-то временном отрезке;
      программы для манипуляции с сегментами изображений, изменения цвета, палитры;
      программы для реализации гипертекстов и др.
Технологии мультимедиа:
Телевизионный приём – вывод телевизионных сигналов на монитор компьютера на фоне работы других программ.
Видеозахват – «захват» и «заморозка» в цифровом виде отдельных видеокадров.
Анимация – воспроизведение последовательности картинок, создающее впечатление движущегося изображения.
Звуковые эффекты – сохранение в цифровом виде звучания музыкальных инструментов, звуков природы или музыкальных фрагментов, созданных на компьютере, либо записанных и оцифрованных.
Трёхмерная (3D) графика – графика, создаваемая с помощью изображений, имеющих не только длину и ширину, но и глубину.
Музыка MIDI (Musical Instrument Digital Interface, цифровой интерфейс музыкальных инструментов) – стандарт, позволяющий подсоединять к компьютеру цифровые музыкальные инструменты, используемые при сочинении и записи музыки.
Виртуальная реальность (Virtual Reality, VR). Слово «виртуальный» означает «действующий и проявляющий себя как настоящий».
Виртуальная реальность – это высокоразвитая форма компьютерного моделирования, которая позволяет пользователю погрузиться в модельный мир и непосредственно действовать в нём. Зрительные, слуховые, осязательные и моторные ощущения пользователя при этом заменяются их имитацией, генерируемой компьютером.
Признаки устройств виртуальной реальности:
      моделирование в реальном масштабе времени;
      имитация окружающей обстановки с высокой степенью реализма;
      возможность воздействовать на окружающую обстановку и иметь при этом обратную связь.

1.2. Области применения

Мультимедиа, как самостоятельное направление в компьютерной периферии, возникло в начале 90-х годов в Америке. Тогда стали появляться первые программные продукты на компакт-дисках. В 1990 году было издано всего 10 мультимедийных программ на CD, а сегодня их в тысячи раз больше.
Мультимедийные системы, в зависимости от сферы применения, решают следующие задачи:
      повышение эффективности переговоров, совещаний, конференций, голосований;
      повышение качества и эффективности обучения;
      моделирование и симулирование комплексных процессов (например, виртуальные операции для врачей);
      оптимизацию работы сотрудников;
      организацию ситуационных и мониторинговых центров;
      управление огромным массивом контента;
      оперативный и удобный доступ к большому объему информации.
Мультимедийные системы – это совокупность подсистем, обеспечивающих возможность создания, хранения и воспроизведения аудио и видео информации. Условно их можно разделить на системы домашнего и коммерческого или общего назначения. Системы домашнего назначения используются в основном для развлечения и отдыха и включают в себя: домашний кинотеатр, телевидение, аудиосистемы, медиасервер. Коммерческие системы необходимы для оптимизации рабочего процесса, обучения сотрудников, проведения видеопрезентаций.
С помощью мультимедиа оживают детские сказки, создаются разговаривающие программы для обучения иностранным языкам, справочники и энциклопедии с фрагментами видео- и звуковых клипов, веб-странички.
Мультимедиа находит различное применение, включая образование, медицину, производство, науку, искусство и развлечения. В последние годы технология мультимедиа нашла применение в разработке Web-страниц и различных Web-приложениях.
В образовании, мультимедиа используется в учебных курсах, базирующихся на информационных технологиях (медиаобразование). Специальными исследованиями установлено, что из услышанного в памяти остается только четверть, из увиденного – треть, при комбинированном воздействии зрения и слуха – 50%, а если вовлечь учащегося в активные действия в процессе изучения при помощи мультимедийных приложений – 75%.
В производстве, особенно в механической и автомобильной промышленности, мультимедиа, прежде всего, используется на стадии проектирования. Это позволяет, например, инженеру рассматривать изделие в различных перспективах, производить другие манипуляции, прежде, чем приступать к производству (автоматизированное проектирование).
В медицине мультимедиа применяется в процессе обучения хирургов (виртуальная хирургия). В науке мультимедиа главным образом используется для моделирования различных процессов. В искусстве наиболее яркими примерами мультимедиа являются специальные эффекты в кино, компьютерная мультипликация и трехмерная графика. В области развлечений ярким примером мультимедиа являются компьютерные игры.

1.3. Некоторые примеры мультимедийных систем

Мультимедийный продукт «Ярославская иконопись»

Известны три подхода к организации хранения и предоставления информации: размещение данных непосредственно в телепрограммы, хранение данных в виде файлов, использование реляционных баз данных. Каждому из этих подходов присущи как преимущества, так и недостатки. По-видимому, разумное сочетание всех трех способов организации данных является наиболее предпочтительным при разработке мультимедийных информационно-поисковых систем.
Именно такая «гибридная» организация данных используется в ММП «Ярославская иконопись», созданном Центром новых информационных технологий Ярославского государственного университета имени П.Г. Демидова в сотрудничестве с Ярославским художественным музеем. Информационным ядром ММП является реляционная база данных, включающая более 20 таблиц, содержащих подробную информацию об иконах с XIII по XX века и их фрагментах, иконописцах, иконописных сюжетах, литературных источниках сюжетов, реставраторах, выставках, в которых выставлялись иконы и т.п. Полноцветные изображения икон и их пиктограммы хранятся в графических файлах, на которые в базе данных имеются соответствующие ссылки. По каждому веку дополнительно имеется видео, аудио и текстовая информация, также хранящаяся в виде файлов соответствующих форматов.
Организация мультимедийной информации в виде реляционной базы данных позволила реализовать в ММП гибкую систему поиска икон и их фрагментов по заданным атрибутам (всего около двадцати атрибутов), позволяющую отбирать иконы, как по отдельным признакам, так и по заданной их совокупности. Данная возможность представляет существенный интерес для специалистов, изучающих древнерусское искусство.
Задача поисковой базы данных – дать как можно более подробную информацию о каждой иконе, занесенной на компакт-диск. Система поиска предусматривает знакомство, как с общим видом иконы, так и с ее фрагментами. Таким образом, о каждом памятнике – о времени его создания, о его бытовании и его изучении – можно получить максимально полную информацию. Эта информация имеет универсальный характер. Если неискушенным интересно будет увидеть воспроизведение иконы и узнать о времени и обстоятельствах ее появления, то специалисты – искусствоведы, историки, сотрудники музеев –воспользуются ценными для них сведениями об истории бытования иконы, выставках и литературе о ней.
Имеющийся опыт использования информационно- поисковой системы на основе мультимедийной базы данных показал ее высокую эффективность и удобство в работе. Такая организация дает возможность легко расширять саму базу данных по мере накопления информации об ярославских иконописных памятниках.

Актерское агентство

Проект «Актерское агентство» реализован с целью систематизации данных об актерах, претендующих на роли в кинофильмах Киностудии им. Горького и других киностудиях, в том числе, зарубежных, и организации удобного оперативного поиска кандидатуры по заданным критериям. Созданная компьютерная база данных включает текстовую информацию об актерах, их фотографии, видеоролики, представляющие их работу, другую информацию. Более 5000 актеров представлены в этой базе данных. База данных опубликована в сети Интернет.

Звезды XXI века

Проект «Звезды XXI века» реализован на основе базы данных, в которую помещена имиджевая информация о талантливых людях, мечтающих играть и сниматься в кино или успешно продвигаться в шоу-бизнесе. Систематизированная информация позволяет режиссеру легко отобрать интересующие его кандидатуры по заданным критериям. База данных, опубликованная в Интернет, обращает на себя внимание не только российских режиссеров и организаторов шоу-программ, но и зарубежных продюсеров, что открывает для одаренных людей широкие возможности карьерного роста.

Радио России

Проект «Интернет-центр «Радио России» реализован в форме информационного портала с возможностями трансляции аудиоматериалов в режиме on-line и on-demand. Создается архив популярных передач «Радио России» в базе данных, которая накапливает аудиосюжеты передач и их текстовые сопровождения/расшифровки. Главным звеном портала является интерактивная программа передач, которая может быть представлена пользователю на прошлую и будущую дату по его запросу.

Обслуживание на дому и интерактивное телевидение

Другим, может быть еще более эффективным применением мультимедиа, является обслуживание на дому. Все то, что человек может получить, пользуясь интерактивным киоском, он может иметь, не выходя из дома, если конечно у него есть мультимедийный компьютер и средства телеконференции. Типичным применением телеконференции являются банковское обслуживание и покупки, не выходя из дома. Подобно тому как делаются покупки по каталогам на основе цветных фотографий товаров, покупатель может выбрать товар, рассмотреть его, поворачивая на экране, меняя характеристики изделия (цвет, фасон), подобрать подходящий и, оплатив покупку, подождать, пока ее привезут домой.

Часть 2. Создание музыки с помощью компьютера

Сегодня уже никого не удивишь тем, что музыку можно писать, используя домашний компьютер. Для этого достаточно иметь: желание, компьютер (желательно не самый древний), время и самое главное – это терпение.
Применение компьютеров в музыке насчитывает восемь основных областей, каждая из которых частично пересекается с другой. Компьютеры могут быть использованы как МИДИ-секвенсеры, для редактирования и печати нотных партитур, для записи, воспроизведения и редактирования цифрового аудиосигнала, редактирования и сохранения синтезаторных «патчей» (наборов тембров), для «продвинутой» работы с МИДИ (сочинение экспериментальной компьютерной музыки), создания МИДИ-аккомпанемента, синтеза музыки и музыкального самообразования.

2.1. Основные понятия

Sample – «кусок» аудио-файла. Loop – циклически повторяющийся фрагмент, как правило, состоящий из нескольких семплов, например, партия ударных. Groove – инструментальный аккомпанемент, линия баса и др.
BPM – (Beats Per Minute) – удары в минуту. Это самый распространенный и удобный способ измерения темпа. Slider, fader – (Слайдер, фэйдер) – регулятор, отвечающий за значение какого-либо определенного параметра – например, громкость, балланс и т.п.
PLUG-IN – (Плагин) – дополнение в виде небольшой программы, служащей для обработки звука. В основном пользуются DirectX, VST и Wavelab плагинами. Sequencer – (Секвенсор) – устройство (в частности – виртуальное) для сведения аудио, видео, MIDI, а иногда всего сразу. Секвенсоры отвечают за синхронизированное воспроизведение нескольких дорожек. Популярные секвенсоры – Cakewalk Pro Audio 9 и CubaseSX.
Synthesizer – (Синтезатор) – это устройство синтезирующее звук. Первоначально синтезаторы были «железными», потом виртуальными. Способов синтеза буквально десятки, каждый интересен по-своему. Наибольшее распространение получили синтезаторы, работающие по принципу воспроизведения готовых звуков (сэмплов) – sample playback. ADSR – (Огибающая) – важный параметр задания звучания ноты в любых синтезаторах. Это кривая, определяющая во времени продолжительность атаки (Attack), спада (Decay), задержки (Sustain) и окончательного затухания (Release).
MIDI controller – (MIDI-контроллер) – устройство, с помощью которого подаются MIDI-сообщения на MIDI-вход карты, звукового модуля, синтезатора и т.д. Примером может служить MIDI-клавиатура.
EQ – (Эквалайзер) – устройство коррекции частот сигнала. Сравнительно недавно существовали только в железном виде. С развитием компьютерных технологий стали появляться программно реализованные EQ с большим количеством полос и высокой точностью обработки. Эквалайзеры бывают графические и параметрические.
Compressor – (Компрессор) – устройство, предназначенное для сужения динамического диапазона сигнала. Expander – (Экспандер) – противоположность компрессору. Работает наоборот - расширяет динамический диапазон сигнала. Обработку экспандером логично применить к звуку, списанному с радиопередачи или иного скомпрессированого источника.
Noise gate – (Гейт) – устройство подавления шумов (ПШ) в паузах. Как только уровень сигнала становится ниже определенной величины, срабатывает алгоритм занижения уровня на некоторую величину.

2.2. Принципы создания музыки

Есть два основных принципа создания музыки:
      шаблонное создание музыки;
      создание треков в многодорожечных звукозаписывающих студиях с использованием собственных сэмплов.
Шаблонное создание означает то, что в процессе будут использоваться какие либо шаблоны. Например, готовые сэмплы. Здесь в роли ди-джея себя может представить любой, кто обладает чувством ритма и желанием творить. Музыку таким образом можно писать в реальном времени и в пошаговом режиме. Программы, которые дают такую возможность – eJay (www.ejay.com), MixMan Studio, AcidLoop, Music Maker (www.magix.net), New Beat Trancemission (www.microforum.com), Beat 2000 (www.aludra.com), Dance Station (www.dancestation.com) и т.д.
Создание треков в многодорожечных звукозаписывающих студиях с использованием собственных сэмплов по определению похоже на шаблонное. Отличие от шаблонного создания музыки можно увидеть из названий – это использование своих сэмплов и лупов. Такие программы еще называются – трекеры (от слова track – дорожка). Это, конечно, не означает, что здесь нельзя использовать чужие сэмплы, просто их нет в комплекте с программным продуктом такого рода, т.к. основной упор делается не на развлечение, а на профессиональное создание музыки.
Такая программа позволяет записывать несколько звуковых источников одновременно, т.е. можно сводить несколько треков в один, что в итоге будет называться музыкой. Удобная программа для создания треков – ACID (www.sonicfoundry.com) от фирмы Sonic Foundry. Кроме нее пользуются популярностью следующие программы: Cool Edit Pro, n-Track, Samplitude Studio и т.д.
Как и с помощью чего приготовить свои собственные сэмплы и лупы?
Самый простой ответ – это записать через микрофон. Но такой вариант подойдет только для создания сэмпла с вокалом, т.е. с чьим-нибудь пением. Правда, после этого надо будет еще убрать шум, наложить разного рода эффекты и т.д. Для редактирования сэмплов, будь то вокал, мелодия, бас или все что угодно, нужна программа, типа Sound Forge. Такой тип программ называется – аудио редактор. Современные мощные звуковые редакторы умеют записывать аудио CD, конвертировать файлы в различные форматы и т.д. А плагины значительно расширяют сферу их деятельности. Самые яркие представители аудио редакторов – это Sound Forge, WaveLab, Cool Edit Pro, Gold Wave и другие.
Есть такие программы, как groove-машины, программные сэмплеры, MIDI-секвенсоры, drum-машины. Вот, в них то и делаются samples и loops.
СЕКВЕНСЕРЫ
Это – наиболее широкая область применения компьютеров в музыке. Компьютер, оборудованный звуковой картой, МИДИ-интерфейсом и программой-секвенсером, может записывать и воспроизводить полную оркестровку, управляя несколькими синтезаторами и звуковыми модулями одновременно. При записи песни в компьютер можно слой за слоем создавать аранжировку, изменять партитуру по ходу работы. Процесс редактирования отображается на экране монитора, что позволяет достаточно легко освоить программу и в дальнейшем работать с ней. Когда МИДИ-треки полностью готовы, песню переводят в формат аудио (записывают на ленту или на жесткий диск), после чего в нее добавляют акустические инструменты и вокал. Существуют мощные программы-секвенсеры, позволяющие работать как с МИДИ-дорожками, так и с аудиотреками. Компьютер также может управлять внешним магнитофоном и воспроизводить МИДИтреки синхронно с аудиотреками, записанными на магнитофон.
РЕДАКТИРОВАНИЕ СИНТЕЗАТОРНЫХ ПАТЧЕЙ
Такие программы называют «редактор/библиотекарь» (editor/librarian). К ним относятся, например, программы Sound Diver фирмы Emagic, Galaxy фирмы Opcode и многие другие. Они позволяют сохранить на жестком диске компьютера банк патчей (звуковых программ) из внутренней памяти синтезатора. Можно комбинировать патчи из разных банков и сохранять набор тембров в новом банке, а также редактировать сами патчи. Делать это в компьютере гораздо проще, чем в самом синтезаторе, так как удобный графический интерфейс облегчает общение с библиотекой звуков. Дисплей синтезатора - жидкокристаллический и имеет меньший размер, чем экран компьютерного монитора. С развитием сети Интернет стало возможно переписывать банки звуков с серверов фирм-производителей. Записанные банки данных можно потом редактировать в компьютере. Программа редактор/библиотекарь имеет базу данных, позволяющую осуществлять поиск нужного патча по категории или по ключевому слову.
и т.д.................

В данной главе мы рассмотрим пример построения приложения с мультимедиа первого типа. Создайте новый проект (File | New Project). Поместите TMediaPlayer на форму; поместите компоненты TFileListBox, TDirectoryListBox, TDriveComboBox, TFilterComboBox для выбора файла. В свойстве FileList для DirectoryListBox1 и FilterComboBox1 поставьте FileListBox1. В св-ве DirList для DriveComboBox1 поставьте DirectoryListBox1. В св-ве Filter для FilterComboBox1 укажите требуемые расширения файлов:

AVI File(*.avi)|*.avi

WAVE File(*.wav)|*.wav

MIDI file(*.MID)|*.mid

Пусть по двойному щелчку мышкой в FileListBox1 выбранный файл будет воспроизводиться. В обработчике события OnDblClick для FileListBox1 укажите

Procedure TForm1.FileListBox1DblClick(Sender:TObject);

with MediaPlayer1 do

FileName:=FileListBox1.FileName;

Внешний вид формы представлен на рис. 4.

Рис.4. Начальный вид проекта

Сохраните проект, запустите его, выберите нужный файл и дважды щелкните на него мышкой. MediaPlayer должен воспроизвести этот файл в отдельном окне.

Как уже говорилось выше, видеоролик можно воспроизводить внутри формы, например, на панели. Давайте слегка модифицируем проект и добавим туда панель TPanel (рис. 5). В св-ве Display для MediaPlayer1 укажите Panel1. Нужно убрать надпись с панели (Caption) и св-во BevelOuter = bvNone. Чтобы переключаться при воспроизведении с окна на панель - поместите TСheckBox на форму и в обработчике события OnClick для него запишите:



procedure TForm1.CheckBox1Click(Sender: TObject);

Start_From: Longint;

with MediaPlayer1 do begin

if FileName="" then Exit;

Start_From:=Position;

if CheckBox1.Checked then

Position:=Start_From;

Запустите проект и воспроизведите видеоролик. Пощелкайте мышкой на CheckBox.

Рис. 5. Добавлена панель для воспроизведения видео и

переключатель окно/панель.

Во время выполнения программы может потребоваться отобразить текущее состояние объекта MediaPlayer и самого ролика (время, прошедшее с начала воспроизведения, длину ролика). Для этого у объекта TMediaPlayer есть соответствующие свойства и события: Length, Position, OnNotify и др. Давайте добавим в проект прогресс-индикатор (TGauge), который отобразит в процентах, сколько прошло времени (см. рис.6). Для обновления показаний индикатора можно воспользоваться таймером. Поместите на форму объект TTimer, установите для него Interval = 100 (100 миллисекунд). В обработчике события OnTimer нужно записать:

procedure TForm1.Timer1Timer(Sender: TObject);

with MediaPlayer1 do

if FileName<>"" then

Gauge1.Progress:=Round(100*Position/Length);

Запустите проект, выберите файл (AVI) и щелкните на нем два раза мышкой. При воспроизведении ролика прогресс-индикатор должен отображать процент, соответствующий прошедшему времени (см. рис.6).

Рис.6: Законченное приложение для воспроизведения

AVI, WAV и MDI файлов.

3. ОБЪЕКТЫ ИССЛЕДОВАНИЯ, ОБОРУДОВАНИЕ, МАТЕРИАЛЫ И НАГЛЯДНЫЕ ПОСОБИЯ

3.1. IBM – совместимый компьютер.

3.2. Установленная операционная система Windows.

3.3. Установленное приложение Borland Delphi.

3.4. Справочная система приложения Borland Delphi.

4. ЗАДАНИЕ НА РАБОТУ

4.1. Изучение теоретические положения работы по программированию в среде Borland Delphi.

4.2. Выполнение индивидуального задания преподавателя по программированию в пределах вопросов, рассмотренных в данной лабораторной работе.

5. ПОРЯДОК ВЫПОЛНЕНИЯ РАБОТЫ

5.1. Ознакомиться с теоретическими положениями данной лабораторной работы.

5.2. Выполнить индивидуальные задания преподавателя по программированию.

Задание 1

Используя компоненты для работы с мультимедиа создать программу, позволяющую выбирать и просматривать видеоизображения

Задание 2

Дополнить программу возможностью определения времени и размера проигрываемого файла

5.3. Оформить отчет по работе.

5.4. Защитить лабораторную работу путем ответа на вопросы преподавателя.

6.1. Описание цели работы.

6.2. Основные теоретические положения работы

6.4. Описание методики выполнения индивидуального задания.

7. КОНТРОЛЬНЫЕ ВОПРОСЫ

8. СПИСОК ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ

8.1. Delphi 7: [наиболее полное руководство] / А. Д. Хомоненко [и др.];под общ.ред.А.Д.Хомоненко.- СПб. : БХВ - Петербург, 2007 .- 1216с. : ил. (7 экз.)

8.2. Программирование в Delphi 7 / П. Г. Дарахвелидзе, Е. П.Марков.- СПб.: БХВ -Петербург, 2004 .- 784c. : ил. (1 экз.)

8.3 Осипов Д. Delphi. Профессиональное программирование. - СПб.: Символ-Плюс, 2006. -1056 с., ил.

  • Понятие «мультимедиа»
  • Технология создания мультимедийных приложений
  • Виды мультимедийных приложений
  • Средства для создания мультимедиа-приложений

В настоящее время в работе многих компаний и фирм используются различные виды компьютерных технологий для проведения семинаров, деловых встреч, тренингов и других мероприятий. Для того чтобы информация была более насыщенной, запоминающейся и наглядной, чаще всего применяют мультимедиа-технологии. Это как аппаратные мультимедийные средства, так и пакеты прикладных программ, которые позволяют обрабатывать различные виды информации, такие как текст, графика и звук. Существуют различные понятия мультимедиа:

  • Мультимедиа –технология, описывающая порядок разработки, функционирования и применения средств обработки информации различных видов ;
  • Мультимедиа –компьютерное аппаратное обеспечение (наличие в компьютере CD-Rom Drive – устройства для чтения компакт-дисков, звуковой и видеоплаты, с помощью которых возможно воспроизведение звуковой и видеоинформации, джойстика и других специальных устройств) ;
  • Мультимедиа – это объединение нескольких средств представления информации в одной системе. Обычно под мультимедиа подразумевается объединение в компьютерной системе таких средств представления информации, как текст, звук, графика, мультипликация, видеоизображения и пространственное моделирование. Такое объединение средств обеспечивает качественно новый уровень восприятия информации: человек не просто пассивно созерцает, а активно участвует в происходящем. Программы с использованием средств мультимедиа многомодальны, то есть они одновременно воздействуют на несколько органов чувств и поэтому вызывают повышенный интерес и внимание у аудитории .

Красочно оформленное мультимедийное приложение, в котором наличие иллюстраций, таблиц и схем сопровождается элементами анимации и звуковым сопровождением, облегчает восприятие изучаемого материала, способствует его пониманию и запоминанию, дает более яркое и емкое представление о предметах, явлениях, ситуациях, стимулируя познавательную активность обучаемых.

Существует достаточно большое разнообразие различных технологических приемов, нацеленных на разработку качественных мультимедийных приложений. При создании и последующем использовании этих приложений следует соблюдать несколько основных технологических рекомендаций.

В качестве основы для создания мультимедийного приложения может стать модель содержания материала, представляющая собой способ структуризации материала, основанный на разбиении его на элементы и наглядном представлении в виде иерархии.

На начальной стадии проектирования мультимедийного приложения модель содержания материала позволяет:

  • четко определить содержание материала;
  • представить содержание в наглядном и обозримом виде;
  • определить компонентный состав мультимедийного приложения.

Учет достижений психологии позволяет сформулировать ряд общих рекомендаций, которые следует учитывать при разработке способа визуализации информации на экране компьютера:

  • информация на экране должна быть структурирована;
  • визуальная информация должна периодически меняться на аудиоинформацию;
  • периодически должны варьироваться яркость цвета и/или громкость звука;
  • содержание визуализируемого материала не должно быть слишком простым или слишком сложным.

При разработке формата кадра на экране и его построении рекомендуется учитывать, что существует смысл и отношение между объектами, которые определяют организацию зрительного поля. Компоновать объекты рекомендуется:

  • близко друг от друга, так как чем ближе в зрительном поле объекты друг к другу (при прочих равных условиях), тем с большей вероятностью они организуются в единые, целостные образы;
  • По сходству процессов, так как чем больше сходство и целостность образов, тем с большей вероятностью они организуются;
  • с учетом свойств продолжения, так как, чем больше элементы в зрительном поле оказываются в местах, соответствующих продолжению закономерной последовательности (функционируют как части знакомых контуров), тем с большей вероятностью они организуются в целостные единые образы;
  • с учетом особенности выделения предмета и фона при выборе формы объектов, размеров букв и цифр, насыщенности цвета, расположения текста и т. п.;
  • не перегружая визуальную информацию деталями, яркими и контрастными цветами;
  • Выделяя материал, предназначенный для запоминания цветом, подчеркиванием, размером шрифта и его стилем.

При разработке мультимедийного приложения необходимо учитывать, что объекты, изображенные разными цветами и на разном фоне, по-разному воспринимаются человеком.

Важную роль в организации зрительной информации играет контраст предметов по отношению к фону. Существуют две разновидности контраста: прямой и обратный. При прямом контрасте предметы и их изображения темнее, а при обратном – светлее фона. В мультимедийных приложениях обычно используются оба вида, как порознь в разных кадрах, так и вместе, в рамках одной картинки. В большинстве случаев доминирует обратный контраст.

Предпочтительной является работа мультимедиа-приложений в прямом контрасте. В этих условиях увеличение яркости ведет к улучшению видимости, а при обратном – к ухудшению, но цифры, буквы и знаки, предъявляемые в обратном контрасте, опознаются точнее и быстрее, чем в прямом, даже при меньших размерах. Чем больше относительные размеры частей изображения и выше его яркость, тем меньший должен быть контраст, тем лучше видимость. Комфортность восприятия информации с экрана монитора достигается при равномерном распределении яркости в поле зрения.

Для оптимизации изучения информации на экране компьютера разработчикам мультимедийных приложений рекомендуется использование логических ударений. Логическими ударениями принято называть психолого-аппаратные приемы, направленные на привлечение внимания пользователя к определенному объекту. Психологическое действие логических ударений связано с уменьшением времени зрительного поиска и фиксации оси зрения по центру главного объекта.

Наиболее часто используемыми приемами для создания логических ударений являются: изображение главного объекта более ярким цветом, изменение размера, яркости, расположения или выделение проблесковым свечением. Количественной оценкой логического ударения является его интенсивность. Интенсивность зависит от соотношения цвета и яркости объекта по отношению к фону, от изменения относительных размеров объекта по отношению к размерам предметов фона изображения. Наилучшим является выделение либо более ярким, либо более контрастным цветом, хуже – выделение проблесковым свечением, изменением размера или яркости.

Проведя обзор и анализ существующих отечественных и зарубежных систем по технологии создания мультимедийных приложений, можно предложить следующую классификацию самых распространенных мультимедиа-приложений и их понятий.
Мультимедийные приложения подразделяются на следующие виды:

  • презентации;
  • анимационные ролики;
  • игры;
  • видеоприложения;
  • мультимедиа-галереи;
  • аудиоприложения (проигрыватели звуковых файлов);
  • приложения для web.

В табл. 1 представлены основные понятия мультимедийных приложений и их виды.

Таблица 1. Основные понятия мультимедийных приложений


Вид мультимедийного приложения

Понятие

Презентация

Презентация (от англ. presentation ) – способ наглядного представления информации с использованием аудиовизуальных средств. Презентация представляет собой сочетание компьютерной анимации, графики, видео, музыки и звукового ряда, которые организованы в единую среду. Как правило, презентация имеет сюжет, сценарий и структуру, организованную для удобного восприятия информации

Анимационные ролики

Анимация – технология мультимедиа; воспроизведение последовательности картинок, создающее впечатление движущегося изображения. Эффект движущегося изображения возникает при частоте смены видеокадров более 16 кадров в секунду

Игры

Игра – мультимедиа-приложение, направленное на удовлетворение потребностей в развлечении, удовольствии, на снятие напряжения, а также развитие определенных навыков и умений

Видеофильм и видеопроигрыватели

Видеофильмы – технология разработки и демонстрации движущихся изображений. Видеопроигрыватели – программы управления видеофильмами

Мультимедиа-галереи

Галереи – собрание изображений

Проигрыватели звуковых файлов (цифровой звук)

Приложения для web

Проигрыватели звуковых файлов – программы, работающие с цифровым звуком. Цифровой звук – это способ представления электрического сигнала посредством дискретных численных значений его амплитуды

Приложения для web – это отдельные веб-страницы, их компоненты (меню, навигация и т. п.), приложения для передачи данных, многоканальные приложения, чаты и т. д.

При изучении технологии создания мультимедийных приложений строится сценарий, в котором описывается, как они будут создаваться. В связи с этим логично предположить, что каждое мультимедийное приложение состоит из различных компонент (различных тематик). Выявляя состав мультимедийных приложений, можно разбить их на следующие компоненты: выбор темы создаваемого мультимедиа-приложения, разметка рабочей области (масштабы и фоны), кадры, использование слоев, создание символов разных типов, включение переменных и написание скриптов на языке программирования, работа со звуковыми файлами, добавление текста, создание эффектов, использование и импортирование изображений, использование готовых компонент библиотек, создание навигации, использование языков разметки текста и скриптовых языков.

В свою очередь, мультимедийные приложения можно разделить на следующие подвиды. Основные понятия подвидов мультимедийных приложений представлены в табл. 2.

Таблица 2. Основные понятия подвидов мультимедиа-приложений

Существует множество технических инструментов для создания мультимедийного продукта. Создатель-разработчик должен выбрать программу-редактор, которая будет использоваться для создания страниц гипертекста. Существует целый ряд мощных сред разработки мультимедиа, позволяющих создавать полнофункциональные мультимедийные приложения. Такие пакеты, как Macromedia Director, Macromedia Flash или Authoware Professional, являются высокопрофессиональными и дорогими средствами разработки, в то время как FrontPage, mPower 4.0, HyperStudio 4.0 и Web Workshop Pro являются их более простыми и дешевыми аналогами. Такие средства, как Power Point и текстовые редакторы (например, Word), также могут быть использованы для создания линейных и нелинейных мультимедийных ресурсов. Средой разработки мультимедийных приложений также является Borland Delphi.

Перечисленные средства разработки снабжены подробной документацией, которую легко читать и воспринимать. Конечно же, существует множество других средств разработки, которые могут быть с равным успехом применены вместо названных.

В настоящее время автоматизированных обучающих систем по технологии создания мультимедийных приложений очень мало, их практически невозможно найти. Подобием таких систем являются страницы сети Интернет, на которых имеется подборка уроков, книжек и статей на данную тему. Большая часть таких сайтов нацелена на темы «Уроки flash для создания мультимедиа-элементов» или «Создание мультимедиа в Macromedia Director».

Рассмотрим некоторые из них.
Международный клуб flash-мастеров ( http://www.flasher.ru )
На сайте представлено большое количество статей и уроков по Macromedia Flash, и они разделены по следующим категориям: программирование, эффекты, анимация, навигация, звук, полезные советы, 3D, новичкам и др.

Уроки в «Международном клубе flash-мастеров» представляют собой описание последовательности шагов, которые предлагаются на выполнение пользователям. После полного выполнения таких шагов обучаемый может сделать такой же компонент мультимедиа, которое описывается в данном уроке. Технологии создания полноценного мультимедийного приложения на сайте не представлены, а можно просмотреть уже готовые работы профессионалов или продвинутых пользователей.
Также представлен обзор книг, помогающих в освоении flash-технологии. Проводится запись в школу компьютерной графики на платной основе. Постоянно проводятся конкурсы на лучшие работы.

« Уроки flash»( http://flash.demiart.ru/ )
Сайт «Уроки flash» – один из проектов студии Demiart.ru, он посвящен самостоятельному изучению Macromedia Flash на основе собранных уроков от лучших специалистов мира, работающих с flash. Уроки описывают создание разнообразных компонент и эффектов для различных мультимедиа-приложений. Кроме уроков здесь собраны учебники по flash. Также можно скачать демоверсию среды разработки Macromedia Flash. Обсудить возникающие вопросы на форуме.

По результатам анализа можно сделать вывод, что наиболее полно информация представлена на портале A Flash Developer Resource Site, но привлекает своим дизайном и удобным расположением ссылок отечественная обучающая система, представленная в виде сайта «Международного клуба flash-мастеров». Но для их просмотра требуется наличие flash-плеера, не раньше 7-й версии.

Статьи по теме: