Главная Другое
Экономика Финансы Маркетинг Астрономия География Туризм Биология История Информатика Культура Математика Физика Философия Химия Банк Право Военное дело Бухгалтерия Журналистика Спорт Психология Литература Музыка Медицина |
страница 1![]() Министерство образования и науки РФ Ставропольский государственный аграрный университет Экономический факультет
Кафедра Прикладной информатики Учебно-методический комплекс по дисциплине «Информационные технологии»
Утверждаю Заведующий кафедрой ПИ доцент В.Герасимов «___» 2010 года
ЛАБОРАТОРНАЯ РАБОТА №3по учебной дисциплине: «Информационные технологии»
080801.65 Прикладная информатика (в экономике )
Приемы и методы работы со сжатыми файлами
Обсуждена на заседании кафедры ПИ «___» 2010 года Протокол №___
Ставрополь 2010 ЛАБОРАТОРНАЯ РАБОТА №3 Приемы и методы работы со сжатыми файлами1. Цель работы Ознакомиться с приемами обработки данных с помощью архиваторов и освоить работу с пакетом WinZip 7.0. 2. Основные теоретические сведения Характерной особенностью большинства «классических» типов данных, с которыми традиционно работают люди, является определенная избыточность. Степень избыточности зависит от типа данных. Например, у видеоданных степень избыточности обычно в несколько раз больше, чем у графических данных, а степени избыточности графических данных в несколько раз больше, чем текстовых. Кроме того, степень избыточности данных зависит от принятой системы кодирования. Так, например, можно сказать, что кодирование текстовой информации средствами русского языка (с использованием русской азбуки) дает в среднем избыточность на 20-30% больше, чем кодирование адекватной информации средствами английского языка. Для человека избыточность информации нередко связана с представлением о ее качестве, поскольку избыточность, как правило, улучшает восприятие, особенно в неблагоприятных условиях (просмотр телепередач при наличии помех, восстановление поврежденного графического материала, чтение текстов в условиях недостаточной освещенности и т. п.). При обработке информации избыточность также играет важную роль. Так, например, при преобразовании или селекции информации избыточность используют для повышения ее качества (репрезентативности, актуальности, адекватности и т. п.). Однако, когда речь заходит не об обработке, а о хранении готовых документов или их передаче, то избыточность можно уменьшить, что дает эффект сжатия данных. Если методы сжатия информации применяют к готовым документам, то нередко термин сжатие данных подменяют термином архивация данных, а программные средства, выполняющие эти операции, называют архиваторами. 2.1. Объекты сжатия В зависимости от того, в каком объекте размещены данные, подвергаемые сжатию, различают:
Уплотнение файлов применяют для уменьшения их размеров при подготовке к передаче по каналам электронных сетей или к транспортировке на внешнем носителе малой емкости, например на гибком диске. Уплотнение папок используют как средство архивации данных перед длительным хранением, в частности, при резервном копировании. Уплотнение дисков служит целям повышения эффективности использования его рабочего пространства и, как правило, применяется к дискам, имеющим недостаточную емкость. 2.2. Обратимость сжатия Несмотря на изобилие алгоритмов сжатия данных, теоретически есть только три способа уменьшения их избыточности. Это либо изменение содержания данных, ли6o изменение их структуры, либо и то и другое вместе. Если при сжатии данных происходит изменение их содержания, метод сжатия необратим и при восстановлении данных из сжатого файла не происходит полного восстановления исходной последовательности. Такие методы называют также методами сжатия с регулируемой потерей информации. Они применимы только для тех типов данных, для которых формальная утрата части содержания не приводит к значительному снижению потребительских свойств. В первую очередь, это относится к мультимедийным данным: видеорядам, музыкальным записям, звукозаписям и рисункам. Методы сжатия с потерей информации обычно обеспечивают гораздо более высокую степень сжатия, чем обратимые методы, но их нельзя применять к текстовым документам, базам данных и, тем более, к программному коду. Характерными форматами сжатия с потерей информации являются: • .JPG – для графических данных; • .MPG – для видеоданных; • .MP3 – для звуковых данных. Если при сжатии данных происходит только изменение их структуры, то метод сжатия обратим. Из результирующего кода можно восстановить исходный массив путем применения обратного метода. Обратимые методы применяют для сжатия любых типов данных. Характерными форматами сжатия без потери информации являются:
2.3. Алгоритмы обратимых методов При исследовании методов сжатия данных следует иметь в виду существование следующих доказанных теорем.
Таким образом, обсуждая различные методы сжатия, следует иметь в виду, что наивысшую эффективность они демонстрируют для данных разных типов и разных объемов. Существует достаточно много обратимых методов сжатия данных, однако в их основе лежит сравнительно небольшое количество теоретических алгоритмов, представленных в таблице 6.1. Таблица 6.1. Свойства алгоритмов сжатия
2.3.1. Алгоритм RLE В основу алгоритмов RLE положен принцип выявления повторяющихся последовательностей данных и замены их простой структурой, в которой указывается код данных и коэффициент повтора. Например, для последовательности: 0; 0; 0; 127; 127; 0; 255; 255; 255; 255 (всего 10 байтов) образуется следующий вектор:
При записи в строку он имеет вид: 0; 3; 127; 2; 0; 1; 255; 4 (всего 8 байтов). В данном примере коэффициент сжатия равен 8/10 (80 %). Программные реализации алгоритмов RLE отличаются простотой, высокой скоростью работы, но в среднем обеспечивают недостаточное сжатие. Наилучшими объектами для данного алгоритма являются графические файлы, в которых большие одноцветные участки изображения кодируются длинными последовательностями одинаковых байтов. Этот метод также может давать заметный выигрыш на некоторых типах файлов баз данных, имеющих таблицы с фиксированной длиной полей. Для текстовых данных методы RLE, как правило, неэффективны. 2.3.2. Алгоритм KWE В основу алгоритмов кодирования по ключевым словам (Keyword Encoding) положено кодирование лексических единиц исходного документа группами байтов фиксированной длины. Примером лексической единицы может служить слов (последовательность символов, справа и слева ограниченная пробелами или символами конца абзаца). Результат кодирования сводится в таблицу, которая прикладывается к результирующему коду и представляет собой словарь. Обычно для англоязычных текстов принято использовать двухбайтную кодировку слов. Образующиеся при этом пары байтов называют токенами. Эффективность данного метода существенно зависит от длины документа, поскольку из-за необходимости прикладывать к архиву словарь длина кратких документов не только не уменьшается, но даже возрастает. Данный алгоритм наиболее эффективен для англоязычных текстовых документов и файлов баз данных. Для русскоязычных документов, отличающихся увеличенной длиной слов и большим количеством приставок, суффиксов и окончаний не всегда удается ограничиться двухбайтными токенами и эффективность метода заметно снижается. 2.3.3. Алгоритм Хафмана В основе этого алгоритма лежит кодирование не байтами, а битовыми группами.
Пример кодирования символов русского алфавита представлен на рис. 6.1. ![]() Рис. 6.1. Пример побуквенного кодирования русского алфавита по алгоритму Хафмана Как видно из этой схемы, используя 16 бит, можно закодировать до 256 различных символов. Однако ничто не мешает использовать и последовательности длиной до 20 бит – тогда можно закодировать до 1024 лексических единиц (это могут быть не символы, а группы символов, слоги и даже слова). В связи с тем, что к сжатому архиву необходимо прикладывать таблицу соответствия, на файлах малых размеров алгоритм Хафмана малоэффективен. Практика также показывает, что его эффективность зависит и от заданной предельной длины кода (размера словаря). В среднем, наиболее эффективными оказываются архивы с размером словаря от 512 до1024 единиц (длина кода до 18-20 бит). 2.3.4. Синтетические алгоритмы Рассмотренные выше алгоритмы в «чистом виде» на практике не применяют из-за того, что эффективность каждого из них сильно зависит от начальных условий. В связи с этим, современные средства архивации данных используют более сложные алгоритмы, основанные на комбинации нескольких теоретических методов. Общим принципом в работе таких «синтетических» алгоритмов является предварительный просмотр и анализ исходных данных для индивидуальной настройки алгоритма на особенности обрабатываемого материала. 2.4. Программные средства сжатия данных «Классическими» форматами сжатия данных, широко используемыми в повседневной работе с компьютером, являются форматы .ZIP, .ARJ. и RAR. Программные средства, предназначенные для создания и обслуживания архивов, выполненных в данных форматах, приведены в табл. 6.2. Таблица 6.2. Средств архивации файлов
2.4.1. Базовые требования к диспетчерам архивов Современные программные средства для создания и обслуживания архивов отличаются большим объемом функциональных возможностей, многие из которых выходят далеко за рамки простого сжатия данных и эффективно дополняют стандартные средства операционной системы. В этом смысле современные средства архивации данных называют диспетчерами архивов. К базовым функциям, которые выполняют большинство современных диспетчеров архивов, относятся:
Самораспаковывающиеся архивы. В тех случаях, когда архивация производится для передачи документа потребителю, следует предусмотреть наличие у него программного средства, необходимого для извлечения исходных данных из уплотненного архива. Если таких средств у потребителя нет или нет оснований предполагать их наличие, создают самораспаковывающиеся архивы. Самораспаковывающийся архив готовится на базе обычного архива путем присоединения к нему небольшого программного модуля. Сам архив получает расширение имени .ЕХЕ, характерное для исполнимых файлов. Потребитель сможет выполнить его запуск как программы, после чего распаковка архива произойдет на его компьютере автоматически. Распределенные архивы. В тех случаях, когда предполагается передача большого архива на носителях малой емкости, например на гибких дисках, возможно распределение одного архива в виде малых фрагментов на нескольких носителях. Некоторые диспетчеры (например, WinZip) выполняют разбиение сразу на гибкие диски, а некоторые (например, WinRAR и WinArj) позволяют выполнить предварительное разбиение архива на фрагменты заданного размера на жестком диске. Впоследствии их можно перенести на внешние носители путем копирования. При создании распределенных архивов диспетчер WinZip обладает неприятной особенностью: каждый том несет файлы с одинаковыми именами. В результате этого нет возможности установить номера томов, хранящихся на каждом из гибких дисков, по названию файла. Поэтому каждый диск следует маркировать пометками на наклейке, а при создании распределенного архива следует аккуратно перекладывать дискеты из начальной стопки в конечную, чтобы не перепутать последовательность немаркированных томов. В случае необходимости узнать номер тома можно не по названию файла, а по метке на диске, хотя эта операция не слишком удобна. Для этого следует открыть окно Мой компьютер, выбрать значок дисковода 3,5 (А:), щелкнуть на нем правой кнопкой мыши и выбрать в контекстном меню пункт Свойства. В диалоговом окне Свойства: Диск 3,5 (А:) на вкладке Общие можно узнать номер тома распределенного архива в поле Метка тома. Диспетчеры архивов WinArj и WinRAR маркируют все файлы распределенного архива разными именами и потому не создают подобных проблем. Гибкие диски являются крайне ненадежными носителями, поэтому архивы, сформированные на жестком диске, должны храниться до получения подтверждения от потребителя о том, что распределенный архив поступил к нему в неповрежденном виде и прошел распаковку. Правилом «хорошего тона» считается создание двух копий при передаче материалов на гибких дисках. Защита архивов. В большинстве случаев защиту архивов выполняют с помощью пароля, который запрашивается при попытке просмотреть, распаковать или изменить архив. Теоретически, защита с помощью пароля считается неудовлетворительной и не рекомендуется для особо важной информации. В то же время необходимо отметить, что основные программные средства, используемые для восстановления утраченного пароля (или взлома закрытой информации, что, по сути, то же самое), используют методы прямого перебора. Работу этих средств можно существенно затруднить и замедлить, если расширить область перебора. Пароли на базе символов английского алфавита и цифр действительно снимаются очень быстро. Однако даже незначительное увеличение числа используемых символов за счет знаков препинания многократно увеличивает криптостойкость защиты, а использование также и символов русского алфавита может полностью опровергнуть попытки снять пароль путем перебора, сделав сроки работы неприемлемыми. 2.4.2. Дополнительные требования к диспетчерам архивов К дополнительным функциям диспетчеров архивов относятся сервисные функции, делающие работу более удобной. Они часто реализуются внешним подключением дополнительных служебных программ и обеспечивают:
3. Порядок выполнения работы Задание 1. Просмотр архивного файла в формате .ZIP
Задание 2. Извлечение файлов из ZIP-архива
Задание 3. Создание ZIP-архива
10. В группе элементов управления Folders (Папки) установите флажок Include Subfolders (Включая вложенные папки). Несмотря на то, что в нашем примере в папке \Media нет вложенных папок, надо взять за правило включать данный флажок всегда.
Задание 4. Защита ZIP-архива
Задание 5. Создание самораспаковывающегося ZIP-архива
Задание 6. Создание самораспаковывающегося распределенного архива
Защищенный метод создает на первом гибком диске два файла; исполнимый файл, выполняющий автоматическую распаковку, и первый том распределенного архива. На последующих дисках создается продолжение распределенного архива. Такой подход повышает уровень безопасности, поскольку даже в том случае, когда исполнимый файл поврежден, например компьютерным вирусом, информация не пропадает и остается в архивном файле. После применения антивирусных средств для «лечения» зараженного исполнимого файла также не происходит нарушений в структуре архива, поскольку исполнимый файл автономен. Этот метод применяют для передачи архивных материалов на гибких дисках. Обычный метод считается «устаревшим», поскольку он обеспечивался прошлыми версиями программы WinZip. Этот метод не создает отдельного исполнимого файла, и весь архив хранится в одном исполнимом файле, распределенном по нескольким носителям. Данный метод используют для самораспаковывающихся архивов, передаваемых по каналам компьютерных сетей.
Задание 7. Исследование свойств форматов сжатия графических данных
где S – размер файла с рисунком (байт); М – ширина рисунка (точек); N – высота рисунка (точек). Запишите результат: S =____________
Задание 8. Исследование алгоритмов сжатия программы WinZip 7.0 1. Подготовьте для экспериментов две папки C:\Temp\Input и C:\Temp\Output. 2. Наполните экспериментальную папку C:\Temp\Input произвольным материалом в объеме 20-30 Мбайт, например, скопировав в нее следующие папки Windows:
Определите степень сжатия по формуле: ![]() Sr – Размер результирующего файла, Мбайт; Si – размер исходного файла, Мбайт; R – степень сжатия. Эффективность метода оцените по абсолютной величине приращения степени сжатия к приращению времени сжатия: ![]()
4. Контрольные вопросы
Доцент кафедры прикладной информатики к.т.н. Д.В. Шлаев
“Информационные технологии” Смотрите также: Учебно-методический комплекс по дисциплине Б2 Информационные технологии Направление подготовки
962.14kb.
6 стр.
Учебно-методический комплекс по дисциплине информационные технологии в лингвистических исследованиях Пенза 2007 Программа курса «Информационные технологии в лингвистических исследованиях»
242.75kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии»
330.83kb.
1 стр.
Учебно-методический комплекс по дисциплине « дв3» «Информационные технологии в профессиональной деятельности»
273.57kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии в экономике»
92.03kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии»
135.74kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии»
130.83kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии»
205.55kb.
1 стр.
Учебно-методический комплекс по дисциплине «Информационные технологии»
234.59kb.
1 стр.
Учебно-методический комплекс по дисциплине " Интернет-технологии" для студентов заочной формы обучения
184.81kb.
1 стр.
Учебно-методический комплекс по дисциплине " Интернет-технологии" для студентов заочной формы обучения
183.29kb.
1 стр.
Учебно-методический комплекс по дисциплине специальности: 033100 (050720) «Физическая культура» 358.4kb.
1 стр.
|