Материал: Лабы

Порядок выполнения работы

1. Все этапы выполнения работы необходимо фиксировать.

2. Войти в систему от имени своей учетной записи. В случае, если вход осуществлен в графическую оболочку, переключиться на текстовую консоль или запустить терминал. Вся дальнейшая работа выполняется исключительно в терминале. Использование root прав запрещено.

3. Создать родительский каталог. В качестве имени каталога задать свою фамилию. Все остальные действия данной лабораторной работы будут выполняться внутри данного каталога.

4. Внутри каталога, созданного на 2-м шаге создать структуру каталогов, представленную на рисунке. Вывести на экран содержимое текущего каталога и убедиться, что все созданные каталоги созданы без ошибок. Для отображения используйте утилиту tree. При необходимости произведите обновление компонентов и установите утилиту tree вручную.

5. Перейти в каталог temp. Убедиться, что он является текущим. Вывести на экран содержимое каталога.

6. С помощью встроенного текстового редактора внутри каталога temp создать файл базы данных dataset1.txt. Заполнить файл данными в соответствии с номером варианта задания. В качестве разделителя столбцов данных в файле использовать символ “;” без пробелов. Файл должен содержать не менее 3-х строк.

7. С помощью конвеера команд внутри каталога temp создать файл базы данных dataset2.txt. Заполнить файл данными в соответствии с номером варианта задания. В качестве разделителя столбцов данных в файле использовать символ “;” без пробелов. Файл должен содержать не менее 4-х строк. Данные должны отличаться от введенных ранее.

8. С помощью перенаправления вывода в файл, либо используя команду echo создать файл базы данных dataset3.txt. Заполнить файл данными в соответствии с номером варианта задания. В качестве разделителя столбцов данных в файле использовать символ “;” без пробелов. Файл должен содержать не менее 3-х строк. Данные должны отличаться от введенных ранее.

9. Вывести на экран содержимое всех созданных файлов базы данных.

10. Объединить содержимое всех созданных файлов базы данных в один файл data.txt и поместить его в каталог /database.

11. Перейти в каталог /database. Убедиться, что он является текущим. Вывести на экран содержимое каталога. Убедиться, что созданный файл data.txt содержит все необходимые данные.

12. Подсчитать количество строк файла data.txt. Результат подсчета вывести на экран и в файл отчета output.txt, расположенный в каталоге report (см. рисунок).

13. С помощью любого из использованных выше способов дополнить файл data.txt 2-я строками данных в соответствии с номером варианта задания. В качестве разделителя столбцов данных в файле использовать символ “;” без пробелов. Убедиться, что файл data.txt содержит все необходимые данные.

14. Повторно подсчитать количество строк файла data.txt. Результат подсчета вывести на экран и дописать в конец файла отчета output.txt, расположенного в каталоге report.

15. Осуществить фильтрацию данных файла data.txt в соответствии с номером варианта задания. Результат фильтрации вывести на экран и в файл отчета filtered.txt, расположенный в каталоге report. Повторить фильтрацию с различными значениями фильтра. Результаты фильтрации выводить на экран и дописывать в файл отчета filtered.txt.

16. Выполнить сортировку содержимого файла data.txt в соответствии с номером варианта задания. Результат сортировки вывести на экран и в файл отчета sorted.txt, расположенный в каталоге report.

17. Выполнить фильтрацию содержимого файла data.txt с сортировкой результата фильтрации. Фильтрацию и сортировку выполнить в соответствии с номером варианта задания. Результат вывести на экран и в файл отчета filteredsorted.txt, расположенный в каталоге report.

18. Исследовать самостоятельно команды: date, cal, pwd, who, clear, exit.

19. Выполнить команду вывода календаря на экран и любым известным способом записать значение в файл calendar.txt, находящийся в каталоге /database. Результат вывести на экран.

Выводы

В данной лабораторной работе мы приобрели навыки работы с файлами и каталогами, познакомились с некоторыми командами манипулирования данными на примере текстовой базы данных. Рассмотренные в лабораторной работе команды shell могут применяться при выполнении рутинных операций по управлению и обслуживанию операционных систем, а также для автоматизации некоторых задач (администрирование, программирование и т.п.)

Варианты заданий

Лабораторная работа №3

Использование программируемого фильтра awk

1. Введение

AWK — это интерпретируемый скриптовый C-подобный язык построчного разбора и обработки входного потока (например, текстового файла) по заданным шаблонам (регулярным выражениям). Используется в bash (SH) скриптах.

Благодаря AWK в нашем распоряжении оказывается язык программирования, а не довольно скромный набор команд, отдаваемых редактору. С помощью языка программирования AWK можно выполнять следующие действия:

• объявлять переменные для хранения данных;

• использовать арифметические и строковые операторы для работы с данными;

• использовать структурные элементы и управляющие конструкции языка, такие, как условные операторы и циклы;

• реализовать сложные алгоритмы обработки данных;

• создавать форматированные отчёты.

AWK может запоминать контекст, делать сравнения, создавать форматированные отчёты, которые удобно читать и анализировать. Это оказывается очень кстати при работе с лог-файлами, которые могут содержать миллионы записей. При надлежащей сноровке, она может объединять множество строк. Awk – это инструмент, предоставляющий несколько очень удобных способов обработки текстовых данных, которые могут пригодиться в повседневной жизни.

2. Цель лабораторной работы

Лабораторная работа выполняется в среде, установленной и настроенной в процессе выполнения лабораторной работы №1 или в среде, установленной в компьютерном классе.

Целью данной лабораторной работы является изучение возможностей программируемого фильтра AWK при обработке текстовой информации.

В результате выполнения лабораторной работы студенты получат практические навыки манипулирования данными средствами awk, составления правил обработки потоков информации, формирования отчетов и извлечения требуемой информации из большого массива данных.

3. Структура awk-программы

В общем виде программа awk состоит из операторов (правил), имеющих вид:

Шаблон задает правила для отбора обрабатываемых строк в потоке данных. Строки не соответствующие шаблону не обрабатываются. При составлении шаблона используется синтаксис схожий с синтаксисом регулярных выражений языка программирования PERL.

В случае, если шаблон не задан, обрабатываются все строки потока данных.

Например:

awk '{print}' f-awk # выдает весь текст;

awk '/до/ {print}' f-awk # выдает строки, где есть "до".

awk '/до/ {}' f-awk # выдает строки, где есть "до"

awk '/до/ {print("Привет!")}' f-awk

Действие – последовательность команд манипулирования с данными, заключенная в фигурные скобки. Команды разделяются точкой с запятой, переводом строки или закрывающей скобкой.

Внутри awk проограммы возможны комментарии (как в shell "#.........").

4. Схема вызова awk

Программируемый фильтр awk может быть вызван из командной строки, командного файла, программы. В общем виде строка вызова awk выглядит следующим образом:

awkoptionsprogramfile

Options – список параметров, позволяющих получить доступ к дополнительным функциям программируемого фильтра. Для просмотра описания всех возможных параметров можно воспользоваться встроенной справкой по команде awk (выполнив команду awk --help) или вызвать подробное руководство (команда manawk).