Вычисления с AWK

Введение

Помимо фильтрации и извлечения текста, awk — это мощный язык обработки текста, который умеет выполнять арифметические операции. С его помощью можно суммировать столбцы, вычислять средние значения и подсчитывать вхождения, создавая отчёты и статистику непосредственно из командной строки.

Это одна из причин, по которой awk остаётся востребованным уже несколько десятилетий: многие операционные задачи связаны с подготовкой простых отчётов по текстовым файлам, а awk позволяет выполнять их без полноценной электронной таблицы или отдельной среды программирования.

В этой лабораторной работе вы научитесь использовать awk, чтобы:

1. Инициализировать переменные: задавать начальные значения в блоке BEGIN.
2. Выполнять вычисления: создавать текущие итоги, складывая значения из каждой строки.
3. Выводить итоговые результаты: печатать итоги и сводные данные в блоке END.
4. Подсчитывать строки по условию: учитывать только строки, соответствующие заданным критериям.

Инициализация переменной

Перед началом вычислений часто требуется инициализировать переменные. В awk блок BEGIN идеально подходит для этого, поскольку выполняется один раз — до обработки любых строк.

Поэтому BEGIN обычно используют для подготовительных действий: инициализации счётчиков, итоговых значений или заголовков. В других языках программирования эту роль выполняет код инициализации.

Посмотрите содержимое файла данных data.txt:

cat data.txt

В нём содержатся два столбца: Item ($1) и Quantity ($2).

Создайте переменную с именем total и задайте ей значение 0.

Выполните эту команду:

awk 'BEGIN { total=0; print "Calculator ready. Total is initialized to:", total }' data.txt

Как это работает:

1. awk выполняет блок BEGIN.
2. Задаёт переменной total значение 0.
3. Выводит сообщение.
4. Поскольку после блока BEGIN нет основного блока кода, выполнение останавливается (хотя технически программа готова обработать файл).

Суммирование столбца

Теперь обработайте файл. Нужно сложить значения второго столбца ($2), в котором указано количество.

Для каждой прочитанной строки awk должен добавлять $2 к переменной total.

Синтаксис операции присваивания со сложением — total += $2. Это сокращённая запись выражения total = total + $2.

Здесь awk становится чем-то большим, чем инструмент для вывода столбцов. При чтении файла он сохраняет текущее состояние, поэтому может постепенно формировать итоги и сводные данные, а не только выводить исходные строки.

Выполните эту команду, чтобы увидеть вычисления для каждой строки:

awk 'BEGIN { total=0 } { total += $2; print "Added", $1, "("$2") - Current Total:", total }' data.txt

Логика работы:

• BEGIN: инициализирует total значением 0.
• Основной цикл: для каждой строки добавляет количество ($2) к total и выводит текущий статус.

Вы увидите, как итоговая сумма увеличивается по мере обработки каждого товара.

Вывод итогового результата

Обычно требуется вывести только итоговую сумму, без промежуточных результатов.

Для этого используется блок END. Он выполняется один раз после обработки всех строк.

Таким образом, скрипт awk часто состоит из трёх этапов: BEGIN для подготовки, основного блока для обработки каждой записи и END для формирования итогового отчёта. Эта структура — одна из самых важных концепций для эффективного использования awk.

Выполните очищенный вариант команды:

awk 'BEGIN { total=0 } { total += $2 } END { print "Final Total Quantity:", total }' data.txt

Разбор команды:

1. BEGIN: задаёт total значение 0.
2. { ... }: читает файл и без вывода добавляет $2 к total.
3. END: после достижения конца файла выводит итоговое значение total.

В результате должно быть выведено Final Total Quantity: 22.

Подсчёт по условию

Часто требуется подсчитать вхождения по условию, а не просто сложить все значения.

Например: «У скольких товаров количество на складе больше 4?»

1. Инициализируйте счётчик (count = 0).
2. Проверьте каждую строку: if ($2 > 4).
3. Если условие выполняется, увеличьте счётчик: count++.
4. Выведите результат в блоке END.

Этот пример показывает, как awk за один проход по файлу объединяет разбор данных, условия и арифметические операции. Для многих операционных отчётов это позволяет не писать отдельную программу на другом языке.

Выполните команду подсчёта:

awk 'BEGIN { count=0 } { if ($2 > 4) count++ } END { print "Items with quantity > 4:", count }' data.txt

Результат должен быть равен 2 (Apple и Cherry).

Логику можно комбинировать. Следующая команда суммирует только значения, которые больше 4:

awk 'BEGIN { sum=0 } { if ($2 > 4) sum += $2 } END { print "Sum of quantities > 4:", sum }' data.txt

Сумма равна 13 (5 + 8).

Итоги

В этой лабораторной работе вы научились использовать awk для вычислений и статистики:

1. Блок BEGIN: инициализировать переменные до начала обработки.
2. Арифметика (+=): выполнять вычисления, например суммировать столбцы построчно.
3. Условия (if): выполнять логику только при соблюдении заданных критериев, например при подсчёте строк.
4. Блок END: выводить итоговые результаты после завершения обработки файла.

Эти возможности позволяют создавать сложные сводные данные и метрики из текстовых файлов непосредственно в терминале.