Bash: обработка текста и скрипты / Ступень 5 из 9 · шаг 6 из 7

Почини скрипт отчёта

~25 мин

Не запущена Запускается обычно ~20 с

Ситуация

Каждую ночь филиалы присылают выгрузки в ~/import/inbox, и загрузчик забирает их в базу. Перед загрузкой он запускает проверку и начинает, только если она вернула код 0:

bash report.sh inbox/*.csv && import-uploads inbox/*.csv

Скрипт ~/import/report.sh написал коллега, договор записан в шапке скрипта. Утром ты смотришь вывод ночной проверки: строк в нём больше, чем выгрузок, пустая east.csv прошла как OK, а загрузка началась, хотя FAIL в выводе есть.

Задача

Исправь ~/import/report.sh так, чтобы он выполнял договор:

на каждый аргумент — ровно одна строка в stdout, в том же порядке: OK <аргумент> или FAIL <аргумент>; аргумент — ровно как передан, даже с пробелом или звёздочкой * в имени; в stderr при этом ничего;
OK — только если это обычный файл (или ссылка на него), его можно прочитать и он не пуст; иначе FAIL;
код завершения 1, если хоть один файл получил FAIL, где бы он ни стоял, и 0, если все OK;
без аргументов — пустой stdout, в stderr строка Usage: report.sh FILE... и код 2.

Проверка запускает скрипт от твоего имени — bash ~/import/report.sh … — на своих файлах, которых в inbox нет. Выгрузки в inbox — для твоих опытов: чини скрипт, а не их.

Цели лабы

0 из 4

На каждый аргумент — одна строка с именем ровно как передано, даже с пробелом или звёздочкой; stderr пуст — ещё не проверялась
OK — только у обычного непустого файла, который можно прочитать, или у ссылки на такой файл — ещё не проверялась
Код 1, если не прошёл хоть один файл, где бы он ни стоял; код 0, если прошли все — ещё не проверялась
Без аргументов — пустой stdout, строка Usage в stderr и код 2 — ещё не проверялась

Подсказки

открыто 0 из 3 · открываются по одной

Подсказка 1

Показать решение после 3 неудачных проверок

Для запуска машины нужен вход

Машина запускается на твой аккаунт, там же хранится прогресс. Читать можно без входа.

После входа вернёшься на эту лабу.

Базовые команды · подобрано по лабе

Bash-скрипты: запуск, переменные, аргументы

Шпаргалка

$_ — вставить в терминал

#!/bin/bash # первая строка: чем запускать
set -euo pipefail остановиться на первой ошибке
chmod u+x backup.sh разрешить запуск
./backup.sh "my file.txt" запуск по пути
bash backup.sh запуск без права x
bash -n backup.sh проверить синтаксис, не запуская
name="value"; echo "$name" переменная — в двойных кавычках
for f in "$@"; do echo "$f"; done все аргументы по одному

Условия и циклы

bash

if [ -f "$file" ]; then
  echo "файл есть"
elif [ -d "$file" ]; then
  echo "это каталог"
else
  echo "нет такого: $file" >&2
fi

for f in /var/log/*.log; do echo "$f"; done
while read -r host; do ping -c1 "$host"; done < hosts.txt

Проверки [ -f ], [ -z ], -eq — в test-conditions.

Значение по умолчанию и части пути

bash

dir="${1:-/srv/backup}"     # первый аргумент или /srv/backup
f=/var/log/app.log
echo "${f##*/}"             # app.log — имя без каталога
echo "${f%.log}"            # /var/log/app — без расширения
echo "${f%/*}"              # /var/log — каталог

Проверить синтаксис, не запуская

text

student@ubuntu:~$ bash -n syn.sh; echo "rc=$?"
syn.sh: line 5: syntax error: unexpected end of file
rc=2

Глубже проверяет shellcheck: кавычки, cd без проверки, $?.

Файлы с пробелами в именах

bash

for f in /srv/data/*.csv; do gzip "$f"; done   # шаблон вместо ls
find /srv/data -name '*.csv' -exec gzip {} +   # с подкаталогами

Цикл по выводу ls или find в $( ) делит имена по пробелам. Шаблон и find -exec передают каждое имя целиком (см. xargs для -print0).

Permission denied

bash: ./backup.sh: Permission denied, код 126: у файла нет права x. Выполни chmod u+x backup.sh или запусти bash backup.sh.

command not found

backup.sh: command not found, код 127: имя без пути оболочка ищет только в каталогах PATH. Запусти ./backup.sh или положи скрипт в ~/bin.

cannot execute: required file not found

bash: ./backup.sh: cannot execute: required file not found — ядро не нашло интерпретатор из строки #!. Либо опечатка в пути, либо файл пришёл из Windows с концами строк CRLF: file backup.sh напишет with CRLF line terminators. Убери \r: sed -i 's/\r$//' backup.sh.

[[: not found, Syntax error: "(" unexpected

Bash-скрипт выполнил sh (dash): его запустили как sh backup.sh или в строке #! стоит /bin/sh. Запускай ./backup.sh с #!/bin/bash или bash backup.sh.

name: command not found в строке с =

Пробелы вокруг =: name = "x". Пиши name="x".

unbound variable

backup.sh: line 3: name: unbound variable — set -u поймал переменную без значения, часто опечатку. Исправь имя или дай значение по умолчанию: "${name:-}".

syntax error: unexpected end of file

Не закрыт блок или кавычка: if без fi, do без done, лишняя ". Номер строки указывает на конец файла — ищи выше.

Скрипт ломается на имени с пробелом

Переменная без кавычек: cp $f /backup/ получает два аргумента вместо одного. Пиши "$f", "$@"; shellcheck найдёт такие места (SC2086).

Руками работает, по расписанию — нет

У cron и служб systemd другое окружение: короткий PATH, каталог /, нет переменных из ~/.bashrc. Подробно — в окружении службы.

rm с пустой переменной

rm -rf "$dir/"* при пустой dir превращается в rm -rf /*. Ставь set -u или пиши "${dir:?}" — пустое значение остановит скрипт с ошибкой.

cd без проверки

cd /srv/tmp; rm -rf ./* удалит файлы в текущем каталоге, если cd не сработал. Пиши cd /srv/tmp || exit 1.