Bash Xargs — сложный пример

pdiv> файл # pdiv> процедура, которую можно запустить с помощью bash. Это означает, что мы будем использовать команду bash.

Давайте запустим процедуры очистки с помощью xargs.

И это работает # br> br> На тот случай, если нам нужно указать arg-файл вместо использования конвейерного ввода, нам пригодится опция файла xargs.

Xargs replace

И последнее, но не менее важное: xargs replace -i позволяет вам получить полный контроль над форматом команды перед ее запуском. Можно использовать любой символ. Однако, следуя соглашению, большинство программистов на bash используют этот {} или этот%. Обратите внимание, что по умолчанию используется {}. -i сообщает xargs, что вы будете использовать значение по умолчанию. И это считается стенографией. -I, за которым следует замещающий символ по вашему выбору, сообщает xargs, какой символ вы будете использовать. Избегайте использования общих символов, таких как буква а. Это нарушит ваш код больше, чем любой пробел или перевод строки.

Xargs parallel

Xargs parallel -P позволяет выполнять команды одновременно, а не последовательно. См. Допустимые аргументы для n_ge_1 или параллелизма в xargs limits –show-limits. Например, если

Вы можете установить — P 2147483647 без ошибок. На практике вы можете найти более приятный параметр, например -P 99, который улучшает общую производительность без увеличения накладных расходов на управление параллельными процессами.

Ниже приведены примеры, показывающие, как использование параллельного xargs может улучшить производительность.

Пример) Последовательный подсчет по сравнению с параллельным с использованием xargs

Давайте посмотрим, что произойдет, когда мы будем считать время последовательно с помощью xargs.

Теперь посмотрим, что произойдет, если мы будем считать время параллельно с использованием xargs.

Существенное улучшение производительности наблюдается при использовании параллельных xargs для выполнения простых команд без общих ресурсов.

Пример) Сравнение порядка и времени параллельных xargs

Давайте посмотрим, что происходит, когда команда потребляет время процессора.

Обратите внимание, что все команды выполняются по порядку.

Теперь посмотрим, что происходит, когда одна и та же команда выполняется параллельно.

Параллельное заключение Xargs

Простое добавление xargs parallel в качестве параметра командной строки может повысить производительность в десять раз. Однако следует проявлять осторожность при использовании процедур, зависящих от порядка, или когда команды совместно используют ресурсы.

Разделитель Xargs

Xargs delimiter -d позволяет вам установить разделитель элементов на любой символ c так же, как символы-разделители устанавливаются в команде cut.

Например, вы можете установить в качестве разделителя пробел, то есть -dc — это ‘-d’ в командной строке или в вашем сценарии bash.

Вы можете установить разделитель на символ запятой, т.е. -dc — это ‘-d,’.

Параметр разделителя в xargs -d позволяет вам установить разделитель элементов на любой символ вы хотите.

Примеры xargs в Bash

Здесь мы рассмотрим примеры использования команды xargs в bash, включая пример использования в команде строка, а также скрипты.

Примеры команды Bash xargs

Здесь мы рассмотрим пример использования команды xargs в командной строке в bash включая пример использования с p и без него iped input.

Пример) Сделайте свой собственный ввод: весело с xargs без ввода

Что xargs делает дома один?

Похоже, мы вернули наш вопрос в качестве ответа, но, похоже, это просто эхо.

Почему?

Как вы, возможно, читали, в чем суть xargs, он преобразует стандартный ввод в аргументы командной строки. Если не указаны параметры и аргументы, он ведет себя как команда echo с поддержкой канала. То есть:

Неявно генерирует эквивалентное выражение командной строки echo

Пример) Использование xargs в качестве заполнителя для интерактивных каналов

Использование xargs в левой части канала парадоксально ⁴ , поэтому давайте запустим bash в сверхограниченном режиме ⁵ .

⁴ Команды с поддержкой конвейера не нужны xargs. Неизвестные команды конвейера не знают о xargs

⁵ Ограниченный режим, который сбрасывает каждую строку. Другие ограничения могут быть добавлены позже.

Пример) Используйте xargs как заполнитель для интерактивных аргументов

Согласно отчету о навыках разработчиков HackerRank за 2019 год ³ , «Калькуляторы — это новые игры». Все больше разработчиков моложе 38 лет продвигают калькуляторы как свой первый проект по программированию. ³ Выводы, основанные на 71 281 разработчике

Итак, давайте создадим калькулятор с использованием xargs!

Пример) Генератор статических сайтов

Предположим, вы у вас есть несколько тысяч простых текстовых файлов, которые вы хотите использовать для создания статического сайта, и ни один из файлов не имеет имени index. Имена файлов включают символы ascii в нижнем регистре и дефис, если они есть.

Вот как будут выглядеть одна или две строки в терминале теоретической машины, на которой запущен bash. На машине будут и другие внешние команды, включая findutils и pandoc. Вы можете использовать любую эквивалентную команду по вашему выбору.

Bash Примеры сценария xargs

Пример) Использование xargs для создания квадратных матриц

Вот сценарий, который я приготовил для создания квадратных матриц с использованием xargs. В частности, он использует поведение, использующее параметр -n, и использует команду seq для последовательностей чисел, которые будут использоваться в матрицах..

Источник: square-matrix.sh

I также включена тестовая программа для демонстрации сценария в действии, генерирующего все квадратные матрицы размером до 10 x 10.

Источник: test-square-matrix.sh

Вот что нужно ожидайте:

Упражнение: улучшите отображение в терминале, применив отступы к числам

Когда мы пытаемся сгенерировать квадратную матрицу порядка 10 на 10, мы получаем следующий результат:

В качестве упражнения расширите файл square-matrix.sh, чтобы обеспечить вывод, как показано ниже.

Примеры практического использования Bash xargs g>

Пример) Поиск в файлах шаблона с помощью xargs grep

¹ list-files — это команда, возвращающая возможные пути к файлу, которые будут приняты в качестве входных данных для grep с помощью команды xargs

В качестве практического примера использования xargs в bash я откопал xargs из базы секретного кода.

Существует 994 сценария bash. Посмотрим, сколько у команды xargs.

В базе кода 18 совпадений для xargs. Теперь мы могли бы захотеть выяснить, сколько скриптов используют xargs.

Отлично! В базе кода 10 скриптов с xargs. Посмотрим, что это такое.

Сводка результатов

• • Поиск и уничтожение файлов, содержащих шаблон в имени файла

• • Вывести информацию о файлах на левой стороне канала

• • Сделать файлы исполняемыми

• • Список имен файловых каталогов

• • Очистить все

• • Zip-файлы

• • Список базовых имен файлов

Пример) Установите программное обеспечение из списка с помощью apt-get в Ubuntu

При обновлении Ubuntu после резервного копирования в вашей системе вам, возможно, придется установить новое программное обеспечение. Предположим, у вас есть список программного обеспечения для установки с помощью apt-get в Ubuntu.

Пример) Curl seige с использованием xargs в bash

Предположим, у вас есть группа URL-адресов, ведущих к одному узлу где-то в в Интернете, и вы хотите выполнить осаду, используя curl в bash. Желательно, чтобы это был один из ваших узлов, и осада не находится в вашей производственной среде. Вот как мы устанавливаем осаду, используя xargs в bash.

Отладка Bash xargs

Когда вы сидите перед терминалом, вы босс. Однако, когда что-то идет не так, помогает, если вы знаете, как на самом деле отлаживать сценарии bash, как босс.

Не рискуйте, имея метод проверки успеха при использовании xargs в bash, а не слепо ожидать всего все будет хорошо, настоятельно рекомендуется. То есть вы должны убедиться, что все команды, выполненные успешно или неудачно, не оставлены без флажка.

Методы

• Размер стандартного вывода ошибок
  Если стандартная ошибка содержит 1 или более символов, что-то пошло не так
• Сумма кодов выхода команды
  Если итог выхода коды больше 0, что-то пошло не так
• Проверка полезной нагрузки
  Если часть полезной нагрузки отсутствует, что-то пошло не так
• Конец проверки скрипта
• Выполнение команд xargs как скрипта, если конец скрипта не достигнут, что-то пошло не так. Обратите внимание, что установлен errexit, и команды запускаются изнутри функции.
• Другой метод
  Если результат отличается от ожидаемого, то, возможно, что-то пошло не так.

Пример) Отладка xargs с использованием размера стандартного вывода ошибок

Вот анонимная функция, с помощью которой мы тестируем отладку xargs с использованием стандартной ошибки.

Если вы не используете стандартную ошибку для чего-либо еще, использование размера стандартной ошибки для отладки xargs — это один из методов, который может сработать для вас.

Функции Bash xargs

Иногда вам нужно использовать функции, которые вы определили в xargs. Для этого нам нужно сделать функцию доступной для xargs. Вот как это сделать.

Обратите внимание, что приведенный выше пример интерактивного сеанса можно ускорить вверх с помощью bash xargs parallel.

Заключение

Xargs — одна из многих внешних команд, которые вам лучше знать в bash . При написании этого руководства по команде xargs я сам изучил несколько дополнительных опций. Рекомендуется время от времени пересматривать. Только тогда вы сможете использовать xargs в полной мере. А пока продолжайте писать код.