Рубрика: Конспект: Linux

Конспект: программирование C/C++ / си / си ++

Автор записи Автор: Evgeny Yakovlev
Дата записи 2022/12/05

Ссылка:

https://www.opennet.ru/docs/RUS/zlp/
https://www.youtube.com/watch?v=OTXHSdYNLcA&list=PL7KBbsb4oaOn6ekuNGqZxl4-U_Ox81qTx&index=2&ab_channel=FromLAMERtoProgrammer
https://www.youtube.com/watch?v=qZsRdlkItWM&list=PL7KBbsb4oaOmyeV840MF_yWaiLkVvAaWC&ab_channel=FromLAMERtoProgrammer

https://www.opennet.ru/docs/RUS/zlp/

https://www.youtube.com/watch?v=OTXHSdYNLcA&list=PL7KBbsb4oaOn6ekuNGqZxl4-U_Ox81qTx&index=2&ab_channel=FromLAMERtoProgrammer

https://www.youtube.com/watch?v=qZsRdlkItWM&list=PL7KBbsb4oaOmyeV840MF_yWaiLkVvAaWC&ab_channel=FromLAMERtoProgrammer

0. hello world

0. Создаем файл
vim hello.c
-----------
/* hello */
#include <stdio.h>

int main (void)
{
        printf ("hello world\n");
}
-----------

1. Компилируем файл
!!! Если исходный код написан без синтаксических ошибок, то компилятор завершит свою работу без каких-либо сообщений. Молчание - знак повиновения и согласия.
gcc -o hello hello.c

2. Проверяем
./hello

0. Создаем файл

vim hello.c

-----------

/* hello */

#include <stdio.h>

int main (void)

{

printf ("hello world\n");

}

-----------

1. Компилируем файл

!!! Если исходный код написан без синтаксических ошибок, то компилятор завершит свою работу без каких-либо сообщений. Молчание - знак повиновения и согласия.

gcc -o hello hello.c

2. Проверяем

./hello

1. Мульти файловое программирование

0. Создадим первый файл с именем main.c:
vim  main.c
-----------
/* main.c */

int main (void)
{
	print_hello ();
}
-----------

1. Теперь создадим еще один файл hello.c со следующим содержимым:
vim hello.c
-----------
/* hello.c */
#include <stdio.h>

void print_hello (void)
{
	printf ("Hello World\n");
}
-----------

2. Теперь нужно получить два объектных файла. Компилируем.
gcc -c main.c
gcc -c hello.c
ls

3. Итак, мы получили два объектных файла. Теперь их надо объединить в один бинарник:
gcc -o hello main.o hello.o

4.Компилятор "увидел", что вместо исходных файлов (с расширением .c) ему подбросили объектные файлы (с расширением .o) и отреагировал согласно ситуации: вызвал линковщик с нужными опциями.
Давайте разберемся, что же все-таки произошло. 
В этом нам поможет утилита nm.

nm hello.o
----------       
	 U printf
00000000 T print_hello
----------

nm main.o
---------
00000000 T main
         U print_hello
---------

Таблицы символов объектных файлов содержат общее имя print_hello. 
В процессе линковки высчитываются и подставляются в нужные места адреса, соответствующие именам из таблицы. 
Вот и весь секрет.
Объектные файлы содержат таблицу символов. 
Утилита nm как раз позволяет посмотреть эту таблицу в читаемом виде. 
Те, кто пробовал программировать на ассемблере знают, что в исполняемом файле буквально все (функции, переменные) стоит на своей позиции: 
стоит только вставить или убрать из программы один байт, как программа тут же превратиться в груду мусора из-за смещенных позиций (адресов). 
У объектных файлов особая роль: они хранят в таблице символов имена некоторых позиций (глобально объявленных функций, например). 
В процессе линковки происходит стыковка имен и пересчет позиций, что позволяет нескольким объектным файлам объединиться в один бинарник.

0. Создадим первый файл с именем main.c:

vim main.c

-----------

/* main.c */

int main (void)

{

print_hello ();

}

-----------

1. Теперь создадим еще один файл hello.c со следующим содержимым:

vim hello.c

-----------

/* hello.c */

#include <stdio.h>

void print_hello (void)

{

printf ("Hello World\n");

}

-----------

2. Теперь нужно получить два объектных файла. Компилируем.

gcc -c main.c

gcc -c hello.c

3. Итак, мы получили два объектных файла. Теперь их надо объединить в один бинарник:

gcc -o hello main.o hello.o

4.Компилятор "увидел", что вместо исходных файлов (с расширением .c) ему подбросили объектные файлы (с расширением .o) и отреагировал согласно ситуации: вызвал линковщик с нужными опциями.

Давайте разберемся, что же все-таки произошло.

В этом нам поможет утилита nm.

nm hello.o

----------

U printf

00000000 T print_hello

----------

nm main.o

---------

00000000 T main

U print_hello

---------

Таблицы символов объектных файлов содержат общее имя print_hello.

В процессе линковки высчитываются и подставляются в нужные места адреса, соответствующие именам из таблицы.

Вот и весь секрет.

Объектные файлы содержат таблицу символов.

Утилита nm как раз позволяет посмотреть эту таблицу в читаемом виде.

Те, кто пробовал программировать на ассемблере знают, что в исполняемом файле буквально все (функции, переменные) стоит на своей позиции:

стоит только вставить или убрать из программы один байт, как программа тут же превратиться в груду мусора из-за смещенных позиций (адресов).

У объектных файлов особая роль: они хранят в таблице символов имена некоторых позиций (глобально объявленных функций, например).

В процессе линковки происходит стыковка имен и пересчет позиций, что позволяет нескольким объектным файлам объединиться в один бинарник.

1. automake make

0. Утилита make, которая работает со своими собственными сценариями. 
Сценарий записывается в файле с именем Makefile и помещается в репозиторий (рабочий каталог) проекта. 
Сценарии утилиты make просты и многофункциональны, а формат Makefile используется повсеместно (и не только на Unix-системах). 
Дошло до того, что стали создавать программы, генерирующие Makefile'ы. 
Самый яркий пример - набор утилит GNU Autotools. 
Самое главное преимущество make - это "интеллектуальный" способ рекомпиляции: в процессе отладки make компилирует только измененные файлы.
То, что выполняет утилита make, называется сборкой проекта, а сама утилита make относится к разряду сборщиков.
Любой Makefile состоит из трех элементов: комментарии, макроопределения и целевые связки (или просто связки). 
В свою очередь связки состоят тоже из трех элементов: цель, зависимости и правила.
Сценарии make используют однострочные комментарии, начинающиеся с литеры # (решетка). 
О том, что такое комментарии и зачем они нужны, объяснять не буду.
Макроопределения позволяют назначить имя практически любой строке, а затем подставлять это имя в любое место сценария, где должна использоваться данная строка. 
Макросы Makefile схожи с макроконстантами языка C.

Связки определяют: 
1) что нужно сделать (цель); 
2) что для этого нужно (зависимости); 
3) как это сделать (правила). 
В качестве цели выступает имя или макроконстанта. 
Зависимости - это список файлов и целей, разделенных пробелом. 
Правила - это команды передаваемые оболочке.

1. Создаем файл с именем Makefile:
vim Makefile
------------
# Makefile for Hello World project

hello: main.o hello.o
	gcc -o hello main.o hello.o

main.o: main.c
	gcc -c main.c

hello.o: hello.c
	gcc -c hello.c

clean:
	rm -f *.o hello
------------

Обратите внимание, что в каждой строке перед вызовом gcc, а также в строке перед вызовом rm стоят табуляции. 
Как вы уже догадались, эти строки являются правилами. 
Формат Makefile требует, чтобы каждое правило начиналось с табуляции. 
Теперь рассмотрим все по порядку.

Makefile может начинаться как с заглавной так и со строчной буквы.
Но рекомендуется все-таки начинать с заглавной, чтобы он не перемешивался с другими файлами проекта, а стоял "в списке первых".
Первая строка - комментарий. 
Здесь можно писать все, что угодно. 
Комментарий начинается с символа # (решетка) и заканчивается символом новой строки. 

Далее по порядку следуют четыре связки: 
1) связка для компоновки объектных файлов main.o и hello.o; 
2) связка для компиляции main.c; 
3) связка для компиляции hello.c;
4) связка для очистки проекта.

Первая связка имеет цель hello. 
Цель отделяется от списка зависимостей двоеточием. 
Список зависимостей отделяется от правил символом новой строки. 
А каждое правило начинается на новой строке с символа табуляции. 
В нашем случае каждая связка содержит по одному правилу. 
В списке зависимостей перечисляются через пробел вещи, необходимые для выполнения правила. 
В первом случае, чтобы скомпоновать бинарник, нужно иметь два объектных файла, поэтому они оказываются в списке зависимостей. 
Изначально объектные файлы отсутствуют, поэтому требуется создать целевые связки для их получения. 
Итак, чтобы получить main.o, нужно откомпилировать main.c. 
Таким образом файл main.c появляется в списке зависимостей (он там единственный). 
Аналогичная ситуация с hello.o. Файлы main.c и hello.c изначально существуют (мы их сами создали), поэтому никаких связок для их создания не требуется.
Особую роль играет целевая связка clean с пустым списком зависимостей. 
Эта связка очищает проект от всех автоматически созданных файлов. 
В нашем случае удаляются файлы main.o, hello.o и hello. 

Очистка проекта бывает нужна в нескольких случаях: 
1) для очистки готового проекта от всего лишнего; 
2) для пересборки проекта (когда в проект добавляются новые файлы или когда изменяется сам Makefile; 
3) в любых других случаях, когда требуется полная пересборка (напрмиер, для измерения времени полной сборки).


2. Формат запуска утилиты make следующий:
make [опции] [цели...]
Опции make нам пока не нужны. 
Если вызвать make без указания целей, то будет выполнена первая попавшаяся связка (со всеми зависимостями) и сборка завершится. 
Нам это и требуется:
$ make

В процессе сборки утилита make пишет все выполняемые правила. 
Проект собран, все работает.
Теперь давайте немного модернизируем наш проект. 

3. Добавим одну строку в файл hello.c:
vim hello.c
-----------
/* hello.c */
#include <stdio.h>

void print_hello (void)
{
	printf ("Hello World\n");
	printf ("Goodbye World\n");
}
-----------

4. Теперь повторим сборку и проверим:
$ make
$ ./hello

Утилита make "пронюхала", что был изменен только hello.c, то есть компилировать нужно только его. 
Файл main.o остался без изменений. 

5. Теперь давайте очистим проект, оставив одни исходники:
$ make clean


В данном случае мы указали цель непосредственно в командной строке. 
Так как целевая связка clean содержит пустой список зависимостей, то выполняется только одно правило. 
Не забывайте "чистить" проект каждый раз, когда изменяется список исходных файлов или когда изменяется сам Makefile.

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

0. Утилита make, которая работает со своими собственными сценариями.

Сценарий записывается в файле с именем Makefile и помещается в репозиторий (рабочий каталог) проекта.

Сценарии утилиты make просты и многофункциональны, а формат Makefile используется повсеместно (и не только на Unix-системах).

Дошло до того, что стали создавать программы, генерирующие Makefile'ы.

Самый яркий пример - набор утилит GNU Autotools.

Самое главное преимущество make - это "интеллектуальный" способ рекомпиляции: в процессе отладки make компилирует только измененные файлы.

То, что выполняет утилита make, называется сборкой проекта, а сама утилита make относится к разряду сборщиков.

Любой Makefile состоит из трех элементов: комментарии, макроопределения и целевые связки (или просто связки).

В свою очередь связки состоят тоже из трех элементов: цель, зависимости и правила.

Сценарии make используют однострочные комментарии, начинающиеся с литеры # (решетка).

О том, что такое комментарии и зачем они нужны, объяснять не буду.

Макроопределения позволяют назначить имя практически любой строке, а затем подставлять это имя в любое место сценария, где должна использоваться данная строка.

Макросы Makefile схожи с макроконстантами языка C.

Связки определяют:

1) что нужно сделать (цель);

2) что для этого нужно (зависимости);

3) как это сделать (правила).

В качестве цели выступает имя или макроконстанта.

Зависимости - это список файлов и целей, разделенных пробелом.

Правила - это команды передаваемые оболочке.

1. Создаем файл с именем Makefile:

vim Makefile

------------

# Makefile for Hello World project

hello: main.o hello.o

gcc -o hello main.o hello.o

main.o: main.c

gcc -c main.c

hello.o: hello.c

gcc -c hello.c

clean:

rm -f *.o hello

------------

Обратите внимание, что в каждой строке перед вызовом gcc, а также в строке перед вызовом rm стоят табуляции.

Как вы уже догадались, эти строки являются правилами.

Формат Makefile требует, чтобы каждое правило начиналось с табуляции.

Теперь рассмотрим все по порядку.

Makefile может начинаться как с заглавной так и со строчной буквы.

Но рекомендуется все-таки начинать с заглавной, чтобы он не перемешивался с другими файлами проекта, а стоял "в списке первых".

Первая строка - комментарий.

Здесь можно писать все, что угодно.

Комментарий начинается с символа # (решетка) и заканчивается символом новой строки.

Далее по порядку следуют четыре связки:

1) связка для компоновки объектных файлов main.o и hello.o;

2) связка для компиляции main.c;

3) связка для компиляции hello.c;

4) связка для очистки проекта.

Первая связка имеет цель hello.

Цель отделяется от списка зависимостей двоеточием.

Список зависимостей отделяется от правил символом новой строки.

А каждое правило начинается на новой строке с символа табуляции.

В нашем случае каждая связка содержит по одному правилу.

В списке зависимостей перечисляются через пробел вещи, необходимые для выполнения правила.

В первом случае, чтобы скомпоновать бинарник, нужно иметь два объектных файла, поэтому они оказываются в списке зависимостей.

Изначально объектные файлы отсутствуют, поэтому требуется создать целевые связки для их получения.

Итак, чтобы получить main.o, нужно откомпилировать main.c.

Таким образом файл main.c появляется в списке зависимостей (он там единственный).

Аналогичная ситуация с hello.o. Файлы main.c и hello.c изначально существуют (мы их сами создали), поэтому никаких связок для их создания не требуется.

Особую роль играет целевая связка clean с пустым списком зависимостей.

Эта связка очищает проект от всех автоматически созданных файлов.

В нашем случае удаляются файлы main.o, hello.o и hello.

Очистка проекта бывает нужна в нескольких случаях:

1) для очистки готового проекта от всего лишнего;

2) для пересборки проекта (когда в проект добавляются новые файлы или когда изменяется сам Makefile;

3) в любых других случаях, когда требуется полная пересборка (напрмиер, для измерения времени полной сборки).

2. Формат запуска утилиты make следующий:

make [опции] [цели...]

Опции make нам пока не нужны.

Если вызвать make без указания целей, то будет выполнена первая попавшаяся связка (со всеми зависимостями) и сборка завершится.

Нам это и требуется:

$ make

В процессе сборки утилита make пишет все выполняемые правила.

Проект собран, все работает.

Теперь давайте немного модернизируем наш проект.

3. Добавим одну строку в файл hello.c:

vim hello.c

-----------

/* hello.c */

#include <stdio.h>

void print_hello (void)

{

printf ("Hello World\n");

printf ("Goodbye World\n");

}

-----------

4. Теперь повторим сборку и проверим:

$ make

$ ./hello

Утилита make "пронюхала", что был изменен только hello.c, то есть компилировать нужно только его.

Файл main.o остался без изменений.

5. Теперь давайте очистим проект, оставив одни исходники:

$ make clean

В данном случае мы указали цель непосредственно в командной строке.

Так как целевая связка clean содержит пустой список зависимостей, то выполняется только одно правило.

Не забывайте "чистить" проект каждый раз, когда изменяется список исходных файлов или когда изменяется сам Makefile.

3. Модель КИС:

Любая программа имеет свой репозиторий - рабочий каталог, в котором находятся исходники, сценарии сборки (Makefile) и прочие файлы, относящиеся к проекту. 
Репозиторий рассмотренного нами проекта мультифайлового Hello World изначально состоит из файлов main.c, hello.c и, собственно, Makefile. 
После сборки репозиторий дополняется файлами main.o, hello.o и hello. 
Практика показывает, что правильная организация исходного кода в репозитории не только упрощает модернизацию и отладку, но и предотвращает возможность появления многих ошибок.

Модель КИС (Клиент-Интерфейс-Сервер) - это элегантная концепция распределения исходного кода в репозитории, в рамках которой все исходники можно поделить на клиенты, интерфейсы и серверы.

Библиотека - это просто коллекция скомпонованных особым образом объектных файлов.
Заголовочный файл - это интерфейс.
Основная разница между библиотеками и заголовочными файлами в том, что библиотека - это объектный (почти исполняемый) код, а заголовочный файл - это исходный код.


Библиотека - это набор объектных файлов, которые подсоединяются к программе на стадии линковки. 
Так как стандартная библиотека языка C - это часть стандарта языка C, то она подключается автоматически во время линковки программы, 
но так как компилятор gcc сам вызывает линковщик с нужными параметрами, то мы этого просто не замечаем. 

С точки зрения модели КИС, библиотека - это сервер.

Библиотеки несут в себе одну важную мысль: возможность использовать одни и те же механизмы в разных программах. 
В Linux библиотеки используются повсеместно, поскольку это очень удобный способ "не изобретать велосипеды". 
Даже ядро Linux в каком-то смысле представляет собой библиотеку механизмов, называемых системными вызовами.
Статическая библиотека - это просто архив объектных файлов, который подключается к программе во время линковки. 
Эффект такой же, как если бы вы подключали каждый из файлов отдельно.
В отличие от статических библиотек, код совместно используемых (динамических) библиотек не включается в бинарник. 
Вместо этого в бинарник включается только ссылка на библиотеку.

В Linux статические библиотеки обычно имеют расширение .a (Archive), а совместно используемые библиотеки имеют расширение .so (Shared Object). 
Хранятся библиотеки, как правило, в каталогах /lib и /usr/lib. 
В случае иного расположения (относится только к совместно используемым библиотекам), приходится немного "подшаманить", чтобы программа запустилась.

Любая программа имеет свой репозиторий - рабочий каталог, в котором находятся исходники, сценарии сборки (Makefile) и прочие файлы, относящиеся к проекту.

Репозиторий рассмотренного нами проекта мультифайлового Hello World изначально состоит из файлов main.c, hello.c и, собственно, Makefile.

После сборки репозиторий дополняется файлами main.o, hello.o и hello.

Практика показывает, что правильная организация исходного кода в репозитории не только упрощает модернизацию и отладку, но и предотвращает возможность появления многих ошибок.

Модель КИС (Клиент-Интерфейс-Сервер) - это элегантная концепция распределения исходного кода в репозитории, в рамках которой все исходники можно поделить на клиенты, интерфейсы и серверы.

Библиотека - это просто коллекция скомпонованных особым образом объектных файлов.

Заголовочный файл - это интерфейс.

Основная разница между библиотеками и заголовочными файлами в том, что библиотека - это объектный (почти исполняемый) код, а заголовочный файл - это исходный код.

Библиотека - это набор объектных файлов, которые подсоединяются к программе на стадии линковки.

Так как стандартная библиотека языка C - это часть стандарта языка C, то она подключается автоматически во время линковки программы,

но так как компилятор gcc сам вызывает линковщик с нужными параметрами, то мы этого просто не замечаем.

С точки зрения модели КИС, библиотека - это сервер.

Библиотеки несут в себе одну важную мысль: возможность использовать одни и те же механизмы в разных программах.

В Linux библиотеки используются повсеместно, поскольку это очень удобный способ "не изобретать велосипеды".

Даже ядро Linux в каком-то смысле представляет собой библиотеку механизмов, называемых системными вызовами.

Статическая библиотека - это просто архив объектных файлов, который подключается к программе во время линковки.

Эффект такой же, как если бы вы подключали каждый из файлов отдельно.

В отличие от статических библиотек, код совместно используемых (динамических) библиотек не включается в бинарник.

Вместо этого в бинарник включается только ссылка на библиотеку.

В Linux статические библиотеки обычно имеют расширение .a (Archive), а совместно используемые библиотеки имеют расширение .so (Shared Object).

Хранятся библиотеки, как правило, в каталогах /lib и /usr/lib.

В случае иного расположения (относится только к совместно используемым библиотекам), приходится немного "подшаманить", чтобы программа запустилась.

4. Пример статической библиотеки:

0. Начнем с интерфейса. Создадим файл world.h:
!!! Здесь просто объявлены функции, которые будут использоваться
vim world.h
-----------
/* world.h */
void h_world (void);
void g_world (void);
-----------

1. Теперь надо реализовать серверы. Создадим файл h_world.c: 
vim h_world.c
-------------
/* h_world.c */
#include <stdio.h>
#include "world.h"

void h_world (void)
{
        printf ("Hello World\n");
}
-------------


2. Теперь создадим файл g_world.c, содержащий реализацию функции g_world():
!!! Можно было бы с таким же успехом уместить обе функции в одном файле (hello.c, например)
vim g_world.c
-------------
/* g_world.c */
#include <stdio.h>
#include "world.h"

void g_world (void)
{
        printf ("Goodbye World\n");
}
-------------


3. Теперь создадим файл main.c. Это клиент, который будет пользоваться услугами сервера:
vim main.c
----------
/* main.c */
#include "world.h"

int main (void)
{
        h_world ();
        g_world ();
}
----------

4. Теперь напишем сценарий для make. Для этого создаем Makefile:
!!! Не забывайте ставить табуляции перед каждым правилом в целевых связках. 
vim Makefile
------------
# Makefile for World project

binary: main.o libworld.a
        gcc -o binary main.o -L. -lworld

main.o: main.c
        gcc -c main.c

libworld.a: h_world.o g_world.o
        ar cr libworld.a h_world.o g_world.o

h_world.o: h_world.c
        gcc -c h_world.c

g_world.o: g_world.c
        gcc -c g_world.c

clean:
        rm -f *.o *.a binary
------------

5. Итого
Итак, в приведенном примере появились три новые вещи: опции -l и -L компилятора, а также команда ar.

Начнем с последней ar.
Как вы уже догадались, команда ar создает статическую библиотеку (архив).
В нашем случае два объектных файла объединяются в один файл libworld.a.
В Linux практически все библиотеки имеют префикс lib.

Как уже говорилось, компилятор gcc сам вызывает линковщик, когда это нужно. 
Опция -l, переданная компилятору, обрабатывается и посылается линковщику для того, чтобы тот подключил к бинарнику библиотеку. 
Как вы уже заметили, у имени библиотеки "обрублены" префикс и суффикс. 
Это делается для того, чтобы создать "видимое безразличие" между статическими и динамическими библиотеками. 
Сейчас важно знать лишь то, что и библиотека libfoo.so и библиотека libfoo.a подключаются к проекту опцией -lfoo. 
В нашем случае libworld.a "урезалось" до -lworld.

Опция -L указывает линковщику, где ему искать библиотеку. В случае, если библиотека располагается в каталоге /lib или /usr/lib, то вопрос отпадает сам собой и опция -L не требуется.
В нашем случае библиотека находится в репозитории (в текущем каталоге). 
По умолчанию линковщик не просматривает текущий каталог в поиске библиотеки, поэтому опция -L. (точка означает текущий каталог) необходима.

0. Начнем с интерфейса. Создадим файл world.h:

!!! Здесь просто объявлены функции, которые будут использоваться

vim world.h

-----------

/* world.h */

void h_world (void);

void g_world (void);

-----------

1. Теперь надо реализовать серверы. Создадим файл h_world.c:

vim h_world.c

-------------

/* h_world.c */

#include <stdio.h>

#include "world.h"

void h_world (void)

{

printf ("Hello World\n");

}

-------------

2. Теперь создадим файл g_world.c, содержащий реализацию функции g_world():

!!! Можно было бы с таким же успехом уместить обе функции в одном файле (hello.c, например)

vim g_world.c

-------------

/* g_world.c */

#include <stdio.h>

#include "world.h"

void g_world (void)

{

printf ("Goodbye World\n");

}

-------------

3. Теперь создадим файл main.c. Это клиент, который будет пользоваться услугами сервера:

vim main.c

----------

/* main.c */

#include "world.h"

int main (void)

{

h_world ();

g_world ();

}

----------

4. Теперь напишем сценарий для make. Для этого создаем Makefile:

!!! Не забывайте ставить табуляции перед каждым правилом в целевых связках.

vim Makefile

------------

# Makefile for World project

binary: main.o libworld.a

gcc -o binary main.o -L. -lworld

main.o: main.c

gcc -c main.c

libworld.a: h_world.o g_world.o

ar cr libworld.a h_world.o g_world.o

h_world.o: h_world.c

gcc -c h_world.c

g_world.o: g_world.c

gcc -c g_world.c

clean:

rm -f *.o *.a binary

------------

5. Итого

Итак, в приведенном примере появились три новые вещи: опции -l и -L компилятора, а также команда ar.

Начнем с последней ar.

Как вы уже догадались, команда ar создает статическую библиотеку (архив).

В нашем случае два объектных файла объединяются в один файл libworld.a.

В Linux практически все библиотеки имеют префикс lib.

Как уже говорилось, компилятор gcc сам вызывает линковщик, когда это нужно.

Опция -l, переданная компилятору, обрабатывается и посылается линковщику для того, чтобы тот подключил к бинарнику библиотеку.

Как вы уже заметили, у имени библиотеки "обрублены" префикс и суффикс.

Это делается для того, чтобы создать "видимое безразличие" между статическими и динамическими библиотеками.

Сейчас важно знать лишь то, что и библиотека libfoo.so и библиотека libfoo.a подключаются к проекту опцией -lfoo.

В нашем случае libworld.a "урезалось" до -lworld.

Опция -L указывает линковщику, где ему искать библиотеку. В случае, если библиотека располагается в каталоге /lib или /usr/lib, то вопрос отпадает сам собой и опция -L не требуется.

В нашем случае библиотека находится в репозитории (в текущем каталоге).

По умолчанию линковщик не просматривает текущий каталог в поиске библиотеки, поэтому опция -L. (точка означает текущий каталог) необходима.

Пример совместно используемой библиотеки

!!! Для того, чтобы создать и использовать динамическую (совместно используемую) библиотеку, достаточно переделать в нашем проекте Makefile.
vim Makefile
------------
# Makefile for World project

binary: main.o libworld.so
	gcc -o binary main.o -L. -lworld -Wl,-rpath,.

main.o: main.c
	gcc -c main.c

libworld.so: h_world.o g_world.o
	gcc -shared -o libworld.so h_world.o g_world.o

h_world.o: h_world.c
	gcc -c -fPIC h_world.c

g_world.o: g_world.c
	gcc -c -fPIC g_world.c

clean:
	rm -f *.o *.so binary
------------

Внешне ничего не изменилось: программа компилируется, запускается и выполняет те же самые действия, что и в предыдущем случае. 
Изменилась внутренняя суть, которая играет для программиста первоочередную роль.

Правило для сборки binary теперь содержит пугающую опцию -Wl,-rpath,.
Как уже неоднократно говорилось, компилятор gcc сам вызывает линковщик ld, когда это надо и передает ему нужные параметры сборки, избавляя нас от ненужной платформенно-зависимой волокиты. 
Но иногда мы все-таки должны вмешаться в этот процесс и передать линковщику "свою" опцию. 
Для этого используется опция компилятора -Wl,option,optargs,... 
Расшифровываю: передать линковщику (-Wl) опцию option с аргументами optargs. 
В нашем случае мы передаем линковщику опцию -rpath с аргументом . (точка, текущий каталог). 
Возникает вопрос: что означает опция -rpath? 
Линковщик ищет библиотеки в определенных местах; обычно это каталоги /lib и /usr/lib, иногда /usr/local/lib. 
Опция -rpath просто добавляет к этому списку еще один каталог. 
В нашем случае это текущий каталог. 
Без указания опции -rpath, линковщик "молча" соберет программу, но при запуске нас будет ждать сюрприз: программа не запустится из-за отсутствия библиотеки. 
Попробуйте убрать опцию -Wl,-rpath,. из Makefile и пересоберите проект. 
При попытке запуска программа binary завершится с кодом возврата 127 (о кодах возврата будет рассказано в последующих главах). 
То же самое произойдет, если вызвать программу из другого каталога.

Есть один способ не передавать линковщику дополнительных опций при помощи -Wl - это использование переменной окружения LD_LIBRARY_PATH. 
У каждого пользователя есть так называемое окружение (environment) представляющее собой набор пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, используемых программами. 
Чтобы посмотреть окружение, достаточно набрать команду env. 
Чтобы добавить в окружение переменную, достаточно набрать export ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, а чтобы удалить переменную из окружения, надо набрать export -n ПЕРЕМЕННАЯ. 
Будьте внимательны: export - это внутреннаяя команда оболочки BASH; в других оболочках (csh, ksh, ...) используются другие команды для работы с окружением. 
Переменная окружения LD_LIBRARY_PATH содержит список дополнительных "мест", разделенных двоеточиеями, где линковщих должен искать библиотеку.

Не смотря на наличие двух механизмов передачи информации о нестандартном расположении библиотек, лучше помещать библиотеки в конечных проектах в /lib и в /usr/lib. 
Допускается расположение библиотек в подкаталоги /usr/lib и в /usr/local/lib (с указанем -Wl,-rpath). 
Но заставлять конечного пользователя устанавливать LD_LIBRARY_PATH почти всегда является плохим стилем программирования.

Следующая немаловажная деталь - это процесс создания самой библиотеки. 
Статические библиотеки создаются при помощи архиватора ar, а совместно используемые - при помощи gcc с опцией -shared. 
В данном случае gcc опять же вызывает линковщик, но не для сборки бинарника, а для создания динамической библиотеки.

Последнее отличие - опциии -fPIC (-fpic) при компиляции h_world.c и g_world.c. 
Эта опция сообщает компилятору, что объектные файлы, полученные в результате компиляции должны содержать позиционно-независимый код (PIC - Position Independent Code), который используется в динамических библиотеках. 
В таком коде используются не фиксированные позиции (адреса), а плавающие, благодаря чему код из библиотеки имеет возможность подключаться к программе в момент запуска.

!!! Для того, чтобы создать и использовать динамическую (совместно используемую) библиотеку, достаточно переделать в нашем проекте Makefile.

vim Makefile

------------

# Makefile for World project

binary: main.o libworld.so

gcc -o binary main.o -L. -lworld -Wl,-rpath,.

main.o: main.c

gcc -c main.c

libworld.so: h_world.o g_world.o

gcc -shared -o libworld.so h_world.o g_world.o

h_world.o: h_world.c

gcc -c -fPIC h_world.c

g_world.o: g_world.c

gcc -c -fPIC g_world.c

clean:

rm -f *.o *.so binary

------------

Внешне ничего не изменилось: программа компилируется, запускается и выполняет те же самые действия, что и в предыдущем случае.

Изменилась внутренняя суть, которая играет для программиста первоочередную роль.

Правило для сборки binary теперь содержит пугающую опцию -Wl,-rpath,.

Как уже неоднократно говорилось, компилятор gcc сам вызывает линковщик ld, когда это надо и передает ему нужные параметры сборки, избавляя нас от ненужной платформенно-зависимой волокиты.

Но иногда мы все-таки должны вмешаться в этот процесс и передать линковщику "свою" опцию.

Для этого используется опция компилятора -Wl,option,optargs,...

Расшифровываю: передать линковщику (-Wl) опцию option с аргументами optargs.

В нашем случае мы передаем линковщику опцию -rpath с аргументом . (точка, текущий каталог).

Возникает вопрос: что означает опция -rpath?

Линковщик ищет библиотеки в определенных местах; обычно это каталоги /lib и /usr/lib, иногда /usr/local/lib.

Опция -rpath просто добавляет к этому списку еще один каталог.

В нашем случае это текущий каталог.

Без указания опции -rpath, линковщик "молча" соберет программу, но при запуске нас будет ждать сюрприз: программа не запустится из-за отсутствия библиотеки.

Попробуйте убрать опцию -Wl,-rpath,. из Makefile и пересоберите проект.

При попытке запуска программа binary завершится с кодом возврата 127 (о кодах возврата будет рассказано в последующих главах).

То же самое произойдет, если вызвать программу из другого каталога.

Есть один способ не передавать линковщику дополнительных опций при помощи -Wl - это использование переменной окружения LD_LIBRARY_PATH.

У каждого пользователя есть так называемое окружение (environment) представляющее собой набор пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, используемых программами.

Чтобы посмотреть окружение, достаточно набрать команду env.

Чтобы добавить в окружение переменную, достаточно набрать export ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, а чтобы удалить переменную из окружения, надо набрать export -n ПЕРЕМЕННАЯ.

Будьте внимательны: export - это внутреннаяя команда оболочки BASH; в других оболочках (csh, ksh, ...) используются другие команды для работы с окружением.

Переменная окружения LD_LIBRARY_PATH содержит список дополнительных "мест", разделенных двоеточиеями, где линковщих должен искать библиотеку.

Не смотря на наличие двух механизмов передачи информации о нестандартном расположении библиотек, лучше помещать библиотеки в конечных проектах в /lib и в /usr/lib.

Допускается расположение библиотек в подкаталоги /usr/lib и в /usr/local/lib (с указанем -Wl,-rpath).

Но заставлять конечного пользователя устанавливать LD_LIBRARY_PATH почти всегда является плохим стилем программирования.

Следующая немаловажная деталь - это процесс создания самой библиотеки.

Статические библиотеки создаются при помощи архиватора ar, а совместно используемые - при помощи gcc с опцией -shared.

В данном случае gcc опять же вызывает линковщик, но не для сборки бинарника, а для создания динамической библиотеки.

Последнее отличие - опциии -fPIC (-fpic) при компиляции h_world.c и g_world.c.

Эта опция сообщает компилятору, что объектные файлы, полученные в результате компиляции должны содержать позиционно-независимый код (PIC - Position Independent Code), который используется в динамических библиотеках.

В таком коде используются не фиксированные позиции (адреса), а плавающие, благодаря чему код из библиотеки имеет возможность подключаться к программе в момент запуска.

Окружение:

Окружение (environment) или среда - это набор пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, доступный каждому пользовательскому процессу. 
Иными словами, окружение - это набор переменных окружения. 
Если вы используете оболочку, отличную от bash, то не все примеры этой главы могут быть воспроизведены.

Для того, чтобы посмотреть окружение, просто введите команду env без аргументов. В зависимости от конфигурации системы, 
вывод env может занять несколько экранов, поэтому лучше сделать так:
env > myenv.txt
env | more
env | less

Переменные окружения могут формироваться как из заглавных, так и из строчных символов, однако исторически сложилось именовать их в верхнем регистре. 

Приятно, например, когда программа "угадывает" имя пользователя или домашний каталог пользователя. 
Чаще всего такая информация "добывается" из переменных окружения USER и HOME соответственно.
Значение каждой переменной окружения изначально представляет собой строковую константу (строку). 
Интерпретация значений переменных полностью возлагается на программу. 
Иными словами, все переменные окружения имеют тип char*, а само окружение имеет тип char**. 
Чтобы вывести на экран значение какой-нибудь переменной окружения, достаточно набрать echo $ИМЯ_ПЕРЕМЕННОЙ

echo $USER
echo $HOME

Ниже приведены те переменные окружения, которые есть почти у всех пользователей Linux:
USER - имя текущего пользователя
HOME - путь к домашнему каталогу текущего пользователя
PATH - список каталогов, разделенных двоеточиями, в которых производится "поиск" программ
PWD - текущий каталог
OLDPWD - предыдущий текущий каталог
TERM - тип терминала
SHELL - текущая командная оболочка

Некоторые переменные окружения имеются не во всех системах, но все-таки требуют упоминания:
HOSTNAME - имя машины
QTDIR - расположение библиотеки QT
MAIL - почтовый ящик
LD_LIBRARY_PATH - место "поиска" дополнительных библиотек (см. предыдущую главу)
MANPATH - место поиска файлов man-страниц (каталоги, разделенные двоеточием)
LANG - язык и кодировка пользователя (иногда LANGUAGE)
DISPLAY - текущий дисплей в X11

Помимо переменных окружения, командные оболочки, такие как bash располагают собственным набором пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ. 
Это переменные оболочки. Набор таких переменных называют окружением (или средой) оболочки. 
Эти переменные чем-то напоминают локальные (стековые) переменные в языке C. 
Они недоступны для других программ (в том числе и для env) и используются в основном в сценариях оболочки. 
Чтобы задать переменную оболочки, достаточно написать в командной строке ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ.

$ MYVAR=Hello
$ echo $MYVAR
Hello
$ env | grep MYVAR


Однако, при желании, можно включить локальную переменную оболочки в основное окружение. 
Для этого используется команда export:
$ export MYVAR
$ env | grep MYVAR
MYVAR=Hello

Можно сделать сразу так:
$ export MYNEWVAR=Goodbye
$ echo $MYNEWVAR
Goodbye
$ env | grep MYNEWVAR
MYNEWVAR=Goodbye



Любая запущенная и работающая в Linux программа - это процесс. 
Запуская дважды одну и ту же программу, вы получаете два процесса. 
У каждого процесса (кроме init) есть свой процесс-родитель. 
Когда вы набираете в командной строке vim, в системе появляется новый процесс, соответствующий текстовому редактору vim; родительским процессом здесь будет оболочка (bash, например). 
Для самой оболочки новый процесс будет дочерним. 
Мы будем подробно изучать процессы в последующих главах книги. 
Сейчас же важно одно: новый процесс получает копию родительского окружения. 
Из этого правила существует несколько исключений, но мы пока об этом говорить не будем. 
Важно то, что у каждого процесса своя независимая копия окружения, с которой процесс может делать все что угодно. 
Если процесс завершается, то копия теряется; если процесс породил другой, дочерний процесс, то этот новый процесс получает копию окружения своего родителя. 
Мы еще неоднократно столкнемся с окружением при изучении многозадачности.

Окружение (environment) или среда - это набор пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ, доступный каждому пользовательскому процессу.

Иными словами, окружение - это набор переменных окружения.

Если вы используете оболочку, отличную от bash, то не все примеры этой главы могут быть воспроизведены.

Для того, чтобы посмотреть окружение, просто введите команду env без аргументов. В зависимости от конфигурации системы,

вывод env может занять несколько экранов, поэтому лучше сделать так:

env > myenv.txt

env | more

env | less

Переменные окружения могут формироваться как из заглавных, так и из строчных символов, однако исторически сложилось именовать их в верхнем регистре.

Приятно, например, когда программа "угадывает" имя пользователя или домашний каталог пользователя.

Чаще всего такая информация "добывается" из переменных окружения USER и HOME соответственно.

Значение каждой переменной окружения изначально представляет собой строковую константу (строку).

Интерпретация значений переменных полностью возлагается на программу.

Иными словами, все переменные окружения имеют тип char*, а само окружение имеет тип char**.

Чтобы вывести на экран значение какой-нибудь переменной окружения, достаточно набрать echo $ИМЯ_ПЕРЕМЕННОЙ

echo $USER

echo $HOME

Ниже приведены те переменные окружения, которые есть почти у всех пользователей Linux:

USER - имя текущего пользователя

HOME - путь к домашнему каталогу текущего пользователя

PATH - список каталогов, разделенных двоеточиями, в которых производится "поиск" программ

PWD - текущий каталог

OLDPWD - предыдущий текущий каталог

TERM - тип терминала

SHELL - текущая командная оболочка

Некоторые переменные окружения имеются не во всех системах, но все-таки требуют упоминания:

HOSTNAME - имя машины

QTDIR - расположение библиотеки QT

MAIL - почтовый ящик

LD_LIBRARY_PATH - место "поиска" дополнительных библиотек (см. предыдущую главу)

MANPATH - место поиска файлов man-страниц (каталоги, разделенные двоеточием)

LANG - язык и кодировка пользователя (иногда LANGUAGE)

DISPLAY - текущий дисплей в X11

Помимо переменных окружения, командные оболочки, такие как bash располагают собственным набором пар ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ.

Это переменные оболочки. Набор таких переменных называют окружением (или средой) оболочки.

Эти переменные чем-то напоминают локальные (стековые) переменные в языке C.

Они недоступны для других программ (в том числе и для env) и используются в основном в сценариях оболочки.

Чтобы задать переменную оболочки, достаточно написать в командной строке ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ.

$ MYVAR=Hello

$ echo $MYVAR

Hello

$ env | grep MYVAR

Однако, при желании, можно включить локальную переменную оболочки в основное окружение.

Для этого используется команда export:

$ export MYVAR

$ env | grep MYVAR

MYVAR=Hello

Можно сделать сразу так:

$ export MYNEWVAR=Goodbye

$ echo $MYNEWVAR

Goodbye

$ env | grep MYNEWVAR

MYNEWVAR=Goodbye

Любая запущенная и работающая в Linux программа - это процесс.

Запуская дважды одну и ту же программу, вы получаете два процесса.

У каждого процесса (кроме init) есть свой процесс-родитель.

Когда вы набираете в командной строке vim, в системе появляется новый процесс, соответствующий текстовому редактору vim; родительским процессом здесь будет оболочка (bash, например).

Для самой оболочки новый процесс будет дочерним.

Мы будем подробно изучать процессы в последующих главах книги.

Сейчас же важно одно: новый процесс получает копию родительского окружения.

Из этого правила существует несколько исключений, но мы пока об этом говорить не будем.

Важно то, что у каждого процесса своя независимая копия окружения, с которой процесс может делать все что угодно.

Если процесс завершается, то копия теряется; если процесс породил другой, дочерний процесс, то этот новый процесс получает копию окружения своего родителя.

Мы еще неоднократно столкнемся с окружением при изучении многозадачности.

Массив environ

0. vim unistd.h
------------
extern char ** environ;
------------

В этом массиве хранится копия окружения процесса.

1. Велосипед (код программы)
vim environ.c
-------------
/* environ.c */
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <string.h>

extern char ** environ;	/* Environment itself */

int main (int argc, char ** argv)
{
	int i;
	if (argc < 2)
	{
		fprintf (stderr, "environ: Too few arguments\n");
		fprintf (stderr, "Usage: environ <variable>\n");
		exit (1);
	}
	
	for (i = 0; environ[i] != NULL; i++)
	{
		if (!strncmp (environ[i], argv[1], strlen (argv[1])))
		{
			printf ("'%s' found\n", environ[i]);
			exit (0);
		}	
	}
	printf ("'%s' not found\n", argv[1]);
	exit (0);
}
-------------


2. Makefile для этой программы
vim Makefile
------------
# Makefile for environ

environ: environ.c
	gcc -o environ environ.c

clean:
	rm -f environ
------------



3. Проверяем
Проверяем:
make
./environ
./environ USER
./environ ABRAKADABRA

0. vim unistd.h

------------

extern char ** environ;

------------

В этом массиве хранится копия окружения процесса.

1. Велосипед (код программы)

vim environ.c

-------------

/* environ.c */

#include <stdio.h>

#include <stdlib.h>

#include <unistd.h>

#include <string.h>

extern char ** environ; /* Environment itself */

int main (int argc, char ** argv)

{

int i;

if (argc < 2)

{

fprintf (stderr, "environ: Too few arguments\n");

fprintf (stderr, "Usage: environ <variable>\n");

exit (1);

}

for (i = 0; environ[i] != NULL; i++)

{

if (!strncmp (environ[i], argv[1], strlen (argv[1])))

{

printf ("'%s' found\n", environ[i]);

exit (0);

}

printf ("'%s' not found\n", argv[1]);

exit (0);

}

-------------

2. Makefile для этой программы

vim Makefile

------------

# Makefile for environ

environ: environ.c

gcc -o environ environ.c

clean:

rm -f environ

------------

3. Проверяем

Проверяем:

make

./environ

./environ USER

./environ ABRAKADABRA

Чтение окружения: getenv()

0. Функция
vim  stdlib.h 
-------------
char * getenv (const char * name);
-------------
Функция эта работает очень просто: если в качестве аргумента указано имя существующей переменной окружения, то функция возвращает указатель на строку, 
содержащую значение этой переменной; если переменная отсутствует, возвращается NULL.

1.  Код программы
vim getenv.c 
------------
/* getenv.c */
#include <stdio.h>
#include <stdlib.h>

int main (int argc, char ** argv)
{
        if (argc < 2)
        {
                fprintf (stderr, "getenv: Too few arguments\n");
                fprintf (stderr, "Usage: getenv <variable>\n");
                exit (1);
        }
        char * var = getenv (argv[1]);
        if (var == NULL)
        {
                printf ("'%s' not found\n", argv[1]);
                exit (0);
        }
        printf ("'%s=%s' found\n", argv[1], var);
        exit (0);
}
------------

2.  Создадим файл для сборки
vim Makefile
------------
# Makefile for getenv

environ: getenv.c
        gcc -o getenv getenv.c

clean:
        rm -f getenv
------------

0. Функция

vim stdlib.h

-------------

char * getenv (const char * name);

-------------

Функция эта работает очень просто: если в качестве аргумента указано имя существующей переменной окружения, то функция возвращает указатель на строку,

содержащую значение этой переменной; если переменная отсутствует, возвращается NULL.

1. Код программы

vim getenv.c

------------

/* getenv.c */

#include <stdio.h>

#include <stdlib.h>

int main (int argc, char ** argv)

{

if (argc < 2)

{

fprintf (stderr, "getenv: Too few arguments\n");

fprintf (stderr, "Usage: getenv <variable>\n");

exit (1);

}

char * var = getenv (argv[1]);

if (var == NULL)

{

printf ("'%s' not found\n", argv[1]);

exit (0);

}

printf ("'%s=%s' found\n", argv[1], var);

exit (0);

}

------------

2. Создадим файл для сборки

vim Makefile

------------

# Makefile for getenv

environ: getenv.c

gcc -o getenv getenv.c

clean:

rm -f getenv

------------

Запись окружения: setenv()

каждый процесс получает не доступ к окружению, а копию окружения родительского процесса (в нашем случае это командная оболочка). 
Чтобы добавить в окружение новую переменную или изменить существующую, используется функция setenv, объявленная в файле stdlib.h. 
Ниже приведен адаптированный прототип этой функции.

0. Функция
vim stdlib.h
------------
int setenv (const char * name, const char * value, int overwrite);
------------

Если хотите узнать, что значит "адаптированный прототип", загляните в /usr/include/stdlib.h на объявления функций getenv() и setenv() и больше не спрашивайте ;-)

1. Код программы
vim setenv.c
------------
/* setenv.c */
#include <stdio.h>
#include <stdlib.h>

#define FL_OVWR		0	/* Overwrite flag. You may change it. */

int main (int argc, char ** argv)
{	
	if (argc < 3)
	{
		fprintf (stderr, "setenv: Too few arguments\n");
		fprintf (stderr, 
			"Usage: setenv <variable> <value>\n");
		exit (1);
	}
	if (setenv (argv[1], argv[2], FL_OVWR) != 0)
	{
		fprintf (stderr, "setenv: Cannot set '%s'\n", argv[1]);
	       	exit (1);
	}

	printf ("%s=%s\n", argv[1], getenv (argv[1]));	
	exit (0);
}
------------

Изменяя константу FL_OVWR можно несколько изменить поведение программы по отношению к существующим переменным окружения. 
Еще раз напоминаю: у каждого процесса своя копия окружения, которая уничтожается при завершении процесса. 
Экспериментируйте!

2. Создадим файл для сборки
vim Makefile
------------
# Makefile for setenv

environ: setenv.c
        gcc -o setenv setenv.c

clean:
        rm -f setenv
------------

каждый процесс получает не доступ к окружению, а копию окружения родительского процесса (в нашем случае это командная оболочка).

Чтобы добавить в окружение новую переменную или изменить существующую, используется функция setenv, объявленная в файле stdlib.h.

Ниже приведен адаптированный прототип этой функции.

0. Функция

vim stdlib.h

------------

int setenv (const char * name, const char * value, int overwrite);

------------

Если хотите узнать, что значит "адаптированный прототип", загляните в /usr/include/stdlib.h на объявления функций getenv() и setenv() и больше не спрашивайте ;-)

1. Код программы

vim setenv.c

------------

/* setenv.c */

#include <stdio.h>

#include <stdlib.h>

#define FL_OVWR 0 /* Overwrite flag. You may change it. */

int main (int argc, char ** argv)

{

if (argc < 3)

{

fprintf (stderr, "setenv: Too few arguments\n");

fprintf (stderr,

"Usage: setenv <variable> <value>\n");

exit (1);

}

if (setenv (argv[1], argv[2], FL_OVWR) != 0)

{

fprintf (stderr, "setenv: Cannot set '%s'\n", argv[1]);

exit (1);

}

printf ("%s=%s\n", argv[1], getenv (argv[1]));

exit (0);

}

------------

Изменяя константу FL_OVWR можно несколько изменить поведение программы по отношению к существующим переменным окружения.

Еще раз напоминаю: у каждого процесса своя копия окружения, которая уничтожается при завершении процесса.

Экспериментируйте!

2. Создадим файл для сборки

vim Makefile

------------

# Makefile for setenv

environ: setenv.c

gcc -o setenv setenv.c

clean:

rm -f setenv

------------

Сырая модификация окружения: putenv()

0. Функция
vim putenv.h
------------
int putenv (char * str);
------------

Функция putenv(), объявленная в заголовочном файле stdlib.h вызывается с единственным аргументом - строкой формата ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ или просто ПЕРЕМЕННАЯ. 
Обычно такие преформатированные строки называют запросами. Если переменная отсутствует, то в окружение добавляется новая запись.
Если переменная уже существует, то текущее значение перезаписывается. Если в качестве аргумента фигурирует просто имя переменной, то переменная удаляется из окружения. 
В случае удачного завершения, putenv() возвращает нуль и -1 - в случае ошибки.
У функции putenv() есть одна особенность: указатель на строку, переданный в качестве аргумента, становится частью окружения. 
Если в дальнейшем строка будет изменена, будет изменено и окружение. Это очень важный момент, о котором не следует забывать.

1. Программа
vim putenv.c
------------
/* putenv.c */
#include <stdio.h>
#include <stdlib.h>
#include <string.h>

#define QUERY_MAX_SIZE		32
char * query_str;

void print_evar (const char * var)
{
	char * tmp = getenv (var);
	if (tmp == NULL)
	{
		printf ("%s is not set\n", var);
		return;
	}
	printf ("%s=%s\n", var, tmp);
}

int main (void)
{
	int ret;
	query_str = (char *) calloc (QUERY_MAX_SIZE, sizeof(char));
	if (query_str == NULL) abort ();

	strncpy (query_str, "FOO=foo_value1", QUERY_MAX_SIZE-1);
	ret = putenv (query_str);
	if (ret != 0) abort ();
	print_evar ("FOO");

	strncpy (query_str, "FOO=foo_value2", QUERY_MAX_SIZE-1);
	print_evar ("FOO");

	strncpy (query_str, "FOO", QUERY_MAX_SIZE-1);
	ret = putenv (query_str);
	if (ret != 0) abort ();
	print_evar ("FOO");
	
	free (query_str);
	exit (0);
}
------------

Программа немного сложнее тех, что приводились ранее, поэтому разберем все по порядку. 
Сначала создаем для удобства функцию print_evar (PRINT Environment VARiable), которая будет отражать текущее состояние переменной окружения, переданной в качестве аргумента. 
В функции main() перво-наперво выделяем в куче (heap) память для буфера, в который будут помещаться запросы; заносим адрес буфера в query_str. 
Теперь формируем строку, и посылаем запрос в функцию putenv().
Дальше идет демонстрация того, на чем я акцентировал внимание: простое изменение содержимого памяти по адресу, хранящемуся в query_str приводит к изменению окружения; это видно из вывода функции print_evar(). 
Наконец, вызываем putenv() со строкой, не содержащей символа '=' (равно). Это запрос на удаление переменной из окружения. Функция print_evar() подтверждает это.
Хочу заметить, что putenv() поддерживается не всеми версиями Unix. Если нет крайней необходимости, лучше использовать setenv() для пополнения/модификации окружения.

2. Файл сборки
vim Makefile
------------
# Makefile for putenv

environ: putenv.c
        gcc -o putenv putenv.c

clean:
        rm -f putenv
------------

0. Функция

vim putenv.h

------------

int putenv (char * str);

------------

Функция putenv(), объявленная в заголовочном файле stdlib.h вызывается с единственным аргументом - строкой формата ПЕРЕМЕННАЯ=ЗНАЧЕНИЕ или просто ПЕРЕМЕННАЯ.

Обычно такие преформатированные строки называют запросами. Если переменная отсутствует, то в окружение добавляется новая запись.

Если переменная уже существует, то текущее значение перезаписывается. Если в качестве аргумента фигурирует просто имя переменной, то переменная удаляется из окружения.

В случае удачного завершения, putenv() возвращает нуль и -1 - в случае ошибки.

У функции putenv() есть одна особенность: указатель на строку, переданный в качестве аргумента, становится частью окружения.

Если в дальнейшем строка будет изменена, будет изменено и окружение. Это очень важный момент, о котором не следует забывать.

1. Программа

vim putenv.c

------------

/* putenv.c */

#include <stdio.h>

#include <stdlib.h>

#include <string.h>

#define QUERY_MAX_SIZE 32

char * query_str;

void print_evar (const char * var)

{

char * tmp = getenv (var);

if (tmp == NULL)

{

printf ("%s is not set\n", var);

return;

}

printf ("%s=%s\n", var, tmp);

}

int main (void)

{

int ret;

query_str = (char *) calloc (QUERY_MAX_SIZE, sizeof(char));

if (query_str == NULL) abort ();

strncpy (query_str, "FOO=foo_value1", QUERY_MAX_SIZE-1);

ret = putenv (query_str);

if (ret != 0) abort ();

print_evar ("FOO");

strncpy (query_str, "FOO=foo_value2", QUERY_MAX_SIZE-1);

print_evar ("FOO");

strncpy (query_str, "FOO", QUERY_MAX_SIZE-1);

ret = putenv (query_str);

if (ret != 0) abort ();

print_evar ("FOO");

free (query_str);

exit (0);

}

------------

Программа немного сложнее тех, что приводились ранее, поэтому разберем все по порядку.

Сначала создаем для удобства функцию print_evar (PRINT Environment VARiable), которая будет отражать текущее состояние переменной окружения, переданной в качестве аргумента.

В функции main() перво-наперво выделяем в куче (heap) память для буфера, в который будут помещаться запросы; заносим адрес буфера в query_str.

Теперь формируем строку, и посылаем запрос в функцию putenv().

Дальше идет демонстрация того, на чем я акцентировал внимание: простое изменение содержимого памяти по адресу, хранящемуся в query_str приводит к изменению окружения; это видно из вывода функции print_evar().

Наконец, вызываем putenv() со строкой, не содержащей символа '=' (равно). Это запрос на удаление переменной из окружения. Функция print_evar() подтверждает это.

Хочу заметить, что putenv() поддерживается не всеми версиями Unix. Если нет крайней необходимости, лучше использовать setenv() для пополнения/модификации окружения.

2. Файл сборки

vim Makefile

------------

# Makefile for putenv

environ: putenv.c

gcc -o putenv putenv.c

clean:

rm -f putenv

------------

Удаление переменной окружения: unsetenv()

0. Функция 
vim stdlib.h 
-------------
int unsetenv (const char * name);
-------------

Функция unsetenv() использует в качестве аргумента имя переменной окружения. 
Возвращаемое значение - нуль при удачном завершении и -1 в случае ошибки. 
Рассмотрим простую программу, которая удаляет переменную окружения USER (!!!). 
Каждый процесс работает с собственной копией окружения, никак не связанной с копиями окружения других процессов, 
за исключением дочерних процессов, которых у нас нет. Ниже приведен исходный код программы, 
учитывающий исторические изменения прототипа функции unsetenv()


1. Программа
vim unsetenv.c
--------------
/* unsetenv.c */
#include <stdlib.h>
#include <stdio.h>
#include <string.h>
#include <gnu/libc-version.h>

#define OLD_LIBC_VERSION	0
#define NEW_LIBC_VERSION	1
#define E_VAR			"USER"

int libc_cur_version (void)
{
	int ret = strcmp (gnu_get_libc_version (), "2.2.2");
	if (ret < 0) return OLD_LIBC_VERSION;
	return NEW_LIBC_VERSION;
}

int main (void)
{
	int ret;
	char * str;
	if (libc_cur_version () == OLD_LIBC_VERSION)
	{
		unsetenv (E_VAR);
	} else
	{
		ret = unsetenv (E_VAR);
		if (ret != 0)
		{
			fprintf (stderr, "Cannot unset '%s'\n", E_VAR);
			exit (1);
		}
	}

	str = getenv (E_VAR);
	if (str == NULL)
	{
		printf ("'%s' has removed from environment\n", E_VAR);
	} else
	{
		printf ("'%s' hasn't removed\n", E_VAR);
	}	
	exit (0);
}
--------------
В программе показан один из самых варварских способов подстроить код под версию библиотеки. 
Это сделано исключительно для демонстрации двух вариантов unsetenv(). 
Никогда не делайте так в реальных программах. 
Намного проще и дешевле (в плане времени), не получая ничего от unsetenv() проверить факт удаления переменной при помощи getenv().

2. Файл сборки
vim Makefile
------------
# Makefile for putenv

environ:  unsetenv.c
        gcc -o  unsetenv  unsetenv.c

clean:
        rm -f  unsetenv
------------

0. Функция

vim stdlib.h

-------------

int unsetenv (const char * name);

-------------

Функция unsetenv() использует в качестве аргумента имя переменной окружения.

Возвращаемое значение - нуль при удачном завершении и -1 в случае ошибки.

Рассмотрим простую программу, которая удаляет переменную окружения USER (!!!).

Каждый процесс работает с собственной копией окружения, никак не связанной с копиями окружения других процессов,

за исключением дочерних процессов, которых у нас нет. Ниже приведен исходный код программы,

учитывающий исторические изменения прототипа функции unsetenv()

1. Программа

vim unsetenv.c

--------------

/* unsetenv.c */

#include <stdlib.h>

#include <stdio.h>

#include <string.h>

#include <gnu/libc-version.h>

#define OLD_LIBC_VERSION 0

#define NEW_LIBC_VERSION 1

#define E_VAR "USER"

int libc_cur_version (void)

{

int ret = strcmp (gnu_get_libc_version (), "2.2.2");

if (ret < 0) return OLD_LIBC_VERSION;

return NEW_LIBC_VERSION;

}

int main (void)

{

int ret;

char * str;

if (libc_cur_version () == OLD_LIBC_VERSION)

{

unsetenv (E_VAR);

} else

{

ret = unsetenv (E_VAR);

if (ret != 0)

{

fprintf (stderr, "Cannot unset '%s'\n", E_VAR);

exit (1);

}

str = getenv (E_VAR);

if (str == NULL)

{

printf ("'%s' has removed from environment\n", E_VAR);

} else

{

printf ("'%s' hasn't removed\n", E_VAR);

}

exit (0);

}

--------------

В программе показан один из самых варварских способов подстроить код под версию библиотеки.

Это сделано исключительно для демонстрации двух вариантов unsetenv().

Никогда не делайте так в реальных программах.

Намного проще и дешевле (в плане времени), не получая ничего от unsetenv() проверить факт удаления переменной при помощи getenv().

2. Файл сборки

vim Makefile

------------

# Makefile for putenv

environ: unsetenv.c

gcc -o unsetenv unsetenv.c

clean:

rm -f unsetenv

------------

Очистка окружения: clearenv()

Функция clearenv(), объявленная в заголовочном файле stdlib.h, используется крайне редко для полной очистки окружения. 
clearenv() поддерживается не всеми версиями Unix. 

int clearenv (void);

При успешном завершении clearenv() возвращает нуль. 
В случае ошибки возвращается ненулевое значение.

В большинстве случаев вместо clearenv() можно использовать следующую инструкцию:
environ = NULL;

Функция clearenv(), объявленная в заголовочном файле stdlib.h, используется крайне редко для полной очистки окружения.

clearenv() поддерживается не всеми версиями Unix.

int clearenv (void);

При успешном завершении clearenv() возвращает нуль.

В случае ошибки возвращается ненулевое значение.

В большинстве случаев вместо clearenv() можно использовать следующую инструкцию:

environ = NULL;

Механизмов ввода-вывода в Linux:

В языке C для осуществления файлового ввода-вывода используются механизмы стандартной библиотеки языка, объявленные в заголовочном файле stdio.h. 
Это не более чем частный случай файлового ввода-вывода. 
В C++ для ввода-вывода чаще всего используются потоковые типы данных. 
Однако все эти механизмы являются всего лишь надстройками над низкоуровневыми механизмами ввода-вывода ядра операционной системы.
С точки зрения модели КИС (Клиент-Интерфейс-Сервер), сервером стандартных механизмов ввода вывода языка C (printf, scanf, FILE*, fprintf, fputc и т. д.) является библиотека языка. 
А сервером низкоуровневого ввода-вывода в Linux, которому посвящена эта глава книги, является само ядро операционной системы.
Пользовательские программы взаимодействуют с ядром операционной системы посредством специальных механизмов, называемых системными вызовами (system calls, syscalls). 
Внешне системные вызовы реализованы в виде обычных функций языка C, однако каждый раз вызывая такую функцию, мы обращаемся непосредственно к ядру операционной системы. 
Рассмотрим основные системные вызовы, осуществляющие ввод-вывод: open(), close(), read(), write(), lseek() и некоторые другие.

Список всех системных вызовов Linux можно найти в файле /usr/include/asm/unistd.h.

В языке C для осуществления файлового ввода-вывода используются механизмы стандартной библиотеки языка, объявленные в заголовочном файле stdio.h.

Это не более чем частный случай файлового ввода-вывода.

В C++ для ввода-вывода чаще всего используются потоковые типы данных.

Однако все эти механизмы являются всего лишь надстройками над низкоуровневыми механизмами ввода-вывода ядра операционной системы.

С точки зрения модели КИС (Клиент-Интерфейс-Сервер), сервером стандартных механизмов ввода вывода языка C (printf, scanf, FILE*, fprintf, fputc и т. д.) является библиотека языка.

А сервером низкоуровневого ввода-вывода в Linux, которому посвящена эта глава книги, является само ядро операционной системы.

Пользовательские программы взаимодействуют с ядром операционной системы посредством специальных механизмов, называемых системными вызовами (system calls, syscalls).

Внешне системные вызовы реализованы в виде обычных функций языка C, однако каждый раз вызывая такую функцию, мы обращаемся непосредственно к ядру операционной системы.

Рассмотрим основные системные вызовы, осуществляющие ввод-вывод: open(), close(), read(), write(), lseek() и некоторые другие.

Список всех системных вызовов Linux можно найти в файле /usr/include/asm/unistd.h.

Файловые дескрипторы

В языке C при осуществлении ввода-вывода мы используем указатель FILE*. 
Даже функция printf() в итоге сводится к вызову vfprintf(stdout,...), разновидности функции fprintf(); 
константа stdout имеет тип struct _IO_FILE*, синонимом которого является тип FILE*. 
Консольный ввод-вывод - это файловый ввод-вывод. 
Стандартный поток ввода, стандартный поток вывода и поток ошибок (как в C, так и в C++) - это файлы. 
В Linux все, куда можно что-то записать или откуда можно что-то прочитать представлено (или может быть представлено) в виде файла.
Экран, клавиатура, аппаратные и виртуальные устройства, каналы, сокеты - все это файлы. 
Это очень удобно, поскольку ко всему можно применять одни и те же механизмы ввода-вывода, с которыми мы и познакомимся в этой главе. 
Владение механизмами низкоуровневого ввода-вывода дает свободу перемещения данных в Linux. 
Работа с локальными файловыми системами, межсетевое взаимодействие, работа с аппаратными устройствами, - все это осуществляется в Linux посредством низкоуровневого ввода-вывода.

Вы уже знаете из предыдущей главы, что при запуске программы в системе создается новый процесс (здесь есть свои особенности, о которых пока говорить не будем).
У каждого процесса (кроме init) есть свой родительский процесс (parent process или просто parent), для которого новоиспеченный процесс является дочерним (child process, child). 
Каждый процесс получает копию окружения (environment) родительского процесса. 
Оказывается, кроме окружения дочерний процесс получает в качестве багажа еще и копию таблицы файловых дескрипторов.

Файловый дескриптор (file descriptor) - это целое число (int), соответствующее открытому файлу. 
Дескриптор, соответствующий реально открытому файлу всегда больше или равен нулю. 
Копия таблицы дескрипторов (читай: таблицы открытых файлов внутри процесса) скрыта в ядре. 
Мы не можем получить прямой доступ к этой таблице, как при работе с окружением через environ. 
Можно, конечно, кое-что "вытянуть" через дерево /proc, но нам это не надо. 
Программист должен лишь понимать, что каждый процесс имеет свою копию таблицы дескрипторов. 
В пределах одного процесса все дескрипторы уникальны (даже если они соответствуют одному и тому же файлу или устройству). 
В разных процессах дескрипторы могут совпадать или не совпадать - это не имеет никакого значения, поскольку у каждого процесса свой собственный набор открытых файлов.

Возникает вопрос: сколько файлов может открыть процесс? 
В каждой системе есть свой лимит, зависящий от конфигурации. 

Если вы используете bash или ksh (Korn Shell), то можете воспользоваться внутренней командой оболочки ulimit, чтобы узнать это значение.
$ ulimit -n

Если вы работаете с оболочкой C-shell (csh, tcsh), то в вашем распоряжении команда limit:
$ limit descriptors

В командной оболочке, в которой вы работаете (bash, например), открыты три файла: стандартный ввод (дескриптор 0), стандартный вывод (дескриптор 1) и стандартный поток ошибок (дескриптор 2). 
Когда под оболочкой запускается программа, в системе создается новый процесс, который является для этой оболочки дочерним процессом, следовательно, 
получает копию таблицы дескрипторов своего родителя (то есть все открытые файлы родительского процесса). 
Таким образом программа может осуществлять консольный ввод-вывод через эти дескрипторы. На протяжении всей книги мы будем часто играть с этими дескрипторами.

Таблица дескрипторов, помимо всего прочего, содержит информацию о текущей позиции чтения-записи для каждого дескриптора. 
При открытии файла, позиция чтения-записи устанавливается в ноль. 
Каждый прочитанный или записанный байт увеличивает на единицу указатель текущей позиции.

В языке C при осуществлении ввода-вывода мы используем указатель FILE*.

Даже функция printf() в итоге сводится к вызову vfprintf(stdout,...), разновидности функции fprintf();

константа stdout имеет тип struct _IO_FILE*, синонимом которого является тип FILE*.

Консольный ввод-вывод - это файловый ввод-вывод.

Стандартный поток ввода, стандартный поток вывода и поток ошибок (как в C, так и в C++) - это файлы.

В Linux все, куда можно что-то записать или откуда можно что-то прочитать представлено (или может быть представлено) в виде файла.

Экран, клавиатура, аппаратные и виртуальные устройства, каналы, сокеты - все это файлы.

Это очень удобно, поскольку ко всему можно применять одни и те же механизмы ввода-вывода, с которыми мы и познакомимся в этой главе.

Владение механизмами низкоуровневого ввода-вывода дает свободу перемещения данных в Linux.

Работа с локальными файловыми системами, межсетевое взаимодействие, работа с аппаратными устройствами, - все это осуществляется в Linux посредством низкоуровневого ввода-вывода.

Вы уже знаете из предыдущей главы, что при запуске программы в системе создается новый процесс (здесь есть свои особенности, о которых пока говорить не будем).

У каждого процесса (кроме init) есть свой родительский процесс (parent process или просто parent), для которого новоиспеченный процесс является дочерним (child process, child).

Каждый процесс получает копию окружения (environment) родительского процесса.

Оказывается, кроме окружения дочерний процесс получает в качестве багажа еще и копию таблицы файловых дескрипторов.

Файловый дескриптор (file descriptor) - это целое число (int), соответствующее открытому файлу.

Дескриптор, соответствующий реально открытому файлу всегда больше или равен нулю.

Копия таблицы дескрипторов (читай: таблицы открытых файлов внутри процесса) скрыта в ядре.

Мы не можем получить прямой доступ к этой таблице, как при работе с окружением через environ.

Можно, конечно, кое-что "вытянуть" через дерево /proc, но нам это не надо.

Программист должен лишь понимать, что каждый процесс имеет свою копию таблицы дескрипторов.

В пределах одного процесса все дескрипторы уникальны (даже если они соответствуют одному и тому же файлу или устройству).

В разных процессах дескрипторы могут совпадать или не совпадать - это не имеет никакого значения, поскольку у каждого процесса свой собственный набор открытых файлов.

Возникает вопрос: сколько файлов может открыть процесс?

В каждой системе есть свой лимит, зависящий от конфигурации.

Если вы используете bash или ksh (Korn Shell), то можете воспользоваться внутренней командой оболочки ulimit, чтобы узнать это значение.

$ ulimit -n

Если вы работаете с оболочкой C-shell (csh, tcsh), то в вашем распоряжении команда limit:

$ limit descriptors

В командной оболочке, в которой вы работаете (bash, например), открыты три файла: стандартный ввод (дескриптор 0), стандартный вывод (дескриптор 1) и стандартный поток ошибок (дескриптор 2).

Когда под оболочкой запускается программа, в системе создается новый процесс, который является для этой оболочки дочерним процессом, следовательно,

получает копию таблицы дескрипторов своего родителя (то есть все открытые файлы родительского процесса).

Таким образом программа может осуществлять консольный ввод-вывод через эти дескрипторы. На протяжении всей книги мы будем часто играть с этими дескрипторами.

Таблица дескрипторов, помимо всего прочего, содержит информацию о текущей позиции чтения-записи для каждого дескриптора.

При открытии файла, позиция чтения-записи устанавливается в ноль.

Каждый прочитанный или записанный байт увеличивает на единицу указатель текущей позиции.

Открытие файла: системный вызов open()

Чтобы получить возможность прочитать что-то из файла или записать что-то в файл, его нужно открыть. 
Это делает системный вызов open(). 
Этот системный вызов не имеет постоянного списка аргументов (за счет использования механизма va_arg); 
в связи с этим существуют две "разновидности" open(). 
Не только в С++ есть перегрузка функций ;-) 
Если интересно, то о механизме va_arg можно прочитать на man-странице stdarg (man 3 stdarg) или в книге Б. Кернигана и Д. Ритчи "Язык программирования Си". 
Ниже приведены адаптированные прототипы системного вызова open().

int open (const char * filename, int flags, mode_t mode);
int open (const char * filename, int flags);

Системный вызов open() объявлен в заголовочном файле fcntl.h. 
Ниже приведен общий адаптированный прототип open().

int open (const char * filename, int flags, ...);

Первый аргумент - имя файла в файловой системе в обычной форме: 
полный путь к файлу (если файл не находится в текущем каталоге) или сокращенное имя (если файл в текущем каталоге).

Второй аргумент - это режим открытия файла, представляющий собой один или несколько флагов открытия, объединенных оператором побитового ИЛИ. 
Наиболее часто используют только первые семь флагов. 
Если вы хотите, например, открыть файл в режиме чтения и записи, и при этом автоматически создать файл, если такового не существует, то второй аргумент open() будет выглядеть примерно так: O_RDWR|O_CREAT. 
Константы-флаги открытия объявлены в заголовочном файле bits/fcntl.h, однако не стоит включать этот файл в свои программы, поскольку он уже включен в файл fcntl.h.

Третий аргумент используется в том случае, если open() создает новый файл. 
В этом случае файлу нужно задать права доступа (режим), с которыми он появится в файловой системе. 
Права доступа задаются перечислением флагов, объединенных побитовым ИЛИ. 
Вместо флагов можно использовать число (как правило восьмиричное), однако первый способ нагляднее и предпочтительнее. 
Список флагов приведен в Таблице 1 Приложения 2. 
Чтобы, например, созданный файл был доступен в режиме "чтение-запись" пользователем и группой и "только чтение" остальными пользователями, - в третьем аргументе open() надо указать примерно следующее: S_IRUSR|S_IWUSR|S_IRGRP|S_IWGRP|S_IROTH или 0664. 
Флаги режима доступа реально объявлены в заголовочном файле bits/stat.h, но он не предназначен для включения в пользовательские программы, и вместо него мы должны включать файл sys/stat.h. 
Тип mode_t объявлен в заголовочном файле sys/types.h.

Если файл был успешно открыт, open() возвращает файловый дескриптор, по которому мы будем обращаться к файлу. 
Если произошла ошибка, то open() возвращает -1.

Чтобы получить возможность прочитать что-то из файла или записать что-то в файл, его нужно открыть.

Это делает системный вызов open().

Этот системный вызов не имеет постоянного списка аргументов (за счет использования механизма va_arg);

в связи с этим существуют две "разновидности" open().

Не только в С++ есть перегрузка функций ;-)

Если интересно, то о механизме va_arg можно прочитать на man-странице stdarg (man 3 stdarg) или в книге Б. Кернигана и Д. Ритчи "Язык программирования Си".

Ниже приведены адаптированные прототипы системного вызова open().

int open (const char * filename, int flags, mode_t mode);

int open (const char * filename, int flags);

Системный вызов open() объявлен в заголовочном файле fcntl.h.

Ниже приведен общий адаптированный прототип open().

int open (const char * filename, int flags, ...);

Первый аргумент - имя файла в файловой системе в обычной форме:

полный путь к файлу (если файл не находится в текущем каталоге) или сокращенное имя (если файл в текущем каталоге).

Второй аргумент - это режим открытия файла, представляющий собой один или несколько флагов открытия, объединенных оператором побитового ИЛИ.

Наиболее часто используют только первые семь флагов.

Если вы хотите, например, открыть файл в режиме чтения и записи, и при этом автоматически создать файл, если такового не существует, то второй аргумент open() будет выглядеть примерно так: O_RDWR|O_CREAT.

Константы-флаги открытия объявлены в заголовочном файле bits/fcntl.h, однако не стоит включать этот файл в свои программы, поскольку он уже включен в файл fcntl.h.

Третий аргумент используется в том случае, если open() создает новый файл.

В этом случае файлу нужно задать права доступа (режим), с которыми он появится в файловой системе.

Права доступа задаются перечислением флагов, объединенных побитовым ИЛИ.

Вместо флагов можно использовать число (как правило восьмиричное), однако первый способ нагляднее и предпочтительнее.

Список флагов приведен в Таблице 1 Приложения 2.

Чтобы, например, созданный файл был доступен в режиме "чтение-запись" пользователем и группой и "только чтение" остальными пользователями, - в третьем аргументе open() надо указать примерно следующее: S_IRUSR|S_IWUSR|S_IRGRP|S_IWGRP|S_IROTH или 0664.

Флаги режима доступа реально объявлены в заголовочном файле bits/stat.h, но он не предназначен для включения в пользовательские программы, и вместо него мы должны включать файл sys/stat.h.

Тип mode_t объявлен в заголовочном файле sys/types.h.

Если файл был успешно открыт, open() возвращает файловый дескриптор, по которому мы будем обращаться к файлу.

Если произошла ошибка, то open() возвращает -1.

Закрытие файла: системный вызов close()

Системный вызов close() закрывает файл. 
Вообще говоря, по завершении процесса все открытые файлы (кроме файлов с дескрипторами 0, 1 и 2) автоматически закрываются. 
Тем не менее, это не освобождает нас от самостоятельного вызова close(), когда файл нужно закрыть. 
К тому же, если файлы не закрывать самостоятельно, то соответствующие дескрипторы не освобождаются, что может привести к превышению лимита открытых файлов. 
Простой пример: приложение может быть настроено так, чтобы каждую минуту открывать и перечитывать свой файл конфигурации для проверки обновлений. 
Если каждый раз файл не будет закрываться, то в моей системе, например, приложение может "накрыться медным тазом" примерно через 17 часов. 
Автоматически! Кроме того, файловая система Linux поддерживает механизм буферизации. 
Это означает, что данные, которые якобы записываются, реально записываются на носитель (синхронизируются) только через какое-то время, когда система сочтет это правильным и оптимальным. 
Это повышает производительность системы и даже продлевает ресурс жестких дисков. Системный вызов close() не форсирует запись данных на диск, однако дает больше гарантий того, 
что данные останутся в целости и сохранности.

Системный вызов close() объявлен в файле unistd.h. Ниже приведен его адаптированный прототип.
vim  unistd.h
-------------
int close (int fd);
-------------

Очевидно, что единственный аргумент - это файловый дескриптор. 
Возвращаемое значение - ноль в случае успеха, и -1 - в случае ошибки. 
Довольно часто close() вызывают без проверки возвращаемого значения. 
Это не очень грубая ошибка, но, тем не менее, иногда закрытие файла бывает неудачным (в случае неправильного дескриптора, в случае прерывания функции по сигналу или в случае ошибки ввода-вывода, например). 
В любом случае, если программа сообщит пользователю, что файл невозможно закрыть, это хорошо.
Теперь можно написать простую программу, использующую системные вызовы open() и close(). 
Мы еще не умеем читать из файлов и писать в файлы, поэтому напишем программу, которая создает файл с именем, переданным в качестве аргумента (argv[1]) и с правами доступа 0600 (чтение и запись для пользователя). 
Ниже приведен исходный код программы.
vim openclose.c
---------------
/* openclose.c */
#include <fcntl.h>	/* open() and O_XXX flags */
#include <sys/stat.h>	/* S_IXXX flags */
#include <sys/types.h>	/* mode_t */
#include <unistd.h>	/* close() */
#include <stdlib.h>
#include <stdio.h>

int main (int argc, char ** argv)
{
	int fd;
	mode_t mode = S_IRUSR | S_IWUSR;
	int flags = O_WRONLY | O_CREAT | O_EXCL;
	if (argc < 2)
	{
		fprintf (stderr, "openclose: Too few arguments\n");
		fprintf (stderr, "Usage: openclose <filename>\n");
		exit (1);
	}

	fd = open (argv[1], flags, mode);
	if (fd < 0)
	{
		fprintf (stderr, "openclose: Cannot open file '%s'\n",
				argv[1]);
		exit (1);
	}
	
	if (close (fd) != 0)
	{
		fprintf (stderr, "Cannot close file (descriptor=%d)\n", fd);
		exit (1);
	}	
	exit (0);
}
---------------


Обратите внимание, если запустить программу дважды с одним и тем же аргументом, то на второй раз open() выдаст ошибку. 
В этом виноват флаг O_EXCL, который "дает добро" только на создание еще не существующих файлов. 
Наглядности ради, флаги открытия и флаги режима мы занесли в отдельные переменные, однако можно было бы сделать так:

fd = open (argv[1], O_WRONLY | O_CREAT | O_EXCL, S_IRUSR | S_IWUSR);

Или так:

fd = open (argv[1], O_WRONLY | O_CREAT | O_EXCL, 0600);


Создаем Makefile:
vim openclose
-------------
# Makefile for  openclose

environ:   openclose.c
        gcc -o   openclose   openclose.c

clean:
        rm -f   openclose
-------------

Системный вызов close() закрывает файл.

Вообще говоря, по завершении процесса все открытые файлы (кроме файлов с дескрипторами 0, 1 и 2) автоматически закрываются.

Тем не менее, это не освобождает нас от самостоятельного вызова close(), когда файл нужно закрыть.

К тому же, если файлы не закрывать самостоятельно, то соответствующие дескрипторы не освобождаются, что может привести к превышению лимита открытых файлов.

Простой пример: приложение может быть настроено так, чтобы каждую минуту открывать и перечитывать свой файл конфигурации для проверки обновлений.

Если каждый раз файл не будет закрываться, то в моей системе, например, приложение может "накрыться медным тазом" примерно через 17 часов.

Автоматически! Кроме того, файловая система Linux поддерживает механизм буферизации.

Это означает, что данные, которые якобы записываются, реально записываются на носитель (синхронизируются) только через какое-то время, когда система сочтет это правильным и оптимальным.

Это повышает производительность системы и даже продлевает ресурс жестких дисков. Системный вызов close() не форсирует запись данных на диск, однако дает больше гарантий того,

что данные останутся в целости и сохранности.

Системный вызов close() объявлен в файле unistd.h. Ниже приведен его адаптированный прототип.

vim unistd.h

-------------

int close (int fd);

-------------

Очевидно, что единственный аргумент - это файловый дескриптор.

Возвращаемое значение - ноль в случае успеха, и -1 - в случае ошибки.

Довольно часто close() вызывают без проверки возвращаемого значения.

Это не очень грубая ошибка, но, тем не менее, иногда закрытие файла бывает неудачным (в случае неправильного дескриптора, в случае прерывания функции по сигналу или в случае ошибки ввода-вывода, например).

В любом случае, если программа сообщит пользователю, что файл невозможно закрыть, это хорошо.

Теперь можно написать простую программу, использующую системные вызовы open() и close().

Мы еще не умеем читать из файлов и писать в файлы, поэтому напишем программу, которая создает файл с именем, переданным в качестве аргумента (argv[1]) и с правами доступа 0600 (чтение и запись для пользователя).

Ниже приведен исходный код программы.

vim openclose.c

---------------

/* openclose.c */

#include <fcntl.h> /* open() and O_XXX flags */

#include <sys/stat.h> /* S_IXXX flags */

#include <sys/types.h> /* mode_t */

#include <unistd.h> /* close() */

#include <stdlib.h>

#include <stdio.h>

int main (int argc, char ** argv)

{

int fd;

mode_t mode = S_IRUSR | S_IWUSR;

int flags = O_WRONLY | O_CREAT | O_EXCL;

if (argc < 2)

{

fprintf (stderr, "openclose: Too few arguments\n");

fprintf (stderr, "Usage: openclose <filename>\n");

exit (1);

}

fd = open (argv[1], flags, mode);

if (fd < 0)

{

fprintf (stderr, "openclose: Cannot open file '%s'\n",

argv[1]);

exit (1);

}

if (close (fd) != 0)

{

fprintf (stderr, "Cannot close file (descriptor=%d)\n", fd);

exit (1);

}

exit (0);

}

---------------

Обратите внимание, если запустить программу дважды с одним и тем же аргументом, то на второй раз open() выдаст ошибку.

В этом виноват флаг O_EXCL, который "дает добро" только на создание еще не существующих файлов.

Наглядности ради, флаги открытия и флаги режима мы занесли в отдельные переменные, однако можно было бы сделать так:

fd = open (argv[1], O_WRONLY | O_CREAT | O_EXCL, S_IRUSR | S_IWUSR);

Или так:

fd = open (argv[1], O_WRONLY | O_CREAT | O_EXCL, 0600);

Создаем Makefile:

vim openclose

-------------

# Makefile for openclose

environ: openclose.c

gcc -o openclose openclose.c

clean:

rm -f openclose

-------------

Чтение файла: системный вызов read()

Системный вызов read(), объявленный в файле unistd.h, позволяет читать данные из файла. 
В отличие от библиотечных функций файлового ввода-вывода, которые предоставляют возможность интерпретации считываемых данных. 

Можно, например, записать в файл следующее содержимое:
2006

Теперь, используя библиотечные механизмы, можно читать файл по-разному:
fscanf (filep, "%s", buffer);
fscanf (filep, "%d", number);


Системный вызов read() читает данные в "сыром" виде, то есть как последовательность байт, без какой-либо интерпретации. Ниже представлен адаптированный прототип read().
vim unistd.h
------------
ssize_t read (int fd, void * buffer, size_t count);
------------

Первый аргумент - это файловый дескриптор. Здесь больше сказать нечего. 
Второй аргумент - это указатель на область памяти, куда будут помещаться данные. 
Третий аргумент - количество байт, которые функция read() будет пытаться прочитать из файла. 
Возвращаемое значение - количество прочитанных байт, если чтение состоялось и -1, если произошла ошибка. 
Хочу заметить, что если read() возвращает значение меньше count, то это не символизирует об ошибке.

Хочу сказать несколько слов о типах. 
Тип size_t в Linux используется для хранения размеров блоков памяти. 
Какой тип реально скрывается за size_t, зависит от архитектуры; как правило это unsigned long int или unsigned int. 
Тип ssize_t (Signed SIZE Type) - это тот же size_t, только знаковый. 
Используется, например, в тех случаях, когда нужно сообщить об ошибке, вернув отрицательный размер блока памяти. Системный вызов read() именно так и поступает.
Теперь напишем программу, которая просто читает файл и выводит его содержимое на экран. Имя файла будет передаваться в качестве аргумента (argv[1]).

Ниже приведен исходный код этой программы.
vim myread.c
------------
/* myread.c */
#include <stdlib.h>
#include <stdio.h>
#include <unistd.h>
#include <fcntl.h>
#include <sys/stat.h>
#include <sys/types.h>

int main (int argc, char ** argv)
{
	int fd;
	ssize_t ret;
	char ch;
	if (argc < 2)
	{
		fprintf (stderr, "Too few arguments\n");
		exit (1);
	}

	fd = open (argv[1], O_RDONLY);
	if (fd < 0)
	{
		fprintf (stderr, "Cannot open file\n");
		exit (1);
	}	
	
	while ((ret = read (fd, &ch, 1)) > 0)
	{
		putchar (ch);
	}

	if (ret < 0)
	{
		fprintf (stderr, "myread: Cannot read file\n");
		exit (1);
	}
	close (fd);
	exit (0);
}
------------

В этом примере используется укороченная версия open(), так как файл открывается только для чтения. 
В качестве буфера (второй аргумент read()) мы передаем адрес переменной типа char. 
По этому адресу будут считываться данные из файла (по одному байту за раз) и передаваться на стандартный вывод. 
Цикл чтения файла заканчивается, когда read() возвращает нуль (нечего больше читать) или -1 (ошибка). Системный вызов close() закрывает файл.

Как можно заметить, в нашем примере системный вызов read() вызывается ровно столько раз, сколько байт содержится в файле. 
Иногда это действительно нужно; но не здесь. 
Чтение-запись посимвольным методом (как в нашем примере) значительно замедляет процесс ввода-вывода за счет многократных обращений к системным вызовам. 
По этой же причине возрастает вероятность возникновения ошибки. Если нет действительной необходимости, файлы нужно читать блоками. 
О том, какой размер блока предпочтительнее, будет рассказано в последующих главах книги.
 Ниже приведен исходный код программы, которая делает то же самое, что и предыдущий пример, но с использованием блочного чтения файла. Размер блока установлен в 64 байта.

vim myread1.c
-------------
/* myread1.c */
#include <stdlib.h>
#include <stdio.h>
#include <unistd.h>
#include <fcntl.h>
#include <sys/stat.h>
#include <sys/types.h>

#define BUFFER_SIZE	64

int main (int argc, char ** argv)
{
	int fd;
	ssize_t read_bytes;
	char buffer[BUFFER_SIZE+1];
	if (argc < 2)
	{
		fprintf (stderr, "Too few arguments\n");
		exit (1);
	}

	fd = open (argv[1], O_RDONLY);
	if (fd < 0)
	{
		fprintf (stderr, "Cannot open file\n");
		exit (1);
	}	
	
	while ((read_bytes = read (fd, buffer, BUFFER_SIZE)) > 0)
	{
		buffer[read_bytes] = 0; /* Null-terminator for C-string */
		fputs (buffer, stdout);
	}

	if (read_bytes < 0)
	{
		fprintf (stderr, "myread: Cannot read file\n");
		exit (1);
	}
	close (fd);
	exit (0);
}
-------------

Теперь можно примерно оценить и сравнить скорость работы двух примеров. 
Для этого надо выбрать в системе достаточно большой файл (бинарник ядра или видеофильм, например) и посмотреть на то, как быстро читаются эти файлы:
$ time ./myread /boot/vmlinuz > /dev/null
$ time ./myread1 /boot/vmlinuz > /dev/null

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

Системный вызов read(), объявленный в файле unistd.h, позволяет читать данные из файла.

В отличие от библиотечных функций файлового ввода-вывода, которые предоставляют возможность интерпретации считываемых данных.

Можно, например, записать в файл следующее содержимое:

2006

Теперь, используя библиотечные механизмы, можно читать файл по-разному:

fscanf (filep, "%s", buffer);

fscanf (filep, "%d", number);

Системный вызов read() читает данные в "сыром" виде, то есть как последовательность байт, без какой-либо интерпретации. Ниже представлен адаптированный прототип read().

vim unistd.h

------------

ssize_t read (int fd, void * buffer, size_t count);

------------

Первый аргумент - это файловый дескриптор. Здесь больше сказать нечего.

Второй аргумент - это указатель на область памяти, куда будут помещаться данные.

Третий аргумент - количество байт, которые функция read() будет пытаться прочитать из файла.

Возвращаемое значение - количество прочитанных байт, если чтение состоялось и -1, если произошла ошибка.

Хочу заметить, что если read() возвращает значение меньше count, то это не символизирует об ошибке.

Хочу сказать несколько слов о типах.

Тип size_t в Linux используется для хранения размеров блоков памяти.

Какой тип реально скрывается за size_t, зависит от архитектуры; как правило это unsigned long int или unsigned int.

Тип ssize_t (Signed SIZE Type) - это тот же size_t, только знаковый.

Используется, например, в тех случаях, когда нужно сообщить об ошибке, вернув отрицательный размер блока памяти. Системный вызов read() именно так и поступает.

Теперь напишем программу, которая просто читает файл и выводит его содержимое на экран. Имя файла будет передаваться в качестве аргумента (argv[1]).

Ниже приведен исходный код этой программы.

vim myread.c

------------

/* myread.c */

#include <stdlib.h>

#include <stdio.h>

#include <unistd.h>

#include <fcntl.h>

#include <sys/stat.h>

#include <sys/types.h>

int main (int argc, char ** argv)

{

int fd;

ssize_t ret;

char ch;

if (argc < 2)

{

fprintf (stderr, "Too few arguments\n");

exit (1);

}

fd = open (argv[1], O_RDONLY);

if (fd < 0)

{

fprintf (stderr, "Cannot open file\n");

exit (1);

}

while ((ret = read (fd, &ch, 1)) > 0)

{

putchar (ch);

}

if (ret < 0)

{

fprintf (stderr, "myread: Cannot read file\n");

exit (1);

}

close (fd);

exit (0);

}

------------

В этом примере используется укороченная версия open(), так как файл открывается только для чтения.

В качестве буфера (второй аргумент read()) мы передаем адрес переменной типа char.

По этому адресу будут считываться данные из файла (по одному байту за раз) и передаваться на стандартный вывод.

Цикл чтения файла заканчивается, когда read() возвращает нуль (нечего больше читать) или -1 (ошибка). Системный вызов close() закрывает файл.

Как можно заметить, в нашем примере системный вызов read() вызывается ровно столько раз, сколько байт содержится в файле.

Иногда это действительно нужно; но не здесь.

Чтение-запись посимвольным методом (как в нашем примере) значительно замедляет процесс ввода-вывода за счет многократных обращений к системным вызовам.

По этой же причине возрастает вероятность возникновения ошибки. Если нет действительной необходимости, файлы нужно читать блоками.

О том, какой размер блока предпочтительнее, будет рассказано в последующих главах книги.

Ниже приведен исходный код программы, которая делает то же самое, что и предыдущий пример, но с использованием блочного чтения файла. Размер блока установлен в 64 байта.

vim myread1.c

-------------

/* myread1.c */

#include <stdlib.h>

#include <stdio.h>

#include <unistd.h>

#include <fcntl.h>

#include <sys/stat.h>

#include <sys/types.h>

#define BUFFER_SIZE 64

int main (int argc, char ** argv)

{

int fd;

ssize_t read_bytes;

char buffer[BUFFER_SIZE+1];

if (argc < 2)

{

fprintf (stderr, "Too few arguments\n");

exit (1);

}

fd = open (argv[1], O_RDONLY);

if (fd < 0)

{

fprintf (stderr, "Cannot open file\n");

exit (1);

}

while ((read_bytes = read (fd, buffer, BUFFER_SIZE)) > 0)

{

buffer[read_bytes] = 0; /* Null-terminator for C-string */

fputs (buffer, stdout);

}

if (read_bytes < 0)

{

fprintf (stderr, "myread: Cannot read file\n");

exit (1);

}

close (fd);

exit (0);

}

-------------

Теперь можно примерно оценить и сравнить скорость работы двух примеров.

Для этого надо выбрать в системе достаточно большой файл (бинарник ядра или видеофильм, например) и посмотреть на то, как быстро читаются эти файлы:

$ time ./myread /boot/vmlinuz > /dev/null

$ time ./myread1 /boot/vmlinuz > /dev/null

Запись в файл: системный вызов write()

Для записи данных в файл используется системный вызов write(). 
Ниже представлен его прототип.
vim unistd.h
------------
ssize_t write (int fd, const void * buffer, size_t count);
------------

Как видите, прототип write() отличается от read() только спецификатором const во втором аргументе. 
В принципе write() выполняет процедуру, обратную read(): записывает count байтов из буфера buffer в файл с дескриптором fd, возвращая количество записанных байтов или -1 в случае ошибки. 
Так просто, что можно сразу переходить к примеру. 
За основу возьмем программу myread1 из предыдущего раздела.

vim rw.c
--------
/* rw.c */
#include <stdlib.h>
#include <stdio.h>
#include <unistd.h>	/* read(), write(), close() */
#include <fcntl.h>	/* open(), O_RDONLY */
#include <sys/stat.h>	/* S_IRUSR */
#include <sys/types.h>	/* mode_t */

#define BUFFER_SIZE	64

int main (int argc, char ** argv)
{
	int fd;
	ssize_t read_bytes;
	ssize_t written_bytes;
	char buffer[BUFFER_SIZE];
	if (argc < 2)
	{
		fprintf (stderr, "Too few arguments\n");
		exit (1);
	}

	fd = open (argv[1], O_RDONLY);
	if (fd < 0)
	{
		fprintf (stderr, "Cannot open file\n");
		exit (1);
	}	
	
	while ((read_bytes = read (fd, buffer, BUFFER_SIZE)) > 0)
	{		
		/* 1 == stdout */
		written_bytes = write (1, buffer, read_bytes);
		if (written_bytes != read_bytes)
		{
			fprintf (stderr, "Cannot write\n");
			exit (1);
		}
	}

	if (read_bytes < 0)
	{
		fprintf (stderr, "myread: Cannot read file\n");
		exit (1);
	}
	close (fd);
	exit (0);
}
--------

В этом примере нам уже не надо изощряться в попытках вставить нуль-терминатор в строку для записи, поскольку системный вызов write() не запишет большее количество байт, чем мы ему указали. 
В данном случае для демонстрации write() мы просто записывали данные в файл с дескриптором 1, то есть в стандартный вывод. Но прежде, 
чем переходить к чтению следующего раздела, попробуйте самостоятельно записать что-нибудь (при помощи write(), естественно) в обычный файл. 
Когда будете открывать файл для записи, обратите пожалуйста внимание на флаги O_TRUNC, O_CREAT и O_APPEND. Подумайте, все ли флаги сочетаются между собой по смыслу.

vim Makefile
------------
# Makefile for  rw.c

environ:   rw
        gcc -o rw rw.c

clean:
        rm -f  rw
-----------

Для записи данных в файл используется системный вызов write().

Ниже представлен его прототип.

vim unistd.h

------------

ssize_t write (int fd, const void * buffer, size_t count);

------------

Как видите, прототип write() отличается от read() только спецификатором const во втором аргументе.

В принципе write() выполняет процедуру, обратную read(): записывает count байтов из буфера buffer в файл с дескриптором fd, возвращая количество записанных байтов или -1 в случае ошибки.

Так просто, что можно сразу переходить к примеру.

За основу возьмем программу myread1 из предыдущего раздела.

vim rw.c

--------

/* rw.c */

#include <stdlib.h>

#include <stdio.h>

#include <unistd.h> /* read(), write(), close() */

#include <fcntl.h> /* open(), O_RDONLY */

#include <sys/stat.h> /* S_IRUSR */

#include <sys/types.h> /* mode_t */

#define BUFFER_SIZE 64

int main (int argc, char ** argv)

{

int fd;

ssize_t read_bytes;

ssize_t written_bytes;

char buffer[BUFFER_SIZE];

if (argc < 2)

{

fprintf (stderr, "Too few arguments\n");

exit (1);

}

fd = open (argv[1], O_RDONLY);

if (fd < 0)

{

fprintf (stderr, "Cannot open file\n");

exit (1);

}

while ((read_bytes = read (fd, buffer, BUFFER_SIZE)) > 0)

{

/* 1 == stdout */

written_bytes = write (1, buffer, read_bytes);

if (written_bytes != read_bytes)

{

fprintf (stderr, "Cannot write\n");

exit (1);

}

if (read_bytes < 0)

{

fprintf (stderr, "myread: Cannot read file\n");

exit (1);

}

close (fd);

exit (0);

}

--------

В этом примере нам уже не надо изощряться в попытках вставить нуль-терминатор в строку для записи, поскольку системный вызов write() не запишет большее количество байт, чем мы ему указали.

В данном случае для демонстрации write() мы просто записывали данные в файл с дескриптором 1, то есть в стандартный вывод. Но прежде,

чем переходить к чтению следующего раздела, попробуйте самостоятельно записать что-нибудь (при помощи write(), естественно) в обычный файл.

Когда будете открывать файл для записи, обратите пожалуйста внимание на флаги O_TRUNC, O_CREAT и O_APPEND. Подумайте, все ли флаги сочетаются между собой по смыслу.

vim Makefile

------------

# Makefile for rw.c

environ: rw

gcc -o rw rw.c

clean:

rm -f rw

-----------

Произвольный доступ: системный вызов lseek()

Как уже говорилось, с каждым открытым файлом связано число, указывающее на текущую позицию чтения-записи. 
При открытии файла позиция равна нулю. Каждый вызов read() или write() увеличивает текущую позицию на значение, равное числу прочитанных или записанных байт. 
Благодаря этому механизму, каждый повторный вызов read() читает следующие данные, и каждый повторный write() записывает данные в продолжение предыдущих, а не затирает старые. 
Такой механизм последовательного доступа очень удобен, однако иногда требуется получить произвольный доступ к содержимому файла, чтобы, например, прочитать или записать файл заново.
Для изменения текущей позиции чтения-записи используется системный вызов lseek(). 
Ниже представлен его прототип.
vim unistd.h
------------
off_t lseek (int fd, ott_t offset, int against);
------------
Первый аргумент, как всегда, - файловый дескриптор. 
Второй аргумент - смещение, как положительное (вперед), так и отрицательное (назад). 
Третий аргумент обычно передается в виде одной из трех констант SEEK_SET, SEEK_CUR и SEEK_END, которые показывают, от какого места отсчитывается смещение. 
SEEK_SET - означает начало файла, 
SEEK_CUR - текущая позиция, 
SEEK_END - конец файла. 

Рассмотрим следующие вызовы:
lseek (fd, 0, SEEK_SET);
lseek (fd, 20, SEEK_CUR);
lseek (fd, -10, SEEK_END);

Первый вызов устанавливает текущую позицию в начало файла. 
Второй вызов смещает позицию вперед на 20 байт. 
В третьем случае текущая позиция перемещается на 10 байт назад относительно конца файла.

В случае удачного завершения, lseek() возвращает значение установленной "новой" позиции относительно начала файла. 
В случае ошибки возвращается -1.

Я долго думал, какой бы пример придумать, чтобы продемонстрировать работу lseek() наглядным образом. 
Наиболее подходящим примером мне показалась идея создания программы рисования символами. 
Программа оказалась не слишком простой, однако если вы сможете разобраться в ней, то можете считать, что успешно овладели азами низкоуровневого ввода-вывода Linux. 
Ниже представлен исходный код этой программы.

vim draw.c
----------
/* draw.c */
#include <stdlib.h>
#include <stdio.h>
#include <unistd.h>
#include <fcntl.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <string.h>	/* memset() */

#define N_ROWS	15	/* Image height */
#define N_COLS	40	/* Image width */
#define FG_CHAR	'O'	/* Foreground character */
#define IMG_FN	"image"	/* Image filename */

#define N_MIN(A,B) ((A)<(B)?(A):(B))
#define N_MAX(A,B) ((A)>(B)?(A):(B))

static char buffer[N_COLS];

void init_draw (int fd)
{	
	ssize_t bytes_written = 0;
	memset (buffer, ' ', N_COLS);
	buffer [N_COLS] = '\n';
	while (bytes_written < (N_ROWS * (N_COLS+1)))
		bytes_written += write (fd, buffer, N_COLS+1);
}

void draw_point (int fd, int x, int y)
{
	char ch = FG_CHAR;
	lseek (fd, y * (N_COLS+1) + x, SEEK_SET);
	write (fd, &ch, 1);
}

void draw_hline (int fd, int y, int x1, int x2)
{	
	size_t bytes_write = abs (x2-x1) + 1;
	memset (buffer, FG_CHAR, bytes_write);
	lseek (fd, y * (N_COLS+1) + N_MIN (x1, x2), SEEK_SET);
	write (fd, buffer, bytes_write);
}

void draw_vline (int fd, int x, int y1, int y2)
{
	int i = N_MIN(y1, y2);
	while (i <= N_MAX(y2, y1)) draw_point (fd, x, i++);
}

int main (void)
{
	int a, b, c, i = 0;
	char ch;
	int fd = open (IMG_FN, O_WRONLY | O_CREAT | O_TRUNC, 0644);
	if (fd < 0) {
		fprintf (stderr, "Cannot open file\n");
		exit (1);
	}

	init_draw (fd);
	char * icode[] = { "v 1 1 11", "v 11 7 11", "v 14 5 11", 
	"v 18 6 11", "v 21 5 10", "v 25 5 10", "v 29 5 6", "v 33 5 6", 
	"v 29 10 11", "v 33 10 11", "h 11 1 8", "h 5 16 17", 
	"h 11 22 24", "p 11 5 0", "p 15 6 0", "p 26 11 0", "p 30 7 0", 
	"p 32 7 0", "p 31 8 0", "p 30 9 0", "p 32 9 0", NULL };	

	while (icode[i] != NULL) {
	sscanf (icode[i], "%c %d %d %d", &ch, &a, &b, &c);
		switch (ch) {
			case 'v': draw_vline (fd, a, b, c); break;
			case 'h': draw_hline (fd, a, b, c); break;
			case 'p': draw_point (fd, a, b); break;
			default: abort();	
		}
		i++;
	}
	close (fd);
	exit (0);
}
----------

Теперь разберемся, как работает эта программа. 
Изначально "полотно" заполняется пробелами. 
Функция init_draw() построчно записывает в файл пробелы, чтобы получился "холст", размером N_ROWS на N_COLS. 
Массив строк icode в функции main() - это набор команд рисования. 
Команда начинается с одной из трех литер: 'v' - нарисовать вертикальную линию, 'h' - нарисовать горизонтальную линию, 'p' - нарисовать точку. 
После каждой такой литеры следуют три числа. 
В случае вертикальной линии первое число - фиксированная координата X, а два других числа - это начальная и конечная координаты Y. 
В случае горизонтальной линии фиксируется координата Y (первое число). 
Два остальных числа - начальная координата X и конечная координата X. 
При рисовании точки используются только два первых числа: координата X и координата Y. 
Итак, функция draw_vline() рисует вертикальную линию, функция draw_hline() рисует горизонтальную линию, а draw_point() рисует точку.

Функция init_draw() пишет в файл N_ROWS строк, каждая из которых содержит N_COLS пробелов, заканчивающихся переводом строки. 
Это процедура подготовки "холста".

Функция draw_point() вычисляет позицию (исходя из значений координат), перемещает туда текущую позицию ввода-вывода файла, и записывает в эту позицию символ (FG_CHAR), которым мы рисуем "картину".

Функция draw_hline() заполняет часть строки символами FG_CHAR. Так получается горизонтальная линия. 
Функция draw_vline() работает иначе. Чтобы записать вертикальную линию, нужно записывать по одному символу и каждый раз "перескакивать" на следующую строку. 
Эта функция работает медленнее, чем draw_hline(), но иначе мы не можем.

Полученное изображение записывается в файл image. 
Будьте внимательны: чтобы разгрузить исходный код, из программы исключены многие проверки (read(), write(), close(), диапазон координат и проч.). 
Попробуйте включить эти проверки самостоятельно.

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

Как уже говорилось, с каждым открытым файлом связано число, указывающее на текущую позицию чтения-записи.

При открытии файла позиция равна нулю. Каждый вызов read() или write() увеличивает текущую позицию на значение, равное числу прочитанных или записанных байт.

Благодаря этому механизму, каждый повторный вызов read() читает следующие данные, и каждый повторный write() записывает данные в продолжение предыдущих, а не затирает старые.

Такой механизм последовательного доступа очень удобен, однако иногда требуется получить произвольный доступ к содержимому файла, чтобы, например, прочитать или записать файл заново.

Для изменения текущей позиции чтения-записи используется системный вызов lseek().

Ниже представлен его прототип.

vim unistd.h

------------

off_t lseek (int fd, ott_t offset, int against);

------------

Первый аргумент, как всегда, - файловый дескриптор.

Второй аргумент - смещение, как положительное (вперед), так и отрицательное (назад).

Третий аргумент обычно передается в виде одной из трех констант SEEK_SET, SEEK_CUR и SEEK_END, которые показывают, от какого места отсчитывается смещение.

SEEK_SET - означает начало файла,

SEEK_CUR - текущая позиция,

SEEK_END - конец файла.

Рассмотрим следующие вызовы:

lseek (fd, 0, SEEK_SET);

lseek (fd, 20, SEEK_CUR);

lseek (fd, -10, SEEK_END);

Первый вызов устанавливает текущую позицию в начало файла.

Второй вызов смещает позицию вперед на 20 байт.

В третьем случае текущая позиция перемещается на 10 байт назад относительно конца файла.

В случае удачного завершения, lseek() возвращает значение установленной "новой" позиции относительно начала файла.

В случае ошибки возвращается -1.

Я долго думал, какой бы пример придумать, чтобы продемонстрировать работу lseek() наглядным образом.

Наиболее подходящим примером мне показалась идея создания программы рисования символами.

Программа оказалась не слишком простой, однако если вы сможете разобраться в ней, то можете считать, что успешно овладели азами низкоуровневого ввода-вывода Linux.

Ниже представлен исходный код этой программы.

vim draw.c

----------

/* draw.c */

#include <stdlib.h>

#include <stdio.h>

#include <unistd.h>

#include <fcntl.h>

#include <sys/types.h>

#include <sys/stat.h>

#include <string.h> /* memset() */

#define N_ROWS 15 /* Image height */

#define N_COLS 40 /* Image width */

#define FG_CHAR 'O' /* Foreground character */

#define IMG_FN "image" /* Image filename */

#define N_MIN(A,B) ((A)<(B)?(A):(B))

#define N_MAX(A,B) ((A)>(B)?(A):(B))

static char buffer[N_COLS];

void init_draw (int fd)

{

ssize_t bytes_written = 0;

memset (buffer, ' ', N_COLS);

buffer [N_COLS] = '\n';

while (bytes_written < (N_ROWS * (N_COLS+1)))

bytes_written += write (fd, buffer, N_COLS+1);

}

void draw_point (int fd, int x, int y)

{

char ch = FG_CHAR;

lseek (fd, y * (N_COLS+1) + x, SEEK_SET);

write (fd, &ch, 1);

}

void draw_hline (int fd, int y, int x1, int x2)

{

size_t bytes_write = abs (x2-x1) + 1;

memset (buffer, FG_CHAR, bytes_write);

lseek (fd, y * (N_COLS+1) + N_MIN (x1, x2), SEEK_SET);

write (fd, buffer, bytes_write);

}

void draw_vline (int fd, int x, int y1, int y2)

{

int i = N_MIN(y1, y2);

while (i <= N_MAX(y2, y1)) draw_point (fd, x, i++);

}

int main (void)

{

int a, b, c, i = 0;

char ch;

int fd = open (IMG_FN, O_WRONLY | O_CREAT | O_TRUNC, 0644);

if (fd < 0) {

fprintf (stderr, "Cannot open file\n");

exit (1);

}

init_draw (fd);

char * icode[] = { "v 1 1 11", "v 11 7 11", "v 14 5 11",

"v 18 6 11", "v 21 5 10", "v 25 5 10", "v 29 5 6", "v 33 5 6",

"v 29 10 11", "v 33 10 11", "h 11 1 8", "h 5 16 17",

"h 11 22 24", "p 11 5 0", "p 15 6 0", "p 26 11 0", "p 30 7 0",

"p 32 7 0", "p 31 8 0", "p 30 9 0", "p 32 9 0", NULL };

while (icode[i] != NULL) {

sscanf (icode[i], "%c %d %d %d", &ch, &a, &b, &c);

switch (ch) {

case 'v': draw_vline (fd, a, b, c); break;

case 'h': draw_hline (fd, a, b, c); break;

case 'p': draw_point (fd, a, b); break;

default: abort();

}

i++;

}

close (fd);

exit (0);

}

----------

Теперь разберемся, как работает эта программа.

Изначально "полотно" заполняется пробелами.

Функция init_draw() построчно записывает в файл пробелы, чтобы получился "холст", размером N_ROWS на N_COLS.

Массив строк icode в функции main() - это набор команд рисования.

Команда начинается с одной из трех литер: 'v' - нарисовать вертикальную линию, 'h' - нарисовать горизонтальную линию, 'p' - нарисовать точку.

После каждой такой литеры следуют три числа.

В случае вертикальной линии первое число - фиксированная координата X, а два других числа - это начальная и конечная координаты Y.

В случае горизонтальной линии фиксируется координата Y (первое число).

Два остальных числа - начальная координата X и конечная координата X.

При рисовании точки используются только два первых числа: координата X и координата Y.

Итак, функция draw_vline() рисует вертикальную линию, функция draw_hline() рисует горизонтальную линию, а draw_point() рисует точку.

Функция init_draw() пишет в файл N_ROWS строк, каждая из которых содержит N_COLS пробелов, заканчивающихся переводом строки.

Это процедура подготовки "холста".

Функция draw_point() вычисляет позицию (исходя из значений координат), перемещает туда текущую позицию ввода-вывода файла, и записывает в эту позицию символ (FG_CHAR), которым мы рисуем "картину".

Функция draw_hline() заполняет часть строки символами FG_CHAR. Так получается горизонтальная линия.

Функция draw_vline() работает иначе. Чтобы записать вертикальную линию, нужно записывать по одному символу и каждый раз "перескакивать" на следующую строку.

Эта функция работает медленнее, чем draw_hline(), но иначе мы не можем.

Полученное изображение записывается в файл image.

Будьте внимательны: чтобы разгрузить исходный код, из программы исключены многие проверки (read(), write(), close(), диапазон координат и проч.).

Попробуйте включить эти проверки самостоятельно.

Основы многозадачности в Linux

На экран будут выведен список всех работающих в системе процессов:
ps -e
ps -e --no-headers | nl | tail -n 1
ps -e --forest

Первое число - это количество работающих в системе процессов. 
Пользователи KDE могут воспользоваться программой kpm(на самом деле есть еще "System Monitor/plusma-system-monitor"), 
а пользователи Gnome - программой gnome-system-monitor для получения информации о процессах. 
На то он и Linux, чтобы позволять пользователю делать одно и то же разными способами.

Возникает вопрос: "Что такое процесс?". 
Процессы в Linux, как и файлы, являются аксиоматическими понятиями. 
Иногда процесс отождествляют с запущенной программой, однако это не всегда так. 
Будем считать, что процесс - это рабочая единица системы, которая выполняет что-то. 
Многозадачность - это возможность одновременного сосуществования нескольких процессов в одной системе.

Linux - многозадачная операционная система. 
Это означает что процессы в ней работают одновременно. 
Естественно, это условная формулировка. 
Ядро Linux постоянно переключает процессы, то есть время от времени дает каждому из них сколько-нибудь процессорного времени. 
Переключение происходит довольно быстро, поэтому нам кажется, что процессы работают одновременно.

Одни процессы могут порождать другие процессы, образовывая древовидную структуру. 
Порождающие процессы называются родителями или родительскими процессами, а порожденные - потомками или дочерними процессами. 
На вершине этого "дерева" находится процесс init, который порождается автоматически ядром в процесссе загрузки системы.

К каждому процессу в системе привязана пара целых неотрицательных чисел: идентификатор процесса PID (Process IDentifier) и идентификатор родительского процесса PPID (Parent Process IDentifier). 
Для каждого процесса PID является уникальным (в конкретный момент времени), а PPID равен идентификатору процесса-родителя. 
Если ввести в оболочку команду ps -ef, то на экран будет выведен список процессов со значениями их PID и PPID (вторая и третья колонки соотв.).

Надо отметить, что процесс init (в современных дистрибутивах на 2022 год это будет скорее всего systemd) всегда имеет идентификатор 1 и PPID равный 0. 
Хотя в реальности процесса с идентификатором 0 не существует. 
Дерево процессов можно также приставить в наглядном виде при помощи опции --forest программы ps.
Если вызвать программу ps без аргументов, то будет выведен список процессов, принадлежащих текущей группе, то есть работающих под текущим терминалом. 
О том, что такое терминалы и группы процессов, будет рассказано в последующих главах.

На экран будут выведен список всех работающих в системе процессов:

ps -e

ps -e --no-headers | nl | tail -n 1

ps -e --forest

Первое число - это количество работающих в системе процессов.

Пользователи KDE могут воспользоваться программой kpm(на самом деле есть еще "System Monitor/plusma-system-monitor"),

а пользователи Gnome - программой gnome-system-monitor для получения информации о процессах.

На то он и Linux, чтобы позволять пользователю делать одно и то же разными способами.

Возникает вопрос: "Что такое процесс?".

Процессы в Linux, как и файлы, являются аксиоматическими понятиями.

Иногда процесс отождествляют с запущенной программой, однако это не всегда так.

Будем считать, что процесс - это рабочая единица системы, которая выполняет что-то.

Многозадачность - это возможность одновременного сосуществования нескольких процессов в одной системе.

Linux - многозадачная операционная система.

Это означает что процессы в ней работают одновременно.

Естественно, это условная формулировка.

Ядро Linux постоянно переключает процессы, то есть время от времени дает каждому из них сколько-нибудь процессорного времени.

Переключение происходит довольно быстро, поэтому нам кажется, что процессы работают одновременно.

Одни процессы могут порождать другие процессы, образовывая древовидную структуру.

Порождающие процессы называются родителями или родительскими процессами, а порожденные - потомками или дочерними процессами.

На вершине этого "дерева" находится процесс init, который порождается автоматически ядром в процесссе загрузки системы.

К каждому процессу в системе привязана пара целых неотрицательных чисел: идентификатор процесса PID (Process IDentifier) и идентификатор родительского процесса PPID (Parent Process IDentifier).

Для каждого процесса PID является уникальным (в конкретный момент времени), а PPID равен идентификатору процесса-родителя.

Если ввести в оболочку команду ps -ef, то на экран будет выведен список процессов со значениями их PID и PPID (вторая и третья колонки соотв.).

Надо отметить, что процесс init (в современных дистрибутивах на 2022 год это будет скорее всего systemd) всегда имеет идентификатор 1 и PPID равный 0.

Хотя в реальности процесса с идентификатором 0 не существует.

Дерево процессов можно также приставить в наглядном виде при помощи опции --forest программы ps.

Если вызвать программу ps без аргументов, то будет выведен список процессов, принадлежащих текущей группе, то есть работающих под текущим терминалом.

О том, что такое терминалы и группы процессов, будет рассказано в последующих главах.

Использование getpid() и getppid()

Процесс может узнать свой идентификатор (PID), а также родительский идентификатор (PPID) при помощи системных вызовов getpid() и getppid().

Системные вызовы getpid() и getppid() имеют следующие прототипы:
pid_t getpid (void);
pid_t getppid (void);

Для использования getpid() и getppid() в программу должны быть включены директивой #include заголовочные файлы unistd.h и sys/types.h (для типа pid_t). 
Вызов getpid() возвращает идентификатор текущего процесса (PID), а getppid() возвращает идентификатор родителя (PPID). 
pid_t - это целый тип, размерность которого зависит от конкретной системы. Значениями этого типа можно оперировать как обычными целыми числами типа int.


Рассмотрим теперь простую программу, которая выводит на экран PID и PPID, а затем "замирает" до тех пор, пока пользователь не нажмет <Enter>.
vim getpid.c 
------------
/* getpid.c */

#include <stdio.h>
#include <unistd.h>
#include <sys/types.h>

int main (void)
{
        pid_t pid, ppid;

        pid = getpid ();
        ppid = getppid ();

        printf ("PID: %d\n", pid);
        printf ("PPID: %d\n", ppid);

        fprintf (stderr, "Press <Enter> to exit...");
        getchar ();
        return 0;
}
------------

Проверим теперь, как работает эта программа. 
Для этого откомпилируем и запустим ее:
$ gcc -o getpid getpid.c
$ ./getpid
PID: 27784
PPID: 6814
Press <Enter> to exit...

Теперь, не нажимая <Enter>, откроем другое терминальное окно и проверим, правильность работы системных вызовов getpid() и getppid():


$ ps -ef | grep getpid
nn       27784  6814  0 01:05 pts/0    00:00:00 ./getpid
nn       28249 28212  0 01:07 pts/1    00:00:00 grep getpid

Процесс может узнать свой идентификатор (PID), а также родительский идентификатор (PPID) при помощи системных вызовов getpid() и getppid().

Системные вызовы getpid() и getppid() имеют следующие прототипы:

pid_t getpid (void);

pid_t getppid (void);

Для использования getpid() и getppid() в программу должны быть включены директивой #include заголовочные файлы unistd.h и sys/types.h (для типа pid_t).

Вызов getpid() возвращает идентификатор текущего процесса (PID), а getppid() возвращает идентификатор родителя (PPID).

pid_t - это целый тип, размерность которого зависит от конкретной системы. Значениями этого типа можно оперировать как обычными целыми числами типа int.

Рассмотрим теперь простую программу, которая выводит на экран PID и PPID, а затем "замирает" до тех пор, пока пользователь не нажмет <Enter>.

vim getpid.c

------------

/* getpid.c */

#include <stdio.h>

#include <unistd.h>

#include <sys/types.h>

int main (void)

{

pid_t pid, ppid;

pid = getpid ();

ppid = getppid ();

printf ("PID: %d\n", pid);

printf ("PPID: %d\n", ppid);

fprintf (stderr, "Press <Enter> to exit...");

getchar ();

return 0;

}

------------

Проверим теперь, как работает эта программа.

Для этого откомпилируем и запустим ее:

$ gcc -o getpid getpid.c

$ ./getpid

PID: 27784

PPID: 6814

Press <Enter> to exit...

Теперь, не нажимая <Enter>, откроем другое терминальное окно и проверим, правильность работы системных вызовов getpid() и getppid():

$ ps -ef | grep getpid

nn 27784 6814 0 01:05 pts/0 00:00:00 ./getpid

nn 28249 28212 0 01:07 pts/1 00:00:00 grep getpid

Порождение процесса

Как уже говорилось ранее, процесс в Linux - это нечто, выполняющее программный код. 
Этот код называют образом процесса (process image). 
Рассмотрим простой пример, когда вы находитесь в оболочке bash и выполняете команду ls. 
В этом случае происходит следующее. 
Образ программы-оболочки bash выполняется в процессе #1. 
Затем вы вводите команду ls, и оболочка определяет, что нужно запустить внешнюю программу (/bin/ls). 
Тогда процесс #1 создает свою почти точную копию, процесс #2, который выполняет тот же самый программный код.
 После этого процесс #2 заменяет свой текущий образ (оболочку) другим образом (программой /bin/ls). 
В итоге получаем отдельный процесс, выполняющий отдельную программу.

"К чему такая путаница?" - спросите вы. 
Зачем сначала "клонировать" процесс, а затем заменять в нем образ? 
Не проще ли все делать одной-единственной операцией? 
Ответы на подобные вопросы дать тяжело, но, как правило, с опытом приходит понимание того, что подобная схема является одной из граней красоты Unix-систем.

Попробуем все-таки разобраться, почему в Unix-системах порождение процесса отделено от запуска программы. 
Для этого выясним, что же происходит с данными при "клонировании" процесса. 
Итак, каждый процесс хранит в своей памяти различные данные (переменные, файловые дескрипторы и проч.). 
При порождении нового процесса, потомок получает точную копию данных родителя. 
Но как только новый процесс создан, родитель и потомок уже распоряжаются своими копиями по своему усмотрению. 
Это позволяет распараллелить программу, заставив ее выполнять какой-нибудь трудоемкий алгоритм в отдельном процессе.

Может быть кто-то из вас слышал про то, что в Linux есть потоки, которые позволяют в одной программе реализовывать параллельное выполнение нескольких функций. 
Опять же возникает вопрос: "Если есть потоки, зачем вся эта головомойка с клонированиями и заменой образов?". 
А дело в том, что потоки работают с общими данными и выполняются в одной программе. 
Если в потоке произошло что-то страшное, то это, как правило, отражается на всей программе в целом. 
Хотя технически потоки реализованы в Linux на базе процессов, но процесс все же является более независимой единицей. 
Крах дочернего процесса никак не отражается на работе родителя, если сам родитель этого не пожелает.

По правде сказать, программисты редко прибегают к методике распараллеливания одной программы при помощи процессов. 
Но суть в том, что в Unix-системах программист обладает полной свободой выбора стратегии многозадачности. 
И это здорово!

Разберемся теперь с тем, как на практике происходит "клонирование" процессов. Для этого используется простой системный вызов fork(), прототип которого находится в файле unistd.h:
pid_t fork (void);

Если fork() завершается с ошибкой, то возвращается -1. 
Это редкий случай, связанный с нехваткой памяти или превышением лимита на количество процессов. 
Но если разделение произошло, то программе нужно позаботиться об идентификации своего "Я", то есть определении того, где родитель, а где потомок. 
Это делается очень просто: в родительский процесс fork() возвращает идентификатор потомка, а потомок получает 0. Следующий пример демонстрирует то, как это происходит.

vim fork01.c
------------
/* fork01.c */
#include <stdio.h>
#include <sys/types.h>
#include <unistd.h>

int main (void)
{
        pid_t pid = fork ();

        if (pid == 0) {
                printf ("child (pid=%d)\n", getpid());
        } else {
                printf ("parent (pid=%d, child's pid=%d)\n", getpid(), pid);
        }

        return 0;
}
------------

Проверяем, что получилось:
$ gcc -o fork01 fork01.c
$ ./fork01
child (pid=21026)
parent (pid=21025, child's pid=21026)

Обратите внимание, что поскольку после вызова fork() программу выполняли уже два независимых процесса, 
то сообщение родителя вполне могло бы появиться первым.

Как уже говорилось ранее, процесс в Linux - это нечто, выполняющее программный код.

Этот код называют образом процесса (process image).

Рассмотрим простой пример, когда вы находитесь в оболочке bash и выполняете команду ls.

В этом случае происходит следующее.

Образ программы-оболочки bash выполняется в процессе #1.

Затем вы вводите команду ls, и оболочка определяет, что нужно запустить внешнюю программу (/bin/ls).

Тогда процесс #1 создает свою почти точную копию, процесс #2, который выполняет тот же самый программный код.

После этого процесс #2 заменяет свой текущий образ (оболочку) другим образом (программой /bin/ls).

В итоге получаем отдельный процесс, выполняющий отдельную программу.

"К чему такая путаница?" - спросите вы.

Зачем сначала "клонировать" процесс, а затем заменять в нем образ?

Не проще ли все делать одной-единственной операцией?

Ответы на подобные вопросы дать тяжело, но, как правило, с опытом приходит понимание того, что подобная схема является одной из граней красоты Unix-систем.

Попробуем все-таки разобраться, почему в Unix-системах порождение процесса отделено от запуска программы.

Для этого выясним, что же происходит с данными при "клонировании" процесса.

Итак, каждый процесс хранит в своей памяти различные данные (переменные, файловые дескрипторы и проч.).

При порождении нового процесса, потомок получает точную копию данных родителя.

Но как только новый процесс создан, родитель и потомок уже распоряжаются своими копиями по своему усмотрению.

Это позволяет распараллелить программу, заставив ее выполнять какой-нибудь трудоемкий алгоритм в отдельном процессе.

Может быть кто-то из вас слышал про то, что в Linux есть потоки, которые позволяют в одной программе реализовывать параллельное выполнение нескольких функций.

Опять же возникает вопрос: "Если есть потоки, зачем вся эта головомойка с клонированиями и заменой образов?".

А дело в том, что потоки работают с общими данными и выполняются в одной программе.

Если в потоке произошло что-то страшное, то это, как правило, отражается на всей программе в целом.

Хотя технически потоки реализованы в Linux на базе процессов, но процесс все же является более независимой единицей.

Крах дочернего процесса никак не отражается на работе родителя, если сам родитель этого не пожелает.

По правде сказать, программисты редко прибегают к методике распараллеливания одной программы при помощи процессов.

Но суть в том, что в Unix-системах программист обладает полной свободой выбора стратегии многозадачности.

И это здорово!

Разберемся теперь с тем, как на практике происходит "клонирование" процессов. Для этого используется простой системный вызов fork(), прототип которого находится в файле unistd.h:

pid_t fork (void);

Если fork() завершается с ошибкой, то возвращается -1.

Это редкий случай, связанный с нехваткой памяти или превышением лимита на количество процессов.

Но если разделение произошло, то программе нужно позаботиться об идентификации своего "Я", то есть определении того, где родитель, а где потомок.

Это делается очень просто: в родительский процесс fork() возвращает идентификатор потомка, а потомок получает 0. Следующий пример демонстрирует то, как это происходит.

vim fork01.c

------------

/* fork01.c */

#include <stdio.h>

#include <sys/types.h>

#include <unistd.h>

int main (void)

{

pid_t pid = fork ();

if (pid == 0) {

printf ("child (pid=%d)\n", getpid());

} else {

printf ("parent (pid=%d, child's pid=%d)\n", getpid(), pid);

}

return 0;

}

------------

Проверяем, что получилось:

$ gcc -o fork01 fork01.c

$ ./fork01

child (pid=21026)

parent (pid=21025, child's pid=21026)

Обратите внимание, что поскольку после вызова fork() программу выполняли уже два независимых процесса,

то сообщение родителя вполне могло бы появиться первым.

Замена образа процесса

Итак, теперь мы умеем порождать процессы. 
Научимся теперь заменять образ текущего процесса другой программой. 
Для этих целей используется системный вызов execve(), который объявлен в заголовочном файле unistd.h вот так:
vim unistd.h
------------
int execve (const char * path, char const * argv[], char * const envp[]);
------------

Все очень просто: системный вызов execve() заменяет текущий образ процесса программой из файла с именем path, набором аргументов argv и окружением envp. 
Здесь следует только учитывать, что path - это не просто имя программы, а путь к ней. 
Иными словами, чтобы запустить ls, нужно в первом аргументе указать "/bin/ls".

Массивы строк argv и envp обязательно должны заканчиваться элементом NULL. 
Кроме того, следует помнить, что первый элемент массива argv (argv[0]) - это имя программы или что-либо иное. 
Непосредственные аргументы программы отсчитываются от элемента с номером 1.

В случае успешного завершения execve() ничего не возвращает, поскольку новая программа получает полное и безвозвратное управление текущим процессом.
Если произошла ошибка, то по традиции возвращается -1.

Рассмотрим теперь пример программы, которая заменяет свой образ другой программой.

vim execve01.c
--------------
/* execve01.c */
#include <unistd.h>
#include <stdio.h>

int main (void)
{
        printf ("pid=%d\n", getpid ());
        execve ("/bin/cat", NULL, NULL);

        return 0;
}
--------------

Итак, данная программа выводит свой PID и передает безвозвратное управление программе cat без аргументов и без окружения. 


Проверяем:
$ gcc -o execve01 execve01.c
$ ./execve01
pid=30150

Программа вывела идентификатор процесса и замерла в смиренном ожидании. Откроем теперь другое терминальное окно и проверим, что же творится с нашим процессом:


$ ps -e | grep 30150
30150 pts/3    00:00:00 cat

Итак, мы убедились, что теперь процесс 30150 выполняет программа cat. 
Теперь можно вернуться в исходное окно и нажатием Ctrl+D завершить работу cat.

И, наконец, следующий пример демонстрирует запуск программы в отдельном процессе.

vim forkexec01.c
----------------
/* forkexec01.c */
#include <unistd.h>
#include <stdio.h>

extern char ** environ;

int main (void)
{
        char * echo_args[] = { "echo", "child", NULL };

        if (!fork ()) {
                execve ("/bin/echo", echo_args, environ);
                fprintf (stderr, "an error occured\n");
                return 1;
        }

        printf ("parent");
        return 0;
}
----------------

Проверяем:
$ gcc -o forkexec01 forkexec01.c
$ ./forkexec01
parent
child

Обратите внимание, что поскольку execve() не может возвращать ничего кроме -1, то для обработки возможной ошибки вовсе не обязательно создавать ветвление. 
Иными словами, если вызов execve() возвратил что-то, то это однозначно ошибка.

Итак, теперь мы умеем порождать процессы.

Научимся теперь заменять образ текущего процесса другой программой.

Для этих целей используется системный вызов execve(), который объявлен в заголовочном файле unistd.h вот так:

vim unistd.h

------------

int execve (const char * path, char const * argv[], char * const envp[]);

------------

Все очень просто: системный вызов execve() заменяет текущий образ процесса программой из файла с именем path, набором аргументов argv и окружением envp.

Здесь следует только учитывать, что path - это не просто имя программы, а путь к ней.

Иными словами, чтобы запустить ls, нужно в первом аргументе указать "/bin/ls".

Массивы строк argv и envp обязательно должны заканчиваться элементом NULL.

Кроме того, следует помнить, что первый элемент массива argv (argv[0]) - это имя программы или что-либо иное.

Непосредственные аргументы программы отсчитываются от элемента с номером 1.

В случае успешного завершения execve() ничего не возвращает, поскольку новая программа получает полное и безвозвратное управление текущим процессом.

Если произошла ошибка, то по традиции возвращается -1.

Рассмотрим теперь пример программы, которая заменяет свой образ другой программой.

vim execve01.c

--------------

/* execve01.c */

#include <unistd.h>

#include <stdio.h>

int main (void)

{

printf ("pid=%d\n", getpid ());

execve ("/bin/cat", NULL, NULL);

return 0;

}

--------------

Итак, данная программа выводит свой PID и передает безвозвратное управление программе cat без аргументов и без окружения.

Проверяем:

$ gcc -o execve01 execve01.c

$ ./execve01

pid=30150

Программа вывела идентификатор процесса и замерла в смиренном ожидании. Откроем теперь другое терминальное окно и проверим, что же творится с нашим процессом:

$ ps -e | grep 30150

30150 pts/3 00:00:00 cat

Итак, мы убедились, что теперь процесс 30150 выполняет программа cat.

Теперь можно вернуться в исходное окно и нажатием Ctrl+D завершить работу cat.

И, наконец, следующий пример демонстрирует запуск программы в отдельном процессе.

vim forkexec01.c

----------------

/* forkexec01.c */

#include <unistd.h>

#include <stdio.h>

extern char ** environ;

int main (void)

{

char * echo_args[] = { "echo", "child", NULL };

if (!fork ()) {

execve ("/bin/echo", echo_args, environ);

fprintf (stderr, "an error occured\n");

return 1;

}

printf ("parent");

return 0;

}

----------------

Проверяем:

$ gcc -o forkexec01 forkexec01.c

$ ./forkexec01

parent

child

Обратите внимание, что поскольку execve() не может возвращать ничего кроме -1, то для обработки возможной ошибки вовсе не обязательно создавать ветвление.

Иными словами, если вызов execve() возвратил что-то, то это однозначно ошибка.

Таблица 1. Флаги общего режима

Флаг	Восьмиричное представление	RWX-представление
S_IRWXU	00700	rwx — —
S_IRUSR	00400	r— — —
S_IREAD	00400	r— — —
S_IWUSR	00200	-w- — —
S_IWRITE	00200	-w- — —
S_IXUSR	00100	—x — —
S_IEXEC	00100	—x — —
S_IRWXG	00070	— rwx —
S_IRGRP	00040	— r— —
S_IWGRP	00020	— -w- —
S_IXGRP	00010	— —x —
S_IRWXO	00007	— — rwx
S_IROTH	00004	— — r—
S_IWOTH	00002	— — -w-
S_IXOTH	00001	— — —x

Таблица 2. Флаги расширенного режима

Флаг	Восьмиричное представление	Описание
S_IFMT	0170000	Двоичная маска определения типа файла (побитовое ИЛИ всех следующих ниже флагов)
S_IFDIR	0040000	Каталог
S_IFCHR	0020000	Символьное устройство
S_IFBLK	0060000	Блочное устройство
S_IFREG	0100000	Обычный файл
S_IFIFO	0010000	Канал FIFO
S_IFLNK	0120000	Символическая ссылка

Таблица 3. Дополнительные флаги

Флаг	Восьмиричное представление	Описание
S_ISUID	0004000	Бит SETUID
S_ISGID	0002000	Бит SETGID
S_ISVTX	0001000	Липкий (sticky) бит

Таблица 4. Флаги режима открытия файла

Флаг	Описание
O_RDONLY	Только чтение (0)
O_WRONLY	Только запись (1)
O_RDWR	Чтение и запись (2)
O_CREAT	Создать файл, если не существует
O_TRUNC	Стереть файл, если существует
O_APPEND	Дописывать в конец
O_EXCL	Выдать ошибку, если файл существует при использовании O_CREAT
O_DSYNC	Принудительная синхронизация записи
O_RSYNC	Принудительная синхронизация перед чтением
O_SYNC	Принудительная полная синхронизация записи
O_NONBLOCK	Открыть файл в неблокируемом режиме, если это возможно
O_NDELAY	То же, что и O_NONBLOCK
O_NOCTTY	Если открываемый файл — терминальное устройство, не делать его управляющим терминалом процесса
O_NOFOLLOW	Выдать ошибку, если открываемый файл является символической ссылкой
O_DIRECTORY	Выдать ошибку, если открываемый файл не является каталогом
O_DIRECT	Попытаться минимизировать кэширование чтения/записи файла
O_ASYNC	Генерировать сигнал, когда появляется возможность чтения или записи в файл
O_LARGEFILE	Разрешить большие файлы (размер которых не может быть представлен в 31 бите (для систем с поддержкой LFS)

archlinux Конспект: Linux

Конспект: Archlinux / arch / pacman / keyring / archinstall / kde / ovs / libvirt / kvm

Автор записи Автор: Evgeny Yakovlev
Дата записи 2022/04/04

Ссылки:

https://archlinux.org/

https://archlinux.org/download/ - образы ISO

https://wiki.archlinux.org/title/KVM
https://wiki.archlinux.org/title/Libvirt
https://wiki.archlinux.org/title/Open_vSwitch

https://wiki.archlinux.org/title/systemd-networkd
https://wiki.archlinux.org/title/systemd-networkd_(%D0%A0%D1%83%D1%81%D1%81%D0%BA%D0%B8%D0%B9)

https://habr.com/ru/company/selectel/blog/313150/
https://habr.com/ru/company/ruvds/blog/309010/

https://www.balena.io/etcher/

https://archlinux.org/news/gnupg-21-and-the-pacman-keyring/

https://www.youtube.com/watch?v=OJEVBEJsKEQ&list=PLc0sjwKqKpx-EBd0rPcW01-ekFufAnL39&ab_channel=esturiano - видосики по арчу


https://wiki.archlinux.org/title/installation_guide - гайд установки
https://wiki.archlinux.org/title/installation_guide_(%D0%A0%D1%83%D1%81%D1%81%D0%BA%D0%B8%D0%B9)

https://archlinux.org/

https://archlinux.org/download/ - образы ISO

https://wiki.archlinux.org/title/KVM

https://wiki.archlinux.org/title/Libvirt

https://wiki.archlinux.org/title/Open_vSwitch

https://wiki.archlinux.org/title/systemd-networkd

https://wiki.archlinux.org/title/systemd-networkd_(%D0%A0%D1%83%D1%81%D1%81%D0%BA%D0%B8%D0%B9)

https://habr.com/ru/company/selectel/blog/313150/

https://habr.com/ru/company/ruvds/blog/309010/

https://www.balena.io/etcher/

https://archlinux.org/news/gnupg-21-and-the-pacman-keyring/

https://www.youtube.com/watch?v=OJEVBEJsKEQ&list=PLc0sjwKqKpx-EBd0rPcW01-ekFufAnL39&ab_channel=esturiano - видосики по арчу

https://wiki.archlinux.org/title/installation_guide - гайд установки

https://wiki.archlinux.org/title/installation_guide_(%D0%A0%D1%83%D1%81%D1%81%D0%BA%D0%B8%D0%B9)

Скрипт для установки archlinux

archinstall

1	archinstall

iwd / iwctl / wi-fi

!!! https://wiki.archlinux.org/title/Iwd
iwctl
   device list - показать устройства
   station wlan0 scan - сканировать сеть
   station wlan0 get-networks - показать отсканированные сети 
   station wlan0 connect SSID_name - подключится к сети SSID_name

!!! https://wiki.archlinux.org/title/Iwd

iwctl

device list - показать устройства

station wlan0 scan - сканировать сеть

station wlan0 get-networks - показать отсканированные сети

station wlan0 connect SSID_name - подключится к сети SSID_name

pacman — установка софта

pacman -Syu - обновления списка пакетов и установка обновлений
pacman -Ss name_packeg - поиск пакета 
pacman -Sy name_packeg - установка пакета
pacman -Scc - очистка кэша пакетов

sudo pacman -Syu
sudo pacman -Sy telegram-desktop

sudo pacman -Sy --needed git base-devel zsh htop mc hunspell hunspell-ru hunspell-en_us hunspell-en_gb telegram-desktop docker docker-compose libreoffice-fresh libreoffice-fresh-ru gwenview spectacle peek neofetch ark unzip unrar noto-fonts-emoji element-desktop partitionmanager filelight ntfs-3g adobe-source-han-sans-otc-fonts networkmanager-l2tp strongswan networkmanager-openvpn cups print-manager dnsutils whois wine gnupg keychain bluez bluez-utils net-tools traceroute kgpg inetutils

sudo pacman -Sy --needed linssid qalculate-gtk remmina freerdp gtk-vnc pycharm-community-edition gnome-keyring libsecret libgnome-keyring qbittorrent okular
sudo pacman -Sy --needed chromium
sudo pacman -Sy --needed  bash-completion

sudo pacman -Ss bash
sudo pacman -Ss libvirt
sudo pacman -Ss kvm
sudo pacman -Sy libvirt virt-install
sudo pacman -Si libvirt
sudo pacman -Ss 
sudo pacman -Ss kvm
sudo pacman -Si virt-manager
sudo pacman -Sy virt-manager
sudo pacman -Sy man

sudo pacman -Ss openvswitch
sudo pacman -Sy openvswitch

pacman -Syu - обновления списка пакетов и установка обновлений

pacman -Ss name_packeg - поиск пакета

pacman -Sy name_packeg - установка пакета

pacman -Scc - очистка кэша пакетов

sudo pacman -Syu

sudo pacman -Sy telegram-desktop

sudo pacman -Sy --needed git base-devel zsh htop mc hunspell hunspell-ru hunspell-en_us hunspell-en_gb telegram-desktop docker docker-compose libreoffice-fresh libreoffice-fresh-ru gwenview spectacle peek neofetch ark unzip unrar noto-fonts-emoji element-desktop partitionmanager filelight ntfs-3g adobe-source-han-sans-otc-fonts networkmanager-l2tp strongswan networkmanager-openvpn cups print-manager dnsutils whois wine gnupg keychain bluez bluez-utils net-tools traceroute kgpg inetutils

sudo pacman -Sy --needed linssid qalculate-gtk remmina freerdp gtk-vnc pycharm-community-edition gnome-keyring libsecret libgnome-keyring qbittorrent okular

sudo pacman -Sy --needed chromium

sudo pacman -Sy --needed bash-completion

sudo pacman -Ss bash

sudo pacman -Ss libvirt

sudo pacman -Ss kvm

sudo pacman -Sy libvirt virt-install

sudo pacman -Si libvirt

sudo pacman -Ss

sudo pacman -Ss kvm

sudo pacman -Si virt-manager

sudo pacman -Sy virt-manager

sudo pacman -Sy man

sudo pacman -Ss openvswitch

sudo pacman -Sy openvswitch

yay

sudo pacman -Sy --needed git base-devil 
git clone https://aur.archlinux.org/yay.git
cd yay/
makepkg -si

sudo pacman -Sy --needed git base-devil

git clone https://aur.archlinux.org/yay.git

cd yay/

makepkg -si

zsh

0. Установка оболочки zsh:
yay -S zsh --noconfirm 

1. Установка скрипта oh-my-zsh:
curl -L https://raw.githubusercontent.com/robbyrussell/oh-my-zsh/master/tools/install.sh | sh 

2. Делаем zsh по умолчанию:
chsh -s /usr/bin/zsh

3. Первый запуск оболочки zsh
zsh

4. Конфиг .zshrc  
Строка ZSH_THEME отвечает за темы

5. Установка пакета подсветки синтаксиса оболочки zsh
git clone https://github.com/zsh-users/zsh-syntax-highlighting
mv zsh-syntax-highlighting .zsh-syntax-highlighting
echo "source ~/.zsh-syntax-highlighting/zsh-syntax-highlighting.zsh" >> ~/.zshrc  

6. Установка пакета дополняющего команду по мере её ввода на основе истории
$ git clone https://github.com/zsh-users/zsh-autosuggestions ${ZSH_CUSTOM:-~/.oh-my-zsh/custom}/plugins/zsh-autosuggestions

7. Плагины 
Внесение изменений в файл конфигурации .zshrc
nano .zshrc
1) В файле раскомментировать строку под номером 2
2) Дописать в строку файла .zshrc, изначально выглядящую так: plugins =(git), чтобы она стала выглядеть так:
plugins =(git zsh-autosuggestions sudo)

Обновить конфигурацию оболочки (делать каждый раз, когда правим файл .zshrc)
source .zshrc

0. Установка оболочки zsh:

yay -S zsh --noconfirm

1. Установка скрипта oh-my-zsh:

curl -L https://raw.githubusercontent.com/robbyrussell/oh-my-zsh/master/tools/install.sh | sh

2. Делаем zsh по умолчанию:

chsh -s /usr/bin/zsh

3. Первый запуск оболочки zsh

zsh

4. Конфиг .zshrc

Строка ZSH_THEME отвечает за темы

5. Установка пакета подсветки синтаксиса оболочки zsh

git clone https://github.com/zsh-users/zsh-syntax-highlighting

mv zsh-syntax-highlighting .zsh-syntax-highlighting

echo "source ~/.zsh-syntax-highlighting/zsh-syntax-highlighting.zsh" >> ~/.zshrc

6. Установка пакета дополняющего команду по мере её ввода на основе истории

$ git clone https://github.com/zsh-users/zsh-autosuggestions ${ZSH_CUSTOM:-~/.oh-my-zsh/custom}/plugins/zsh-autosuggestions

7. Плагины

Внесение изменений в файл конфигурации .zshrc

nano .zshrc

1) В файле раскомментировать строку под номером 2

2) Дописать в строку файла .zshrc, изначально выглядящую так: plugins =(git), чтобы она стала выглядеть так:

plugins =(git zsh-autosuggestions sudo)

Обновить конфигурацию оболочки (делать каждый раз, когда правим файл .zshrc)

source .zshrc

цвет консоли и репы

vim /etc/pacman.conf 
--------------------
[multilib]
Include = /etc/pacman.d/mirrorlist

# Misc options
#UseSyslog
Color
#NoProgressBar
CheckSpace
#VerbosePkgLists
#ParallelDownloads = 5
--------------------

vim /etc/pacman.conf

--------------------

[multilib]

Include = /etc/pacman.d/mirrorlist

# Misc options

#UseSyslog

Color

#NoProgressBar

CheckSpace

#VerbosePkgLists

#ParallelDownloads = 5

--------------------

консоль в стиле quake

pacman -S yakuake

1	pacman -S yakuake

locale — русский язык

0. редактируем "/etc/locale.gen"
vim /etc/locale.gen
-------------------
ru_RU.UTF-8 UTF-8
-------------------

1. генерируем 
localectl set-locale ru_RU.UTF-8
#localectl set-x11-keymap --no-convert us,ru pc105 "" grp:alt_shift_toggle


2. раскладка языка
vim /etc/vconsole.conf
----------------------
KEYMAP=ru
----------------------

0. редактируем "/etc/locale.gen"

vim /etc/locale.gen

-------------------

ru_RU.UTF-8 UTF-8

-------------------

1. генерируем

localectl set-locale ru_RU.UTF-8

#localectl set-x11-keymap --no-convert us,ru pc105 "" grp:alt_shift_toggle

2. раскладка языка

vim /etc/vconsole.conf

----------------------

KEYMAP=ru

----------------------

iptables + route

0. редактируем
vim /etc/systemd/system/sex-sec.service
---------------------------------------
[Unit]
Description= add iptables route 
After=network.target

[Service]
Type=simple
TimeoutStartSec=10
ExecStart=/etc/iptables/sex_sec.sh

[Install]
WantedBy=multi-user.target
---------------------------------------

1. Включаем демон 
systemctl daemon-reload 
systemctl status sex-sec.service 
systemctl --failed 

2. Редактируем
vim /etc/iptables/sex_sec.sh
----------------------------
#!/bin/bash
iptables-restore /etc/iptables/iptable.4
ip6tables-restore /etc/iptables/iptable.6
sleep 10
ip route add 192.168.55.0/24 via 192.168.16.55
----------------------------

0. редактируем

vim /etc/systemd/system/sex-sec.service

---------------------------------------

[Unit]

Description= add iptables route

After=network.target

[Service]

Type=simple

TimeoutStartSec=10

ExecStart=/etc/iptables/sex_sec.sh

[Install]

WantedBy=multi-user.target

---------------------------------------

1. Включаем демон

systemctl daemon-reload

systemctl status sex-sec.service

systemctl --failed

2. Редактируем

vim /etc/iptables/sex_sec.sh

----------------------------

#!/bin/bash

iptables-restore /etc/iptables/iptable.4

ip6tables-restore /etc/iptables/iptable.6

sleep 10

ip route add 192.168.55.0/24 via 192.168.16.55

----------------------------

/etc/iptables/iptable.4

*filter
:INPUT DROP [0:0]
:FORWARD DROP [0:0]
:OUTPUT ACCEPT [0:0]
-A INPUT -i lo -j ACCEPT
-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT
-A INPUT -s 192.168.16.126/24 -m state --state NEW -p tcp --dport 22 -j ACCEPT
#-A INPUT -s 10.0.3.6/32 -j ACCEPT -m comment --comment "backup"
#-A INPUT -s 10.1.2.1/32 -m state --state NEW -p tcp --dport 10050 -j ACCEPT
# ICMP
-A INPUT -p icmp -m icmp --icmp-type 8 -m limit --limit 100/sec -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 0 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 3 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 4 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 11 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 12 -j ACCEPT
COMMIT

*filter

:INPUT DROP [0:0]

:FORWARD DROP [0:0]

:OUTPUT ACCEPT [0:0]

-A INPUT -i lo -j ACCEPT

-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT

-A INPUT -s 192.168.16.126/24 -m state --state NEW -p tcp --dport 22 -j ACCEPT

#-A INPUT -s 10.0.3.6/32 -j ACCEPT -m comment --comment "backup"

#-A INPUT -s 10.1.2.1/32 -m state --state NEW -p tcp --dport 10050 -j ACCEPT

# ICMP

-A INPUT -p icmp -m icmp --icmp-type 8 -m limit --limit 100/sec -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 0 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 3 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 4 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 11 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 12 -j ACCEPT

COMMIT

/etc/iptables/iptable.6

*filter
:INPUT DROP [0:0]
:FORWARD DROP [0:0]
:OUTPUT ACCEPT [0:0]
-A INPUT -i lo -j ACCEPT
-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT
-A INPUT -p ipv6-icmp -j ACCEPT
COMMIT

*filter

:INPUT DROP [0:0]

:FORWARD DROP [0:0]

:OUTPUT ACCEPT [0:0]

-A INPUT -i lo -j ACCEPT

-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT

-A INPUT -p ipv6-icmp -j ACCEPT

COMMIT

qemu + kvm

0. установка
pacman -Sy qemu
pacman -Sy fuse2 gnutls libpciaccess libssh libxml2 numactl parted polkit yajl dmidecode virt-viewer libvirt-python perl-sys-virt libvirt-python libvirt-glib libguestfs

systemctl enable libvirtd.service 
usermod -aG libvirt ey
usermod -aG libvirt-qemu ey

systemctl start libvirtd.service virtlogd.service
systemctl enable libvirtd.service virtlogd.service

1. Редактируем

vim /etc/libvirt/libvirt.conf 
-----------------------------
uri_default = "qemu:///system"
listen_tls = 0
listen_tcp = 1
auth_tcp="none"
-----------------------------

0. установка

pacman -Sy qemu

pacman -Sy fuse2 gnutls libpciaccess libssh libxml2 numactl parted polkit yajl dmidecode virt-viewer libvirt-python perl-sys-virt libvirt-python libvirt-glib libguestfs

systemctl enable libvirtd.service

usermod -aG libvirt ey

usermod -aG libvirt-qemu ey

systemctl start libvirtd.service virtlogd.service

systemctl enable libvirtd.service virtlogd.service

1. Редактируем

vim /etc/libvirt/libvirt.conf

-----------------------------

uri_default = "qemu:///system"

listen_tls = 0

listen_tcp = 1

auth_tcp="none"

-----------------------------

ovs

pacman -Sy  openvswitch 
pacman -Sy dnsmasq
(ovs-vswitchd.serviceтакже запустит ovsdb-server.service)
systemct enable ovs-vswitchd.service
systemct start ovs-vswitchd.service

!!! можно собрать default
0. Редактируем файл
cd /root
vim  ovsbr0.xml 
---------------
<network>
  <name>default</name>
  <forward mode='bridge'/>
  <bridge name='ovsbr0'/>
  <virtualport type='openvswitch'/>
</network>
---------------

1. Добавляем пулы сети
virsh net-destroy default
virsh net-create --file /root/ovsbr0.xml
virsh net-autostart default
virsh net-start default

2. Пересоздаем пулы для хранилища
virsh pool-destroy --pool default
virsh pool-define-as --type dir --target /kvm/images --name images
virsh pool-define-as --type dir --target /kvm/iso --name iso
virsh pool-autostart --pool images iso
virsh pool-autostart --pool images
virsh pool-autostart --pool iso
virsh pool-autostart --disable --pool default

pacman -Sy openvswitch

pacman -Sy dnsmasq

(ovs-vswitchd.serviceтакже запустит ovsdb-server.service)

systemct enable ovs-vswitchd.service

systemct start ovs-vswitchd.service

!!! можно собрать default

0. Редактируем файл

cd /root

vim ovsbr0.xml

---------------

<name>default</name>

</network>

---------------

1. Добавляем пулы сети

virsh net-destroy default

virsh net-create --file /root/ovsbr0.xml

virsh net-autostart default

virsh net-start default

2. Пересоздаем пулы для хранилища

virsh pool-destroy --pool default

virsh pool-define-as --type dir --target /kvm/images --name images

virsh pool-define-as --type dir --target /kvm/iso --name iso

virsh pool-autostart --pool images iso

virsh pool-autostart --pool images

virsh pool-autostart --pool iso

virsh pool-autostart --disable --pool default

ping bash

#!/bin/bash
ping -s 1 -c 4 IP_a
remmina

#!/bin/bash

ping -s 1 -c 4 IP_a

remmina

systemd network

vim /etc/systemd/network/20-wired.network
-----------------------------------------
[Match]
Name=enp1s0

[Network]
DHCP=yes
-----------------------------------------

vim /etc/systemd/network/20-wired.network
-----------------------------------------
[Match]
Name=enp1s0

[Network]
Address=10.1.10.9/24
Gateway=10.1.10.1
DNS=10.1.10.1
-----------------------------------------

vim /etc/systemd/network/20-wired.network

-----------------------------------------

[Match]

Name=enp1s0

[Network]

DHCP=yes

-----------------------------------------

vim /etc/systemd/network/20-wired.network

-----------------------------------------

[Match]

Name=enp1s0

[Network]

Address=10.1.10.9/24

Gateway=10.1.10.1

DNS=10.1.10.1

-----------------------------------------

systemd network ovsbr0

ls /etc/systemd/network/
-----------------------
30_enp2s0.network
40_ovsbr0.network         
-----------------------
      
cat > /etc/systemd/network/30_enp2s0.network << "EOF"
[Match]
Name=enp2s0
EOF

cat > /etc/systemd/network/40_ovsbr0.network << "EOF"
[Match]
Name=ovsbr0
[Network]
LinkLocalAddressing=ipv4
DHCP=ipv4
#DHCP=yes
EOF

ls /etc/systemd/network/

-----------------------

30_enp2s0.network

40_ovsbr0.network

-----------------------

cat > /etc/systemd/network/30_enp2s0.network << "EOF"

[Match]

Name=enp2s0

EOF

cat > /etc/systemd/network/40_ovsbr0.network << "EOF"

[Match]

Name=ovsbr0

[Network]

LinkLocalAddressing=ipv4

DHCP=ipv4

#DHCP=yes

EOF

update keyring

https://wiki.archlinux.org/title/Pacman/Package_signing

pacman -Sy archlinux-keyring

https://wiki.archlinux.org/title/Pacman/Package_signing

pacman -Sy archlinux-keyring

GnuPG-2.1 and the pacman keyring

pacman -Syu haveged
systemctl start haveged
systemctl enable haveged

rm -fr /etc/pacman.d/gnupg
pacman-key --init
pacman-key --populate archlinux

pacman -Syu haveged

systemctl start haveged

systemctl enable haveged

rm -fr /etc/pacman.d/gnupg

pacman-key --init

pacman-key --populate archlinux

Шрифты:

https://habr.com/ru/post/77122/
pacman -Sy ttf-droid


General — Droid Sans 10;
Fixed Width — Droid Sans Mono 10;
Small — Droid Sans 8;
Toolbar — Droid Sans 8 (Bold);
Menu — Droid Sans 10;
Window Title — Droid Sans 10 (Bold);
Taskbar — Droid Sans 10;
Desktop — Droid Sans 10.

https://habr.com/ru/post/77122/

pacman -Sy ttf-droid

General — Droid Sans 10;

Fixed Width — Droid Sans Mono 10;

Small — Droid Sans 8;

Toolbar — Droid Sans 8 (Bold);

Menu — Droid Sans 10;

Window Title — Droid Sans 10 (Bold);

Taskbar — Droid Sans 10;

Desktop — Droid Sans 10.

Не работает переключение ALT+Shift:

перед этим еще убедится что в выводе команды localctl  есть строка alt_shift_toggle

если не то выполнить
localectl --no-convert set-x11-keymap us,ru "" ""  grp:alt_shift_toggle

Для применения изменений потребуется ребут или перезапуск display-manager
!!! Внимание все окна закроет :)
#systemctl restart display-manager

перед этим еще убедится что в выводе команды localctl есть строка alt_shift_toggle

если не то выполнить

localectl --no-convert set-x11-keymap us,ru "" "" grp:alt_shift_toggle

Для применения изменений потребуется ребут или перезапуск display-manager

!!! Внимание все окна закроет :)

#systemctl restart display-manager

Восстановление загрузки

https://bbs.archlinux.org/viewtopic.php?id=82056

1. Boot from liveCD/usbimage
2. Set up your network if needed later
3. Prepare your Chroot:

# mkdir /mnt/arch                        #optional, you may also just use /mnt/
# mount /dev/sdax /mnt/arch              #substitute sdax with your root partition
# mount /dev/sday /mnt/arch/boot         #only needed if you have a seperate partition sday for /boot
# mount -t proc proc /mnt/arch/proc      #mount system folders
# mount -t sysfs sys /mnt/arch/sys
# mount -o bind /dev /mnt/arch/dev
4. Chroot into your Install

chroot /mnt/arch/
After that, you may downgrade/upgrade/split your screen with an axe, as you like.
To just rebuild the initramfs, type:

mkinitcpio -v -k <kernel version-ARCH> -g /boot/kernel26.img

P.S.
Так как установка mkinitcpio приведет к генерации initramfs и ядра.
Вам может повезти банально установив mkinitcpio и у вас восстановится загрузка arch. 
Достаточно после установки chroot выполнить команду установки mkinitcpio.
pacman -Syu mkinitcpio

https://bbs.archlinux.org/viewtopic.php?id=82056

1. Boot from liveCD/usbimage

2. Set up your network if needed later

3. Prepare your Chroot:

# mkdir /mnt/arch #optional, you may also just use /mnt/

# mount /dev/sdax /mnt/arch #substitute sdax with your root partition

# mount /dev/sday /mnt/arch/boot #only needed if you have a seperate partition sday for /boot

# mount -t proc proc /mnt/arch/proc #mount system folders

# mount -t sysfs sys /mnt/arch/sys

# mount -o bind /dev /mnt/arch/dev

4. Chroot into your Install

chroot /mnt/arch/

After that, you may downgrade/upgrade/split your screen with an axe, as you like.

To just rebuild the initramfs, type:

mkinitcpio -v -k <kernel version-ARCH> -g /boot/kernel26.img

P.S.

Так как установка mkinitcpio приведет к генерации initramfs и ядра.

Вам может повезти банально установив mkinitcpio и у вас восстановится загрузка arch.

Достаточно после установки chroot выполнить команду установки mkinitcpio.

pacman -Syu mkinitcpio

zerotier

pacman -Sy zerotier-one
zerotier-cli info
systemctl start zerotier-cli
systemctl start zerotier-one.service 
systemctl enable zerotier-one.service 
zerotier-cli join YOU_ID_NET

pacman -Sy zerotier-one

zerotier-cli info

systemctl start zerotier-cli

systemctl start zerotier-one.service

systemctl enable zerotier-one.service

zerotier-cli join YOU_ID_NET

ноут / планшет

yay iio-sensor-prox - сенсор для поворота экрана
pacman -Sy onboard - экранная клава





#!/bin/bash
xrandr -o inverted
#xrandr -o normal
#xrandr -o left
#xrandr -o right
#xrandr --rotate "$xrandr_rotation"

yay iio-sensor-prox - сенсор для поворота экрана

pacman -Sy onboard - экранная клава

#!/bin/bash

xrandr -o inverted

#xrandr -o normal

#xrandr -o left

#xrandr -o right

#xrandr --rotate "$xrandr_rotation"

Тестовая samba с пользователем guest

#https://wiki.archlinux.org/title/Samba

Примечание: 
Пользователь и группа nobody изначально существуют в системе, используются как гостевой аккаунт (guest account) 
по умолчанию и могут быть использованы в ресурсах для общего доступа с опцией guest ok = yes, 
благодаря чему пользователям не понадобится логиниться для доступа к таким ресурсам.

0. Добавляем пользователя:
useradd guest -s /bin/nologin

1. Создаем каталог:
mkdir /home/samba

2. Создаем конфиг
!!! Создание общего ресурса для анонимных пользователей
cat > /etc/samba/smb.conf << "EOF"
[global]
security = user
map to guest = bad user
guest account = guest

[guest]
    comment = guest
    path = /home/samba
    public = yes
    only guest = yes
    writable = yes
    printable = no

EOF


3. Добавить автозапуск для smb 
systemctl enable smb.service
systemct start smb.service
systemctl restart smb.service

#https://wiki.archlinux.org/title/Samba

Примечание:

Пользователь и группа nobody изначально существуют в системе, используются как гостевой аккаунт (guest account)

по умолчанию и могут быть использованы в ресурсах для общего доступа с опцией guest ok = yes,

благодаря чему пользователям не понадобится логиниться для доступа к таким ресурсам.

0. Добавляем пользователя:

useradd guest -s /bin/nologin

1. Создаем каталог:

mkdir /home/samba

2. Создаем конфиг

!!! Создание общего ресурса для анонимных пользователей

cat > /etc/samba/smb.conf << "EOF"

[global]

security = user

map to guest = bad user

guest account = guest

[guest]

comment = guest

path = /home/samba

public = yes

only guest = yes

writable = yes

printable = no

EOF

3. Добавить автозапуск для smb

systemctl enable smb.service

systemct start smb.service

systemctl restart smb.service

Жизнь без archinstall, ставим arch руками:

0. Раскладка и шрифты:
Посмотреть список доступных раскладок можно с помощью команды:
localectl list-keymaps

Установка раскладки клавиатуры и шрифта:
loadkeys ru

Используйте Ctrl+Shift для переключения между английской и русской раскладками.

Консольные шрифты расположены в каталоге /usr/share/kbd/consolefonts/
Для загрузки шрифта стандартного размера с русскими буквами:
setfont cyr-sun16
Для экрана HiDPI можно выбрать один из самых больших доступных шрифтов с русскими буквами:
setfont ter-c32b


1. Проверка режима загрузки
Проверьте разрядность UEFI:
cat /sys/firmware/efi/fw_platform_size
Если команда выведет 64, то система загружена в режиме UEFI и имеет 64-битный x64 UEFI. 
Если команда выведет 32, то система загружена в режиме UEFI и имеет 32-битный IA32 UEFI — такой вариант тоже поддерживается, 
но в качестве загрузчика получится использовать только systemd-boot. 
Если же такого файла не существует, возможно, система загружена в режиме BIOS (или CSM). 
Если система загрузилась не в том режиме, который вам нужен (UEFI или BIOS), обратитесь к руководству пользователя вашей материнской платы.

2. Проверить соединение с интернетом:
DHCP: установка динамического IP-адреса и адреса DNS-сервера (при помощи systemd-networkd и systemd-resolved) 
должна срабатывать автоматически для проводных и беспроводных сетевых интерфейсов.

Провод ethernet:
ip link
ping 8.8.8.8
ping ya.ru

# если кто-то удалил /etc/resolv.conf
# для debian11-12 может пригодится для восстановления systemd-resolved
#  ln -s /run/systemd/resolve/stub-resolv.conf /etc/resolv.conf

Wi-Fi: 
Используйте iwctl подключитесь к беспроводной сети 

Мобильный широкополосный модем: 
Используй mmcli

3. Синхронизация системных часов
# можно вот так вот включить синхронизацию времени
# timedatectl set-ntp true - включение синхронизации времени

В live-окружении по умолчанию включен systemd-timesyncd, который выполнит синхронизацию времени автоматически после подключения интернета.
Чтобы удостовериться, что время задано правильно:
timedatectl
timedatectl set-timezone Europe/Moscow - установить временную зону Europe/Moscow

4. Разметка дисков:
!!! ВНИМАНИЕ, форматирование и разметка уничтожит ваши данные
Проверяем доступные диски:
fdisk -l

Производим разметку:
!!! Не забываем поменять разметку на GPT и сменить тип раздела на EFI для раздела /boot 
fdisk /dev/диск_для_разметки

Примеры схем:
UEFI с GPT
/boot - Системный раздел EFI - Минимум 300 МиБ. При установке нескольких ядер лучше 1 ГиБ или более.
[SWAP] - Linux swap - предпочитаю создавать в виде файла уже в корневом разделе Более 512 МиБ
/ - Корневой раздел - минимум 10Гб
BIOS с MBR
/ - Корневой раздел - минимум 10Гб
[SWAP] - Linux swap - предпочитаю создавать в виде файла уже в корневом разделе Более 512 МиБ

Форматирование разделов:
Чтобы отформатировать /dev/корневой_раздел в файловую систему Ext4, выполните следующую команду:
mkfs.ext4 /dev/корневой_раздел
Если вы создали раздел для подкачки (swap), инициализируйте его с помощью утилиты mkswap(8):
mkswap /dev/раздел_подкачки
Для создания EFI выполните:
mkfs.fat -F 32 /dev/системный_раздел_efi

5. Монтирование разделов:
Монтирование разделов
mount /dev/корневой_раздел /mnt
mount --mkdir /dev/системный_раздел_efi /mnt/boot
#swapon /dev/раздел_подкачки - на данном этапе я своп делать не буду (выполню после arch-chroot)


6. Выбор зеркал
Пакеты для установки будут скачиваться с серверов-зеркал, прописанных в файле /etc/pacman.d/mirrorlist. 
В установочном образе используется reflector, который после подключения к сети обновит список зеркал (выбрав 20 наиболее актуальных HTTPS-зеркал) 
и отсортирует их по скорости загрузки.
Чем выше зеркало расположено в списке, тем больший приоритет оно имеет при скачивании пакета. 
Вы можете проверить этот файл и, при необходимости, отредактировать его вручную, переместив наверх наиболее географически близкие зеркала.
При этом также учитывайте и другие критерии.
Позже pacstrap скопирует этот файл в новую систему, так что это действительно стоит сделать.

vim /etc/pacman.d/mirrorlist

Примечание: 
Никакие программы или настройки (кроме файла /etc/pacman.d/mirrorlist) из live-окружения в устанавливаемую систему не переносятся.

7. Установка основных пакетов
pacstrap -K /mnt base linux linux-firmware vim grub efibootmgr sudo man qemu-guest-agent
#pacstrap -K /mnt base linux linux-firmware - прям минимальная установка


8. Создаем своп в виде файла на 1G:
fallocate -l 1G /mnt/.swap
chmod 600 /mnt/.swap
mkswap /mnt/.swap
swapon /mnt/.swap

9. Генерация fstab:
genfstab -U /mnt >> /mnt/etc/fstab

10. Chroot
Войдем в систему
arch-chroot /mnt


11. Локализация
Добавьте локали, например en_US.UTF-8 UTF-8 и ru_RU.UTF-8 UTF-8
vim /etc/locale.gen
locale-gen

vim /etc/locale.conf
--------------------
LANG=ru_RU.UTF-8
--------------------

vim /etc/vconsole.conf
----------------------
KEYMAP=ru
FONT=cyr-sun16
----------------------

12. Имя хоста:
/etc/hostname
-------------
имявашегохоста
-------------

13. Пароль суперпользователя
Установите пароль суперпользователя:
passwd

14. Установка загрузкича
!!! Главное убедитесь что у вас есть раздел EFI (fdisk -l)
Установка по умолчанию:
grub-install /dev/имя_вашего_диска
Если возникает ошибка:
grub-install --recheck /dev/имя_вашего_диска
Если возникает ошибка: 
grub-install --boot-directory=/boot /dev/имя_вашего_диска

Если выше также не отработали пробуем ставить EFI сами:
grub-install --efi-directory=/boot
grub-mkconfig -o /boot/grub/grub.cfg


Генерация загрузочного образа для BIOS без установки grub:
Новые версии GRUB2 генерируют загрузочный образ core.img, который может быть загружен не только кодом бут-сектора, 
но и другими загрузчиками (GRUB2, GRUB Legacy, syslinux)
grub-install --grub-setup=/bin/true /dev/sda


15. Графика установка KDE
pacman -Syu xorg-server plasma-meta sddm
systemctl start sddm

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

0. Раскладка и шрифты:

Посмотреть список доступных раскладок можно с помощью команды:

localectl list-keymaps

Установка раскладки клавиатуры и шрифта:

loadkeys ru

Используйте Ctrl+Shift для переключения между английской и русской раскладками.

Консольные шрифты расположены в каталоге /usr/share/kbd/consolefonts/

Для загрузки шрифта стандартного размера с русскими буквами:

setfont cyr-sun16

Для экрана HiDPI можно выбрать один из самых больших доступных шрифтов с русскими буквами:

setfont ter-c32b

1. Проверка режима загрузки

Проверьте разрядность UEFI:

cat /sys/firmware/efi/fw_platform_size

Если команда выведет 64, то система загружена в режиме UEFI и имеет 64-битный x64 UEFI.

Если команда выведет 32, то система загружена в режиме UEFI и имеет 32-битный IA32 UEFI — такой вариант тоже поддерживается,

но в качестве загрузчика получится использовать только systemd-boot.

Если же такого файла не существует, возможно, система загружена в режиме BIOS (или CSM).

Если система загрузилась не в том режиме, который вам нужен (UEFI или BIOS), обратитесь к руководству пользователя вашей материнской платы.

2. Проверить соединение с интернетом:

DHCP: установка динамического IP-адреса и адреса DNS-сервера (при помощи systemd-networkd и systemd-resolved)

должна срабатывать автоматически для проводных и беспроводных сетевых интерфейсов.

Провод ethernet:

ip link

ping 8.8.8.8

ping ya.ru

# если кто-то удалил /etc/resolv.conf

# для debian11-12 может пригодится для восстановления systemd-resolved

# ln -s /run/systemd/resolve/stub-resolv.conf /etc/resolv.conf

Wi-Fi:

Используйте iwctl подключитесь к беспроводной сети

Мобильный широкополосный модем:

Используй mmcli

3. Синхронизация системных часов

# можно вот так вот включить синхронизацию времени

# timedatectl set-ntp true - включение синхронизации времени

В live-окружении по умолчанию включен systemd-timesyncd, который выполнит синхронизацию времени автоматически после подключения интернета.

Чтобы удостовериться, что время задано правильно:

timedatectl

timedatectl set-timezone Europe/Moscow - установить временную зону Europe/Moscow

4. Разметка дисков:

!!! ВНИМАНИЕ, форматирование и разметка уничтожит ваши данные

Проверяем доступные диски:

fdisk -l

Производим разметку:

!!! Не забываем поменять разметку на GPT и сменить тип раздела на EFI для раздела /boot

fdisk /dev/диск_для_разметки

Примеры схем:

UEFI с GPT

/boot - Системный раздел EFI - Минимум 300 МиБ. При установке нескольких ядер лучше 1 ГиБ или более.

[SWAP] - Linux swap - предпочитаю создавать в виде файла уже в корневом разделе Более 512 МиБ

/ - Корневой раздел - минимум 10Гб

BIOS с MBR

/ - Корневой раздел - минимум 10Гб

[SWAP] - Linux swap - предпочитаю создавать в виде файла уже в корневом разделе Более 512 МиБ

Форматирование разделов:

Чтобы отформатировать /dev/корневой_раздел в файловую систему Ext4, выполните следующую команду:

mkfs.ext4 /dev/корневой_раздел

Если вы создали раздел для подкачки (swap), инициализируйте его с помощью утилиты mkswap(8):

mkswap /dev/раздел_подкачки

Для создания EFI выполните:

mkfs.fat -F 32 /dev/системный_раздел_efi

5. Монтирование разделов:

Монтирование разделов

mount /dev/корневой_раздел /mnt

mount --mkdir /dev/системный_раздел_efi /mnt/boot

#swapon /dev/раздел_подкачки - на данном этапе я своп делать не буду (выполню после arch-chroot)

6. Выбор зеркал

Пакеты для установки будут скачиваться с серверов-зеркал, прописанных в файле /etc/pacman.d/mirrorlist.

В установочном образе используется reflector, который после подключения к сети обновит список зеркал (выбрав 20 наиболее актуальных HTTPS-зеркал)

и отсортирует их по скорости загрузки.

Чем выше зеркало расположено в списке, тем больший приоритет оно имеет при скачивании пакета.

Вы можете проверить этот файл и, при необходимости, отредактировать его вручную, переместив наверх наиболее географически близкие зеркала.

При этом также учитывайте и другие критерии.

Позже pacstrap скопирует этот файл в новую систему, так что это действительно стоит сделать.

vim /etc/pacman.d/mirrorlist

Примечание:

Никакие программы или настройки (кроме файла /etc/pacman.d/mirrorlist) из live-окружения в устанавливаемую систему не переносятся.

7. Установка основных пакетов

pacstrap -K /mnt base linux linux-firmware vim grub efibootmgr sudo man qemu-guest-agent

#pacstrap -K /mnt base linux linux-firmware - прям минимальная установка

8. Создаем своп в виде файла на 1G:

fallocate -l 1G /mnt/.swap

chmod 600 /mnt/.swap

mkswap /mnt/.swap

swapon /mnt/.swap

9. Генерация fstab:

genfstab -U /mnt >> /mnt/etc/fstab

10. Chroot

Войдем в систему

arch-chroot /mnt

11. Локализация

Добавьте локали, например en_US.UTF-8 UTF-8 и ru_RU.UTF-8 UTF-8

vim /etc/locale.gen

locale-gen

vim /etc/locale.conf

--------------------

LANG=ru_RU.UTF-8

--------------------

vim /etc/vconsole.conf

----------------------

KEYMAP=ru

FONT=cyr-sun16

----------------------

12. Имя хоста:

/etc/hostname

-------------

имявашегохоста

-------------

13. Пароль суперпользователя

Установите пароль суперпользователя:

passwd

14. Установка загрузкича

!!! Главное убедитесь что у вас есть раздел EFI (fdisk -l)

Установка по умолчанию:

grub-install /dev/имя_вашего_диска

Если возникает ошибка:

grub-install --recheck /dev/имя_вашего_диска

Если возникает ошибка:

grub-install --boot-directory=/boot /dev/имя_вашего_диска

Если выше также не отработали пробуем ставить EFI сами:

grub-install --efi-directory=/boot

grub-mkconfig -o /boot/grub/grub.cfg

Генерация загрузочного образа для BIOS без установки grub:

Новые версии GRUB2 генерируют загрузочный образ core.img, который может быть загружен не только кодом бут-сектора,

но и другими загрузчиками (GRUB2, GRUB Legacy, syslinux)

grub-install --grub-setup=/bin/true /dev/sda

15. Графика установка KDE

pacman -Syu xorg-server plasma-meta sddm

systemctl start sddm

iptables.service

0. Проверяем:
cat /usr/lib/systemd/system/iptables.service
--------------------------------------------                                                                                                                   
[Unit]
Description=Packet Filtering Framework

[Service]
Type=oneshot
ExecStart=/usr/bin/iptables-restore /etc/iptables/iptables.rules
ExecReload=/usr/bin/iptables-restore /etc/iptables/iptables.rules
ExecStop=/usr/lib/systemd/scripts/iptables-flush
RemainAfterExit=yes

[Install]
WantedBy=multi-user.target
-------------------------------------------- 

1. Проверяем работу, добавляем правила и включаем iptables.service

systemct enable iptables.service
systemctl start iptables.service

cat > /etc/iptables/iptables.rules << "EOF"
*nat
:PREROUTING ACCEPT [0:0]
:INPUT ACCEPT [0:0]
:OUTPUT ACCEPT [0:0]
:POSTROUTING ACCEPT [0:0]
:DOCKER - [0:0]
-A PREROUTING -m addrtype --dst-type LOCAL -j DOCKER
-A OUTPUT ! -d 127.0.0.0/8 -m addrtype --dst-type LOCAL -j DOCKER
-A POSTROUTING -s 172.17.0.0/16 ! -o docker0 -j MASQUERADE
-A POSTROUTING -s 172.18.0.0/16 ! -o br-6e31867864c0 -j MASQUERADE
-A POSTROUTING -o ovsbr0 -j MASQUERADE
-A POSTROUTING -s 172.18.0.2/32 -d 172.18.0.2/32 -p tcp -m tcp --dport 443 -j MASQUERADE
-A POSTROUTING -s 172.18.0.5/32 -d 172.18.0.5/32 -p tcp -m tcp --dport 8080 -j MASQUERADE
-A DOCKER -i docker0 -j RETURN
-A DOCKER -i br-6e31867864c0 -j RETURN
-A DOCKER ! -i br-6e31867864c0 -p tcp -m tcp --dport 8443 -j DNAT --to-destination 172.18.0.2:443
-A DOCKER ! -i br-6e31867864c0 -p tcp -m tcp --dport 32768 -j DNAT --to-destination 172.18.0.5:8080
COMMIT

*filter
:INPUT DROP [0:0]
:FORWARD DROP [0:0]
:OUTPUT ACCEPT [0:0]
-A INPUT -i lo -j ACCEPT
-A INPUT -i enp0s20f0u1u4 -j ACCEPT
-A INPUT -i enp0s20f0u1u1 -j ACCEPT
-A INPUT -i zthnhjuefn -j ACCEPT
-A INPUT -i wg0 -j ACCEPT
-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT
-A INPUT -p udp -m udp --dport 5678 -j ACCEPT
-A INPUT -s 192.168.16.0/24 -p tcp -m state --state NEW -m tcp --dport 22 -j ACCEPT
-A INPUT -s 192.168.15.0/24 -p tcp -m state --state NEW -m tcp --dport 22 -j ACCEPT
-A INPUT -s 192.168.15.0/24 -p tcp -m state --state NEW -m tcp --dport 5905 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 8 -m limit --limit 100/sec -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 0 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 3 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 4 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 11 -j ACCEPT
-A INPUT -p icmp -m icmp --icmp-type 12 -j ACCEPT
-A FORWARD -m state --state RELATED,ESTABLISHED -j ACCEPT
-A FORWARD -i zthnhjuefn -j ACCEPT
-A FORWARD -i wg0 -j ACCEPT
-A FORWARD -i enp0s20f0u1u4 -j ACCEPT
COMMIT
EOF


cat > /etc/iptables/ip6tables.rules << "EOF"
*filter
:INPUT DROP [0:0]
:FORWARD DROP [0:0]
:OUTPUT ACCEPT [0:0]
-A INPUT -i lo -j ACCEPT
-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT
-A INPUT -p ipv6-icmp -j ACCEPT
COMMIT
EOF


systemct restart iptables.service

0. Проверяем:

cat /usr/lib/systemd/system/iptables.service

--------------------------------------------

[Unit]

Description=Packet Filtering Framework

[Service]

Type=oneshot

ExecStart=/usr/bin/iptables-restore /etc/iptables/iptables.rules

ExecReload=/usr/bin/iptables-restore /etc/iptables/iptables.rules

ExecStop=/usr/lib/systemd/scripts/iptables-flush

RemainAfterExit=yes

[Install]

WantedBy=multi-user.target

--------------------------------------------

1. Проверяем работу, добавляем правила и включаем iptables.service

systemct enable iptables.service

systemctl start iptables.service

cat > /etc/iptables/iptables.rules << "EOF"

*nat

:PREROUTING ACCEPT [0:0]

:INPUT ACCEPT [0:0]

:OUTPUT ACCEPT [0:0]

:POSTROUTING ACCEPT [0:0]

:DOCKER - [0:0]

-A PREROUTING -m addrtype --dst-type LOCAL -j DOCKER

-A OUTPUT ! -d 127.0.0.0/8 -m addrtype --dst-type LOCAL -j DOCKER

-A POSTROUTING -s 172.17.0.0/16 ! -o docker0 -j MASQUERADE

-A POSTROUTING -s 172.18.0.0/16 ! -o br-6e31867864c0 -j MASQUERADE

-A POSTROUTING -o ovsbr0 -j MASQUERADE

-A POSTROUTING -s 172.18.0.2/32 -d 172.18.0.2/32 -p tcp -m tcp --dport 443 -j MASQUERADE

-A POSTROUTING -s 172.18.0.5/32 -d 172.18.0.5/32 -p tcp -m tcp --dport 8080 -j MASQUERADE

-A DOCKER -i docker0 -j RETURN

-A DOCKER -i br-6e31867864c0 -j RETURN

-A DOCKER ! -i br-6e31867864c0 -p tcp -m tcp --dport 8443 -j DNAT --to-destination 172.18.0.2:443

-A DOCKER ! -i br-6e31867864c0 -p tcp -m tcp --dport 32768 -j DNAT --to-destination 172.18.0.5:8080

COMMIT

*filter

:INPUT DROP [0:0]

:FORWARD DROP [0:0]

:OUTPUT ACCEPT [0:0]

-A INPUT -i lo -j ACCEPT

-A INPUT -i enp0s20f0u1u4 -j ACCEPT

-A INPUT -i enp0s20f0u1u1 -j ACCEPT

-A INPUT -i zthnhjuefn -j ACCEPT

-A INPUT -i wg0 -j ACCEPT

-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT

-A INPUT -p udp -m udp --dport 5678 -j ACCEPT

-A INPUT -s 192.168.16.0/24 -p tcp -m state --state NEW -m tcp --dport 22 -j ACCEPT

-A INPUT -s 192.168.15.0/24 -p tcp -m state --state NEW -m tcp --dport 22 -j ACCEPT

-A INPUT -s 192.168.15.0/24 -p tcp -m state --state NEW -m tcp --dport 5905 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 8 -m limit --limit 100/sec -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 0 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 3 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 4 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 11 -j ACCEPT

-A INPUT -p icmp -m icmp --icmp-type 12 -j ACCEPT

-A FORWARD -m state --state RELATED,ESTABLISHED -j ACCEPT

-A FORWARD -i zthnhjuefn -j ACCEPT

-A FORWARD -i wg0 -j ACCEPT

-A FORWARD -i enp0s20f0u1u4 -j ACCEPT

COMMIT

EOF

cat > /etc/iptables/ip6tables.rules << "EOF"

*filter

:INPUT DROP [0:0]

:FORWARD DROP [0:0]

:OUTPUT ACCEPT [0:0]

-A INPUT -i lo -j ACCEPT

-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT

-A INPUT -p ipv6-icmp -j ACCEPT

COMMIT

EOF

systemct restart iptables.service

Звук

Возможные ошибки:
У вас конфликтующая настройка звукового демона: либо установите Pipewire-media-session и удалите Wireplumber, 
если вы хотите придерживаться PulseAudio, либо полностью переключитесь на PipeWire, заменив PulseAudio на PipeWire-Pulse.



pacman -Sy pipewire pipewire-pulse wireplumber pavucontrol wpctl easyeffects



Команды для проверки:
sudo fuser -v /dev/snd/*
aplay -lL
amixer -c0
pactl list cards
pactl list sinks
sudo dmesg | grep -E 'snd|sof'




Глюки с интеловской встройкой
systemctl --user --now enable pipewire pipewire-pulse wireplumber
cat > /etc/modprobe.d/alsa-base.conf << "EOF"
options snd-hda-intel dmic_detect=0
options snd-hda-intel index=0
EOF

Возможные ошибки:

У вас конфликтующая настройка звукового демона: либо установите Pipewire-media-session и удалите Wireplumber,

если вы хотите придерживаться PulseAudio, либо полностью переключитесь на PipeWire, заменив PulseAudio на PipeWire-Pulse.

pacman -Sy pipewire pipewire-pulse wireplumber pavucontrol wpctl easyeffects

Команды для проверки:

sudo fuser -v /dev/snd/*

aplay -lL

amixer -c0

pactl list cards

pactl list sinks

sudo dmesg | grep -E 'snd|sof'

Глюки с интеловской встройкой

systemctl --user --now enable pipewire pipewire-pulse wireplumber

cat > /etc/modprobe.d/alsa-base.conf << "EOF"

options snd-hda-intel dmic_detect=0

options snd-hda-intel index=0

EOF

bluetooth

pacman -Sy bluez bluez-utils  bluez-deprecated-tools
systemctl start  bluetooth.service
systemctl status  bluetooth.service
# если все ок добавляем в автозагрузку
systemctl enalbe bluetooth.service

pacman -Sy bluez bluez-utils bluez-deprecated-tools

systemctl start bluetooth.service

systemctl status bluetooth.service

# если все ок добавляем в автозагрузку

systemctl enalbe bluetooth.service

Конспект: Linux

Конспект: linux ubuntu часть 2

Автор записи Автор: Evgeny Yakovlev
Дата записи 2021/02/17

Первая лабораторная подготовка шлюза

!!! в лабораторной будет две виртуальной машины
!!! домен  d0.zor.inc
0. Информация о шлюзе
hostname: c0.d0.zor.inc
eth0 -> isp 10.0.0.23/24
eth1 -> lan 192.168.200.1/24

GW 10.0.0.1
DNS 192.168.200.1 (127.0.0.1)

1. Изменяем имена интерфейсов в файле /etc/udev/rules.d/70-persistent-net.rules 
1.1 Или можно создать свое правило
sudo nano /etc/udev/rules.d/1-user-network.rules
KERNEL=="enp0s3", ,ATTR{address}=="08:00:27:47:d2:4e", NAME="eth0"



2. Информация о клиенте
hostname: ubuntu
ip dhcp


3. редактируем hosts на шлюзе 
nano /etc/hosts
---------------
127.0.0.1       localhost
10.0.0.23       c0.d0.zor.inc c0
192.168.200.1   intgate
--------------

4. Удаляем resolv.conf на шлюзе, что-бы убить символическую ссылку на файл генерации
rm /etc/resolv.conf

5. Создаем файл resolv.conf на шлюзе
nano /etc/resolv.conf
---------------------
domain        d0.zor.inc
nameserver    10.0.0.1
---------------------

6. Редактируем файл interfaces на шлюзе
!!! Ubuntu в файле  ifupdown просит установить пакет ifupdown, для управления сетью
!!! sudo apt install ifupdown - устанавливаем пакет  ifupdown
!!! В ubuntu авто конфигурация сетевых интерфейсов демон netplan
!!! netplan apply - применить изменения
nano /etc/netplan/50-cloud-init.yaml - редактируем файл
------------------------------------
#network:
#    ethernets:
#        enp1s0:
#            dhcp4: true
#    version: 2

network: {config: disabled}
------------------------------------

nano  /etc/network/interfaces - редактируем файл interfaces
-----------------------------
auto lo
iface lo inet loopback

auto isp
iface isp inet static
      address 10.0.0.23
      netmask 255.255.255.0
      gateway 10.0.0.1
      dns-search CORP.NAME.local 
      dns-domain CORP.NAME.local
      dns-nameservers 192.168.15.1
      dns-nameservers 8.8.8.8

auto lan
iface lan inet static
      address 192.168.200.1
      netmask 255.255.255.0
-----------------------------

7. Перезагружаем шлюз
reboot

!!! в лабораторной будет две виртуальной машины

!!! домен d0.zor.inc

0. Информация о шлюзе

hostname: c0.d0.zor.inc

eth0 -> isp 10.0.0.23/24

eth1 -> lan 192.168.200.1/24

GW 10.0.0.1

DNS 192.168.200.1 (127.0.0.1)

1. Изменяем имена интерфейсов в файле /etc/udev/rules.d/70-persistent-net.rules

1.1 Или можно создать свое правило

sudo nano /etc/udev/rules.d/1-user-network.rules

KERNEL=="enp0s3", ,ATTR{address}=="08:00:27:47:d2:4e", NAME="eth0"

2. Информация о клиенте

hostname: ubuntu

ip dhcp

3. редактируем hosts на шлюзе

nano /etc/hosts

---------------

127.0.0.1 localhost

10.0.0.23 c0.d0.zor.inc c0

192.168.200.1 intgate

--------------

4. Удаляем resolv.conf на шлюзе, что-бы убить символическую ссылку на файл генерации

rm /etc/resolv.conf

5. Создаем файл resolv.conf на шлюзе

nano /etc/resolv.conf

---------------------

domain d0.zor.inc

nameserver 10.0.0.1

---------------------

6. Редактируем файл interfaces на шлюзе

!!! Ubuntu в файле ifupdown просит установить пакет ifupdown, для управления сетью

!!! sudo apt install ifupdown - устанавливаем пакет ifupdown

!!! В ubuntu авто конфигурация сетевых интерфейсов демон netplan

!!! netplan apply - применить изменения

nano /etc/netplan/50-cloud-init.yaml - редактируем файл

------------------------------------

#network:

# ethernets:

# enp1s0:

# dhcp4: true

# version: 2

network: {config: disabled}

------------------------------------

nano /etc/network/interfaces - редактируем файл interfaces

-----------------------------

auto lo

iface lo inet loopback

auto isp

iface isp inet static

address 10.0.0.23

netmask 255.255.255.0

gateway 10.0.0.1

dns-search CORP.NAME.local

dns-domain CORP.NAME.local

dns-nameservers 192.168.15.1

dns-nameservers 8.8.8.8

auto lan

iface lan inet static

address 192.168.200.1

netmask 255.255.255.0

-----------------------------

7. Перезагружаем шлюз

reboot

Памятка по файлу /etc/network/interfaces

auto lo
iface lo inet loopback

auto ens3
iface ens3 inet static
      address 10.0.0.216
      netmask 255.255.255.0
      gateway 10.0.0.1  
      dns-nameservers 8.8.8.8 8.8.4.4
      dns-search YOUR-DOME.pro

auto lo

iface lo inet loopback

auto ens3

iface ens3 inet static

address 10.0.0.216

netmask 255.255.255.0

gateway 10.0.0.1

dns-nameservers 8.8.8.8 8.8.4.4

dns-search YOUR-DOME.pro

Установка программ из исходников на примере браузера links

http://links.twibright.com/user_en.html - главная страница links
http://links.twibright.com/download.php - страница загрузки

cd /tmp - переходим в каталог временных файлов
wget http://links.twibright.com/download/links-2.21.tar.gz - загружаем исходник src
tar -xf links-2.21.tar.gz - распаковываем
cd links-2.21  - переходим в каталог links-2.21
less README - читаем
less INSTALL - читаем 

./configure  - подготовка к сборке программы (создается файл Makefile)
./configure --help - посмотреть дополнительные опции для сборки
./configure --without-ipv6 - соберем без ipv6

CFLAGS="-march=native -pipe -O2" ./configure --without-ipv6 - соберем без ipv6, native - родной, для нашей архитектуры

apt install build-essential - пакет необходимый для сборки приложений в ubuntu ( make, gcc, cc и т.д.)

CFLAGS="-march=native -pipe -O2" ./configure --without-ipv6 --without-gpm - соберем без ipv6, без gpm, native - родной, для нашей архитектуры

make -j2 - компиляция и сборка программы
make install - установка программы

make clean - очистка подготовленных файлов для установки
make remove - удаление программы

hash -r - встроенная программа помогает сбросить хэш шела (помогает лечить проблему с путями к программам)

links ya.ru - открыть страницу ya.ru
links -dump ya.ru - links умеет делать дамп страницы

http://links.twibright.com/user_en.html - главная страница links

http://links.twibright.com/download.php - страница загрузки

cd /tmp - переходим в каталог временных файлов

wget http://links.twibright.com/download/links-2.21.tar.gz - загружаем исходник src

tar -xf links-2.21.tar.gz - распаковываем

cd links-2.21 - переходим в каталог links-2.21

less README - читаем

less INSTALL - читаем

./configure - подготовка к сборке программы (создается файл Makefile)

./configure --help - посмотреть дополнительные опции для сборки

./configure --without-ipv6 - соберем без ipv6

CFLAGS="-march=native -pipe -O2" ./configure --without-ipv6 - соберем без ipv6, native - родной, для нашей архитектуры

apt install build-essential - пакет необходимый для сборки приложений в ubuntu ( make, gcc, cc и т.д.)

CFLAGS="-march=native -pipe -O2" ./configure --without-ipv6 --without-gpm - соберем без ipv6, без gpm, native - родной, для нашей архитектуры

make -j2 - компиляция и сборка программы

make install - установка программы

make clean - очистка подготовленных файлов для установки

make remove - удаление программы

hash -r - встроенная программа помогает сбросить хэш шела (помогает лечить проблему с путями к программам)

links ya.ru - открыть страницу ya.ru

links -dump ya.ru - links умеет делать дамп страницы

Лабораторная вторая скрипты, программирование

!!! apt install fping
!!! for x in `seq 0 14`; do fping 10.0.0.$((200+$x)); done - пример с fping
!!! пробел в shell разделитель

!!! script - сценарий

При запуске программы проверяются условия:
- право на исполнение
- является ли файл бинарным исполняемым файлом
- если это текстовый файл, есть ли в первой строке путь к интерпретатору
При использовании bash первая строка
shell script должна быть такой:
#! /bin/bash


!!! Переменные в shell script:
- не типизированы
- область видимости переменных – весь код программы
- при обращении к неопределенной переменной не выдаются ошибки
Пример использования переменной:
PERM=value
echo $PERM
В shell все переменные строковые, string

name=vasya - задали переменной name значение vasya
echo $name - вывели на экран значение переменной name
env -  показывает значение переменных
env | grep name - показать значение переменной name (ха-ха - мы ее там не увидим, что-бы её увидеть нужно её экспортировать)
!!! shell дочерним процессам не передает переменные без экспорта
export name - экспортировать переменную name, теперь мы ее увидим в глобальных переменных
env | grep name - показать значение переменной name - вот теперь значение переменной name появилось после export
set | less - показать все переменные заданные shell

name=vasya
surname=loshkin
echo $name $surname
#fullname=$name $surname - так как пробел является разделителем, то shell задаст переменную fullname=$name, а $surname попытается выполнить как команду
!!! Еще есть особенность при такой записи fullname=$name $surname переменная выполняется и не изменяется, хороший пример с командой  date и переменной LANG ниже
date
LANG= date

fullname=$name\ $surname - экранируем пробел так как пробел  в шелл является спец символом -разделителем
echo $name $surname

fullname="$name $surname" - кавычки заставляют шелл не интерпретировать спец символ пробел
echo $name $surname

fullname='$name $surname' - апострофы(одинарные кавычки), заставляют шелл игнорировать все 
echo $name $surname

!!! обратные апострофы - выполнение команды
a=`date`
echo $a

a=`date;date;date`
echo $a


cmd=date
a=`cmd`
echo $a

!!! Три способа определения массивов:
MASS[0]=value
MASS=([0]=value1 [5]=value2)
MASS=(value1 value2)
Получение значения элемента массива:
${MASS[0]}
Получение значений всех элементов массива:
${MASS[*]} или ${MASS[@]}


!!! Подстановочные переменные
В подстановке используется то, что программа будет выводить на стандартный вывод.
Два варианта записи подстановки:
`program`
$(program)


!!! В shell script используется ограниченный набор арифметических операций: + - * / и круглые скобки.
Для подстановки значения арифметических выражений используется: $(( выражение ))
Если значение переменной, используемой в арифметическом выражении, не является целым числом, то её значение считается равным 0.
Значения могут быть только целочисленными, дробная часть отбрасывается
echo $((87/100 * 100000))
echo $((10 - 3))
echo $((48*50))
echo $((500/234))
echo $(((900+200*49-10000)/2))


!!! Условный оператор if
if условие
then
    список операторов
[else
     список операторов ]
[elif условие
            список операторов ]
fi

!!! Проверка условий при помощи программы test
test [опции] условия ...
Программа test предназначена для
проверки следующих типов условий:
- сравнение различных значений,
- проверка типов и наличия файлов,
- проверка логических условий


!!! Использование встроенных операторов && и ||
&& ― логическое И.
|| ― логическое ИЛИ.


!!! Оператор case
case строка in
шаблон)
список операторов
;;
[ шаблон)
список операторов
[;;] ]
esac
Оператор case поочередно сравнивает строку с шаблонами. 
Если шаблон совпадает, то выполняется группа операторов, находящихся между шаблоном и специальными символами ;;. 
После выполнения всех строк управление передается операторам, находящимся за ключевым словом esac.


!!! Оператор for
for переменная [ in список ]
do
  список операторов
done

При каждой итерации в операторе for, переменной присваивается следующее значение из списка и выполняются все операторы, находящиеся между do и done.
Оператор работает до тех пор, пока не будет обработан весь список или в теле цикла не встретится оператор break.

#!/bin/bash
# Пример for
for I in 1 2 3 4 5 6 7 8 9 10
do
   echo "--> $I <--"
done

!!! Оператор while
while условие
do
   набор операторов
done
В цикле while выполняются строки, расположенные между do и done, до тех пор, пока условие истинно или пока не встретится оператор break или exit.


s4 - пример скрипта пинговалики
-----------------------------
#!/bin/sh

#seq - генерирует числа от до
#fping - пингует хост

for x in `seq 1 254`
do
  #fping 10.10.104.$((200+$x))
  #fping -a -c1 192.168.15.$((0+$x))
  fping 192.168.15.$((0+$x))
done
------------------------------

s4 - показываем что не пингуется
------------------------------
#!/bin/sh

#seq - генерирует числа от до
#fping - пингует хост

for x in `seq 1 254`
do
  fping -q  192.168.15.$((0+$x)) 2> /dev/null
  if [ $? -ne 0 ]
  then
     echo ACHTUNG! ip 192.168.15.$x is  unreacheable.
  fi
done
------------------------------


!!! Оператор select
select переменная in список
do
   набор операторов
done


!!! Специальные переменные
$0 $1 ... $9 ― позиционные переменные.
$* и $@ ― все параметры командной строки.
$# ― количество параметров командной строки.
$? ― код возврата программы.
$! ― PID программы, запущенной в background режиме.
$$ ― PID процесса shell.
$? — код возврата последней выполненной программы.
$! — PID последней программы, запущенной в background режиме.
$$ — PID процесса shell, исполняющего данный shell script.

Пример использования специальных переменных:
------------------
#!/bin/sh
#$0 - имя программы как она была вызвана
#$$ - PID процесса скрипта
echo PID of $0: $$
------------------


!!! - Значения переменных живут в своих процессах (если только специально не переданы)
s1
------------------
#!/bin/sh
echo PID of $0: $$
a=1
echo a in $0: $a
./s2
echo a in $0: $a
-----------------

s2
-----------------
#!/bin/sh

echo PID of $0: $$
a=2
echo a in $0: $a
-----------------


s2
!!! если значение переменной не присвоено, то оно будет пустой строкой
-----------------
#!/bin/sh

echo PID of $0: $$
echo a in $0 \(before\): $a
a=2
echo a in $0 \(after\): $a
------------------


!!! экспорт переменных, если всё-таки требуется передать значение переменной
s1
------------------
#!/bin/sh
echo PID of $0: $$
export a=1 # экспортируем значение переменной
echo a in $0: $a
./s2
echo a in $0: $a
-----------------

!!! А если всё-таки переменную из s2 надо будет использовать в s1?
!!! Все просто нужно что бы скрипты s1 и s2 были одним процессом, для этого просто скрипт s2 запустим в процессе s1
s1
------------------
#!/bin/sh
echo PID of $0: $$
a=1 #экспорт нам не нужен, так как это будет один процесс
echo a in $0: $a
. ./s2 #вот таким не хитрым способом поставив точку
echo a in $0: $a
-----------------


!!! Использование $? - код возврата программы
---------------------
fping ya.ru - 
fping -q ya.ru
echo $?
0   - ноль все хорошо
fping -q ya.ry
echo $?
2 - все значения кроме нуля какая-то ошибка
---------------------


!!! Пример скрипта s6 читаем файл
echo 1 2 3 4 > hosts_to_check - создаем файл hosts_to_check с цифрами 1,2,3,4

s6
-------------------
#!/bin/sh
for x in `cat hosts_to_check`  # значения x берем из файла hosts_to_check
do
  fping -q  192.168.15.$((0+$x)) 2> /dev/null
  if [ $? -ne 0 ]  # если ответ fping не равен нулю то выводим следующие
  then
     echo ACHTUNG! ip 192.168.15.$x is  unreacheable.
  fi
done
---------------------

!!! Пример скрипта s7
!!! Если не указывать значение аргумента arg, то шелл будет брать значения аргумента командной строки
!!! Т.е. ./s7 без параметров шелл не выведет ничего, а если указать параметры ./s7 1 f 2 42
s7
--------
#!/bin/sh
for arg
do
     echo $arg
done
---------


s8
---------
#!/bin/sh
:>x1
for arg
do
     echo $arg  >> x1
done
sort -r x1
---------

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

286

287

288

289

290

291

292

293

294

295

296

297

298

299

300

301

302

303

304

305

306

307

308

309

310

311

312

313

314

315

316

317

318

319

320

!!! apt install fping

!!! for x in `seq 0 14`; do fping 10.0.0.$((200+$x)); done - пример с fping

!!! пробел в shell разделитель

!!! script - сценарий

При запуске программы проверяются условия:

- право на исполнение

- является ли файл бинарным исполняемым файлом

- если это текстовый файл, есть ли в первой строке путь к интерпретатору

При использовании bash первая строка

shell script должна быть такой:

#! /bin/bash

!!! Переменные в shell script:

- не типизированы

- область видимости переменных – весь код программы

- при обращении к неопределенной переменной не выдаются ошибки

Пример использования переменной:

PERM=value

echo $PERM

В shell все переменные строковые, string

name=vasya - задали переменной name значение vasya

echo $name - вывели на экран значение переменной name

env - показывает значение переменных

env | grep name - показать значение переменной name (ха-ха - мы ее там не увидим, что-бы её увидеть нужно её экспортировать)

!!! shell дочерним процессам не передает переменные без экспорта

export name - экспортировать переменную name, теперь мы ее увидим в глобальных переменных

env | grep name - показать значение переменной name - вот теперь значение переменной name появилось после export

set | less - показать все переменные заданные shell

name=vasya

surname=loshkin

echo $name $surname

#fullname=$name $surname - так как пробел является разделителем, то shell задаст переменную fullname=$name, а $surname попытается выполнить как команду

!!! Еще есть особенность при такой записи fullname=$name $surname переменная выполняется и не изменяется, хороший пример с командой date и переменной LANG ниже

date

LANG= date

fullname=$name\ $surname - экранируем пробел так как пробел в шелл является спец символом -разделителем

echo $name $surname

fullname="$name $surname" - кавычки заставляют шелл не интерпретировать спец символ пробел

echo $name $surname

fullname='$name $surname' - апострофы(одинарные кавычки), заставляют шелл игнорировать все

echo $name $surname

!!! обратные апострофы - выполнение команды

a=`date`

echo $a

a=`date;date;date`

echo $a

cmd=date

a=`cmd`

echo $a

!!! Три способа определения массивов:

MASS[0]=value

MASS=([0]=value1 [5]=value2)

MASS=(value1 value2)

Получение значения элемента массива:

${MASS[0]}

Получение значений всех элементов массива:

${MASS[*]} или ${MASS[@]}

!!! Подстановочные переменные

В подстановке используется то, что программа будет выводить на стандартный вывод.

Два варианта записи подстановки:

`program`

$(program)

!!! В shell script используется ограниченный набор арифметических операций: + - * / и круглые скобки.

Для подстановки значения арифметических выражений используется: $(( выражение ))

Если значение переменной, используемой в арифметическом выражении, не является целым числом, то её значение считается равным 0.

Значения могут быть только целочисленными, дробная часть отбрасывается

echo $((87/100 * 100000))

echo $((10 - 3))

echo $((48*50))

echo $((500/234))

echo $(((900+200*49-10000)/2))

!!! Условный оператор if

if условие

then

список операторов

[else

список операторов ]

[elif условие

список операторов ]

!!! Проверка условий при помощи программы test

test [опции] условия ...

Программа test предназначена для

проверки следующих типов условий:

- сравнение различных значений,

- проверка типов и наличия файлов,

- проверка логических условий

!!! Использование встроенных операторов && и ||

&& ― логическое И.

|| ― логическое ИЛИ.

!!! Оператор case

case строка in

шаблон)

список операторов

;;

[ шаблон)

список операторов

[;;] ]

esac

Оператор case поочередно сравнивает строку с шаблонами.

Если шаблон совпадает, то выполняется группа операторов, находящихся между шаблоном и специальными символами ;;.

После выполнения всех строк управление передается операторам, находящимся за ключевым словом esac.

!!! Оператор for

for переменная [ in список ]

список операторов

done

При каждой итерации в операторе for, переменной присваивается следующее значение из списка и выполняются все операторы, находящиеся между do и done.

Оператор работает до тех пор, пока не будет обработан весь список или в теле цикла не встретится оператор break.

#!/bin/bash

# Пример for

for I in 1 2 3 4 5 6 7 8 9 10

echo "--> $I <--"

done

!!! Оператор while

while условие

набор операторов

done

В цикле while выполняются строки, расположенные между do и done, до тех пор, пока условие истинно или пока не встретится оператор break или exit.

s4 - пример скрипта пинговалики

-----------------------------

#!/bin/sh

#seq - генерирует числа от до

#fping - пингует хост

for x in `seq 1 254`

#fping 10.10.104.$((200+$x))

#fping -a -c1 192.168.15.$((0+$x))

fping 192.168.15.$((0+$x))

done

------------------------------

s4 - показываем что не пингуется

------------------------------

#!/bin/sh

#seq - генерирует числа от до

#fping - пингует хост

for x in `seq 1 254`

fping -q 192.168.15.$((0+$x)) 2> /dev/null

if [ $? -ne 0 ]

then

echo ACHTUNG! ip 192.168.15.$x is unreacheable.

done

------------------------------

!!! Оператор select

select переменная in список

набор операторов

done

!!! Специальные переменные

$0 $1 ... $9 ― позиционные переменные.

$* и $@ ― все параметры командной строки.

$# ― количество параметров командной строки.

$? ― код возврата программы.

$! ― PID программы, запущенной в background режиме.

$$ ― PID процесса shell.

$? — код возврата последней выполненной программы.

$! — PID последней программы, запущенной в background режиме.

$$ — PID процесса shell, исполняющего данный shell script.

Пример использования специальных переменных:

------------------

#!/bin/sh

#$0 - имя программы как она была вызвана

#$$ - PID процесса скрипта

echo PID of $0: $$

------------------

!!! - Значения переменных живут в своих процессах (если только специально не переданы)

------------------

#!/bin/sh

echo PID of $0: $$

a=1

echo a in $0: $a

./s2

echo a in $0: $a

-----------------

#!/bin/sh

echo PID of $0: $$

a=2

echo a in $0: $a

-----------------

!!! если значение переменной не присвоено, то оно будет пустой строкой

-----------------

#!/bin/sh

echo PID of $0: $$

echo a in $0 $before$: $a

a=2

echo a in $0 $after$: $a

------------------

!!! экспорт переменных, если всё-таки требуется передать значение переменной

------------------

#!/bin/sh

echo PID of $0: $$

export a=1 # экспортируем значение переменной

echo a in $0: $a

./s2

echo a in $0: $a

-----------------

!!! А если всё-таки переменную из s2 надо будет использовать в s1?

!!! Все просто нужно что бы скрипты s1 и s2 были одним процессом, для этого просто скрипт s2 запустим в процессе s1

------------------

#!/bin/sh

echo PID of $0: $$

a=1 #экспорт нам не нужен, так как это будет один процесс

echo a in $0: $a

. ./s2 #вот таким не хитрым способом поставив точку

echo a in $0: $a

-----------------

!!! Использование $? - код возврата программы

---------------------

fping ya.ru -

fping -q ya.ru

echo $?

0 - ноль все хорошо

fping -q ya.ry

echo $?

2 - все значения кроме нуля какая-то ошибка

---------------------

!!! Пример скрипта s6 читаем файл

echo 1 2 3 4 > hosts_to_check - создаем файл hosts_to_check с цифрами 1,2,3,4

-------------------

#!/bin/sh

for x in `cat hosts_to_check` # значения x берем из файла hosts_to_check

fping -q 192.168.15.$((0+$x)) 2> /dev/null

if [ $? -ne 0 ] # если ответ fping не равен нулю то выводим следующие

then

echo ACHTUNG! ip 192.168.15.$x is unreacheable.

done

---------------------

!!! Пример скрипта s7

!!! Если не указывать значение аргумента arg, то шелл будет брать значения аргумента командной строки

!!! Т.е. ./s7 без параметров шелл не выведет ничего, а если указать параметры ./s7 1 f 2 42

--------

#!/bin/sh

for arg

echo $arg

done

---------

#!/bin/sh

:>x1

for arg

echo $arg >> x1

done

sort -r x1

---------

Лабораторная третья, время, NTP, сервер NTPD

RTC - на плате вместе с BIOS, запитанные от батарейки, 
System Clock - unix epoch

UTC - всемирное координированное время - Coordinated Universal Time
GMT - Greenwich Mean Time - Среднее время по Гринвичу
UTC=GMT

NTP использует порт 123 UDP
В пакет входит следующее:
ntpq для запроса серверов NTP
ntpd поддерживает точность локальных часов и (опционально) обеспечивает клиентам службу NTP
ntptrace прослеживает цепь сервера NTP к исходному серверу
ntpdate — одноразовая программа обновления часов

Онлайн список общедоступных серверов NTP
http://support.ntp.org/bin/view/Servers/WebHome

apt instsall ntp - установим ntp
apt install ntpdate - установим пакет ntpdate
/etc/init.d/ntp stop - остановим демон ntp

date - показать время
date -s 16:00 - установить время 16:00

file /etc/localtime - файл временной зоны, обычно линкуют с правильным файлом из /usr/share/zoneinfo, по умолчанию  это /usr/share/zoneinfo/Etc/UTC
cp /usr/share/zoneinfo/Europe/Stockholm /etc/localtime - вот так можно сменить временную зону например на Stockholm
cp /usr/share/zoneinfo/Europe/Helsinki /etc/localtime - вот так можно сменить временную зону например на Helsinki
cp /usr/share/zoneinfo/Europe/London /etc/localtime - вот так можно сменить временную зону например на London 
cp /usr/share/zoneinfo/Europe/Moscow /etc/localtime - вот так можно сменить временную зону например на Moscow

ntpdate ru.pool.ntp.org - установим время используя пул ru.pool.ntp.org

Для автоматической синхронизации можно настроить планировщик crontab
crontab –e 
0 * * * * /usr/sbin/ntpdate [серверы NTP]
0 * * * * /usr/sbin/ntpdate ntpdate ru.pool.ntp.org



Сервер точного времени ntpd
GPS NMEA-0183

/etc/init.d/ntp start - запускаем демон ntp
pgrep -l ntp - убеждаемся что он запустился и работает 

nano /etc/ntp.conf - файл конфигурации
------------------
server ntp.ubuntu.com 
server time.nist.gov 
server europe.pool.ntp.org


Разрешение доступа из локальной сети:
По умолчанию ваш сервер NTP будет доступен всем хостам в Интернет. 
Параметр restrict в файле /etc/ntp.conf позволяет вам контролировать, какие машины могут обращаться к вашему серверу. 

Если вы хотите запретить всем машинам обращаться к вашему серверу NTP, добавьте следующую строку в файл /etc/ntp.conf: 
restrict default ignore 

Если вы хотите разрешить синхронизировать свои часы с вашим сервером только машинам в вашей сети, 
но запретить им настраивать сервер или быть равноправными участниками синхронизации времени, то вместо указанной добавьте строчку 
restrict 10.0.0.0 mask 255.0.0.0 nomodify notrap 

/etc/ntp.conf может содержать несколько директив restrict 
restrict 10.0.0.0 mask 255.0.0.0 noquery
------------------

Логи сервера: 
/var/log/ntpstats/ 

Проверка запросов: 
ntpq –p

RTC - на плате вместе с BIOS, запитанные от батарейки,

System Clock - unix epoch

UTC - всемирное координированное время - Coordinated Universal Time

GMT - Greenwich Mean Time - Среднее время по Гринвичу

UTC=GMT

NTP использует порт 123 UDP

В пакет входит следующее:

ntpq для запроса серверов NTP

ntpd поддерживает точность локальных часов и (опционально) обеспечивает клиентам службу NTP

ntptrace прослеживает цепь сервера NTP к исходному серверу

ntpdate — одноразовая программа обновления часов

Онлайн список общедоступных серверов NTP

http://support.ntp.org/bin/view/Servers/WebHome

apt instsall ntp - установим ntp

apt install ntpdate - установим пакет ntpdate

/etc/init.d/ntp stop - остановим демон ntp

date - показать время

date -s 16:00 - установить время 16:00

file /etc/localtime - файл временной зоны, обычно линкуют с правильным файлом из /usr/share/zoneinfo, по умолчанию это /usr/share/zoneinfo/Etc/UTC

cp /usr/share/zoneinfo/Europe/Stockholm /etc/localtime - вот так можно сменить временную зону например на Stockholm

cp /usr/share/zoneinfo/Europe/Helsinki /etc/localtime - вот так можно сменить временную зону например на Helsinki

cp /usr/share/zoneinfo/Europe/London /etc/localtime - вот так можно сменить временную зону например на London

cp /usr/share/zoneinfo/Europe/Moscow /etc/localtime - вот так можно сменить временную зону например на Moscow

ntpdate ru.pool.ntp.org - установим время используя пул ru.pool.ntp.org

Для автоматической синхронизации можно настроить планировщик crontab

crontab –e

0 * * * * /usr/sbin/ntpdate [серверы NTP]

0 * * * * /usr/sbin/ntpdate ntpdate ru.pool.ntp.org

Сервер точного времени ntpd

GPS NMEA-0183

/etc/init.d/ntp start - запускаем демон ntp

pgrep -l ntp - убеждаемся что он запустился и работает

nano /etc/ntp.conf - файл конфигурации

------------------

server ntp.ubuntu.com

server time.nist.gov

server europe.pool.ntp.org

Разрешение доступа из локальной сети:

По умолчанию ваш сервер NTP будет доступен всем хостам в Интернет.

Параметр restrict в файле /etc/ntp.conf позволяет вам контролировать, какие машины могут обращаться к вашему серверу.

Если вы хотите запретить всем машинам обращаться к вашему серверу NTP, добавьте следующую строку в файл /etc/ntp.conf:

restrict default ignore

Если вы хотите разрешить синхронизировать свои часы с вашим сервером только машинам в вашей сети,

но запретить им настраивать сервер или быть равноправными участниками синхронизации времени, то вместо указанной добавьте строчку

restrict 10.0.0.0 mask 255.0.0.0 nomodify notrap

/etc/ntp.conf может содержать несколько директив restrict

restrict 10.0.0.0 mask 255.0.0.0 noquery

------------------

Логи сервера:

/var/log/ntpstats/

Проверка запросов:

ntpq –p

Лабораторная четвертая, FTP, демон ftpd

!!! ftp порт 21
!!! ss -tpln | grep  ftp

FTP отличается от других приложений тем, что он использует два TCP соединения для передачи файла.

1.Управляющее соединение устанавливается как обычное соединение клиент-сервер. Сервер осуществляет пассивное открытие на заранее известный порт FTP (21) и ожидает запроса на соединение от клиента. 
Клиент осуществляет активное открытие на TCP порт 21, чтобы установить управляющее соединение. Управляющее соединение существует все время, пока клиент общается с сервером. 
Это соединение используется для передачи команд от клиента к серверу и для передачи откликов от сервера.

2.Соединение данных открывается каждый раз, когда осуществляется передача файла между клиентом и сервером. 
(Оно также открывается и в другие моменты, как мы увидим позже.) 
Тип сервиса IP для соединения данных должен быть "максимальная пропускная способность", так как это соединение используется для передачи файлов.


FTP-сервер поддерживает 2 режима передачи данных: ascii и binary, что определяется переданными ему командами.


Команды FTP
-----------
help получить список команд поддерживаемых ftp-сервером
ls или dir список файлов или директорий
pwd показать текущую директорию
cd перейти к указанной директории
mkdir создать директорию
rmdir удалить директорию, если она не пустая
[m]get получить файл[ы] с сервера
[m]put отправить файл[ы] на сервер
TYPE {binary | ascii} указать режим передачи данных
quit или exit завершить работу с сервером
-----------

apt-get install proftpd openssl ftp-ssl whois - установка, с этого момента proftpd установился и работает но без шифрования
ftp localhost - подключаема и проверяем работу proftpd

Проверяем работу
ftp IP_адрес
После подключения создаем на сервере директорию MyDir командой:
mkdir MyDir


Для использования TLS нам необходимо создать SSL сертификат в каталоге /etc/proftpd/ssl
mkdir /etc/proftpd/ssl - cоздаем каталог /etc/proftpd/ssl
openssl req -new -x509 -days 365 -nodes -out /etc/proftpd/ssl/proftpd.cert.pem -keyout  /etc/proftpd/ssl/proftpd.key.pem - генерируем SSL сертификат (на все вопросы просто прощелкаем Enter, так как сертификат само подписанный и проверять его некто не будет)

nano /etc/proftpd/proftpd.conf - редактируем строки в конфиге proftpd, убираем комментарии строк
------------------------------
DefaultRoot ~  #Изолировать пользователя в домашнем каталоге, найти убрать комментарий
IdentLookups off #найти убрать комментарий
Include /etc/proftpd/tls.conf #Включаем TLS, найти убрать комментарий
ServerIdent on "FTP Server ready." #Приветсвие сервера при подключении, добавляем в конец файла
------------------------------

cp /etc/proftpd/tls.conf /etc/proftpd/tls.conf.back - делаем копию файла /etc/proftpd/tls.conf
:> /etc/proftpd/tls.conf - уничтожаем содержимое файла /etc/proftpd/tls.conf

nano /etc/proftpd/tls.conf - редактируем файл /etc/proftpd/tls.conf
--------------------------
TLSEngine on
TLSLog /var/log/proftpd/tls.log
TLSProtocol SSLv23
TLSOptions NoCertRequest
TLSRSACertificateFile /etc/proftpd/ssl/proftpd.cert.pem
TLSRSACertificateKeyFile /etc/proftpd/ssl/proftpd.key.pem
TLSVerifyClient off
TLSRequired on
--------------------------
Если у вас TLSRequired on, тогда только пользователи с включенным TLS получат доступ к вашему FTP серверу (могут возникнуть проблемы у пользователей использующих старые FTP клиенты не поддерживающие TLS). 
Для того чтобы все пользователи могли соединиться с FTP закомментируйте строку TLSRequired on, либо измените значение на Off

В случае возникновения проблем с TLS смотрите логи /var/log/proftpd/tls.log


Проверяем работу
ftp-ssl IP_адрес
После подключения создаем на сервере директорию MyDir командой:
mkdir MyDir

!!! ftp порт 21

!!! ss -tpln | grep ftp

FTP отличается от других приложений тем, что он использует два TCP соединения для передачи файла.

1.Управляющее соединение устанавливается как обычное соединение клиент-сервер. Сервер осуществляет пассивное открытие на заранее известный порт FTP (21) и ожидает запроса на соединение от клиента.

Клиент осуществляет активное открытие на TCP порт 21, чтобы установить управляющее соединение. Управляющее соединение существует все время, пока клиент общается с сервером.

Это соединение используется для передачи команд от клиента к серверу и для передачи откликов от сервера.

2.Соединение данных открывается каждый раз, когда осуществляется передача файла между клиентом и сервером.

(Оно также открывается и в другие моменты, как мы увидим позже.)

Тип сервиса IP для соединения данных должен быть "максимальная пропускная способность", так как это соединение используется для передачи файлов.

FTP-сервер поддерживает 2 режима передачи данных: ascii и binary, что определяется переданными ему командами.

Команды FTP

-----------

help получить список команд поддерживаемых ftp-сервером

ls или dir список файлов или директорий

pwd показать текущую директорию

cd перейти к указанной директории

mkdir создать директорию

rmdir удалить директорию, если она не пустая

[m]get получить файл[ы] с сервера

[m]put отправить файл[ы] на сервер

TYPE {binary | ascii} указать режим передачи данных

quit или exit завершить работу с сервером

-----------

apt-get install proftpd openssl ftp-ssl whois - установка, с этого момента proftpd установился и работает но без шифрования

ftp localhost - подключаема и проверяем работу proftpd

Проверяем работу

ftp IP_адрес

После подключения создаем на сервере директорию MyDir командой:

mkdir MyDir

Для использования TLS нам необходимо создать SSL сертификат в каталоге /etc/proftpd/ssl

mkdir /etc/proftpd/ssl - cоздаем каталог /etc/proftpd/ssl

openssl req -new -x509 -days 365 -nodes -out /etc/proftpd/ssl/proftpd.cert.pem -keyout /etc/proftpd/ssl/proftpd.key.pem - генерируем SSL сертификат (на все вопросы просто прощелкаем Enter, так как сертификат само подписанный и проверять его некто не будет)

nano /etc/proftpd/proftpd.conf - редактируем строки в конфиге proftpd, убираем комментарии строк

------------------------------

DefaultRoot ~ #Изолировать пользователя в домашнем каталоге, найти убрать комментарий

IdentLookups off #найти убрать комментарий

Include /etc/proftpd/tls.conf #Включаем TLS, найти убрать комментарий

ServerIdent on "FTP Server ready." #Приветсвие сервера при подключении, добавляем в конец файла

------------------------------

cp /etc/proftpd/tls.conf /etc/proftpd/tls.conf.back - делаем копию файла /etc/proftpd/tls.conf

:> /etc/proftpd/tls.conf - уничтожаем содержимое файла /etc/proftpd/tls.conf

nano /etc/proftpd/tls.conf - редактируем файл /etc/proftpd/tls.conf

--------------------------

TLSEngine on

TLSLog /var/log/proftpd/tls.log

TLSProtocol SSLv23

TLSOptions NoCertRequest

TLSRSACertificateFile /etc/proftpd/ssl/proftpd.cert.pem

TLSRSACertificateKeyFile /etc/proftpd/ssl/proftpd.key.pem

TLSVerifyClient off

TLSRequired on

--------------------------

Если у вас TLSRequired on, тогда только пользователи с включенным TLS получат доступ к вашему FTP серверу (могут возникнуть проблемы у пользователей использующих старые FTP клиенты не поддерживающие TLS).

Для того чтобы все пользователи могли соединиться с FTP закомментируйте строку TLSRequired on, либо измените значение на Off

В случае возникновения проблем с TLS смотрите логи /var/log/proftpd/tls.log

Проверяем работу

ftp-ssl IP_адрес

После подключения создаем на сервере директорию MyDir командой:

mkdir MyDir

DNS

DNS to ip  - прямое преобразование
ip to DNS - обратное преобразование - PTR

ping -c1 ya.ru - прямое преобразование

RESOLVER DNS Library

/etc/hosts - специальный файл, прямое преобразование, обратное преобразование, DNS, resolver проверяет в первую очередь
/etc/resolv.conf - файл списка DNS серверов для resolver


!!! Например полное имя нашего хоста h1, DNS Suffix у нас class.inc
!!! FQDN - полное имя у нас будет h1.class.inc.
FQDN - полностью квалифицированного доменного имени.
Обратите внимание на точку в конце имени — это явное указание корневого домена.
Наиболее распространенная ошибка при создании файла описания зоны — это отсутствие точки в конце FQDN.

/etc/host.conf - специальный файл, задает поведения обращения к ресурсам в сети DNS (старый файл)
/etc/nsswitch.conf - (Name Service Switch) специальный файл, задает поведения обращения к ресурсам в сети (DNS, password, etc...)



Записи о ресурсах
Формат записи можно представить следующим образом:
[имя_компьютера|имя_домена] [ttl] [класс] тип параметры

Первое – это имя машины или домена. Что именно писать в этом поле, зависит от типа записи. 
Если это поле оставить пустым, то его значение берется из предыдущей записи.
Если вы не указываете первое поле, то в начале строки обязательно должен присутствовать либо символ пробела, либо табуляции.

Второе поле – время жизни записи в кэш DNS сервера. 
Значение поля устанавливается в секундах. 
Если поле не определено, его значение берется из значения по умолчанию для данной зоны.

Третье поле – класс сети. Можно использовать следующие классы сетей:
IN – Internet (значение по умолчанию)
CH – ChaosNet. В настоящее время не используется.
HS – Hesoid – информационная служба, являющаяся надстройкой пакета BIND. Используется крайне редко

Тип записи – это зарезервированное слово.
SOA Определение параметров зоны DNS. Обязательная запись
NS Определение DNS серверов, авторитетных для зоны. Делегирование полномочий под доменам. Обязательная запись.
А Преобразование имени в IP адрес
AAAA Преобразование имени в адрес IPv6
А6 Преобразование имени в адрес IPv6
PTR Преобразование IP адреса в имя
MX Применяется для указание почтового сервера, отвечающего за почту домена
KEY Открытый ключ шифрования для DNS имени
CNAME Дополнительное имя машины (псевдоним)
SRV Определение служб в пределах домена

Пример формата записи SOA:
unix.domenname.ru. IN SOA master.unix.domenname.ru. (
artur.unix.domenname.ru. ; e-mail
2008072501 ; серийный номер записи
18H ; время обновления
20M ; интервал между попытками
2W ; интервал устаревания
1D ) ; TTL


host 
host ya.ru 8.8.8.8
host -v ya.ru 8.8.8.8
host -t mx gmail.com
host -la ya.ru 8.8.8.8
nslookup 
dig

DNS to ip - прямое преобразование

ip to DNS - обратное преобразование - PTR

ping -c1 ya.ru - прямое преобразование

RESOLVER DNS Library

/etc/hosts - специальный файл, прямое преобразование, обратное преобразование, DNS, resolver проверяет в первую очередь

/etc/resolv.conf - файл списка DNS серверов для resolver

!!! Например полное имя нашего хоста h1, DNS Suffix у нас class.inc

!!! FQDN - полное имя у нас будет h1.class.inc.

FQDN - полностью квалифицированного доменного имени.

Обратите внимание на точку в конце имени — это явное указание корневого домена.

Наиболее распространенная ошибка при создании файла описания зоны — это отсутствие точки в конце FQDN.

/etc/host.conf - специальный файл, задает поведения обращения к ресурсам в сети DNS (старый файл)

/etc/nsswitch.conf - (Name Service Switch) специальный файл, задает поведения обращения к ресурсам в сети (DNS, password, etc...)

Записи о ресурсах

Формат записи можно представить следующим образом:

[имя_компьютера|имя_домена] [ttl] [класс] тип параметры

Первое – это имя машины или домена. Что именно писать в этом поле, зависит от типа записи.

Если это поле оставить пустым, то его значение берется из предыдущей записи.

Если вы не указываете первое поле, то в начале строки обязательно должен присутствовать либо символ пробела, либо табуляции.

Второе поле – время жизни записи в кэш DNS сервера.

Значение поля устанавливается в секундах.

Если поле не определено, его значение берется из значения по умолчанию для данной зоны.

Третье поле – класс сети. Можно использовать следующие классы сетей:

IN – Internet (значение по умолчанию)

CH – ChaosNet. В настоящее время не используется.

HS – Hesoid – информационная служба, являющаяся надстройкой пакета BIND. Используется крайне редко

Тип записи – это зарезервированное слово.

SOA Определение параметров зоны DNS. Обязательная запись

NS Определение DNS серверов, авторитетных для зоны. Делегирование полномочий под доменам. Обязательная запись.

А Преобразование имени в IP адрес

AAAA Преобразование имени в адрес IPv6

А6 Преобразование имени в адрес IPv6

PTR Преобразование IP адреса в имя

MX Применяется для указание почтового сервера, отвечающего за почту домена

KEY Открытый ключ шифрования для DNS имени

CNAME Дополнительное имя машины (псевдоним)

SRV Определение служб в пределах домена

Пример формата записи SOA:

unix.domenname.ru. IN SOA master.unix.domenname.ru. (

artur.unix.domenname.ru. ; e-mail

2008072501 ; серийный номер записи

18H ; время обновления

20M ; интервал между попытками

2W ; интервал устаревания

1D ) ; TTL

host

host ya.ru 8.8.8.8

host -v ya.ru 8.8.8.8

host -t mx gmail.com

host -la ya.ru 8.8.8.8

nslookup

dig

Сервер DNS — bind9

!!! Используются порты udp/tcp 53 и tcp 953
!!! ps auxwww | grep bind - проверяем от кого работает bind, должен работать от пользователя bind
!!! Low (Privileged) Ports < 1024 UID == 0 
!!! Privilege Drop
!!! id bind - проверяем UID пользователя

0. Устанавливаем Bind9
apt-get install bind9 - устанавливаем Bind9 
pgrep named - проверяем запуск демона named (он же bind9)

/etc/bind/named.conf - главный конфиг файл (в дистрибутивах debian в нем ссылки(include) на другие файлы)

1. Редактируем файл /etc/bind/named.conf.options

nano /etc/bind/named.conf.options - редактируем, убираем комментарии, комментируем не нужное
---------------------------------

forwarders {
                192.168.15.1; - внешний сервер DNS
        };

//dnssec-validation auto; - эту строку мы закомментируем (поставим //), в некоторых дистрибутивах  этот параметр работает не правильно

//dnssec-enable yes;  - были проблемы с bind после обновления, не резолвились внешние адреса, после добавления заработало
//dnssec-validation yes;  - были проблемы с bind после обновления, не резолвились внешние адреса, после добавления заработало

 listen-on-v6 { none; }; - отключаем прослушивания ipv6 DNS на интерфейсах (вместо any прописали none)

---------------------------------

/etc/init.d/bind9 restart - перезапускаем демон bind9

host ya.ru 127.0.0.1 - проверяем работу нашего DNS сервера (демона bind9)


2. Редактируем файл /etc/resolv.conf после успешной проверки
nano /etc/resolv.conf - редактируем
---------------------
domain        d0.zor.inc
nameserver    127.0.0.1   - меняем строку nameserver указав ip 127.0.0.1 вместо ip внешнего сервера
---------------------

3. Редактируем файл etc/bind/named.conf.local создаем свою зону DNS "d0.zor.inc"
Типы зон: зона master принадлежит нам, зона slave о своем существовании узнает от мастера, зона  hint для домена точки со списком корневых серверов,

nano /etc/bind/named.conf.local - редактируем файл
-------------------------------
zone "d0.zor.inc" {
      type master; - тип зоны
      file "/etc/bind/d0.zor.inc.zone"; - файл с описание хостов зоны

};
-------------------------------


!!! Всегда проверяйте изменения конфига с помощью named-checkconf
named-checkconf - проверка конфиг файлов (по умолчанию проверяет только синтаксис, например файла d9.zor.inc.zone еще нет, а проверка молчит )
named-checkconf -z - при использовании параметра "-z" производит проверку файлов которых не хватает. 

4. Редактируем файл описания нашей зоны d0.zor.inc.zone
nano /etc/bind/d0.zor.inc.zone - редактируем файл
------------------------------
$TTL    30
$ORIGIN d0.zor.inc.

@       SOA     c0      root    2021011300      1h      10m     1d      30
        NS      c0
        MX      10      c0

c0 A 192.168.200.1
c1 A 192.168.200.2
router A 10.0.0.1
printer A 192.168.15.10
internet A 10.0.0.23

------------------------------


named-checkconf -z - проверка конфигурации на ошибки


!!! Да для того что-бы настройки вступили в силу можно перезагрузить сервер, перезапустить демон,
!!! но это скорее не правильное действие, лучше использовать специальную программу rndc

!!! rndc - специальная программа для управления bind
!!! Внимание rndc reload - перечитать все конфигурационные файлы и файлы описания зон
rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны

!!! Используются порты udp/tcp 53 и tcp 953

!!! ps auxwww | grep bind - проверяем от кого работает bind, должен работать от пользователя bind

!!! Low (Privileged) Ports < 1024 UID == 0

!!! Privilege Drop

!!! id bind - проверяем UID пользователя

0. Устанавливаем Bind9

apt-get install bind9 - устанавливаем Bind9

pgrep named - проверяем запуск демона named (он же bind9)

/etc/bind/named.conf - главный конфиг файл (в дистрибутивах debian в нем ссылки(include) на другие файлы)

1. Редактируем файл /etc/bind/named.conf.options

nano /etc/bind/named.conf.options - редактируем, убираем комментарии, комментируем не нужное

---------------------------------

forwarders {

192.168.15.1; - внешний сервер DNS

};

//dnssec-validation auto; - эту строку мы закомментируем (поставим //), в некоторых дистрибутивах этот параметр работает не правильно

//dnssec-enable yes; - были проблемы с bind после обновления, не резолвились внешние адреса, после добавления заработало

//dnssec-validation yes; - были проблемы с bind после обновления, не резолвились внешние адреса, после добавления заработало

listen-on-v6 { none; }; - отключаем прослушивания ipv6 DNS на интерфейсах (вместо any прописали none)

---------------------------------

/etc/init.d/bind9 restart - перезапускаем демон bind9

host ya.ru 127.0.0.1 - проверяем работу нашего DNS сервера (демона bind9)

2. Редактируем файл /etc/resolv.conf после успешной проверки

nano /etc/resolv.conf - редактируем

---------------------

domain d0.zor.inc

nameserver 127.0.0.1 - меняем строку nameserver указав ip 127.0.0.1 вместо ip внешнего сервера

---------------------

3. Редактируем файл etc/bind/named.conf.local создаем свою зону DNS "d0.zor.inc"

Типы зон: зона master принадлежит нам, зона slave о своем существовании узнает от мастера, зона hint для домена точки со списком корневых серверов,

nano /etc/bind/named.conf.local - редактируем файл

-------------------------------

zone "d0.zor.inc" {

type master; - тип зоны

file "/etc/bind/d0.zor.inc.zone"; - файл с описание хостов зоны

};

-------------------------------

!!! Всегда проверяйте изменения конфига с помощью named-checkconf

named-checkconf - проверка конфиг файлов (по умолчанию проверяет только синтаксис, например файла d9.zor.inc.zone еще нет, а проверка молчит )

named-checkconf -z - при использовании параметра "-z" производит проверку файлов которых не хватает.

4. Редактируем файл описания нашей зоны d0.zor.inc.zone

nano /etc/bind/d0.zor.inc.zone - редактируем файл

------------------------------

$TTL 30

$ORIGIN d0.zor.inc.

@ SOA c0 root 2021011300 1h 10m 1d 30

NS c0

MX 10 c0

c0 A 192.168.200.1

c1 A 192.168.200.2

router A 10.0.0.1

printer A 192.168.15.10

internet A 10.0.0.23

------------------------------

named-checkconf -z - проверка конфигурации на ошибки

!!! Да для того что-бы настройки вступили в силу можно перезагрузить сервер, перезапустить демон,

!!! но это скорее не правильное действие, лучше использовать специальную программу rndc

!!! rndc - специальная программа для управления bind

!!! Внимание rndc reload - перечитать все конфигурационные файлы и файлы описания зон

rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны

Пример скрипта проверки хостов № 1

#! /bin/sh
while :
do
  clear
  for x in `seq 1 10`
  do
   /bin/echo -ne "$x:\t"
   host c$x.d0.zor.inc. 192.168.200.$((0 + $x)) | grep zor
   /bin/echo -ne "$x:\t"
   host c0x.d$.zor.inc. 192.168.200.$((0 + $x)) | grep zor
   done
   sleep 2
done

#! /bin/sh

while :

clear

for x in `seq 1 10`

/bin/echo -ne "$x:\t"

host c$x.d0.zor.inc. 192.168.200.$((0 + $x)) | grep zor

/bin/echo -ne "$x:\t"

host c0x.d$.zor.inc. 192.168.200.$((0 + $x)) | grep zor

done

sleep 2

done

Пример скрипта проверки хостов № 2

#! /bin/sh
while :
do
   /bin/echo -ne "\t"
   host router.d0.zor.inc 192.168.200.1 | grep zor
   /bin/echo -ne "\t"
   host c0.d0.zor.inc 192.168.200.1 | grep zor
   /bin/echo -ne "\t"
   host c1.d0.zor.inc 192.168.200.1 | grep zor
   /bin/echo -ne "\t"
   host printer.d0.zor.inc 192.168.200.1 | grep zor
   /bin/echo -ne "\t"
   host internet.d0.zor.inc 192.168.200.1 | grep zor
   sleep 5
   clear
done

#! /bin/sh

while :

/bin/echo -ne "\t"

host router.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host c0.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host c1.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host printer.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host internet.d0.zor.inc 192.168.200.1 | grep zor

sleep 5

clear

done

Пример скрипта проверки хостов № 3

#! /bin/sh
while :
do
    for x in `seq 1 5`
    do
    /bin/echo -ne "test $x:\t\n\t"
    host router.d0.zor.inc 192.168.200.1 | grep zor
    /bin/echo -ne "\t"
    host c0.d0.zor.inc 192.168.200.1 | grep zor
    /bin/echo -ne "\t"
    host c1.d0.zor.inc 192.168.200.1 | grep zor
    /bin/echo -ne "\t"
    host printer.d0.zor.inc 192.168.200.1 | grep zor
    /bin/echo -ne "\t"
    host internet.d0.zor.inc 192.168.200.1 | grep zor
    sleep 5
    clear
    done
done

#! /bin/sh

while :

for x in `seq 1 5`

/bin/echo -ne "test $x:\t\n\t"

host router.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host c0.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host c1.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host printer.d0.zor.inc 192.168.200.1 | grep zor

/bin/echo -ne "\t"

host internet.d0.zor.inc 192.168.200.1 | grep zor

sleep 5

clear

done

Сервер DNS — bind9 — добавление slave зоны

1. Редактируем файл и добавим slave зону d1.zor.inc
nano /etc/bind/named.conf.local
-------------------------------
zone "d0.zor.inc" {
      type master;
      file "/etc/bind/d0.zor.inc.zone";

};

zone "d1.zor.inc" {
      type slave;
      master {10.0.0.27;};
      file "d1.zor.inc.zone"; # !!! Внимание: без этой строки кэша не будет, путь относительный, файл описания зоны, файл кэш с мастера на d0 искать тут /var/cache/bind/d1.zor.inc.zone

};
-------------------------------

2. Проверяем на ошибки 
named-checkconf - проверка конфигурации на ошибки

3. Применяем изменения 
rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны

4. Проверяем, c1 - ПК в домене d1.zor.inc.
host c1.d1.zor.inc.

1. Редактируем файл и добавим slave зону d1.zor.inc

nano /etc/bind/named.conf.local

-------------------------------

zone "d0.zor.inc" {

type master;

file "/etc/bind/d0.zor.inc.zone";

};

zone "d1.zor.inc" {

type slave;

master {10.0.0.27;};

file "d1.zor.inc.zone"; # !!! Внимание: без этой строки кэша не будет, путь относительный, файл описания зоны, файл кэш с мастера на d0 искать тут /var/cache/bind/d1.zor.inc.zone

};

-------------------------------

2. Проверяем на ошибки

named-checkconf - проверка конфигурации на ошибки

3. Применяем изменения

rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны

4. Проверяем, c1 - ПК в домене d1.zor.inc.

host c1.d1.zor.inc.

Сервер DNS — bind9 — добавление зоны обратного преобразования (ptr запись)

!!! Домен in-addr.arpa
!!! .in-addr.arpa. - Это специальный домен, предназначенный для обратного преобразования.
!!! FQDN будет выглядеть следующим образом: 192.168.200.1.in-addr.arpa
!!! Все примеры, которые мы до сих пор рассматривали, относились к прямому преобразованию, когда имя машины преобразовывалось в IP адрес. 
!!! DNS сервера позволяют осуществлять и обратное преобразование — IP адрес в имя машины.
!!! 10.in-addr.arpa. 10/8 10.0.0/8  
!!! 10.10.in-addr.arpa. 10.10/16 10.10.0/16  
!!! 10.10.10.in-addr.arpa. 10.10.10/24 10.0.0.0/24

!!! у меня в  примере три сети 192.168.200/24, 192.168.15/24,  10.0.0/24 поэтому три файла
!!! Внимание на забывайте ставить точку в имени FQDN (c0.d0.zor.inc.) , ( 200.168.192.in-addr.arpa.)

0. Редактируем файл /etc/bind/named.conf.local, добавим ptr зону 10.0.0.in-addr.arpa
nano /etc/bind/named.conf.local
-------------------------------
zone "d0.zor.inc" {
      type master;
      file "/etc/bind/d0.zor.inc.zone";

};

zone "0.0.10.in-addr.arpa" {
      type master;
      file "/etc/bind/0.0.10.in-addr.arpa.zone";

};

zone "15.168.192.in-addr.arpa" {
      type master;
      file "/etc/bind/15.168.192.in-addr.arpa.zone";

};

zone "200.168.192.in-addr.arpa" {
      type master;
      file "/etc/bind/200.168.192.in-addr.arpa.zone";

};
-------------------------------


1. редактируем файл  /etc/bind/0.0.10.in-addr.arpa.zone
nano /etc/bind/0.0.10.in-addr.arpa.zone
----------------------------------
$TTL    30
$ORIGIN 0.0.10.in-addr.arpa.

@       SOA     c0.d0.zor.inc.  root.d0.zor.inc.        (
                2021011300      1h      10m     1d      30)
        NS      c0.d0.zor.inc.

23      PTR internet.d0.zor.inc.
1       PTR router.d0.zor.inc.

----------------------------------


2. редактируем файл  /etc/bind/200.168.192.in-addr.arpa.zone
nano /etc/bind/200.168.192.in-addr.arpa.zone
----------------------------------
$TTL    30
$ORIGIN 200.168.192.in-addr.arpa.

@       SOA     c0.d0.zor.inc.  root.d0.zor.inc.        (
                2021011300      1h      10m     1d      30)
        NS      c0.d0.zor.inc.

#$GENERATE 0-254 ${0} PTR c$.d0.zor.inc. - удали нафиг это пример
#$GENERATE 0-54 ${200} PTR c$.d0.zor.inc. - удали нафиг это пример

$GENERATE 0-5 ${1} PTR c$.d0.zor.inc.



----------------------------------

3. редактируем файл  /etc/bind/15.168.192.in-addr.arpa.zone
nano /etc/bind/15.168.192.in-addr.arpa.zone
----------------------------------
$TTL    30
$ORIGIN 15.168.192.in-addr.arpa.

@       SOA     c0.d0.zor.inc.  root.d0.zor.inc.        (
                2021011300      1h      10m     1d      30)
        NS      c0.d0.zor.inc.

10      PTR printer.d0.zor.inc.

----------------------------------

4. Применяем изменения 
named-checkconf -z - проверяем конфиг файлы bind

Если с конфигурационными файлами все в порядке, применяем изменения с помощью rndc
rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны
!!! Внимание rndc reload - перечитать все конфигурационные файлы и файлы описания зон
rndc reload 15.168.192.in-addr.arpa. - перезапустить зону 15.168.192.in-addr.arpa.

5. Проверяем
host 192.168.15.1
host 192.168.200.1
host 192.168.200.2
host 10.0.0.1
host 10.0.0.23

Если все хорошо, в ответ мы получим ИП_АДРЕС.in-addr.arpa domain name pointer ИМЯ.d0.zor.inc.

100

101

102

103

104

105

106

!!! Домен in-addr.arpa

!!! .in-addr.arpa. - Это специальный домен, предназначенный для обратного преобразования.

!!! FQDN будет выглядеть следующим образом: 192.168.200.1.in-addr.arpa

!!! Все примеры, которые мы до сих пор рассматривали, относились к прямому преобразованию, когда имя машины преобразовывалось в IP адрес.

!!! DNS сервера позволяют осуществлять и обратное преобразование — IP адрес в имя машины.

!!! 10.in-addr.arpa. 10/8 10.0.0/8

!!! 10.10.in-addr.arpa. 10.10/16 10.10.0/16

!!! 10.10.10.in-addr.arpa. 10.10.10/24 10.0.0.0/24

!!! у меня в примере три сети 192.168.200/24, 192.168.15/24, 10.0.0/24 поэтому три файла

!!! Внимание на забывайте ставить точку в имени FQDN (c0.d0.zor.inc.) , ( 200.168.192.in-addr.arpa.)

0. Редактируем файл /etc/bind/named.conf.local, добавим ptr зону 10.0.0.in-addr.arpa

nano /etc/bind/named.conf.local

-------------------------------

zone "d0.zor.inc" {

type master;

file "/etc/bind/d0.zor.inc.zone";

};

zone "0.0.10.in-addr.arpa" {

type master;

file "/etc/bind/0.0.10.in-addr.arpa.zone";

};

zone "15.168.192.in-addr.arpa" {

type master;

file "/etc/bind/15.168.192.in-addr.arpa.zone";

};

zone "200.168.192.in-addr.arpa" {

type master;

file "/etc/bind/200.168.192.in-addr.arpa.zone";

};

-------------------------------

1. редактируем файл /etc/bind/0.0.10.in-addr.arpa.zone

nano /etc/bind/0.0.10.in-addr.arpa.zone

----------------------------------

$TTL 30

$ORIGIN 0.0.10.in-addr.arpa.

@ SOA c0.d0.zor.inc. root.d0.zor.inc. (

2021011300 1h 10m 1d 30)

NS c0.d0.zor.inc.

23 PTR internet.d0.zor.inc.

1 PTR router.d0.zor.inc.

----------------------------------

2. редактируем файл /etc/bind/200.168.192.in-addr.arpa.zone

nano /etc/bind/200.168.192.in-addr.arpa.zone

----------------------------------

$TTL 30

$ORIGIN 200.168.192.in-addr.arpa.

@ SOA c0.d0.zor.inc. root.d0.zor.inc. (

2021011300 1h 10m 1d 30)

NS c0.d0.zor.inc.

#$GENERATE 0-254 ${0} PTR c$.d0.zor.inc. - удали нафиг это пример

#$GENERATE 0-54 ${200} PTR c$.d0.zor.inc. - удали нафиг это пример

$GENERATE 0-5 ${1} PTR c$.d0.zor.inc.

----------------------------------

3. редактируем файл /etc/bind/15.168.192.in-addr.arpa.zone

nano /etc/bind/15.168.192.in-addr.arpa.zone

----------------------------------

$TTL 30

$ORIGIN 15.168.192.in-addr.arpa.

@ SOA c0.d0.zor.inc. root.d0.zor.inc. (

2021011300 1h 10m 1d 30)

NS c0.d0.zor.inc.

10 PTR printer.d0.zor.inc.

----------------------------------

4. Применяем изменения

named-checkconf -z - проверяем конфиг файлы bind

Если с конфигурационными файлами все в порядке, применяем изменения с помощью rndc

rndc reconfig - перечитать конфигурационный файл и загрузить только новые зоны

!!! Внимание rndc reload - перечитать все конфигурационные файлы и файлы описания зон

rndc reload 15.168.192.in-addr.arpa. - перезапустить зону 15.168.192.in-addr.arpa.

5. Проверяем

host 192.168.15.1

host 192.168.200.1

host 192.168.200.2

host 10.0.0.1

host 10.0.0.23

Если все хорошо, в ответ мы получим ИП_АДРЕС.in-addr.arpa domain name pointer ИМЯ.d0.zor.inc.

bind очистка кэша:

rndc dumpdb -all  - сохранить кэш в файл named_dump.db  (обычно тут /var/bind/named_dump.db)

rndc flushname mx.example.ru. - удаляем mx.example.ru из кэша

rndc flush - очистить кэш

Пример:
rndc flushname mx.example.ru. - удаляем mx.example.ru из кэша
rm /var/bind/named_dump.db - удаляем дамп кэша DNS
rndc dumpdb -all - сохраняем дамп кэша DNS
grep mx.example.ru /var/bind/named_dump.db - проверяем если запись

rndc dumpdb -all - сохранить кэш в файл named_dump.db (обычно тут /var/bind/named_dump.db)

rndc flushname mx.example.ru. - удаляем mx.example.ru из кэша

rndc flush - очистить кэш

Пример:

rndc flushname mx.example.ru. - удаляем mx.example.ru из кэша

rm /var/bind/named_dump.db - удаляем дамп кэша DNS

rndc dumpdb -all - сохраняем дамп кэша DNS

grep mx.example.ru /var/bind/named_dump.db - проверяем если запись

DHCP

!!! порты UDP, сервер 67, клиент 68
!!! ipv4 - DHCP - определена в RFC 2131
!!! ipv6 - DHCPv6 и определена в RFC 3315
Передача данных производится при помощи протокола UDP, при этом сервер принимает сообщения от клиентов на порт 67 и отправляет сообщения клиентам на порт 68.

Запрос IP клиентом DHCPDISCOVER:
Он отправляет сообщение типа DHCPDISCOVER, при этом в качестве IP-адреса источника указывается 0.0.0.0 (так как компьютер ещё не имеет собственного IP-адреса), а в качестве адреса назначения — широковещательный адрес 255.255.255.255.
В сообщении клиент заполняет несколько полей начальными значениями:
уникальный идентификатор транзакции, который позволяет отличать данный процесс получения IP-адреса от других, протекающих в то же время;
аппаратный адрес (MAC-адрес) клиента;
последний известный клиенту IP-адрес, а в данном примере это 192.168.1.100;
Это необязательно и может быть проигнорировано сервером.

Сервер DHCP предлагает IP адрес клиенту DHCPOFFER:
Это сообщение DHCP-сервер рассылает широковещательно. 
Клиент может получить несколько различных предложений DHCP от разных серверов; из них он должен выбрать то, которое его «устраивает».

Клиент выбирает конфигурацию предложенную DHCP-серверами DHCPREQUEST:
Выбрав одну из конфигураций, предложенных DHCP-серверами, клиент отправляет запрос DHCP (DHCPREQUEST). 
Он рассылается широковещательно; при этом к опциям, указанным клиентом в сообщении DHCPDISCOVER, добавляется специальная опция 
— идентификатор сервера — указывающая адрес DHCP-сервера, выбранного клиентом.

Подтверждение DHCP
Сервер подтверждает запрос и направляет это подтверждение (DHCPACK) клиенту. 
После этого клиент должен настроить свой сетевой интерфейс, используя предоставленные опции.

!!! порты UDP, сервер 67, клиент 68

!!! ipv4 - DHCP - определена в RFC 2131

!!! ipv6 - DHCPv6 и определена в RFC 3315

Передача данных производится при помощи протокола UDP, при этом сервер принимает сообщения от клиентов на порт 67 и отправляет сообщения клиентам на порт 68.

Запрос IP клиентом DHCPDISCOVER:

Он отправляет сообщение типа DHCPDISCOVER, при этом в качестве IP-адреса источника указывается 0.0.0.0 (так как компьютер ещё не имеет собственного IP-адреса), а в качестве адреса назначения — широковещательный адрес 255.255.255.255.

В сообщении клиент заполняет несколько полей начальными значениями:

уникальный идентификатор транзакции, который позволяет отличать данный процесс получения IP-адреса от других, протекающих в то же время;

аппаратный адрес (MAC-адрес) клиента;

последний известный клиенту IP-адрес, а в данном примере это 192.168.1.100;

Это необязательно и может быть проигнорировано сервером.

Сервер DHCP предлагает IP адрес клиенту DHCPOFFER:

Это сообщение DHCP-сервер рассылает широковещательно.

Клиент может получить несколько различных предложений DHCP от разных серверов; из них он должен выбрать то, которое его «устраивает».

Клиент выбирает конфигурацию предложенную DHCP-серверами DHCPREQUEST:

Выбрав одну из конфигураций, предложенных DHCP-серверами, клиент отправляет запрос DHCP (DHCPREQUEST).

Он рассылается широковещательно; при этом к опциям, указанным клиентом в сообщении DHCPDISCOVER, добавляется специальная опция

— идентификатор сервера — указывающая адрес DHCP-сервера, выбранного клиентом.

Подтверждение DHCP

Сервер подтверждает запрос и направляет это подтверждение (DHCPACK) клиенту.

После этого клиент должен настроить свой сетевой интерфейс, используя предоставленные опции.

DHCP установка сервера (isc-dhcp-server)

apt-cache -n search dhcp - ищем пакет с именем (параметр -n) dhcp 
apt-cache search -n dhcp - ищем пакет с именем (параметр -n) dhcp 
apt-cache search -n dhcp | grep server  - ищем пакет с именем (параметр -n) dhcp 

apt install isc-dhcp-server - устанавливаем DHCP сервер

apt-cache -n search dhcp - ищем пакет с именем (параметр -n) dhcp

apt-cache search -n dhcp - ищем пакет с именем (параметр -n) dhcp

apt-cache search -n dhcp | grep server - ищем пакет с именем (параметр -n) dhcp

apt install isc-dhcp-server - устанавливаем DHCP сервер

DHCP настройка сервера (isc-dhcp-server)

0. редактируем файл /etc/default/isc-dhcp-server
nano /etc/default/isc-dhcp-server
---------------------------------
INTERFACESv4="lan"
---------------------------------

1. Перейдем в каталог /etc/dhcp 
cd /etc/dhcp

тут два файла 
dhclient.conf - настройки dhcp клиента 
dhcpd.conf - настройки сервера


1. редактируем файл /etc/dhcp/dhcpd.conf
> dhcpd.conf - очистим файл
nano dhcpd.conf - редактируем файл
---------------
# Глобальные настройки
option domain-name "d0.zor.inc"; # наша зона DNS
option domain-name-servers 192.168.200.1;  # наш  DNS сервер
option routers 192.168.200.1; # Маршрут по умолчанию

default-lease-time 600; # время аренды ip десять минут
max-lease-time 86400; # время ожидания доступности dhcp сервера один день (через день клиент получит адрес APIPA 169.$

ddns-update-style none; # отключаем отправку нашему dns серверу о новых клиентах
authoritative; # говорим всем что самый главный dhcp сервер (у клиента не будет задержи при получения ip)

# Настройки для сети 192.168.200.0/24
subnet 192.168.200.0 netmask 255.255.255.0 {
#option netbios-name-servers 192.168.200.1; # в 2021 году net-bios зачем?, можно удалить
#option domain-name-servers 192.168.200.1; # можно удалить, указали в глобальных настройках
#option domain-name "d0.zor.inc"; # можно удалить, указали в глобальных настройках
#option routers 192.168.200.1; # можно указать в глобальных настройках, тем более если сеть одна.
#option broadcast-address 192.168.200.255; # можно удалить
range 192.168.200.50 192.168.200.250;
}
---------------

2. Итоговый файл /etc/dhcp/dhcpd.conf
nano dhcpd.conf - редактируем файл
---------------
option domain-name "d0.zor.inc";
option domain-name-servers 192.168.200.1;
option routers 192.168.200.1;

default-lease-time 600;
max-lease-time 86400;

ddns-update-style none;
authoritative;

subnet 192.168.200.0 netmask 255.255.255.0 {
       range 192.168.200.50 192.168.200.250;
}

---------------

3. Проверяем конфиги dhcp сервера
dhcpd -t - команда проверки конфигов dchp сервера 

4. если все хорошо то перезапускаем dhcp сервер
/etc/init.d/isc-dhcp-server restart - перезапускаем dhcp сервер

0. редактируем файл /etc/default/isc-dhcp-server

nano /etc/default/isc-dhcp-server

---------------------------------

INTERFACESv4="lan"

---------------------------------

1. Перейдем в каталог /etc/dhcp

cd /etc/dhcp

тут два файла

dhclient.conf - настройки dhcp клиента

dhcpd.conf - настройки сервера

1. редактируем файл /etc/dhcp/dhcpd.conf

> dhcpd.conf - очистим файл

nano dhcpd.conf - редактируем файл

---------------

# Глобальные настройки

option domain-name "d0.zor.inc"; # наша зона DNS

option domain-name-servers 192.168.200.1; # наш DNS сервер

option routers 192.168.200.1; # Маршрут по умолчанию

default-lease-time 600; # время аренды ip десять минут

max-lease-time 86400; # время ожидания доступности dhcp сервера один день (через день клиент получит адрес APIPA 169.$

ddns-update-style none; # отключаем отправку нашему dns серверу о новых клиентах

authoritative; # говорим всем что самый главный dhcp сервер (у клиента не будет задержи при получения ip)

# Настройки для сети 192.168.200.0/24

subnet 192.168.200.0 netmask 255.255.255.0 {

#option netbios-name-servers 192.168.200.1; # в 2021 году net-bios зачем?, можно удалить

#option domain-name-servers 192.168.200.1; # можно удалить, указали в глобальных настройках

#option domain-name "d0.zor.inc"; # можно удалить, указали в глобальных настройках

#option routers 192.168.200.1; # можно указать в глобальных настройках, тем более если сеть одна.

#option broadcast-address 192.168.200.255; # можно удалить

range 192.168.200.50 192.168.200.250;

}

---------------

2. Итоговый файл /etc/dhcp/dhcpd.conf

nano dhcpd.conf - редактируем файл

---------------

option domain-name "d0.zor.inc";

option domain-name-servers 192.168.200.1;

option routers 192.168.200.1;

default-lease-time 600;

max-lease-time 86400;

ddns-update-style none;

authoritative;

subnet 192.168.200.0 netmask 255.255.255.0 {

range 192.168.200.50 192.168.200.250;

}

---------------

3. Проверяем конфиги dhcp сервера

dhcpd -t - команда проверки конфигов dchp сервера

4. если все хорошо то перезапускаем dhcp сервер

/etc/init.d/isc-dhcp-server restart - перезапускаем dhcp сервер

Включение IP Forward

!!! По умолчанию ip forward выключен
!!! Если forward выключен то не будет работать маршрутизация между интерфейсами
cat /proc/sys/net/ipv4/ip_forward - проверяем текущие состояние ip_forward

echo 1 > /proc/sys/net/ipv4/ip_forward - так мы можем включить IP forward

!!! Для постоянного включения необходимо отредактировать файл  /etc/sysctl.conf, найти строку net.ipv4.ip_forward=1 и убрать комментарий с неё
nano /etc/sysctl.conf
---------------------
# Uncomment the next line to enable packet forwarding for IPv4
net.ipv4.ip_forward=1
---------------------
sysctl -p  - выполняем для применения изменений без перезагрузки 
sysctl -f  - выполняем для применения изменений без перезагрузки

!!! По умолчанию ip forward выключен

!!! Если forward выключен то не будет работать маршрутизация между интерфейсами

cat /proc/sys/net/ipv4/ip_forward - проверяем текущие состояние ip_forward

echo 1 > /proc/sys/net/ipv4/ip_forward - так мы можем включить IP forward

!!! Для постоянного включения необходимо отредактировать файл /etc/sysctl.conf, найти строку net.ipv4.ip_forward=1 и убрать комментарий с неё

nano /etc/sysctl.conf

---------------------

# Uncomment the next line to enable packet forwarding for IPv4

net.ipv4.ip_forward=1

---------------------

sysctl -p - выполняем для применения изменений без перезагрузки

sysctl -f - выполняем для применения изменений без перезагрузки

NAT

!!! В организация NAT не должно быть в принципе. Доступ к интернету должен осуществляется через proxy сервер
!!! eth0 = isp


NAT:
iptables -t nat -A POSTROUTING -o isp -j MASQUERADE
iptables -t nat -A POSTROUTING -o eth0 -j MASQUERADE
 
forward port:
iptables -t nat -A PREROUTING -p tcp -d 192.168.3.124 --dport 3389 -j DNAT --to 10.70.70.105:3389
iptables -t nat -A PREROUTING -p tcp -d 192.168.3.124 --dport 5090 -j DNAT --to 10.70.70.101:5090

!!! В организация NAT не должно быть в принципе. Доступ к интернету должен осуществляется через proxy сервер

!!! eth0 = isp

NAT:

iptables -t nat -A POSTROUTING -o isp -j MASQUERADE

iptables -t nat -A POSTROUTING -o eth0 -j MASQUERADE

forward port:

iptables -t nat -A PREROUTING -p tcp -d 192.168.3.124 --dport 3389 -j DNAT --to 10.70.70.105:3389

iptables -t nat -A PREROUTING -p tcp -d 192.168.3.124 --dport 5090 -j DNAT --to 10.70.70.101:5090

DHCP настроим имя для хоста + IP address

!!! Хотим чтобы компьютерам по их имени добавлялись IP
0. Перейдем в каталог bind  
cd /etc/bind 
1. Cпомощью echo добавим запись A для компьютера winxp с IP 192.168.200.13 в зону d0.zor.inc.zone
echo winxp  A 192.168.200.13 >> d0.zor.inc.zone
2. Проверим конфиг демона bind
named-checkconf -z
3. Применим настройки для зоны d0.zor.inc.zone
rndc reload d0.zor.inc.zone - перезапустить зону d0.zor.inc.zone

4. Теперь требуется настроить DHCP сервер что бы он выдавал IP адреса
cat /var/lib/dhcp/dhcpd.leases - показать все арендованные  IP адреса и MAC
less /var/lib/dhcp/dhcpd.leases- показать все арендованные  IP адреса и MAC

5. Вариант вставки MAC в /etc/dhcpd.conf
cat >> dhcpd.conf
hardware ethernet 52:54:00:af:d3:b7;
Ctrl+d

Ну или отредактируем файл редактором  /etc/dhcp/dhcpd.conf
nano /etc/dhcp/dhcpd.conf - редактируем файл
-------------------------
option domain-name "d0.zor.inc";
option domain-name-servers 192.168.200.1;
option routers 192.168.200.1;

default-lease-time 600;
max-lease-time 86400;

ddns-update-style none;
authoritative;

subnet 192.168.200.0 netmask 255.255.255.0 {
        range 192.168.200.50 192.168.200.250;
}

host winxp {
      hardware ethernet 52:54:00:af:d3:b7;
      fixed-address winxp.d0.zor.inc;
}
-------------------------
6. Проверяем конфиг DHCP и перезапускаем демон DHCP
dhcpd -t
/etc/init.d/isc-dhcp-server restart

arping -I lan winxp - пинг по протоколу ARP (-I интерфейс, lan - имя интерфейса, winxp - имя ПК\IP)

!!! Хотим чтобы компьютерам по их имени добавлялись IP

0. Перейдем в каталог bind

cd /etc/bind

1. Cпомощью echo добавим запись A для компьютера winxp с IP 192.168.200.13 в зону d0.zor.inc.zone

echo winxp A 192.168.200.13 >> d0.zor.inc.zone

2. Проверим конфиг демона bind

named-checkconf -z

3. Применим настройки для зоны d0.zor.inc.zone

rndc reload d0.zor.inc.zone - перезапустить зону d0.zor.inc.zone

4. Теперь требуется настроить DHCP сервер что бы он выдавал IP адреса

cat /var/lib/dhcp/dhcpd.leases - показать все арендованные IP адреса и MAC

less /var/lib/dhcp/dhcpd.leases- показать все арендованные IP адреса и MAC

5. Вариант вставки MAC в /etc/dhcpd.conf

cat >> dhcpd.conf

hardware ethernet 52:54:00:af:d3:b7;

Ctrl+d

Ну или отредактируем файл редактором /etc/dhcp/dhcpd.conf

nano /etc/dhcp/dhcpd.conf - редактируем файл

-------------------------

option domain-name "d0.zor.inc";

option domain-name-servers 192.168.200.1;

option routers 192.168.200.1;

default-lease-time 600;

max-lease-time 86400;

ddns-update-style none;

authoritative;

subnet 192.168.200.0 netmask 255.255.255.0 {

range 192.168.200.50 192.168.200.250;

}

host winxp {

hardware ethernet 52:54:00:af:d3:b7;

fixed-address winxp.d0.zor.inc;

}

-------------------------

6. Проверяем конфиг DHCP и перезапускаем демон DHCP

dhcpd -t

/etc/init.d/isc-dhcp-server restart

arping -I lan winxp - пинг по протоколу ARP (-I интерфейс, lan - имя интерфейса, winxp - имя ПК\IP)

Bind дополнительные настройки

directory 
Определяет директорию, в которой сервер BIND будет искать файлы описания зон и создавать различные
дополнительные файлы. Обычно этот параметр ссылается на директорию /var/named.
Пример:
directory «/var/named»

notify yes|no 
Если параметр notify равен yes, то при изменении описания зоны будут посланы уведомления всем slave DNS серверам. 
Значение по умолчанию — yes.
Пример:
notify no

also-notify address 
При помощи этого параметра определяются DNS сервера, которые необходимо уведомить при изменении зоны.
Slave DNS сервера в этом списке указывать не надо.
Значение по умолчанию не определено.
Пример:
also-notify { 193.12.20.1; 193.12.38.200; };

recursion yes|no 
Параметр определяет, будет ли сервер BIND рекурсивным сервером. 
Значение по умолчанию — yes.
Пример:
recursion yes

allow-recursion address 
Этот параметр определяет адреса машин или сетей, для которых сервер BIND будет выступать в роли рекурсивного сервера. 
Значение по умолчанию неопределенно.
Пример:
allow-recursion { 193.12.13.240; 194.12.34/24; };

listen-on port порт list 
Параметр позволяет определить, на каком интерфейсе и порту будет слушать запросы сервер. 
Значение по умолчанию: все интерфейсы, порт 53.
Пример:
listen-on { 5.6.7.8; };
listen-on port 1234 { ! 1.2.3.4; 1.2/16; };

allow-query адреса 
Параметр определяет, с каких адресов можно посылать запросы нашему серверу. 
Значение по умолчанию:
разрешены все адреса.
Пример:
allow-query { 1.2.3.4; 10.10.100/24; };

allow-transfer адреса 
Параметр определяет, на какие сервера разрешены зонные пересылки. 
Значение по умолчанию: пересылки разрешены всем серверам.
Пример:
allow-transfer { 1.2.3.4; 10.10.100/24; };

blackhole адреса 
Параметр определяет адреса серверов, запросы от которых будут всегда игнорироваться. 
Сервер не будет посылать им свои запросы. 
Значение по умолчанию: список не определен.
Пример:
blackhole { 1.2.3.4; 2.3.4.5; };

Конспект: linux ubuntu часть 1

Автор записи Автор: Evgeny Yakovlev
Дата записи 2020/12/28

Введение:

POSIX - стандарт написания операционной системы


--------------
Basic Software
--------------
Shell ||  FS
--------------
Unix Kernel
--------------

Ядро обычно монолитное. (Может быть модульным)
Включает в себя драйверы устройств.
В unix все является файлом (папки, устройства, файлы, драйверы)
Текстовая операционная система.
Все операции ввода/вывода осуществляются через ядро.


Оболочка связывает пользователя с ядром. 

Borne Shell -> sh
Borne Again Shel -> bash 
C shell -> csh tcsh  -> FreeBSD  

Система инициализации как правила написана на языке shell.


CTRL+ALT+F1 - переключение в консоль
CTRL+ALT+F7 - переключится в графику


Терминал — устройство ввода/вывода, рабочее место на многопользовательских ЭВМ, монитор с клавиатурой 
Оболочка операционной системы (от англ. shell - оболочка) — интерпретатор команд операционной системы (ОС), обеспечивающий интерфейс для взаимодействия пользователя с функциями системы 
Консоль — интерфейс командной строки в котором инструкции компьютеру даются только путём ввода с клавиатуры текстовых строк (команд)

POSIX - стандарт написания операционной системы

--------------

Basic Software

--------------

Shell || FS

--------------

Unix Kernel

--------------

Ядро обычно монолитное. (Может быть модульным)

Включает в себя драйверы устройств.

В unix все является файлом (папки, устройства, файлы, драйверы)

Текстовая операционная система.

Все операции ввода/вывода осуществляются через ядро.

Оболочка связывает пользователя с ядром.

Borne Shell -> sh

Borne Again Shel -> bash

C shell -> csh tcsh -> FreeBSD

Система инициализации как правила написана на языке shell.

CTRL+ALT+F1 - переключение в консоль

CTRL+ALT+F7 - переключится в графику

Терминал — устройство ввода/вывода, рабочее место на многопользовательских ЭВМ, монитор с клавиатурой

Оболочка операционной системы (от англ. shell - оболочка) — интерпретатор команд операционной системы (ОС), обеспечивающий интерфейс для взаимодействия пользователя с функциями системы

Консоль — интерфейс командной строки в котором инструкции компьютеру даются только путём ввода с клавиатуры текстовых строк (команд)

консоль

UNIXWAY - одно программа, одно действие

cd 
cd /tmp

command [options] [arguments]

что_делать как_делать над_чем_делать

getconf AGR_MAX - посмотреть ограничение количества аргументов

Аргументы задаются через пробел \ пробелы.

Linux регистра зависимая система. (то есть а не равно А)
Нижний регистр букв предпочтителен для команд.

Клавиша TAB позволяет авто дописывать команды.

UNIXWAY - одно программа, одно действие

cd /tmp

command [options] [arguments]

что_делать как_делать над_чем_делать

getconf AGR_MAX - посмотреть ограничение количества аргументов

Аргументы задаются через пробел \ пробелы.

Linux регистра зависимая система. (то есть а не равно А)

Нижний регистр букв предпочтителен для команд.

Клавиша TAB позволяет авто дописывать команды.

переменные

arg1=hello - задаем переменную arg1 со значением hello 
arg2=world - задаем переменную arg2 со значением world 

echo - команда вывод на экран

echo $arg1
echo $arg2

echo $arg1 $arg2

arg1=hello - задаем переменную arg1 со значением hello

arg2=world - задаем переменную arg2 со значением world

echo - команда вывод на экран

echo $arg1

echo $arg2

echo $arg1 $arg2

экранирование

Допустим у нас есть переменная arg1, нужно задать значение из двух слова hello и world.

Способ первый:
arg1=hello\ world

Второй способ:
arg1="hello world"

Третий способ:
arg1='Hello worl'

Особенности кавычек:
arg2="how are you?" - задали переменную
echo $arg2 - будет выведено "how are you"

arg2="$arg1 how are you?" - задали переменную
echo $arg2  - будет выведено "hello world how are you"

!!! внимание
arg2='$arg1 how are you?' - !!! задали значение переменной в одинарных кавычках (' - апостроф)
echo $arg2 - !!! будет выведено  $arg1 how are you?, значение переменной arg1 подставлено не будет

Допустим у нас есть переменная arg1, нужно задать значение из двух слова hello и world.

Способ первый:

arg1=hello\ world

Второй способ:

arg1="hello world"

Третий способ:

arg1='Hello worl'

Особенности кавычек:

arg2="how are you?" - задали переменную

echo $arg2 - будет выведено "how are you"

arg2="$arg1 how are you?" - задали переменную

echo $arg2 - будет выведено "hello world how are you"

!!! внимание

arg2='$arg1 how are you?' - !!! задали значение переменной в одинарных кавычках (' - апостроф)

echo $arg2 - !!! будет выведено $arg1 how are you?, значение переменной arg1 подставлено не будет

спец символы / шаблоны для командной строки

* - любое количество символов
? - один любой символ
[] - один символ из указанного диапазона, пример [a-z], [a,c] 

!!! Символ крышечка "_" впереди диапазона [^a ] инвертирует вывод, все  символы кроме "a"
[^zxc] - один символ за исключением указанного диапазона

[a-zA-Z0-9] - один алфавитном цифровой символ
[a-zA-Z0-9^-] - один алфавитном цифровой символ, или символ крышечка "^", или знак минус "-". !!! Внимание спец символы нужно записывать в конце диапазонов. 


touch - команда для "потрогать" файл, если файла нет, то файл будет создан.
touch f1 f2 f3 f4 f5  ff1 ff2 ff3 ff4

echo f*
echo ff*
echo *2
echo *[253]
echo ??4
echo *[3-5]
echo [^12]

* - любое количество символов

? - один любой символ

[] - один символ из указанного диапазона, пример [a-z], [a,c]

!!! Символ крышечка "_" впереди диапазона [^a ] инвертирует вывод, все символы кроме "a"

[^zxc] - один символ за исключением указанного диапазона

[a-zA-Z0-9] - один алфавитном цифровой символ

[a-zA-Z0-9^-] - один алфавитном цифровой символ, или символ крышечка "^", или знак минус "-". !!! Внимание спец символы нужно записывать в конце диапазонов.

touch - команда для "потрогать" файл, если файла нет, то файл будет создан.

touch f1 f2 f3 f4 f5 ff1 ff2 ff3 ff4

echo f*

echo ff*

echo *2

echo *[253]

echo ??4

echo *[3-5]

echo [^12]

перенаправление ввода/вывода

Программный канал (конвейер) направляет вывод одной программы на ввод другой.
| - конвейер

tocuh f48

>  - записать в файл, если в файле что то есть будет перезаписано

echo "hello world" > f48

cat f1

>> - дописать в файл

echo "privet!!!" >> f48

f48 < f1

f2 < f48 << F1

env | grep PATH

cat -n filename - пронумеровать строки и показать содержимое файла

Программный канал (конвейер) направляет вывод одной программы на ввод другой.

| - конвейер

tocuh f48

> - записать в файл, если в файле что то есть будет перезаписано

echo "hello world" > f48

cat f1

>> - дописать в файл

echo "privet!!!" >> f48

f48 < f1

f2 < f48 << F1

env | grep PATH

cat -n filename - пронумеровать строки и показать содержимое файла

поиск команд оболочкой / переменные окружения

!!! Переменные окружения передаются только в одну сторону от "родителя" к "детям".

SHELL – содержит путь к shell текущего пользователя
LS_COLORS – определяет соответствие между расширениями файлов и теми цветами которыми те отражаются в при выводе командой ls
USER – текущий пользователь
HOME – домашний каталог пользователя USER
PATH – содержит пути для поиска файлов по умолчанию
PWD – указывает на текущий каталог
LANG – определяет текущие настройки локали


Команды оболочки:
env – выводит список переменных окружения
export – экспортирует переменные окружения, делая их доступными для других программ
echo – выводит на терминал то, что передано в качестве параметра, в том числе и esc-последовательности*
reset – возврат настроек терминала к значениям по умолчанию
logout – завершение текущего пользовательского сеанса
exit – завершение сеанса работы с оболочкой


env - показать все переменные окружения (эти переменные доступны все программам пользователя)
echo $PATH - покажет относительные где оболочка ищет программы

pwd - показать текущую директорию (на самом деле оболочка берет значение из переменной PWD из переменного окружения, env в помощь)

export arg1="hello world" - добавить свою переменную в переменное окружение
env - показать все переменные окружения, так можно увидеть результат выполнения команды export (например: export arg1="hello world")

unset arg1 - удалить переменную agr1 из переменного окружения

!!! Переменные окружения передаются только в одну сторону от "родителя" к "детям".

SHELL – содержит путь к shell текущего пользователя

LS_COLORS – определяет соответствие между расширениями файлов и теми цветами которыми те отражаются в при выводе командой ls

USER – текущий пользователь

HOME – домашний каталог пользователя USER

PATH – содержит пути для поиска файлов по умолчанию

PWD – указывает на текущий каталог

LANG – определяет текущие настройки локали

Команды оболочки:

env – выводит список переменных окружения

export – экспортирует переменные окружения, делая их доступными для других программ

echo – выводит на терминал то, что передано в качестве параметра, в том числе и esc-последовательности*

reset – возврат настроек терминала к значениям по умолчанию

logout – завершение текущего пользовательского сеанса

exit – завершение сеанса работы с оболочкой

env - показать все переменные окружения (эти переменные доступны все программам пользователя)

echo $PATH - покажет относительные где оболочка ищет программы

pwd - показать текущую директорию (на самом деле оболочка берет значение из переменной PWD из переменного окружения, env в помощь)

export arg1="hello world" - добавить свою переменную в переменное окружение

env - показать все переменные окружения, так можно увидеть результат выполнения команды export (например: export arg1="hello world")

unset arg1 - удалить переменную agr1 из переменного окружения

ключи

Короткие - стиль UNIX

ls -a 
ls -a -i -h -l
ls -a -i -h -l ff*
ls -aihl ff*

Длинные  - стиль GNU
ls --help
ls -l --human-readable /bin/bush

Короткие - стиль UNIX

ls -a

ls -a -i -h -l

ls -a -i -h -l ff*

ls -aihl ff*

Длинные - стиль GNU

ls --help

ls -l --human-readable /bin/bush

определяем файл / команду / тип

type - команда покажет что это за файл: команда, программа, тип файла, файл
type echo
type ls
type iptables
type rm
type type

type - команда покажет что это за файл: команда, программа, тип файла, файл

type echo

type ls

type iptables

type rm

type type

файловые системы

fat
fat32
extfat
ntfs

ISO-9660
Rockridge
Joilet
UDF

ext2 - нет журнала
ext3 - есть журнал, 
ext4 - есть журнал, допиленная ext3 

ReiserFS - похожа на базу данных, у файлов есть индекс..., не развивается

JFS - разработчик IBM, хорошая производительность 
XFS - работа с огромными файлами
ZFS - позволяет создать огромный массив 

fsck - программа исправления ошибок на диске в случаи сбоя

fat

fat32

extfat

ntfs

ISO-9660

Rockridge

Joilet

UDF

ext2 - нет журнала

ext3 - есть журнал,

ext4 - есть журнал, допиленная ext3

ReiserFS - похожа на базу данных, у файлов есть индекс..., не развивается

JFS - разработчик IBM, хорошая производительность

XFS - работа с огромными файлами

ZFS - позволяет создать огромный массив

fsck - программа исправления ошибок на диске в случаи сбоя

файлы / типы файлов

ls -li - показать файлы в текущем каталоге (параметр i покажет IDNODE файлов) 

INODE - у нас называют файловый дескриптор \ Мета данные(дата создания и т.д.) \ Вся служебная информация (адреса расположения на fs и т.д.)  
INODE ID Metadata ---- Adds Blocks

длина имени файла 255 байт

. - текущий каталог
.. - каталог на уровень выше

.filename - скрытый файл 

Жесткие ссылки можно делать только на файлы и толь на файлы одной файловой системы (одного раздела).


ls -lid /home
ls -lid /home/i

~ - домашний каталог текущего пользователя


ls -l 
f или - — обыкновенный файл
l — символьная ссылка
d — директория
c — символьное устройство
b — блочное устройство
p — pipe (FIFO) файл
s — файл типа socket

ls -li - показать файлы в текущем каталоге (параметр i покажет IDNODE файлов)

INODE - у нас называют файловый дескриптор \ Мета данные(дата создания и т.д.) \ Вся служебная информация (адреса расположения на fs и т.д.)

INODE ID Metadata ---- Adds Blocks

длина имени файла 255 байт

. - текущий каталог

.. - каталог на уровень выше

.filename - скрытый файл

Жесткие ссылки можно делать только на файлы и толь на файлы одной файловой системы (одного раздела).

ls -lid /home

ls -lid /home/i

~ - домашний каталог текущего пользователя

ls -l

f или - — обыкновенный файл

l — символьная ссылка

d — директория

c — символьное устройство

b — блочное устройство

p — pipe (FIFO) файл

s — файл типа socket

каталоги

/bin – исполняемые файлы
/sbin – исполняемые файлы
/dev – файлы устройств - это специальный каталог, при загрузке системы создается в оперативной памяти, специальная программа\демон UDEVD
/etc – файлы конфигурации
/lib – системные библиотеки
/home – каталоги пользователей
/root – каталог суперпользователя
/usr – размещение приложений (6Гб - 16Гб)
/var – данные приложений (сюда любят писать все. базы данных, веб сервер, логи)
/tmp – временный каталог системы
/var/tmp – временные каталоги приложений
/proc – файловый интерфейс ОС
/opt – аналог “Program Files”
/mnt – монтирование сетевых ФС
/media – монтирование съемных ФС
/boot – загрузчик и ядро системы (128 Мб)
/sys – интерфейс к устройствам ОС
/srv – размещение Web-сайтов, FTP...

/bin – исполняемые файлы

/sbin – исполняемые файлы

/dev – файлы устройств - это специальный каталог, при загрузке системы создается в оперативной памяти, специальная программа\демон UDEVD

/etc – файлы конфигурации

/lib – системные библиотеки

/home – каталоги пользователей

/root – каталог суперпользователя

/usr – размещение приложений (6Гб - 16Гб)

/var – данные приложений (сюда любят писать все. базы данных, веб сервер, логи)

/tmp – временный каталог системы

/var/tmp – временные каталоги приложений

/proc – файловый интерфейс ОС

/opt – аналог “Program Files”

/mnt – монтирование сетевых ФС

/media – монтирование съемных ФС

/boot – загрузчик и ядро системы (128 Мб)

/sys – интерфейс к устройствам ОС

/srv – размещение Web-сайтов, FTP...

Полезные устройства из каталога /dev

/dev/zero - устройства с бесконечными нулями
/dev/null - черная дыра 
/dev/random - случайные значения
/dev/tty* - наши терминалы
/dev/sd* - диски и разделы
/dev/ttsy* - последовательный порт (minicom)

/dev/zero - устройства с бесконечными нулями

/dev/null - черная дыра

/dev/random - случайные значения

/dev/tty* - наши терминалы

/dev/sd* - диски и разделы

/dev/ttsy* - последовательный порт (minicom)

Стандартные ввод, вывод и вывод ошибок

Стандартные потоки (файлы):
0 – Стандартный ввод (stdin) (клавиатура)  /dev/stdin 
1 – Стандартный вывод (stdout) (экран) /dev/stdout
2 – Стандартный вывод ошибок (stderr) (экран) /dev/stderr
!!! Каждая программа в unix всегда использует stdin,stdout,stderr (демоны не используют)

cat -  Нажмите Ctrl+D – (EOF) для завершения работы
cat > testfile
Введите строку и нажмите Enter
Нажмите Ctrl+D – (EOF) для завершения работы


cat testfile > testfile 2> errfile
cat errfile
cat /etc/passwd > testfile2
cat < /etc/group > testfile

ls -l /etc > mylist

touch /bin/mycustomfile 2>errfile

2>errfile ls -l -R  /etc 1>poleznoe
cat errfile
cat poleznoe 

/etc/shell - конфиг шелла в системе

Стандартные потоки (файлы):

0 – Стандартный ввод (stdin) (клавиатура) /dev/stdin

1 – Стандартный вывод (stdout) (экран) /dev/stdout

2 – Стандартный вывод ошибок (stderr) (экран) /dev/stderr

!!! Каждая программа в unix всегда использует stdin,stdout,stderr (демоны не используют)

cat - Нажмите Ctrl+D – (EOF) для завершения работы

cat > testfile

Введите строку и нажмите Enter

Нажмите Ctrl+D – (EOF) для завершения работы

cat testfile > testfile 2> errfile

cat errfile

cat /etc/passwd > testfile2

cat < /etc/group > testfile

ls -l /etc > mylist

touch /bin/mycustomfile 2>errfile

2>errfile ls -l -R /etc 1>poleznoe

cat errfile

cat poleznoe

/etc/shell - конфиг шелла в системе

Основные команды для работы с файлами:

ls – вывод содержимого каталога
pwd – выводит на консоль путь к текущему каталогу
cd – смена текущего каталога
touch – создание файла или изменение его временных меток
mkdir – создание каталога
rm / rmdir – удаление файла / каталога, поддерживается рекурсия
cp / mv – копирование / переименование / перенос файлов и каталогов, поддерживается рекурсия
more / less – постраничный просмотр текстовых файлов
ln – создание ссылок на файлы (hard & soft)
cat / tac – вывод содержимого файла в прямом и обратном порядках

Примеры:
ls -alF /etc
pwd
cd /etc
pwd
cd ..
pwd
cd ~
touch test
ls -l test
mkdir -p dir1/dir2/dir3
cp test dir1/dir2
mv test mytest
rmdir dir1/dir2/dir3
cat /etc/passwd
tac /etc/group
more /etc/services
less /etc/syslog.conf
rm mytest
rm -rf dir1
ls -l *test*
rm *test*

ls – вывод содержимого каталога

pwd – выводит на консоль путь к текущему каталогу

cd – смена текущего каталога

touch – создание файла или изменение его временных меток

mkdir – создание каталога

rm / rmdir – удаление файла / каталога, поддерживается рекурсия

cp / mv – копирование / переименование / перенос файлов и каталогов, поддерживается рекурсия

more / less – постраничный просмотр текстовых файлов

ln – создание ссылок на файлы (hard & soft)

cat / tac – вывод содержимого файла в прямом и обратном порядках

Примеры:

ls -alF /etc

pwd

cd /etc

pwd

cd ..

pwd

cd ~

touch test

ls -l test

mkdir -p dir1/dir2/dir3

cp test dir1/dir2

mv test mytest

rmdir dir1/dir2/dir3

cat /etc/passwd

tac /etc/group

more /etc/services

less /etc/syslog.conf

rm mytest

rm -rf dir1

ls -l *test*

rm *test*

Дополнительные команды для работы с файлами

df - отчёт об использовании дискового пространства
du - оценка места на диске, занимаемого файлами и каталогами
sort – сортировка строк в текстовых файлах
cut / paste – работа с секциями файлов (вырезать / вставить)
head / tail – вывод (первых / последних) строк файла на стандартный вывод
wc – подсчет (размера файла, числа символов, слов, строк и т.п.)
tr – замена символов по шаблону
dd - преобразовать и копировать файл
tee – трансляция stdin в stdout c ведением лога
uniq – нахождение дублирующийся строк
grep – поиск по шаблону


df -h

du -h /var/log

ls /etc | sort | less
ls /etc/*.conf | wc -l

cat /etc/services | head

ls -l /etc | tr 'rwx' 'RWX'
ls -l /etc | tee test | tail

wc -c test

dd if=/dev/cdrom of=~/my.iso

cat | uniq -d

grep -rsni pppd /usr/share/doc

cat > test
line1:the 1st
line2:the 2nd
line3:the 3rd
{нажмите Ctrl+D}

cut -f 1 -d: test > tmp1
cut -f 2 -d: test > tmp2

paste tmp2 tmp1 > test

rm tmp* && cat test

df - отчёт об использовании дискового пространства

du - оценка места на диске, занимаемого файлами и каталогами

sort – сортировка строк в текстовых файлах

cut / paste – работа с секциями файлов (вырезать / вставить)

head / tail – вывод (первых / последних) строк файла на стандартный вывод

wc – подсчет (размера файла, числа символов, слов, строк и т.п.)

tr – замена символов по шаблону

dd - преобразовать и копировать файл

tee – трансляция stdin в stdout c ведением лога

uniq – нахождение дублирующийся строк

grep – поиск по шаблону

df -h

du -h /var/log

ls /etc | sort | less

ls /etc/*.conf | wc -l

cat /etc/services | head

ls -l /etc | tr 'rwx' 'RWX'

ls -l /etc | tee test | tail

wc -c test

dd if=/dev/cdrom of=~/my.iso

cat | uniq -d

grep -rsni pppd /usr/share/doc

cat > test

line1:the 1st

line2:the 2nd

line3:the 3rd

{нажмите Ctrl+D}

cut -f 1 -d: test > tmp1

cut -f 2 -d: test > tmp2

paste tmp2 tmp1 > test

rm tmp* && cat test

Полезные клавиши в консоли

^ - обозначают клавишу ctrl
Meta - клавиша ALT

CTRL + F - перемещение вперед по символьное (forward)
CTRL + B - перемещение назад по символьное (backward)
ESC + F - перемещение вперед по словами (forward)
ESC + B - перемещение назад по словами (backward)

CTRL + A - переместится в начало строки
CTRL + E - перемещение в конец строки
CTRL + V -

CTRL + U - вырезать все от начало до конца
CTRL + K - удаление от текущего положения курсора до конца строки
CTRL + Y - вставить вырезанное

CTRL + T - поменять символы или слова местами 
CTRL + L - очистка экрана

CTRL + D - удалять символы от курсора, с лева на право (аналог del)
CTRL + H - удалять символы к курсору, справа на лево (аналог backspace)
CTRL + W - удалить назад по словам 

ALT + U - привести слова в верхний регистр UPP
ALT + L - привести слова в нижний регистр LOW
ALT + C - привести слова к виду с заглавной буквы (Capital)

^ - обозначают клавишу ctrl

Meta - клавиша ALT

CTRL + F - перемещение вперед по символьное (forward)

CTRL + B - перемещение назад по символьное (backward)

ESC + F - перемещение вперед по словами (forward)

ESC + B - перемещение назад по словами (backward)

CTRL + A - переместится в начало строки

CTRL + E - перемещение в конец строки

CTRL + V -

CTRL + U - вырезать все от начало до конца

CTRL + K - удаление от текущего положения курсора до конца строки

CTRL + Y - вставить вырезанное

CTRL + T - поменять символы или слова местами

CTRL + L - очистка экрана

CTRL + D - удалять символы от курсора, с лева на право (аналог del)

CTRL + H - удалять символы к курсору, справа на лево (аналог backspace)

CTRL + W - удалить назад по словам

ALT + U - привести слова в верхний регистр UPP

ALT + L - привести слова в нижний регистр LOW

ALT + C - привести слова к виду с заглавной буквы (Capital)

История команд \ history

history - покажет историю выполненных команд, команды будут пронумерованы, всего хранится 1000 последних команд
!50 - выполнить 50 команду
!-4 - выполнить четвертую команду с конца
!! - выполнить последнею команду
!echo - будет произведен поиск в истории и будет выполнена команда начинающееся на echo

Также клавиши вверх и вниз перемещаются по history.

CTRL + P  - перемещение по истории команд назад (полезно если не работает боковая часть клавиатуры)
CTRL + N - перемещение по истории команд вперед (полезно если не работает боковая часть клавиатуры)

history - покажет историю выполненных команд, команды будут пронумерованы, всего хранится 1000 последних команд

!50 - выполнить 50 команду

!-4 - выполнить четвертую команду с конца

!! - выполнить последнею команду

!echo - будет произведен поиск в истории и будет выполнена команда начинающееся на echo

Также клавиши вверх и вниз перемещаются по history.

CTRL + P - перемещение по истории команд назад (полезно если не работает боковая часть клавиатуры)

CTRL + N - перемещение по истории команд вперед (полезно если не работает боковая часть клавиатуры)

Буфер FIFO \ Сокеты \ Socket

FIFO - точка встречи\ первый пришёл, ушел последний

Socket - более развитое понятие, встречается в TCP/IP в виде ADDRESS:port (придумали в BSD) (tcp socket), unix socket и т.д.

ls -l /tmp/.X11-unix/
 
Работа с сокетами возлагается на приложение, обработкой запросов занимается ядро.

FIFO - точка встречи\ первый пришёл, ушел последний

Socket - более развитое понятие, встречается в TCP/IP в виде ADDRESS:port (придумали в BSD) (tcp socket), unix socket и т.д.

ls -l /tmp/.X11-unix/

Работа с сокетами возлагается на приложение, обработкой запросов занимается ядро.

Подсистема magic

Расширения файлов *.txt, *.exe и т.д. - это скорее для человека, что бы было понятно что за файл, ядро узнает про тип файла от подсистемы magic
Подсистема magic  - служит для определения типа файла
Программа file для определения файла также использует подсистему magic

file text.txt
file file_name
file /bin/false
file /usr/share/zoneinfo/Europe/Moscow
file /usr/share/zoneinfo/W-SU
file /etc/init.d/cron

Примеры форматов файлов:
ELF 32-bit - !!! stripped у файла означает, что у файла убрана отладочная информация
ElF 64-bit
ASCII text
symbolic link to
timezone data
POSIX shell script, ASCII text executable

COFF  (в linux поддерживается, развивает microsoft)

Расширения файлов *.txt, *.exe и т.д. - это скорее для человека, что бы было понятно что за файл, ядро узнает про тип файла от подсистемы magic

Подсистема magic - служит для определения типа файла

Программа file для определения файла также использует подсистему magic

file text.txt

file file_name

file /bin/false

file /usr/share/zoneinfo/Europe/Moscow

file /usr/share/zoneinfo/W-SU

file /etc/init.d/cron

Примеры форматов файлов:

ELF 32-bit - !!! stripped у файла означает, что у файла убрана отладочная информация

ElF 64-bit

ASCII text

symbolic link to

timezone data

POSIX shell script, ASCII text executable

COFF (в linux поддерживается, развивает microsoft)

Pagers \ Читалки

more - программа для просмотра файлов
less - программа для просмотра файлов

!!! - все файлы в unix не рекомендуется открывать редактором, файл может быть огромным, а при открытии файла его содержимое помещается в оперативную память 
!!! - все файлы в unix не рекомендуется открывать редактором, например файлы логов, демон пишущий в лог, может перестать писать в лог.


ls -l /var/log/ - выбираем жертву, смотрим содержимое каталога "/var/log" с размерами файлов "-i"

more /var/log/auth.log
more /etc/services

less /var/log/kern.log
less /etc/services

more - программа для просмотра файлов

less - программа для просмотра файлов

!!! - все файлы в unix не рекомендуется открывать редактором, файл может быть огромным, а при открытии файла его содержимое помещается в оперативную память

!!! - все файлы в unix не рекомендуется открывать редактором, например файлы логов, демон пишущий в лог, может перестать писать в лог.

ls -l /var/log/ - выбираем жертву, смотрим содержимое каталога "/var/log" с размерами файлов "-i"

more /var/log/auth.log

more /etc/services

less /var/log/kern.log

less /etc/services

Документация \ man \ info

У большинство программ есть аргумент
--help
ls –help
cat --help

info
info [menu-item]
info iptables
info cat
info ls



Документация к программам обычно есть в man
man [опции] [раздел] manpage

Документация хранится в специально форматированных текстовых файлах, в директории /usr/share/man.
Документация к программам находится в директории /usr/share/doc.

Разделы man
man1 Системные утилиты общего пользования
man2 Функции системы
man3 Библиотечные функции
man4 Описание устройств
man5 Форматы конфигурационных файлов
man6 Игры
man7 Различные описания
man8 Административные утилиты
man9 Дополнительная документация по ядру


man man - получить справку по man


man man.7
man 7 man

man 5 passwd
man passwd.5

man systemd.link.5
man 5 systemd.link

man -k network
apropos passwd

man -f passwd
whatis passwd

Стандартные имена разделов: 
НАЗВАНИЕ (NAME), СИНТАКСИС (SYNOPSIS), НАСТРОЙКИ (CONFIGURATION), ОПИСАНИЕ (DESCRIPTION), 
ПАРАМЕТРЫ (OPTIONS), КОД ВЫХОДА (EXIT STATUS), ВОЗВРАЩАЕМОЕ ЗНАЧЕНИЕ  (RETURN VALUE),  
ОШИБКИ  (ERRORS),  ОКРУЖЕНИЕ  (ENVIRONMENT), ФАЙЛЫ  (FILES),  ВЕРСИИ  (VERSIONS),  
СОГЛАСУЕТСЯ С (CONFORMING TO), ЗАМЕЧАНИЯ (NOTES), ОШИБКИ (BUGS), 
ПРИМЕР (EXAMPLE), АВТОРЫ (AUTHORS) и СМОТРИТЕ ТАКЖЕ (SEE ALSO).


man pwd
man ls

У большинство программ есть аргумент

--help

ls –help

cat --help

info

info [menu-item]

info iptables

info cat

info ls

Документация к программам обычно есть в man

man [опции] [раздел] manpage

Документация хранится в специально форматированных текстовых файлах, в директории /usr/share/man.

Документация к программам находится в директории /usr/share/doc.

Разделы man

man1 Системные утилиты общего пользования

man2 Функции системы

man3 Библиотечные функции

man4 Описание устройств

man5 Форматы конфигурационных файлов

man6 Игры

man7 Различные описания

man8 Административные утилиты

man9 Дополнительная документация по ядру

man man - получить справку по man

man man.7

man 7 man

man 5 passwd

man passwd.5

man systemd.link.5

man 5 systemd.link

man -k network

apropos passwd

man -f passwd

whatis passwd

Стандартные имена разделов:

НАЗВАНИЕ (NAME), СИНТАКСИС (SYNOPSIS), НАСТРОЙКИ (CONFIGURATION), ОПИСАНИЕ (DESCRIPTION),

ПАРАМЕТРЫ (OPTIONS), КОД ВЫХОДА (EXIT STATUS), ВОЗВРАЩАЕМОЕ ЗНАЧЕНИЕ (RETURN VALUE),

ОШИБКИ (ERRORS), ОКРУЖЕНИЕ (ENVIRONMENT), ФАЙЛЫ (FILES), ВЕРСИИ (VERSIONS),

СОГЛАСУЕТСЯ С (CONFORMING TO), ЗАМЕЧАНИЯ (NOTES), ОШИБКИ (BUGS),

ПРИМЕР (EXAMPLE), АВТОРЫ (AUTHORS) и СМОТРИТЕ ТАКЖЕ (SEE ALSO).

man pwd

man ls

Символьные ссылки

ln – создание ссылок на файлы (hard & soft)
!!! На жесткие ссылки есть ограничения, создавать можно только на одном томе и только на файлы

cd ~ - перейдем в домашний каталог
cp /etc/services . - скопируем файл в текущий каталог
ln services hardlink1 - создадим жесткую ссылку hardlink1 файла services в текущем каталоге
ln services hardlink2
ln services hardlink3
ln services /tmp/hardlink4

ls -li hardlink? services /tmp/hardlink4 - показать файлы с именами hardlink? и services, и заодно показать их INODE, он будет у всех один и тот же

file hardlink1

!!! На символьные ссылки ограничений нет \ можно создавать на каталоги и файлы \ на другие тома
ln -s services softlink1
ln -s services softlink2
ln -s services /tmp/softlink3

ls -li softlink1 softlink2 /tmp/softlink3

rm services - удаление файла services
rm hardlink? /tmp/softlink1 softlink? - удаление файлов hardlink? /tmp/softlink1 softlink?

ln – создание ссылок на файлы (hard & soft)

!!! На жесткие ссылки есть ограничения, создавать можно только на одном томе и только на файлы

cd ~ - перейдем в домашний каталог

cp /etc/services . - скопируем файл в текущий каталог

ln services hardlink1 - создадим жесткую ссылку hardlink1 файла services в текущем каталоге

ln services hardlink2

ln services hardlink3

ln services /tmp/hardlink4

ls -li hardlink? services /tmp/hardlink4 - показать файлы с именами hardlink? и services, и заодно показать их INODE, он будет у всех один и тот же

file hardlink1

!!! На символьные ссылки ограничений нет \ можно создавать на каталоги и файлы \ на другие тома

ln -s services softlink1

ln -s services softlink2

ln -s services /tmp/softlink3

ls -li softlink1 softlink2 /tmp/softlink3

rm services - удаление файла services

rm hardlink? /tmp/softlink1 softlink? - удаление файлов hardlink? /tmp/softlink1 softlink?

каталоги \ mkdir

mkdir new_name_dir - создание каталога new_name_dir
mkdir new_name_dir1\new_name_dir_2\new_name_dir_3 - создание вложенных каталогов new_name_dir?

rmdir name_dir - удалит пустой каталог

-v verbose - показать подробности
-i interactive -просить подтверждение 
-f force - удалить и не спрашивать ничего

rm -rf name_dir - удалит директорию и все файлы в ней

cp -r dir1 dir2 - скопировать содержимое каталога dir1 в каталог dir2

cp - vu test/* test1/ - файлы копируются если они более новые

mkdir new_name_dir - создание каталога new_name_dir

mkdir new_name_dir1\new_name_dir_2\new_name_dir_3 - создание вложенных каталогов new_name_dir?

rmdir name_dir - удалит пустой каталог

-v verbose - показать подробности

-i interactive -просить подтверждение

-f force - удалить и не спрашивать ничего

rm -rf name_dir - удалит директорию и все файлы в ней

cp -r dir1 dir2 - скопировать содержимое каталога dir1 в каталог dir2

cp - vu test/* test1/ - файлы копируются если они более новые

текстовые редакторы \ vi \ vim \ emacs \ nano \ ee

sudo apt-get install vim - устанавливаем vim


Переключение между режимами
 Esc или ^C Переключение в командный режим.
 Ins или i Редактирование в режиме вставки с текущей позиции.
 a Редактирование в режиме вставки со следующей позиции.
 A Редактирование в режиме вставки после последнего символа в строке.
 o Новая строка под, и редактирование в режиме вставки.
 O Новая строка над и редактирование в режиме вставки.
 r Замена символа в текущей позиции.

Дополнительные возможности редактора vim.
 В редакторе vim можно набирать текст в режиме «вставки» и «замены».
 Повторные нажатия Ins будут переключать режимы редактирования между вставкой и заменой.
 R Перевод из командного режима в режим редактирования в режиме «замены» с текущей позиции.
 Текущий режим редактирования отображается в левом нижнем углу.
 Текущее положение в тексте отображается в правом нижнем углу.

Командный режим. Перемещения
Стрелочками работают 4 клавиши. Они стоят рядышком:
 h курсор — на одну позицию влево (крайняя слева).
 j курсор — на одну строку вниз (похожа на стрелку вниз).
 k курсов — на одну строку вверх (от слова кайф).
 l курсор — на одну позицию вправо (крайняя справа).
 0 Курсор в начало строки (Номе).
 $ Курсор в конец строки (End).
 H Курсор на первую строку на экране.
 L Курсор на последнюю строку на экране
 gg Курсор в начало файла.
 G Курсор в конец файла.

Листание
 ^u Прокрутка текста на пол-экрана вверх (Up).
 ^d Прокрутка текста на пол-экрана вниз (Down).
 ^f Прокрутка текста на экран вперёд (Forward).
 ^b Прокрутка текста на экран назад (Backward).

Повторитель
Перед любой командой в командном режиме может быть указано число повторений команды.
Например, если в командном режиме набрать
25j - курсор переместится на 25 строк вниз. Важно не забывать, это удобно.

Редактирование
 dl или x Эквивалентно Del.
 d0 Удаление от текущей позиции до начала строки.
 d$ Удаление от текущей позиции до конца строки.
 dd Удаление строки. 12dd — удалить 12 строк.
 ~ Изменение регистра символа
 J Объединение текущей строки со следующей
Примечание. 
Все удаления попадают в буфер обмена.
 u Undo.
 y Cимвол — в буфер обмена. Если требуется поместить в буфер обмена несколько символов, пользуются повторителями.
 yy Строка — в буфер обмена.
 p Вставка содержимого буфера после текущей позиции курсора.
 P Вставка содержимого буфера после текущей позиции курсора.

Дополнительные возможности редактора vim.
 v Визуальное выделение посимвольно
 ^v Начало выделения в режиме редактирования. Дальше может следовать команда редактирования, либо взятия в буфер, и переход в режим редактирования.
· V Визуальное выделение построчно.
· Y Строка — в буфер обмена.

Командная строка редактора
 :w [filename] Сохранить файл. Для сохранения в файл, казать имя файла.

Можно использовать >> для дописывания в конец файла.

 :e filename Открыть файл filename.
 :e! Отбросить все изменения и открыть файл с диска.
 :q Закрыть файл и выйти.
 :wq Сохранить файл, закрыть и выйти.
 :q! Закрыть файл и выйти не сохраняя.
 :help Справка.

 / Искать вперёд.
 ? Искать назад.

 :s/шаблон/замена/ Заменить по шаблону в текущей строке.
 :s/шаблон/замена/g Заменить по шаблону до конца текущей строки.
 :%s/шаблон/замена/g Поиск и замена по шаблону во всём файле.

Дополнительные возможности редактора vim.
 :hardcopy Твёрдая копия, печать.

Если на редактирование открыто сразу несколько файлов, чтобы перемещаться между ними:
 :next Перейти к следующему файлу.
 :previous Перейти к предыдущему файлу.

Редактор vim также позволяет работать с несколькими окнами на одном экране.
 ^w+n Открыть новое окно.
 ^w+w Перейти в следующее окно.

Вместе с редактором vim в систему, как правило устанавливается программа vimtutor.
Представляет собою короткий интерактивный «курс молодого бойца».
Занимает 20-30 минут времени. Настоятельно рекомендуется для начального обучения.

sudo apt-get install vim - устанавливаем vim

Переключение между режимами

Esc или ^C Переключение в командный режим.

Ins или i Редактирование в режиме вставки с текущей позиции.

a Редактирование в режиме вставки со следующей позиции.

A Редактирование в режиме вставки после последнего символа в строке.

o Новая строка под, и редактирование в режиме вставки.

O Новая строка над и редактирование в режиме вставки.

r Замена символа в текущей позиции.

Дополнительные возможности редактора vim.

В редакторе vim можно набирать текст в режиме «вставки» и «замены».

Повторные нажатия Ins будут переключать режимы редактирования между вставкой и заменой.

R Перевод из командного режима в режим редактирования в режиме «замены» с текущей позиции.

Текущий режим редактирования отображается в левом нижнем углу.

Текущее положение в тексте отображается в правом нижнем углу.

Командный режим. Перемещения

Стрелочками работают 4 клавиши. Они стоят рядышком:

h курсор — на одну позицию влево (крайняя слева).

j курсор — на одну строку вниз (похожа на стрелку вниз).

k курсов — на одну строку вверх (от слова кайф).

l курсор — на одну позицию вправо (крайняя справа).

0 Курсор в начало строки (Номе).

$ Курсор в конец строки (End).

H Курсор на первую строку на экране.

L Курсор на последнюю строку на экране

gg Курсор в начало файла.

G Курсор в конец файла.

Листание

^u Прокрутка текста на пол-экрана вверх (Up).

^d Прокрутка текста на пол-экрана вниз (Down).

^f Прокрутка текста на экран вперёд (Forward).

^b Прокрутка текста на экран назад (Backward).

Повторитель

Перед любой командой в командном режиме может быть указано число повторений команды.

Например, если в командном режиме набрать

25j - курсор переместится на 25 строк вниз. Важно не забывать, это удобно.

Редактирование

dl или x Эквивалентно Del.

d0 Удаление от текущей позиции до начала строки.

d$ Удаление от текущей позиции до конца строки.

dd Удаление строки. 12dd — удалить 12 строк.

~ Изменение регистра символа

J Объединение текущей строки со следующей

Примечание.

Все удаления попадают в буфер обмена.

u Undo.

y Cимвол — в буфер обмена. Если требуется поместить в буфер обмена несколько символов, пользуются повторителями.

yy Строка — в буфер обмена.

p Вставка содержимого буфера после текущей позиции курсора.

P Вставка содержимого буфера после текущей позиции курсора.

Дополнительные возможности редактора vim.

v Визуальное выделение посимвольно

^v Начало выделения в режиме редактирования. Дальше может следовать команда редактирования, либо взятия в буфер, и переход в режим редактирования.

· V Визуальное выделение построчно.

· Y Строка — в буфер обмена.

Командная строка редактора

:w [filename] Сохранить файл. Для сохранения в файл, казать имя файла.

Можно использовать >> для дописывания в конец файла.

:e filename Открыть файл filename.

:e! Отбросить все изменения и открыть файл с диска.

:q Закрыть файл и выйти.

:wq Сохранить файл, закрыть и выйти.

:q! Закрыть файл и выйти не сохраняя.

:help Справка.

/ Искать вперёд.

? Искать назад.

:s/шаблон/замена/ Заменить по шаблону в текущей строке.

:s/шаблон/замена/g Заменить по шаблону до конца текущей строки.

:%s/шаблон/замена/g Поиск и замена по шаблону во всём файле.

Дополнительные возможности редактора vim.

:hardcopy Твёрдая копия, печать.

Если на редактирование открыто сразу несколько файлов, чтобы перемещаться между ними:

:next Перейти к следующему файлу.

:previous Перейти к предыдущему файлу.

Редактор vim также позволяет работать с несколькими окнами на одном экране.

^w+n Открыть новое окно.

^w+w Перейти в следующее окно.

Вместе с редактором vim в систему, как правило устанавливается программа vimtutor.

Представляет собою короткий интерактивный «курс молодого бойца».

Занимает 20-30 минут времени. Настоятельно рекомендуется для начального обучения.

Работа с жесткие диски \ MBR

512байт запись MBR
446байт - загрузчик определяет активный раздел
64байт - таблица разделов Primary (максимально 4 раздела)
         EXTENDED - расширенный первичный раздел, d нем создаются логические диски LOGIC (максимально 64 раздела)

!!! Для su рекомендуется всегда использовать параметр минус "-", тога переменные окружения у пользователя root будут правильные.
!!! В этом можете убедится сами. Запустив sudo su  и после авторизации выполнить команду env. 
!!! А потом выполнить команду sudo su - и сравнить выводы команды env

sudo su - 


ls /dev/sd* - покажет устройства cd*
ls /dev/vd* - покажет устройства vd*

mount - покажет все смонтированные устройства и точки монтирования

fdisk -l - покажет все диски и разметку дисков
fdisk /dev/sdb - приступить к разметке диска. m - справка. p - показать раметку.  n - новая партиция (+1G добавить один Гигабайт). t - тип файловой системы. q - выход. w - записать таблицу разделов.

L - список типов файловых систем
83 - linux
82 - swap
5 - расширенный раздел Extended
7 - NTFS


parted - более продвинутая программа для работы с дисками

mkfs - программа для создания файловых систем

mkfs.ext4 /dev/vdb1 - создаем файловую систему на диске vdb1

mkfs.ext4 -L extended /dev/vdb1 - создаем файловую систему на диске vdb1 ( -L задать Label, метка тома)

ls /mnt - проверяем содержимое каталога /mnt
cd /mnt - переходим в каталог /mnt
mkdir linux windows - создаем папки linux и windows в текущем каталоге (cd /mnt)

lost+found - специальная папка потерянных файлов 


mount -t ext4 /dev/vdb1 /mnt/linux - монтируем /dev/vdb1 в каталог /mnt/linux

man mkfs.ntfs - получаем справку по команде mkfs.ntfs
mkfs.ntfs -L windaz /dev/vdb5  - создаем файловую систему ntfs на диске vdb5 ( -L задать Label, метка тома)


mount /dev/vdb5 /mnt/windows

mount - показать точки монтирования
umount /mnt/linux - от монтировали диск по имени каталога
umount /dev/vdb5 - от монтировали диск по имени устройства

/etc/fstab  - файл для автоаннотирования дисков (pass  очередность проверки файловой системы, 0 - не проверять, 1 в первую очередь, 2 во вторую, и т.д.)
blkid - показать GUID - устройств
mount /dev/sdb1 - запускам для проверки правильности монтирования после редактирования файла /etc/fstab

512байт запись MBR

446байт - загрузчик определяет активный раздел

64байт - таблица разделов Primary (максимально 4 раздела)

EXTENDED - расширенный первичный раздел, d нем создаются логические диски LOGIC (максимально 64 раздела)

!!! Для su рекомендуется всегда использовать параметр минус "-", тога переменные окружения у пользователя root будут правильные.

!!! В этом можете убедится сами. Запустив sudo su и после авторизации выполнить команду env.

!!! А потом выполнить команду sudo su - и сравнить выводы команды env

sudo su -

ls /dev/sd* - покажет устройства cd*

ls /dev/vd* - покажет устройства vd*

mount - покажет все смонтированные устройства и точки монтирования

fdisk -l - покажет все диски и разметку дисков

fdisk /dev/sdb - приступить к разметке диска. m - справка. p - показать раметку. n - новая партиция (+1G добавить один Гигабайт). t - тип файловой системы. q - выход. w - записать таблицу разделов.

L - список типов файловых систем

83 - linux

82 - swap

5 - расширенный раздел Extended

7 - NTFS

parted - более продвинутая программа для работы с дисками

mkfs - программа для создания файловых систем

mkfs.ext4 /dev/vdb1 - создаем файловую систему на диске vdb1

mkfs.ext4 -L extended /dev/vdb1 - создаем файловую систему на диске vdb1 ( -L задать Label, метка тома)

ls /mnt - проверяем содержимое каталога /mnt

cd /mnt - переходим в каталог /mnt

mkdir linux windows - создаем папки linux и windows в текущем каталоге (cd /mnt)

lost+found - специальная папка потерянных файлов

mount -t ext4 /dev/vdb1 /mnt/linux - монтируем /dev/vdb1 в каталог /mnt/linux

man mkfs.ntfs - получаем справку по команде mkfs.ntfs

mkfs.ntfs -L windaz /dev/vdb5 - создаем файловую систему ntfs на диске vdb5 ( -L задать Label, метка тома)

mount /dev/vdb5 /mnt/windows

mount - показать точки монтирования

umount /mnt/linux - от монтировали диск по имени каталога

umount /dev/vdb5 - от монтировали диск по имени устройства

/etc/fstab - файл для автоаннотирования дисков (pass очередность проверки файловой системы, 0 - не проверять, 1 в первую очередь, 2 во вторую, и т.д.)

blkid - показать GUID - устройств

mount /dev/sdb1 - запускам для проверки правильности монтирования после редактирования файла /etc/fstab

поиск \ find \ locate \ which

which - покажет где лежит программа (покажет первый найденный файл программы)
which rm  - покажет где лежит программа rm

locate - программа ищет по имени  файла по некой базе данных
updatedb - обновить базу данных для locate
locate Moskow - поиск файла с именем Mosckow
locate rm - поиск файла с именем rm
locate fstab - поиск файла с именем fstab
mlocate  - тоже самое что и locate программа ищет по имени  файла по некой базе данных


man -k find
man find
    find [-H] [-L] [-P] [-D debugopts] [-Olevel] [starting-point...] [expression]

    mtime -  дата последней модификации
    atime - дата время последнего доступа
    ctime  - дата время модификации метаданных

find ~username -type f -or -type d -name f1
find ~username -type f -or  -type d -size 1024c
find ~username -type f -size 19183c
find ~username -type f -size 19183c -exec chmod 777 {} \;
find ~b14esh -type f -size 19183c -exec ls -l {} \;

which - покажет где лежит программа (покажет первый найденный файл программы)

which rm - покажет где лежит программа rm

locate - программа ищет по имени файла по некой базе данных

updatedb - обновить базу данных для locate

locate Moskow - поиск файла с именем Mosckow

locate rm - поиск файла с именем rm

locate fstab - поиск файла с именем fstab

mlocate - тоже самое что и locate программа ищет по имени файла по некой базе данных

man -k find

man find

find [-H] [-L] [-P] [-D debugopts] [-Olevel] [starting-point...] [expression]

mtime - дата последней модификации

atime - дата время последнего доступа

ctime - дата время модификации метаданных

find ~username -type f -or -type d -name f1

find ~username -type f -or -type d -size 1024c

find ~username -type f -size 19183c

find ~username -type f -size 19183c -exec chmod 777 {} \;

find ~b14esh -type f -size 19183c -exec ls -l {} \;

Программные фильтры

head / tail – вывод десять (первых / последних) строк файла на стандартный вывод

head /etc/services

tail /var/log/messages - вывести десять последних записей из системного журнала
tail /var/log/dmesg - вывести десять последних записей из журнала загрузки ядра

cat -n /etc/services | head
cat -n /etc/services | tail

Используйте параметр -n, чтобы указать, сколько строк должно отображаться. 

cat -n /etc/services | head -n 300
cat -n /etc/services | tail -n 592

-,+
cat -n /etc/services | head -n -500
cat -n /etc/services | head -n +50
cat -n /etc/services | tail -n +90
cat -n /etc/services | tail -n -20

tail -n 23 - прочитать файл с конца 23 строчки 
tail -n0 -f /var/log/syslog - наблюдать за файлом 
tail -f /var/log/messages - в реальном времени выводить все, что добавляется в файл
tail -2 file1 - вывести две последние строки файла

cat -n /etc/services | tail -n 91 |head -n 5 - передать содержимое файла /etc/services на tail, tail выведет 91 строку конца и передаст head, head выведет 5 строк, в итоге это будет 501-505 строки
cat -n /etc/services | head -n 505 | tail -n 5 - передать содержимое файла /etc/services в head, выводим 505 строк, tail обрезает лишние пять, выводится нужные строки 501-505

cut / paste – работа с секциями файлов (вырезать /вставить)
cut - с параметром "-c"  работает следующем образом, выводит на экран символы перечисленные 1,2,4,5,6-10, все что не попало в этот диапазон не выводится
ls -l  | cut -c 1-11,29-80
ls -la | cut -c 20-26,50-80
history | cut -c 8-60


полезный ключ для cut:
-d (delimeter - разделитель)
-f (fill - поле)

tail /etc/passwd | cut -f 1,3 -d :
tail /etc/passwd | cut -f 1,6 -d :
tail /etc/passwd | cut -f 1,3,6 -d :
tail /etc/passwd | cut -f 5-7 -d :

Если не указывать разделитель параметром -d, разделителем считается пробелы и табуляция

!!! -s - подавляет вывод где нет табличной части
tail /etc/passwd | cut -f 5-7 -d : -s 
cat /etc/services  | sort | cut -f 1,2 -s 

sort - сортировка файлов
cat /etc/services  | sort | less - отсортируем вывод в алфавитном порядке
cat /etc/services  | sort -r | less - отсортируем вывод в обратном алфавитном порядке
cat /etc/services  | sort  -k2 -n -f | less
cat /etc/services  | sort  -k2 -n -f r | less
cat /etc/services  | sort  -k2 -n -f -u | less


uniq - показывает уникальные строки
cat /etc/services  | sort | uniq | cat -n
cat /etc/services  | sort | uniq -с 
cat /etc/services  | sort | uniq -c -d

tr - замена символов
tail /etc/passwd | tr : \\
tail /etc/passwd | tr : '\t'
tail /etc/passwd | tr : '\\'

cat  /etc/passwd | tr -s o,u,w | less

man man | tr -s '\n' | less
tail /etc/passwd | cut -f 5-7 -d : -s  | tr : '\t'
tail /etc/passwd | cut -f 5-7 -d : -s  | tr : '\t' | tr a-z A-Z

... | tr -d '\r'


wc -  подсчёт в файле строк, слов и символов
wc - выводит количество строк, слов и символов в указанном файле или во входном потоке (из пайпа). 
wc -l filename - посчитать количество строк в файле

cat my.txt | wc -l так мы узнаем сколько там всего строк (если нужно)
cat file.txt | wc -l - посчитать число строк
cat file.txt | wc -w - посчитать число слов

grep 192.198.1.1 /var/log/httpd/access-log | wc -l - отображает количество записей конкретного IP-адреса в файле журнала Apache

wc /var/log/dmesg - отображает счетчики для одного файла
wc /var/log/*.log - отображает отдельные значения для каждого файла и общие для всех файлов

netstat -na | grep ":порт\ " | wc -l - подсчет количества коннектов на определенный порт
netstat -na | grep ":порт\ " | grep SYN_RCVD | wc -l - подсчет числа «полуоткрытых» TCP-соединений

dpkg -l| wc -l - показать количество установленных пакетов

sysctl -a | wc -l  - показать количество строк

echo "hi there" | wc
cat file.txt | wc -l - посчитать число строк
cat file.txt | wc -w - посчитать число слов
wc /etc/passwd
wc /etc/passwd /etc/services
wc -l /etc/passwd /etc/services
wc -w /etc/passwd /etc/services
wc -c /etc/passwd /etc/services

tee – трансляция stdin в stdout c ведением лога
tail /etc/passwd | cut -f 5-7 -d : -s  | tee testfile |tr : '\t' | tr a-z A-Z
tail /etc/passwd | cut -f 5-7 -d : -s  | tee -a  testfile |tr : '\t' | tr a-z A-Z
cat testfile

history | cut -c 8-200

100

101

102

103

104

105

106

107

108

109

110

111

112

113

head / tail – вывод десять (первых / последних) строк файла на стандартный вывод

head /etc/services

tail /var/log/messages - вывести десять последних записей из системного журнала

tail /var/log/dmesg - вывести десять последних записей из журнала загрузки ядра

cat -n /etc/services | head

cat -n /etc/services | tail

Используйте параметр -n, чтобы указать, сколько строк должно отображаться.

cat -n /etc/services | head -n 300

cat -n /etc/services | tail -n 592

-,+

cat -n /etc/services | head -n -500

cat -n /etc/services | head -n +50

cat -n /etc/services | tail -n +90

cat -n /etc/services | tail -n -20

tail -n 23 - прочитать файл с конца 23 строчки

tail -n0 -f /var/log/syslog - наблюдать за файлом

tail -f /var/log/messages - в реальном времени выводить все, что добавляется в файл

tail -2 file1 - вывести две последние строки файла

cat -n /etc/services | tail -n 91 |head -n 5 - передать содержимое файла /etc/services на tail, tail выведет 91 строку конца и передаст head, head выведет 5 строк, в итоге это будет 501-505 строки

cat -n /etc/services | head -n 505 | tail -n 5 - передать содержимое файла /etc/services в head, выводим 505 строк, tail обрезает лишние пять, выводится нужные строки 501-505

cut / paste – работа с секциями файлов (вырезать /вставить)

cut - с параметром "-c" работает следующем образом, выводит на экран символы перечисленные 1,2,4,5,6-10, все что не попало в этот диапазон не выводится

ls -l | cut -c 1-11,29-80

ls -la | cut -c 20-26,50-80

history | cut -c 8-60

полезный ключ для cut:

-d (delimeter - разделитель)

-f (fill - поле)

tail /etc/passwd | cut -f 1,3 -d :

tail /etc/passwd | cut -f 1,6 -d :

tail /etc/passwd | cut -f 1,3,6 -d :

tail /etc/passwd | cut -f 5-7 -d :

Если не указывать разделитель параметром -d, разделителем считается пробелы и табуляция

!!! -s - подавляет вывод где нет табличной части

tail /etc/passwd | cut -f 5-7 -d : -s

cat /etc/services | sort | cut -f 1,2 -s

sort - сортировка файлов

cat /etc/services | sort | less - отсортируем вывод в алфавитном порядке

cat /etc/services | sort -r | less - отсортируем вывод в обратном алфавитном порядке

cat /etc/services | sort -k2 -n -f | less

cat /etc/services | sort -k2 -n -f r | less

cat /etc/services | sort -k2 -n -f -u | less

uniq - показывает уникальные строки

cat /etc/services | sort | uniq | cat -n

cat /etc/services | sort | uniq -с

cat /etc/services | sort | uniq -c -d

tr - замена символов

tail /etc/passwd | tr : \\

tail /etc/passwd | tr : '\t'

tail /etc/passwd | tr : '\\'

cat /etc/passwd | tr -s o,u,w | less

man man | tr -s '\n' | less

tail /etc/passwd | cut -f 5-7 -d : -s | tr : '\t'

tail /etc/passwd | cut -f 5-7 -d : -s | tr : '\t' | tr a-z A-Z

... | tr -d '\r'

wc - подсчёт в файле строк, слов и символов

wc - выводит количество строк, слов и символов в указанном файле или во входном потоке (из пайпа).

wc -l filename - посчитать количество строк в файле

cat my.txt | wc -l так мы узнаем сколько там всего строк (если нужно)

cat file.txt | wc -l - посчитать число строк

cat file.txt | wc -w - посчитать число слов

grep 192.198.1.1 /var/log/httpd/access-log | wc -l - отображает количество записей конкретного IP-адреса в файле журнала Apache

wc /var/log/dmesg - отображает счетчики для одного файла

wc /var/log/*.log - отображает отдельные значения для каждого файла и общие для всех файлов

netstat -na | grep ":порт\ " | wc -l - подсчет количества коннектов на определенный порт

netstat -na | grep ":порт\ " | grep SYN_RCVD | wc -l - подсчет числа «полуоткрытых» TCP-соединений

dpkg -l| wc -l - показать количество установленных пакетов

sysctl -a | wc -l - показать количество строк

echo "hi there" | wc

cat file.txt | wc -l - посчитать число строк

cat file.txt | wc -w - посчитать число слов

wc /etc/passwd

wc /etc/passwd /etc/services

wc -l /etc/passwd /etc/services

wc -w /etc/passwd /etc/services

wc -c /etc/passwd /etc/services

tee – трансляция stdin в stdout c ведением лога

tail /etc/passwd | cut -f 5-7 -d : -s | tee testfile |tr : '\t' | tr a-z A-Z

tail /etc/passwd | cut -f 5-7 -d : -s | tee -a testfile |tr : '\t' | tr a-z A-Z

cat testfile

history | cut -c 8-200

место на диске \ du \ df \ dd

df - показать свободное пространство на дисках и смонтированные устройства
df -h - вывод для человека
df -i - показывает количество занятых INODE
df -m - отобразит занятое место в мегабайтах
df -hl - отображает занятое дисковое пространство локальными  ФС
df -hT - отображает занятое место плюс тип ФС
df -t ext3 - отображает занятое место на файловой системе ext3
df -t ext4 - отображает занятое место на файловой системе ext4
df -h -t ext4 - отображает занятое место на файловой системе ext4 (-h вывод для человека Гб,Мб....)
df -m -t ext4 - отображает занятое место на файловой системе ext4 (вывод в мегабайтах)

 

man -k du
man du
du -s /var /log - показать размер каталога /var/log
du -sh /var /log - показать размер каталога /var/log (размер в Мб Кб)
du -s /usr/share/* - показать размер  всех каталогов внутри каталога  /usr/share/
du -s /usr/share/* | sort -n - показать размер всех каталогов внутри каталога  /usr/share/ и отсортировать по размеру (размер в Кб)
du -h - показать занятое место в текущем каталоге
du -sh * - Размер каталога (листинг файлов и подкаталогов)
du -csh - Размер текущей директории
du -ks * | sort -n -r - Сортировать по размеру (kbytes)
du -h --max-depth=1 / - сколько занято место 
du /bin/rm
ls -l /bin/rm
du -h /bin/rm
du /home/b14esh/
du -h /home/b14esh/
du -h /bin/
du -h /usr
du -h  /usr
du -h  -s /usr
du -h  -s /usr/*
du -h  -s /usr/* | sort
du -h  -s /usr/* | sort -n
du -h --max-depth=1 /usr/*
du -h --max-depth=1 /usr/*
du -h --max-depth=1 /usr/
du -h --max-depth=1 /usr/ | sort -n
du -s /usr/share/man/man* | sort -n -k1 -r | head -3 | cut -f 2 | cut -f 5 -d '/' - пример команды, есть каталог man, в нем куча каталогов man?, требуется отсортировать каталоги

ls -l | sort -k5 -n | cut -c 13-21,55-200
history | cut -c 8-200

dd - !!! опасная программа \ читает и пишет блоками \ по умолчанию размер блока 512байт
if - input file
of - output file
bs - block size (по умолчанию 512 байт)
count - количество повторений

dd if=что of=куда
dd bs=1k if=imagefile.nrg of=imagefile.iso skip=300 - например  Nero добавляет к образу заголовок в 300кб, его можно обрезать с помощью dd
dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' - создать "слепок" локального диска в файл на удалённом сервере используя ssh туннель
dd if=/dev/hda of=/dev/fd0 bs=512 count=1 - создание копии MBR ( Master Boot Record ) с /dev/hda на флоппи-диск
dd if=/dev/fd0 of=/dev/hda bs=512 count=1 - восстановить MBR с флоппи-диска на /dev/hda
dd if=/dev/sda of=/tmp/backup - создание резервной копии содержимого жесткого диска в файл backup
time dd if=/dev/ad4s3c of=/dev/null bs=1024k count=1000 
time dd if=/dev/zero bs=1024k count=1000 of=/home/1Gb.file - Читаем и пишем 1GB в /home (/dev/ad4s3c)
dd if=/etc/services of=testfile1
dd if=/dev/sr0 of=image.iso bs=2048
dd if=/dev/hdc of=/tmp/mycd.iso bs=2048 conv=notrunc
dd if=/dev/vda of=/mnt/mbr.img bs=512 count=1 - сохранить загрузочную запись с диска vda в файл mbr.img
dd if=/mnt/gentoo/mbr.img of=/dev/sda count=1 - восстанавливаем загрузчик из образа mbr.img на диск sda 
dd if=/dev/zero of=/dev/sdd bs=1048567 - затираем диск sdd нулями

df - показать свободное пространство на дисках и смонтированные устройства

df -h - вывод для человека

df -i - показывает количество занятых INODE

df -m - отобразит занятое место в мегабайтах

df -hl - отображает занятое дисковое пространство локальными ФС

df -hT - отображает занятое место плюс тип ФС

df -t ext3 - отображает занятое место на файловой системе ext3

df -t ext4 - отображает занятое место на файловой системе ext4

df -h -t ext4 - отображает занятое место на файловой системе ext4 (-h вывод для человека Гб,Мб....)

df -m -t ext4 - отображает занятое место на файловой системе ext4 (вывод в мегабайтах)

man -k du

man du

du -s /var /log - показать размер каталога /var/log

du -sh /var /log - показать размер каталога /var/log (размер в Мб Кб)

du -s /usr/share/* - показать размер всех каталогов внутри каталога /usr/share/

du -s /usr/share/* | sort -n - показать размер всех каталогов внутри каталога /usr/share/ и отсортировать по размеру (размер в Кб)

du -h - показать занятое место в текущем каталоге

du -sh * - Размер каталога (листинг файлов и подкаталогов)

du -csh - Размер текущей директории

du -ks * | sort -n -r - Сортировать по размеру (kbytes)

du -h --max-depth=1 / - сколько занято место

du /bin/rm

ls -l /bin/rm

du -h /bin/rm

du /home/b14esh/

du -h /home/b14esh/

du -h /bin/

du -h /usr

du -h -s /usr

du -h -s /usr/*

du -h -s /usr/* | sort

du -h -s /usr/* | sort -n

du -h --max-depth=1 /usr/*

du -h --max-depth=1 /usr/

du -h --max-depth=1 /usr/ | sort -n

du -s /usr/share/man/man* | sort -n -k1 -r | head -3 | cut -f 2 | cut -f 5 -d '/' - пример команды, есть каталог man, в нем куча каталогов man?, требуется отсортировать каталоги

ls -l | sort -k5 -n | cut -c 13-21,55-200

history | cut -c 8-200

dd - !!! опасная программа \ читает и пишет блоками \ по умолчанию размер блока 512байт

if - input file

of - output file

bs - block size (по умолчанию 512 байт)

count - количество повторений

dd if=что of=куда

dd bs=1k if=imagefile.nrg of=imagefile.iso skip=300 - например Nero добавляет к образу заголовок в 300кб, его можно обрезать с помощью dd

dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' - создать "слепок" локального диска в файл на удалённом сервере используя ssh туннель

dd if=/dev/hda of=/dev/fd0 bs=512 count=1 - создание копии MBR ( Master Boot Record ) с /dev/hda на флоппи-диск

dd if=/dev/fd0 of=/dev/hda bs=512 count=1 - восстановить MBR с флоппи-диска на /dev/hda

dd if=/dev/sda of=/tmp/backup - создание резервной копии содержимого жесткого диска в файл backup

time dd if=/dev/ad4s3c of=/dev/null bs=1024k count=1000

time dd if=/dev/zero bs=1024k count=1000 of=/home/1Gb.file - Читаем и пишем 1GB в /home (/dev/ad4s3c)

dd if=/etc/services of=testfile1

dd if=/dev/sr0 of=image.iso bs=2048

dd if=/dev/hdc of=/tmp/mycd.iso bs=2048 conv=notrunc

dd if=/dev/vda of=/mnt/mbr.img bs=512 count=1 - сохранить загрузочную запись с диска vda в файл mbr.img

dd if=/mnt/gentoo/mbr.img of=/dev/sda count=1 - восстанавливаем загрузчик из образа mbr.img на диск sda

dd if=/dev/zero of=/dev/sdd bs=1048567 - затираем диск sdd нулями

grep поиск по шаблону

cat /etc/services |grep ssh - покажет строки где есть ssh
cat /etc/services |grep -v ssh - покажет все кроме строки с ssh

regular expression - регулярные выражения
Basic Regular Expression - BRE - по умолчанию в grep
Extended Regular Expression - ERE - включается в grep параметром -E

!!! в grep регулярные выражения не соответствуют общепринятыми регулярным выражениям в консоли
* - повтор предыдущего символа ноль или более раз
. - любой символ
\ - экранирование
\* - при экранировании символ * приобретает свои стандартные свойства, любое количество любых символов
? - повтор предыдущего символа ноль или более раз
[rt] - диапазон r или t
[^rt] - диапазон все кроме r или t
^ - вне диапазона начало строки ^yy
$ - конец строки zz$

cat /etc/services |grep "^.*tcp.*amanda "
cat /etc/services |grep "^amanda.* "
cat /etc/services |grep ".*service$"
cat /etc/services |grep ".*ftp.*"
cat /etc/services |grep ".*http.*"
cat /etc/services |grep ".*139.*"
cat /etc/services |grep ".*80.*"
cat /etc/services |grep ".*25.*"
cat /etc/services |grep ".*SSL.*"
cat /etc/services |grep ".*\?elnet.*"

[[:alnum:]] - соответствует [a-zA-Z0-9] - \w
[^[:alnum:]] - инверсия соответствует [^a-zA-Z0-9] \W
[[:digit:]] - соответствует [0-9] \d
[^[:digit:]] - соответствует [^0-9] \D
[[:space:]] - пробелы \s
[^[:space:]] - пробелы \S

ip a s | grep -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"
ifconfig | grep -E "(^|[[:space:]])[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}($|[[:space:]])"
grep -E "[A-Za-z\.]@[A-Za-z]" x.txt
grep -E "http://.*"
grep -E "htt(p|ps)://.*"

cat /etc/services |grep ssh - покажет строки где есть ssh

cat /etc/services |grep -v ssh - покажет все кроме строки с ssh

regular expression - регулярные выражения

Basic Regular Expression - BRE - по умолчанию в grep

Extended Regular Expression - ERE - включается в grep параметром -E

!!! в grep регулярные выражения не соответствуют общепринятыми регулярным выражениям в консоли

* - повтор предыдущего символа ноль или более раз

. - любой символ

\ - экранирование

\* - при экранировании символ * приобретает свои стандартные свойства, любое количество любых символов

? - повтор предыдущего символа ноль или более раз

[rt] - диапазон r или t

[^rt] - диапазон все кроме r или t

^ - вне диапазона начало строки ^yy

$ - конец строки zz$

cat /etc/services |grep "^.*tcp.*amanda "

cat /etc/services |grep "^amanda.* "

cat /etc/services |grep ".*service$"

cat /etc/services |grep ".*ftp.*"

cat /etc/services |grep ".*http.*"

cat /etc/services |grep ".*139.*"

cat /etc/services |grep ".*80.*"

cat /etc/services |grep ".*25.*"

cat /etc/services |grep ".*SSL.*"

cat /etc/services |grep ".*\?elnet.*"

[[:alnum:]] - соответствует [a-zA-Z0-9] - \w

[^[:alnum:]] - инверсия соответствует [^a-zA-Z0-9] \W

[[:digit:]] - соответствует [0-9] \d

[^[:digit:]] - соответствует [^0-9] \D

[[:space:]] - пробелы \s

[^[:space:]] - пробелы \S

ip a s | grep -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"

ifconfig | grep -E "(^|[[:space:]])[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}($|[[:space:]])"

grep -E "[A-Za-z\.]@[A-Za-z]" x.txt

grep -E "http://.*"

grep -E "htt(p|ps)://.*"

Процессы

PID                         PID
PPID -----> fork() ------>  PPID
tty                         |
|                           |
|                           |
wait()                     exec
|                           |
|                           |
|                           |
|                           PID
    Z <----- exit() <-----  PPID


таблица процессов
PID - идентификатор процесса, 2байта, максимальное значение 65535, всегда уникально от 0 до 65535
PPID - Parent PID - родитель процесса
init - PID 1 - дедушка всех процессов
UID EUID GID EGID
tty

Z - zombie - процесс потерявший родителя

top

ps
ps -u 
ps -au
ps -aux
ps -aux | less
ps -aux | wc -l
[] - в этих скобках модули ядра....
ps aux | less

PID PID

PPID -----> fork() ------> PPID

tty |

| |

wait() exec

| |

| PID

Z <----- exit() <----- PPID

таблица процессов

PID - идентификатор процесса, 2байта, максимальное значение 65535, всегда уникально от 0 до 65535

PPID - Parent PID - родитель процесса

init - PID 1 - дедушка всех процессов

UID EUID GID EGID

tty

Z - zombie - процесс потерявший родителя

top

ps -u

ps -au

ps -aux

ps -aux | less

ps -aux | wc -l

[] - в этих скобках модули ядра....

ps aux | less

Управление пользователями

Суперпользователь - можно все
Пользователь
sudo su -
adduser - интерактивная программа добавления пользователей \ удобно когда нужно добавить одного пользователя

pw useradd - во freebsd
useradd - универсальная работает во всех unix
useradd -c "Test User" -m -u 8888 -g 8888
useradd -c "Test User" -m -G wheel
useradd -c "Test User" -d /dev/null
useradd -c "test user" -m -s /bin/bash test
useradd -c "test user" -m -s /bin/fulse test

useradd -D - показать значения используемые по умолчанию

useradd -m имя пользователя
useradd -m -с Ivan Ivanov,,,,iivanov
useradd -u 1500 -s tcsh iivanov
useradd -G users,cdrecord,dialout iivanov
useradd -c "Nome Cognome" -g admin -d /home/user1 -s /bin/bash user1 - создать пользователя user1, назначить ему в качестве домашнего каталога /home/user1, в качестве shell'а /bin/bash, включить его в группу admin и добавить комментарий Nome Cognome
useradd user1 - создать пользователя user1

usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 - изменить атрибуты пользователя



passwd - задать \ сменить пароль \ текущий пользователь
passwd user - установить пароль пользователю user
passwd user1 - сменить пароль пользователя user1 (только root)

usermod -L test - заблокировать пользователя test
usermod -u test - разблокировать пользователя test

usermod -d /server1/home/aborg/ -m aborg  - перемещает домашний каталог пользователя со всем содержимым. Сначала указывается новый каталог, а затем имя пользователя
 
usermod -s /bin/false foober - можно лишить пользователя доступа к командному процессору и все же лучше всего придерживаться варианта с passwd -l и -u
 
usermod -I aborg anitab    - сменить имя
usermod -u 1200 anitab     - сменить UID

id username - посмотреть в каких группах пользователь

chsh - пользователь может сменить шелл
vigr - открывается редактор vi на файл /etc/group
vipw - открывается редактор vi на файл /etc/passwd

groupadd group_name - создать новую группу с именем group_name
groupdel group_name - удалить группу group_name
groupmod -n new_group_name old_group_name - переименовать группу old_group_name в new_group_name


userdel aborg - удалить пользователя из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)
userdel -r user1 - удалить пользователя user1 и его домашний каталог
userdel -r aborg - удалить пользователя, его почтовый ящик, и дом каталог, из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

chage -E 2005-12-31 user1 - установить дату окончания действия учётной записи пользователя user1

pwck - проверить корректность системных файлов учётных записей. Проверяются файлы /etc/passwd и /etc/shadow
grpck - проверяет корректность системных файлов учётных записей. Проверяется файл/etc/group

Идентификация - установления подлинности \ предоставление логин\пароль
Аутентификация - проверка логина\пароля
Авторизация - проверка разрешений на файлы 

/etc/group - тут настройки групп пользователей

/etc/passwd - тут настройки пользователя \ оболочка \ домашняя директория
mark:x:1001:1001:mark,,,:/home/mark:/bin/bash
[--] - [--] [--] [-----] [--------] [--------]
|    |   |    |     |         |        |
|    |   |    |     |         |        +-> 7. Login shell
|    |   |    |     |         +----------> 6. Home directory
|    |   |    |     +--------------------> 5. GECOS
|    |   |    +--------------------------> 4. GID
|    |   +-------------------------------> 3. UID
|    +-----------------------------------> 2. Password
+----------------------------------------> 1. Username

/etc/shadow - тут хранятся пароли 

mark:$6$.n.:17736:0:99999:7:::
[--] [----] [---] - [---] ----
|      |      |   |   |   |||+-----------> 9. Неиспользованный
|      |      |   |   |   ||+------------> 8. Срок годности
|      |      |   |   |   |+-------------> 7. Период бездействия
|      |      |   |   |   +--------------> 6. Период предупреждения
|      |      |   |   +------------------> 5. Максимальный возраст пароля
|      |      |   +----------------------> 4. Минимальный возраст пароля
|      |      +--------------------------> 3. Последнее изменение пароля
|      +---------------------------------> 2. Зашифрованный пароль
+----------------------------------------> 1. Имя пользователя

Зашифрованный пароль. 
Пароль использует формату $type$salt$hashed. 
$type является методом криптографического алгоритма хеширования и может иметь следующие значения:
$1$ – MD5
$2a$ – Blowfish
$2y$ – Eksblowfish
$5$ – SHA-256
$6$ – SHA-512
Если поле пароля содержит звездочку ( *) или восклицательный знак ( !), пользователь не сможет войти в систему с использованием аутентификации по паролю. 
Другие методы входа, такие как аутентификация на основе ключей или переключение на пользователя, по-прежнему разрешены

100

101

102

Суперпользователь - можно все

Пользователь

sudo su -

adduser - интерактивная программа добавления пользователей \ удобно когда нужно добавить одного пользователя

pw useradd - во freebsd

useradd - универсальная работает во всех unix

useradd -c "Test User" -m -u 8888 -g 8888

useradd -c "Test User" -m -G wheel

useradd -c "Test User" -d /dev/null

useradd -c "test user" -m -s /bin/bash test

useradd -c "test user" -m -s /bin/fulse test

useradd -D - показать значения используемые по умолчанию

useradd -m имя пользователя

useradd -m -с Ivan Ivanov,,,,iivanov

useradd -u 1500 -s tcsh iivanov

useradd -G users,cdrecord,dialout iivanov

useradd -c "Nome Cognome" -g admin -d /home/user1 -s /bin/bash user1 - создать пользователя user1, назначить ему в качестве домашнего каталога /home/user1, в качестве shell'а /bin/bash, включить его в группу admin и добавить комментарий Nome Cognome

useradd user1 - создать пользователя user1

usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 - изменить атрибуты пользователя

passwd - задать \ сменить пароль \ текущий пользователь

passwd user - установить пароль пользователю user

passwd user1 - сменить пароль пользователя user1 (только root)

usermod -L test - заблокировать пользователя test

usermod -u test - разблокировать пользователя test

usermod -d /server1/home/aborg/ -m aborg - перемещает домашний каталог пользователя со всем содержимым. Сначала указывается новый каталог, а затем имя пользователя

usermod -s /bin/false foober - можно лишить пользователя доступа к командному процессору и все же лучше всего придерживаться варианта с passwd -l и -u

usermod -I aborg anitab - сменить имя

usermod -u 1200 anitab - сменить UID

id username - посмотреть в каких группах пользователь

chsh - пользователь может сменить шелл

vigr - открывается редактор vi на файл /etc/group

vipw - открывается редактор vi на файл /etc/passwd

groupadd group_name - создать новую группу с именем group_name

groupdel group_name - удалить группу group_name

groupmod -n new_group_name old_group_name - переименовать группу old_group_name в new_group_name

userdel aborg - удалить пользователя из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

userdel -r user1 - удалить пользователя user1 и его домашний каталог

userdel -r aborg - удалить пользователя, его почтовый ящик, и дом каталог, из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

chage -E 2005-12-31 user1 - установить дату окончания действия учётной записи пользователя user1

pwck - проверить корректность системных файлов учётных записей. Проверяются файлы /etc/passwd и /etc/shadow

grpck - проверяет корректность системных файлов учётных записей. Проверяется файл/etc/group

Идентификация - установления подлинности \ предоставление логин\пароль

Аутентификация - проверка логина\пароля

Авторизация - проверка разрешений на файлы

/etc/group - тут настройки групп пользователей

/etc/passwd - тут настройки пользователя \ оболочка \ домашняя директория

mark:x:1001:1001:mark,,,:/home/mark:/bin/bash

[--] - [--] [--] [-----] [--------] [--------]

| | | | | | |

| | | | +--------------------> 5. GECOS

| | | +--------------------------> 4. GID

| | +-------------------------------> 3. UID

| +-----------------------------------> 2. Password

+----------------------------------------> 1. Username

/etc/shadow - тут хранятся пароли

mark:$6$.n.:17736:0:99999:7:::

[--] [----] [---] - [---] ----

| | | | | |||+-----------> 9. Неиспользованный

| | | | | ||+------------> 8. Срок годности

| | | | | +--------------> 6. Период предупреждения

| | | | +------------------> 5. Максимальный возраст пароля

| | | +----------------------> 4. Минимальный возраст пароля

| | +--------------------------> 3. Последнее изменение пароля

| +---------------------------------> 2. Зашифрованный пароль

+----------------------------------------> 1. Имя пользователя

Зашифрованный пароль.

Пароль использует формату $type$salt$hashed.

$type является методом криптографического алгоритма хеширования и может иметь следующие значения:

$1$ – MD5

$2a$ – Blowfish

$2y$ – Eksblowfish

$5$ – SHA-256

$6$ – SHA-512

Если поле пароля содержит звездочку ( *) или восклицательный знак ( !), пользователь не сможет войти в систему с использованием аутентификации по паролю.

Другие методы входа, такие как аутентификация на основе ключей или переключение на пользователя, по-прежнему разрешены

Права

Если UID процесса файла совпадает с UID и GUID файла, то предоставляется доступ по UID файла.
Если UID процесса не совпадает с UID но совпадает с GUID, то предоставляется права по GUID файла.
Приложение исполняется с правами родительского процесса.

4 = r чтение
2 = w запись
1 = x выполнение

chmod 777 test - изменит права на файл
chmod 400 test - разрешили чтение владельцу файла

chmod 0700 - drwx------  - Владелец может читать, записывать файлы в данный каталог, а также переходить в него. Все остальные пользователи  не имеют к нему доступа
chmod 0711 - drwx--x--x  - Владелец обладает теми же правами. Все остальные могут открывать каталог, но не могут просматривать или изменять файлы в нем
chmod go+r - drwxr--r--  - Добавили чтение для группы и остальных
chmod 0777 - drwxrwxrwx  - Полный доступ
chmod a=rwx - drwxrwxrwx - Полный доступ  
chmod 0000 - Доступ полностью закрыт
chmod a-rwx - Доступ полностью закрыт
chmod ббб - Открывает права на чтение и изменение файла
chmod go-rw - Не позволяет никому, кроме самого владельца, просматривать, вносить изменения или удалять файл
chmod 644 - Только владелец может вносить изменения в файл или удалять его, но все могут его просматривать


chown vasya /file - назначить пользователя vasya владельцем файла file
chown -R vasya directory - рекурсивно обойти директорию directory и назначить пользователя vasya владельцем всех вложенных файлов и директорий
chown vasya:group /file - назначить владельца и группу для файла /file

Для каталога r - разрешает читать содержимое, w - позволяет переименовывать содержимое, x - доступ к файлам

umask 0066 - Создает каталоги с правами доступа drwx--x--x и файлы с правами доступа -rw-------
umask 0077 - Создает каталоги с правами доступа drwx------ и файлы с правами доступа -rw-------
umask 0022 - Создает каталоги с правами доступа drwxr-xr-x и файлы с правами доступа -rw-r--r--
umask 0777 - Создает каталоги с правами доступа d--------- и файлы с правами доступа ----------



SUID 4 - программа выполняется с правами хозяина
ls -l /usr/bin/passwd
-rwsr-xr-x 1 root root /usr/bin/passwd

SGID 2- программа выполняется с правами группы файла. 
Для директорий - создаваемые файлы принадлежат группе, которой принадлежит директория

Sticky 1 - в директории файл может удалить только его хозяин
ls -ld /tmp
drwxrwxrwt 9 root root 4096 дек  7 06:50 /tmp


chmod 7777 ff1 - повесили все специальные bit SUID,SGID,Sticky и права 777

find /usr/bin -user root -type f -perm -4000 - найти все программы в каталоге /usr/bin использующие SUID bit

chgrp - позволяет пользователю сменить группу на файл с условием если он состоит в этой группе

Если UID процесса файла совпадает с UID и GUID файла, то предоставляется доступ по UID файла.

Если UID процесса не совпадает с UID но совпадает с GUID, то предоставляется права по GUID файла.

Приложение исполняется с правами родительского процесса.

4 = r чтение

2 = w запись

1 = x выполнение

chmod 777 test - изменит права на файл

chmod 400 test - разрешили чтение владельцу файла

chmod 0700 - drwx------ - Владелец может читать, записывать файлы в данный каталог, а также переходить в него. Все остальные пользователи не имеют к нему доступа

chmod 0711 - drwx--x--x - Владелец обладает теми же правами. Все остальные могут открывать каталог, но не могут просматривать или изменять файлы в нем

chmod go+r - drwxr--r-- - Добавили чтение для группы и остальных

chmod 0777 - drwxrwxrwx - Полный доступ

chmod a=rwx - drwxrwxrwx - Полный доступ

chmod 0000 - Доступ полностью закрыт

chmod a-rwx - Доступ полностью закрыт

chmod ббб - Открывает права на чтение и изменение файла

chmod go-rw - Не позволяет никому, кроме самого владельца, просматривать, вносить изменения или удалять файл

chmod 644 - Только владелец может вносить изменения в файл или удалять его, но все могут его просматривать

chown vasya /file - назначить пользователя vasya владельцем файла file

chown -R vasya directory - рекурсивно обойти директорию directory и назначить пользователя vasya владельцем всех вложенных файлов и директорий

chown vasya:group /file - назначить владельца и группу для файла /file

Для каталога r - разрешает читать содержимое, w - позволяет переименовывать содержимое, x - доступ к файлам

umask 0066 - Создает каталоги с правами доступа drwx--x--x и файлы с правами доступа -rw-------

umask 0077 - Создает каталоги с правами доступа drwx------ и файлы с правами доступа -rw-------

umask 0022 - Создает каталоги с правами доступа drwxr-xr-x и файлы с правами доступа -rw-r--r--

umask 0777 - Создает каталоги с правами доступа d--------- и файлы с правами доступа ----------

SUID 4 - программа выполняется с правами хозяина

ls -l /usr/bin/passwd

-rwsr-xr-x 1 root root /usr/bin/passwd

SGID 2- программа выполняется с правами группы файла.

Для директорий - создаваемые файлы принадлежат группе, которой принадлежит директория

Sticky 1 - в директории файл может удалить только его хозяин

ls -ld /tmp

drwxrwxrwt 9 root root 4096 дек 7 06:50 /tmp

chmod 7777 ff1 - повесили все специальные bit SUID,SGID,Sticky и права 777

find /usr/bin -user root -type f -perm -4000 - найти все программы в каталоге /usr/bin использующие SUID bit

chgrp - позволяет пользователю сменить группу на файл с условием если он состоит в этой группе

Загрузка системы и ПО

0. Power On Self-Test (POST)
1. Master Boot Record (MBR)
2. Boot sector (/dev/hdaX или /dev/sdaX)
3. Загрузчик ОС (grub, lilo, ntloader...)
4. Ядро
5. Процесс init (PID=1)
6. Система инициализации (BSD, System V, Upstart)
7. Стартовые скрипты


Ядро пытается загрузить процесс init, для этого:
– Проверяет не указана ли опция init, и если указана запускает соответствующую программу
– Если такой опции передано не было, то ядро пытается запустить /init
– В случае неудачи с /init ядро пытается запустить /sbin/init
– При отсутствии /sbin/init делается попытка запустить /etc/init
– При отсутствии /etc/init делается попытка запустить /bin/init
– Если /bin/init тоже отсутствует ядро пытается запустить /bin/sh
– В случае очередной неудачи – выдается “kernel panic”

/etc/rc.d - freebsd
/etc/init.d - linux


runlevel - показать уровень выполнения
init 0 - остановка
shutdown
reboot
init 6 - перезагрузка


lsmod - показать модули ядра 
modprobe - управление модулями ядра

modinfo apm
modprobe -l
modprobe apm
modprobe -r nls_koi8-r

uname - говорит какое ядро
uname -r - покажет  имя каталога модулей ядра
uname -a - полная информация

Пример установки нового модуля (например установка стороннего драйвера)
uname  -r - смотрим имя ядра текущего
ls /lib/modules/4.15.0-126-generic/ - смотрим содержимое каталога модулей ядра (сюда обычно копируют новый модуль согласно инструкций)
depmod -a - команда сообщит ядру пересмотреть содержимое каталога модулей ядра
modprobe name_module - включение модуля ядра

0. Power On Self-Test (POST)

1. Master Boot Record (MBR)

2. Boot sector (/dev/hdaX или /dev/sdaX)

3. Загрузчик ОС (grub, lilo, ntloader...)

4. Ядро

5. Процесс init (PID=1)

6. Система инициализации (BSD, System V, Upstart)

7. Стартовые скрипты

Ядро пытается загрузить процесс init, для этого:

– Проверяет не указана ли опция init, и если указана запускает соответствующую программу

– Если такой опции передано не было, то ядро пытается запустить /init

– В случае неудачи с /init ядро пытается запустить /sbin/init

– При отсутствии /sbin/init делается попытка запустить /etc/init

– При отсутствии /etc/init делается попытка запустить /bin/init

– Если /bin/init тоже отсутствует ядро пытается запустить /bin/sh

– В случае очередной неудачи – выдается “kernel panic”

/etc/rc.d - freebsd

/etc/init.d - linux

runlevel - показать уровень выполнения

init 0 - остановка

shutdown

reboot

init 6 - перезагрузка

lsmod - показать модули ядра

modprobe - управление модулями ядра

modinfo apm

modprobe -l

modprobe apm

modprobe -r nls_koi8-r

uname - говорит какое ядро

uname -r - покажет имя каталога модулей ядра

uname -a - полная информация

Пример установки нового модуля (например установка стороннего драйвера)

uname -r - смотрим имя ядра текущего

ls /lib/modules/4.15.0-126-generic/ - смотрим содержимое каталога модулей ядра (сюда обычно копируют новый модуль согласно инструкций)

depmod -a - команда сообщит ядру пересмотреть содержимое каталога модулей ядра

modprobe name_module - включение модуля ядра

Сеть

URL - uniform resurce locator
IP - internet protocol
DNS - domain name service 

lo - loop back - закольцовывающий интерфейс 127.0.0.0/8
MTU - MAX TRANSFER UNIT - 1500 - максимальный размер пакета - фрейма 

ip a s - показать сетевые интерфейсы
ifconfig - показать сетевые интерфейсы (отключенные не покажет)
ifconfig -a - показать сетевые интерфейсы (отключенные покажет)

ifconfig eth0 192.168.1.20 netmask 255.255.255.0 up - задаем IP адрес и маску, включаем интерфейс

apt-get remove avahi-daemon - удалить avahi-daemon, это фигня ищет сетевые устройства и пытается их подключить

apt-get remove network-manager - удалить network-manager, это фигня выполняет авто конфигурацию сетевых интерфейсов

ifconfig eth0 192.168.1.20/24 up  - задаем IP адрес и маску, включаем интерфейс

netstat -rn - показать таблицу маршрутизации
route -  показать таблицу маршрутизации

route add default gw 192.168.1.1 eth0 - создать маршрут по умолчанию
ip route add default 192.168.1.1 eth0  - создать маршрут по умолчанию

/etc/resolv.conf - список DNS серверов
nameserver 8.8.8.8


man -k resolve
host ya.ru

ping - работает по протоколу ICMP
ping ya.ru
ping -c4 ya.ru - послать четыре пакета, для проверки доступности ya.ru
ping -f 192.168.0.1 - флудим пакетами для тестирования сети
ping -с1 -s1500 192.168.0.1 - посылаем  один пакет размером 1500 байт 

traceroute www.kernel.org - смотрим маршрут до www.kernel.org
TTL - TimeToLive, каждый пройденный маршрутизатор/коммутатор уменьшает на единицу TTL
HOP - проход одного маршрутизатор/коммутатор, изначально измерялся в секундах
traceroute -n www.kernel.org - смотрим маршрут до www.kernel.org, без преобразования имен

nmap - сетевой сканер
nmap 192.168.0.1 - сканируем хост 192.168.0.1
nmap 192.168.15.0/24 - сканируем сеть 192.168.15.0/24
nmap -O 192.168.0.99 - определяем операционную систему

systemd-resolve --status
systemd-resolve www.ya.ru

/etc/network/interfaces - конфиг сетевых настроек по умолчанию для debian
-----------------------
auto eno1
#iface eno1 inet dhcp
iface eno1 inet static
dns-nameserver 192.168.1.1
dns-nameserver 8.8.8.8
address 192.168.1.20
broadcast 192.168.1.255
netmask 255.255.255.0
gateway 192.168.1.1
------------------------

dhclient - клиент DHCP
dhclient eth0 - используем dhcp клиент на интерфейсе eth0

URL - uniform resurce locator

IP - internet protocol

DNS - domain name service

lo - loop back - закольцовывающий интерфейс 127.0.0.0/8

MTU - MAX TRANSFER UNIT - 1500 - максимальный размер пакета - фрейма

ip a s - показать сетевые интерфейсы

ifconfig - показать сетевые интерфейсы (отключенные не покажет)

ifconfig -a - показать сетевые интерфейсы (отключенные покажет)

ifconfig eth0 192.168.1.20 netmask 255.255.255.0 up - задаем IP адрес и маску, включаем интерфейс

apt-get remove avahi-daemon - удалить avahi-daemon, это фигня ищет сетевые устройства и пытается их подключить

apt-get remove network-manager - удалить network-manager, это фигня выполняет авто конфигурацию сетевых интерфейсов

ifconfig eth0 192.168.1.20/24 up - задаем IP адрес и маску, включаем интерфейс

netstat -rn - показать таблицу маршрутизации

route - показать таблицу маршрутизации

route add default gw 192.168.1.1 eth0 - создать маршрут по умолчанию

ip route add default 192.168.1.1 eth0 - создать маршрут по умолчанию

/etc/resolv.conf - список DNS серверов

nameserver 8.8.8.8

man -k resolve

host ya.ru

ping - работает по протоколу ICMP

ping ya.ru

ping -c4 ya.ru - послать четыре пакета, для проверки доступности ya.ru

ping -f 192.168.0.1 - флудим пакетами для тестирования сети

ping -с1 -s1500 192.168.0.1 - посылаем один пакет размером 1500 байт

traceroute www.kernel.org - смотрим маршрут до www.kernel.org

TTL - TimeToLive, каждый пройденный маршрутизатор/коммутатор уменьшает на единицу TTL

HOP - проход одного маршрутизатор/коммутатор, изначально измерялся в секундах

traceroute -n www.kernel.org - смотрим маршрут до www.kernel.org, без преобразования имен

nmap - сетевой сканер

nmap 192.168.0.1 - сканируем хост 192.168.0.1

nmap 192.168.15.0/24 - сканируем сеть 192.168.15.0/24

nmap -O 192.168.0.99 - определяем операционную систему

systemd-resolve --status

systemd-resolve www.ya.ru

/etc/network/interfaces - конфиг сетевых настроек по умолчанию для debian

-----------------------

auto eno1

#iface eno1 inet dhcp

iface eno1 inet static

dns-nameserver 192.168.1.1

dns-nameserver 8.8.8.8

address 192.168.1.20

broadcast 192.168.1.255

netmask 255.255.255.0

gateway 192.168.1.1

------------------------

dhclient - клиент DHCP

dhclient eth0 - используем dhcp клиент на интерфейсе eth0

kill, сигналы

Сигнал может быть послан активному процессу.
Сигнал может быть послан и принят от владельца процесса либо от root.
Сигнал может быть послан ядром: завершился процесс потомка, сообщает родителю иди хорони
                                аварийное завершение процесса, ошибки программирования
Сигнал может быть послан с помощью комбинации клавиш. CTRL+C, CTRL+Z, CTRL+D
Сигнал может быть послан kill.

kill -l - показать все возможные сигналы
1) SIGHUP - повесить трубку - интерактивный процесс будет завершён, демон перечитает конфиг
$$ - PID текущего процесса

kill -1 14221
kill -HUP 14222

15) SIGTERM - завершение, многие программы могут его игнорировать(сигнал слабый, все на него чхали), отправляется по умолчанию
kill 1444
kill -15 1425
kill -TERM 1426

2) SIGINT  - interupt - прерывание процесса
kill -2 1425
kill -INT 1426
CTRL+C

3) SIGQUIT - прерывание процесса 
kill -2 1425
kill -QUIT 1429
CTRL+Break

9) SIGKILL - убивание процесса, уничтожение,  не перехватывается, процесс ничего и не узнает что его убили
kill -9 12425
kill -KILL 2429

10) SIGUSR1 - сигнал программистов эстетов, вольны сами придумать ему применение в своей программе
12) SIGUSR2 - сигнал программистов эстетов, вольны сами придумать ему применение в своей программе

11) SIGSEGV - процесс влез не в свой участок памяти(партизан), не перехватывается, система даст по голове


19) SIGSTOP - приостановить процесс (job)
CTRL+Z

18) SIGCONT - возобновить выполнение процесса (job)
fg, bg


vim p1
-------------
#!/bin/sh
echo $0 # печатаем имя скрипта один раз при запуске
while : # для системы двоеточие истина
do
   sleep 1 # полезная работа спать одну секунду
done
-------------

jobs - покажет все работы
fg %1 - запустить первую задачу на переднем плане, интерактивно
bg %3 - запустить третью задачу на заднем плане,  в фоне
& - спец  символ при использовании запустит  программу в фоне, а также является разделителем команд
./p1 & 
./p1 & ./p2 & ./p3 &
kill %2 - завершить процесс
sleep 5 ; date
(sleep 5 date) & date

Сигнал может быть послан активному процессу.

Сигнал может быть послан и принят от владельца процесса либо от root.

Сигнал может быть послан ядром: завершился процесс потомка, сообщает родителю иди хорони

аварийное завершение процесса, ошибки программирования

Сигнал может быть послан с помощью комбинации клавиш. CTRL+C, CTRL+Z, CTRL+D

Сигнал может быть послан kill.

kill -l - показать все возможные сигналы

1) SIGHUP - повесить трубку - интерактивный процесс будет завершён, демон перечитает конфиг

$$ - PID текущего процесса

kill -1 14221

kill -HUP 14222

15) SIGTERM - завершение, многие программы могут его игнорировать(сигнал слабый, все на него чхали), отправляется по умолчанию

kill 1444

kill -15 1425

kill -TERM 1426

2) SIGINT - interupt - прерывание процесса

kill -2 1425

kill -INT 1426

CTRL+C

3) SIGQUIT - прерывание процесса

kill -2 1425

kill -QUIT 1429

CTRL+Break

9) SIGKILL - убивание процесса, уничтожение, не перехватывается, процесс ничего и не узнает что его убили

kill -9 12425

kill -KILL 2429

10) SIGUSR1 - сигнал программистов эстетов, вольны сами придумать ему применение в своей программе

12) SIGUSR2 - сигнал программистов эстетов, вольны сами придумать ему применение в своей программе

11) SIGSEGV - процесс влез не в свой участок памяти(партизан), не перехватывается, система даст по голове

19) SIGSTOP - приостановить процесс (job)

CTRL+Z

18) SIGCONT - возобновить выполнение процесса (job)

fg, bg

vim p1

-------------

#!/bin/sh

echo $0 # печатаем имя скрипта один раз при запуске

while : # для системы двоеточие истина

sleep 1 # полезная работа спать одну секунду

done

-------------

jobs - покажет все работы

fg %1 - запустить первую задачу на переднем плане, интерактивно

bg %3 - запустить третью задачу на заднем плане, в фоне

& - спец символ при использовании запустит программу в фоне, а также является разделителем команд

./p1 &

./p1 & ./p2 & ./p3 &

kill %2 - завершить процесс

sleep 5 ; date

(sleep 5 date) & date

Архивы и сжатие файлов

компрессоры commpessor
!!! Всегда при сжатии удаляет исходный файл
!!! Программа компрессор умеет сжимать и разжимать файл
gzip .gz gunzip
bzip2 .bz2 bunzip2

cd - перешли в домашний каталог
cp /etc/services . - скопировали себе файл services для опытов

gzip -v services - запаковали файл
gunzip -v services.gz - распаковали файл

ключ -с позволяет перенаправить сжатие\распаковку куда либо
gunzip -cv services.gz > zxc1111.txt - распакует и перенаправит вывод в файл zxc1111.txt
gunzip -vc services | less - распакует и перенаправит вывод в less
gzip -vc services.txt | less - запакует и перенаправит вывод в less

bzip2 -v services
bunzip2 services.bz2

!!! Архиваторы
!!! Архиваторы умеют сжимать файлы! сохраняя структуру каталогов!
ar - старый архиватор, практически не используется
cpio - есть проблемы с совместимостью от разных производителей дистрибутивов...
tar - старый архиватор, используется часто, .tar

tar
c - create - создать 
t - test - проверить
x - exctract - распаковать
v - verbose - показать что делаешь
z - gzip - сжать gzip .tar.gz .tgz
Z - compress  - сжать compress .tar.Z
j - bzip2  - сжать bzip2  .tar.bz2  
!!! По умолчанию ищет ленто протяжное устройство. /dev/st0   /dev/tape
f arhive.tar.bz2 - указываем куда записывать архив


Примеры создания архивов с помощью tar
!!! Переходим в каталог где будем создавать архив, например в домашний каталог пользователя, командой cd 
tar [ключи] куда что
!!! При создании архива убирается начальный слеш, это хорошо видно при тесте архива
tar cvf a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге
tar -cvf a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге
tar -c -v -f a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге

tar -c -v -z -f etc.tar.gz /etc - создать архив -c, -v показывать что делается, -z сжать gzip, -f куда архивировать etc.tar.gz в текущем каталоге, последним параметром указываем что архивировать /etc
tar -cvzf etc.tar.gz /etc - создать архив -c, -v показывать что делается, -z сжать gzip, -f куда архивировать etc.tar.gz в текущем каталоге, последним параметром указываем что архивировать /etc
tar -cvjf etc.tar.bz2 /etc - создать архив -c, -v показывать что делается, -j сжать bzip2, -f куда архивировать etc.tar.bz2 в текущем каталоге, последним параметром указываем что архивировать /etc
tar -cvzf back-etc.tar.gz /etc

echo `date +%Y-%m-%d` - показать текущий год-месяц-дату
echo `date +%Y-%m-%d-%H-%M` - показать текущий год-месяц-день-время

tar -cvzf etc.`date +%Y-%m-%d`.tar.gz /etc 
tar -cvzf etc.`date +%Y-%m-%d-%H-%M`.tar.gz /etc 

Проверка архива а также поиск нужных файлов в архиве
tar -tf etc.tar.bz2
tar -tf etc.tar.gz | grep services - ищем нужный файл services
tar -tf back-etc.tar.gz | grep interfaces - ищем нужный файл interfaces


Примеры распаковки
!!! Переходим в каталог где будем разворачивать архив, например в домашний каталог пользователя, командой cd 
tar -xf etc.tar.bz2 etc/services - достать из архива etc.tar.bz2 один файл services (при тестировании мы точно узнали имя файла и его путь), будет создан каталог etc файлом services в текущем каталоге
tar -xf back-etc.tar.gz etc/network/interfaces - достать из архива файл interfaces
tar -xf back-etc.tar.gz -распаковать файл back-etc.tar.gz в текущем каталоге, будет  создан каталог etc в текущем каталоге

компрессоры commpessor

!!! Всегда при сжатии удаляет исходный файл

!!! Программа компрессор умеет сжимать и разжимать файл

gzip .gz gunzip

bzip2 .bz2 bunzip2

cd - перешли в домашний каталог

cp /etc/services . - скопировали себе файл services для опытов

gzip -v services - запаковали файл

gunzip -v services.gz - распаковали файл

ключ -с позволяет перенаправить сжатие\распаковку куда либо

gunzip -cv services.gz > zxc1111.txt - распакует и перенаправит вывод в файл zxc1111.txt

gunzip -vc services | less - распакует и перенаправит вывод в less

gzip -vc services.txt | less - запакует и перенаправит вывод в less

bzip2 -v services

bunzip2 services.bz2

!!! Архиваторы

!!! Архиваторы умеют сжимать файлы! сохраняя структуру каталогов!

ar - старый архиватор, практически не используется

cpio - есть проблемы с совместимостью от разных производителей дистрибутивов...

tar - старый архиватор, используется часто, .tar

tar

c - create - создать

t - test - проверить

x - exctract - распаковать

v - verbose - показать что делаешь

z - gzip - сжать gzip .tar.gz .tgz

Z - compress - сжать compress .tar.Z

j - bzip2 - сжать bzip2 .tar.bz2

!!! По умолчанию ищет ленто протяжное устройство. /dev/st0 /dev/tape

f arhive.tar.bz2 - указываем куда записывать архив

Примеры создания архивов с помощью tar

!!! Переходим в каталог где будем создавать архив, например в домашний каталог пользователя, командой cd

tar [ключи] куда что

!!! При создании архива убирается начальный слеш, это хорошо видно при тесте архива

tar cvf a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге

tar -cvf a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге

tar -c -v -f a.tar /etc - создание архива каталога /etc с именем a.tar в текущем каталоге

tar -c -v -z -f etc.tar.gz /etc - создать архив -c, -v показывать что делается, -z сжать gzip, -f куда архивировать etc.tar.gz в текущем каталоге, последним параметром указываем что архивировать /etc

tar -cvzf etc.tar.gz /etc - создать архив -c, -v показывать что делается, -z сжать gzip, -f куда архивировать etc.tar.gz в текущем каталоге, последним параметром указываем что архивировать /etc

tar -cvjf etc.tar.bz2 /etc - создать архив -c, -v показывать что делается, -j сжать bzip2, -f куда архивировать etc.tar.bz2 в текущем каталоге, последним параметром указываем что архивировать /etc

tar -cvzf back-etc.tar.gz /etc

echo `date +%Y-%m-%d` - показать текущий год-месяц-дату

echo `date +%Y-%m-%d-%H-%M` - показать текущий год-месяц-день-время

tar -cvzf etc.`date +%Y-%m-%d`.tar.gz /etc

tar -cvzf etc.`date +%Y-%m-%d-%H-%M`.tar.gz /etc

Проверка архива а также поиск нужных файлов в архиве

tar -tf etc.tar.bz2

tar -tf etc.tar.gz | grep services - ищем нужный файл services

tar -tf back-etc.tar.gz | grep interfaces - ищем нужный файл interfaces

Примеры распаковки

!!! Переходим в каталог где будем разворачивать архив, например в домашний каталог пользователя, командой cd

tar -xf etc.tar.bz2 etc/services - достать из архива etc.tar.bz2 один файл services (при тестировании мы точно узнали имя файла и его путь), будет создан каталог etc файлом services в текущем каталоге

tar -xf back-etc.tar.gz etc/network/interfaces - достать из архива файл interfaces

tar -xf back-etc.tar.gz -распаковать файл back-etc.tar.gz в текущем каталоге, будет создан каталог etc в текущем каталоге

Управление пакетами:

apt
apt-get
apt-cache
aptitude
dpkg

apt-get update - скачивание списка пакетов
apt-get upgrade - обновление всех пакетов

apt-get install name_package - установка пакета
apt-get remove name_package - удаление пакета, конфиг остается
apt-get purge name_packege - удаление пакета месте с конфигом
apt-get autoremove - удаление не нужных пакетов \ 
apt-cache search name_packege - поиск пакета

apt-get install w3m - установить консольный браузер w3m
apt-get install lynx - установить консольный браузер lynx
apt-get install links - установить консольный браузер links

dpkg -l - покажет все установленные пакеты
dpkg -l name_package - покажет информацию о пакете

dpkg -l links - покажет информацию о пакете links
dpkg -l wget - покажет информацию о пакете wget

dpkg -l dovecot* - покажет информацию о пакетах с именем  dovecot* 
dpkg -l dovecot* | grep ^ii - покажет информацию о пакетах с именем  dovecot*, отфильтруем строки начинающиеся на ii

dpkg -S /etc/apparmor - узнать какому пакету принадлежит каталог /etc/apparmor
dpkg -S /etc/apparmor/subdomain.conf - узнать какому пакету принадлежит файл /etc/apparmor/subdomain.conf

apt-get -y remove w3m lynx links - ничего не спрашивать (-y) удалить пакеты w3m, lin xи links

/var/cache/apt/archives/ - каталог по умолчанию для скаченных пакетов
apt-get clean - производит очистку каталога /var/cache/apt/archives/

apt

apt-get

apt-cache

aptitude

dpkg

apt-get update - скачивание списка пакетов

apt-get upgrade - обновление всех пакетов

apt-get install name_package - установка пакета

apt-get remove name_package - удаление пакета, конфиг остается

apt-get purge name_packege - удаление пакета месте с конфигом

apt-get autoremove - удаление не нужных пакетов \

apt-cache search name_packege - поиск пакета

apt-get install w3m - установить консольный браузер w3m

apt-get install lynx - установить консольный браузер lynx

apt-get install links - установить консольный браузер links

dpkg -l - покажет все установленные пакеты

dpkg -l name_package - покажет информацию о пакете

dpkg -l links - покажет информацию о пакете links

dpkg -l wget - покажет информацию о пакете wget

dpkg -l dovecot* - покажет информацию о пакетах с именем dovecot*

dpkg -l dovecot* | grep ^ii - покажет информацию о пакетах с именем dovecot*, отфильтруем строки начинающиеся на ii

dpkg -S /etc/apparmor - узнать какому пакету принадлежит каталог /etc/apparmor

dpkg -S /etc/apparmor/subdomain.conf - узнать какому пакету принадлежит файл /etc/apparmor/subdomain.conf

apt-get -y remove w3m lynx links - ничего не спрашивать (-y) удалить пакеты w3m, lin xи links

/var/cache/apt/archives/ - каталог по умолчанию для скаченных пакетов

apt-get clean - производит очистку каталога /var/cache/apt/archives/

Установка/сборка пакетов из исходников

!!! apt install gcc make- установим пакет для сборки пакетов
!!! 0. В первую очередь после загрузки тарбола нужно прочитать два файла README И INSTALL
!!! 1. Во вторую очередь запустить ./configure --help и посмотреть опции подготовки пакета к сборке
!!! 2. Установка пакета происходит в три команды: ./configure --параметры, make, make install

!!! Пример установки программы links из исходников обычному пользователю
http://links.twibright.com - сайт разработчика links 

wget http://links.twibright.com/download/links-2.21.tar.gz - скачиваем дистрибутив
tar xf links-2.21.tar.gz
cd links-2.21/

less README - читаем в первую очередь
less INSTALL - читаем про установку

!!! Не стоит устанавливать программы из исходников в каталоги по /bin, /usr/bin, и т.д., нужно задать prefix установки или использовать по умолчанию /urs/local. 
!!! Пакетный менеджер может сильно удивится, от разности версий файлов, и может привести к различным проблемам.
./configure --help - запускаем что бы посмотреть помощь по сборке пакета
                   --prefix=PREFIX - позволяет указать каталог установки пакета

./configure --prefix=~ - подготавливаем пакет к сборке, указываем что ставить будем в домашний каталог пользователя --prefix=~ 
make - производим сборку программы
make install - производим установку программы

~/bin/links - проверяем работу программы в домашнем каталоге пользователя

!!! Программа make не будет производить сборку где уже производилась сборка
!!! нужно находится в каталоге скаченного тарбола
make clean - очищает сборку, конфиг не трогает
make distclean - очищает сборку полностью, каталог тарбола будет как будто мы его только что распаковали

!!! нужно находится в каталоге скаченного тарбола
make uninstall - удаление программы

!!! apt install gcc make- установим пакет для сборки пакетов

!!! 0. В первую очередь после загрузки тарбола нужно прочитать два файла README И INSTALL

!!! 1. Во вторую очередь запустить ./configure --help и посмотреть опции подготовки пакета к сборке

!!! 2. Установка пакета происходит в три команды: ./configure --параметры, make, make install

!!! Пример установки программы links из исходников обычному пользователю

http://links.twibright.com - сайт разработчика links

wget http://links.twibright.com/download/links-2.21.tar.gz - скачиваем дистрибутив

tar xf links-2.21.tar.gz

cd links-2.21/

less README - читаем в первую очередь

less INSTALL - читаем про установку

!!! Не стоит устанавливать программы из исходников в каталоги по /bin, /usr/bin, и т.д., нужно задать prefix установки или использовать по умолчанию /urs/local.

!!! Пакетный менеджер может сильно удивится, от разности версий файлов, и может привести к различным проблемам.

./configure --help - запускаем что бы посмотреть помощь по сборке пакета

--prefix=PREFIX - позволяет указать каталог установки пакета

./configure --prefix=~ - подготавливаем пакет к сборке, указываем что ставить будем в домашний каталог пользователя --prefix=~

make - производим сборку программы

make install - производим установку программы

~/bin/links - проверяем работу программы в домашнем каталоге пользователя

!!! Программа make не будет производить сборку где уже производилась сборка

!!! нужно находится в каталоге скаченного тарбола

make clean - очищает сборку, конфиг не трогает

make distclean - очищает сборку полностью, каталог тарбола будет как будто мы его только что распаковали

!!! нужно находится в каталоге скаченного тарбола

make uninstall - удаление программы

Конспект: Linux

Конспект: Linux / 2020.03.05

Автор записи Автор: Evgeny Yakovlev
Дата записи 2020/05/03

Дистрибутив для новичка

Дистрибутив ubuntu
https://ubuntu.com/download/desktop
Порядок соответствует изучению Linux для новичков
https://www.youtube.com/watch?v=fAHpGshMCgQ&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=1  - Видео

Дистрибутив ubuntu

https://ubuntu.com/download/desktop

Порядок соответствует изучению Linux для новичков

https://www.youtube.com/watch?v=fAHpGshMCgQ&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=1 - Видео

0. Знакомство с терминалом

Клавиша TAB на клавиатуре наш главный помощник!

man - помощь
man man - помощь по man
man -k man - ищем где в помощи слово man
man ls - вывести помощь по ls
man -a crontab - Последовательно отображает все разделы справочника man, в которых упоминается crontab
man -k crontab - Эквивалент команды apropos

---
1 Выполняемые программы или команды для командной оболочки
2 Обращение к операционной системе (функции, предоставляемые ядром)
3 Обращение к библиотеке (внутренние функции программных библиотек)
4 Специальные файлы (обычно можно найти в /dev)
5 Форматы файлов и условные обозначения типа /etc/passwd
6 Игры
7 Прочее (включая макро пакеты и условные обозначения), например man(7), groff(7)
8 Команды по администрированию системы (обычно только для root)
9 Программы ядра [нетипичные]
---
man 5 crontab - Отображает части раздела 5 справочника man, в которых упоминается crontab 

info  - помощь
uptime - сколько работает система
lscpu - информация о cpu
whatis - показать что делает команда 
whereis - показывает где файл
which ls - вывести полный путь до файла ls
locate - показывает где файл
ls - показать что в этой директории
ls -la -R / - показать все на компьютере
Ctrl + Z - заморозить выполнение процесса
Ctlrl + C - прервать выполнения

fg - продолжить выполнения процесса после использования ctrl+z  
bg - продолжить выполнения процесса после использования ctrl+z  
jobs - посмотреть задания в bg
ps - показать процессы

Клавиша TAB на клавиатуре наш главный помощник!

man - помощь

man man - помощь по man

man -k man - ищем где в помощи слово man

man ls - вывести помощь по ls

man -a crontab - Последовательно отображает все разделы справочника man, в которых упоминается crontab

man -k crontab - Эквивалент команды apropos

---

1 Выполняемые программы или команды для командной оболочки

2 Обращение к операционной системе (функции, предоставляемые ядром)

3 Обращение к библиотеке (внутренние функции программных библиотек)

4 Специальные файлы (обычно можно найти в /dev)

5 Форматы файлов и условные обозначения типа /etc/passwd

6 Игры

7 Прочее (включая макро пакеты и условные обозначения), например man(7), groff(7)

8 Команды по администрированию системы (обычно только для root)

9 Программы ядра [нетипичные]

---

man 5 crontab - Отображает части раздела 5 справочника man, в которых упоминается crontab

info - помощь

uptime - сколько работает система

lscpu - информация о cpu

whatis - показать что делает команда

whereis - показывает где файл

which ls - вывести полный путь до файла ls

locate - показывает где файл

ls - показать что в этой директории

ls -la -R / - показать все на компьютере

Ctrl + Z - заморозить выполнение процесса

Ctlrl + C - прервать выполнения

fg - продолжить выполнения процесса после использования ctrl+z

bg - продолжить выполнения процесса после использования ctrl+z

jobs - посмотреть задания в bg

ps - показать процессы

1. Перемещение по каталогам / по файловой системе

Работа с каталогами:
. - текущий каталог
.. - каталог на уровень выше
~ - домашний каталог
pwd - показать текущею директорию
cd - смена директорий
cd / - перейти в корень
cd ~ - сменить текущий каталог на домашний
cd - без параметров также сменит текущий каталог на домашний
cd .. - перейти на каталог выше
cd ../.. - перейти на два каталога выше


ls - вывести листинг содержимого текущей директории
ls - показать содержимое каталога
ls -al - покажет все файлы, ссылки, размер, скрытые файлы
ls -F - листинг текущей директории с добавлением к именам символов, обозначающих тип объекта
ls -l - листинг текущей директории с подробностями по каждому объекту ( права доступа, владелец, группа, дата, размер )
ls -a - кроме обычных объектов, вывести в листинге, скрытые файлы и директории, текущего каталога
ls /tmp | pr -T5 -W$COLUMNS - листинг директории /tmp в 5 колонок
ls *[0-9]* - вывести в листинг файлов и директорий текущего каталога, содержащие в имени цифровые символы
ls -lSr - показать файлы с сортировкой по размеру

Работа с каталогами:

. - текущий каталог

.. - каталог на уровень выше

~ - домашний каталог

pwd - показать текущею директорию

cd - смена директорий

cd / - перейти в корень

cd ~ - сменить текущий каталог на домашний

cd - без параметров также сменит текущий каталог на домашний

cd .. - перейти на каталог выше

cd ../.. - перейти на два каталога выше

ls - вывести листинг содержимого текущей директории

ls - показать содержимое каталога

ls -al - покажет все файлы, ссылки, размер, скрытые файлы

ls -F - листинг текущей директории с добавлением к именам символов, обозначающих тип объекта

ls -l - листинг текущей директории с подробностями по каждому объекту ( права доступа, владелец, группа, дата, размер )

ls -a - кроме обычных объектов, вывести в листинге, скрытые файлы и директории, текущего каталога

ls /tmp | pr -T5 -W$COLUMNS - листинг директории /tmp в 5 колонок

ls *[0-9]* - вывести в листинг файлов и директорий текущего каталога, содержащие в имени цифровые символы

ls -lSr - показать файлы с сортировкой по размеру

2. Чтение файлов \ Создание директорий \ Создание файлов

cat name_file.txt - вывод файла name_file.txt на экран
cat - напечатает содержимое указанного файла на терминал.

more name_file.txt - открыть файл namme_file.txt для просмотра
less name_file.txt - открыть файл name_file.txt для просмотра

touch - если файл/директория существует то будет изменено время создания
      - если файла нет, то он будет создан
touch name_file1.txt - создать файл с именем name_file1.txt
touch -t 0712250000 fileditest - поменять дату файла fileditest
touch  lol{1,2,3}.txt - создать пустые файлы lol1.txt lol2.txt lol3.txt

mkdir dir3 - создать директорию
mkdir -p dir1/dir2/dir3  -  создать директорию dir3 если dir1 и dir2 не существовало, будут созданы

cp file1.txt file2.txt - скопировать file1.txt в file2.txt
cp -R dir1 dir2 - скопировать
cp file1 file2 - копирование файла в файл 
cp file1 file2 dir - скопировать файлы в директорию 
cp (x*~x[3-5]) newdir - скопировать все файлы вида x* кроме x3 по x5
cp *(^m0) newdir - скопировать файлы модифицированные не сегодня

rmdir dir4 - удалить пустую директорию

rm file2.txt - удалить файл file2.txt

rm -rf dri3 - удалить директорию со всеми файлами
mv file111.txt file222.txt - переместить и переименовать файл \ каталог

split -b 1M filemy - разбить filemy на части размером 1 Мб с помощью опции -b
split -n 3 filemy - разрезание filemy на три части

df — утилита, которая показывает свободное место на дисках
df -h — отображает слайсы, и свободное\занятое место
df -i — показывает количество занятых инодов

cat name_file.txt - вывод файла name_file.txt на экран

cat - напечатает содержимое указанного файла на терминал.

more name_file.txt - открыть файл namme_file.txt для просмотра

less name_file.txt - открыть файл name_file.txt для просмотра

touch - если файл/директория существует то будет изменено время создания

- если файла нет, то он будет создан

touch name_file1.txt - создать файл с именем name_file1.txt

touch -t 0712250000 fileditest - поменять дату файла fileditest

touch lol{1,2,3}.txt - создать пустые файлы lol1.txt lol2.txt lol3.txt

mkdir dir3 - создать директорию

mkdir -p dir1/dir2/dir3 - создать директорию dir3 если dir1 и dir2 не существовало, будут созданы

cp file1.txt file2.txt - скопировать file1.txt в file2.txt

cp -R dir1 dir2 - скопировать

cp file1 file2 - копирование файла в файл

cp file1 file2 dir - скопировать файлы в директорию

cp (x*~x[3-5]) newdir - скопировать все файлы вида x* кроме x3 по x5

cp *(^m0) newdir - скопировать файлы модифицированные не сегодня

rmdir dir4 - удалить пустую директорию

rm file2.txt - удалить файл file2.txt

rm -rf dri3 - удалить директорию со всеми файлами

mv file111.txt file222.txt - переместить и переименовать файл \ каталог

split -b 1M filemy - разбить filemy на части размером 1 Мб с помощью опции -b

split -n 3 filemy - разрезание filemy на три части

df — утилита, которая показывает свободное место на дисках

df -h — отображает слайсы, и свободное\занятое место

df -i — показывает количество занятых инодов

3. Линки

жесткие ссылки - это различные имена одного и того же файла. при удалении всех ссылок удаляется сам файл
 
мягкие ссылки или симлинки не имеют собственных прав и указывают на владельца
удаляются ссылки с помощью команды rm
создаются ссылки с помощью команды ln
 
ln /что /на_что - без параметра s создастся жесткая ссылка. жесткие ссылки ограничены одной файловой системой
 
ln -s /что "название линка" - нужно быть в той папке куда нужно сделать линк (мягкая ссылка)
 
ln -s /var/usr/re ~/re - создаст симлинк на файл /var/usr/re и поместит его в домашний каталог
ln -s /2/e/txt /name - создаст симлинк
ln -s /путь/что /куда/как_назвать_симлинк  - последний параметр отвечает за название симлинка

жесткие ссылки - это различные имена одного и того же файла. при удалении всех ссылок удаляется сам файл

мягкие ссылки или симлинки не имеют собственных прав и указывают на владельца

удаляются ссылки с помощью команды rm

создаются ссылки с помощью команды ln

ln /что /на_что - без параметра s создастся жесткая ссылка. жесткие ссылки ограничены одной файловой системой

ln -s /что "название линка" - нужно быть в той папке куда нужно сделать линк (мягкая ссылка)

ln -s /var/usr/re ~/re - создаст симлинк на файл /var/usr/re и поместит его в домашний каталог

ln -s /2/e/txt /name - создаст симлинк

ln -s /путь/что /куда/как_назвать_симлинк - последний параметр отвечает за название симлинка

4. Команды find

find /   -name '*.html' - искать файлы закачивающиеся на .html
find / -user vasya -  поиск файлов принадлежащие пользователю vasya 
find / -name filedir - найти все директории и файлы принадлежащие пользователю vasya. Поиск будет производиться, начиная с корневой директории (/)
find /etc -type d | sort - ищет все каталоги, находящиеся в /etc/ и вывод сортируется по имени
find /usr/bin -type f -atime +20 - найти директории и файлы с именем filedir. Поиск будет производиться, начиная с корневой директории (/)
find /usr/bin -type f -mtime -10 - найти все файлы в директории /usr/bin, время последнего обращения к которым более 20 дней
find /var/backup/www -name "*.tar.gz" -mtime +30 |xargs /bin/rm -f {}; - найти все файлы старше 30 дней и удалить
find /var/backup/www -name "*.tar.gz" -mtime +30 -delete - найти все файлы старше 30 дней и удалить
find / -xdev -name \*.rpm - найти все файлы в директории /usr/bin, которые были созданы или модифицированы в течении последних 10 дней
find . -maxdepth 1 -name *.jpg -print -exec convert -  искать директории и файлы, имена которых оканчиваются на ".rpm", но игнорируя съёмные накопители, cdrom, usb и т.п.
find /path/to/dir -name \*.c - Найти в текущей директории все файлы с расширением jpg и выполнить для каждого команду convert ( Imagemagick ) 
find / -name *.rpm -exec chmod 755 '{}' \; -  найти все директории и файлы, имена которых оканчиваются на ".с". Поиск будет производиться, начиная с директории /path/to/dir

find / -name '*.html' - искать файлы закачивающиеся на .html

find / -user vasya - поиск файлов принадлежащие пользователю vasya

find / -name filedir - найти все директории и файлы принадлежащие пользователю vasya. Поиск будет производиться, начиная с корневой директории (/)

find /etc -type d | sort - ищет все каталоги, находящиеся в /etc/ и вывод сортируется по имени

find /usr/bin -type f -atime +20 - найти директории и файлы с именем filedir. Поиск будет производиться, начиная с корневой директории (/)

find /usr/bin -type f -mtime -10 - найти все файлы в директории /usr/bin, время последнего обращения к которым более 20 дней

find /var/backup/www -name "*.tar.gz" -mtime +30 |xargs /bin/rm -f {}; - найти все файлы старше 30 дней и удалить

find /var/backup/www -name "*.tar.gz" -mtime +30 -delete - найти все файлы старше 30 дней и удалить

find / -xdev -name \*.rpm - найти все файлы в директории /usr/bin, которые были созданы или модифицированы в течении последних 10 дней

find . -maxdepth 1 -name *.jpg -print -exec convert - искать директории и файлы, имена которых оканчиваются на ".rpm", но игнорируя съёмные накопители, cdrom, usb и т.п.

find /path/to/dir -name \*.c - Найти в текущей директории все файлы с расширением jpg и выполнить для каждого команду convert ( Imagemagick )

find / -name *.rpm -exec chmod 755 '{}' \; - найти все директории и файлы, имена которых оканчиваются на ".с". Поиск будет производиться, начиная с директории /path/to/dir

5. Команды wc

wc -  подсчёт в файле строк, слов и символов
wc - выводит количество строк, слов и символов в указанном файле или во входном потоке (из пайпа). 
     Введите man wc чтобы узнать, как настроить вывод программы. 
wc -l filename - посчитать количество строк в файле
cat my.txt | wc -l так мы узнаем сколько там всего строк (если нужно)
cat file.txt | wc -l - посчитать число строк
cat file.txt | wc -w - посчитать число слов
grep 192.198.1.1 /var/log/httpd/access-log | wc -l - отображает количество записей конкретного IP-адреса в файле журнала Apache
wc /var/log/dmesg - отображает счетчики для одного файла
wc /var/log/*.log - отображает отдельные значения для каждого файла и общие для всех файлов
netstat -na | grep ":порт\ " | wc -l - подсчет количества коннектов на определенный порт
netstat -na | grep ":порт\ " | grep SYN_RCVD | wc -l - подсчет числа «полуоткрытых» TCP-соединений
dpkg -l| wc -l - показать количество установленных пакетов
sysctl -a | wc -l  - показать количество строк

wc - подсчёт в файле строк, слов и символов

wc - выводит количество строк, слов и символов в указанном файле или во входном потоке (из пайпа).

Введите man wc чтобы узнать, как настроить вывод программы.

wc -l filename - посчитать количество строк в файле

cat my.txt | wc -l так мы узнаем сколько там всего строк (если нужно)

cat file.txt | wc -l - посчитать число строк

cat file.txt | wc -w - посчитать число слов

grep 192.198.1.1 /var/log/httpd/access-log | wc -l - отображает количество записей конкретного IP-адреса в файле журнала Apache

wc /var/log/dmesg - отображает счетчики для одного файла

wc /var/log/*.log - отображает отдельные значения для каждого файла и общие для всех файлов

netstat -na | grep ":порт\ " | wc -l - подсчет количества коннектов на определенный порт

netstat -na | grep ":порт\ " | grep SYN_RCVD | wc -l - подсчет числа «полуоткрытых» TCP-соединений

dpkg -l| wc -l - показать количество установленных пакетов

sysctl -a | wc -l - показать количество строк

6. Команды sort

sort file - вывести отсортированное содержимое файла
sort -n file - вывести отсортированное содержимое файла по номерам
sort file1 file2 - вывести отсортированное содержимое двух файлов
sort file1 file2 | uniq - вывести отсортированное содержимое двух файлов исключая повторные значения
sort file1 file2 | uniq -u -вывести уникальные значения из отсортированного содержимого двух файлов 
sort file1 file2 | uniq -d - вывести только повторяющиеся значения из отсортированного содержимого двух файлов 

sort - выведет содержимое файла, указанного в командной строке, в алфавитном порядке 
       Естественно, sort также может принимать ввод из пайпа. 
       Наберите man sort чтобы ознакомиться с опциями команды, которые управляют вариантами сортировки. 

du -ks * | sort -n -r - Сортировать по размеру (kbytes)

du -s /usr/share/* | sort -n - показать размер всех каталогов внутри каталога  /usr/share/ и отсортировать по размеру (размер в Кб)

ps auwx | sort -r -k 4.4 - Следующая команда сортирует процессы по уровню использования памяти. 
                           Параметр к используется для указания поля, используемого для сортировки. 
                           Запись 4,4 показывает, что именно четвертое поле (и только оно) является ключевым.
lsmod | sort -k 2,2n - команда отображает загруженные модули ядра в порядке увеличения их размера. 
                       Параметр n указывает команде sort на необходимость интерпретировать второе поле как номер, а не как строку.

cat /etc/passwd | cut -d ":" -f 1,3,6 | sort >> /home/pi/p.txt - вытащить из файла /etc/passwd содержимое столбиков 1,3,6 , выполнить сортировку и записать результат в файл /home/pi/p.txt

sort file - вывести отсортированное содержимое файла

sort -n file - вывести отсортированное содержимое файла по номерам

sort file1 file2 - вывести отсортированное содержимое двух файлов

sort file1 file2 | uniq - вывести отсортированное содержимое двух файлов исключая повторные значения

sort file1 file2 | uniq -u -вывести уникальные значения из отсортированного содержимого двух файлов

sort file1 file2 | uniq -d - вывести только повторяющиеся значения из отсортированного содержимого двух файлов

sort - выведет содержимое файла, указанного в командной строке, в алфавитном порядке

Естественно, sort также может принимать ввод из пайпа.

Наберите man sort чтобы ознакомиться с опциями команды, которые управляют вариантами сортировки.

du -ks * | sort -n -r - Сортировать по размеру (kbytes)

ps auwx | sort -r -k 4.4 - Следующая команда сортирует процессы по уровню использования памяти.

Параметр к используется для указания поля, используемого для сортировки.

Запись 4,4 показывает, что именно четвертое поле (и только оно) является ключевым.

lsmod | sort -k 2,2n - команда отображает загруженные модули ядра в порядке увеличения их размера.

Параметр n указывает команде sort на необходимость интерпретировать второе поле как номер, а не как строку.

cat /etc/passwd | cut -d ":" -f 1,3,6 | sort >> /home/pi/p.txt - вытащить из файла /etc/passwd содержимое столбиков 1,3,6 , выполнить сортировку и записать результат в файл /home/pi/p.txt

7. Команды cut

cut - показать содержимое  вырезав символы 
cut - используется для извлечения из входного файла или потока, полей разделенных указанным символом. (попробуйте echo 'abc def ghi jkl' | cut -d ' ' -f2,2 )

echo 'abc def ghi jkl' | cut -d ' ' -f2,2
 
cut -c 1,4,7 name.txt - показать содержимое  вырезав символы  

cut - показать содержимое  вырезав символы  
cut -c 1,4,7 name.txt - показать содержимое  вырезав символы  

cut -d ">" -f 3 filename.txt - прочитает файл, найдет делитель d, на экран показывает третий столбик

cat /etc/passwd | cut -f 1,3,6 -d ':' - показать содержимое 1,3,6 столбика вырезав 2,4,5 разделенные символом  ':'

cat /etc/passwd | cut -d ":" -f 1,3,6 >> /home/pi/p.txt - записать содержимое столбиков 1,3,6  в файл /home/pi/p.txt 

cat /etc/passwd | cut -d ":" -f 1,3,6 | sort >> /home/pi/p.txt - вытащить из файла /etc/passwd содержимое столбиков 1,3,6 , выполнить сортировку и записать результат в файл /home/pi/p.txt

cut - показать содержимое вырезав символы

cut - используется для извлечения из входного файла или потока, полей разделенных указанным символом. (попробуйте echo 'abc def ghi jkl' | cut -d ' ' -f2,2 )

echo 'abc def ghi jkl' | cut -d ' ' -f2,2

cut -c 1,4,7 name.txt - показать содержимое вырезав символы

cut - показать содержимое вырезав символы

cut -c 1,4,7 name.txt - показать содержимое вырезав символы

cut -d ">" -f 3 filename.txt - прочитает файл, найдет делитель d, на экран показывает третий столбик

cat /etc/passwd | cut -f 1,3,6 -d ':' - показать содержимое 1,3,6 столбика вырезав 2,4,5 разделенные символом ':'

cat /etc/passwd | cut -d ":" -f 1,3,6 >> /home/pi/p.txt - записать содержимое столбиков 1,3,6 в файл /home/pi/p.txt

8. Регулярные выражения

точка . - любой один символ
? - любой один символ
* - любое кол-во символов
а* - a, ab, abc и aecjejich
^ - начало строки
$ - конец строки 
^а - Любое «а», находящееся в начале строки 
*а$ - Любое «а», находящееся в конце строки 
а.с - Трехсимвольные строки, начинающиеся с «а» и заканчивающиеся на «с»

[] - диапазон 
[^a] - прикол  в таких скобках с "^" все что угодно только не "a"
[^0-9]
[^[:alnun:]]
[bcf]at - bat, cat или fat
[a-d]at - aat, bat, cat, dat, но не Aat, Bat и т. д.
[A-D]at - Aat, Bat, Cat и Dat, но не aat, bat и т. д.
1[3-5]7 - 137,147 и 157
[0-9]    [[:digit:]] \d \D
[a-z]
[A-Z]
[a-zA-Z0-9]
[[:alnun:]]  \w  \W
[[:space:]]  \s  \S

[A-Z] - большие буквы
[0-9] - цифры
[a-z] - мелкие буквы
[A-Za-z]
www\.[a-z]*\.com


d{n,m} - квантификатор 
{} -  последовательность
touch {6,7,8}.txt - последовательно создаст файлы 6.txt, 7.txt, 8.txt
grep -E  '[0-9]{1,3}'

\tHello	- Символ табуляции, предшествующий слову hello
\[tT][xX][Tt] - .txt, .TXT, .TxT или другие сочетания на основе изменения регистра
\n - новая строка
\r - символ возврата


Мата символ * 
Некоторые мета символы сами по себе не соответствуют ничему, но изменяют значение предыдущего символа. 
Один из таких символов, это * (звездочка), который используется для сопоставления нулевому или большему 
числу повторений предшествующего символа. Заметьте, это значит, что * имеет другое значение в регулярках, 
нежели в глоббинге. Вот несколько примеров, и обратите особое внимание на те случаи где сопоставление 
регулярных выражений отличается от glob-подстановок:
ab*c совпадает с «abbbbc», но не с «abqc» (в случае glob-подстановки, обе строчки будут удовлетворять шаблону. Вы уже поняли почему?)
ab*c совпадает с «abc», но не с «abbqbbc» (опять же, при glob-подстановке, шаблон сопоставим с обоими строчками)
ab*c совпадает с «ac», но не с «cba» (в случае глоббинга, ни «ac», ни «cba» не удовлетворяют шаблону)
b[cq]*e совпадает с «bqe» и с «be» (glob-подстановке удовлетворяет «bqe», но не «be»)
b[cq]*e совпадает с «bccqqe», но не с «bccc» (при глоббинге шаблон точно так же совпадет с первым, но не со вторым)
b[cq]*e совпадает с «bqqcce», но не с «cqe» (так же и при glob-подстановке)
b[cq]*e удовлетворяет «bbbeee» (но не в случае глоббинга)
.* сопоставим с любой строкой (glob-подстановке удовлетворяют только строки начинающиеся с ".")
foo.* совпадет с любой подстрокой начинающийся с «foo» (в случае glob-подстановки 
этот шаблон будет совпадать со строками, начинающимися с четырех символов «foo.»)
Итак, повторим для закрепления: строчка «ac» подходит под регулярное выражение «ab*c» потому, 
что звездочка также позволяет повторение предшествующего выражения (b) ноль раз. И опять, ценно отметить для себя, 
что мета символ * в регулярках интерпретируется совершенно иначе, нежели символ * в glob-подстановках.

Начало и конец строки 
Последние мета символы, что мы детально рассмотрим, это ^ и $, которые используются для сопоставления началу 
и концу строки, соответственно. Воспользовавшись ^ в начале вашего regex, вы «прикрепите» ваш шаблон к началу строки. 
В следующем примере, мы используем регулярное выражение ^#, 
которое удовлетворяет любой строке начинающийся с символа #:
$ grep ^# /etc/fstab
# /etc/fstab: static file system information.

Полно строчные регулярки
^ и $ можно комбинировать, для сопоставлений со всей строкой целиком. 
Например, нижеследующая регулярка будет соответствовать строкам начинающимся с символа #, 
а заканчивающимся символом ".", при произвольном количестве символов между ними:
$ grep '^#.*\.$' /etc/fstab
# /etc/fstab: static file system information.
В примере выше мы заключили наше регулярное выражение в одиночные кавычки, 
чтобы предотвратить интерпретирование символа $ командной оболочкой. 
Без одиночных кавычек $ исчез бы из нашей регулярки еще даже до того, как grep мог его увидеть.

точка . - любой один символ

? - любой один символ

* - любое кол-во символов

а* - a, ab, abc и aecjejich

^ - начало строки

$ - конец строки

^а - Любое «а», находящееся в начале строки

*а$ - Любое «а», находящееся в конце строки

а.с - Трехсимвольные строки, начинающиеся с «а» и заканчивающиеся на «с»

[] - диапазон

[^a] - прикол в таких скобках с "^" все что угодно только не "a"

[^0-9]

[^[:alnun:]]

[bcf]at - bat, cat или fat

[a-d]at - aat, bat, cat, dat, но не Aat, Bat и т. д.

[A-D]at - Aat, Bat, Cat и Dat, но не aat, bat и т. д.

1[3-5]7 - 137,147 и 157

[0-9] [[:digit:]] \d \D

[a-z]

[A-Z]

[a-zA-Z0-9]

[[:alnun:]] \w \W

[[:space:]] \s \S

[A-Z] - большие буквы

[0-9] - цифры

[a-z] - мелкие буквы

[A-Za-z]

www\.[a-z]*\.com

d{n,m} - квантификатор

{} - последовательность

touch {6,7,8}.txt - последовательно создаст файлы 6.txt, 7.txt, 8.txt

grep -E '[0-9]{1,3}'

\tHello - Символ табуляции, предшествующий слову hello

\[tT][xX][Tt] - .txt, .TXT, .TxT или другие сочетания на основе изменения регистра

\n - новая строка

\r - символ возврата

Мата символ *

Некоторые мета символы сами по себе не соответствуют ничему, но изменяют значение предыдущего символа.

Один из таких символов, это * (звездочка), который используется для сопоставления нулевому или большему

числу повторений предшествующего символа. Заметьте, это значит, что * имеет другое значение в регулярках,

нежели в глоббинге. Вот несколько примеров, и обратите особое внимание на те случаи где сопоставление

регулярных выражений отличается от glob-подстановок:

ab*c совпадает с «abbbbc», но не с «abqc» (в случае glob-подстановки, обе строчки будут удовлетворять шаблону. Вы уже поняли почему?)

ab*c совпадает с «abc», но не с «abbqbbc» (опять же, при glob-подстановке, шаблон сопоставим с обоими строчками)

ab*c совпадает с «ac», но не с «cba» (в случае глоббинга, ни «ac», ни «cba» не удовлетворяют шаблону)

b[cq]*e совпадает с «bqe» и с «be» (glob-подстановке удовлетворяет «bqe», но не «be»)

b[cq]*e совпадает с «bccqqe», но не с «bccc» (при глоббинге шаблон точно так же совпадет с первым, но не со вторым)

b[cq]*e совпадает с «bqqcce», но не с «cqe» (так же и при glob-подстановке)

b[cq]*e удовлетворяет «bbbeee» (но не в случае глоббинга)

.* сопоставим с любой строкой (glob-подстановке удовлетворяют только строки начинающиеся с ".")

foo.* совпадет с любой подстрокой начинающийся с «foo» (в случае glob-подстановки

этот шаблон будет совпадать со строками, начинающимися с четырех символов «foo.»)

Итак, повторим для закрепления: строчка «ac» подходит под регулярное выражение «ab*c» потому,

что звездочка также позволяет повторение предшествующего выражения (b) ноль раз. И опять, ценно отметить для себя,

что мета символ * в регулярках интерпретируется совершенно иначе, нежели символ * в glob-подстановках.

Начало и конец строки

Последние мета символы, что мы детально рассмотрим, это ^ и $, которые используются для сопоставления началу

и концу строки, соответственно. Воспользовавшись ^ в начале вашего regex, вы «прикрепите» ваш шаблон к началу строки.

В следующем примере, мы используем регулярное выражение ^#,

которое удовлетворяет любой строке начинающийся с символа #:

$ grep ^# /etc/fstab

# /etc/fstab: static file system information.

Полно строчные регулярки

^ и $ можно комбинировать, для сопоставлений со всей строкой целиком.

Например, нижеследующая регулярка будет соответствовать строкам начинающимся с символа #,

а заканчивающимся символом ".", при произвольном количестве символов между ними:

$ grep '^#.*\.$' /etc/fstab

# /etc/fstab: static file system information.

В примере выше мы заключили наше регулярное выражение в одиночные кавычки,

чтобы предотвратить интерпретирование символа $ командной оболочкой.

Без одиночных кавычек $ исчез бы из нашей регулярки еще даже до того, как grep мог его увидеть.

8.1 grep

!!! Используйте grep -E тогда можно будет использовать нормально регулярные выражения

grep "что" "Где" - искать что в файле 
grep -i "что" "Где" - искать что во всех файла и каталогах игнорируя регистр
grep -E "что" "Где" - искать что в файле, использовать нормально регулярные выражения
grep -Er "что" *  - искать что во всех файлах и каталогах
grep -Eri "что" "Где" - искать что во всех файла и каталогах игнорируя регистр
grep -Eriv "что" "Где" - показать все файлы где нет что


grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"
ifconfig | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"
ip a s | grep -E "inet [192]+\.[168]"
ip a s | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"
ifconfig | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"
ip a s | grep -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"
ifconfig | grep -E "(^|[[:space:]])[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}($|[[:space:]])"
grep -E "[A-Za-z\.]@[A-Za-z]" x.txt

grep -i linux ./*  - искать linux во всех файла и каталогах игнорируя регистр
grep -i linux *  - искать linux во всех файла и каталогах игнорируя регистр

grep francois myfile.txt - показывает строки, содержащие слово francois из файла myfile.txt
grep 404 /var/log/httpd/access_log - показывает	строки, содержащие число 404 из /var/log/httpd/access_log
grep -Rl Virtual Host /etc/httpd/conf* - показывает строки Virtual Host
grep -v 200 /var/log/httpd/access_log* - отображает строки, не содержащие число 200

grep [0-9] /var/log/messages - отобрать и вывести строки содержащие цифровые символы из файла /var/log/messages
grep ^Aug /var/log/messages - отобрать и вывести строки, начинающиеся с сочетания символов "Aug", из файла /var/log/messages
grep Aug /var/log/messages - отобрать и вывести строки, содержащие сочетание символов "Aug" из файла /var/log/messages
grep Aug -R /var/log/* - отобрать и вывести строки, содержащие сочетание символов "Aug", из всех файлов, расположенных в директории /var/log и ниже

dmesg | less - показать все устройства переправив вывод в less
dmesg | grep -i pci	- команда выводит список всех устройств PCI
dmesg | grep -i isa	- команда выводит список всех устройств ISA
dmesg | grep -i memory	- показать память
dmesg | grep -i scsi	- команда выводит список всех устройств scsi
dmesg | grep -i usb	- команда выводит список всех устройств usb
dmesg | grep -i tty	- консоль\терминал\ввод
dmesg | grep -i cpu     - процессор


ps auwx	| grep init - показывает строки init из выхода ps
ps auwx	| grep "\[*\]" - показывает команды, заключенные в скобки

dmesg |	grep "[ ]ata\|^ata" - показывает информацию об устройстве ядра ata

getsebool -a | grep ssh - показать правила ssh
getsebool -a | grep httpd - показать правила httpd

tcpdump -i eth0 -s 0 -A port 80 | grep GET - (-s 0 весь пакет, -A для ASCII)
tcpdump |grep -v ssh - поиск пакетов исключая пакеты ssh

ls -l /dev | grep -E 'sd|hd' - показать все где есть символ sd или hd

!!! Используйте grep -E тогда можно будет использовать нормально регулярные выражения

grep "что" "Где" - искать что в файле

grep -i "что" "Где" - искать что во всех файла и каталогах игнорируя регистр

grep -E "что" "Где" - искать что в файле, использовать нормально регулярные выражения

grep -Er "что" * - искать что во всех файлах и каталогах

grep -Eri "что" "Где" - искать что во всех файла и каталогах игнорируя регистр

grep -Eriv "что" "Где" - показать все файлы где нет что

grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"

ifconfig | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"

ip a s | grep -E "inet [192]+\.[168]"

ip a s | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"

ifconfig | grep -E "[192]+\.[0-9]+\.[0-9]+\.[0-9]"

ip a s | grep -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"

ifconfig | grep -E "(^|[[:space:]])[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}($|[[:space:]])"

grep -E "[A-Za-z\.]@[A-Za-z]" x.txt

grep -i linux ./* - искать linux во всех файла и каталогах игнорируя регистр

grep -i linux * - искать linux во всех файла и каталогах игнорируя регистр

grep francois myfile.txt - показывает строки, содержащие слово francois из файла myfile.txt

grep 404 /var/log/httpd/access_log - показывает строки, содержащие число 404 из /var/log/httpd/access_log

grep -Rl Virtual Host /etc/httpd/conf* - показывает строки Virtual Host

grep -v 200 /var/log/httpd/access_log* - отображает строки, не содержащие число 200

grep [0-9] /var/log/messages - отобрать и вывести строки содержащие цифровые символы из файла /var/log/messages

grep ^Aug /var/log/messages - отобрать и вывести строки, начинающиеся с сочетания символов "Aug", из файла /var/log/messages

grep Aug /var/log/messages - отобрать и вывести строки, содержащие сочетание символов "Aug" из файла /var/log/messages

grep Aug -R /var/log/* - отобрать и вывести строки, содержащие сочетание символов "Aug", из всех файлов, расположенных в директории /var/log и ниже

dmesg | less - показать все устройства переправив вывод в less

dmesg | grep -i pci - команда выводит список всех устройств PCI

dmesg | grep -i isa - команда выводит список всех устройств ISA

dmesg | grep -i memory - показать память

dmesg | grep -i scsi - команда выводит список всех устройств scsi

dmesg | grep -i usb - команда выводит список всех устройств usb

dmesg | grep -i tty - консоль\терминал\ввод

dmesg | grep -i cpu - процессор

ps auwx | grep init - показывает строки init из выхода ps

ps auwx | grep "\[*\]" - показывает команды, заключенные в скобки

dmesg | grep "[ ]ata\|^ata" - показывает информацию об устройстве ядра ata

getsebool -a | grep ssh - показать правила ssh

getsebool -a | grep httpd - показать правила httpd

tcpdump -i eth0 -s 0 -A port 80 | grep GET - (-s 0 весь пакет, -A для ASCII)

tcpdump |grep -v ssh - поиск пакетов исключая пакеты ssh

ls -l /dev | grep -E 'sd|hd' - показать все где есть символ sd или hd

9. Пере направление ввода и вывода \ stdout \ stdin \ stderr \ Pipe

Пере направление потока ввода/вывода 
Pipe, пайпы, пере направление
конвейер - (пайп) -  (shift)+(обратная косая черта) =  |
| - пайп пере направление вывода
; - пайп пере направление вывода
() -  скобки служат для группирования команд
& -  говорит о том что команда выполнится в фоне
ls /etc | grep abc - смотрим содержимое каталога etc, перенаправляем вывод в grep и получаем файлы в которых есть символ abc
cd /etc ; cat passwd - перейти в etc и выполнить cat passwd
(sleep 30; echo tttt)& - все что в скобки отправляем в фоновый режим и через 30 сек выводим  tttt
ps > myfile перенаправит вывод в myfile.txt ( уничтожит текущие содержание файла)
ps | less перенаправит вывод в просмотрщик(пейджер) less
ps >> myfil.txt если файл есть то допишет в конец файла
<  - взять входные данные из следующего фала
fromdos < from.txt > unix.txt - из fromdos возьмет данные из from.txt и запишет в unix.txt


:> filename.txt - дятел, создать пустой файл filename.txt
> filename.txt - создать пустой файл filename.txt

echo 123 >  file.txt - записать 123  в  файл file.txt (важно файл будет перезаписан и будет 123)
file.txt < echo 123 - записать 123  в  файл file.txt (важно файл будет перезаписан и будет 123)
echo 222 >>  file.txt - дописать в конец файла file.txt 222 
file.txt << echo 222 -дописать в конец файла file.txt 222 
 
2>  - stderr - ошибки, информация
 
1>  - stdout - вывод (экран)
 
0>  -  stdin - ввод (клавиатура)

&> -  stderr and stdout - ошибки и вывод
 
echo $?

Пример с ping:
-------------
ip=1.1.1.1
ping -c1 -w1 $ip >/dev/null 2>&1 && echo OK
-------------


grep user /etc/* 2> /dev/null - ищем слово user в каталоге /etc/ , поток ошибок перенаправляем в /dev/null
grep user /etc/* > good.txt 2> bad.txt - ищем слово user в каталоге /etc/ , поток без ошибок запишем  good.txt, поток ошибок перенаправляем в bad.txt
grep user /etc/* > good.txt 2> bad.txt - ищем слово user в каталоге /etc/ , поток без ошибок запишем  good.txt, поток ошибок перенаправляем в bad.txt
grep user /etc/* &> result.txt - ищем слово user в каталоге /etc/ , поток  вывода и ошибок запишем result.txt


ls -laR / > good.txt 2> bad.txt -  показываем содержимое каталога / , поток без ошибок запишем  good.txt, поток ошибок перенаправляем в bad.txt
ls -laR / &> result.txt - показываем содержимое каталога /  , поток  вывода и ошибок запишем result.txt

Пере направление потока ввода/вывода

Pipe, пайпы, пере направление

конвейер - (пайп) - (shift)+(обратная косая черта) = |

| - пайп пере направление вывода

; - пайп пере направление вывода

() - скобки служат для группирования команд

& - говорит о том что команда выполнится в фоне

ls /etc | grep abc - смотрим содержимое каталога etc, перенаправляем вывод в grep и получаем файлы в которых есть символ abc

cd /etc ; cat passwd - перейти в etc и выполнить cat passwd

(sleep 30; echo tttt)& - все что в скобки отправляем в фоновый режим и через 30 сек выводим tttt

ps > myfile перенаправит вывод в myfile.txt ( уничтожит текущие содержание файла)

ps | less перенаправит вывод в просмотрщик(пейджер) less

ps >> myfil.txt если файл есть то допишет в конец файла

< - взять входные данные из следующего фала

fromdos < from.txt > unix.txt - из fromdos возьмет данные из from.txt и запишет в unix.txt

:> filename.txt - дятел, создать пустой файл filename.txt

> filename.txt - создать пустой файл filename.txt

echo 123 > file.txt - записать 123 в файл file.txt (важно файл будет перезаписан и будет 123)

file.txt < echo 123 - записать 123 в файл file.txt (важно файл будет перезаписан и будет 123)

echo 222 >> file.txt - дописать в конец файла file.txt 222

file.txt << echo 222 -дописать в конец файла file.txt 222

2> - stderr - ошибки, информация

1> - stdout - вывод (экран)

0> - stdin - ввод (клавиатура)

&> - stderr and stdout - ошибки и вывод

echo $?

Пример с ping:

-------------

ip=1.1.1.1

ping -c1 -w1 $ip >/dev/null 2>&1 && echo OK

-------------

grep user /etc/* 2> /dev/null - ищем слово user в каталоге /etc/ , поток ошибок перенаправляем в /dev/null

grep user /etc/* > good.txt 2> bad.txt - ищем слово user в каталоге /etc/ , поток без ошибок запишем good.txt, поток ошибок перенаправляем в bad.txt

grep user /etc/* &> result.txt - ищем слово user в каталоге /etc/ , поток вывода и ошибок запишем result.txt

ls -laR / > good.txt 2> bad.txt - показываем содержимое каталога / , поток без ошибок запишем good.txt, поток ошибок перенаправляем в bad.txt

ls -laR / &> result.txt - показываем содержимое каталога / , поток вывода и ошибок запишем result.txt

10. Архивирование \ Сжатие

tar cf куда_ИМЯ_будущего_архива.tar что_архивируем 
tar cvf name.tar myfolder
c - create 
v - verbose - показывать что делает tar
f - file ( параметр f всегда должен быть последним ) 


tar tf my.tar - проверить архив
t - test
f- file

tar xvf my.tar - распаковать содержимое в текущем каталоге 
x - extract
v - vrbose
f - file

gzip / bzip2 / xz - команды для компрессии файла

gzip my.tar - запаковать файл my.tar (файл уменьшится, добавится расширение gz)
gzip -9 file1 - поместить файл file1 в архив gzip с максимальной степенью сжатия
gunzip my.tar.gz  - распаковать файл my.tar.gz

bzip2 my.tar - запаковать файл my.tar (файл уменьшится, добавится расширение bz2)
bunzip2 my.tar.bz2 - распаковать файл my.tar.bz2

xz my.tar  - запаковать файл my.tar (файл уменьшится, добавится расширение xz)
unxz my.tar.xz - распаковать файл my.tar.xz

tar cvzf mygzip.tar.gz folder1 - создать архив каталога folder1 использовать сжатие gzip
tar cvzf mygzip.gz folder1 - создать архив каталога folder1 использовать сжатие gzip
хорошим тоном считается писать расширение так tar.gz 
c - create 
v - verbose
z - сжатие gz
f - file (имя файла)

tar cvjf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие bz2
tar cjf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие bz2
c - create 
v - verbose
j - сжатие bz2
f - file (имя файла)

tar cvJf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие xz
tar cJf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие xz
c - create 
v - verbose
J - сжатие xz
f - file (имя файла)
 

tar cvzpf /home/Backup-etc`date +%y_%m_%d`.tgz /etc 2>/home/error.log - создание архива каталога с временной меткой
tar -cvf archive.tar file1 file2 dir1 - создать tar архив archive.tar, упаковав в него файлы file1, file2 и директорию dir1
tar -cvf archive.tar file - упаковать в tar-архив archive.tar, файл file
tar -cvzf archive.tar.gz dir1 - создать tar архив и сжать его с помощью программы gzip
tar -cvjf archive.tar.bz2 dir1 - создать архив и сжать его с помощью bzip2 ( ключ -j работает не во всех *nix системах )

tar -tf archive.tar - вывести содержимое tar архива
tar tfv viruses-2010-05-18.tar.bz2 1>zxcvirus.txt - просмотр архива и запись в файл описания



tar -xvzf archive.tar.gz - разжать tar архив gz и распаковать его
tar -xvjf archive.tar.bz2 - разжать архив bz и распаковать его ( ключ -j работает не во всех *nix системах )
tar -xvf archive.tar - распаковать tar архив в текущей директории ( в принципе указывать метод сжатия не обязательно, tar сам разберется) 
tar -xvf archive.tar -C /tmp - распаковать архив в /tmp


rar
rar a file1.rar file1 file2 dir1 - создать rar архив file1.rar, архивировать файлы: file1, file2 и директорию: dir1
rar a file1.rar test_file - упаковать в rar архив file1.rar файл test_file
rar x file.rar - разархивировать rar архив file.rar
unrar x file1.rar - распаковать rar-архив

zip
zip file1.zip file1 - создать сжатый zip-архив
zip -r file1.zip file1 file2 dir1 - запаковать в архив несколько файлов и/или директорий
unzip file1.zip - разжать и распаковать zip-архив

tar cf куда_ИМЯ_будущего_архива.tar что_архивируем

tar cvf name.tar myfolder

c - create

v - verbose - показывать что делает tar

f - file ( параметр f всегда должен быть последним )

tar tf my.tar - проверить архив

t - test

f- file

tar xvf my.tar - распаковать содержимое в текущем каталоге

x - extract

v - vrbose

f - file

gzip / bzip2 / xz - команды для компрессии файла

gzip my.tar - запаковать файл my.tar (файл уменьшится, добавится расширение gz)

gzip -9 file1 - поместить файл file1 в архив gzip с максимальной степенью сжатия

gunzip my.tar.gz - распаковать файл my.tar.gz

bzip2 my.tar - запаковать файл my.tar (файл уменьшится, добавится расширение bz2)

bunzip2 my.tar.bz2 - распаковать файл my.tar.bz2

xz my.tar - запаковать файл my.tar (файл уменьшится, добавится расширение xz)

unxz my.tar.xz - распаковать файл my.tar.xz

tar cvzf mygzip.tar.gz folder1 - создать архив каталога folder1 использовать сжатие gzip

tar cvzf mygzip.gz folder1 - создать архив каталога folder1 использовать сжатие gzip

хорошим тоном считается писать расширение так tar.gz

c - create

v - verbose

z - сжатие gz

f - file (имя файла)

tar cvjf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие bz2

tar cjf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие bz2

c - create

v - verbose

j - сжатие bz2

f - file (имя файла)

tar cvJf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие xz

tar cJf myfile.tar.bz2 folder1 - создать архив каталога folder1 использовать сжатие xz

c - create

v - verbose

J - сжатие xz

f - file (имя файла)

tar cvzpf /home/Backup-etc`date +%y_%m_%d`.tgz /etc 2>/home/error.log - создание архива каталога с временной меткой

tar -cvf archive.tar file1 file2 dir1 - создать tar архив archive.tar, упаковав в него файлы file1, file2 и директорию dir1

tar -cvf archive.tar file - упаковать в tar-архив archive.tar, файл file

tar -cvzf archive.tar.gz dir1 - создать tar архив и сжать его с помощью программы gzip

tar -cvjf archive.tar.bz2 dir1 - создать архив и сжать его с помощью bzip2 ( ключ -j работает не во всех *nix системах )

tar -tf archive.tar - вывести содержимое tar архива

tar tfv viruses-2010-05-18.tar.bz2 1>zxcvirus.txt - просмотр архива и запись в файл описания

tar -xvzf archive.tar.gz - разжать tar архив gz и распаковать его

tar -xvjf archive.tar.bz2 - разжать архив bz и распаковать его ( ключ -j работает не во всех *nix системах )

tar -xvf archive.tar - распаковать tar архив в текущей директории ( в принципе указывать метод сжатия не обязательно, tar сам разберется)

tar -xvf archive.tar -C /tmp - распаковать архив в /tmp

rar

rar a file1.rar file1 file2 dir1 - создать rar архив file1.rar, архивировать файлы: file1, file2 и директорию: dir1

rar a file1.rar test_file - упаковать в rar архив file1.rar файл test_file

rar x file.rar - разархивировать rar архив file.rar

unrar x file1.rar - распаковать rar-архив

zip

zip file1.zip file1 - создать сжатый zip-архив

zip -r file1.zip file1 file2 dir1 - запаковать в архив несколько файлов и/или директорий

unzip file1.zip - разжать и распаковать zip-архив

11. Процессы \ память \ логи

top / htop
У утилиты top есть параметры, которые облегают жизнь, их мы набираем в top’e когда он запущен:
u — и имя пользователя, например u mysql покажет процессы запущенные от пользователя mysql
o — используем для сортировки, возможные параметры — pri, size, res, cpu, time, threads
m — переключение между режимами отображения нагрузки и ввода-вывода
k — завершить процесс, ввод pid процесса
r — изменить приоритет процесса, вводим pid процесса
n — отображать статистику по определённому процесс
a — показывает абсолютные запущенных процессов
top -n 3 - запускает top на 3 сек 
SHIFT+P - отфильтровать по потреблению процессора
SHIFT+M -отфильтровать по потреблению памяти 
q - выход


free - показать количество памяти в байтах
free -h - показать количество памяти для людей


ps - процессы у текущего пользователя
u - user
a - all 
x - execute
ps -u user - показать процессы у пользователя 
ps -aux  - самая популярная команда 


/var/log -  в этом каталог сохраняются все логи
dmesg - лог ядра linux, хранится в оперативной памяти

top / htop

У утилиты top есть параметры, которые облегают жизнь, их мы набираем в top’e когда он запущен:

u — и имя пользователя, например u mysql покажет процессы запущенные от пользователя mysql

o — используем для сортировки, возможные параметры — pri, size, res, cpu, time, threads

m — переключение между режимами отображения нагрузки и ввода-вывода

k — завершить процесс, ввод pid процесса

r — изменить приоритет процесса, вводим pid процесса

n — отображать статистику по определённому процесс

a — показывает абсолютные запущенных процессов

top -n 3 - запускает top на 3 сек

SHIFT+P - отфильтровать по потреблению процессора

SHIFT+M -отфильтровать по потреблению памяти

q - выход

free - показать количество памяти в байтах

free -h - показать количество памяти для людей

ps - процессы у текущего пользователя

u - user

a - all

x - execute

ps -u user - показать процессы у пользователя

ps -aux - самая популярная команда

/var/log - в этом каталог сохраняются все логи

dmesg - лог ядра linux, хранится в оперативной памяти

lsof

lsof - показывает информацию от откртых сокетах, файлах и сетевых соединениях.
lsof -i -n - показывает открытые интернет-соединения
lsof -i -n |grep ESTABLISHED - показывает открытые, и установленные сетевые соединения
lsof -i -n | grep -i established
lsof -i -n | grep -i list

lsof - показывает информацию от откртых сокетах, файлах и сетевых соединениях.

lsof -i -n - показывает открытые интернет-соединения

lsof -i -n |grep ESTABLISHED - показывает открытые, и установленные сетевые соединения

lsof -i -n | grep -i established

lsof -i -n | grep -i list

11.2 Маленький бенчмарк

wget -qO- bench.sh | bash

1	wget -qO- bench.sh \| bash

12. Варианты редактирования файлов

https://b14esh.com/category/nix/vim
vi - мощный редактор
vim - мощный редактор
---------------------
:e **/filename.c          редактировать файл (с поиском по имени)
:w [fname]                записать изменения
:wa                       сохранить изменения во всех файлах
:q                        выйти из редактора
:q!                       выйти из редактора, не сохраняя изменения

hjkl                      перемещение в разные стороны
i                         режим вставки
I                         добавление в начало строки
a                         режим добавления
A                         добавление в конец строки
o                         добавить строку сразу за текущей
O                         добавить строку перед текущей
R                         писать поверх имеющегося текста
u, :u[ndo]                отмена предыдущего действия (undo)
CTR-R, :red[o]            отмена отмены предыдущего действия (redo)
dd                        вырезать (удалить) строку
cc                        удалить и начать редактирование
yy                        копировать строку
p                         вставить из буфера обмена
<n>d                      удалить n+1 строку
<n>y                      скопировать n+1 строку
ESC                       перейти в режим просмотра
DEL                       удалить следующий символ
:<n>                      перейти на строку #n
%                         перейти к парной скобке

:color <name>             выбор цветовой схемы. цветовые схемы: /usr/local/share/vim/vim72/colors/*.vim
:pwd                      текущий каталог
:cd [path]                перейти в другой каталог
:!команда                 выполнить команду - man, git, и так далее
                          стрелочками вверх и вниз можно авто дополнять
                          команды и искать по истории

/                         поиск,  кнопка n далее
:<n>                      перейти на строку #n
v + hjkl                  выделение текста
SHIFT + v                 выделить строку
CTRL + v                  выделение прямоугольника
y                         копировать
d                         удалить
p                         вставить
u                         к нижнему регистру
Shift+U                   к верхнему регистру

172,200d                  удалить с 172 строки по 200
1,10d                     удалить с 1 строки по 10 

---------------------

pico - простой редактор
nano - простой редактор
^ - имеется ввиду Control
Ctrl+W - поиск
Ctrl+K - вырезать строку
Cctrl+U - вставить строку
Ctrl+X - выход

https://b14esh.com/category/nix/vim

vi - мощный редактор

vim - мощный редактор

---------------------

:e **/filename.c редактировать файл (с поиском по имени)

:w [fname] записать изменения

:wa сохранить изменения во всех файлах

:q выйти из редактора

:q! выйти из редактора, не сохраняя изменения

hjkl перемещение в разные стороны

i режим вставки

I добавление в начало строки

a режим добавления

A добавление в конец строки

o добавить строку сразу за текущей

O добавить строку перед текущей

R писать поверх имеющегося текста

u, :u[ndo] отмена предыдущего действия (undo)

CTR-R, :red[o] отмена отмены предыдущего действия (redo)

dd вырезать (удалить) строку

cc удалить и начать редактирование

yy копировать строку

p вставить из буфера обмена

<n>d удалить n+1 строку

<n>y скопировать n+1 строку

ESC перейти в режим просмотра

DEL удалить следующий символ

:<n> перейти на строку #n

% перейти к парной скобке

:color <name> выбор цветовой схемы. цветовые схемы: /usr/local/share/vim/vim72/colors/*.vim

:pwd текущий каталог

:cd [path] перейти в другой каталог

:!команда выполнить команду - man, git, и так далее

стрелочками вверх и вниз можно авто дополнять

команды и искать по истории

/ поиск, кнопка n далее

:<n> перейти на строку #n

v + hjkl выделение текста

SHIFT + v выделить строку

CTRL + v выделение прямоугольника

y копировать

d удалить

p вставить

u к нижнему регистру

Shift+U к верхнему регистру

172,200d удалить с 172 строки по 200

1,10d удалить с 1 строки по 10

---------------------

pico - простой редактор

nano - простой редактор

^ - имеется ввиду Control

Ctrl+W - поиск

Ctrl+K - вырезать строку

Cctrl+U - вставить строку

Ctrl+X - выход

13. типы аккаунтов и виды файлов (ubuntu)

standart - обычный пользователь
administrator - имеет привилегии sudo

root - встроенная учетная запись

/home - каталог пользователей
/home/vasya - каталог пользователя vasya
/root - каталог пользователя root

/etc/passwd - файл с параметрами настроек пользователей
/etc/group - файл групп
/etc/shadow - файл с паролями

https://b14esh.com/kali/linux-passwords.html

как взаимодействуют три файла — passwd, groups и shadow. 
Файл passwd каждого пользователя содержит строку, построенную по следующему образцу:
# Строка в /etc/passwd
user_name:x:1000:1000:user_info user_name:/home/user_name:/bin/bash
Здесь user_name — это логин; 
1000 — идентификационный номер пользователя; 
1000 — идентификационный номер основной группы; 
user_info — полное имя (для электронной переписки, новостей и т. д.); 
/home/user_name — домашний каталог пользователя;
/bin/bash — используемая им оболочка.
Идентификатор группы — это уникальный номер, важный для управления правами доступа к файлам.
 
Соответствующая строка в /etc/shadow с информацией о пароле выглядит следующим образом:
# Строка в /etc/shadow
user_name:$6$9dk0$...:13479:0:99999:7:::
имя_пользователя:зашифрованный_пароль:дата_создания_пароля:кол-во_дней_для_смены_пароля:когда_нужно_сменить_пароль:через_сколько_дней_сменить_пароль:когда_пароль_будет_просрочен:
Последовательность символов после user_name: — это зашифрованный пароль. 
Если не задать эту последовательность, то в систему можно будет входить, не указывая пароль. 
Если определить вместо нее символ * или !, то вход в систему будет запрещен.

 
Номер GID из /etc/passwd должен соответствовать группе из /etc/group. 
Во многих дистрибутивах каждому обычному пользователю соответствует одноименная группа:
# Строка в /etc/group 
user_name:x:1000:
sudo:x:27:user1,user2,user3


whoami - посмотреть под какой учетной записью зашли
su username - сменить пользователя
id - покажет ID групп в которых состоит текущий пользователь
id username - покажет ID групп в которых состоит username
last - последний логин в систему, кто?
who - кто сейчас логин в систему
w - кто сейчас логин в систему и кто сейчас что делает

standart - обычный пользователь

administrator - имеет привилегии sudo

root - встроенная учетная запись

/home - каталог пользователей

/home/vasya - каталог пользователя vasya

/root - каталог пользователя root

/etc/passwd - файл с параметрами настроек пользователей

/etc/group - файл групп

/etc/shadow - файл с паролями

https://b14esh.com/kali/linux-passwords.html

как взаимодействуют три файла — passwd, groups и shadow.

Файл passwd каждого пользователя содержит строку, построенную по следующему образцу:

# Строка в /etc/passwd

user_name:x:1000:1000:user_info user_name:/home/user_name:/bin/bash

Здесь user_name — это логин;

1000 — идентификационный номер пользователя;

1000 — идентификационный номер основной группы;

user_info — полное имя (для электронной переписки, новостей и т. д.);

/home/user_name — домашний каталог пользователя;

/bin/bash — используемая им оболочка.

Идентификатор группы — это уникальный номер, важный для управления правами доступа к файлам.

Соответствующая строка в /etc/shadow с информацией о пароле выглядит следующим образом:

# Строка в /etc/shadow

user_name:$6$9dk0$...:13479:0:99999:7:::

имя_пользователя:зашифрованный_пароль:дата_создания_пароля:кол-во_дней_для_смены_пароля:когда_нужно_сменить_пароль:через_сколько_дней_сменить_пароль:когда_пароль_будет_просрочен:

Последовательность символов после user_name: — это зашифрованный пароль.

Если не задать эту последовательность, то в систему можно будет входить, не указывая пароль.

Если определить вместо нее символ * или !, то вход в систему будет запрещен.

Номер GID из /etc/passwd должен соответствовать группе из /etc/group.

Во многих дистрибутивах каждому обычному пользователю соответствует одноименная группа:

# Строка в /etc/group

user_name:x:1000:

sudo:x:27:user1,user2,user3

whoami - посмотреть под какой учетной записью зашли

su username - сменить пользователя

id - покажет ID групп в которых состоит текущий пользователь

id username - покажет ID групп в которых состоит username

last - последний логин в систему, кто?

who - кто сейчас логин в систему

w - кто сейчас логин в систему и кто сейчас что делает

14. Пользователи и группы

sudo useradd -m user1 - создать пользователя, создать для него директорию (-m)
sudo passwd user1  - установить пароль для пользователя 
/etc/skel/  - специальный каталог в котором лежат файлы для новых пользователей. Отсюда они копируются в каталог нового пользователя.
sudo touch /etc/skel/xxx.txt - например вот так создали файл xxx.txt теперь он будет появляться у всех новых пользователей
sudo userdel user1 - удалить пользователя
sudo userdel -r user1 - удалить пользователя вместе с каталогом

sudo groupadd prog - создать группу prog
sudo groupdel  prog - удалить группу prog

sudo usermod -aG prog user3 - добавить пользователя user3 в группу prog
sudo deluser user3 prog - удалить пользователя user3 из группу prog

!!! adduser - команда добавления пользователей
!!! почему то ей не пользуются

sudo useradd -m user1 - создать пользователя, создать для него директорию (-m)

sudo passwd user1 - установить пароль для пользователя

/etc/skel/ - специальный каталог в котором лежат файлы для новых пользователей. Отсюда они копируются в каталог нового пользователя.

sudo touch /etc/skel/xxx.txt - например вот так создали файл xxx.txt теперь он будет появляться у всех новых пользователей

sudo userdel user1 - удалить пользователя

sudo userdel -r user1 - удалить пользователя вместе с каталогом

sudo groupadd prog - создать группу prog

sudo groupdel prog - удалить группу prog

sudo usermod -aG prog user3 - добавить пользователя user3 в группу prog

sudo deluser user3 prog - удалить пользователя user3 из группу prog

!!! adduser - команда добавления пользователей

!!! почему то ей не пользуются

15. Права доступа и владения файлами

ls -l - покажет какие права на файл/каталог и кто владелец
ls -lah - покажет какие права на файл/каталог и кто владелец 
ls -a - покажет какие права на файл/каталог и кто владелец
ls -lh - просмотр полномочий на файлы и директории в текущей директории

Основные команды для смены владельца:
sudo chown user2 filename.txt - сменить владельца для файла filename.txt на user2
sudo chown -R user1 directory1 - назначить рекурсивно владельцем директории directory1 пользователя user1
sudo chgrp group1 file1 - сменить группу-владельца файла file1 на group1
sudo chgrp

Также chown может сменить и владельца и группу:
!!! разделителем может быть и . и : и еще что то там ...
chown user1:group1 file1 - сменить владельца и группу владельца файла file1
sudo chown pi.pi x.txt - сменить владельца и группу на pi для файла x.txt 


В файловой системе хранится информация о владельце для. каждого файла и каталога.
ls -l /usr/bin/wc -  покажет ls кто является владельцем файла права на файл его группу размер. list
chown user:group /var/www - смена владельца каталога www (вместо : можно использовать . точку ) (change owner)

Права доступа хранятся в четырех восьмеричных цифрах, каждая из которых определяет различные права доступа.
Специальная информация uid gid stiky-бит,Пользователь,Группа,Остальные

ls -l

- файл
rw- для user чтение+запись 
r-- для группы user чтение
r-- для остальных пользователей чтение
1 кол-во  копий файла(линки)
user1 пользователь 
user1 группа  
231M размер файла
May месяц создания 
1 
15:21 время
test_21398 имя файла

ls -l
drwxrwxrwx 2 pi   pi   4.0K May  1 11:36 folder1
lrwxrwxrwx 1 pi   pi           5 May  3 11:08 myl21 -> x.txt
-rw-r--r-- 1 user1   user1   231M May  1 15:21 test_21398

Типы файлов
(-)файл
(d)каталог
(c)идентификатор
(l)символьные ссылки
(b)блочные устройства
(p)именованные каналы
(s)сокеты



Численное представление:
Значение | Права                                       | Права
0        | Ничего не разрешено                         | ---
1        | Нельзя читать и писать, разрешено исполнять | --x
2        | Нельзя читать и исполнять, разрешено писать | -w-
3        | Нельзя читать, разрешено писать и исполнять | -wx
4        | Разрешено читать, нельзя писать и исполнять | r--
5        | Разрешено читать и исполнять, нельзя писать | r-x
6        | Разрешено читать и писать, нельзя исполнять | rw-
7        | Разрешено все                               | rwx


Опция     | Буква| Значение
(кто)     | u    | Пользователь (User)
(кто)     | g    | Группа (Group)
(кто)     | o    | Другие (Other)
(кто)     | a    | Все (All, ``world'')
(действие)| +    | Добавление прав
(действие)| -    | Удаление прав
(действие)| =    | Явная установка прав
(права)   | r    | Чтение (Read)
(права)   | w    | Запись (Write)
(права)   | x    | Выполнение (Execute)
(права)   | t    |Sticky бит
(права)   | s    | SUID или SGID


chmod 777 test - изменит права на файл
chmod ugo+rwx test можно так:
----------------------------
1 = t стикибит stiky-бит
4 = s установка id пользователя
2 = S установка id группы
4 = r чтение
2 = w запись
1 = x выполнение
----------------------------
чтение + запись + выполнение 1+2+4=7 rwx
chmod 700 test - пользователю дать права на все ( можно так chmod u+rwx test)
----------------------------
чтение и выполнение 4+1=5 r-x
chmod 500 test - пользователю дать права на чтение и выполнение
----------------------------
чтение r--
chmod 400 test пользователю дать права на чтение
----------------------------
выполнение --x
chmod 1 test пользователю дать права на выполнение
----------------------------
все права для всех rwxrwxrwx
chmod 777 test 
----------------------------
chmod + rwx test 
u - владелец user
g - группа group
o -  остальные owner
a - все выше перечисленные
----------------------------

chmod 0700 - drwx------  - Владелец может читать, записывать файлы в данный каталог, а также переходить в него. Все остальные пользователи  не имеют к нему доступа
chmod 0711 - drwx--x--x    -  Владелец обладает теми же правами. Все остальные могут открывать каталог, но не могут просматривать или изменять файлы в нем
chmod go+r - drwxr--r--    
chmod 0777 - drwxrwxrwx   -   Полный доступ
chmod a=rwx - drwxrwxrwx  -  Полный доступ  
chmod 0000 - Доступ полностью закрыт
chmod a-rwx - Доступ полностью закрыт
chmod ббб - Открывает права на чтение и изменение файла
chmod go-rw - Не позволяет никому, кроме самого владельца, просматривать, вносить изменения или удалять файл
chmod 644 - Только владелец может вносить изменения в файл или удалять его, но все могут его просматривать
chmod go-rwx directory1 - отобрать у группы и всех остальных все полномочия на директорию directory1.
chown user1 file1 - назначить владельцем файла file1 пользователя user1
chmod u+s /bin/binary_file - назначить SUID-бит файлу /bin/binary_file. Это даёт возможность любому пользователю запускать на выполнение файл с полномочиями владельца файла.
chmod u-s /bin/binary_file - снять SUID-бит с файла /bin/binary_file.
chmod g+s /home/public - назначить SGID-бит директории /home/public.
chmod g-s /home/public - снять SGID-бит с директории /home/public.
chmod o+t /home/public - назначить STIKY-бит директории /home/public. Позволяет удалять файлы только владельцам
chmod o-t /home/public - снять STIKY-бит с директории /home/public

umask
umask 0022 - обратная команда chmod 0022 значение по умолчанию
umask 0066 - Создает каталоги с правами доступа drwx--x--x и файлы с правами доступа -rw-------
umask 0077 - Создает каталоги с правами доступа drwx------ и файлы с правами доступа -rw-------
umask 0022 - Создает каталоги с правами доступа drwxr-xr-x и файлы с правами доступа -rw-r--r--
umask 0777 - Создает каталоги с правами доступа d--------- и файлы с правами доступа ----------

ДОП:
find / -perm -u+s - найти, начиная от корня, все файлы с выставленным SUID

lsattr
lsattr /etc/host* - отображает атрибуты /etc/host*
lsattr -aR /tmp/ | less - рекурсивно отображает все атрибуты каталога /tmp
Дефисы соответствуют 13 атрибутам ext2/ext3, которые могут быть установлены. 
Ни один из них не является отображаемым по умолчанию: а (только добавление), 
с (сжатый), d (без дампа), I (постоянный), j (регистрация данных), s (безопасное удаление), 
t (запрет слияния в конце файла), и (не удаляемый), А (без обновления atime), D (синхронные обновления каталогов), 
S (синхронные обновления) и Т (верхушка дерева каталогов). 

chattr +i whatever.iso - с помощью команды chattr вы можете изменять эти атрибуты

Стикибит t
Есть смысл устанавливать на каталоги.
Позволяет только владельцу удалять файлы из каталога.
sudo chmod o+t myfolder - добавить стикибит
sudo chmod o-t myfolder - удалить стикибит
sudo chmod 1777 myfolder - добавить стикибит
sudo chmod 0777 myfolder - удалить стикибит

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

ls -l - покажет какие права на файл/каталог и кто владелец

ls -lah - покажет какие права на файл/каталог и кто владелец

ls -a - покажет какие права на файл/каталог и кто владелец

ls -lh - просмотр полномочий на файлы и директории в текущей директории

Основные команды для смены владельца:

sudo chown user2 filename.txt - сменить владельца для файла filename.txt на user2

sudo chown -R user1 directory1 - назначить рекурсивно владельцем директории directory1 пользователя user1

sudo chgrp group1 file1 - сменить группу-владельца файла file1 на group1

sudo chgrp

Также chown может сменить и владельца и группу:

!!! разделителем может быть и . и : и еще что то там ...

chown user1:group1 file1 - сменить владельца и группу владельца файла file1

sudo chown pi.pi x.txt - сменить владельца и группу на pi для файла x.txt

В файловой системе хранится информация о владельце для. каждого файла и каталога.

ls -l /usr/bin/wc - покажет ls кто является владельцем файла права на файл его группу размер. list

chown user:group /var/www - смена владельца каталога www (вместо : можно использовать . точку ) (change owner)

Права доступа хранятся в четырех восьмеричных цифрах, каждая из которых определяет различные права доступа.

Специальная информация uid gid stiky-бит,Пользователь,Группа,Остальные

ls -l

- файл

rw- для user чтение+запись

r-- для группы user чтение

r-- для остальных пользователей чтение

1 кол-во копий файла(линки)

user1 пользователь

user1 группа

231M размер файла

May месяц создания

15:21 время

test_21398 имя файла

ls -l

drwxrwxrwx 2 pi pi 4.0K May 1 11:36 folder1

lrwxrwxrwx 1 pi pi 5 May 3 11:08 myl21 -> x.txt

-rw-r--r-- 1 user1 user1 231M May 1 15:21 test_21398

Типы файлов

(-)файл

(d)каталог

(c)идентификатор

(l)символьные ссылки

(b)блочные устройства

(p)именованные каналы

(s)сокеты

Численное представление:

Значение | Права | Права

0 | Ничего не разрешено | ---

1 | Нельзя читать и писать, разрешено исполнять | --x

2 | Нельзя читать и исполнять, разрешено писать | -w-

3 | Нельзя читать, разрешено писать и исполнять | -wx

4 | Разрешено читать, нельзя писать и исполнять | r--

5 | Разрешено читать и исполнять, нельзя писать | r-x

6 | Разрешено читать и писать, нельзя исполнять | rw-

7 | Разрешено все | rwx

Опция | Буква| Значение

(кто) | u | Пользователь (User)

(кто) | g | Группа (Group)

(кто) | o | Другие (Other)

(кто) | a | Все (All, ``world'')

(действие)| + | Добавление прав

(действие)| - | Удаление прав

(действие)| = | Явная установка прав

(права) | r | Чтение (Read)

(права) | w | Запись (Write)

(права) | x | Выполнение (Execute)

(права) | t |Sticky бит

(права) | s | SUID или SGID

chmod 777 test - изменит права на файл

chmod ugo+rwx test можно так:

----------------------------

1 = t стикибит stiky-бит

4 = s установка id пользователя

2 = S установка id группы

4 = r чтение

2 = w запись

1 = x выполнение

----------------------------

чтение + запись + выполнение 1+2+4=7 rwx

chmod 700 test - пользователю дать права на все ( можно так chmod u+rwx test)

----------------------------

чтение и выполнение 4+1=5 r-x

chmod 500 test - пользователю дать права на чтение и выполнение

----------------------------

чтение r--

chmod 400 test пользователю дать права на чтение

----------------------------

выполнение --x

chmod 1 test пользователю дать права на выполнение

----------------------------

все права для всех rwxrwxrwx

chmod 777 test

----------------------------

chmod + rwx test

u - владелец user

g - группа group

o - остальные owner

a - все выше перечисленные

----------------------------

chmod go+r - drwxr--r--

chmod 0777 - drwxrwxrwx - Полный доступ

chmod a=rwx - drwxrwxrwx - Полный доступ

chmod 0000 - Доступ полностью закрыт

chmod a-rwx - Доступ полностью закрыт

chmod ббб - Открывает права на чтение и изменение файла

chmod go-rw - Не позволяет никому, кроме самого владельца, просматривать, вносить изменения или удалять файл

chmod 644 - Только владелец может вносить изменения в файл или удалять его, но все могут его просматривать

chmod go-rwx directory1 - отобрать у группы и всех остальных все полномочия на директорию directory1.

chown user1 file1 - назначить владельцем файла file1 пользователя user1

chmod u+s /bin/binary_file - назначить SUID-бит файлу /bin/binary_file. Это даёт возможность любому пользователю запускать на выполнение файл с полномочиями владельца файла.

chmod u-s /bin/binary_file - снять SUID-бит с файла /bin/binary_file.

chmod g+s /home/public - назначить SGID-бит директории /home/public.

chmod g-s /home/public - снять SGID-бит с директории /home/public.

chmod o+t /home/public - назначить STIKY-бит директории /home/public. Позволяет удалять файлы только владельцам

chmod o-t /home/public - снять STIKY-бит с директории /home/public

umask

umask 0022 - обратная команда chmod 0022 значение по умолчанию

umask 0066 - Создает каталоги с правами доступа drwx--x--x и файлы с правами доступа -rw-------

umask 0077 - Создает каталоги с правами доступа drwx------ и файлы с правами доступа -rw-------

umask 0022 - Создает каталоги с правами доступа drwxr-xr-x и файлы с правами доступа -rw-r--r--

umask 0777 - Создает каталоги с правами доступа d--------- и файлы с правами доступа ----------

ДОП:

find / -perm -u+s - найти, начиная от корня, все файлы с выставленным SUID

lsattr

lsattr /etc/host* - отображает атрибуты /etc/host*

lsattr -aR /tmp/ | less - рекурсивно отображает все атрибуты каталога /tmp

Дефисы соответствуют 13 атрибутам ext2/ext3, которые могут быть установлены.

Ни один из них не является отображаемым по умолчанию: а (только добавление),

с (сжатый), d (без дампа), I (постоянный), j (регистрация данных), s (безопасное удаление),

t (запрет слияния в конце файла), и (не удаляемый), А (без обновления atime), D (синхронные обновления каталогов),

S (синхронные обновления) и Т (верхушка дерева каталогов).

chattr +i whatever.iso - с помощью команды chattr вы можете изменять эти атрибуты

Стикибит t

Есть смысл устанавливать на каталоги.

Позволяет только владельцу удалять файлы из каталога.

sudo chmod o+t myfolder - добавить стикибит

sudo chmod o-t myfolder - удалить стикибит

sudo chmod 1777 myfolder - добавить стикибит

sudo chmod 0777 myfolder - удалить стикибит

16. Сетевые команды

ifconfig - информация о сетевых устройствах
ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)

ip addr show  - информация о сетевых устройствах

route - информация о маршрутах
sudo route - информация о маршрутах
ip route show - информация о маршрутах

ping ya.ru - тестирование доступности хоста ya.ru ( ctrl+c прервать)
ping -c 4  ya.ru google.com  - тестирование доступности хоста ya.ru

traceroute ya.ru - покажет через какой маршрут идет пакет до ya.ru

host www.microsoft.com - покажет ip DNS и т.д.
dig www.microsoft.com - покажет ip DNS и т.д.

netstat — показывает активные сетевые соединения.
netstat -tpnl - показать tcp port listen namber(номера портов)
netstat -w 1 — количество пакетов в настоящее время.
netstat -ibt — вывод сетевых интерфейсов с разбивкой по IP адресам, отображает объём трафика, количество ошибок, коллизий
netstat -rn — отображает таблицу маршрутизации
netstat -a - перечислить все порты
netstat -at - перечислить все TCP порты
netstat -au - перечислить все UDP порты
netstat -l - перечислить все прослушиваемые порты (состоянии LISTEN)
netstat -lt - перечислить прослушиваемые TCP порты (состоянии LISTEN)
netstat -lu - перечислить прослушиваемые UDP порты (состоянии LISTEN)
netstat -lx - перечислить прослушиваемые UNIX сокеты (состоянии LISTEN)
netstat -s - показать статистику всех портов
netstat -st - показать статистику только TCP портов
netstat -su - оказать статистику только UDP портов
netstat -p - отображение PID и имени процесса в выводе netstat
netstat -an - ключ n отключает разрешение имён в выводе
netstat -c - вывод информации netstat непрерывно (как top,htop)
netstat -r - таблица маршрутизация ядра
netstat -ap | grep ssh - соответствие портов и процессов (ssh)
netstat -an | grep ':80' - соответствие портов и процессов (порт 80)
netstat -i - показать список сетевых интерфейсов
 
netstat -lnptux
-l все открытые порты (LISTEN)
-t по протоколу TCP
-u по протоколу UDP
-x по протоколу UNIX Socket
-n без резолва IP/имён
-p но с названиями процессов и PID-ами

ss - информация о соединениях
ss -s - общая информация о соединениях
ss -l - информация об ожидающих соединений сокетах
ss -lp - информация об ожидающих соединений сокетах, а также именах процессов, их использующих
ss -at - информация обо всех задействованных TCP сокетах
ss -au - информация обо всех задействованных UDP сокетах
ss -o state established '( dport = :smtp or sport = :smtp )' - информация обо всех установленных SMTP-соединениях
ss -o state established '( dport = :http or sport = :http )' - информация обо всех установленных HTTP-соединениях
ss -x src /tmp/.X11-unix/* - локальные процессы, подключённые к X-серверу
ss -tulpan - показать все

ifconfig - проверка состояния сетевых интерфейсов
ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)
ifconfig eth0 down - отключить сетевой интерфейс eth0 (команда устарела)
ifocnfig eth0 up - включить сетевой интерфейс eth0 (команда устарела)

ifdown eth0 - отключить сетевой интерфейс
ifup eth0 - включить сетевой интерфейс

ip - управление сетевыми интерфейсами (замена ifconfig)
ip help - помощь по команде ip
ip addr help - помощь
ip route help - помощь
ip tunnel help - помощь
ip addr show - получение информации о всех сетевых интерфейсах
ip a - получение информации о всех сетевых интерфейсах
ip addr show eth0 - отобразит информацию о eth0

sudo apt install open-ssh - установка ssh
sudo ewf allow 22 - разрешить порт 22
ssh name_user@name-server - подключится к серверу name-server

ipcalc -bmn 192.168.1.100/27 - расчет маски под сети хост-компьютерам с помощью  CIDR IP- адреса

dhclient eth0 - включить DHCP на сетевом интерфейсе eth0
ethtool eth0 - вывод статистики по сетевому интерфейсу eth0
hostname - вывести имя компьютера
host http://www.example.com - преобразовать домен http://www.example.org в ip-адрес и наоборот
ifconfig eth0 - вывести настройки сетевой карты eth0
ifconfig eth0 promisc -переключить интерфейс eth0 в promiscuous-режим для сбора ( сниффинг ) сетевых пакетов
ifup eth0 - включить сетевой интерфейс eth0
ifdown eth0 - отключить сетевой интерфейс eth0
ifconfig eth0 192.168.1.1 netmask 255.255.255.0 - назначить IP адрес и маску сетевому интерфейсу eth0
ip link show - вывести статус связи всех сетевых интерфейсов

iwconfig eth1 - вывести конфигурацию беспроводного сетевого интерфейса eth1
iwlist scan - сканирование и поиск беспроводных сетей и точек доступа

mii-tool eth0 - вывести состояние связи сетевого интерфейса eth0
nslookup http://www.example.com - ресольвить ( преобразовать/разрешить ) доменное имя http://www.example.org в ip-адрес и наоборот

route -n - показать  локальную таблицы маршрутизации (маршруты)
route add -net 192.168.0.0 netmask 255.255.0.0 gw 192.168.1.1 - добавить статический маршрут в сеть 192.168.0.0/16 через шлюз с ip-адресом 192.168.1.1
route add -net 0/0 gw IP_Gateway - назначить ip-адрес шлюза по умолчанию ( default gateway )
route del 0/0 gw IP_gateway - удалить ip-адрес шлюза по умолчанию ( default gateway )
netstat -tup - выводит листинг всех установленных соединений по протоколам TCP и UDP без разрешения имён в ip-адреса а так-же PID'ы и имена процессов, обслуживающих данные соединения
netstat -tupl - вывод списка соединений по протоколам TCP и UDP без разрешения имён в ip-адреса а так-же и PID'ы и имена процессов, ожидающих соединений на сетевых портах
netstat -rn - вывести таблицу маршрутизации, аналог команды route -n
echo "1" > /proc/sys/net/ipv4/ip_forward - разрешить форвардинг ( пересылку ) пакетов

tcpdump tcp port 80 - отлавливать и выводить весь трафик на TCP-порт 80 (обычно - HTTP)
whois http://www.example.com -вывести информацию о доменном имени из базы данных whois (аналог команды host)


ifconfig / route / forward / быстрая настройка сети
ifconfig eth0 inet 192.168.3.13/24
route add default gw 192.168.3.13
echo nameserver 192.168.3.1 > /etc/resolv.conf

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

ifconfig - информация о сетевых устройствах

ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)

ip addr show - информация о сетевых устройствах

route - информация о маршрутах

sudo route - информация о маршрутах

ip route show - информация о маршрутах

ping ya.ru - тестирование доступности хоста ya.ru ( ctrl+c прервать)

ping -c 4 ya.ru google.com - тестирование доступности хоста ya.ru

traceroute ya.ru - покажет через какой маршрут идет пакет до ya.ru

host www.microsoft.com - покажет ip DNS и т.д.

dig www.microsoft.com - покажет ip DNS и т.д.

netstat — показывает активные сетевые соединения.

netstat -tpnl - показать tcp port listen namber(номера портов)

netstat -w 1 — количество пакетов в настоящее время.

netstat -ibt — вывод сетевых интерфейсов с разбивкой по IP адресам, отображает объём трафика, количество ошибок, коллизий

netstat -rn — отображает таблицу маршрутизации

netstat -a - перечислить все порты

netstat -at - перечислить все TCP порты

netstat -au - перечислить все UDP порты

netstat -l - перечислить все прослушиваемые порты (состоянии LISTEN)

netstat -lt - перечислить прослушиваемые TCP порты (состоянии LISTEN)

netstat -lu - перечислить прослушиваемые UDP порты (состоянии LISTEN)

netstat -lx - перечислить прослушиваемые UNIX сокеты (состоянии LISTEN)

netstat -s - показать статистику всех портов

netstat -st - показать статистику только TCP портов

netstat -su - оказать статистику только UDP портов

netstat -p - отображение PID и имени процесса в выводе netstat

netstat -an - ключ n отключает разрешение имён в выводе

netstat -c - вывод информации netstat непрерывно (как top,htop)

netstat -r - таблица маршрутизация ядра

netstat -ap | grep ssh - соответствие портов и процессов (ssh)

netstat -an | grep ':80' - соответствие портов и процессов (порт 80)

netstat -i - показать список сетевых интерфейсов

netstat -lnptux

-l все открытые порты (LISTEN)

-t по протоколу TCP

-u по протоколу UDP

-x по протоколу UNIX Socket

-n без резолва IP/имён

-p но с названиями процессов и PID-ами

ss - информация о соединениях

ss -s - общая информация о соединениях

ss -l - информация об ожидающих соединений сокетах

ss -lp - информация об ожидающих соединений сокетах, а также именах процессов, их использующих

ss -at - информация обо всех задействованных TCP сокетах

ss -au - информация обо всех задействованных UDP сокетах

ss -o state established '( dport = :smtp or sport = :smtp )' - информация обо всех установленных SMTP-соединениях

ss -o state established '( dport = :http or sport = :http )' - информация обо всех установленных HTTP-соединениях

ss -x src /tmp/.X11-unix/* - локальные процессы, подключённые к X-серверу

ss -tulpan - показать все

ifconfig - проверка состояния сетевых интерфейсов

ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)

ifconfig eth0 down - отключить сетевой интерфейс eth0 (команда устарела)

ifocnfig eth0 up - включить сетевой интерфейс eth0 (команда устарела)

ifdown eth0 - отключить сетевой интерфейс

ifup eth0 - включить сетевой интерфейс

ip - управление сетевыми интерфейсами (замена ifconfig)

ip help - помощь по команде ip

ip addr help - помощь

ip route help - помощь

ip tunnel help - помощь

ip addr show - получение информации о всех сетевых интерфейсах

ip a - получение информации о всех сетевых интерфейсах

ip addr show eth0 - отобразит информацию о eth0

sudo apt install open-ssh - установка ssh

sudo ewf allow 22 - разрешить порт 22

ssh name_user@name-server - подключится к серверу name-server

ipcalc -bmn 192.168.1.100/27 - расчет маски под сети хост-компьютерам с помощью CIDR IP- адреса

dhclient eth0 - включить DHCP на сетевом интерфейсе eth0

ethtool eth0 - вывод статистики по сетевому интерфейсу eth0

hostname - вывести имя компьютера

host http://www.example.com - преобразовать домен http://www.example.org в ip-адрес и наоборот

ifconfig eth0 - вывести настройки сетевой карты eth0

ifconfig eth0 promisc -переключить интерфейс eth0 в promiscuous-режим для сбора ( сниффинг ) сетевых пакетов

ifup eth0 - включить сетевой интерфейс eth0

ifdown eth0 - отключить сетевой интерфейс eth0

ifconfig eth0 192.168.1.1 netmask 255.255.255.0 - назначить IP адрес и маску сетевому интерфейсу eth0

ip link show - вывести статус связи всех сетевых интерфейсов

iwconfig eth1 - вывести конфигурацию беспроводного сетевого интерфейса eth1

iwlist scan - сканирование и поиск беспроводных сетей и точек доступа

mii-tool eth0 - вывести состояние связи сетевого интерфейса eth0

nslookup http://www.example.com - ресольвить ( преобразовать/разрешить ) доменное имя http://www.example.org в ip-адрес и наоборот

route -n - показать локальную таблицы маршрутизации (маршруты)

route add -net 192.168.0.0 netmask 255.255.0.0 gw 192.168.1.1 - добавить статический маршрут в сеть 192.168.0.0/16 через шлюз с ip-адресом 192.168.1.1

route add -net 0/0 gw IP_Gateway - назначить ip-адрес шлюза по умолчанию ( default gateway )

route del 0/0 gw IP_gateway - удалить ip-адрес шлюза по умолчанию ( default gateway )

netstat -tup - выводит листинг всех установленных соединений по протоколам TCP и UDP без разрешения имён в ip-адреса а так-же PID'ы и имена процессов, обслуживающих данные соединения

netstat -tupl - вывод списка соединений по протоколам TCP и UDP без разрешения имён в ip-адреса а так-же и PID'ы и имена процессов, ожидающих соединений на сетевых портах

netstat -rn - вывести таблицу маршрутизации, аналог команды route -n

echo "1" > /proc/sys/net/ipv4/ip_forward - разрешить форвардинг ( пересылку ) пакетов

tcpdump tcp port 80 - отлавливать и выводить весь трафик на TCP-порт 80 (обычно - HTTP)

whois http://www.example.com -вывести информацию о доменном имени из базы данных whois (аналог команды host)

ifconfig / route / forward / быстрая настройка сети

ifconfig eth0 inet 192.168.3.13/24

route add default gw 192.168.3.13

echo nameserver 192.168.3.1 > /etc/resolv.conf

16.1 iptables

PACKET IN --->---PREROUTING---[ маршрутизация ]--->----FORWARD---->---POSTROUTING--->--- PACKET OUT
                         - mangle          |              - mangle          - mangle
                         - nat (dst)       |              - filter          - nat (src)
                                           |                                   |
                                           |                                   |
                                         INPUT                              OUTPUT
                                          - mangle                           - mangle
                                          - filter                           - nat (dst)
                                           |                                 - filter
                                           |                                   |
                                           `---->----[   приложение  ]---->----'

#  0     #####  1  ########   2   #  3   ######  4   #####
 
#0
Опция -t задает таблицу. Если опция упущена, то по умолчанию предполагается использование таблицы filter. 
Если предполагается использование другой таблицы, то это требуется указать явно.
 
#1
Mangle - обычно эта цепочка используется для внесения изменений в заголовок пакета, например для изменения битов TOS и пр.
Nat - эта цепочка используется для трансляции сетевых адресов (Destination Network Address Translation). 
Source Network Address Translation выполняется позднее, в другой цепочке. Любого рода фильтрация 
в этой цепочке может производиться только в исключительных случаях.
Filter - здесь производится фильтрация трафика. Помните, что все входящие пакеты, адресованные нам, 
проходят через эту цепочку, независимо от того с какого интерфейса они поступили.
 
#2
Далее, непосредственно за именем таблицы, должна стоять команда. Если спецификатора таблицы нет, 
то команда всегда должна стоять первой.
Команда определяет действие iptables, например: 
вставить правило, или добавить правило в конец цепочки, или удалить правило и т.п.
 
Список команд:
-A имя-цепочки правило (добавить правило в конец цепочки; ключ --set-counters позволяет установить счётчики пакетов и байтов)
-I имя-цепочки номер правило (вставить правило в цепочку перед правилом с указанным номером, нумерация с 1; ключ --set-counters позволяет установить счётчики пакетов и байтов)
-R имя-цепочки номер правило (заменить;
ключ --set-counters позволяет установить счётчики пакетов и байтов)
-D имя-цепочки номер (удалить правило с указанным номером, нумерация с 1)
-D имя-цепочки правило (удалить правило по текстуальному совпадению)
-C имя-цепочки пакет (тестировать прохождение пакета;
исходящий адрес, адрес назначения, протокол, интерфейс, порты задаются соответствующими ключами)
-L [имя-цепочки] (показать список правил; дополнительные ключи:
-v (вывести дополнительную информацию, в частности, счётчики)
--exact (показывать счётчики без округления до KB, MB и т.д.)
--numeric (показывать адреса и номера портов в виде чисел)
--line-numbers (выводить номера правил)
-F имя-цепочки (удалить все правила из цепочки)
-Z имя-цепочки (обнулить счетчики)
-N имя-цепочки (создать цепочку)
-X имя-цепочки (удалить пустую цепочку, на которую нет ссылок)
-P имя-цепочки действие (изменить действие по умолчанию: ACCEPT,
DROP, QUEUE, RETURN)
-E старое-имя-цепочки новое-имя-цепочки (переименовать цепочку)
 
#3
Раздел шаблон задает критерии проверки, по которым определяется подпадает ли пакет под действие этого правила или нет.
Здесь можно указать самые разные критерии - IP-адрес источника пакета или сети, сетевой интерфейс. 
IP-адрес места назначения, порт, протокол и т.д. 
Остальные параметры для фильтации можно посмотреть в справке по утилите iptables(man iptables)
 
#4
И наконец действие  указывает, какое действие должно быть выполнено при условии выполнения критериев в правиле. 
Здесь можно заставить ядро передать пакет в другую цепочку правил, 
"сбросить" пакет, выдать на источник сообщение об ошибке и т.п.
Список некоторых действий:
ACCEPT - пропустить пакет; просмотр таблицы завершается
DROP - выбросить молча; просмотр завершается не только для текущей цепочки, но и для других таблиц
REJECT - выбросить, известив отправителя (--reject-with тип-извещения)


iptables -L - вывести список правил
iptables -S - вывести список правил
iptables -L -n -v  - вывести список правил (-n не резолвить IP) (-v Отображение подробной информации)
iptables -L -n -v --line-numbers - просмотр правил с номером строки
iptables -L INPUT -n -v - просмотра INPUT
iptables -L OUTPUT -n -v --line-numbers - просмотра OUTPUT
iptables -L INPUT -n --line-numbers  - просмотр правил с номером строки в INPUT
iptables -L OUTPUT -n --line-numbers  - просмотр правил с номером строки в OUTPUT
iptables -L OUTPUT -n --line-numbers | less - просмотр правил с номером строки в OUTPUT перенаправив вывод в less
iptables -L OUTPUT -n --line-numbers | grep 8.8.8.8 - просмотр правил с номером строки в OUTPUT грепаем 8.8.8.8
iptables -F INPUT - очистка таблицы filter
iptables -F OUTPUT - очистка таблицы filter
iptables -F FORWARD - очистка таблицы filter
iptables -F - Удаление всех правил (flushing)



open firewall:
iptables -F
iptables -X
iptables -A INPUT -i lo -j ACCEPT
iptables -A INPUT -p tcp -m tcp --tcp-ﬂ ags  SYN,ACK,FIN,RST RST -m limit --limit 1/s -j ACCEPT # Небольшая защита от DoS
iptables -A INPUT -p all -m state --state  RELATED,ESTABLISHED -j ACCEPT # Разрешаем уже установленные соединения
iptables -A INPUT -i eth0 -p tcp --dport 22 -j ACCEPT # Разрешаем 22 порт
iptables -A INPUT -i eth0 -p tcp --dport 80 -j ACCEPT # Разрешаем 80 порт
iptables -A INPUT -i eth0 -p icmp -m icmp  --icmp-type 3 -j ACCEPT # Разрешаем некоторые ICMP-сообщения
iptables -A INPUT -i eth0 -p icmp -m icmp  --icmp-type 11 -j ACCEPT # Разрешаем некоторые ICMP-сообщения
iptables -A INPUT -i eth0 -p icmp -m icmp  --icmp-type 12 -j ACCEPT # Разрешаем некоторые ICMP-сообщения
iptables -t nat -A PREROUTING -p tcp --dport 3389 -i eth0 -j DNAT --to 192.168.0.100 # Проброс RDP на сервер терминалов
iptables -A FORWARD -i eth0 -d 192.168.0.100 -p tcp --dport 3389 -j ACCEPT # Проброс RDP на сервер терминалов
iptables -P INPUT DROP

forward:
iptables -t nat -A POSTROUTING -o eth1_internet -j SNAT --to-source eth2_local
echo "1" > /proc/sys/net/ipv4/ip_forward



service iptables stop - Остановка
service iptables start - Запуск
service iptables restart - Перезагрузка
service iptables save - Сохранить правила брандмауэра  (CentOS / RHEL / Fedora Linux)
iptables-save - Сохранить правила
iptables-save > /root/my.active.firewall.rules - Сохранить правила (в других дистрибутивах)

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

PACKET IN --->---PREROUTING---[ маршрутизация ]--->----FORWARD---->---POSTROUTING--->--- PACKET OUT

- mangle | - mangle - mangle

- nat (dst) | - filter - nat (src)

| |

INPUT OUTPUT

- mangle - mangle

- filter - nat (dst)

| - filter

| |

`---->----[ приложение ]---->----'

# 0 ##### 1 ######## 2 # 3 ###### 4 #####

Опция -t задает таблицу. Если опция упущена, то по умолчанию предполагается использование таблицы filter.

Если предполагается использование другой таблицы, то это требуется указать явно.

Mangle - обычно эта цепочка используется для внесения изменений в заголовок пакета, например для изменения битов TOS и пр.

Nat - эта цепочка используется для трансляции сетевых адресов (Destination Network Address Translation).

Source Network Address Translation выполняется позднее, в другой цепочке. Любого рода фильтрация

в этой цепочке может производиться только в исключительных случаях.

Filter - здесь производится фильтрация трафика. Помните, что все входящие пакеты, адресованные нам,

проходят через эту цепочку, независимо от того с какого интерфейса они поступили.

Далее, непосредственно за именем таблицы, должна стоять команда. Если спецификатора таблицы нет,

то команда всегда должна стоять первой.

Команда определяет действие iptables, например:

вставить правило, или добавить правило в конец цепочки, или удалить правило и т.п.

Список команд:

-A имя-цепочки правило (добавить правило в конец цепочки; ключ --set-counters позволяет установить счётчики пакетов и байтов)

-I имя-цепочки номер правило (вставить правило в цепочку перед правилом с указанным номером, нумерация с 1; ключ --set-counters позволяет установить счётчики пакетов и байтов)

-R имя-цепочки номер правило (заменить;

ключ --set-counters позволяет установить счётчики пакетов и байтов)

-D имя-цепочки номер (удалить правило с указанным номером, нумерация с 1)

-D имя-цепочки правило (удалить правило по текстуальному совпадению)

-C имя-цепочки пакет (тестировать прохождение пакета;

исходящий адрес, адрес назначения, протокол, интерфейс, порты задаются соответствующими ключами)

-L [имя-цепочки] (показать список правил; дополнительные ключи:

-v (вывести дополнительную информацию, в частности, счётчики)

--exact (показывать счётчики без округления до KB, MB и т.д.)

--numeric (показывать адреса и номера портов в виде чисел)

--line-numbers (выводить номера правил)

-F имя-цепочки (удалить все правила из цепочки)

-Z имя-цепочки (обнулить счетчики)

-N имя-цепочки (создать цепочку)

-X имя-цепочки (удалить пустую цепочку, на которую нет ссылок)

-P имя-цепочки действие (изменить действие по умолчанию: ACCEPT,

DROP, QUEUE, RETURN)

-E старое-имя-цепочки новое-имя-цепочки (переименовать цепочку)

Раздел шаблон задает критерии проверки, по которым определяется подпадает ли пакет под действие этого правила или нет.

Здесь можно указать самые разные критерии - IP-адрес источника пакета или сети, сетевой интерфейс.

IP-адрес места назначения, порт, протокол и т.д.

Остальные параметры для фильтации можно посмотреть в справке по утилите iptables(man iptables)

И наконец действие указывает, какое действие должно быть выполнено при условии выполнения критериев в правиле.

Здесь можно заставить ядро передать пакет в другую цепочку правил,

"сбросить" пакет, выдать на источник сообщение об ошибке и т.п.

Список некоторых действий:

ACCEPT - пропустить пакет; просмотр таблицы завершается

DROP - выбросить молча; просмотр завершается не только для текущей цепочки, но и для других таблиц

REJECT - выбросить, известив отправителя (--reject-with тип-извещения)

iptables -L - вывести список правил

iptables -S - вывести список правил

iptables -L -n -v - вывести список правил (-n не резолвить IP) (-v Отображение подробной информации)

iptables -L -n -v --line-numbers - просмотр правил с номером строки

iptables -L INPUT -n -v - просмотра INPUT

iptables -L OUTPUT -n -v --line-numbers - просмотра OUTPUT

iptables -L INPUT -n --line-numbers - просмотр правил с номером строки в INPUT

iptables -L OUTPUT -n --line-numbers - просмотр правил с номером строки в OUTPUT

iptables -L OUTPUT -n --line-numbers | less - просмотр правил с номером строки в OUTPUT перенаправив вывод в less

iptables -L OUTPUT -n --line-numbers | grep 8.8.8.8 - просмотр правил с номером строки в OUTPUT грепаем 8.8.8.8

iptables -F INPUT - очистка таблицы filter

iptables -F OUTPUT - очистка таблицы filter

iptables -F FORWARD - очистка таблицы filter

iptables -F - Удаление всех правил (flushing)

open firewall:

iptables -F

iptables -X

iptables -A INPUT -i lo -j ACCEPT

iptables -A INPUT -p tcp -m tcp --tcp-ﬂ ags SYN,ACK,FIN,RST RST -m limit --limit 1/s -j ACCEPT # Небольшая защита от DoS

iptables -A INPUT -p all -m state --state RELATED,ESTABLISHED -j ACCEPT # Разрешаем уже установленные соединения

iptables -A INPUT -i eth0 -p tcp --dport 22 -j ACCEPT # Разрешаем 22 порт

iptables -A INPUT -i eth0 -p tcp --dport 80 -j ACCEPT # Разрешаем 80 порт

iptables -A INPUT -i eth0 -p icmp -m icmp --icmp-type 3 -j ACCEPT # Разрешаем некоторые ICMP-сообщения

iptables -A INPUT -i eth0 -p icmp -m icmp --icmp-type 11 -j ACCEPT # Разрешаем некоторые ICMP-сообщения

iptables -A INPUT -i eth0 -p icmp -m icmp --icmp-type 12 -j ACCEPT # Разрешаем некоторые ICMP-сообщения

iptables -t nat -A PREROUTING -p tcp --dport 3389 -i eth0 -j DNAT --to 192.168.0.100 # Проброс RDP на сервер терминалов

iptables -A FORWARD -i eth0 -d 192.168.0.100 -p tcp --dport 3389 -j ACCEPT # Проброс RDP на сервер терминалов

iptables -P INPUT DROP

forward:

iptables -t nat -A POSTROUTING -o eth1_internet -j SNAT --to-source eth2_local

echo "1" > /proc/sys/net/ipv4/ip_forward

service iptables stop - Остановка

service iptables start - Запуск

service iptables restart - Перезагрузка

service iptables save - Сохранить правила брандмауэра (CentOS / RHEL / Fedora Linux)

iptables-save - Сохранить правила

iptables-save > /root/my.active.firewall.rules - Сохранить правила (в других дистрибутивах)

17. Скачивание файлов wget

wget -r -l 10 -k http://example.org/ Скопировать весь сайт целиком
wget --user=login --password=password ftp://ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP
wget --continue --recursive --level=1 http://www.vereskmed.ru/music/album_1/ - Ну вот для примера простая команда для скачивания всего первого альбома 
wget ftp://login:password@ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP
wget ftp://myftpserver/имя.abc
wget -c ftp://myftpserver/имя.abc
wget -t 20 --retry-connrefused http://mydownloadserver/имя.iso
wget -p -k -E -H http://mysite.com/site.html
wget -r -l 4 -p -E -k http://mysite.com

wget -r -l 10 -k http://example.org/ Скопировать весь сайт целиком

wget --user=login --password=password ftp://ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP

wget --continue --recursive --level=1 http://www.vereskmed.ru/music/album_1/ - Ну вот для примера простая команда для скачивания всего первого альбома

wget ftp://login:password@ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP

wget ftp://myftpserver/имя.abc

wget -c ftp://myftpserver/имя.abc

wget -t 20 --retry-connrefused http://mydownloadserver/имя.iso

wget -p -k -E -H http://mysite.com/site.html

wget -r -l 4 -p -E -k http://mysite.com

18. Установка и удаление программ APT (Debian, Ubuntu)

whereis - поможет в поиске установленных программ, пакетов
whereis ssh - найти файлы ssh
/etc/apt/sources.list - тут список репозиториев


apt-get install --reinstall proga - переустановка программы
apt-get remove --purge proga - удаление месте с конфигурациями
apt-get check - проверяет состояние зависимостей в системе.
apt-get -f install - Попытка привести систему в замкнутый, логичный вид
apt-get dist-upgrade - модернизировать систему
apt-get update - поиск обновлений
apt-get autoclean - удаляет не полностью загруженные или еще не установленные пакеты
apt-get clean - удаляет из папки /var/cache/apt/archives все кэшированные пакеты для освобождения места на диске
 
apt-cache show пакет - показывает сводку на указанный пакет
apt-cache search <ключевое слово> - выполняет поиск по ключевому слову в базе данных программных пакетов (нечувствителен к регистру).
apt-cache stats - выводит статистику по всем установленным пакетам
apt-cache depends - выводит взаимозависимости программного пакета (установленного или нет)
apt-cache pkgnames - выводит список всех установленных пакетов
 
apt-key adv --keyserver mame_server --recv-keys  12345678 - команда запросит ключ 12345678 с сервера ключей
apt-key list - отображает ключи gpg, известные APT
 
apt-config -V - выводит информацию о версиях установленных приложений APT
 
add-apt-repository идентификатор_РРА - добавления репозитория
add-apt-repository ppa:tualatrix/ppa - добавления репозитория
 
aptitude  install rar unrar p7zip-full - установка rar unrar 7zip
aptitude update - обновления индексов репозиториев 
aptitude safe-upgrade - установки всех доступных обновлений

 
Очистка кэшированных пакетов
----------------------------
apt-get clean
find /var/cache/apt/ -name \*.deb
----------------------------
 
apt-get remove mpt-status убираем ошибку на виртуалке связанную с raid

gpg
---
gpg --keyserver wwwkeys.us.pgp.net --recv-keys ключ
gpg --armor --export ключ | apt-key add -
apt-get update
---

dpkg
----
dpkg -l - получить список установленных пакетов
dpkg -l namepacket - выводит информацию о заданном DEB файле
dpkg -L namepacket - покажет все файлы пакета
dpkg -i namepacket - установить пакет (-i install)
dpkg -r -P namepaket  - удалить пакет (-r remove -P purge)
dpkg -с <файл DEB> - отображает файлы, установленные с помощью заданного DEB-файла 
                     (файл DEB должен быть указан в таком виде: путь к файлу/имя файла)
dpkg -p namepacket - отображает информацию о заданном программном пакете
dkpg -S namepacket - Показывает пакеты, в которых был найден файл с заданным именем. 
                     Результатом выполнения команды может 
                     быть путь к файлу или просто его имя.
dpkg -x file_DEB /folder - Распаковывает файлы, содержащиеся в DEB-файле, 
                           в указанную папку. После завершения операция 
                           восстановит права доступа к указанной папке.
----


dpkg-reconfigure — программа для перенастройки установленного любого пакета
----------------
dpkg-reconfigure tzdata - изменить временную зону
dpkg-reconfigure exim4-config - перенастроить пакет exim4
dpkg-reconfigure locales - настроить локали (язык)
dpkg-reconfigure console-data - настройки раскладки клавиатуры
dpkg-reconfigure gdm - выбор DM (display manaager) в ubuntu
----------------

cpio — конвертация пакетов rpm в формат cpio (формат cpio работает во всех linux)
----
rpm2cpio name_packet.rpm > name.cpio
----

whereis - поможет в поиске установленных программ, пакетов

whereis ssh - найти файлы ssh

/etc/apt/sources.list - тут список репозиториев

apt-get install --reinstall proga - переустановка программы

apt-get remove --purge proga - удаление месте с конфигурациями

apt-get check - проверяет состояние зависимостей в системе.

apt-get -f install - Попытка привести систему в замкнутый, логичный вид

apt-get dist-upgrade - модернизировать систему

apt-get update - поиск обновлений

apt-get autoclean - удаляет не полностью загруженные или еще не установленные пакеты

apt-get clean - удаляет из папки /var/cache/apt/archives все кэшированные пакеты для освобождения места на диске

apt-cache show пакет - показывает сводку на указанный пакет

apt-cache search <ключевое слово> - выполняет поиск по ключевому слову в базе данных программных пакетов (нечувствителен к регистру).

apt-cache stats - выводит статистику по всем установленным пакетам

apt-cache depends - выводит взаимозависимости программного пакета (установленного или нет)

apt-cache pkgnames - выводит список всех установленных пакетов

apt-key adv --keyserver mame_server --recv-keys 12345678 - команда запросит ключ 12345678 с сервера ключей

apt-key list - отображает ключи gpg, известные APT

apt-config -V - выводит информацию о версиях установленных приложений APT

add-apt-repository идентификатор_РРА - добавления репозитория

add-apt-repository ppa:tualatrix/ppa - добавления репозитория

aptitude install rar unrar p7zip-full - установка rar unrar 7zip

aptitude update - обновления индексов репозиториев

aptitude safe-upgrade - установки всех доступных обновлений

Очистка кэшированных пакетов

----------------------------

apt-get clean

find /var/cache/apt/ -name \*.deb

----------------------------

apt-get remove mpt-status убираем ошибку на виртуалке связанную с raid

gpg

---

gpg --keyserver wwwkeys.us.pgp.net --recv-keys ключ

gpg --armor --export ключ | apt-key add -

apt-get update

---

dpkg

----

dpkg -l - получить список установленных пакетов

dpkg -l namepacket - выводит информацию о заданном DEB файле

dpkg -L namepacket - покажет все файлы пакета

dpkg -i namepacket - установить пакет (-i install)

dpkg -r -P namepaket - удалить пакет (-r remove -P purge)

dpkg -с <файл DEB> - отображает файлы, установленные с помощью заданного DEB-файла

(файл DEB должен быть указан в таком виде: путь к файлу/имя файла)

dpkg -p namepacket - отображает информацию о заданном программном пакете

dkpg -S namepacket - Показывает пакеты, в которых был найден файл с заданным именем.

Результатом выполнения команды может

быть путь к файлу или просто его имя.

dpkg -x file_DEB /folder - Распаковывает файлы, содержащиеся в DEB-файле,

в указанную папку. После завершения операция

восстановит права доступа к указанной папке.

----

dpkg-reconfigure — программа для перенастройки установленного любого пакета

----------------

dpkg-reconfigure tzdata - изменить временную зону

dpkg-reconfigure exim4-config - перенастроить пакет exim4

dpkg-reconfigure locales - настроить локали (язык)

dpkg-reconfigure console-data - настройки раскладки клавиатуры

dpkg-reconfigure gdm - выбор DM (display manaager) в ubuntu

----------------

cpio — конвертация пакетов rpm в формат cpio (формат cpio работает во всех linux)

----

rpm2cpio name_packet.rpm > name.cpio

----

19. Установка и удаление программ RPM (RedHat, CentOS)

whereis - поможет в поиске установленных программ, пакетов
whereis ssh - найти файлы ssh
-----------------------------------------
yum update - получить список обновлений 
yum upgrade - обновить пакеты 
yum -y install epel-release - добавить репозиторий epel
yum provides "*bin/top" - найти пакет, который содержит файл
-----------------------------------------
tail /var/log/yum.log - просмотреть лог
-----------------------------------------
yum help - отображение команд и опций
-----------------------------------------
yum list - список названий пакетов из репозиторий
yum list available - список всех доступных пакетов
yum list installed - список всех установленных пакетов
yum list installed httpd - установлен ли указанный пакет
yum list all - список установленных и доступных пакетов
yum list kernel - список пакетов, относящихся к ядру
-----------------------------------------
yum info httpd - отображение информации о пакете
yum deplist httpd - список зависимостей и необходимых пакетов
yum provides "*bin/top" - найти пакет, который содержит файл
yum search httpd - поиск пакета по имени и описанию
-----------------------------------------
yum updateinfo list security - получить информацию о доступных обновлениях безопасности
-----------------------------------------
yum grouplist - вывести список групп
yum groupinfo "Basic Web Server" - вывести описание и содержимое группы 
yum groupinstall "Basic Web Server" - установка группы пакетов «Basic Web Server»
yum groupremove "Basic Web Server" - удаление группы
-----------------------------------------
yum check-update - проверка на доступные обновления
-----------------------------------------
yum repolist - список подключенных репозиториев
yum repoinfo epel - информация об определенном репозитории
yum repo-pkgs epel list - информация о пакетах в указанном репозитории
yum repo-pkgs reponame install - установить все пакеты из репозитория
yum repo-pkgs reponame remove - удалить пакеты установленные из репозитория
-----------------------------------------
yum makecache - создать кэш
yum check - проверить локальную базу rpm (поддерживаются параметры dependencies, duplicates, obsoletes, provides)
yum history list - просмотр yum истории (вывод списка транзакций)
yum history info 9 - просмотр информации определенной транзакции (установленные пакеты, установленные зависимости)
-----------------------------------------
yum clean packages - удалить пакеты сохраненные в кэше
yum clean all - удалить все пакеты и метаданные
-----------------------------------------
yum update - обновить все пакеты
yum update-to - обновить до определенной версии
-----------------------------------------
yum localinstall httpd.rpm - установить из локальной директории
yum install httpd.rpm - установить из локальной директории 
yum localinstall http://server/repo/httpd.rpm - установить с http
-----------------------------------------
yum downgrade - откатиться к предыдущей версии пакета
yum reinstall httpd - переустановка пакета (восстановление удаленных файлов)
yum autoremove - удаление ненужных более пакетов
-----------------------------------------
createrepo - создание локальных репозиториев (createrepo ставится отдельно)
yum-cron - установка обновлений по расписанию (yum-cron устанавливается отдельно)
-----------------------------------------
yum -y install epel-release - добавление репозитория EPEL
-----------------------------------------
rpm -ivh package.rpm - установить пакет с выводом сообщений и прогресс-бара
rpm -ivh --nodeps package.rpm - установить пакет с выводом сообщений и прогресс-бара без контроля зависимостей
rpm -U package.rpm - обновить пакет без изменений конфигурационных файлов, в случае отсутствия пакета, он будет установлен
rpm -F package.rpm - обновить пакет только если он установлен
rpm -e package_name.rpm - удалить пакет
rpm -qa - отобразить список всех пакетов, установленных в системе
rpm -qa | grep httpd - среди всех пакетов, установленных в системе, найти пакет содержащий в своём имени "httpd"
rpm -qi package_name - вывести информацию о конкрентном пакете
rpm -qg "System Environment/Daemons" - отобразить пакеты входящие в группу пакетов
rpm -ql package_name - вывести список файлов, входящих в пакет
rpm -qc package_name - вывести список конфигурационных файлов, входящих в пакет
rpm -q package_name --whatrequires - вывести список пакетов, необходимых для установки конкретного пакета по зависимостям
rpm -q package_name --whatprovides - show capability provided by a rpm package
rpm -q package_name --scripts - отобразит скрипты, запускаемые при установке/удалении пакета
rpm -q package_name --changelog - вывести историю ревизий пакета
rpm -qf /etc/httpd/conf/httpd.conf - проверить какому пакету принадлежит указанный файл. Указывать следует полный путь и имя файла.
rpm -qp package.rpm -l - отображает список файлов, входящих в пакет, но ещё не установленных в систему
rpm --import /media/cdrom/RPM-GPG-KEY - ипортировать публичный ключ цифровой подписи
rpm --checksig package.rpm - проверит подпись пакета
rpm -qa gpg-pubkey - проверить целостность установленного содержимого пакета
rpm -V package_name - проверить размер, полномочия, тип, владельца, группу, MD5-сумму и дату последнего изменеия пакета
rpm -Va - проверить содержимое всех пакеты установленные в систему. Выполняйте с осторожностью!
rpm -Vp package.rpm - проверить пакет, который ещё не установлен в систему
rpm2cpio package.rpm | cpio --extract --make-directories *bin* - извлечь из пакета файлы содержащие в своём имени bin
rpm -ivh /usr/src/redhat/RPMS/`arch`/package.rpm - установить пакет, собранный из исходных кодов
rpmbuild --rebuild package_name.src.rpm - собрать пакет из исходных кодов

whereis - поможет в поиске установленных программ, пакетов

whereis ssh - найти файлы ssh

-----------------------------------------

yum update - получить список обновлений

yum upgrade - обновить пакеты

yum -y install epel-release - добавить репозиторий epel

yum provides "*bin/top" - найти пакет, который содержит файл

-----------------------------------------

tail /var/log/yum.log - просмотреть лог

-----------------------------------------

yum help - отображение команд и опций

-----------------------------------------

yum list - список названий пакетов из репозиторий

yum list available - список всех доступных пакетов

yum list installed - список всех установленных пакетов

yum list installed httpd - установлен ли указанный пакет

yum list all - список установленных и доступных пакетов

yum list kernel - список пакетов, относящихся к ядру

-----------------------------------------

yum info httpd - отображение информации о пакете

yum deplist httpd - список зависимостей и необходимых пакетов

yum provides "*bin/top" - найти пакет, который содержит файл

yum search httpd - поиск пакета по имени и описанию

-----------------------------------------

yum updateinfo list security - получить информацию о доступных обновлениях безопасности

-----------------------------------------

yum grouplist - вывести список групп

yum groupinfo "Basic Web Server" - вывести описание и содержимое группы

yum groupinstall "Basic Web Server" - установка группы пакетов «Basic Web Server»

yum groupremove "Basic Web Server" - удаление группы

-----------------------------------------

yum check-update - проверка на доступные обновления

-----------------------------------------

yum repolist - список подключенных репозиториев

yum repoinfo epel - информация об определенном репозитории

yum repo-pkgs epel list - информация о пакетах в указанном репозитории

yum repo-pkgs reponame install - установить все пакеты из репозитория

yum repo-pkgs reponame remove - удалить пакеты установленные из репозитория

-----------------------------------------

yum makecache - создать кэш

yum check - проверить локальную базу rpm (поддерживаются параметры dependencies, duplicates, obsoletes, provides)

yum history list - просмотр yum истории (вывод списка транзакций)

yum history info 9 - просмотр информации определенной транзакции (установленные пакеты, установленные зависимости)

-----------------------------------------

yum clean packages - удалить пакеты сохраненные в кэше

yum clean all - удалить все пакеты и метаданные

-----------------------------------------

yum update - обновить все пакеты

yum update-to - обновить до определенной версии

-----------------------------------------

yum localinstall httpd.rpm - установить из локальной директории

yum install httpd.rpm - установить из локальной директории

yum localinstall http://server/repo/httpd.rpm - установить с http

-----------------------------------------

yum downgrade - откатиться к предыдущей версии пакета

yum reinstall httpd - переустановка пакета (восстановление удаленных файлов)

yum autoremove - удаление ненужных более пакетов

-----------------------------------------

createrepo - создание локальных репозиториев (createrepo ставится отдельно)

yum-cron - установка обновлений по расписанию (yum-cron устанавливается отдельно)

-----------------------------------------

yum -y install epel-release - добавление репозитория EPEL

-----------------------------------------

rpm -ivh package.rpm - установить пакет с выводом сообщений и прогресс-бара

rpm -ivh --nodeps package.rpm - установить пакет с выводом сообщений и прогресс-бара без контроля зависимостей

rpm -U package.rpm - обновить пакет без изменений конфигурационных файлов, в случае отсутствия пакета, он будет установлен

rpm -F package.rpm - обновить пакет только если он установлен

rpm -e package_name.rpm - удалить пакет

rpm -qa - отобразить список всех пакетов, установленных в системе

rpm -qa | grep httpd - среди всех пакетов, установленных в системе, найти пакет содержащий в своём имени "httpd"

rpm -qi package_name - вывести информацию о конкрентном пакете

rpm -qg "System Environment/Daemons" - отобразить пакеты входящие в группу пакетов

rpm -ql package_name - вывести список файлов, входящих в пакет

rpm -qc package_name - вывести список конфигурационных файлов, входящих в пакет

rpm -q package_name --whatrequires - вывести список пакетов, необходимых для установки конкретного пакета по зависимостям

rpm -q package_name --whatprovides - show capability provided by a rpm package

rpm -q package_name --scripts - отобразит скрипты, запускаемые при установке/удалении пакета

rpm -q package_name --changelog - вывести историю ревизий пакета

rpm -qf /etc/httpd/conf/httpd.conf - проверить какому пакету принадлежит указанный файл. Указывать следует полный путь и имя файла.

rpm -qp package.rpm -l - отображает список файлов, входящих в пакет, но ещё не установленных в систему

rpm --import /media/cdrom/RPM-GPG-KEY - ипортировать публичный ключ цифровой подписи

rpm --checksig package.rpm - проверит подпись пакета

rpm -qa gpg-pubkey - проверить целостность установленного содержимого пакета

rpm -V package_name - проверить размер, полномочия, тип, владельца, группу, MD5-сумму и дату последнего изменеия пакета

rpm -Va - проверить содержимое всех пакеты установленные в систему. Выполняйте с осторожностью!

rpm -Vp package.rpm - проверить пакет, который ещё не установлен в систему

rpm2cpio package.rpm | cpio --extract --make-directories *bin* - извлечь из пакета файлы содержащие в своём имени bin

rpm -ivh /usr/src/redhat/RPMS/`arch`/package.rpm - установить пакет, собранный из исходных кодов

rpmbuild --rebuild package_name.src.rpm - собрать пакет из исходных кодов

20. Bash скрипты переменные \ параметры \ запуск программ

https://www.youtube.com/watch?v=qZjnr66Cys4&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=19

myscript1.sh
-------
#!/bin/bash
echo "hellow this message this script"
echo "Lets, show files this folder"
ls
echo "ls /etc/"
ls /etc/
#echo "run xterm"
#xterm &
echo "Done"
-------

sudo chmod u+x myscript1.sh - для того чтобы выполнить скрипт нужно дать права на исполнение +x
!!! bash myscipt.sh - права то нужны, но если натравить bash то он будет выполнен


script2.sh
----------
#!/bin/bash
mycomputer="SUPERPC"
myOS=`uname -a`

echo "This script name is $0"
echo "privet $1"
echo "Hello $2"

num1=50
num2=45
summa=$((num1+num2))
echo "$num1 + $num2 = $summa"

myhost=`hostname`
mygtw="8.8.8.8"

ping -c 4 $myhost
ping -c 4 $mygtw

echo -n "This is done..."
echo "Realy done"
----------

`name_comman` - передать команду - ` это скобка возле кнопки тильда ~
$0 - это зарезервированное значение имя самого файла скрипта
$1 - это первый параметр
$2 - это второй параметр
$3...... - далее параметр

bash myscript2.sh - права то нужны, но если натравить bash то он будет выполнен
sudo chmod u+x myscript2.sh  - для того чтобы выполнить скрипт нужно дать права на исполнение +x

bash myscript2.sh vasya kolia 



script3.sh
----------
#!/bin/bash
echo "superping $0"
echo "Нужно передать параметры!!"
echo "Первый параметр что пингуем ping   "
echo "Второй что traceroute"
echo "Третий  что host "
echo ">>>>>>>>>>>>>>>>Первый пошол $1"
ping -c 4 $1
echo ">>>>>>>>>>>>>>>>Воторй пошол $2"
traceroute  $2
echo ">>>>>>>>>>>>>>>>Третий пошол $3"
host $3
echo ">>>>>>>>>>>>>>>>Done"
----------

https://www.youtube.com/watch?v=qZjnr66Cys4&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=19

myscript1.sh

-------

#!/bin/bash

echo "hellow this message this script"

echo "Lets, show files this folder"

echo "ls /etc/"

ls /etc/

#echo "run xterm"

#xterm &

echo "Done"

-------

sudo chmod u+x myscript1.sh - для того чтобы выполнить скрипт нужно дать права на исполнение +x

!!! bash myscipt.sh - права то нужны, но если натравить bash то он будет выполнен

script2.sh

----------

#!/bin/bash

mycomputer="SUPERPC"

myOS=`uname -a`

echo "This script name is $0"

echo "privet $1"

echo "Hello $2"

num1=50

num2=45

summa=$((num1+num2))

echo "$num1 + $num2 = $summa"

myhost=`hostname`

mygtw="8.8.8.8"

ping -c 4 $myhost

ping -c 4 $mygtw

echo -n "This is done..."

echo "Realy done"

----------

`name_comman` - передать команду - ` это скобка возле кнопки тильда ~

$0 - это зарезервированное значение имя самого файла скрипта

$1 - это первый параметр

$2 - это второй параметр

$3...... - далее параметр

bash myscript2.sh - права то нужны, но если натравить bash то он будет выполнен

sudo chmod u+x myscript2.sh - для того чтобы выполнить скрипт нужно дать права на исполнение +x

bash myscript2.sh vasya kolia

script3.sh

----------

#!/bin/bash

echo "superping $0"

echo "Нужно передать параметры!!"

echo "Первый параметр что пингуем ping "

echo "Второй что traceroute"

echo "Третий что host "

echo ">>>>>>>>>>>>>>>>Первый пошол $1"

ping -c 4 $1

echo ">>>>>>>>>>>>>>>>Воторй пошол $2"

traceroute $2

echo ">>>>>>>>>>>>>>>>Третий пошол $3"

host $3

echo ">>>>>>>>>>>>>>>>Done"

----------

21. Скрипты bash \ if \ else \ case \ for \ while

https://www.youtube.com/watch?v=s6OOqqrdzFI&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=20
myscript4.sh
------------
#!/bin/bash

if [ "$1" == "Vasya" ]; then
                       echo "Privet $1"
elif [ "$1" == "Trump" ]; then
                          echo "Hello $1"
else echo "Zadarova $1"
fi

x=$2

echo "Starting CASE selection......."
case $x in
        1) echo "This is one";;
        [2-9]) echo "Two-Nine";;
        "Petya") echo  "Privet $x";;
        *) echo "Parammetr Unknown, sorry!"
esac
------------

chmod a+x script4.sh

./myscript4.sh
./myscript4.sh Trump
./myscript4.sh Trump 3
./myscript4.sh Trump 7777 
./myscript4.sh Trump Petya
./myscript4.sh Vasya Petya
./myscript4.sh 333333333 8888888



myscript5.sh
------------
#!/bin/bash
read -p "Enter something Vasya, Trump, Petya, * : " y

if [ "$y" == "Vasya" ]; then
                       echo "Privet $y"
elif [ "$y" == "Trump" ]; then
                          echo "Hello $y"
else echo "Zadarova $y"
fi

echo "Please enter something"
echo "1, 2-9, Petya, *"
read x



echo "Starting CASE selection......."
case $x in
        1) echo "This is one";;
        [2-9]) echo "Two-Nine";;
        "Petya") echo  "Privet $x";;
        *) echo "Parammetr Unknown, sorry!"
esac
------------
chmod a+x myscript5.sh





myscript6.sh
------------
#!/bin/bash
COUNTER=0
while [ $COUNTER -lt 10 ]; do
      echo "Current counter is $COUNTER"
      COUNTER=$(($COUNTER+1))
      # let COUNTER=COUNTER+1
      # let COUNTER+=1
done


for myfile in ls *.txt; do
       cat $myfile
done


for x in {1..10}; do
         echo "X = $x"
done


for (( i=1; i<=10; i++)); do
       echo "Nimber I = $i"
done

------------

-lt - меньше 
chmod a+x myscript6.sh



myscript7.sh
------------

summa=0

myFunction()
{

     echo  "This is text from function"
     echo  "first parameter is: $1"
     echo  "Second parametr is: $2"
     summa=$(($1+$2))

}



myFunction 50 10
echo "Summa = $summa"


------------

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

https://www.youtube.com/watch?v=s6OOqqrdzFI&list=PLg5SS_4L6LYuE4z-3BgLYGkZrs-cF4Tep&index=20

myscript4.sh

------------

#!/bin/bash

if [ "$1" == "Vasya" ]; then

echo "Privet $1"

elif [ "$1" == "Trump" ]; then

echo "Hello $1"

else echo "Zadarova $1"

x=$2

echo "Starting CASE selection......."

case $x in

1) echo "This is one";;

[2-9]) echo "Two-Nine";;

"Petya") echo "Privet $x";;

*) echo "Parammetr Unknown, sorry!"

esac

------------

chmod a+x script4.sh

./myscript4.sh

./myscript4.sh Trump

./myscript4.sh Trump 3

./myscript4.sh Trump 7777

./myscript4.sh Trump Petya

./myscript4.sh Vasya Petya

./myscript4.sh 333333333 8888888

myscript5.sh

------------

#!/bin/bash

read -p "Enter something Vasya, Trump, Petya, * : " y

if [ "$y" == "Vasya" ]; then

echo "Privet $y"

elif [ "$y" == "Trump" ]; then

echo "Hello $y"

else echo "Zadarova $y"

echo "Please enter something"

echo "1, 2-9, Petya, *"

read x

echo "Starting CASE selection......."

case $x in

1) echo "This is one";;

[2-9]) echo "Two-Nine";;

"Petya") echo "Privet $x";;

*) echo "Parammetr Unknown, sorry!"

esac

------------

chmod a+x myscript5.sh

myscript6.sh

------------

#!/bin/bash

COUNTER=0

while [ $COUNTER -lt 10 ]; do

echo "Current counter is $COUNTER"

COUNTER=$(($COUNTER+1))

# let COUNTER=COUNTER+1

# let COUNTER+=1

done

for myfile in ls *.txt; do

cat $myfile

done

for x in {1..10}; do

echo "X = $x"

done

for (( i=1; i<=10; i++)); do

echo "Nimber I = $i"

done

------------

-lt - меньше

chmod a+x myscript6.sh

myscript7.sh

------------

summa=0

myFunction()

{

echo "This is text from function"

echo "first parameter is: $1"

echo "Second parametr is: $2"

summa=$(($1+$2))

}

myFunction 50 10

echo "Summa = $summa"

------------

Конспект: Linux

Конспект: Linux 2017

Автор записи Автор: Evgeny Yakovlev
Дата записи 2017/08/19

Начало:

Все есть файл

1	Все есть файл

Железо:

echo 10000000 > /proc/sys/fs/file-max - увеличить количество открываемых фалов для пользователя (будет работать до перезагрузки)

/sys - система/железо/шины/устройства 
/proc - процессы в запущенной системе
/dev - устройства
cat /proc/interrupts - прерывания
cat /proc/cpuinfo - процессор

ls -  /sys/block - информация о блочных устройствах
ls /dev/ - покажет все устройства


lsmod - драйверы используемые железом
lspci - все что на шине pci
lspcmcia - все о pcmcia (ноутбучное железо)
lsusb - все о usb
lshal (больше не работает)
lshw - все о железе

blkid - показать ID дисков

echo 10000000 > /proc/sys/fs/file-max - увеличить количество открываемых фалов для пользователя (будет работать до перезагрузки)

/sys - система/железо/шины/устройства

/proc - процессы в запущенной системе

/dev - устройства

cat /proc/interrupts - прерывания

cat /proc/cpuinfo - процессор

ls - /sys/block - информация о блочных устройствах

ls /dev/ - покажет все устройства

lsmod - драйверы используемые железом

lspci - все что на шине pci

lspcmcia - все о pcmcia (ноутбучное железо)

lsusb - все о usb

lshal (больше не работает)

lshw - все о железе

blkid - показать ID дисков

Модули ядра:

lsmod - инфо о модулях (т.е. драйверы)
modinfo - информация о конкретном модуле 
rmmod - удалить модуль
lnsmod - установка модуля
modprobe - деликатное удаление или добавление модулей

lsmod - инфо о модулях (т.е. драйверы)

modinfo - информация о конкретном модуле

rmmod - удалить модуль

lnsmod - установка модуля

modprobe - деликатное удаление или добавление модулей

Загрузка системы:

BIOS/UEFI -> MBR/GPT -> LILO/GRUB -> Linux Kernel -> init
запуск системы -> первая стадия загрузки -> вторая стадия загрузки -> запуск ядра ОС -> Пользовательская среда
grub - ESC
grub2 - SHIFT
dmesg - выводит параметры загрузки ядра и текущие события 
cat /var/log/dmesg - лог загрузки

BIOS/UEFI -> MBR/GPT -> LILO/GRUB -> Linux Kernel -> init

запуск системы -> первая стадия загрузки -> вторая стадия загрузки -> запуск ядра ОС -> Пользовательская среда

grub - ESC

grub2 - SHIFT

dmesg - выводит параметры загрузки ядра и текущие события

cat /var/log/dmesg - лог загрузки

Загрузка системы init:

init - в стиле  SysV - старый  
файл инициализации /etc/inittab (строка id:level:initdefault) 
/etc/rc.d - скрипты загрузки 
/etc/init.d/ - демоны
service start/stop/reload/restart- демоны
init - управление инициализацией
telinit - управление инициализации (работает везде)
wall - послать сообщение пользователям 
halt - отключение (потом потребуется вырубить пк вручную)
reboot - перезагрузка 
shutdown  - выключение пк (питание вырубится)
runlevel - уровень загрузки 
                         
                         
                         
init - в стиле systemd - современный (продвинутое логирование и параллельная загрузка демонов)
.unit - модули которыми оперирует systemd 
.servie - службы
.mount - точки монтирования 
.device - устройства
.socket - сокеты
/usr/lib/systemd - директория с юнитами по умолчанию
/etc/systemd - директория с управлением юнитами
systemctl list-units - показать все сервисы
systemctl list-unit-files - выведет список всех сервисов + состояние 
systemctl status crond - посмотреть состояние  демона crond
systemctl status apache2 - посмотреть состояние  сервиса apache2 
runlevel - покажет уровень загрузки
systemctl list-units --type=target - вывести список состояний runlevel
systemctl isolate reboot.targert - выполнить reboot.targert (перезагрузка)
systemctl set-default -f multi-user.targert - выставить runlevel multi-user.targert
systemctl unit|reboot|poweroff|service name_unit - выполнить что-то с unit 
journalctl - программа с работай логами systemctl
journalctl  UID=0 - вывести лог пользователя UID=0 (root)




init - в стиле upstart - современный  используется в ubuntu
Service - демоны ( перезапускаются)
Tasks - задачи ( не перезапускаются)
/etc/init  - конфиги
/etc/init/rc - конфиги
initctl - ультелита управления загрузками
runlevel - уровень загрузки 
status ufw - статус сервиса ufw
stop ufw - остановить сервис ufw
start ufw - запуск сервиса ufw 
initctl chow-config  - показать конфиг загрузки 
initctl check-config  - проверка конфига 


pstree - узнать какой init и дерево процессов

init - в стиле SysV - старый

файл инициализации /etc/inittab (строка id:level:initdefault)

/etc/rc.d - скрипты загрузки

/etc/init.d/ - демоны

service start/stop/reload/restart- демоны

init - управление инициализацией

telinit - управление инициализации (работает везде)

wall - послать сообщение пользователям

halt - отключение (потом потребуется вырубить пк вручную)

reboot - перезагрузка

shutdown - выключение пк (питание вырубится)

runlevel - уровень загрузки

init - в стиле systemd - современный (продвинутое логирование и параллельная загрузка демонов)

.unit - модули которыми оперирует systemd

.servie - службы

.mount - точки монтирования

.device - устройства

.socket - сокеты

/usr/lib/systemd - директория с юнитами по умолчанию

/etc/systemd - директория с управлением юнитами

systemctl list-units - показать все сервисы

systemctl list-unit-files - выведет список всех сервисов + состояние

systemctl status crond - посмотреть состояние демона crond

systemctl status apache2 - посмотреть состояние сервиса apache2

runlevel - покажет уровень загрузки

systemctl list-units --type=target - вывести список состояний runlevel

systemctl isolate reboot.targert - выполнить reboot.targert (перезагрузка)

systemctl set-default -f multi-user.targert - выставить runlevel multi-user.targert

systemctl unit|reboot|poweroff|service name_unit - выполнить что-то с unit

journalctl - программа с работай логами systemctl

journalctl UID=0 - вывести лог пользователя UID=0 (root)

init - в стиле upstart - современный используется в ubuntu

Service - демоны ( перезапускаются)

Tasks - задачи ( не перезапускаются)

/etc/init - конфиги

/etc/init/rc - конфиги

initctl - ультелита управления загрузками

runlevel - уровень загрузки

status ufw - статус сервиса ufw

stop ufw - остановить сервис ufw

start ufw - запуск сервиса ufw

initctl chow-config - показать конфиг загрузки

initctl check-config - проверка конфига

pstree - узнать какой init и дерево процессов

Ядра и runlevel

ls /boot -ядра 
ls /boot/grub - загрузчик 

runlevel - уровни выполнения
0 - выключение 
1 - однопользовательский
2 - debian/ubuntu + GUI
3 - redhat/suse
4 - wildcard (все что хоти)
5 - redhat/suse GUI
6 - перезагрузка 

init 0 - выключить систему

ls /boot -ядра

ls /boot/grub - загрузчик

runlevel - уровни выполнения

0 - выключение

1 - однопользовательский

2 - debian/ubuntu + GUI

3 - redhat/suse

4 - wildcard (все что хоти)

5 - redhat/suse GUI

6 - перезагрузка

init 0 - выключить систему

Жесткие диски и файловые системы:

fdisk - таблица разделов
mkfs - создание FS
mkswap - создание свопа
swapon -s  - посмотреть включение свопы
swapon - включить своп
swapoff - отключить своп
/etc/fstab - конфиг  точек монтирования 
1 по 4 - основные разделы ( 3 основные и может быть 1 расширенный)
c 5 и далее - логические ( разделы в расширенном разделе)
fdisk - l - показать диски и разделы
blkid - id дисков

LVM
fdisk t e8 - LVM
pvdisplay  -  физические тома 
lvdisplay - логические тома 
vgdisplay - показал volume groupe 
pvcreate /dev/sdb1 - создаем физ тома
pvcreate /dev/sdb1 - создаем физ тома
vgcreate vg_NAME /dev/sdb1 /dev/sdb2 - создаем виртуальную группу vg_NAME для партиций sdb1  и sdb2
mkfs.ext4 /dev/vg_NAME/lvm2
mkfs.ext4 /dev/vg_NAME/lvm1
lvresize -L 4G /dev/vg_NAME/lvm2

fdisk - таблица разделов

mkfs - создание FS

mkswap - создание свопа

swapon -s - посмотреть включение свопы

swapon - включить своп

swapoff - отключить своп

/etc/fstab - конфиг точек монтирования

1 по 4 - основные разделы ( 3 основные и может быть 1 расширенный)

c 5 и далее - логические ( разделы в расширенном разделе)

fdisk - l - показать диски и разделы

blkid - id дисков

LVM

fdisk t e8 - LVM

pvdisplay - физические тома

lvdisplay - логические тома

vgdisplay - показал volume groupe

pvcreate /dev/sdb1 - создаем физ тома

vgcreate vg_NAME /dev/sdb1 /dev/sdb2 - создаем виртуальную группу vg_NAME для партиций sdb1 и sdb2

mkfs.ext4 /dev/vg_NAME/lvm2

mkfs.ext4 /dev/vg_NAME/lvm1

lvresize -L 4G /dev/vg_NAME/lvm2

Загрузчики

dd if=/dev/sda of /root/backboot.back bs=512 count=1 - сохраняем загрузочный сектор backboot.back

lilo
apt=get install lilo
liloconfig - создать конфигурационный файл и настроить загрузку
nano /etc/lilo.conf - открыть на редактирование конфиг файл лило
lilo - после запуска добавится загрузка

grub
/boot/grub/ - файлы конфигурации
/boot/grub/menu.lst - конфиг файл 

grub2
grub-install /dev/sda - установить загрузчик
grub-install --version - версия grub
cat /etc/grub/grub.cfg - конфиг редактировать не льзя
nano /etc/default/grub - настройки grub2
/etc/grub.d - скрипты загрузки

dd if=/dev/sda of /root/backboot.back bs=512 count=1 - сохраняем загрузочный сектор backboot.back

lilo

apt=get install lilo

liloconfig - создать конфигурационный файл и настроить загрузку

nano /etc/lilo.conf - открыть на редактирование конфиг файл лило

lilo - после запуска добавится загрузка

grub

/boot/grub/ - файлы конфигурации

/boot/grub/menu.lst - конфиг файл

grub2

grub-install /dev/sda - установить загрузчик

grub-install --version - версия grub

cat /etc/grub/grub.cfg - конфиг редактировать не льзя

nano /etc/default/grub - настройки grub2

/etc/grub.d - скрипты загрузки

Библиотеки

статические - всегда загружаются в оперативную память для каждой программы
динамические - запускаются когда нужны и могут делится между программами (т.е. 2 программы могут использовать одну библиотеку)

/lib - каталог библиотек
/usr/lib - каталог библиотек
/etc/ld.so.conf - конфиг отвечает за расположение библиотек
/etc/ld.so.conf.d/ - конфиги  библиотек
/etc/ld.so.cache - кеш файл используемых библиотек
ldconfig - обновить кеш используемых библиотек
ldd /bin/ls - покажет какие использует библиотеки программа /bin/ls 
export LD_LIBRARY_PATH=/opt/soft/lib после ldconfig - для подгруздки сторонних библиотек

статические - всегда загружаются в оперативную память для каждой программы

динамические - запускаются когда нужны и могут делится между программами (т.е. 2 программы могут использовать одну библиотеку)

/lib - каталог библиотек

/usr/lib - каталог библиотек

/etc/ld.so.conf - конфиг отвечает за расположение библиотек

/etc/ld.so.conf.d/ - конфиги библиотек

/etc/ld.so.cache - кеш файл используемых библиотек

ldconfig - обновить кеш используемых библиотек

ldd /bin/ls - покажет какие использует библиотеки программа /bin/ls

export LD_LIBRARY_PATH=/opt/soft/lib после ldconfig - для подгруздки сторонних библиотек

Работа с пакетами debian DEB

dpkg 
dpkg --help - помощь
dpkg -l - показать все пакеты 
dpkg -s firefox  - статус firefox 
dpkg -p firefox  - подробная информации
dpkg -S firefox - в каких пакета встречается firefox 
dpkg -S /bin/ls - в каких пакетах встречается ls
dpkg -I /home/name.deb - информация о пакете name.deb
dpkg -i /home/name.deb - установить пакет name.deb
dpkg -r name_packet - удалить пакет
dpkg -s name_packet - посмотреть статус пакета name_packet
dpkg-reconfigure name_packet - пере конфигурация пакетов name_packet 
dpkg-reconfigure tzdatda -  переконфигурировать пакет tzdata (временная зона)
/etc/dpkg/dpkg.cfg - конфиг
/var/log/dpkg.log - логи 

APT
apt-get 
apt-get --help
apt-get update - обновить список репозиториев
apt-get upgrade - обновить пакеты 
apt-get install gmail-notify - установка пакета gmail-notify
apt-get remove  gmail-notify - удаление пакета gmail-notify
apt-get autoremove - удалить все ненужные пакеты
apt-cache --help
apt-cache search gmail-notify - найти программу gmail-notify
apt-cache show gmail-notify - показать информацию о пакете gmail-notify
apt-cache depend gmail-notify - посмотреть от кого зависит пакета gmail-notify
apt-cache rdepend gmail-notify - посмотреть кто зависит gmail-notify

aptitude 
aptitude --help 

nano /etc/apt/sources.list - список репозиториев 
restricted - частично свободные  
universe  - управляются сообществом 
multivers - не свободное
main - стандартные

dpkg

dpkg --help - помощь

dpkg -l - показать все пакеты

dpkg -s firefox - статус firefox

dpkg -p firefox - подробная информации

dpkg -S firefox - в каких пакета встречается firefox

dpkg -S /bin/ls - в каких пакетах встречается ls

dpkg -I /home/name.deb - информация о пакете name.deb

dpkg -i /home/name.deb - установить пакет name.deb

dpkg -r name_packet - удалить пакет

dpkg -s name_packet - посмотреть статус пакета name_packet

dpkg-reconfigure name_packet - пере конфигурация пакетов name_packet

dpkg-reconfigure tzdatda - переконфигурировать пакет tzdata (временная зона)

/etc/dpkg/dpkg.cfg - конфиг

/var/log/dpkg.log - логи

APT

apt-get

apt-get --help

apt-get update - обновить список репозиториев

apt-get upgrade - обновить пакеты

apt-get install gmail-notify - установка пакета gmail-notify

apt-get remove gmail-notify - удаление пакета gmail-notify

apt-get autoremove - удалить все ненужные пакеты

apt-cache --help

apt-cache search gmail-notify - найти программу gmail-notify

apt-cache show gmail-notify - показать информацию о пакете gmail-notify

apt-cache depend gmail-notify - посмотреть от кого зависит пакета gmail-notify

apt-cache rdepend gmail-notify - посмотреть кто зависит gmail-notify

aptitude

aptitude --help

nano /etc/apt/sources.list - список репозиториев

restricted - частично свободные

universe - управляются сообществом

multivers - не свободное

main - стандартные

Работа с пакетами redhat / CentOS RPM

RPM
rpm - стандартная программа управления пакетами RedHat, CentOS
rpm --help
rpm -iv name_packet.rpm - установка пакета 
rpm -e name_packet - удалить пакет
rpm -K name_packet.rpm - проверить ключ пакета  
rpm -Vv name_packet - проверка пакетов name_packet (выведет список файлов и т.д.)также в случаи нарушения или редактирования покажет нарушения целостности (слева будет S.5....T.)
rpm -q name_packet - проверка версии name_packet
rpm -qi name_packet - выведет больше информации name_packet
rpm -qd name_packet - покажет где документация  name_packet
rpm -qa name_packet - покажет где установлены все пакеты, пакета name_packet

rpm2cpio - ультелита для распаковки rpm пакетов для других систем управления пакетами
rpm2cpio name_packet.rpm > name_packet.cpio - преобразуем пакет
less name_packet.cpio - можем посмотреть содержимое пакета 

YUM
yum --help
yum install name_packet - установка пакета  name_packet
yum remove name_packet - удаление пакета name_packet
/etc/yum.repos.d/ - каталог с файлами репозиториев 
yum upgrade - обновление пакетов
yumdownloader - ультелита для скачивания пакетов в папку. 
yum search name_packet - поиск пакетов name_packet

RPM

rpm - стандартная программа управления пакетами RedHat, CentOS

rpm --help

rpm -iv name_packet.rpm - установка пакета

rpm -e name_packet - удалить пакет

rpm -K name_packet.rpm - проверить ключ пакета

rpm -Vv name_packet - проверка пакетов name_packet (выведет список файлов и т.д.)также в случаи нарушения или редактирования покажет нарушения целостности (слева будет S.5....T.)

rpm -q name_packet - проверка версии name_packet

rpm -qi name_packet - выведет больше информации name_packet

rpm -qd name_packet - покажет где документация name_packet

rpm -qa name_packet - покажет где установлены все пакеты, пакета name_packet

rpm2cpio - ультелита для распаковки rpm пакетов для других систем управления пакетами

rpm2cpio name_packet.rpm > name_packet.cpio - преобразуем пакет

less name_packet.cpio - можем посмотреть содержимое пакета

YUM

yum --help

yum install name_packet - установка пакета name_packet

yum remove name_packet - удаление пакета name_packet

/etc/yum.repos.d/ - каталог с файлами репозиториев

yum upgrade - обновление пакетов

yumdownloader - ультелита для скачивания пакетов в папку.

yum search name_packet - поиск пакетов name_packet

Работа в командной строке

/bin/bash - шелл по умолчанию
/etc/profile - настройки для всех профилей
/home/username/.profile - настройка профиля для пользователя username
/home/username/.bashrc - настройки оснастки bash у пользователя username
cat /etc/password - посмотреть какой шелл используется у пользователей
cat - вывод содержимого файла в консоль
cd - переход в каталог 
ls - вывод содержимого каталога
echo - вывод текста в консоль
echo Hello; ls; echo Bye - выведет Hello , выполнит команду ls, выведет Bye (для bash  знак ";" новая строка  )
touch - обновление времени редактирования файла или создать пустой файл
file - справка по файлу  
whatis - справка по названию
history - вывод истории команд
env - вывод переменных среды
pwd - текущий каталог 
export - задание переменной
unset - отключение переменной 
uname - выведет Linux
uname -a - покажет версию ядра и дистрибутив

Создание своей переменной 
ABC=123 - создаем значение 
export ABC - добавляем переменную
env - убедится что переменная добавилась
echo $ABC - показать значение переменной
unset ABC - отменить переменную

Добавление в существующую переменную
PATCH=$PATH:. - добавить к переменно patch текущий каталог (.)

Каталоги
~ - домашний каталог
~- - ссылка на предыдущую рабочею папку
. - ссылка  на текущую папку
.. - ссылка на папку, расположенную над текущей

Механизмы подстановки
? - любой символ
* - любое кол-во любых символов (в том числе ни одного), но не*-файлы!
** - любые файлы и каталоги, в том числе из всех подкаталогов
[abc] - один из символов указанный в скобках (диапазон) (применяют при поиске)
ls [1-3].txt - покажет файлы 1.txt 2.txt 3.txt 
{1,2,3,4} - один из символов указанный (последовательно) (применяют при создании)
touch {1,2,3}.txt - создаст  три файла 1.txt 2.txt 3.txt
[a-f] - символ из указанного диапазона
[!abc] - любые символы, кроме тех, что указаны в скобках

man -k http - найти мануалы по http

Работа с текстовыми патоками
файлы не трогаются все выводится на экран.
cat - выводит содержимое файлов и может склеивать файлы
cut - выводит содержимое на экран вырезая не нужные символы
expand - выводит на экран преобразует  символы табуляции в пробелы 
unexpad - преобразует пробелы в TAB
fmt - убирает переносы строки
fmt -w 5 - выведет на строке не больше 5 символов
head - покажет начала файла 10 строк 
head -n 3 - покажет первые 3 троки
tail - покажет конец файла  10 строк
od - конвертация файлов  ( по умолчанию 8код)
join - объединяет строчки файлов по общему полю
less - читать файл
nl - нумерует строки 
paste - объединяет строки файлов 
pr - подготавливает и показывает как будет выглядить печать 
sed - замена слов, букв и т.д. в файле
sort - сортировка слов 
split - разбивание фалов (строки, байты и т.д.)
tr - переводит и удаляет символы
uniq - ищет дубли в файле, покажет дубли, 
wc - показывает кол символов, слов, строк


Основные операции с файлами
cp
mv
ls
rm
mkdir
touch
find 
dd
gzip
bzip2
xz
tar
cpio - двоичный архиватор
ls | cpio -o > archiv.cpio - вот так архивируем 
cd extract | cpio -id < archiv.cpio - распаковка

/bin/bash - шелл по умолчанию

/etc/profile - настройки для всех профилей

/home/username/.profile - настройка профиля для пользователя username

/home/username/.bashrc - настройки оснастки bash у пользователя username

cat /etc/password - посмотреть какой шелл используется у пользователей

cat - вывод содержимого файла в консоль

cd - переход в каталог

ls - вывод содержимого каталога

echo - вывод текста в консоль

echo Hello; ls; echo Bye - выведет Hello , выполнит команду ls, выведет Bye (для bash знак ";" новая строка )

touch - обновление времени редактирования файла или создать пустой файл

file - справка по файлу

whatis - справка по названию

history - вывод истории команд

env - вывод переменных среды

pwd - текущий каталог

export - задание переменной

unset - отключение переменной

uname - выведет Linux

uname -a - покажет версию ядра и дистрибутив

Создание своей переменной

ABC=123 - создаем значение

export ABC - добавляем переменную

env - убедится что переменная добавилась

echo $ABC - показать значение переменной

unset ABC - отменить переменную

Добавление в существующую переменную

PATCH=$PATH:. - добавить к переменно patch текущий каталог (.)

Каталоги

~ - домашний каталог

~- - ссылка на предыдущую рабочею папку

. - ссылка на текущую папку

.. - ссылка на папку, расположенную над текущей

Механизмы подстановки

? - любой символ

* - любое кол-во любых символов (в том числе ни одного), но не*-файлы!

** - любые файлы и каталоги, в том числе из всех подкаталогов

[abc] - один из символов указанный в скобках (диапазон) (применяют при поиске)

ls [1-3].txt - покажет файлы 1.txt 2.txt 3.txt

{1,2,3,4} - один из символов указанный (последовательно) (применяют при создании)

touch {1,2,3}.txt - создаст три файла 1.txt 2.txt 3.txt

[a-f] - символ из указанного диапазона

[!abc] - любые символы, кроме тех, что указаны в скобках

man -k http - найти мануалы по http

Работа с текстовыми патоками

файлы не трогаются все выводится на экран.

cat - выводит содержимое файлов и может склеивать файлы

cut - выводит содержимое на экран вырезая не нужные символы

expand - выводит на экран преобразует символы табуляции в пробелы

unexpad - преобразует пробелы в TAB

fmt - убирает переносы строки

fmt -w 5 - выведет на строке не больше 5 символов

head - покажет начала файла 10 строк

head -n 3 - покажет первые 3 троки

tail - покажет конец файла 10 строк

od - конвертация файлов ( по умолчанию 8код)

join - объединяет строчки файлов по общему полю

less - читать файл

nl - нумерует строки

paste - объединяет строки файлов

pr - подготавливает и показывает как будет выглядить печать

sed - замена слов, букв и т.д. в файле

sort - сортировка слов

split - разбивание фалов (строки, байты и т.д.)

tr - переводит и удаляет символы

uniq - ищет дубли в файле, покажет дубли,

wc - показывает кол символов, слов, строк

Основные операции с файлами

mkdir

touch

find

gzip

bzip2

tar

cpio - двоичный архиватор

ls | cpio -o > archiv.cpio - вот так архивируем

cd extract | cpio -id < archiv.cpio - распаковка

Конспект: Linux

Конспект: admin linux cmd script auto / то еще подолее

Автор записи Автор: Evgeny Yakovlev
Дата записи 2012/06/08

00. Клавиши переключения между консолями и графическим режимом

<Ctrl>+<Alt>+<Fn> (n от 1 до 6) Переключение из графического режима в консоль с номером n
<Alt>+<Fn> (n от 1 до 6) Переключение между консолями
<Alt>+<F7> Переключение из консоли в графический режим

Решетка (#) означает, что команда должна быть выполнена от имени пользователя root. 
Если перед командой ничего не указано или же указан символ доллара ($), команду можно выполнить от имени обычного пользователя.

<Ctrl>+<Alt>+<Fn> (n от 1 до 6) Переключение из графического режима в консоль с номером n

<Alt>+<Fn> (n от 1 до 6) Переключение между консолями

<Alt>+<F7> Переключение из консоли в графический режим

Решетка (#) означает, что команда должна быть выполнена от имени пользователя root.

Если перед командой ничего не указано или же указан символ доллара ($), команду можно выполнить от имени обычного пользователя.

01. Команды poweroff, halt, reboot, shutdown

Для выхода из консоли (чтобы ею никто не воспользовался во время вашего отсутствия) предусмотрена команда logout, она же команда exit.
Для перезагрузки компьютера существует команда reboot. 
Кроме нее вы можете использовать еще две команды — halt и poweroff:
- команда halt завершает работу системы, но не выключает питание. 
Вы увидите сообщение System is halted, свидетельствующее о возможности выключения питания. 
Эта команда предназначена для старых компьютеров, не поддерживающих расширенное управление питанием
- команда poweroff завершает работу системы и выключает ее питание.
Самая "продвинутая" команда — shutdown — позволяет завершить работу и перезагрузить систему в назначенное время. 
Предположим, что вы хотите уйти пораньше, но компьютер нужно выключить ровно в 19:30 (вдруг некоторые пользователи задержались на работе, а вы выключите сервер, — некрасиво получится). 
Вот тут-то вам и поможет команда shutdown:
# shutdown -h 19:30 [сообщение]


Сообщение [сообщение] можно и не указывать, все равно Windows-пользователи его не увидят.
Если нужно завершить работу системы прямо сейчас, вместо времени укажите now:
# shutdown -h now
Для перезагрузки системы есть опция –r:
# shutdown -r now

Для выхода из консоли (чтобы ею никто не воспользовался во время вашего отсутствия) предусмотрена команда logout, она же команда exit.

Для перезагрузки компьютера существует команда reboot.

Кроме нее вы можете использовать еще две команды — halt и poweroff:

- команда halt завершает работу системы, но не выключает питание.

Вы увидите сообщение System is halted, свидетельствующее о возможности выключения питания.

Эта команда предназначена для старых компьютеров, не поддерживающих расширенное управление питанием

- команда poweroff завершает работу системы и выключает ее питание.

Самая "продвинутая" команда — shutdown — позволяет завершить работу и перезагрузить систему в назначенное время.

Предположим, что вы хотите уйти пораньше, но компьютер нужно выключить ровно в 19:30 (вдруг некоторые пользователи задержались на работе, а вы выключите сервер, — некрасиво получится).

Вот тут-то вам и поможет команда shutdown:

# shutdown -h 19:30 [сообщение]

Сообщение [сообщение] можно и не указывать, все равно Windows-пользователи его не увидят.

Если нужно завершить работу системы прямо сейчас, вместо времени укажите now:

# shutdown -h now

Для перезагрузки системы есть опция –r:

# shutdown -r now

01. Оболочка csh

Оболочка csh (C Shell) по умолчанию используется в FreeBSD.
Разработка csh началась еще в первых версиях BSD (Linux будет создан лет через 15). 
Тогда в институте Беркли начали создавать новую оболочку (csh), потому что не захотели мириться с ограничениями sh.
Внутренний синтаксис csh очень напоминает язык программирования C, поэтому он должен был понравиться программистам (а в то время все пользователи компьютеров являлись программистами). 
Хотя сами программисты отмечали, что синтаксис не очень удобен, даже несмотря на то, что он похож на C.
По сравнению с sh, у csh есть множество преимуществ: она умеет управлять заданиями, хранит историю ранее введенных команд, а также у csh есть сценарии, 
которые выполняются при входе пользователя (запуске оболочки) и при выходе пользователя (когда пользователь вводит команду exit). 
В то время у sh не было таких сценариев, которые оказались очень удобными.
С точки зрения обычного использования оболочки (а не программирования) csh тоже была на высоте.
В последних версиях FreeBSD и Linux вместо csh используется ее усовершенствованная версия — tcsh, а файл /bin/csh — это просто ссылка на /bin/tcsh.

Оболочка csh (C Shell) по умолчанию используется в FreeBSD.

Разработка csh началась еще в первых версиях BSD (Linux будет создан лет через 15).

Тогда в институте Беркли начали создавать новую оболочку (csh), потому что не захотели мириться с ограничениями sh.

Внутренний синтаксис csh очень напоминает язык программирования C, поэтому он должен был понравиться программистам (а в то время все пользователи компьютеров являлись программистами).

Хотя сами программисты отмечали, что синтаксис не очень удобен, даже несмотря на то, что он похож на C.

По сравнению с sh, у csh есть множество преимуществ: она умеет управлять заданиями, хранит историю ранее введенных команд, а также у csh есть сценарии,

которые выполняются при входе пользователя (запуске оболочки) и при выходе пользователя (когда пользователь вводит команду exit).

В то время у sh не было таких сценариев, которые оказались очень удобными.

С точки зрения обычного использования оболочки (а не программирования) csh тоже была на высоте.

В последних версиях FreeBSD и Linux вместо csh используется ее усовершенствованная версия — tcsh, а файл /bin/csh — это просто ссылка на /bin/tcsh.

02. Оболочка ksh

Не хочется делать экскурс в историю UNIX, но пару слов сказать все же придется.
Изначально система UNIX появилась в лабораториях компании AT&T, позже возникли версии UNIX института Беркли (операционная система называлась BSD).
Так уж сложилось исторически, что AT&T и институт Беркли постоянно конкурировали между собой. Как только в Беркли разработали оболочку csh, 
в AT&T принялись создавать собственную оболочку, которая получила название ksh (Korn Shell) — по имени разработчика Дэвида Корна (David Korn).
Оболочка ksh по функциям похожа на csh: есть поддержка управления заданиями, история команд, позволяет назначать командам псевдонимы, 
а также создавать конфигурационные файлы для под оболочек.
Несмотря на то что оболочка была разработана в 1986 году, она до сих пор используется в некоторых версиях UNIX по умолчанию, 
а также устанавливается по умолчанию во всех дистрибутивах Linux (но не используется по умолчанию).
Правда, изначально ksh — это коммерческий продукт, поэтому в FreeBSD и Linux используется не ksh, а ее бесплатная версия — pdksh, 
но для краткости исполнимый файл называется ksh.
Начинающим пользователям ksh не понравится (лучше использовать bash) — она слишком неудобна в использовании, зато у нее довольно развитый синтаксис внутреннего языка, 
что придется по вкусу программистам.

Не хочется делать экскурс в историю UNIX, но пару слов сказать все же придется.

Изначально система UNIX появилась в лабораториях компании AT&T, позже возникли версии UNIX института Беркли (операционная система называлась BSD).

Так уж сложилось исторически, что AT&T и институт Беркли постоянно конкурировали между собой. Как только в Беркли разработали оболочку csh,

в AT&T принялись создавать собственную оболочку, которая получила название ksh (Korn Shell) — по имени разработчика Дэвида Корна (David Korn).

Оболочка ksh по функциям похожа на csh: есть поддержка управления заданиями, история команд, позволяет назначать командам псевдонимы,

а также создавать конфигурационные файлы для под оболочек.

Несмотря на то что оболочка была разработана в 1986 году, она до сих пор используется в некоторых версиях UNIX по умолчанию,

а также устанавливается по умолчанию во всех дистрибутивах Linux (но не используется по умолчанию).

Правда, изначально ksh — это коммерческий продукт, поэтому в FreeBSD и Linux используется не ksh, а ее бесплатная версия — pdksh,

но для краткости исполнимый файл называется ksh.

Начинающим пользователям ksh не понравится (лучше использовать bash) — она слишком неудобна в использовании, зато у нее довольно развитый синтаксис внутреннего языка,

что придется по вкусу программистам.

03. Оболочка bash

Командный интерпретатор bash (Bourne Again Shell) был разработан фондом свободного программного обеспечения (Free Software Foundation, FSF). 
За основу была взята оболочка sh. 
Оболочка стала очень популярной и сейчас используется по умолчанию во всех дистрибутивах Linux.
Оболочка bash может использоваться также и для запуска сценариев sh, поэтому sh во многих системах уже не устанавливается, а файл /bin/sh — это ссылка на /bin/bash.
С точки зрения пользователей bash намного удобнее, чем ksh. 
Вы можете легко редактировать командную строку, просматривать историю команд, создавать псевдонимы команд, 
создавать переменные окружения и использовать их в собственных сценариях. 
Как и в csh, в bash есть сценарии, которые вызываются при запуске оболочки и при выходе из нее.
Синтаксис bash довольно прост, поэтому бóльшая часть сценариев, разрабатываемых в Linux, пишется именно на bash.

Командный интерпретатор bash (Bourne Again Shell) был разработан фондом свободного программного обеспечения (Free Software Foundation, FSF).

За основу была взята оболочка sh.

Оболочка стала очень популярной и сейчас используется по умолчанию во всех дистрибутивах Linux.

Оболочка bash может использоваться также и для запуска сценариев sh, поэтому sh во многих системах уже не устанавливается, а файл /bin/sh — это ссылка на /bin/bash.

С точки зрения пользователей bash намного удобнее, чем ksh.

Вы можете легко редактировать командную строку, просматривать историю команд, создавать псевдонимы команд,

создавать переменные окружения и использовать их в собственных сценариях.

Как и в csh, в bash есть сценарии, которые вызываются при запуске оболочки и при выходе из нее.

Синтаксис bash довольно прост, поэтому бóльшая часть сценариев, разрабатываемых в Linux, пишется именно на bash.

04. Оболочка zsh

Оболочки bash и tcsh (современная версия csh) будут рассмотрены в части III, оболочка ksh используется редко. 
Поэтому сейчас мы поближе познакомимся с оболочкой zsh, которая становится все более популярной.
До знакомства с zsh я считал самой удобной оболочку bash. Однако это не так.
Что же удобного в zsh? 
Во-первых, навигация. 
В bash для перехода в каталог
/dir/subdir1/subdir2 нужно ввести команду:
cd /dir/subdir1/subdir2

Можно использовать авто дополнение bash — вводить начальные символы каталога и нажимать клавишу <Tab>. 
Это будет выглядеть примерно так:
cd /dir/sub [Tab]/subdi [Tab]
В zsh можно ввести:
/d/s/s
Затем нажать клавишу <Tab> — вы перейдете в нужный каталог. 

Например, для перехода в /etc/sysconfig/network, нужно ввести /e/s/n и нажать клавишу <Tab>.

Кстати, команда cd уже не нужна.

Еще один трюк. 
Предположим, у нас есть каталог files, а в нем — каталоги
f1 и f2. Внутри каждого каталога f* есть каталоги source и last. 
То есть структура каталогов будет примерно такой:
/files/f1/sources/last
/files/f2/sources/last
Пусть мы находимся в каталоге /files/f1/sources/last, для перехода в каталог /files/f2/sources/last введите команду:
cd 1 2

Но одной лишь навигацией возможности zsh не ограничиваются. 
Можно, например, использовать вот такое перенаправление:
< /var/log/messages
Оболочка запустит программу, указанную в переменной $PAGER. 
В большинстве случаев это аналогично команде:
cat /var/log/messages | less

Все возможности zsh в этой главе мы рассматривать не будем — их намного больше, чем вам кажется. 
Если вы заинтересовались, то прочитайте следующие страницы:
http://opennet.ru/base/dev/zsh_intro.txt.html
http://habrahabr.ru/blogs/linux/82537/

Оболочки bash и tcsh (современная версия csh) будут рассмотрены в части III, оболочка ksh используется редко.

Поэтому сейчас мы поближе познакомимся с оболочкой zsh, которая становится все более популярной.

До знакомства с zsh я считал самой удобной оболочку bash. Однако это не так.

Что же удобного в zsh?

Во-первых, навигация.

В bash для перехода в каталог

/dir/subdir1/subdir2 нужно ввести команду:

cd /dir/subdir1/subdir2

Можно использовать авто дополнение bash — вводить начальные символы каталога и нажимать клавишу <Tab>.

Это будет выглядеть примерно так:

cd /dir/sub [Tab]/subdi [Tab]

В zsh можно ввести:

/d/s/s

Затем нажать клавишу <Tab> — вы перейдете в нужный каталог.

Например, для перехода в /etc/sysconfig/network, нужно ввести /e/s/n и нажать клавишу <Tab>.

Кстати, команда cd уже не нужна.

Еще один трюк.

Предположим, у нас есть каталог files, а в нем — каталоги

f1 и f2. Внутри каждого каталога f* есть каталоги source и last.

То есть структура каталогов будет примерно такой:

/files/f1/sources/last

/files/f2/sources/last

Пусть мы находимся в каталоге /files/f1/sources/last, для перехода в каталог /files/f2/sources/last введите команду:

cd 1 2

Но одной лишь навигацией возможности zsh не ограничиваются.

Можно, например, использовать вот такое перенаправление:

< /var/log/messages

Оболочка запустит программу, указанную в переменной $PAGER.

В большинстве случаев это аналогично команде:

cat /var/log/messages | less

Все возможности zsh в этой главе мы рассматривать не будем — их намного больше, чем вам кажется.

Если вы заинтересовались, то прочитайте следующие страницы:

http://opennet.ru/base/dev/zsh_intro.txt.html

http://habrahabr.ru/blogs/linux/82537/

05. Оболочка tcsh

Оболочка tcsh является модифицированной версией csh. 
Буква t в названии означает TENEX: изначально оболочка была разработана для операционной системы TENEX (использовалась в далеком прошлом на компьютерах DEC PDP-10).
В tcsh усовершенствована функция редактирования командной строки, есть авто завершение команд (как в bash). 
Кроме того, tcsh может распознавать потенциально опасные команды. 
Если вы от имени root попытаетесь удалить все файлы, оболочка потребует подтверждения.
Оболочка tcsh очень удобна в использовании, но ее синтаксис сценариев сложнее, чем у bash. 
Однако в части III мы все же рассмотрим разработку сценариев на tcsh, чтобы вы смогли оценить сложность создания разработки сценариев на bash и на tcsh

Оболочка tcsh является модифицированной версией csh.

Буква t в названии означает TENEX: изначально оболочка была разработана для операционной системы TENEX (использовалась в далеком прошлом на компьютерах DEC PDP-10).

В tcsh усовершенствована функция редактирования командной строки, есть авто завершение команд (как в bash).

Кроме того, tcsh может распознавать потенциально опасные команды.

Если вы от имени root попытаетесь удалить все файлы, оболочка потребует подтверждения.

Оболочка tcsh очень удобна в использовании, но ее синтаксис сценариев сложнее, чем у bash.

Однако в части III мы все же рассмотрим разработку сценариев на tcsh, чтобы вы смогли оценить сложность создания разработки сценариев на bash и на tcsh

06. Оболочка ash

Almquist shell (ash) — самая простая командная оболочка. 
Это самая маленькая оболочка, доступная для UNIX (у нее самые низкие требования к дисковому пространству).
У ash всего 24 встроенных команды и 10 опций командной строки. 
Обычно ash используется при загрузке Linux в однопользовательском режиме (или в режиме восстановления).
Оболочка ash совместима с sh, с ее помощью можно проверить сценарии на совместимость с традиционным синтаксисом sh. 
А в операционной системе NetBSD оболочка ash используется вместо /bin/sh

Almquist shell (ash) — самая простая командная оболочка.

Это самая маленькая оболочка, доступная для UNIX (у нее самые низкие требования к дисковому пространству).

У ash всего 24 встроенных команды и 10 опций командной строки.

Обычно ash используется при загрузке Linux в однопользовательском режиме (или в режиме восстановления).

Оболочка ash совместима с sh, с ее помощью можно проверить сценарии на совместимость с традиционным синтаксисом sh.

А в операционной системе NetBSD оболочка ash используется вместо /bin/sh

07. Выбор оболочки

Какую оболочку выбрать? 
Первым делом нужно оценить простоту работы в ней.
Ведь вы будете использовать эту оболочку каждый день, поэтому данный фактор должен быть на первом месте.
Затем нужно оценить простоту синтаксиса оболочки. 
Конечно, это только в том случае, если вы планируете разрабатывать собственные сценарии. 
Также не следует забывать, что вы можете использовать одну оболочку, а разрабатывать сценарии — на языке другой оболочки. 
Например, в повседневной работе вы можете использовать zsh, а разрабатывать сценарии на языке bash.
Довольно удобны в использовании оболочки bash, tcsh и zsh. 
Скорее всего, вы выберете одну из них. 
А вот для программирования будете использовать или bash, или tcsh (синтаксис zsh не очень понятен)

Какую оболочку выбрать?

Первым делом нужно оценить простоту работы в ней.

Ведь вы будете использовать эту оболочку каждый день, поэтому данный фактор должен быть на первом месте.

Затем нужно оценить простоту синтаксиса оболочки.

Конечно, это только в том случае, если вы планируете разрабатывать собственные сценарии.

Также не следует забывать, что вы можете использовать одну оболочку, а разрабатывать сценарии — на языке другой оболочки.

Например, в повседневной работе вы можете использовать zsh, а разрабатывать сценарии на языке bash.

Довольно удобны в использовании оболочки bash, tcsh и zsh.

Скорее всего, вы выберете одну из них.

А вот для программирования будете использовать или bash, или tcsh (синтаксис zsh не очень понятен)

08. Базовые команды Linux

Все команды Linux можно условно разделить на несколько групп:
- команды общего назначения — эти команды могут понадобиться в любой момент как при работе в консоли, так и при написании собственных сценариев
- команды для работы с файлами и каталогами 
- команды обработки текста
- команды для работы с сетью и Интернетом — выйти в Интернет в Linux можно даже без запуска графического интерфейса
- команды системного администратора — любой системный администратор просто обязан знать командыs

Все команды Linux можно условно разделить на несколько групп:

- команды общего назначения — эти команды могут понадобиться в любой момент как при работе в консоли, так и при написании собственных сценариев

- команды для работы с файлами и каталогами

- команды обработки текста

- команды для работы с сетью и Интернетом — выйти в Интернет в Linux можно даже без запуска графического интерфейса

- команды системного администратора — любой системный администратор просто обязан знать командыs

09. Команда arch: сведения об архитектуре компьютера

Данная команда поможет узнать тип аппаратной платформы, например: i386, i586, i686 и др.
Пример использования:
$ arch
i686

Данная команда поможет узнать тип аппаратной платформы, например: i386, i586, i686 и др.

Пример использования:

$ arch

i686

10. Команда banner: текстовый баннер

Команда banner выводит строку (максимальная длина — 10 символов), рисуя буквы символом звездочки (*). 
Данную команду можно использовать в своих сценариях для вывода названия сценария. 

Пример использования:
$ banner HellowWorld 4

В Ubuntu по умолчанию команда banner недоступна, для ее добавления нужно установить пакет sysvbanner.

Команда banner выводит строку (максимальная длина — 10 символов), рисуя буквы символом звездочки (*).

Данную команду можно использовать в своих сценариях для вывода названия сценария.

Пример использования:

$ banner HellowWorld 4

В Ubuntu по умолчанию команда banner недоступна, для ее добавления нужно установить пакет sysvbanner.

11. Команда chsh: изменение командного интерпретатора

Команда chsh позволяет изменить командный интерпретатор, вывести список установленных интерпретаторов, а также установить командный интерпретатор по умолчанию. 
Синтаксис вызова программы:
$ chsh [параметры] интерпретатор

В качестве параметров вы можете передать:
-L — выводит список установленных командных интерпретаторов (список хранится в файле /etc/shells)
-s — устанавливает командный интерпретатор по умолчанию.

Примеры использования команды:
$ chsh zsh
$ chsh -s zsh
Первая команда изменяет текущий интерпретатор команд на оболочку zsh. 
Как только пользователь выйдет из системы и снова зайдет, будет запущен его интерпретатор по умолчанию (который установлен в файле /etc/passwd). 
Вторая команда устанавливает командный интерпретатор по умолчанию для текущего пользователя.

Команда chsh позволяет изменить командный интерпретатор, вывести список установленных интерпретаторов, а также установить командный интерпретатор по умолчанию.

Синтаксис вызова программы:

$ chsh [параметры] интерпретатор

В качестве параметров вы можете передать:

-L — выводит список установленных командных интерпретаторов (список хранится в файле /etc/shells)

-s — устанавливает командный интерпретатор по умолчанию.

Примеры использования команды:

$ chsh zsh

$ chsh -s zsh

Первая команда изменяет текущий интерпретатор команд на оболочку zsh.

Как только пользователь выйдет из системы и снова зайдет, будет запущен его интерпретатор по умолчанию (который установлен в файле /etc/passwd).

Вторая команда устанавливает командный интерпретатор по умолчанию для текущего пользователя.

12. Команды cksum и md5sum: вычисление контрольной суммы файла

Команда cksum вычисляет контрольную сумму (CRC, cyclic redundancy code) указанных файлов. 

Формат вызова:
$ cksum файлы

Пример:
$ cksum file1.txt file2.txt

Для проверки подлинности некоторых файлов, передаваемых через Интернет, используется алгоритм MD5 (точнее, контрольный код, вычисленный с применением этого алгоритма). 
Разработчик программы выкладывает в Интернете пакет с этой программой и на своем сайте публикует контрольный код. 
Вы скачиваете пакет и вычисляете его контрольный код. 
Если коды отличаются, то файл при передаче был поврежден (или это другая версия пакета, которая, возможно, была подложена злоумышленником с целью ввода вражеского кода в вашу систему).
Использовать программу нужно так:
$ md5sum file.txt

Команда cksum вычисляет контрольную сумму (CRC, cyclic redundancy code) указанных файлов.

Формат вызова:

$ cksum файлы

Пример:

$ cksum file1.txt file2.txt

Для проверки подлинности некоторых файлов, передаваемых через Интернет, используется алгоритм MD5 (точнее, контрольный код, вычисленный с применением этого алгоритма).

Разработчик программы выкладывает в Интернете пакет с этой программой и на своем сайте публикует контрольный код.

Вы скачиваете пакет и вычисляете его контрольный код.

Если коды отличаются, то файл при передаче был поврежден (или это другая версия пакета, которая, возможно, была подложена злоумышленником с целью ввода вражеского кода в вашу систему).

Использовать программу нужно так:

$ md5sum file.txt

13. Команда clear: очистка экрана

Команда clear очищает экран при работе в консоли (терминале).

Пример использования:
$ clear

Команда clear очищает экран при работе в консоли (терминале).

Пример использования:

$ clear

14. Команда date: вывод даты и времени

Команда date относится как к командам общего назначения, так и к командам системного администратора. 
Обычным пользователям разрешено только просматривать дату и время в заданном формате, а пользователь с правами root может еще и устанавливать дату и время. 
Команда date (без параметров) просто выводит текущую дату и время. 
Но вы можете уточнить формат вывода даты и времени так:

$ date +формат

Строка формат может состоять из модификаторов, указанных в таблице.
Модификатор    Описание
%%             Знак %
%a             Сокращенное название дня недели (например, Вск)
%A             Полное название дня недели (например, Вторник)
%b             Сокращенное название месяца (например, Мар)
%B             Местное полное название месяца (например, Март)
%c             Дата и время (в формате, заданном в настройках системы)
%C             Век
%d             День месяца (с предшествующим нулем, например, 07)
%D             Дата (в формате %m/%d/%y)
%F             Полная дата (в формате %Y-%m-%d)
%g             Последние две цифры года, соответствующего номеру недели в году согласно ISO 8601
%G             Год, соответствующий номеру недели в году согласно ISO 8601
%H             Час (00..23)
%I             Час (01..12)
%j             Номер дня в году
%k             Час (0..23)
%l             Час (1..12)
%m             Месяц (01..12)
%M             Минута (00..59)
%n             Вставляет разрыв строки
%r             12-часовое время (например, 12:12:07 PM)
%R             24-часовой формат часов и минут
%s             Число секунд, прошедших с 1970-01-01 00:00:00 UTC (это так называемый timestamp)
%S             Секунда
%t             Вставляет символ табуляции
%T             Время (в формате %H:%M:%S)
%U             Номер недели в году (неделя начинается с воскресенья)
%V             Номер недели в году (неделя начинается с понедельника)
%w             День недели (0..6, где 0 — воскресенье)
%y             Последние две цифры года (00..99)
%Y             Год (все четыре цифры, например, 2010)
%z             Часовой пояс в формате +ччмм (например, +0200)
%:z            Часовой пояс в формате +чч:мм (например, +02:00)
%Z             Алфавитное сокращение часового пояса (например, EST)

Команда date относится как к командам общего назначения, так и к командам системного администратора.

Обычным пользователям разрешено только просматривать дату и время в заданном формате, а пользователь с правами root может еще и устанавливать дату и время.

Команда date (без параметров) просто выводит текущую дату и время.

Но вы можете уточнить формат вывода даты и времени так:

$ date +формат

Строка формат может состоять из модификаторов, указанных в таблице.

Модификатор Описание

%% Знак %

%a Сокращенное название дня недели (например, Вск)

%A Полное название дня недели (например, Вторник)

%b Сокращенное название месяца (например, Мар)

%B Местное полное название месяца (например, Март)

%c Дата и время (в формате, заданном в настройках системы)

%C Век

%d День месяца (с предшествующим нулем, например, 07)

%D Дата (в формате %m/%d/%y)

%F Полная дата (в формате %Y-%m-%d)

%g Последние две цифры года, соответствующего номеру недели в году согласно ISO 8601

%G Год, соответствующий номеру недели в году согласно ISO 8601

%H Час (00..23)

%I Час (01..12)

%j Номер дня в году

%k Час (0..23)

%l Час (1..12)

%m Месяц (01..12)

%M Минута (00..59)

%n Вставляет разрыв строки

%r 12-часовое время (например, 12:12:07 PM)

%R 24-часовой формат часов и минут

%s Число секунд, прошедших с 1970-01-01 00:00:00 UTC (это так называемый timestamp)

%S Секунда

%t Вставляет символ табуляции

%T Время (в формате %H:%M:%S)

%U Номер недели в году (неделя начинается с воскресенья)

%V Номер недели в году (неделя начинается с понедельника)

%w День недели (0..6, где 0 — воскресенье)

%y Последние две цифры года (00..99)

%Y Год (все четыре цифры, например, 2010)

%z Часовой пояс в формате +ччмм (например, +0200)

%:z Часовой пояс в формате +чч:мм (например, +02:00)

%Z Алфавитное сокращение часового пояса (например, EST)

15. Команда echo: вывод сообщения

Команда echo выводит текстовую строку, указанную в качестве аргумента, например:
$ echo "Hello, world!"

Hello, world!
Обычно данная команда используется в сценариях командного интерпретатора для вывода сообщений на экран.

Команда echo выводит текстовую строку, указанную в качестве аргумента, например:

$ echo "Hello, world!"

Hello, world!

Обычно данная команда используется в сценариях командного интерпретатора для вывода сообщений на экран.

16. Команда exit: выход из системы

Для завершения сеанса работы в системе (при условии, что вы работаете в консоли) нужно использовать команду exit. 
Если не завершить сеанс работы, кто угодно сможет работать в системе под вашим именем (понятно, что во время вашего отсутствия за компьютером).

1 2	Для завершения сеанса работы в системе (при условии, что вы работаете в консоли) нужно использовать команду exit. Если не завершить сеанс работы, кто угодно сможет работать в системе под вашим именем (понятно, что во время вашего отсутствия за компьютером).

17. Команда env: установка переменных окружения

Команда env служит для установки переменных окружения во время выполнения команды, например ее можно использовать для установки переменной EDITOR,
которая содержит команду текстового редактора по умолчанию. 

Формат вызова команды:
$ env переменная=значение команда

Пример:
# env EDITOR=nano edquota -u user

Команда env служит для установки переменных окружения во время выполнения команды, например ее можно использовать для установки переменной EDITOR,

которая содержит команду текстового редактора по умолчанию.

Формат вызова команды:

$ env переменная=значение команда

Пример:

# env EDITOR=nano edquota -u user

18. Команды man и info: вывод справки

Команда man используется для получения справки о любой команде системы. 

Например, команда man ls отобразит справку об использовании команды ls, которая выводит содержимое каталога. 
О том, как правильно использовать саму справочную систему, вам расскажет команда man man.
Команда info — это альтернативная справочная система. 
Если вы не нашли нужной информации с помощью команды man, попробуйте использовать команду info.

Команда man используется для получения справки о любой команде системы.

Например, команда man ls отобразит справку об использовании команды ls, которая выводит содержимое каталога.

О том, как правильно использовать саму справочную систему, вам расскажет команда man man.

Команда info — это альтернативная справочная система.

Если вы не нашли нужной информации с помощью команды man, попробуйте использовать команду info.

19. Команда printenv: вывод значения переменной окружения

Команда env используется для установки значений переменной окружения, а команда printenv позволяет просмотреть текущее значение переменной окружения,
например:
$ printenv EDITOR

Команда env используется для установки значений переменной окружения, а команда printenv позволяет просмотреть текущее значение переменной окружения,

например:

$ printenv EDITOR

20. Команда reset: сброс терминала

Полезна при некоторых проблемах с терминалом (консолью). 
Команда reset производит сброс терминала и его начальную инициализацию, что позволяет восстановить параметры по умолчанию без выхода и входа в систему.
Нужно отметить, что данную команду вы будете выполнять очень редко.

Полезна при некоторых проблемах с терминалом (консолью).

Команда reset производит сброс терминала и его начальную инициализацию, что позволяет восстановить параметры по умолчанию без выхода и входа в систему.

Нужно отметить, что данную команду вы будете выполнять очень редко.

21. Команда sleep: пора спать

Команда sleep приостанавливает дальнейшее выполнение команд на указанное время.
Ее полезно использовать в собственных сценариях, когда нужно приостановить выполнение сценария, чтобы пользователь успел прочитать сообщение. 
Когда мы будем разрабатывать собственные сценарии, то станем часто пользоваться этой командой.

Формат вызова:
$ sleep число

По умолчанию число — это количество секунд; если после числа указан суффикс m, h, d, то считается, что число — это количество минут, часов и дней соответственно.

Команда sleep приостанавливает дальнейшее выполнение команд на указанное время.

Ее полезно использовать в собственных сценариях, когда нужно приостановить выполнение сценария, чтобы пользователь успел прочитать сообщение.

Когда мы будем разрабатывать собственные сценарии, то станем часто пользоваться этой командой.

Формат вызова:

$ sleep число

По умолчанию число — это количество секунд; если после числа указан суффикс m, h, d, то считается, что число — это количество минут, часов и дней соответственно.

22. Команда startx: запуск графического интерфейса X.Org

Linux может стартовать на разных уровнях запуска. 
На пятом уровне запуска графический интерфейс X.Org (бывшее название — X Window) запускается автоматически (если он вообще был установлен). 
На третьем же уровне запуск графического интерфейса не производится. 
Если он вам тем не менее нужен, то его можно запустить с помощью команды startx. 
Никаких параметров не требуется.

Linux может стартовать на разных уровнях запуска.

На пятом уровне запуска графический интерфейс X.Org (бывшее название — X Window) запускается автоматически (если он вообще был установлен).

На третьем же уровне запуск графического интерфейса не производится.

Если он вам тем не менее нужен, то его можно запустить с помощью команды startx.

Никаких параметров не требуется.

23. Команда tee: перенаправление ввода

Перенаправляет стандартный ввод в два файла. 

Если задан только один файл, то в этот файл и на стандартный вывод. 
По умолчанию файлы, если существуют, перезаписываются. 
Чтобы файлы не были перезаписаны, указывается параметр -a.

Пример:
$ tee output.1 output.2

ПРИМЕЧАНИЕ
Напомню, что стандартным вводом считается клавиатура, а стандартным выводом консоль. 
Суть команды в том, что она записывает ввод пользователя в два файла.
Если задан только один файл, то ввод пользователя отправляется в этот файл и на консоль.

Перенаправляет стандартный ввод в два файла.

Если задан только один файл, то в этот файл и на стандартный вывод.

По умолчанию файлы, если существуют, перезаписываются.

Чтобы файлы не были перезаписаны, указывается параметр -a.

Пример:

$ tee output.1 output.2

ПРИМЕЧАНИЕ

Напомню, что стандартным вводом считается клавиатура, а стандартным выводом консоль.

Суть команды в том, что она записывает ввод пользователя в два файла.

Если задан только один файл, то ввод пользователя отправляется в этот файл и на консоль.

24. Команда true: успешное завершение

Данная команда ничего не делает, но всегда возвращает код 0, что соответствует успешному завершению. 
Часто используется при написании сценариев.

1 2	Данная команда ничего не делает, но всегда возвращает код 0, что соответствует успешному завершению. Часто используется при написании сценариев.

25. Команда yes: возвращает y

Команда пригодится при написании сценариев. 
Она возвращает символ y (или строку, переданную ей в качестве параметра) и символ новой строки — как будто пользователь ввел y и нажал клавишу <Enter>.
Пример использования этой команды:
# yes | apt-get install mc

Команда пригодится при написании сценариев.

Она возвращает символ y (или строку, переданную ей в качестве параметра) и символ новой строки — как будто пользователь ввел y и нажал клавишу <Enter>.

Пример использования этой команды:

# yes | apt-get install mc

26. Команда uname: название и версия дистрибутива Linux

Команда uname очень полезна, т. к. позволяет получить много интересной информации о вашем дистрибутиве. 

Рассмотрим наиболее частые варианты вызова uname:
uname     - название ядра системы
uname –s  - то же, что и просто uname
uname –v  - версия ядра
uname –r  - релиз ядра
uname –o  - тип операционной системы
uname –a  - вся возможная информация

uname — универсальная команда, и она имеется на всех UNIX-системах (Linux, openBSD, FreeBSD, Solaris и т. д.).

Команда uname очень полезна, т. к. позволяет получить много интересной информации о вашем дистрибутиве.

Рассмотрим наиболее частые варианты вызова uname:

uname - название ядра системы

uname –s - то же, что и просто uname

uname –v - версия ядра

uname –r - релиз ядра

uname –o - тип операционной системы

uname –a - вся возможная информация

uname — универсальная команда, и она имеется на всех UNIX-системах (Linux, openBSD, FreeBSD, Solaris и т. д.).

27. Конвертирование кодировок, звуковых и графических файлов

При работе с ПК иногда приходится конвертировать файлы из одного формата в другой. (Примеров подобного конвертирования можно привести сотни)

Текст:
Команда iconv используется для преобразования текстовых документов из одной кодировки в другую:
$ iconv
$ iconv -f cp1251 -t UTF-8 -o file.txt > file_utf8.txt
Первая команда выводит список поддерживаемых кодировок. 
Вторая — конвертирует файл file.txt из кодировки cp1251 в кодировку UTF-8, результат записывается в файл file_utf8.txt.

Картинки:
Для конвертирования различных графических форматов используется программа convert (чтобы она была доступна, нужно установить пакет imagemagic). 
Программа convert — это очень мощный и гибкий инструмент. 
Учтите, что в этой книге рассмотрены далеко не все его возможности.
Вот несколько примеров преобразования графических файлов из одного формата в другой:
$ convert picture.png picture.bmp ; из PNG в BMP
$ convert icon.gif icon.jpg ; из GIF в JPEG
$ i=png; for fn in *.$i; do convert "$fn" "${fn/.$i/.bmp}"; done

Преобразуем все PNG-файлы в *.png.bmp, при этом размер результирующих изображений будет равен 50% от оригинала:
$ convert -resize 1024x768 big.jpg small.jpg
i=png; for fn in *.$i; do convert -resize 50% "$fn" "${fn/.$i/.bmp}"; done

Также можно использовать опцию -rotate для поворота изображения, в нашем случае мы поворачиваем изображение на 270 :
$ convert -rotate 270 fokta.jpg fotka-rotate.jpg

Хотите добавить информацию об авторских правах? Это тоже можно сделать с помощью этой команды:
$ convert -fill black -pointsize 36 -font arial -draw text 20.70 "Copyright (с)2011 Vasil Pupkin." f1.jpg f1c.jpg

При желании можно легко преобразовать PDF в JPEG постранично:
$ convert file.pdf file-%03d.jpg
И, наоборот, преобразовать JPEG-изображения в PDF:
$ convert *.jpg file.pdf


Аудио:
Представим, что у нас есть диск AudioCD и его нужно "сграбить" на жесткий диск. 
Для этого можно использовать команду cdparanoia:
$ cdparanoia -B
После этого треки аудиодиска будут сохранены на жестком диске в текущем каталоге в виде WAV-файлов. 
Но они просто огромны! Поэтому следует преобразовать их в формат MP3 или OGG. 
Это можно сделать следующими командами:
# lame -b 256 in.wav out.mp3
# oggenc in.wav -b 256 out.ogg

При работе с ПК иногда приходится конвертировать файлы из одного формата в другой. (Примеров подобного конвертирования можно привести сотни)

Текст:

Команда iconv используется для преобразования текстовых документов из одной кодировки в другую:

$ iconv

$ iconv -f cp1251 -t UTF-8 -o file.txt > file_utf8.txt

Первая команда выводит список поддерживаемых кодировок.

Вторая — конвертирует файл file.txt из кодировки cp1251 в кодировку UTF-8, результат записывается в файл file_utf8.txt.

Картинки:

Для конвертирования различных графических форматов используется программа convert (чтобы она была доступна, нужно установить пакет imagemagic).

Программа convert — это очень мощный и гибкий инструмент.

Учтите, что в этой книге рассмотрены далеко не все его возможности.

Вот несколько примеров преобразования графических файлов из одного формата в другой:

$ convert picture.png picture.bmp ; из PNG в BMP

$ convert icon.gif icon.jpg ; из GIF в JPEG

$ i=png; for fn in *.$i; do convert "$fn" "${fn/.$i/.bmp}"; done

Преобразуем все PNG-файлы в *.png.bmp, при этом размер результирующих изображений будет равен 50% от оригинала:

$ convert -resize 1024x768 big.jpg small.jpg

i=png; for fn in *.$i; do convert -resize 50% "$fn" "${fn/.$i/.bmp}"; done

Также можно использовать опцию -rotate для поворота изображения, в нашем случае мы поворачиваем изображение на 270 :

$ convert -rotate 270 fokta.jpg fotka-rotate.jpg

Хотите добавить информацию об авторских правах? Это тоже можно сделать с помощью этой команды:

$ convert -fill black -pointsize 36 -font arial -draw text 20.70 "Copyright (с)2011 Vasil Pupkin." f1.jpg f1c.jpg

При желании можно легко преобразовать PDF в JPEG постранично:

$ convert file.pdf file-%03d.jpg

И, наоборот, преобразовать JPEG-изображения в PDF:

$ convert *.jpg file.pdf

Аудио:

Представим, что у нас есть диск AudioCD и его нужно "сграбить" на жесткий диск.

Для этого можно использовать команду cdparanoia:

$ cdparanoia -B

После этого треки аудиодиска будут сохранены на жестком диске в текущем каталоге в виде WAV-файлов.

Но они просто огромны! Поэтому следует преобразовать их в формат MP3 или OGG.

Это можно сделать следующими командами:

# lame -b 256 in.wav out.mp3

# oggenc in.wav -b 256 out.ogg

28. Файловые системы / FS

Linux поддерживает много различных файловых систем. 
Начинающий пользователь просто теряется, когда видит такое многообразие выбора, ведь в качестве корневой файловой системы доступны: ext2, ext3, ext4, XFS, ReiserFS, JFS.
"Родной" файловой системой Linux является журналируемая файловая системаext4, но вы можете выбрать предыдущую версию — ext3 или даже ext2. 
Linux также до сих пор поддерживает файловую систему ext — самую первую файловую систему Linux, но при установке системы вы не можете выбрать ext. 
Поддержка ext добавлена в ядро только на тот случай, если вам попадется носитель информации, отформатированный в этой файловой системе.

ПРИМЕЧАНИЕ
Linux до сих пор поддерживает файловую систему ext, но она считается устаревшей, и рекомендуется воздержаться от ее использования.

Основное отличие ext3 от ext2 — наличие журнала, что делает файловую систему менее чувствительной к всевозможным сбоям. 
Новая версия — ext4 — построена на базе ext3, но изменений гораздо больше, чем просто наличие журнала.

Файловые системы ext2 и ext3 совместимы. По сути, ext3 — та же ext2, только с журналом. 
Раздел ext3 могут читать программы (например, Total Commander и Ext2Fsd в Windows), рассчитанные на ext2. 
В свою очередь, ext4 — это усовершенствованная версия ext3.
В современных дистрибутивах по умолчанию задана файловая система ext4(для redhat/centos это ufs), при необходимости можно выбрать другие файловые системы. 


- Файловая система XFS была разработана компанией Silicon Graphics в 2001 году. 
Основная особенность данной системы — высокая производительность (до 7 Гбайт/с). 
XFS может работать с блоками размером от 512 байтов до 64 Кбайт. 
Ясно, что если у вас много маленьких файлов, то в целях экономии места можно установить самый маленький размер блока. 
А если вы работаете с файлами большого размера (например, мультимедиа), 
то нужно выбрать самый большой размер блока — так файловая система обеспечит максимальную производительность (конечно, если "железо" позволяет).
Учитывая высокую производительность этой файловой системы, ее нет смысла устанавливать на домашнем компьютере, поскольку все ее преимущества будут сведены на нет. 
А вот если вы будете работать с файлами очень большого размера, XFS проявит себя с лучшей стороны.

- Файловая система ReiserFS считается самой экономной, 
поскольку позволяет хранить несколько файлов в одном блоке (другие файловые системы могут хранить в одном блоке только один файл или одну его часть).
Например, если размер блока равен 4 Кбайт, а файл занимает всего 512 байт (а таких файлов очень много в разных каталогах), 
то 3,5 Кбайт просто не будут использоваться. 
А вот ReiserFS позволяет задействовать буквально каждый байт вашего жесткого диска!
Но у этой файловой системы есть два больших недостатка: 
она неустойчива к сбоям, и ее производительность сильно снижается при фрагментации. 
Поэтому, если вы выбираете данную файловую систему, покупайте UPS (источник бесперебойного питания) и почаще дефрагментируйте жесткий диск.

- Файловая система JFS (разработка IBM) сначала появилась в операционной системе AIX, а потом была модифицирована под Linux. 
Основные достоинства этой файловой системы — надежность и высокая производительность (выше, чем у XFS). 
Но у нее маленький размер блока (от 512 байтов до 4 Кбайт). 
Следовательно, она хороша на сервере баз данных, но не при работе с данными мультимедиа, 
поскольку блок в 4 Кбайт для работы, например, с видео в реальном времени будет маловат.


Выбор файловой системы:
- для рабочей станции и сервера общего назначения оптимальными файловыми системами являются ext3/ext4 или ReiserFS (в крайнем случае)
- на сервере баз данных можно использовать JFS — в этом случае (особенно, если база данных огромная) будет наблюдаться определенный прирост производительности
- файловая система XFS — это удел станции мультимедиа, на обычной рабочей станции или обычном сервере ее использовать не следует

Файловые системы Windows:
FAT32 - нет журнала
NTFS - есть журнал

Linux поддерживает много различных файловых систем.

Начинающий пользователь просто теряется, когда видит такое многообразие выбора, ведь в качестве корневой файловой системы доступны: ext2, ext3, ext4, XFS, ReiserFS, JFS.

"Родной" файловой системой Linux является журналируемая файловая системаext4, но вы можете выбрать предыдущую версию — ext3 или даже ext2.

Linux также до сих пор поддерживает файловую систему ext — самую первую файловую систему Linux, но при установке системы вы не можете выбрать ext.

Поддержка ext добавлена в ядро только на тот случай, если вам попадется носитель информации, отформатированный в этой файловой системе.

ПРИМЕЧАНИЕ

Linux до сих пор поддерживает файловую систему ext, но она считается устаревшей, и рекомендуется воздержаться от ее использования.

Основное отличие ext3 от ext2 — наличие журнала, что делает файловую систему менее чувствительной к всевозможным сбоям.

Новая версия — ext4 — построена на базе ext3, но изменений гораздо больше, чем просто наличие журнала.

Файловые системы ext2 и ext3 совместимы. По сути, ext3 — та же ext2, только с журналом.

Раздел ext3 могут читать программы (например, Total Commander и Ext2Fsd в Windows), рассчитанные на ext2.

В свою очередь, ext4 — это усовершенствованная версия ext3.

В современных дистрибутивах по умолчанию задана файловая система ext4(для redhat/centos это ufs), при необходимости можно выбрать другие файловые системы.

- Файловая система XFS была разработана компанией Silicon Graphics в 2001 году.

Основная особенность данной системы — высокая производительность (до 7 Гбайт/с).

XFS может работать с блоками размером от 512 байтов до 64 Кбайт.

Ясно, что если у вас много маленьких файлов, то в целях экономии места можно установить самый маленький размер блока.

А если вы работаете с файлами большого размера (например, мультимедиа),

то нужно выбрать самый большой размер блока — так файловая система обеспечит максимальную производительность (конечно, если "железо" позволяет).

Учитывая высокую производительность этой файловой системы, ее нет смысла устанавливать на домашнем компьютере, поскольку все ее преимущества будут сведены на нет.

А вот если вы будете работать с файлами очень большого размера, XFS проявит себя с лучшей стороны.

- Файловая система ReiserFS считается самой экономной,

поскольку позволяет хранить несколько файлов в одном блоке (другие файловые системы могут хранить в одном блоке только один файл или одну его часть).

Например, если размер блока равен 4 Кбайт, а файл занимает всего 512 байт (а таких файлов очень много в разных каталогах),

то 3,5 Кбайт просто не будут использоваться.

А вот ReiserFS позволяет задействовать буквально каждый байт вашего жесткого диска!

Но у этой файловой системы есть два больших недостатка:

она неустойчива к сбоям, и ее производительность сильно снижается при фрагментации.

Поэтому, если вы выбираете данную файловую систему, покупайте UPS (источник бесперебойного питания) и почаще дефрагментируйте жесткий диск.

- Файловая система JFS (разработка IBM) сначала появилась в операционной системе AIX, а потом была модифицирована под Linux.

Основные достоинства этой файловой системы — надежность и высокая производительность (выше, чем у XFS).

Но у нее маленький размер блока (от 512 байтов до 4 Кбайт).

Следовательно, она хороша на сервере баз данных, но не при работе с данными мультимедиа,

поскольку блок в 4 Кбайт для работы, например, с видео в реальном времени будет маловат.

Выбор файловой системы:

- для рабочей станции и сервера общего назначения оптимальными файловыми системами являются ext3/ext4 или ReiserFS (в крайнем случае)

- на сервере баз данных можно использовать JFS — в этом случае (особенно, если база данных огромная) будет наблюдаться определенный прирост производительности

- файловая система XFS — это удел станции мультимедиа, на обычной рабочей станции или обычном сервере ее использовать не следует

Файловые системы Windows:

FAT32 - нет журнала

NTFS - есть журнал

29. Имена файлов в Linux

По сравнению с Windows в Linux несколько другие правила построения имен файлов, вам придется с этим смириться. 
Начнем с того, что в Linux нет такого понятия, как расширение имени файла. 
В Windows, например, для файла Document1.doc именем файла является фрагмент Document1, а doc — это расширение. 
В Linux Document1.doc — это имя файла, никакого расширения нет.

Максимальная длина имени файла — 254 символа(зависит от ФС в ext4 уже пофигу). 
Имя может содержать любые символы (в том числе и кириллицу), кроме / \ ? < > * " |. 

Также вам придется привыкнуть к тому, что система Linux чувствительна к регистру в имени файла: 
FILE.txt и FiLe.Txt — это два разных файла.
Разделение элементов пути осуществляется символом / (прямой слэш), а не \ (обратный слэш), как в Windows.

По сравнению с Windows в Linux несколько другие правила построения имен файлов, вам придется с этим смириться.

Начнем с того, что в Linux нет такого понятия, как расширение имени файла.

В Windows, например, для файла Document1.doc именем файла является фрагмент Document1, а doc — это расширение.

В Linux Document1.doc — это имя файла, никакого расширения нет.

Максимальная длина имени файла — 254 символа(зависит от ФС в ext4 уже пофигу).

Имя может содержать любые символы (в том числе и кириллицу), кроме / \ ? < > * " |.

Также вам придется привыкнуть к тому, что система Linux чувствительна к регистру в имени файла:

FILE.txt и FiLe.Txt — это два разных файла.

Разделение элементов пути осуществляется символом / (прямой слэш), а не \ (обратный слэш), как в Windows.

30. Файлы и устройства

Вот самые распространенные примеры файлов устройств:
/dev/sdx — файл жесткого диска или USB-накопителя
/dev/sdxN — файл устройства раздела на жестком диске, N — это номер раздела
/dev/mouse — файл устройства мыши
/dev/modem — файл устройства модема (на самом деле является ссылкой на файл устройства ttySn)
/dev/ttySn — файл последовательного порта, n — номер порта (ttyS0 соответствует COM1, ttyS1 — COM2 и т. д.).

ПРИМЕЧАНИЕ
В современных дистрибутивах имена вида /dev/hdx уже не используются


В свою очередь, файлы устройств бывают двух типов: блочные и символьные. 
Обмен информации с блочными устройствами, например с жестким диском, осуществляется блоками информации, а с символьными — отдельными символами. 
Пример символьного устройства — последовательный порт.

ls -l /dev/ttyACM0 
crw-rw---- 1 root uucp 166, 0 Jun  7 18:13 /dev/ttyACM0

ls /dev/nvme0n1 -l
brw-rw---- 1 root disk 259, 0 May 29 10:57 /dev/nvme0n1

Вот самые распространенные примеры файлов устройств:

/dev/sdx — файл жесткого диска или USB-накопителя

/dev/sdxN — файл устройства раздела на жестком диске, N — это номер раздела

/dev/mouse — файл устройства мыши

/dev/modem — файл устройства модема (на самом деле является ссылкой на файл устройства ttySn)

/dev/ttySn — файл последовательного порта, n — номер порта (ttyS0 соответствует COM1, ttyS1 — COM2 и т. д.).

ПРИМЕЧАНИЕ

В современных дистрибутивах имена вида /dev/hdx уже не используются

В свою очередь, файлы устройств бывают двух типов: блочные и символьные.

Обмен информации с блочными устройствами, например с жестким диском, осуществляется блоками информации, а с символьными — отдельными символами.

Пример символьного устройства — последовательный порт.

ls -l /dev/ttyACM0

crw-rw---- 1 root uucp 166, 0 Jun 7 18:13 /dev/ttyACM0

ls /dev/nvme0n1 -l

brw-rw---- 1 root disk 259, 0 May 29 10:57 /dev/nvme0n1

31. Стандартные каталоги Linux

В зависимости от дистрибутива, в корневом каталоге могут находиться дополнительные каталоги или не быть.
/ — корневой каталог
/bin — содержит стандартные программы Linux (cat, cp, ls, login и т. д.)
/boot — каталог загрузчика, содержит образы ядра и Initrd (RAM-диска инициализации), может содержать конфигурационные и вспомогательные файлы загрузчика
/dev — содержит файлы устройств
/etc — содержит конфигурационные файлы системы
/home — содержит домашние каталоги пользователей
/lib — библиотеки и модули
/lost+found — восстановленные после некорректного размонтирования файловой системы файлы и каталоги
/media — в современных дистрибутивах содержит точки монтирования сменных носителей (CD-, DVD-, USB-накопителей)
/misc — может содержать все, что угодно, равно как и каталог /opt
/mnt — обычно содержит точки монтирования
/proc — каталог псевдофайловой системы procfs, предоставляющей информацию о процессах
/root — каталог суперпользователя root
/sbin — каталог системных утилит, выполнять которые имеет право пользователь root
/tmp — каталог для временных файлов
/usr — содержит пользовательские программы, документацию, исходные коды программ и ядра
/var — постоянно изменяющиеся данные системы, например очереди системы печати, почтовые ящики, протоколы, замки и т. д.

В зависимости от дистрибутива, в корневом каталоге могут находиться дополнительные каталоги или не быть.

/ — корневой каталог

/bin — содержит стандартные программы Linux (cat, cp, ls, login и т. д.)

/boot — каталог загрузчика, содержит образы ядра и Initrd (RAM-диска инициализации), может содержать конфигурационные и вспомогательные файлы загрузчика

/dev — содержит файлы устройств

/etc — содержит конфигурационные файлы системы

/home — содержит домашние каталоги пользователей

/lib — библиотеки и модули

/lost+found — восстановленные после некорректного размонтирования файловой системы файлы и каталоги

/media — в современных дистрибутивах содержит точки монтирования сменных носителей (CD-, DVD-, USB-накопителей)

/misc — может содержать все, что угодно, равно как и каталог /opt

/mnt — обычно содержит точки монтирования

/proc — каталог псевдофайловой системы procfs, предоставляющей информацию о процессах

/root — каталог суперпользователя root

/sbin — каталог системных утилит, выполнять которые имеет право пользователь root

/tmp — каталог для временных файлов

/usr — содержит пользовательские программы, документацию, исходные коды программ и ядра

/var — постоянно изменяющиеся данные системы, например очереди системы печати, почтовые ящики, протоколы, замки и т. д.

32. Работа с файлами

touch <файл> Создание пустого файла
cat <файл>   Просмотр текстового файла
tac <файл>   Вывод содержимого текстового файла в обратном порядке, т. е. сначала выводится последняя строка, потом предпоследняя и т. д.
cp <файл1> <файл2> Копирование файла <файл1> в файл <файл2>. Если <файл2> существует, программа попросит разрешение на его перезапись
mv <файл1> <файл2> Перемещение файла <файл1> в файл <файл2>. Эту же команду можно использовать и для переименования файла
rm <файл> Удаление файла
locate <файл> Быстрый поиск файла
which <программа> Вывод каталога, в котором находится программа, если она вообще установлена. 
                  Поиск производится в каталогах, указанных в переменной окружения PATH (это путь поиска программ)
less <файл> Используется для удобного просмотра файла с возможностью скроллинга (постраничной прокрутки)

Пример:
touch file.txt
echo "some text" > file.txt
cat file.txt
cp file.txt file-copy.txt
cat file-copy.txt
rm file.txt
cat file.txt
mv file-copy.txt file.txt
cat file.txt

Первая команда "touch" создает в текущем каталоге файл "file.txt". 
Вторая команда "echo" записывает строку some text в этот же файл. 
Обратите внимание на символ ">" — это символ перенаправления ввода/вывода
Третья команда "cat" выводит содержимое файла — в файле записанная нами строка "some text". 
Четвертая команда "cp" копирует файл "file.txt" в файл с именем "filecopy.txt".
После этого мы опять используем команду "cat", чтобы вывести содержимое файла "file-copy.txt", — надо же убедиться, что файл действительно скопировался.
Шестая команда "rm" удаляет файл "file.txt". 
При удалении система спрашивает, хотите ли вы удалить файл. 
Если хотите удалить, то нужно нажать клавишу <Y>, а если нет, то <N>. 
Точно ли файл удален? Убедимся в этом: введите команду "cat file.txt". 
Система нам сообщает, что нет такого файла.
Восьмая команда "mv" переименовывает файл "file-copy.txt" в файл "file.txt". 
Последняя команда выводит исходный файл file.txt.

touch <файл> Создание пустого файла

cat <файл> Просмотр текстового файла

tac <файл> Вывод содержимого текстового файла в обратном порядке, т. е. сначала выводится последняя строка, потом предпоследняя и т. д.

cp <файл1> <файл2> Копирование файла <файл1> в файл <файл2>. Если <файл2> существует, программа попросит разрешение на его перезапись

mv <файл1> <файл2> Перемещение файла <файл1> в файл <файл2>. Эту же команду можно использовать и для переименования файла

rm <файл> Удаление файла

locate <файл> Быстрый поиск файла

which <программа> Вывод каталога, в котором находится программа, если она вообще установлена.

Поиск производится в каталогах, указанных в переменной окружения PATH (это путь поиска программ)

less <файл> Используется для удобного просмотра файла с возможностью скроллинга (постраничной прокрутки)

Пример:

touch file.txt

echo "some text" > file.txt

cat file.txt

cp file.txt file-copy.txt

cat file-copy.txt

rm file.txt

cat file.txt

mv file-copy.txt file.txt

cat file.txt

Первая команда "touch" создает в текущем каталоге файл "file.txt".

Вторая команда "echo" записывает строку some text в этот же файл.

Обратите внимание на символ ">" — это символ перенаправления ввода/вывода

Третья команда "cat" выводит содержимое файла — в файле записанная нами строка "some text".

Четвертая команда "cp" копирует файл "file.txt" в файл с именем "filecopy.txt".

После этого мы опять используем команду "cat", чтобы вывести содержимое файла "file-copy.txt", — надо же убедиться, что файл действительно скопировался.

Шестая команда "rm" удаляет файл "file.txt".

При удалении система спрашивает, хотите ли вы удалить файл.

Если хотите удалить, то нужно нажать клавишу <Y>, а если нет, то <N>.

Точно ли файл удален? Убедимся в этом: введите команду "cat file.txt".

Система нам сообщает, что нет такого файла.

Восьмая команда "mv" переименовывает файл "file-copy.txt" в файл "file.txt".

Последняя команда выводит исходный файл file.txt.

33. Работа с каталогами

mkdir <каталог> Создание каталога
cd <каталог> Изменение каталога
ls <каталог> Вывод содержимого каталога
rmdir <каталог> Удаление пустого каталога
rm -r <каталог> Рекурсивное удаление каталога

При указании имени каталога можно использовать следующие символы:
. — означает текущий каталог. Если вы введете команду cat ./file, то она вы ведет файл file, который находится в текущем каталоге
.. — родительский каталог. Например, команда cd .. переведет вас на один уровень вверх по дереву файловой системы
~ — домашний каталог пользователя (об этом мы поговорим позже)

Пример:
mkdir directory
cd directory
touch file1.txt
touch file2.txt
ls
cd ..
ls directory
rm directory
rmdir directory
rm -r directory

mkdir <каталог> Создание каталога

cd <каталог> Изменение каталога

ls <каталог> Вывод содержимого каталога

rmdir <каталог> Удаление пустого каталога

rm -r <каталог> Рекурсивное удаление каталога

При указании имени каталога можно использовать следующие символы:

. — означает текущий каталог. Если вы введете команду cat ./file, то она вы ведет файл file, который находится в текущем каталоге

.. — родительский каталог. Например, команда cd .. переведет вас на один уровень вверх по дереву файловой системы

~ — домашний каталог пользователя (об этом мы поговорим позже)

Пример:

mkdir directory

cd directory

touch file1.txt

touch file2.txt

cd ..

ls directory

rm directory

rmdir directory

rm -r directory

34. Команда ln: создание ссылок

В Linux допускается, чтобы один и тот же файл существовал в системе под разными именами. 
Для этого используются ссылки. 
Ссылки бывают двух типов: жесткие и символические. 
Жесткие ссылки жестко привязываются к файлу — вы не можете удалить файл, пока на него указывает хотя бы одна жесткая ссылка. 
А вот если на файл указывают символические ссылки, его удалению ничто не помешает.
Жесткие ссылки не могут указывать на файл, который находится за пределами файловой системы. 
Предположим, у вас два Linux-раздела: один корневой, а второй используется для домашних файлов пользователей и монтируется к каталогу /home корневой файловой системы. 
Так вот, вы не можете создать в корневой файловой системе ссылку, которая ссылается на файл в файловой системе, под монтированной к каталогу /home. 
Это очень важная особенность жестких ссылок. 
Если вам нужно создать ссылку на файл, который находится за пределами файловой системы, вам следует использовать символические ссылки.

Для создания ссылок предназначена команда ln:
ln file.txt link1
ln -s file.txt link2
Первая команда создает жесткую ссылку link1, указывающую на текстовый файл file.txt. 
Вторая команда создает символическую ссылку link2, которая ссылается на этот же текстовый файл file.txt.

Модифицируя ссылку (все равно какую — link1 или link2), вы автоматически изменяете исходный файл — file.txt.

Особого внимания заслуживает операция удаления. 
По идее, если вы удаляете ссылку link2, файл file.txt также должен быть удален, но не тут-то было — вы не можете его удалить до тех пор, пока на него указывает хоть одна жесткая ссылка.
При удалении ссылки link2 просто будет удалена символическая ссылка, но жесткая ссылка и сам файл останутся. 
Если же вы удалите ссылку link1, будет удален и файл file.txt, поскольку на него больше не указывает ни одна жесткая ссылка.

В Linux допускается, чтобы один и тот же файл существовал в системе под разными именами.

Для этого используются ссылки.

Ссылки бывают двух типов: жесткие и символические.

Жесткие ссылки жестко привязываются к файлу — вы не можете удалить файл, пока на него указывает хотя бы одна жесткая ссылка.

А вот если на файл указывают символические ссылки, его удалению ничто не помешает.

Жесткие ссылки не могут указывать на файл, который находится за пределами файловой системы.

Предположим, у вас два Linux-раздела: один корневой, а второй используется для домашних файлов пользователей и монтируется к каталогу /home корневой файловой системы.

Так вот, вы не можете создать в корневой файловой системе ссылку, которая ссылается на файл в файловой системе, под монтированной к каталогу /home.

Это очень важная особенность жестких ссылок.

Если вам нужно создать ссылку на файл, который находится за пределами файловой системы, вам следует использовать символические ссылки.

Для создания ссылок предназначена команда ln:

ln file.txt link1

ln -s file.txt link2

Первая команда создает жесткую ссылку link1, указывающую на текстовый файл file.txt.

Вторая команда создает символическую ссылку link2, которая ссылается на этот же текстовый файл file.txt.

Модифицируя ссылку (все равно какую — link1 или link2), вы автоматически изменяете исходный файл — file.txt.

Особого внимания заслуживает операция удаления.

По идее, если вы удаляете ссылку link2, файл file.txt также должен быть удален, но не тут-то было — вы не можете его удалить до тех пор, пока на него указывает хоть одна жесткая ссылка.

При удалении ссылки link2 просто будет удалена символическая ссылка, но жесткая ссылка и сам файл останутся.

Если же вы удалите ссылку link1, будет удален и файл file.txt, поскольку на него больше не указывает ни одна жесткая ссылка.

35. Команда chmod: права доступа к файлам и каталогам

Чтобы просмотреть текущие права доступа, введите команду:
ls -l <имя файла/каталога>

Рассмотрим фрагмент строки "-r--r-----" который описывает права доступа:
- первый символ — это признак каталога. Сейчас перед нами файл. 
  Если бы это был каталог, то первый символ был бы символом d (от англ. directory)
- последующие три символа (r--) определяют права доступа владельца файла или каталога. 
  Первый символ — это чтение, второй — запись, третий — выполнение.
  Как можно видеть, владельцу разрешено только чтение этого файла, запись и выполнение запрещены, поскольку в правах доступа режимы w и x не определены
- следующие три символа (r--) задают права доступа для членов группы владельца. 
  Права такие же, как и у владельца: можно читать файл, но нельзя изменять или запускать
- последние три символа (---) задают права доступа для прочих пользователей.
  Прочие пользователи не имеют права ни читать, ни изменять, ни выполнять файл. 
  При попытке получить доступ к файлу они увидят сообщение Access denied.

Права доступа задаются командой chmod. 
Существуют два способа указания прав доступа: символьный (когда указываются символы, задающие право доступа, — r, w, x) и абсолютный.
Возьмем отдельный набор прав, например для владельца: rw-
Чтение разрешено — мысленно записываем 1, запись разрешена — запоминаем еще 1, а вот выполнение запрещено, поэтому запоминаем 0. Получается число 110.
Если из двоичной системы перевести число 110 в восьмеричную, получится число 6.

Двоичная система      Восьмеричная система
000                   0
001                   1 
010                   2 
011                   3 
100                   4
101                   5
110                   6
111                   7

Для новичков я бы рекомендовал вот такой вот порядок запоминания rwx 421
4 - чтение - r
2 - запись - w
1 - выполнение - x

chmod 640 <имя_файла>
Наиболее популярные права доступа:
644 — владельцу можно читать и изменять файл, остальным пользователям — только читать
666 — читать и изменять файл можно всем пользователям;
777 — всем можно читать, изменять и выполнять файл.


Иногда символьный метод оказывается проще. 
Например, у нас есть файл script, который нужно сделать исполнимым, для этого можно применить команду:
chmod +x script
Для того чтобы снять право выполнения, указывается параметр -x:
chmod -x script
Подробнее о символьном методе вы сможете прочитать в руководстве по команде
chmod (выполнив команду man chmod).

Чтобы просмотреть текущие права доступа, введите команду:

ls -l <имя файла/каталога>

Рассмотрим фрагмент строки "-r--r-----" который описывает права доступа:

- первый символ — это признак каталога. Сейчас перед нами файл.

Если бы это был каталог, то первый символ был бы символом d (от англ. directory)

- последующие три символа (r--) определяют права доступа владельца файла или каталога.

Первый символ — это чтение, второй — запись, третий — выполнение.

Как можно видеть, владельцу разрешено только чтение этого файла, запись и выполнение запрещены, поскольку в правах доступа режимы w и x не определены

- следующие три символа (r--) задают права доступа для членов группы владельца.

Права такие же, как и у владельца: можно читать файл, но нельзя изменять или запускать

- последние три символа (---) задают права доступа для прочих пользователей.

Прочие пользователи не имеют права ни читать, ни изменять, ни выполнять файл.

При попытке получить доступ к файлу они увидят сообщение Access denied.

Права доступа задаются командой chmod.

Существуют два способа указания прав доступа: символьный (когда указываются символы, задающие право доступа, — r, w, x) и абсолютный.

Возьмем отдельный набор прав, например для владельца: rw-

Чтение разрешено — мысленно записываем 1, запись разрешена — запоминаем еще 1, а вот выполнение запрещено, поэтому запоминаем 0. Получается число 110.

Если из двоичной системы перевести число 110 в восьмеричную, получится число 6.

Двоичная система Восьмеричная система

000 0

001 1

010 2

011 3

100 4

101 5

110 6

111 7

Для новичков я бы рекомендовал вот такой вот порядок запоминания rwx 421

4 - чтение - r

2 - запись - w

1 - выполнение - x

chmod 640 <имя_файла>

Наиболее популярные права доступа:

644 — владельцу можно читать и изменять файл, остальным пользователям — только читать

666 — читать и изменять файл можно всем пользователям;

777 — всем можно читать, изменять и выполнять файл.

Иногда символьный метод оказывается проще.

Например, у нас есть файл script, который нужно сделать исполнимым, для этого можно применить команду:

chmod +x script

Для того чтобы снять право выполнения, указывается параметр -x:

chmod -x script

Подробнее о символьном методе вы сможете прочитать в руководстве по команде

chmod (выполнив команду man chmod).

36. Команда chown: смена владельца файла

Если вы хотите "подарить" кому-то файл, т. е. сделать какого-то пользователя владельцем файла, то вам нужно применить команду chown:
chown пользователь файл

ПРИМЕЧАНИЕ
Возможно, что после изменения владельца файла вы сами не сможете получить к нему доступ, ведь владельцем будете уже не вы.

Если вы хотите "подарить" кому-то файл, т. е. сделать какого-то пользователя владельцем файла, то вам нужно применить команду chown:

chown пользователь файл

ПРИМЕЧАНИЕ

Возможно, что после изменения владельца файла вы сами не сможете получить к нему доступ, ведь владельцем будете уже не вы.

37. Специальные права доступа (SUID и SGID)

Мы рассмотрели обычные права доступа к файлам, но в Linux есть еще так называемые специальные права доступа: 
SUID (Set User ID root) и SGID (Set Group ID root).
Данные права доступа позволяют обычным пользователям запускать программы, требующие для своего запуска привилегий пользователя root. 
Например, демон pppd требует привилегий root, но чтобы каждый раз при установке PPP-соединения (модемное, ADSL-соединение) не входить в систему под именем root, 
достаточно установить специальные права доступа для демона pppd. 

Делается это так:
chmod u+s /usr/sbin/pppd

Однако не нужно увлекаться такими решениями, поскольку каждая программа, для которой установлен бит SUID, является потенциальной "дырой" в безопасности вашей системы. 
Для выполнения программ, требующих прав root, намного рациональнее использовать программы sudo и su (описание которых можно получить по командам man sudo и man su).

Мы рассмотрели обычные права доступа к файлам, но в Linux есть еще так называемые специальные права доступа:

SUID (Set User ID root) и SGID (Set Group ID root).

Данные права доступа позволяют обычным пользователям запускать программы, требующие для своего запуска привилегий пользователя root.

Например, демон pppd требует привилегий root, но чтобы каждый раз при установке PPP-соединения (модемное, ADSL-соединение) не входить в систему под именем root,

достаточно установить специальные права доступа для демона pppd.

Делается это так:

chmod u+s /usr/sbin/pppd

Однако не нужно увлекаться такими решениями, поскольку каждая программа, для которой установлен бит SUID, является потенциальной "дырой" в безопасности вашей системы.

Для выполнения программ, требующих прав root, намного рациональнее использовать программы sudo и su (описание которых можно получить по командам man sudo и man su).

38. Команда chattr: атрибуты файла, запрет изменения файла

С помощью команды chattr можно изменить атрибуты файла. Параметр + устанавливает атрибут, а параметр — атрибут снимает.

Например:
# chattr +i /boot/grub/menu.lst
Данная команда устанавливает атрибут i, запрещающий любое изменение, переименование и удаление файла. 
Установить этот атрибут, равно как и снять его, имеет право только суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE. 

Чтобы изменить файл, нужно очистить атрибут с помощью команды:
# chattr -i /boot/grub/menu.lst

Если установить атрибут j, то все данные, прежде чем они будут записаны непосредственно в файл, будут сохранены в журнал ext3. 
Данный атрибут имеет смысл, только если файловая система смонтирована с опциями data=ordered или data=writeback. 
Когда файловая система смонтирована с опцией data=journal, этот атрибут не имеет значения, поскольку все данные файла и так уже журналируются.

Когда для файла установлен атрибут A (прописная буква), тогда не происходит обновление записи atime (в ней хранится время доступа к файлу). 
Это позволяет избежать лишних дисковых операций ввода/вывода, что полезно для медленных компьютеров.

Если для файла установлен атрибут a, в файл можно только добавлять данные. 
Этот атрибут имеет право установить (или очистить) суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE.
Атрибут c заставляет систему упаковывать (сжимать) содержимое файла, что позволяет сэкономить место на диске. 
При чтении из этого файла возвращаются несжатые данные. 
При записи в файл информация автоматически сжимается и записывается на диск в уже сжатом виде.

Когда изменяется каталог с установленным атрибутом D, изменения сразу же записываются на диск. 
Эквивалентно применению опции монтирования dirsync.

Если для файла установлен атрибут d, для него не будет выполнено резервное копирование программой dump.

Для файла с установленным атрибутом j его данные перед записью в файл сохраняются в журнале файловой системы ext3/ext4. 
Это происходит только, если файловая система смонтирована с опциями data=ordered или data=writeback. 
Если файловая система смонтирована с опцией data=journal, все данные уже и так журналируются и атрибут j никак на это не влияет. 
Этот атрибут имеет право установить(или очистить) суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE.

При изменении файла с установленным атрибутом S его данные синхронно записываются на диск. 
Аналогично опции монтирования sync к подмножеству файлов.
Когда удаляется файл с установленным атрибутом s, система выполняет обнуление его блоков и запись их обратно на диск.
При удалении файла с атрибутом u его содержимое сохраняется на диске, что позволяет впоследствии легко восстановить этот файл.

Атрибуты X и Z используются экспериментальными заплатками сжатия для служебных целей.
Установить любой атрибут можно командой chattr, а просмотреть — командой lsattr. 

Об остальных атрибутах вы сможете прочитать в справочной системе:
man chattr

С помощью команды chattr можно изменить атрибуты файла. Параметр + устанавливает атрибут, а параметр — атрибут снимает.

Например:

# chattr +i /boot/grub/menu.lst

Данная команда устанавливает атрибут i, запрещающий любое изменение, переименование и удаление файла.

Установить этот атрибут, равно как и снять его, имеет право только суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE.

Чтобы изменить файл, нужно очистить атрибут с помощью команды:

# chattr -i /boot/grub/menu.lst

Если установить атрибут j, то все данные, прежде чем они будут записаны непосредственно в файл, будут сохранены в журнал ext3.

Данный атрибут имеет смысл, только если файловая система смонтирована с опциями data=ordered или data=writeback.

Когда файловая система смонтирована с опцией data=journal, этот атрибут не имеет значения, поскольку все данные файла и так уже журналируются.

Когда для файла установлен атрибут A (прописная буква), тогда не происходит обновление записи atime (в ней хранится время доступа к файлу).

Это позволяет избежать лишних дисковых операций ввода/вывода, что полезно для медленных компьютеров.

Если для файла установлен атрибут a, в файл можно только добавлять данные.

Этот атрибут имеет право установить (или очистить) суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE.

Атрибут c заставляет систему упаковывать (сжимать) содержимое файла, что позволяет сэкономить место на диске.

При чтении из этого файла возвращаются несжатые данные.

При записи в файл информация автоматически сжимается и записывается на диск в уже сжатом виде.

Когда изменяется каталог с установленным атрибутом D, изменения сразу же записываются на диск.

Эквивалентно применению опции монтирования dirsync.

Если для файла установлен атрибут d, для него не будет выполнено резервное копирование программой dump.

Для файла с установленным атрибутом j его данные перед записью в файл сохраняются в журнале файловой системы ext3/ext4.

Это происходит только, если файловая система смонтирована с опциями data=ordered или data=writeback.

Если файловая система смонтирована с опцией data=journal, все данные уже и так журналируются и атрибут j никак на это не влияет.

Этот атрибут имеет право установить(или очистить) суперпользователь или процесс с возможностью CAP_LINUX_IMMUTABLE.

При изменении файла с установленным атрибутом S его данные синхронно записываются на диск.

Аналогично опции монтирования sync к подмножеству файлов.

Когда удаляется файл с установленным атрибутом s, система выполняет обнуление его блоков и запись их обратно на диск.

При удалении файла с атрибутом u его содержимое сохраняется на диске, что позволяет впоследствии легко восстановить этот файл.

Атрибуты X и Z используются экспериментальными заплатками сжатия для служебных целей.

Установить любой атрибут можно командой chattr, а просмотреть — командой lsattr.

Об остальных атрибутах вы сможете прочитать в справочной системе:

man chattr

39. Команды mount и umount

Как уже было отмечено, для Linux нет разницы между устройством и файлом. 
Все устройства системы представлены в корневой файловой системе как обычные файлы.
Например, /dev/fd0 — это ваш дисковод для гибких дисков, /dev/hda (/dev/sda) — жесткий диск. 
Файлы устройств хранятся в каталоге /dev.

mount [опции] <устройство> <точка монтирования>
Точка монтирования — это каталог, через который будет осуществляться доступ к монтируемой файловой системе.
mount /dev/cdrom /mnt/cdrom
mount /dev/sdb /mnt/cdrom
mount /dev/cdrom /mnt/cdrom
mount /dev/dvd /mnt/cdrom
mount /dev/fd0 /mnt/floppy
mount /dev/fd1 /mnt/floppy
mount /dev/sdb1 /mnt/usbdisk

Нужно отметить, что CD/DVD-приводы, а также USB-накопители монтируются автоматически (к каталогу /media/<ID накопителя>), 
поэтому все, что было сказано о монтировании таких носителей, — исключительно для общего развития

Для размонтирования файловой системы применяется команда umount:
# umount <устройство или точка монтирования>
umount /mnt/cdrom


Опции монтирования файловых систем
У команды mount довольно много опций, но на практике наиболее часто используются только некоторые из них: -t, -r, -w, -a.
Параметр -t позволяет задать тип файловой системы. 
Обычно программа сама определяет файловую систему, но иногда это у нее не получается. 
Тогда мы должны ей помочь. 
Формат использования этого параметра следующий
mount -t <файловая система> <устройство> <точка монтирования>
Например:
mount -t iso9660 /dev/hdc /mnt/cdrom

Вот опции для указания наиболее популярных монтируемых файловых систем:
ext2 или ext3 — файловая система Linux
iso9660 — указывается при монтировании CD-ROM
vfat — FAT, FAT32 (поддерживается Windows 9x, ME, XP)
ntfs — NT File System (поддерживается Windows NT, XP), будет использована стандартная поддержка NTFS, при которой NTFS-раздел доступен только для чтения
ntfs-3g — будет использован модуль ntfs-3g, входящий в большинство современных дистрибутивов. Данный модуль позволяет производить запись информации на NTFS-разделы.

Параметр -r монтирует указанную файловую систему в режиме "только чтение".

Параметр -w монтирует файловую систему в режиме "чтение/запись". 
Данный параметр используется по умолчанию для файловых систем, 
поддерживающих запись (например, NTFS по умолчанию запись не поддерживает, как и файловые системы CD/DVD-дисков).

Параметр –a используется для монтирования всех файловых систем, указанных в файле /etc/fstab (кроме тех, для которых указано noauto — такие файловые системы нужно монтировать вручную). При загрузке системы вызывается команда mount с параметром -a. 
mount -a - часто используется для проверки правильной правки файла "/etc/fstab" (добавили nfs) без перезагрузки системы.

Если вы не можете смонтировать NTFS-раздел с помощью опции ntfs-3g, то, вероятнее всего, 
он был неправильно размонтирован (например, работа Windows не была завершена корректно). 
В этом случае для монтирования раздела нужно использовать опцию –o force, например:
sudo mount -t ntfs-3g /dev/sdb1 /media/usb -o force

Если вы не хотите при каждой загрузке монтировать постоянные файловые системы (например, ваши Windows-разделы), то вам нужно прописать их в файле /etc/fstab
формат файла fstab:
устройство точка_монтирования тип_ФС опции флаг_РК флаг_проверки

Здесь: тип_ФС — это тип файловой системы, а флаг_РК — флаг резервного копирования. 
Если он установлен (1), то программа dump заархивирует данную файловую систему при создании резервной копии. 
Если не установлен (0), то резервная копия этой файловой системы создаваться не будет. 
Флаг проверки устанавливает, будет ли данная файловая система проверяться на наличие ошибок программой fsck.
Проверка производится в двух случаях:
- если файловая система размонтирована некорректно;
- если достигнуто максимальное число операций монтирования для этой файловой системы.

С появлением системы инициализации systemd файл /etc/fstab стал далеко не единственным источником автоматического монтирования файловых систем. 
Он все еще поддерживается, и все, что здесь сказано об fstab, верно, но systemd позволяет монтировать файловые системы другим способом.
Опции монтирования файловой системы в файле /etc/fstab

auto Файловая система должна монтироваться автоматически при загрузке. 
     Опция используется по умолчанию, поэтому ее указывать не обязательно 

noauto Файловая система не монтируется при загрузке системы (при выполнении команды mount -a), 
       но ее можно смонтировать вручную с помощью все той же команды mount

defaults Используется стандартный набор опций, установленных по умолчанию

exec Разрешает запуск выполняемых файлов для данной файловой системы. 
     Эта опция используется по умолчанию

noexec Запрещает запуск выполняемых файлов для данной файловой системы 

ro Монтирование в режиме "только чтение"

rw Монтирование в режиме "чтение/запись". Используется по умолчанию для файловых систем, поддерживающих запись

user Данную файловую систему разрешается монтировать/размонтировать обычному пользователю (не root)

nouser Файловую систему может монтировать только пользователь root. 
       Используется по умолчанию

umask Определяет маску прав доступа при создании файлов. Для файловых систем, не Linux-подобных, маску нужно установить так: umask=0

utf8 Применяется только на дистрибутивах, которые используют кодировку UTF-8 в качестве кодировки локали. 
     В старых дистрибутивах (где используется KOI8-R) для корректного отображения русских имен файлов на Windows-разделах нужно задать параметры iocharset=koi8-u,codepage=866

Как уже было отмечено, для Linux нет разницы между устройством и файлом.

Все устройства системы представлены в корневой файловой системе как обычные файлы.

Например, /dev/fd0 — это ваш дисковод для гибких дисков, /dev/hda (/dev/sda) — жесткий диск.

Файлы устройств хранятся в каталоге /dev.

mount [опции] <устройство> <точка монтирования>

Точка монтирования — это каталог, через который будет осуществляться доступ к монтируемой файловой системе.

mount /dev/cdrom /mnt/cdrom

mount /dev/sdb /mnt/cdrom

mount /dev/cdrom /mnt/cdrom

mount /dev/dvd /mnt/cdrom

mount /dev/fd0 /mnt/floppy

mount /dev/fd1 /mnt/floppy

mount /dev/sdb1 /mnt/usbdisk

Нужно отметить, что CD/DVD-приводы, а также USB-накопители монтируются автоматически (к каталогу /media/<ID накопителя>),

поэтому все, что было сказано о монтировании таких носителей, — исключительно для общего развития

Для размонтирования файловой системы применяется команда umount:

# umount <устройство или точка монтирования>

umount /mnt/cdrom

Опции монтирования файловых систем

У команды mount довольно много опций, но на практике наиболее часто используются только некоторые из них: -t, -r, -w, -a.

Параметр -t позволяет задать тип файловой системы.

Обычно программа сама определяет файловую систему, но иногда это у нее не получается.

Тогда мы должны ей помочь.

Формат использования этого параметра следующий

mount -t <файловая система> <устройство> <точка монтирования>

Например:

mount -t iso9660 /dev/hdc /mnt/cdrom

Вот опции для указания наиболее популярных монтируемых файловых систем:

ext2 или ext3 — файловая система Linux

iso9660 — указывается при монтировании CD-ROM

vfat — FAT, FAT32 (поддерживается Windows 9x, ME, XP)

ntfs — NT File System (поддерживается Windows NT, XP), будет использована стандартная поддержка NTFS, при которой NTFS-раздел доступен только для чтения

ntfs-3g — будет использован модуль ntfs-3g, входящий в большинство современных дистрибутивов. Данный модуль позволяет производить запись информации на NTFS-разделы.

Параметр -r монтирует указанную файловую систему в режиме "только чтение".

Параметр -w монтирует файловую систему в режиме "чтение/запись".

Данный параметр используется по умолчанию для файловых систем,

поддерживающих запись (например, NTFS по умолчанию запись не поддерживает, как и файловые системы CD/DVD-дисков).

Параметр –a используется для монтирования всех файловых систем, указанных в файле /etc/fstab (кроме тех, для которых указано noauto — такие файловые системы нужно монтировать вручную). При загрузке системы вызывается команда mount с параметром -a.

mount -a - часто используется для проверки правильной правки файла "/etc/fstab" (добавили nfs) без перезагрузки системы.

Если вы не можете смонтировать NTFS-раздел с помощью опции ntfs-3g, то, вероятнее всего,

он был неправильно размонтирован (например, работа Windows не была завершена корректно).

В этом случае для монтирования раздела нужно использовать опцию –o force, например:

sudo mount -t ntfs-3g /dev/sdb1 /media/usb -o force

Если вы не хотите при каждой загрузке монтировать постоянные файловые системы (например, ваши Windows-разделы), то вам нужно прописать их в файле /etc/fstab

формат файла fstab:

устройство точка_монтирования тип_ФС опции флаг_РК флаг_проверки

Здесь: тип_ФС — это тип файловой системы, а флаг_РК — флаг резервного копирования.

Если он установлен (1), то программа dump заархивирует данную файловую систему при создании резервной копии.

Если не установлен (0), то резервная копия этой файловой системы создаваться не будет.

Флаг проверки устанавливает, будет ли данная файловая система проверяться на наличие ошибок программой fsck.

Проверка производится в двух случаях:

- если файловая система размонтирована некорректно;

- если достигнуто максимальное число операций монтирования для этой файловой системы.

С появлением системы инициализации systemd файл /etc/fstab стал далеко не единственным источником автоматического монтирования файловых систем.

Он все еще поддерживается, и все, что здесь сказано об fstab, верно, но systemd позволяет монтировать файловые системы другим способом.

Опции монтирования файловой системы в файле /etc/fstab

auto Файловая система должна монтироваться автоматически при загрузке.

Опция используется по умолчанию, поэтому ее указывать не обязательно

noauto Файловая система не монтируется при загрузке системы (при выполнении команды mount -a),

но ее можно смонтировать вручную с помощью все той же команды mount

defaults Используется стандартный набор опций, установленных по умолчанию

exec Разрешает запуск выполняемых файлов для данной файловой системы.

Эта опция используется по умолчанию

noexec Запрещает запуск выполняемых файлов для данной файловой системы

ro Монтирование в режиме "только чтение"

rw Монтирование в режиме "чтение/запись". Используется по умолчанию для файловых систем, поддерживающих запись

user Данную файловую систему разрешается монтировать/размонтировать обычному пользователю (не root)

nouser Файловую систему может монтировать только пользователь root.

Используется по умолчанию

umask Определяет маску прав доступа при создании файлов. Для файловых систем, не Linux-подобных, маску нужно установить так: umask=0

utf8 Применяется только на дистрибутивах, которые используют кодировку UTF-8 в качестве кодировки локали.

В старых дистрибутивах (где используется KOI8-R) для корректного отображения русских имен файлов на Windows-разделах нужно задать параметры iocharset=koi8-u,codepage=866

40. Переход на ext4

ВНИМАНИЕ!
На момент ввода этой команды устройство должно быть размонтировано.
Если нужно преобразовать в ext4 корневую файловую систему, то данную команду следует вводить с LiveCD, поддерживающего ext4.

Если вы при установке системы выбрали файловую систему ext3, то перейти на ext4 можно без потери данных и в любой удобный для вас момент. 
Откройте терминал и введите команду:
sudo tune2fs -O extents,uninit_bg,dir_index /dev/имя_устройства

После этого проверим файловую систему:
sudo fsck -pf /dev/имя_устройства

Затем смонтируем файловую систему так:
mount -t ext4 /dev/имя_устройства /точка_монтирования
mount -t ext4 /dev/disk/by-uuid/UUID-устройства /точка_монтирования

Если раздел автоматически монтируется через /etc/fstab, не забудьте исправить файловую систему на ext4:
UUID=UUID-раздела /точка ext4 defaults,errors=remount-ro,relatime 0 1



Монтирование каталога к каталогу
В Linux можно подмонтировать каталог к каталогу, а не только каталог к устройству. 
Делается это с помощью все той же команды mount, запущенной с параметром --bind:
mount --bind исходный_каталог каталог_назначения

ВНИМАНИЕ!

На момент ввода этой команды устройство должно быть размонтировано.

Если нужно преобразовать в ext4 корневую файловую систему, то данную команду следует вводить с LiveCD, поддерживающего ext4.

Если вы при установке системы выбрали файловую систему ext3, то перейти на ext4 можно без потери данных и в любой удобный для вас момент.

Откройте терминал и введите команду:

sudo tune2fs -O extents,uninit_bg,dir_index /dev/имя_устройства

После этого проверим файловую систему:

sudo fsck -pf /dev/имя_устройства

Затем смонтируем файловую систему так:

mount -t ext4 /dev/имя_устройства /точка_монтирования

mount -t ext4 /dev/disk/by-uuid/UUID-устройства /точка_монтирования

Если раздел автоматически монтируется через /etc/fstab, не забудьте исправить файловую систему на ext4:

UUID=UUID-раздела /точка ext4 defaults,errors=remount-ro,relatime 0 1

Монтирование каталога к каталогу

В Linux можно подмонтировать каталог к каталогу, а не только каталог к устройству.

Делается это с помощью все той же команды mount, запущенной с параметром --bind:

mount --bind исходный_каталог каталог_назначения

41. Команда chroot: смена корневой файловой системы

Предположим, мы установили Windows после установки Linux, и программа установки Windows перезаписала начальный загрузчик. 
Теперь Windows загружается, а Linux — нет. Что делать? 
Нужно загрузиться с LiveCD  и выполнить команду:
chroot <раздел, содержащий корневую файловую систему>

Например, если Linux был установлен в раздел /dev/sda5, то нужно ввести команду:
chroot /dev/sda5

Данная команда сменит корневую файловую систему, т. е. вы загрузите ядро Linux с LiveCD, а затем сделаете подмену корневой файловой системы. 
Вам останется только ввести команду записи загрузчика (например, lilo) для восстановления начального загрузчика.

Например livecd SGD:
1) Загружаемся с  Super Grub Disk 
2) Выбираем авто поиск системы на разделах
3) Грузимся в нашу систему
4) Чиним загрузчик из под нашей системы
update-grub - обновление меню загрузчика 
grub-install /dev/sda - установка загрузчика на диск /dec/sda

Предположим, мы установили Windows после установки Linux, и программа установки Windows перезаписала начальный загрузчик.

Теперь Windows загружается, а Linux — нет. Что делать?

Нужно загрузиться с LiveCD и выполнить команду:

chroot <раздел, содержащий корневую файловую систему>

Например, если Linux был установлен в раздел /dev/sda5, то нужно ввести команду:

chroot /dev/sda5

Данная команда сменит корневую файловую систему, т. е. вы загрузите ядро Linux с LiveCD, а затем сделаете подмену корневой файловой системы.

Вам останется только ввести команду записи загрузчика (например, lilo) для восстановления начального загрузчика.

Например livecd SGD:

1) Загружаемся с Super Grub Disk

2) Выбираем авто поиск системы на разделах

3) Грузимся в нашу систему

4) Чиним загрузчик из под нашей системы

update-grub - обновление меню загрузчика

grub-install /dev/sda - установка загрузчика на диск /dec/sda

42. Команды поиска файлов

Синтаксис команды следующий:
find список_поиска выражение

Мощность программы find заключается в множестве самых разных параметров поиска, которые не так легко запомнить — их просто много. 
К тому же find может выполнять команды для найденных файлов. 
Например, вы можете найти временные файлы и сразу удалить их.

Найти файлы с именем a.out (точнее, в имени которых содержится строка "a.out"), поиск начать с корневого каталога (/):
find / -name a.out

Найти файлы по маске *.txt:
find / -name '*.txt'

Найти файлы нулевого размера, поиск начать с текущего каталога (.):
find . -size 0c

Хотя для поиска пустых файлов намного проще использовать параметр -empty:
find . -empty

Найти файлы, размер которых от 100 до 150 Мбайт, поиск производить в домашнем каталоге и всех его подкаталогах:
find ~ -size +100M -size -150M

Синтаксис команды следующий:

find список_поиска выражение

Мощность программы find заключается в множестве самых разных параметров поиска, которые не так легко запомнить — их просто много.

К тому же find может выполнять команды для найденных файлов.

Например, вы можете найти временные файлы и сразу удалить их.

Найти файлы с именем a.out (точнее, в имени которых содержится строка "a.out"), поиск начать с корневого каталога (/):

find / -name a.out

Найти файлы по маске *.txt:

find / -name '*.txt'

Найти файлы нулевого размера, поиск начать с текущего каталога (.):

find . -size 0c

Хотя для поиска пустых файлов намного проще использовать параметр -empty:

find . -empty

Найти файлы, размер которых от 100 до 150 Мбайт, поиск производить в домашнем каталоге и всех его подкаталогах:

find ~ -size +100M -size -150M

43. Команды kill, killall, xkill и ps

Формат ее вызова следующий:
kill [параметры] PID

ps –ax | grep <имя>
Например:
ps –ax | grep firefox

kill PID

pkill firefox

"Убить" процесс можно по-разному. "Убийство" процесса на самом деле сопровождается посылкой процессу определенного системного сигнала. 
Наиболее распространенные сигналы, используемые для завершения процесса:
HUP (1) — полезен для программ-демонов. Получив этот сигнал, демон (служба) обязан перезапуститься (или перечитать файл конфигурации). 
          Обычная программа, получив такой сигнал, завершается

INT (2) — прерывание, именно этот сигнал посылается, когда вы нажимаете комбинацию клавиш <Ctrl>+<C>;

KILL (9) — аварийное завершение процесса, программа не может игнорировать этот сигнал или как-то его обработать;

TERM (15) — "мягкое" завершение программы (именно этот сигнал посылается программой kill по умолчанию). 
             Программа, получив этот сигнал, должна корректно завершиться, например, освободить все занятые ресурсы, сохранить все данные. 
             Обычно такой сигнал равносилен нормальному выходу из программы.
             В случае с "сильно" зависшими процессами толку от этого сигнала мало, нужно использовать KILL

STOP (19) — приостанавливает выполнение процесса, этот сигнал нельзя обработать или игнорировать

CONT (18) — возобновляет выполнение процесса

Чтобы полностью "убить" процесс, нужно передать ему сигнал 9 (KILL):
# kill -9 <PID>

Кроме команды kill пользователи, предпочитающие графический интерфейс, могут применять программу xkill, позволяющую "убить" графическую программу.
Введите команду xkill, указатель мыши изменится на череп, который нужно навести на окно зависшей программы и щелкнуть мышью.

Обычно используется вот так вот:
Жмем кнопки alt+f2 
Печатаем xkill
Кликаем мышкой в зависшие окно



htop
PID Идентификатор процесса
USER Имя пользователя, запустившего процесс
PR Приоритет процесса
NI Значение nice
VIRT Виртуальная память, использованная процессом (в килобайтах)
RES Размер процесса, не перемещенный в область подкачки (в килобайтах) 
    Этот размер равен размерам сегментов кода и данных, т. е. RES = CODE + DATA
S Состояние процесса
   R — выполняется
   S — "спит" (режим ожидания), в этом состоянии процесс выгружен из оперативной памяти в область подкачки
   D — "непрерываемый сон" (uninterruptible sleep), из такого состояния процесс может вывести только прямым сигналом от оборудования
   T — процесс в состоянии трассировки или остановлен
   Z ("зомби") — специальное состояние процесса, когда сам процесс уже завершен, но его структура еще осталась в памяти
%CPU Занимаемое процессом процессорное время
%MEM Использование памяти процессом
TIME+ Процессорное время, израсходованное с момента запуска процесса
COMMAND Команда, которая использовалась для запуска процесса (обычно имя исполнимого файла процесса)

Формат ее вызова следующий:

kill [параметры] PID

ps –ax | grep <имя>

Например:

ps –ax | grep firefox

kill PID

pkill firefox

"Убить" процесс можно по-разному. "Убийство" процесса на самом деле сопровождается посылкой процессу определенного системного сигнала.

Наиболее распространенные сигналы, используемые для завершения процесса:

HUP (1) — полезен для программ-демонов. Получив этот сигнал, демон (служба) обязан перезапуститься (или перечитать файл конфигурации).

Обычная программа, получив такой сигнал, завершается

INT (2) — прерывание, именно этот сигнал посылается, когда вы нажимаете комбинацию клавиш <Ctrl>+<C>;

KILL (9) — аварийное завершение процесса, программа не может игнорировать этот сигнал или как-то его обработать;

TERM (15) — "мягкое" завершение программы (именно этот сигнал посылается программой kill по умолчанию).

Программа, получив этот сигнал, должна корректно завершиться, например, освободить все занятые ресурсы, сохранить все данные.

Обычно такой сигнал равносилен нормальному выходу из программы.

В случае с "сильно" зависшими процессами толку от этого сигнала мало, нужно использовать KILL

STOP (19) — приостанавливает выполнение процесса, этот сигнал нельзя обработать или игнорировать

CONT (18) — возобновляет выполнение процесса

Чтобы полностью "убить" процесс, нужно передать ему сигнал 9 (KILL):

# kill -9 <PID>

Кроме команды kill пользователи, предпочитающие графический интерфейс, могут применять программу xkill, позволяющую "убить" графическую программу.

Введите команду xkill, указатель мыши изменится на череп, который нужно навести на окно зависшей программы и щелкнуть мышью.

Обычно используется вот так вот:

Жмем кнопки alt+f2

Печатаем xkill

Кликаем мышкой в зависшие окно

htop

PID Идентификатор процесса

USER Имя пользователя, запустившего процесс

PR Приоритет процесса

NI Значение nice

VIRT Виртуальная память, использованная процессом (в килобайтах)

RES Размер процесса, не перемещенный в область подкачки (в килобайтах)

Этот размер равен размерам сегментов кода и данных, т. е. RES = CODE + DATA

S Состояние процесса

R — выполняется

S — "спит" (режим ожидания), в этом состоянии процесс выгружен из оперативной памяти в область подкачки

D — "непрерываемый сон" (uninterruptible sleep), из такого состояния процесс может вывести только прямым сигналом от оборудования

T — процесс в состоянии трассировки или остановлен

Z ("зомби") — специальное состояние процесса, когда сам процесс уже завершен, но его структура еще осталась в памяти

%CPU Занимаемое процессом процессорное время

%MEM Использование памяти процессом

TIME+ Процессорное время, израсходованное с момента запуска процесса

COMMAND Команда, которая использовалась для запуска процесса (обычно имя исполнимого файла процесса)

44. Команды nice и renice: изменение приоритета процесса

Предположим, что вы работаете с видео и вам нужно перекодировать файл из одного видеоформата в другой. 
Конвертирование видео занимает много процессорного времени, а хотелось бы все сделать как можно быстрее и уйти раньше домой.
Тогда вам поможет программа nice — она позволяет запустить любую программу с указанным приоритетом. 
Ясно — чем выше приоритет, тем быстрее будет выполняться программа. 
Формат вызова команды следующий:
nice -n <приоритет> команда аргументы
Максимальный приоритет задается числом −20, а минимальный — числом 19. 
Приоритет по умолчанию равен 10.
Если процесс уже запущен, тогда для изменения его приоритета можно использовать команду renice:
renice –n <приоритет> -p PID

Предположим, что вы работаете с видео и вам нужно перекодировать файл из одного видеоформата в другой.

Конвертирование видео занимает много процессорного времени, а хотелось бы все сделать как можно быстрее и уйти раньше домой.

Тогда вам поможет программа nice — она позволяет запустить любую программу с указанным приоритетом.

Ясно — чем выше приоритет, тем быстрее будет выполняться программа.

Формат вызова команды следующий:

nice -n <приоритет> команда аргументы

Максимальный приоритет задается числом −20, а минимальный — числом 19.

Приоритет по умолчанию равен 10.

Если процесс уже запущен, тогда для изменения его приоритета можно использовать команду renice:

renice –n <приоритет> -p PID

45. Команда fuser: кто открыл ресурс?

Иногда очень полезно знать, какая программа использует тот или иной порт или файл (каталог). 
В Windows для этого нужно устанавливать дополнительные программы сторонних разработчиков, в Linux применяется штатная команда fuser.

Рассмотрим примеры ее использования:
fuser -va 22/tcp
fuser -va /home/user/report.doc
sudo fuser -k -TERM -m /home/user/report.doc

Первая команда показывает PID процесса, использующего порт 22. 
Вторая демонстрирует, какой процесс имеет доступ к файлу /home/user/report.doc. 
А третья команда завершает все процессы (отправляет им сигнал TERM), которые используют  файл /home/user/report.doc.

Иногда очень полезно знать, какая программа использует тот или иной порт или файл (каталог).

В Windows для этого нужно устанавливать дополнительные программы сторонних разработчиков, в Linux применяется штатная команда fuser.

Рассмотрим примеры ее использования:

fuser -va 22/tcp

fuser -va /home/user/report.doc

sudo fuser -k -TERM -m /home/user/report.doc

Первая команда показывает PID процесса, использующего порт 22.

Вторая демонстрирует, какой процесс имеет доступ к файлу /home/user/report.doc.

А третья команда завершает все процессы (отправляет им сигнал TERM), которые используют файл /home/user/report.doc.

46. Команда cmp: сравнение двух файлов

Команда cmp используется для сравнения двух файлов. 
Если файлы идентичны, то cmp вообще никак не реагирует. 
А вот если файлы отличаются, то cmp выводит номер строки и номер символа в строке, откуда начинается различие.
Команда cmp более универсальна, поскольку она может использоваться как для сравнения текстовых, так и двоичных файлов. 
А вот команда diff и ее аналоги умеют сравнивать только текстовые файлы.

Формат вызова команды следующий:
cmp [параметры] файл1 файл2

Параметры:
-c Вывод отличающихся символов
-i n Игнорировать первые n символов
-l Вывод позиций всех отличий, а не только первого
-s Не выводить информацию на экран, при этом код возврата будет следующим:
    0 — файлы одинаковые
    1 — файлы отличаются
    2 — ошибка при открытии одного из файлов

Команда cmp используется для сравнения двух файлов.

Если файлы идентичны, то cmp вообще никак не реагирует.

А вот если файлы отличаются, то cmp выводит номер строки и номер символа в строке, откуда начинается различие.

Команда cmp более универсальна, поскольку она может использоваться как для сравнения текстовых, так и двоичных файлов.

А вот команда diff и ее аналоги умеют сравнивать только текстовые файлы.

Формат вызова команды следующий:

cmp [параметры] файл1 файл2

Параметры:

-c Вывод отличающихся символов

-i n Игнорировать первые n символов

-l Вывод позиций всех отличий, а не только первого

-s Не выводить информацию на экран, при этом код возврата будет следующим:

0 — файлы одинаковые

1 — файлы отличаются

2 — ошибка при открытии одного из файлов

47. Команда column: разбивка текста на столбцы

Команда column используется для разбивки текста на несколько столбцов. 
Текст может быть прочитан как из файла, так и со стандартного ввода, если файл не указан.
Формат вызова команды:
column [параметры] [файл]

Параметры:
-c n Задает количество столбцов (число n)
-s символ Указанный символ будет использоваться в качестве разделителя столбцов
-t Текст будет форматироваться как таблицы. 
   По умолчанию разделителем полей считается пробел, но с помощью параметра -s можно задать другой разделитель
-x Сначала будут заполняться столбцы, а потом строки

Команда column используется для разбивки текста на несколько столбцов.

Текст может быть прочитан как из файла, так и со стандартного ввода, если файл не указан.

Формат вызова команды:

column [параметры] [файл]

Параметры:

-c n Задает количество столбцов (число n)

-s символ Указанный символ будет использоваться в качестве разделителя столбцов

-t Текст будет форматироваться как таблицы.

По умолчанию разделителем полей считается пробел, но с помощью параметра -s можно задать другой разделитель

-x Сначала будут заполняться столбцы, а потом строки

48. Команда comm: еще одна команда для сравнения файлов

Команда comm сравнивает содержимое двух файлов, которые были перед этим отсортированы командой sort. 
Вывод программы располагается в три столбца.
В первом выводятся строки из файла1, во втором — из файла2, а в третьем — строки, которые имеются в обоих файлах.

Формат вызова программы следующий:
comm [параметры] файл1 файл2

Параметры:
-1 Не выводить первый столбец
-2 Не выводить второй столбец
-3 Не выводить третий столбец
-12 Будет выведен только третий столбец
-13 Будет выведен только второй столбец
-23 Вывод только первого столбца

Команда comm сравнивает содержимое двух файлов, которые были перед этим отсортированы командой sort.

Вывод программы располагается в три столбца.

В первом выводятся строки из файла1, во втором — из файла2, а в третьем — строки, которые имеются в обоих файлах.

Формат вызова программы следующий:

comm [параметры] файл1 файл2

Параметры:

-1 Не выводить первый столбец

-2 Не выводить второй столбец

-3 Не выводить третий столбец

-12 Будет выведен только третий столбец

-13 Будет выведен только второй столбец

-23 Вывод только первого столбца

49. Команда diff: сравнение файлов

Команда используется для сравнения двух файлов. 
Формат вызова программы diff:
diff [параметры] файл1 файл2

В выводе программы отличающиеся строки помечаются символами ">" и "<":
- строка из первого файла помечается символом "<"
-  строка из второго файла — символом ">"

Параметры:
-a Сравнение всех файлов, в том числе бинарных
-b Программа будет игнорировать пробельные символы в конце строки
-B Игнорирует пустые строки
-e Применяется для создания сценария для редактора ed, который будет использоваться для превращения первого файла во второй
-w Игнорирует пробельные символы
-y Вывод в два столбца
-r Используется для сравнения файлов в подкаталогах. Вместо первого файла указывается первый каталог, вместо второго файла — соответственно второй каталог

Команда используется для сравнения двух файлов.

Формат вызова программы diff:

diff [параметры] файл1 файл2

В выводе программы отличающиеся строки помечаются символами ">" и "<":

- строка из первого файла помечается символом "<"

- строка из второго файла — символом ">"

Параметры:

-a Сравнение всех файлов, в том числе бинарных

-b Программа будет игнорировать пробельные символы в конце строки

-B Игнорирует пустые строки

-e Применяется для создания сценария для редактора ed, который будет использоваться для превращения первого файла во второй

-w Игнорирует пробельные символы

-y Вывод в два столбца

-r Используется для сравнения файлов в подкаталогах. Вместо первого файла указывается первый каталог, вместо второго файла — соответственно второй каталог

50. Команда diff3: сравнение трех файлов

Похожа на команду diff, только используется для сравнения трех файлов. 
Формат вызова команды таков:
diff3 [параметры] файл1 файл2 файл3

Программа выводит следующую информацию:
==== — все три файла разные
===1 — первый файл отличается от второго и третьего
===2 — второй файл отличается от первого и третьего
===3 — третий файл отличается от первого и второго

Параметры:
-a Сравнивать файлы как текстовые, даже если они являются бинарными
-A Создание сценария для редактора ed, который показывает в квадратных скобках все отличия между файлами
-e Создает сценарий для ed, который помещает все отличия между файлами файл2 и файл3 в файл файл1 (будьте осторожны!)
-i Добавить команды w (сохранить файл) и q (выйти) в конец сценария ed
-x Создание сценария редактора ed, который помещает отличия между файлами в файл файл1
-X То же, что и -x, но отличия выделяются
-3 Создает сценарии d, который помещает все различия между файлами файл1 и файл3 в файл1

Похожа на команду diff, только используется для сравнения трех файлов.

Формат вызова команды таков:

diff3 [параметры] файл1 файл2 файл3

Программа выводит следующую информацию:

==== — все три файла разные

===1 — первый файл отличается от второго и третьего

===2 — второй файл отличается от первого и третьего

===3 — третий файл отличается от первого и второго

Параметры:

-a Сравнивать файлы как текстовые, даже если они являются бинарными

-A Создание сценария для редактора ed, который показывает в квадратных скобках все отличия между файлами

-e Создает сценарий для ed, который помещает все отличия между файлами файл2 и файл3 в файл файл1 (будьте осторожны!)

-i Добавить команды w (сохранить файл) и q (выйти) в конец сценария ed

-x Создание сценария редактора ed, который помещает отличия между файлами в файл файл1

-X То же, что и -x, но отличия выделяются

-3 Создает сценарии d, который помещает все различия между файлами файл1 и файл3 в файл1

51. Команда egrep: расширенный текстовый фильтр

Производит поиск строки в одном или нескольких файлах. 
Команда egrep похожа на команду grep (которая будет описана позже), но считается более быстрой и более функциональной. 
Если файлы не заданы, то программа читает текст из стандартного ввода.

Формат вызова программы:
egrep [параметры] строка файлы

Параметры:
-A n Вывод n строк после строки, в которой есть искомая строка
-B n Вывод n строк перед строкой, содержащей искомую строку
-b Выводит для каждой строки файла, где есть искомая строка, ее положение в файле
-c Выводит количество совпадений, но не выводит сами совпадения
-C Выводит две строки до и две строки после строки, которая содержит искомую строку
-e строка Используйте данный параметр, если искомая строка начинается с символа "-"
-f файл Производит поиск искомых строк, которые имеются в указанном файле
-h Выводит строки, содержащие искомую строку, но не выводит имена содержащих их файлов
-i Игнорировать регистр букв
-n Выводит номера строк (и сами строки), содержащих искомую строку
-s Не выводить сообщения об ошибке, если некоторые файлы не могут быть открыты
-w Поиск совпадения целого слова с искомой строкой
-x Поиск совпадения целой строки с искомой строкой

Пример использования:
egrep "ppp [11]" *
Данная команда ищет строку, заключенную в кавычки во всех файлах в текущем каталоге.

Производит поиск строки в одном или нескольких файлах.

Команда egrep похожа на команду grep (которая будет описана позже), но считается более быстрой и более функциональной.

Если файлы не заданы, то программа читает текст из стандартного ввода.

Формат вызова программы:

egrep [параметры] строка файлы

Параметры:

-A n Вывод n строк после строки, в которой есть искомая строка

-B n Вывод n строк перед строкой, содержащей искомую строку

-b Выводит для каждой строки файла, где есть искомая строка, ее положение в файле

-c Выводит количество совпадений, но не выводит сами совпадения

-C Выводит две строки до и две строки после строки, которая содержит искомую строку

-e строка Используйте данный параметр, если искомая строка начинается с символа "-"

-f файл Производит поиск искомых строк, которые имеются в указанном файле

-h Выводит строки, содержащие искомую строку, но не выводит имена содержащих их файлов

-i Игнорировать регистр букв

-n Выводит номера строк (и сами строки), содержащих искомую строку

-s Не выводить сообщения об ошибке, если некоторые файлы не могут быть открыты

-w Поиск совпадения целого слова с искомой строкой

-x Поиск совпадения целой строки с искомой строкой

Пример использования:

egrep "ppp [11]" *

Данная команда ищет строку, заключенную в кавычки во всех файлах в текущем каталоге.

52. Команда expand: замена символов табуляции пробелами

Команда expand заменяет в указанных файлах символы табуляции на соответствующее количество пробелов. 
Команде можно передать лишь один параметр -i, означающий, что замена должна быть только в начале строки.
Формат вызова команды:
expand [-i] файлы

Команда expand заменяет в указанных файлах символы табуляции на соответствующее количество пробелов.

Команде можно передать лишь один параметр -i, означающий, что замена должна быть только в начале строки.

Формат вызова команды:

expand [-i] файлы

53. Команда fmt

Команда fmt форматирует текст, выравнивает его по правой границе и удаляет символы новой строки. 
Синтаксис вызова команды:
fmt [параметры] файлы

Парамаетры:
-c Не форматировать первые две строки
-p префикс Форматировать только строки, начинающиеся с указанного префикса
-s Не объединять строки
-t Начинать параграф с красной строки
-w n Задает максимальную длину строки в n символов (по умолчанию 72)

Команда fmt форматирует текст, выравнивает его по правой границе и удаляет символы новой строки.

Синтаксис вызова команды:

fmt [параметры] файлы

Парамаетры:

-c Не форматировать первые две строки

-p префикс Форматировать только строки, начинающиеся с указанного префикса

-s Не объединять строки

-t Начинать параграф с красной строки

-w n Задает максимальную длину строки в n символов (по умолчанию 72)

54. Команда fold

Выравнивает текст по правому краю. 
Производит разрыв строк, если это необходимо. 
Максимальная длина строки — 80 символов. 
Установить другую длину строки можно с помощью параметра -w, как и в случае с командой fmt. 
Кроме того, можно указать параметр -s, разрешающий разрыв строки только на пробеле.

Формат вызова команды:
fold [параметры] файлы

Выравнивает текст по правому краю.

Производит разрыв строк, если это необходимо.

Максимальная длина строки — 80 символов.

Установить другую длину строки можно с помощью параметра -w, как и в случае с командой fmt.

Кроме того, можно указать параметр -s, разрешающий разрыв строки только на пробеле.

Формат вызова команды:

fold [параметры] файлы

55. Команды head и tail: вывод начала и хвоста файла

Команда head выводит первые десять строк файла, а tail — последние десять. 
Количество строк может регулироваться с помощью параметра -n.

Пример использования:
head -n 10 /var/log/messages
tail -n 15 /var/log/messages

Команда head выводит первые десять строк файла, а tail — последние десять.

Количество строк может регулироваться с помощью параметра -n.

Пример использования:

head -n 10 /var/log/messages

tail -n 15 /var/log/messages

56. Команда sort: сортировка файлов

Сортирует все указанные файлы, результат сортировки всех указанных файлов отправляется на стандартный вывод.
Синтаксис вызова команды:
sort [параметр]... [файлы]

Параметры:
-b Пробелы в начале сортируемых полей или начале ключей будут игнорироваться
-d При сортировке будут игнорироваться все символы, кроме букв, цифр и пробельных символов
-f Игнорировать регистр букв
-r Сортировка в обратном порядке
-o файл Вывод результатов сортировки в файл
-t символ Использование указанного символа в качестве разделителя полей

Сортирует все указанные файлы, результат сортировки всех указанных файлов отправляется на стандартный вывод.

Синтаксис вызова команды:

sort [параметр]... [файлы]

Параметры:

-b Пробелы в начале сортируемых полей или начале ключей будут игнорироваться

-d При сортировке будут игнорироваться все символы, кроме букв, цифр и пробельных символов

-f Игнорировать регистр букв

-r Сортировка в обратном порядке

-o файл Вывод результатов сортировки в файл

-t символ Использование указанного символа в качестве разделителя полей

57. Команда split: разбиение файлов на несколько частей

Используется для разделения файлов на части. 
По умолчанию создаются части размером в 1000 строк. 

Изменить размер можно, указав количество строк, например:
split -500 файл1
В данном случае файл будет разбит на части по 500 строк в каждой (кроме, возможно, последней части, где может быть меньше строк).

Команду можно также использовать для разделения файлов на части по размеру информации, а не по количеству строк, 
например с помощью параметра -b можно указать количество символов в каждой части. 
Примеры вызова команды:
split -b100b файл
split -b100k файл
split -b100m файл
Первая команда разделит файл на части по 100 байтов каждая, вторая — на части по 100 Кбайт каждая, третья — по 100 Мбайт каждая.

Используется для разделения файлов на части.

По умолчанию создаются части размером в 1000 строк.

Изменить размер можно, указав количество строк, например:

split -500 файл1

В данном случае файл будет разбит на части по 500 строк в каждой (кроме, возможно, последней части, где может быть меньше строк).

Команду можно также использовать для разделения файлов на части по размеру информации, а не по количеству строк,

например с помощью параметра -b можно указать количество символов в каждой части.

Примеры вызова команды:

split -b100b файл

split -b100k файл

split -b100m файл

Первая команда разделит файл на части по 100 байтов каждая, вторая — на части по 100 Кбайт каждая, третья — по 100 Мбайт каждая.

58. Команда unexpand: замена пробелов символами табуляции

Заменяет последовательные пробелы символами табуляции. 
По умолчанию 8 пробелов заменяются одним символом табуляции. 
Количество пробелов можно задать с помощью параметра -t n (где n — количество пробелов).
Синтаксис вызова:
unexpand [параметры] файл

Заменяет последовательные пробелы символами табуляции.

По умолчанию 8 пробелов заменяются одним символом табуляции.

Количество пробелов можно задать с помощью параметра -t n (где n — количество пробелов).

Синтаксис вызова:

unexpand [параметры] файл

59. Команда wc: подсчет слов в файле

Команда wc используется:

для подсчета слов в текстовом файле:
wc /var/log/messages

для подсчета количества строк (если задан параметр -l):
wc -l /var/log/messages

для подсчета количества символов (параметр -c):
wc -c /var/log/messages.

Команда wc используется:

для подсчета слов в текстовом файле:

wc /var/log/messages

для подсчета количества строк (если задан параметр -l):

wc -l /var/log/messages

для подсчета количества символов (параметр -c):

wc -c /var/log/messages.

60. маршрутизация

netstat -rn
route -n 

Destination       Адрес сети назначения
Gateway           Шлюз по умолчанию
Genmask           Маска сети назначения

Flags Поле Flags содержит флаги маршрута:
U — маршрут активен
H — маршрут относится не к сети, а к хосту
G — данная машина является шлюзом, поэтому при обращении к ней  нужно заменить MAC-адрес машины получателя на MAC-адрес шлюза (если MAC-адрес получателя почему-то известен)
D — динамический маршрут, установлен демоном маршрутизации
M — маршрут, модифицированный демоном маршрутизации
C — запись кэширована
! — запрещенный маршрут


Metric 
Метрика маршрута, т. е. расстояние к цели в хопах (переходах). 
Один хоп (переход) означает один маршрутизатор

Ref 
Количество ссылок на маршрут. 
Не учитывается ядром Linux, но в других операционных системах, например, в FreeBSD, вы можете столкнуться с этим полем

Use 
Содержит количество пакетов, прошедших по этому маршруту

Iface 
Используемый интерфейс

MSS 
Максимальный размер сегмента (Maximum Segment Size) для TCP-соединений по этому маршруту

Window 
Размер окна по умолчанию для TCP-соединений по этому маршруту

irtt 
Протокол TCP гарантирует надежную доставку данных между компьютерами. 
Для такой гарантии используется повторная отправка пакетов, если они были потеряны. 
При этом ведется счет времени: сколько нужно ждать, пока пакет дойдет до назначения и придет подтверждение о получении пакета. 
Если время вышло, а подтверждение так и не было получено, то пакет отправляется еще раз. 
Это время и называется roundtrip time (время "путешествия туда-обратно"). 
Параметр irtt — это начальное время rtt. 
В большинстве случаев подходит значение по умолчанию, но для некоторых медленных сетей, например, 
для сетей пакетного радио, значение по умолчанию слишком короткое, что вызывает ненужные повторы. 
Параметр irtt можно увеличить командой route.
По умолчанию его значение — 0


команда задает шлюз по умолчанию для интерфейса eth0:
# route add default gw 192.168.181.2 eth0

Команда route за один вызов может добавить или удалить только один маршрут.
Другими словами, вы не можете сразу добавить или удалить несколько маршрутов.
Формат вызова команды route следующий:
route [операция] [тип] адресат gw шлюз [метрика] [dev интерфейс]

Параметр операция может принимать два значения: add (добавить маршрут) и del (удалить маршрут). 
Параметр тип необязательный, он задает тип маршрута: -net (маршрут к сети), -host (маршрут к узлу) или default (маршрут по умолчанию).
Параметр адресат содержит адрес сети (если задается маршрут к сети), адрес узла (при добавлении маршрута к сети) или вообще не указывается, если задается маршрут по умолчанию.

Параметр шлюз задает IP-адрес (или доменное имя) шлюза. 
Последние два параметра — метрика и dev необязательны. 
Параметр метрика задает максимальное число переходов (через маршрутизаторы) на пути к адресату. 
В Linux он необязательный, в отличие от других ОС. 
Последний параметр имеет смысл указывать, если в системе установлено несколько сетевых интерфейсов и нужно задать, через какой
именно сетевой интерфейс следует отправить пакеты по указанному маршруту.

Команда удаления маршрута выглядит так:
route del адрес

В других UNIX-системах есть параметр -f, удаляющий все маршруты (route -f), но в Linux такого параметра нет. 
Следовательно, для очистки всей таблицы маршрутизации вам нужно будет ввести серию команд route del. 
Изменять таблицу маршрутизации нужно только, зарегистрировавшись на компьютере локально. 
При удаленной регистрации (например, по ssh) легко ошибочно удалить маршрут, по которому вы "вошли в систему". 
О последствиях такого действия, думаю, говорить не нужно.

Примеры:
route add -net 192.76.16.0 netmask 255.255.255.0 dev eth0
Эта команды добавляет маршрут к сети 192.76.16.0 через устройство eth0. 
Шлюз не указан, просто все пакеты, адресованные сети 192.76.16.0, будут отправлены на интерфейс eth0.

route add -net 192.16.16.0 netmask 255.255.255.0 gw 192.76.16.1 
Эта команда добавляет маршрут к сети 192.16.16.0 через маршрутизатор 192.76.16.1. 
Сетевой интерфейс задавать не обязательно, но можно и указать при особом желании.

route add default gw gate1
Эта команда добавляет маршрут по умолчанию. Все пакеты будут отправлены компьютеру с именем gate1. 
Обратите внимание: мы указываем доменное имя узла вместо IP-адреса.

route add -net 10.1.0.0 netmask 255.0.0.0 reject
Эта команда добавляет запрещающий маршрут. Отправка пакетов по этому маршруту (в сеть 10.1.0.0) запрещена.

netstat -rn

route -n

Destination Адрес сети назначения

Gateway Шлюз по умолчанию

Genmask Маска сети назначения

Flags Поле Flags содержит флаги маршрута:

U — маршрут активен

H — маршрут относится не к сети, а к хосту

G — данная машина является шлюзом, поэтому при обращении к ней нужно заменить MAC-адрес машины получателя на MAC-адрес шлюза (если MAC-адрес получателя почему-то известен)

D — динамический маршрут, установлен демоном маршрутизации

M — маршрут, модифицированный демоном маршрутизации

C — запись кэширована

! — запрещенный маршрут

Metric

Метрика маршрута, т. е. расстояние к цели в хопах (переходах).

Один хоп (переход) означает один маршрутизатор

Ref

Количество ссылок на маршрут.

Не учитывается ядром Linux, но в других операционных системах, например, в FreeBSD, вы можете столкнуться с этим полем

Use

Содержит количество пакетов, прошедших по этому маршруту

Iface

Используемый интерфейс

MSS

Максимальный размер сегмента (Maximum Segment Size) для TCP-соединений по этому маршруту

Window

Размер окна по умолчанию для TCP-соединений по этому маршруту

irtt

Протокол TCP гарантирует надежную доставку данных между компьютерами.

Для такой гарантии используется повторная отправка пакетов, если они были потеряны.

При этом ведется счет времени: сколько нужно ждать, пока пакет дойдет до назначения и придет подтверждение о получении пакета.

Если время вышло, а подтверждение так и не было получено, то пакет отправляется еще раз.

Это время и называется roundtrip time (время "путешествия туда-обратно").

Параметр irtt — это начальное время rtt.

В большинстве случаев подходит значение по умолчанию, но для некоторых медленных сетей, например,

для сетей пакетного радио, значение по умолчанию слишком короткое, что вызывает ненужные повторы.

Параметр irtt можно увеличить командой route.

По умолчанию его значение — 0

команда задает шлюз по умолчанию для интерфейса eth0:

# route add default gw 192.168.181.2 eth0

Команда route за один вызов может добавить или удалить только один маршрут.

Другими словами, вы не можете сразу добавить или удалить несколько маршрутов.

Формат вызова команды route следующий:

route [операция] [тип] адресат gw шлюз [метрика] [dev интерфейс]

Параметр операция может принимать два значения: add (добавить маршрут) и del (удалить маршрут).

Параметр тип необязательный, он задает тип маршрута: -net (маршрут к сети), -host (маршрут к узлу) или default (маршрут по умолчанию).

Параметр адресат содержит адрес сети (если задается маршрут к сети), адрес узла (при добавлении маршрута к сети) или вообще не указывается, если задается маршрут по умолчанию.

Параметр шлюз задает IP-адрес (или доменное имя) шлюза.

Последние два параметра — метрика и dev необязательны.

Параметр метрика задает максимальное число переходов (через маршрутизаторы) на пути к адресату.

В Linux он необязательный, в отличие от других ОС.

Последний параметр имеет смысл указывать, если в системе установлено несколько сетевых интерфейсов и нужно задать, через какой

именно сетевой интерфейс следует отправить пакеты по указанному маршруту.

Команда удаления маршрута выглядит так:

route del адрес

В других UNIX-системах есть параметр -f, удаляющий все маршруты (route -f), но в Linux такого параметра нет.

Следовательно, для очистки всей таблицы маршрутизации вам нужно будет ввести серию команд route del.

Изменять таблицу маршрутизации нужно только, зарегистрировавшись на компьютере локально.

При удаленной регистрации (например, по ssh) легко ошибочно удалить маршрут, по которому вы "вошли в систему".

О последствиях такого действия, думаю, говорить не нужно.

Примеры:

route add -net 192.76.16.0 netmask 255.255.255.0 dev eth0

Эта команды добавляет маршрут к сети 192.76.16.0 через устройство eth0.

Шлюз не указан, просто все пакеты, адресованные сети 192.76.16.0, будут отправлены на интерфейс eth0.

route add -net 192.16.16.0 netmask 255.255.255.0 gw 192.76.16.1

Эта команда добавляет маршрут к сети 192.16.16.0 через маршрутизатор 192.76.16.1.

Сетевой интерфейс задавать не обязательно, но можно и указать при особом желании.

route add default gw gate1

Эта команда добавляет маршрут по умолчанию. Все пакеты будут отправлены компьютеру с именем gate1.

Обратите внимание: мы указываем доменное имя узла вместо IP-адреса.

route add -net 10.1.0.0 netmask 255.0.0.0 reject

Эта команда добавляет запрещающий маршрут. Отправка пакетов по этому маршруту (в сеть 10.1.0.0) запрещена.

61. Команда pppoeconf: настройка DSL-соединения

DSL (Digital Subscriber Line) — цифровая абонентская линия, позволяющая производить двунаправленный обмен данными по телефонной линии. 
Существует несколько вариантов DSL-линий: ADSL, VDSL, SDSL, RADSL. 
Наиболее распространены ADSL-линии. 
ADSL (Asymmetric DSL) — асимметрическая цифровая линия. 
Для передачи данных используется витая пара телефонной сети. 
Скорость передачи данных зависит от расстояния, например 1,5 Мбит/с при расстоянии в 5—6 км. 
Но обычно скорость ограничивается провайдером и зависит от тарифного плана. 
Самый доступный тарифный план подразумевает скорость передачи данных 128 Кбит/с. 
Раньше были соединения и на скорости 64 Кбит/с, но сейчас уже таких нет. 
Сегодня обычным домашним пользователям доступны соединения со скоростью передачи данных от 1 до 20 Мбит/с.

В Debian/Ubuntu/Denix для настройки DSL-соединения используется удобная программа pppoeconf, запустить ее можно так:
sudo pppoeconf
Согласно спецификации PPPoE существуют две стадии: стадия поиска и стадия сессии. 
На первой стадии производится отправка специальных пакетов PADI (PPPoE Active Discovery Initiation), 
которые позволяют найти активные концентраторы доступа PPPoE. 
Стадия сессии — это само соединение и передача информации.

После того как концентратор доступа будет найден, программа предложит вам создать резервную копию файла /etc/ppp/peers/dsl-provider, 
поскольку именно этот файл будет изменен в процессе настройки соединения. 
Если вы до этого не настраивали DSL-соединение, то в этом файле ничего не будет, поэтому можете даже не предпринимать никаких действий.
Далее программа предложит установить популярные опции соединения (noauth и defaultroute): не стоит от них отказываться, поскольку их использует большинство провайдеров.
Следующие два шага — ввод имени пользователя и пароля, которые применяются для аутентификации на сервере провайдера. 
После этого программа предложит вам добавить полученные от провайдера IP-адреса DNS-серверов в файл /etc/resolv.conf.
Следующий вопрос — хотите ли вы устанавливать соединение при загрузке системы? 
А после этого программа спросит вас, хотите ли вы установить соединение немедленно.


Для включения/отключения DSL-соединения используются следующие команды:
sudo pon dsl-provider
sudo poff dsl-provider

DSL (Digital Subscriber Line) — цифровая абонентская линия, позволяющая производить двунаправленный обмен данными по телефонной линии.

Существует несколько вариантов DSL-линий: ADSL, VDSL, SDSL, RADSL.

Наиболее распространены ADSL-линии.

ADSL (Asymmetric DSL) — асимметрическая цифровая линия.

Для передачи данных используется витая пара телефонной сети.

Скорость передачи данных зависит от расстояния, например 1,5 Мбит/с при расстоянии в 5—6 км.

Но обычно скорость ограничивается провайдером и зависит от тарифного плана.

Самый доступный тарифный план подразумевает скорость передачи данных 128 Кбит/с.

Раньше были соединения и на скорости 64 Кбит/с, но сейчас уже таких нет.

Сегодня обычным домашним пользователям доступны соединения со скоростью передачи данных от 1 до 20 Мбит/с.

В Debian/Ubuntu/Denix для настройки DSL-соединения используется удобная программа pppoeconf, запустить ее можно так:

sudo pppoeconf

Согласно спецификации PPPoE существуют две стадии: стадия поиска и стадия сессии.

На первой стадии производится отправка специальных пакетов PADI (PPPoE Active Discovery Initiation),

которые позволяют найти активные концентраторы доступа PPPoE.

Стадия сессии — это само соединение и передача информации.

После того как концентратор доступа будет найден, программа предложит вам создать резервную копию файла /etc/ppp/peers/dsl-provider,

поскольку именно этот файл будет изменен в процессе настройки соединения.

Если вы до этого не настраивали DSL-соединение, то в этом файле ничего не будет, поэтому можете даже не предпринимать никаких действий.

Далее программа предложит установить популярные опции соединения (noauth и defaultroute): не стоит от них отказываться, поскольку их использует большинство провайдеров.

Следующие два шага — ввод имени пользователя и пароля, которые применяются для аутентификации на сервере провайдера.

После этого программа предложит вам добавить полученные от провайдера IP-адреса DNS-серверов в файл /etc/resolv.conf.

Следующий вопрос — хотите ли вы устанавливать соединение при загрузке системы?

А после этого программа спросит вас, хотите ли вы установить соединение немедленно.

Для включения/отключения DSL-соединения используются следующие команды:

sudo pon dsl-provider

sudo poff dsl-provider

62. Команда pppconfig: настройка модемного (PPP) соединения

Кроме команды pppoeconf в дистрибутивах Debian/Ubuntu/Denix есть команда pppconfig, которая настраивает модемное PPP-соединение. 
Она напоминает программу pppoeconf — вам нужно запустить ее и следовать инструкциям мастера настройки соединения. 
Ничего сложного. 
Запускать программу нужно так:
sudo pppoeconf

Кроме команды pppoeconf в дистрибутивах Debian/Ubuntu/Denix есть команда pppconfig, которая настраивает модемное PPP-соединение.

Она напоминает программу pppoeconf — вам нужно запустить ее и следовать инструкциям мастера настройки соединения.

Ничего сложного.

Запускать программу нужно так:

sudo pppoeconf

63. Команда wvdial: настройка PPP-соединения

Программа wvdial также используется для создания PPP-соединения, но, чтобы не рассматривать две программы для создания таких соединений, 
мы обсудим ее для настройки GPRS/EDGE-соединения — это более актуально в наши дни, нежели модемное соединение.
Вам нужно раздобыть настройки GPRS вашего оператора. 
Проще всего найти компьютер, подключенный к Интернету, и зайти на сайт оператора. 
В большинстве случаев там все описано. 
Если нет, то придется звонить в службу поддержки оператора и записывать параметры под диктовку.
Для подключения к Интернету мы будем использовать программу wvdial — это значительно проще, чем создавать собственные скрипты для демона pppd. 
Данная программа обычно входит в состав дистрибутива, но не устанавливается по умолчанию. 

Поэтому ее нужно установить:
rpm -ihv wvdial*
sudo apt-get install wvdial
yum install wvdial

конфиг:
/etc/wvdial.conf
----------------
[Dialer Defaults]
# Порт, к которому подключен телефон
Modem = /dev/ttyS0 # если телефон подключен к COM-порту
# Modem = /dev/ircomm0 # инфракрасный порт
# Modem = /dev/ttyUSB0 # телефон подключен по USB
# Modem = /dev/ttyACM0 # телефон подключен по USB (см. примечание)
# Скорость
Baud = 115200 # можно не изменять
# Стандартная строка инициализации модема
Init1 = ATZ
# Строка инициализации GPRS
Init2 = AT+CGDCONT=1,"IP","AP"
# Не изменяйте эти параметры
# Для контрактных абонентов некоторых операторов опцию ISDN нужно
# установить в 1
ISDN = 0
Modem Type = Analog Modem
Carrier Check = no
# Номер, по которому осуществляется соединение
Phone = *99#
# Имя пользователя и пароль
Username = логин
Password = пароль
----------------

ПРИМЕЧАНИЕ
Некоторые телефоны, подключаемые к компьютеру по USB, определяются в Linux как устройства /dev/ttyACMn (где n — номер). 
Следовательно, если не выходит подключиться с использованием устройства /dev/ttyUSB0, тогда следует попробовать использовать устройство /dev/ttyACMn.

Давайте разберемся, что нужно изменить вам "под себя". 
Во-первых, имя модема.
В данном случае используется первый последовательный порт (ttyS0). 
Если вы подключаетесь с помощью USB-кабеля, то нужно указать другое имя устройства, например ttyUSB0. 
Во-вторых, необходимо указать точку доступа своего оператора (AP) — эту информацию надо получить у него. 
Например, для МТС точка доступа будет такой: internet.mts.ru.

Затем следует изменить телефон доступа. Он зависит не только от оператора, но и
от модели самого телефона, например:
*99# — для телефонов Nokia, Ericsson, Motorola, SonyEricsson, Sendo
*99***1# — для телефонов Siemens, Alcatel, Handspring, LG, Panasonic, Mitsubishi, Sagem
*99**1*1# — для Samsung.

Комбинация логина и пароля зависит от вашего оператора — например, для МТС нужно указать имя пользователя mts и такой же пароль (тоже mts). 
Уточните эти параметры у своего оператора.

Программа wvdial также используется для создания PPP-соединения, но, чтобы не рассматривать две программы для создания таких соединений,

мы обсудим ее для настройки GPRS/EDGE-соединения — это более актуально в наши дни, нежели модемное соединение.

Вам нужно раздобыть настройки GPRS вашего оператора.

Проще всего найти компьютер, подключенный к Интернету, и зайти на сайт оператора.

В большинстве случаев там все описано.

Если нет, то придется звонить в службу поддержки оператора и записывать параметры под диктовку.

Для подключения к Интернету мы будем использовать программу wvdial — это значительно проще, чем создавать собственные скрипты для демона pppd.

Данная программа обычно входит в состав дистрибутива, но не устанавливается по умолчанию.

Поэтому ее нужно установить:

rpm -ihv wvdial*

sudo apt-get install wvdial

yum install wvdial

конфиг:

/etc/wvdial.conf

----------------

[Dialer Defaults]

# Порт, к которому подключен телефон

Modem = /dev/ttyS0 # если телефон подключен к COM-порту

# Modem = /dev/ircomm0 # инфракрасный порт

# Modem = /dev/ttyUSB0 # телефон подключен по USB

# Modem = /dev/ttyACM0 # телефон подключен по USB (см. примечание)

# Скорость

Baud = 115200 # можно не изменять

# Стандартная строка инициализации модема

Init1 = ATZ

# Строка инициализации GPRS

Init2 = AT+CGDCONT=1,"IP","AP"

# Не изменяйте эти параметры

# Для контрактных абонентов некоторых операторов опцию ISDN нужно

# установить в 1

ISDN = 0

Modem Type = Analog Modem

Carrier Check = no

# Номер, по которому осуществляется соединение

Phone = *99#

# Имя пользователя и пароль

Username = логин

Password = пароль

----------------

ПРИМЕЧАНИЕ

Некоторые телефоны, подключаемые к компьютеру по USB, определяются в Linux как устройства /dev/ttyACMn (где n — номер).

Следовательно, если не выходит подключиться с использованием устройства /dev/ttyUSB0, тогда следует попробовать использовать устройство /dev/ttyACMn.

Давайте разберемся, что нужно изменить вам "под себя".

Во-первых, имя модема.

В данном случае используется первый последовательный порт (ttyS0).

Если вы подключаетесь с помощью USB-кабеля, то нужно указать другое имя устройства, например ttyUSB0.

Во-вторых, необходимо указать точку доступа своего оператора (AP) — эту информацию надо получить у него.

Например, для МТС точка доступа будет такой: internet.mts.ru.

Затем следует изменить телефон доступа. Он зависит не только от оператора, но и

от модели самого телефона, например:

*99# — для телефонов Nokia, Ericsson, Motorola, SonyEricsson, Sendo

*99***1# — для телефонов Siemens, Alcatel, Handspring, LG, Panasonic, Mitsubishi, Sagem

*99**1*1# — для Samsung.

Комбинация логина и пароля зависит от вашего оператора — например, для МТС нужно указать имя пользователя mts и такой же пароль (тоже mts).

Уточните эти параметры у своего оператора.

64. Текстовые браузеры

Если графический режим недоступен (например, на сервере), а по сети побродить хочется, можно использовать текстовый браузер lynx. 
В некоторых дистрибутивах вместо lynx используются браузеры links и elinks, но суть остается той же — просмотр страниц Интернета в текстовом режиме.
В современных дистрибутивах текстовые браузеры не устанавливаются по умолчанию, поэтому их нужно установить отдельно.

Если графический режим недоступен (например, на сервере), а по сети побродить хочется, можно использовать текстовый браузер lynx.

В некоторых дистрибутивах вместо lynx используются браузеры links и elinks, но суть остается той же — просмотр страниц Интернета в текстовом режиме.

В современных дистрибутивах текстовые браузеры не устанавливаются по умолчанию, поэтому их нужно установить отдельно.

65. Команда ftp: FTP-клиент

Для открытия соединения с любым FTP-сервером введите команду:
ftp <имя или адрес FTP-сервера>

Можно просто ввести команду ftp, а в ответ на приглашение
ftp>
ввести команду:
open <имя или адрес FTP-сервера>

Подключившись к серверу, вы можете ввести команду help, чтобы просмотреть список доступных команд. 
Для получения справки по той или иной команде введите help <имя_команды>. 

Наиболее популярные команды:
ls      Вывести содержимое каталога
get     Загрузить файл с сервера
put     Загрузить файл на сервер
mget    Получить несколько файлов с сервера. Допускается использование масокфайлов, например *.rpm
mput    Загрузить несколько файлов на сервер
cd      Изменить каталог
mkdir   Создать каталог
rmdir   Удалить пустой каталог
delete  Удалить файл

Для открытия соединения с любым FTP-сервером введите команду:

ftp <имя или адрес FTP-сервера>

Можно просто ввести команду ftp, а в ответ на приглашение

ftp>

ввести команду:

open <имя или адрес FTP-сервера>

Подключившись к серверу, вы можете ввести команду help, чтобы просмотреть список доступных команд.

Для получения справки по той или иной команде введите help <имя_команды>.

Наиболее популярные команды:

ls Вывести содержимое каталога

get Загрузить файл с сервера

put Загрузить файл на сервер

mget Получить несколько файлов с сервера. Допускается использование масокфайлов, например *.rpm

mput Загрузить несколько файлов на сервер

cd Изменить каталог

mkdir Создать каталог

rmdir Удалить пустой каталог

delete Удалить файл

66. Команда wget: загрузка файлов

Программа wget — это лучший текстовый менеджер закачки файлов. 
Программа поддерживает протоколы HTTP, HTTPS и FTP. 

Использовать ее нужно так:
wget [параметры] URL


Некоторые параметры:
--background Перейти в фоновый режим после запуска
--quiet Тихий режим, сообщения wget не выводятся
--input-file=file Считать URL из файла file, файл не обязательно должен быть в формате HTML. 
                  Если вы указали URL в файле и в командной строке, то сначала будут загружены URL из командной строки, апотом из файла
--force-html Обязательно считать файл, указанный в предыдущем параметре, HTML-файлом
--tries=number Устанавливает количество попыток загрузки URL
--no-clobber Если при загрузке файла оборвалось соединение, то этот параметр позволит продолжить загрузку с места обрыва
--continue Возобновление загрузки файла, например, если прервалась связь. Этот параметр нужно использовать, если вы забыли укаать параметр --no-clobber, 
           а связь прервалась и вам нужно докачать файл, а не начинать его загрузку заново
--wait=seconds Задает паузу в секундах между загрузками и повторами, что позволяет снизить нагрузку на сервер
--quota=quota Задает максимальный размер загружаемых файлов (в байтах, килобайтах (после числа указывается k) и мегабайтах (после числа — m)). 
              Квота не работает при загрузке одного файла, поскольку даже если квота превышена, то текущий файл загружаетсядо конца (если есть физически место на диске)
--http-user=user Задают имя пользователя при HTTP-аутентификации, тип аутентификации устанавливается автоматически программой
--http-passwd=pass Задают пароль при HTTP-аутентификации, тип аутентификации устанавливается автоматически программой
--proxy-user=user Задают имя пользователя прокси-сервера
--proxy-passwd=pass Задают  пароль прокси-сервера
--passive-ftp Пассивный режим FTP, обычно используется при наличии брандмауэра
--recursive Включить рекурсивную загрузку, которая используется для рекурсивной загрузки сайтов
--level=depth Максимальная длина рекурсивной загрузки (по умолчанию5 уровней)

Примеры использования:
wget --recursive http://site.ru
wget http://site.ru/1.zip
wget -r -l 10 -k http://example.org/ Скопировать весь сайт целиком
wget --user=login --password=password ftp://ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP
wget --continue --recursive --level=1 http://www.vereskmed.ru/music/album_1/ - Ну вот для примера простая команда для скачивания всего первого альбома 
 
wget ftp://login:password@ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP
wget ftp://myftpserver/имя.abc
wget -c ftp://myftpserver/имя.abc
wget -t 20 --retry-connrefused http://mydownloadserver/имя.iso
 
wget -p -k -E -H http://mysite.com/site.html
wget -r -l 4 -p -E -k http://mysite.com

Программа wget — это лучший текстовый менеджер закачки файлов.

Программа поддерживает протоколы HTTP, HTTPS и FTP.

Использовать ее нужно так:

wget [параметры] URL

Некоторые параметры:

--background Перейти в фоновый режим после запуска

--quiet Тихий режим, сообщения wget не выводятся

--input-file=file Считать URL из файла file, файл не обязательно должен быть в формате HTML.

Если вы указали URL в файле и в командной строке, то сначала будут загружены URL из командной строки, апотом из файла

--force-html Обязательно считать файл, указанный в предыдущем параметре, HTML-файлом

--tries=number Устанавливает количество попыток загрузки URL

--no-clobber Если при загрузке файла оборвалось соединение, то этот параметр позволит продолжить загрузку с места обрыва

--continue Возобновление загрузки файла, например, если прервалась связь. Этот параметр нужно использовать, если вы забыли укаать параметр --no-clobber,

а связь прервалась и вам нужно докачать файл, а не начинать его загрузку заново

--wait=seconds Задает паузу в секундах между загрузками и повторами, что позволяет снизить нагрузку на сервер

--quota=quota Задает максимальный размер загружаемых файлов (в байтах, килобайтах (после числа указывается k) и мегабайтах (после числа — m)).

Квота не работает при загрузке одного файла, поскольку даже если квота превышена, то текущий файл загружаетсядо конца (если есть физически место на диске)

--http-user=user Задают имя пользователя при HTTP-аутентификации, тип аутентификации устанавливается автоматически программой

--http-passwd=pass Задают пароль при HTTP-аутентификации, тип аутентификации устанавливается автоматически программой

--proxy-user=user Задают имя пользователя прокси-сервера

--proxy-passwd=pass Задают пароль прокси-сервера

--passive-ftp Пассивный режим FTP, обычно используется при наличии брандмауэра

--recursive Включить рекурсивную загрузку, которая используется для рекурсивной загрузки сайтов

--level=depth Максимальная длина рекурсивной загрузки (по умолчанию5 уровней)

Примеры использования:

wget --recursive http://site.ru

wget http://site.ru/1.zip

wget -r -l 10 -k http://example.org/ Скопировать весь сайт целиком

wget --user=login --password=password ftp://ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP

wget ftp://login:password@ftp.example.org/some_file.iso - использование имени пользователя и пароля на FTP/HTTP

wget ftp://myftpserver/имя.abc

wget -c ftp://myftpserver/имя.abc

wget -t 20 --retry-connrefused http://mydownloadserver/имя.iso

wget -p -k -E -H http://mysite.com/site.html

wget -r -l 4 -p -E -k http://mysite.com

67. Сеть. Конфигурационные файлы.

В большинстве случаев сеть в Linux настраивается с помощью графических конфигураторов, а в консоли администратор может разве что протестировать настройки.
Но когда-то сеть настраивалась только вручную — путем конфигурационных файлов. 
Да и конфигураторы — это не технология НЛО, а просто графическая оболочка, редактирующая те же самые конфигурационные файлы. 
Может, вы и не будете никогда редактировать эти файлы вручную, но просто обязаны знать, где и что хранится.

/etc/aliases 
База данных почтовых псевдонимов. 
Формат этого файла очень
прост:
псевдоним пользователь

/etc/aliases.db 
Системой на самом деле используется не файл /etc/aliases, а файл /etc/aliases.db, который создается программой newaliases по содержимому файла /etc/aliases. 
Поэтому после редактирования этого файла не забудьте выполнить от имени root команду newaliases

/etc/hosts.conf 
Содержит параметры разрешения доменных имен. 
Например, директива order hosts,bind означает, что сначала поиск IP-адреса по доменному имени будет произведен в файле /etc/hosts, 
а затем лишь будет выполнено обращение к DNS-серверу, заданному в файле /etc/resolv.conf.
Директива multi on означает, что одному доменному имени могут соответствовать несколько IP-адресов /etc/hosts 
В этом файле можно прописать IP-адреса и имена узлов локальной сети, но обычно здесь указывается только IP-адрес узла localhost (127.0.0.1), 
потому что сейчас даже в небольшой локальной сети устанавливается собственный DNS-сервер

/etc/hosts.allow 
Содержит IP-адреса узлов, которым разрешен доступ к сервисам данного узла

/etc/hosts.deny 
Содержит IP-адреса узлов, которым запрещен доступ к сервисам данного узла

/etc/hostname 
В Debian/Ubuntu содержит имя узла

/etc/iftab 
Содержит таблицу интерфейсов, т. е. соответствие имен интерфейсов и их MAC-адресов

/etc/motd 
Файл задает сообщение дня (Message of the day). 
Данный файл используется многими сетевыми сервисами (например, FTP- и SSH-серверами), 
которые при регистрации пользователя могут выводить сообщение из этого файла

/etc/network/interfaces 
В Debian и Ubuntu применяется для ручной настройки сетевых интерфейсов (не с помощью NetworkManager). 
Вообще принято настраивать сетевые интерфейсы с помощью NetworkManager, но некоторые администраторы предпочитают отключать его и
настраивать сетевые интерфейсы вручную — по старинке

/etc/rc.config
В старых версиях SUSE (не openSUSE) содержит имя компьютера, IP-адрес интерфейса и другую сетевую информацию

/etc/resolv.conf 
Задает IP-адреса серверов DNS. 
Формат файла прост:
nameserver IP-адрес
Всего можно указать четыре DNS-сервера. 
В Ubuntu этот файл автоматически перезаписывается при установке соединения с Интернетом — сюда записываются адреса DNS-серверов, 
полученных от провайдера, что не совсем хорошо, особенно, когда вы настроили собственный DNS-сервер и желаете его использовать. 
Тут два пути:
Остановить Network-Manager и удалить симлинк /etc/resolv.conf, создать файл /etc/resolv.conf и настроить его. (при обновлении что то может поломается)
Или настроить "/etc/systemd/resolved.conf" (достаточно надежный метотд)

/etc/route.conf 
В старых версиях SUSE данный файл содержит описание статических маршрутов, в том числе и маршрут по умолчанию

/etc/services 
База данных сервисов, задающая соответствие символьного имени сервиса (например, pop3) и номера порта (110/tcp, tcp —это наименование протокола)

/etc/sysconfig/network 
Параметры сетевого интерфейса в Fedora, Red Hat и других дистрибутивах, основанных на Fedora/Red Hat, например, ASPLinux, Mandriva

/etc/sysconfig/static-routes 
Статические маршруты в Fedora/CentOS/ASPLinux

/etc/sysconfig/network/routes 
Статические маршруты в современных версиях openSUSE

/etc/sysconfig/network-scripts/ifcfg-имя
Параметры конкретного сетевого интерфейса, например, параметры интерфейса eth0 хранятся в файле

/etc/sysconfig/network-scripts/ifcfg-eth0 
Параметры конкретного сетевого интерфейса, например, параметры интерфейса eth0 хранятся в файле
(дистрибутив Fedora)

/etc/sysconfig/network/ifcfg-имя
Параметры конкретного сетевого интерфейса (имя — имя сетевого интерфейса). Дистрибутив openSUSE

/etc/xinetd.conf 
Файл конфигурации суперсервера xinetd, предназначенного для запуска сетевых сервисов, которые не работают в автономном режиме

/etc/NetworkManager/system-connections/
В дистрибутивах, использующих NetworkManager, в этом каталоге хранятся настройки соединений: 
в отдельных файлах — по одному для каждого соединения. 
При этом название файла соответствует названию соединения, введенному при настройке

В большинстве случаев сеть в Linux настраивается с помощью графических конфигураторов, а в консоли администратор может разве что протестировать настройки.

Но когда-то сеть настраивалась только вручную — путем конфигурационных файлов.

Да и конфигураторы — это не технология НЛО, а просто графическая оболочка, редактирующая те же самые конфигурационные файлы.

Может, вы и не будете никогда редактировать эти файлы вручную, но просто обязаны знать, где и что хранится.

/etc/aliases

База данных почтовых псевдонимов.

Формат этого файла очень

прост:

псевдоним пользователь

/etc/aliases.db

Системой на самом деле используется не файл /etc/aliases, а файл /etc/aliases.db, который создается программой newaliases по содержимому файла /etc/aliases.

Поэтому после редактирования этого файла не забудьте выполнить от имени root команду newaliases

/etc/hosts.conf

Содержит параметры разрешения доменных имен.

Например, директива order hosts,bind означает, что сначала поиск IP-адреса по доменному имени будет произведен в файле /etc/hosts,

а затем лишь будет выполнено обращение к DNS-серверу, заданному в файле /etc/resolv.conf.

Директива multi on означает, что одному доменному имени могут соответствовать несколько IP-адресов /etc/hosts

В этом файле можно прописать IP-адреса и имена узлов локальной сети, но обычно здесь указывается только IP-адрес узла localhost (127.0.0.1),

потому что сейчас даже в небольшой локальной сети устанавливается собственный DNS-сервер

/etc/hosts.allow

Содержит IP-адреса узлов, которым разрешен доступ к сервисам данного узла

/etc/hosts.deny

Содержит IP-адреса узлов, которым запрещен доступ к сервисам данного узла

/etc/hostname

В Debian/Ubuntu содержит имя узла

/etc/iftab

Содержит таблицу интерфейсов, т. е. соответствие имен интерфейсов и их MAC-адресов

/etc/motd

Файл задает сообщение дня (Message of the day).

Данный файл используется многими сетевыми сервисами (например, FTP- и SSH-серверами),

которые при регистрации пользователя могут выводить сообщение из этого файла

/etc/network/interfaces

В Debian и Ubuntu применяется для ручной настройки сетевых интерфейсов (не с помощью NetworkManager).

Вообще принято настраивать сетевые интерфейсы с помощью NetworkManager, но некоторые администраторы предпочитают отключать его и

настраивать сетевые интерфейсы вручную — по старинке

/etc/rc.config

В старых версиях SUSE (не openSUSE) содержит имя компьютера, IP-адрес интерфейса и другую сетевую информацию

/etc/resolv.conf

Задает IP-адреса серверов DNS.

Формат файла прост:

nameserver IP-адрес

Всего можно указать четыре DNS-сервера.

В Ubuntu этот файл автоматически перезаписывается при установке соединения с Интернетом — сюда записываются адреса DNS-серверов,

полученных от провайдера, что не совсем хорошо, особенно, когда вы настроили собственный DNS-сервер и желаете его использовать.

Тут два пути:

Остановить Network-Manager и удалить симлинк /etc/resolv.conf, создать файл /etc/resolv.conf и настроить его. (при обновлении что то может поломается)

Или настроить "/etc/systemd/resolved.conf" (достаточно надежный метотд)

/etc/route.conf

В старых версиях SUSE данный файл содержит описание статических маршрутов, в том числе и маршрут по умолчанию

/etc/services

База данных сервисов, задающая соответствие символьного имени сервиса (например, pop3) и номера порта (110/tcp, tcp —это наименование протокола)

/etc/sysconfig/network

Параметры сетевого интерфейса в Fedora, Red Hat и других дистрибутивах, основанных на Fedora/Red Hat, например, ASPLinux, Mandriva

/etc/sysconfig/static-routes

Статические маршруты в Fedora/CentOS/ASPLinux

/etc/sysconfig/network/routes

Статические маршруты в современных версиях openSUSE

/etc/sysconfig/network-scripts/ifcfg-имя

Параметры конкретного сетевого интерфейса, например, параметры интерфейса eth0 хранятся в файле

/etc/sysconfig/network-scripts/ifcfg-eth0

Параметры конкретного сетевого интерфейса, например, параметры интерфейса eth0 хранятся в файле

(дистрибутив Fedora)

/etc/sysconfig/network/ifcfg-имя

Параметры конкретного сетевого интерфейса (имя — имя сетевого интерфейса). Дистрибутив openSUSE

/etc/xinetd.conf

Файл конфигурации суперсервера xinetd, предназначенного для запуска сетевых сервисов, которые не работают в автономном режиме

/etc/NetworkManager/system-connections/

В дистрибутивах, использующих NetworkManager, в этом каталоге хранятся настройки соединений:

в отдельных файлах — по одному для каждого соединения.

При этом название файла соответствует названию соединения, введенному при настройке

68. Команда mii-tool

Современные сетевые адаптеры поддерживают несколько скоростей передачи данных: 10, 100 и 1000 Мбит/с, 
а также два режима передачи данных: полудуплексный и полнодуплексный.

Для просмотра параметров сетевого интерфейса выполните команду:
mii-tool -v eth0


Для установки режима используется опция -force:
mii-tool -force=режим интерфейс

Например:
mii-too -force=10baseT-FD eth0

Современные сетевые адаптеры поддерживают несколько скоростей передачи данных: 10, 100 и 1000 Мбит/с,

а также два режима передачи данных: полудуплексный и полнодуплексный.

Для просмотра параметров сетевого интерфейса выполните команду:

mii-tool -v eth0

Для установки режима используется опция -force:

mii-tool -force=режим интерфейс

Например:

mii-too -force=10baseT-FD eth0

69. Сетевой сканер nmap

Программа nmap предназначена для сканирования как отдельных узлов, так и целых сетей с любым количеством узлов, 
определения состояния узлов сканируемой сети, а также открытых портов на этих узлах. 
Сетевой сканер nmap использует множество самых разных методов сканирования — UDP, TCP connect, TCP SYN, ICMP (ping) и т. д.

Результат работы сканера — список отсканированных портов удаленного узла с указанием номера и состояния порта, используемого протокола, 
а также названия службы, использующей этот порт. 
У порта может быть три состояния: открыт, фильтруемый, не фильтруемый. 
Первое состояние означает, что удаленная машина прослушивает данный порт. 
Второе состояние сигнализирует, что брандмауэр блокирует доступ к этому порту и nmap не может определить его состояние. 
Третье состояние означает, что порт просто закрыт.

Примеры использования nmap
nmap параметры цель

Цель — это узел или список узлов для сканирования.

Предположим, что мы хотим знать, какая операционная система запущена на удаленном узле. 
Для этого нужно запустить nmap с опцией -O:
nmap -O узел

Сканер позволяет просканировать сразу несколько узлов. 
Для этого их адреса нужно указать так:
nmap 192.168.1.1-100
В приведенном примере будут просканированы узлы от 192.168.1.1 до 192.168.1.100. 

Можно также указать имена узлов через пробел, например, так:
nmap host1 host2

Чтобы просканировать узел на предмет открытых портов, укажите просто его адрес, никаких опций указывать не нужно, например:
nmap 192.168.1.2

Как уже отмечалось ранее, nmap позволяет также узнать список запущенных служб, для этого нужно использовать опцию -sV:
nmap -sV 192.168.1.2

Еще один интересный тип сканирования — кто онлайн? 
Сканер позволяет просканировать сеть и определить доступные узлы. 
Для этого используется опция -sP:
nmap -sP 192.168.1.1-254

Программа nmap предназначена для сканирования как отдельных узлов, так и целых сетей с любым количеством узлов,

определения состояния узлов сканируемой сети, а также открытых портов на этих узлах.

Сетевой сканер nmap использует множество самых разных методов сканирования — UDP, TCP connect, TCP SYN, ICMP (ping) и т. д.

Результат работы сканера — список отсканированных портов удаленного узла с указанием номера и состояния порта, используемого протокола,

а также названия службы, использующей этот порт.

У порта может быть три состояния: открыт, фильтруемый, не фильтруемый.

Первое состояние означает, что удаленная машина прослушивает данный порт.

Второе состояние сигнализирует, что брандмауэр блокирует доступ к этому порту и nmap не может определить его состояние.

Третье состояние означает, что порт просто закрыт.

Примеры использования nmap

nmap параметры цель

Цель — это узел или список узлов для сканирования.

Предположим, что мы хотим знать, какая операционная система запущена на удаленном узле.

Для этого нужно запустить nmap с опцией -O:

nmap -O узел

Сканер позволяет просканировать сразу несколько узлов.

Для этого их адреса нужно указать так:

nmap 192.168.1.1-100

В приведенном примере будут просканированы узлы от 192.168.1.1 до 192.168.1.100.

Можно также указать имена узлов через пробел, например, так:

nmap host1 host2

Чтобы просканировать узел на предмет открытых портов, укажите просто его адрес, никаких опций указывать не нужно, например:

nmap 192.168.1.2

Как уже отмечалось ранее, nmap позволяет также узнать список запущенных служб, для этого нужно использовать опцию -sV:

nmap -sV 192.168.1.2

Еще один интересный тип сканирования — кто онлайн?

Сканер позволяет просканировать сеть и определить доступные узлы.

Для этого используется опция -sP:

nmap -sP 192.168.1.1-254

70. информация о пользователях

users - выводит информацию о пользователях, подключенных к системе в данный момент.

w — список пользователей, подключенных к системе; виртуальный терминал, с которого работает пользователь 
    время входа в систему для каждого пользователя, статистику использования системы (IDLE — время простоя, JCPU — использование процессора),
    выполняемые каждым пользователем задачи

who — список пользователей, подключенных к системе; время и дату входа каждого пользователя

whoami — имя пользователя, который ввел команду

ftpwho - похожа на команду who, но выводит только пользователей FTP-сервера, подключенных в данный момент к серверу

users - выводит информацию о пользователях, подключенных к системе в данный момент.

w — список пользователей, подключенных к системе; виртуальный терминал, с которого работает пользователь

время входа в систему для каждого пользователя, статистику использования системы (IDLE — время простоя, JCPU — использование процессора),

выполняемые каждым пользователем задачи

who — список пользователей, подключенных к системе; время и дату входа каждого пользователя

whoami — имя пользователя, который ввел команду

ftpwho - похожа на команду who, но выводит только пользователей FTP-сервера, подключенных в данный момент к серверу

71. Мониторинг работы системы

htop — расширенная версия top 

mpstat — расширенная статистика использования ресурсов системы в процентах. 
         Программа не устанавливается по умолчанию, нужно установить пакет sysstat 
         Прервать выполнение программы можно нажатием комбинации клавиш <Ctrl>+<C>

vmstat — расширенная статистика использования виртуальной памяти. 
         Прервать выполнение программы можно нажатием комбинации клавиш <Ctrl>+<C>

iostat — статистика использования прерываний

htop — расширенная версия top

mpstat — расширенная статистика использования ресурсов системы в процентах.

Программа не устанавливается по умолчанию, нужно установить пакет sysstat

Прервать выполнение программы можно нажатием комбинации клавиш <Ctrl>+<C>

vmstat — расширенная статистика использования виртуальной памяти.

Прервать выполнение программы можно нажатием комбинации клавиш <Ctrl>+<C>

iostat — статистика использования прерываний

72. Планировщик at

Иногда нужно просто выполнить конкретные команды в определенное время (однократно), поэтому редактировать для этого таблицу crontab не совсем уместно.
Такую задачу можно решить более рационально. Убедитесь, что у вас установлен и запущен демон atd. 

После этого введите команду:
at <время> [дата]

Затем просто вводите команды, которые вы хотите выполнить в указанное время.
Для завершения ввода нажмите комбинацию клавиш <Ctrl>+<D>. 

Время указывается в AM/PM-формате — например, если вам нужно выполнить команды в 14:00, то вы должны ввести команду: at 2pm.


Команды atq и atrm
Просмотреть очередь заданий можно командой atq, а удалить какое-либо задание — командой atrm.
В целях повышения безопасности в файл /etc/at.deny можно добавить команды, которые запрещены для выполнения планировщиком at.

Иногда нужно просто выполнить конкретные команды в определенное время (однократно), поэтому редактировать для этого таблицу crontab не совсем уместно.

Такую задачу можно решить более рационально. Убедитесь, что у вас установлен и запущен демон atd.

После этого введите команду:

at <время> [дата]

Затем просто вводите команды, которые вы хотите выполнить в указанное время.

Для завершения ввода нажмите комбинацию клавиш <Ctrl>+<D>.

Время указывается в AM/PM-формате — например, если вам нужно выполнить команды в 14:00, то вы должны ввести команду: at 2pm.

Команды atq и atrm

Просмотреть очередь заданий можно командой atq, а удалить какое-либо задание — командой atrm.

В целях повышения безопасности в файл /etc/at.deny можно добавить команды, которые запрещены для выполнения планировщиком at.

73. Планировщик crond

В Linux есть специальный демон crond, позволяющий выполнять программы по расписанию. 

Откройте конфигурационный файл демона crond — /etc/crontab
----------------------------------------------------------
SHELL=/bin/bash
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root
HOME=/
# run-parts
01 * * * * root nice -n 19 run-parts --report /etc/cron.hourly
02 4 * * * root nice -n 19 run-parts --report /etc/cron.daily
22 4 * * 0 root nice -n 19 run-parts --report /etc/cron.weekly
42 4 1 * * root nice -n 19 run-parts --report /etc/cron.monthly
----------------------------------------------------------

Но самое главное — не эти параметры, а сама таблица расписаний, занимающая в нашем случае последние четыре строки листинга. 
Согласно этой таблице, каждый час будут выполняться программы из каталога /etc/cron.hourly, каждый день — из каталога /etc/cron.daily, 
каждую неделю — из каталога /etc/cron.weekly и раз в месяц — из каталога /etc/cron.monthly.

Но иногда нужно создать более гибкое расписание. 
Например, мы хотим, чтобы одна программа выполнялась в 7:00, а другая в 7:20. 
Тут простым добавлением сценария в каталог /etc/cron.daily уже не отделаешься. 
Чтобы создать такое расписание, вам придется изучить формат записей таблицы расписаний:
минуты (0−59) часы (0−23) день (1−31) месяц (1−12) день_недели (0−6, 0 — Вс) команда

Чтобы реализовать наше расписание, следует добавить в файл /etc/crontab такие строки:
0 7 * * * /usr/bin/command1 arguments
20 7 * * * /usr/bin/command2 arguments
Первая команда будет запускаться каждый день в 7 часов утра, а вторая — тоже каждый день, но в 7:20.

В Linux есть специальный демон crond, позволяющий выполнять программы по расписанию.

Откройте конфигурационный файл демона crond — /etc/crontab

----------------------------------------------------------

SHELL=/bin/bash

PATH=/sbin:/bin:/usr/sbin:/usr/bin

MAILTO=root

HOME=/

# run-parts

01 * * * * root nice -n 19 run-parts --report /etc/cron.hourly

02 4 * * * root nice -n 19 run-parts --report /etc/cron.daily

22 4 * * 0 root nice -n 19 run-parts --report /etc/cron.weekly

42 4 1 * * root nice -n 19 run-parts --report /etc/cron.monthly

----------------------------------------------------------

Но самое главное — не эти параметры, а сама таблица расписаний, занимающая в нашем случае последние четыре строки листинга.

Согласно этой таблице, каждый час будут выполняться программы из каталога /etc/cron.hourly, каждый день — из каталога /etc/cron.daily,

каждую неделю — из каталога /etc/cron.weekly и раз в месяц — из каталога /etc/cron.monthly.

Но иногда нужно создать более гибкое расписание.

Например, мы хотим, чтобы одна программа выполнялась в 7:00, а другая в 7:20.

Тут простым добавлением сценария в каталог /etc/cron.daily уже не отделаешься.

Чтобы создать такое расписание, вам придется изучить формат записей таблицы расписаний:

минуты (0−59) часы (0−23) день (1−31) месяц (1−12) день_недели (0−6, 0 — Вс) команда

Чтобы реализовать наше расписание, следует добавить в файл /etc/crontab такие строки:

0 7 * * * /usr/bin/command1 arguments

20 7 * * * /usr/bin/command2 arguments

Первая команда будет запускаться каждый день в 7 часов утра, а вторая — тоже каждый день, но в 7:20.

74. Команды free и df: информация о системных ресурсах

Команда free выводит информацию об использовании оперативной и виртуальной памяти, 
а df — об использовании дискового пространства.

1 2	Команда free выводит информацию об использовании оперативной и виртуальной памяти, а df — об использовании дискового пространства.

75. Команда ssh: удаленный вход в систему

Восстав любого дистрибутива Linux входят: SSH-сервер (программа, которая и обеспечивает удаленный доступ к компьютеру, на котором она установлена) и
SSH-клиент (программа, позволяющая подключаться к SSH-серверу). 
Для установки SSH-сервера нужно установить пакет openssh (это разновидность SSH-сервера), а для установки SSH-клиента — пакет openssh-clients.

Работать с SSH-клиентом очень просто. Для подключения к удаленному компьютеру введите команду:
В качестве адреса можно указать как IP-адрес, так и доменное имя компьютера.
ssh [опции] <адрес_удаленного_компьютера>

ssh -l user 10.0.0.1
ssh user@host
ssh user@10.0.0.1


Параметры:
-c blowfish|3des|des Применяется для выбора алгоритма шифрования при условии, что используется первая версия протокола SSH (об этом позже). 
                     Можно указать blowfish, des или 3des -c шифр Задает список шифров, разделенных запятыми в порядке предпочтения. 
                     Опция используется для второй версии SSH.
                     Можно указать blowfish, twofish, arcfour, cast, des и 3des

-f Переводит ssh в фоновый режим после аутентификации пользователя. 
   Рекомендуется использовать для запуска программы X11. 
   Например: ssh –f server xterm 

-l имя_пользователя Указывает имя пользователя, с правами которого нужно зарегистрироваться на удаленном компьютере. 
   Опцию использовать не обязательно, поскольку удаленный компьютер и так запросит имя пользователя и пароль

-p порт Определяет порт SSH-сервера (по умолчанию используется порт 22)

-q "Тихий режим". Будут отображаться только сообщения о фатальных ошибках. 
    Все прочие предупреждающие сообщения в стандартный выходной поток выводиться не будут

-x Отключает перенаправление X11

-X Задействовать перенаправление X11. Полезна при запуске X11-программ

-1 Использовать только первую версию протокола SSH

-2 Использовать только вторую версию протокола SSH. 
   Вторая версия протокола более безопасна, поэтому при настройке
   SSH-сервера нужно применять именно ее

Восстав любого дистрибутива Linux входят: SSH-сервер (программа, которая и обеспечивает удаленный доступ к компьютеру, на котором она установлена) и

SSH-клиент (программа, позволяющая подключаться к SSH-серверу).

Для установки SSH-сервера нужно установить пакет openssh (это разновидность SSH-сервера), а для установки SSH-клиента — пакет openssh-clients.

Работать с SSH-клиентом очень просто. Для подключения к удаленному компьютеру введите команду:

В качестве адреса можно указать как IP-адрес, так и доменное имя компьютера.

ssh [опции] <адрес_удаленного_компьютера>

ssh -l user 10.0.0.1

ssh user@host

ssh user@10.0.0.1

Параметры:

-c blowfish|3des|des Применяется для выбора алгоритма шифрования при условии, что используется первая версия протокола SSH (об этом позже).

Можно указать blowfish, des или 3des -c шифр Задает список шифров, разделенных запятыми в порядке предпочтения.

Опция используется для второй версии SSH.

Можно указать blowfish, twofish, arcfour, cast, des и 3des

-f Переводит ssh в фоновый режим после аутентификации пользователя.

Рекомендуется использовать для запуска программы X11.

Например: ssh –f server xterm

-l имя_пользователя Указывает имя пользователя, с правами которого нужно зарегистрироваться на удаленном компьютере.

Опцию использовать не обязательно, поскольку удаленный компьютер и так запросит имя пользователя и пароль

-p порт Определяет порт SSH-сервера (по умолчанию используется порт 22)

-q "Тихий режим". Будут отображаться только сообщения о фатальных ошибках.

Все прочие предупреждающие сообщения в стандартный выходной поток выводиться не будут

-x Отключает перенаправление X11

-X Задействовать перенаправление X11. Полезна при запуске X11-программ

-1 Использовать только первую версию протокола SSH

-2 Использовать только вторую версию протокола SSH.

Вторая версия протокола более безопасна, поэтому при настройке

SSH-сервера нужно применять именно ее

76. Устройства и драйверы

uname –a — получить версию ядра, при установке настоящих Linux-драйверов (а не Windows-драйверов через ndiswrapper) нужно, 
           чтобы модуль (так в Linux называются драйверы) был откомпилирован для соответствующей версии ядра
dmidecode — показывает информацию о BIOS компьютера
lsdev — информация об установленных устройствах (нужно установить пакет procinfo)
lshal — выводит параметры всех устройств
lspci, lsusb, lshw — помогают идентифицировать ваше устройство, выводят соответственно список PCI-устройств, список USB-устройств и список оборудования компьютера
lsmod — выводит список загруженных модулей (драйверов устройств)
dmesg - лог загрузки ядра
dmesg -f - наблюдение за логом ядра (в этот момент удобно втыкать usb устройства например)
dmesg | less — просмотреть сообщения ядра
    
Следующие команды пригодятся для настройки сетевых интерфейсов, в том числе и беспроводных:
iwconfig — просмотреть информацию обо всех беспроводных интерфейсах
iwlist scan — найти беспроводные сети;
sudo dhclient wlan0 — обновить IP-адрес и другие сетевые параметры интерфейса wlan0 (имя может быть другим), предварительно получив их от DHCP сервера
route — просмотреть и изменить таблицу маршрутизации
sudo /etc/init.d/networking restart — перезапустить сеть
sudo killall NetworkManager — остановить NetworkManager
iwevent — просмотреть события беспроводной сети
sudo /etc/init.d/dbus restart — перезапустить все сетевые демоны.

Рассмотрим еще несколько программ. Программа badblocks позволяет проверить жесткий диск на наличие сбойных блоков.
Проверка выполняется очень просто:
badblocks -v <имя_устройства>
Например:
# badblocks -v /dev/hda

Параметр -v включает подробный режим работы, о каждом действии программа badblocks будет выводить отчет. 
Желательно выполнять программу в однопользовательском режиме, чтобы ее работе ничто не мешало.

Для тестирования оперативной памяти предназначена программа memtest86, которая работает по-особому. 
После ее установки создается специальный загрузочный образ, а для запуска программы вы должны перезапустить компьютер и выбрать
этот образ из меню загрузчика. Но обо всем по порядку.
Установите пакет memtest86. 
Вслед за этим выполните команду memtest-setup, которая настроит загрузочный модуль.
Вот теперь начинается самое интересное. 
Перезагрузите систему и выберите из меню загрузчика только что созданную программой memtest-setup запись. 
Запустится программа memtest86, которая сразу начнет тестировать вашу оперативную память и, если произойдет ошибка, непременно сообщит вам об этом.


С помощью программы hdparm можно выполнить тонкую настройку винчестера, что иногда позволяет существенно повысить его производительность. 
Раньше, скажем, ~10 лет , об этой программе много говорили, поскольку разработчики дистрибутивов устанавливали отказоустойчивые параметры винчестера, 
при которых он работал очень медленно.
Тестирование производительности жесткого диска выполняется командой:
# hdparm -t /dev/sda
Установка скорости 4x для привода CDROM:
# hdparm –E 4 /dev/sr0


hddtemp 
Выводит температуру винчестера (нужно заметить, что эта программа работает далеко не со всеми жесткими дисками)

smartmontools 
Мониторинг SMART-устройств.
Как правило, это жесткие диски с возможностью самодиагностики. 
Такой диск сам "скажет", сколько ему осталось, чтобы его отказ не стал для вас неприятной неожиданностью

bonnie Тестирование производительности винчестера

cpuburn 
Тестирование процессора. 
Выполняет так называемый стресс-тест процессора. 
Суть его заключается в том, что программа загружает ваш процессор на все 100% и продолжает работу в таком режиме.
При наличии неполадок в системе, например нагрева процессора из-за плохой вентиляции, это обязательно проявится во время стресс-теста в виде сбоя

screentest 
Тестирование/настройка монитора

uname –a — получить версию ядра, при установке настоящих Linux-драйверов (а не Windows-драйверов через ndiswrapper) нужно,

чтобы модуль (так в Linux называются драйверы) был откомпилирован для соответствующей версии ядра

dmidecode — показывает информацию о BIOS компьютера

lsdev — информация об установленных устройствах (нужно установить пакет procinfo)

lshal — выводит параметры всех устройств

lspci, lsusb, lshw — помогают идентифицировать ваше устройство, выводят соответственно список PCI-устройств, список USB-устройств и список оборудования компьютера

lsmod — выводит список загруженных модулей (драйверов устройств)

dmesg - лог загрузки ядра

dmesg -f - наблюдение за логом ядра (в этот момент удобно втыкать usb устройства например)

dmesg | less — просмотреть сообщения ядра

Следующие команды пригодятся для настройки сетевых интерфейсов, в том числе и беспроводных:

iwconfig — просмотреть информацию обо всех беспроводных интерфейсах

iwlist scan — найти беспроводные сети;

sudo dhclient wlan0 — обновить IP-адрес и другие сетевые параметры интерфейса wlan0 (имя может быть другим), предварительно получив их от DHCP сервера

route — просмотреть и изменить таблицу маршрутизации

sudo /etc/init.d/networking restart — перезапустить сеть

sudo killall NetworkManager — остановить NetworkManager

iwevent — просмотреть события беспроводной сети

sudo /etc/init.d/dbus restart — перезапустить все сетевые демоны.

Рассмотрим еще несколько программ. Программа badblocks позволяет проверить жесткий диск на наличие сбойных блоков.

Проверка выполняется очень просто:

badblocks -v <имя_устройства>

Например:

# badblocks -v /dev/hda

Параметр -v включает подробный режим работы, о каждом действии программа badblocks будет выводить отчет.

Желательно выполнять программу в однопользовательском режиме, чтобы ее работе ничто не мешало.

Для тестирования оперативной памяти предназначена программа memtest86, которая работает по-особому.

После ее установки создается специальный загрузочный образ, а для запуска программы вы должны перезапустить компьютер и выбрать

этот образ из меню загрузчика. Но обо всем по порядку.

Установите пакет memtest86.

Вслед за этим выполните команду memtest-setup, которая настроит загрузочный модуль.

Вот теперь начинается самое интересное.

Перезагрузите систему и выберите из меню загрузчика только что созданную программой memtest-setup запись.

Запустится программа memtest86, которая сразу начнет тестировать вашу оперативную память и, если произойдет ошибка, непременно сообщит вам об этом.

С помощью программы hdparm можно выполнить тонкую настройку винчестера, что иногда позволяет существенно повысить его производительность.

Раньше, скажем, ~10 лет , об этой программе много говорили, поскольку разработчики дистрибутивов устанавливали отказоустойчивые параметры винчестера,

при которых он работал очень медленно.

Тестирование производительности жесткого диска выполняется командой:

# hdparm -t /dev/sda

Установка скорости 4x для привода CDROM:

# hdparm –E 4 /dev/sr0

hddtemp

Выводит температуру винчестера (нужно заметить, что эта программа работает далеко не со всеми жесткими дисками)

smartmontools

Мониторинг SMART-устройств.

Как правило, это жесткие диски с возможностью самодиагностики.

Такой диск сам "скажет", сколько ему осталось, чтобы его отказ не стал для вас неприятной неожиданностью

bonnie Тестирование производительности винчестера

cpuburn

Тестирование процессора.

Выполняет так называемый стресс-тест процессора.

Суть его заключается в том, что программа загружает ваш процессор на все 100% и продолжает работу в таком режиме.

При наличии неполадок в системе, например нагрева процессора из-за плохой вентиляции, это обязательно проявится во время стресс-теста в виде сбоя

screentest

Тестирование/настройка монитора

77. Конфигурационный файл GRUB2

Команды grub-mkconfig и update-grub

файл GRUB2 — /boot/grub/grub.cfg. 
Этот конфигурационный файл не редактируется вручную, поскольку для его создания используется утилита /usr/sbin/grub-mkconfig, 
которая генерирует этот конфигурационный файл на основе шаблонов, хранящихся в каталоге /etc/grub.d, и настроек из файла /etc/default/grub.

В кавычках после menuentry находится описание элемента меню — можете заменить этот текст на все, что вам нравится. 
Далее следуют команды GRUB2. 
Напри-мер, команда insmod ext2 загружает модуль ext2. Это не модуль ядра Linux! 
Это модуль GRUB2 — файл ext2.mod, находящийся в каталоге /boot/grub.
Команда set root устанавливает загрузочное устройство. 
Формат имени устройства такой же, как в случае с GRUB2.

ВНИМАНИЕ!
Мы знаем, что даже ATA-диски в новых дистрибутивах имеют имена вида /dev/sda*.
Но команда set root загрузчика GRUB2 содержит имя hd. 
Это не опечатка! 
Это внутреннее имя устройства GRUB, а не имя системного устройства.

После служебного слова linux задаются ядро (файл ядра) и параметры, которые будут переданы ядру. 
Служебное слово initrd указывает на файл initrd.

Теперь рассмотрим файл /etc/default/grub, содержащий параметры GRUB2. 
Поскольку этот файл вы будете редактировать чаще, чем grub.cfg.
---------------------------------------------------------------
# Если вы измените этот файл, введите команду 'update-grub'
# для обновления вашего файла /boot/grub/grub.cfg.
# Элемент по умолчанию, нумерация начинается с 0
GRUB_DEFAULT=0
# Чтобы увидеть меню GRUB, нужно или закомментировать следующую
# опцию, или установить значение больше 0, но в этом случае
# нужно изменить значение GRUB_HIDDEN_TIMEOUT_QUIET на false
GRUB_HIDDEN_TIMEOUT=0
GRUB_HIDDEN_TIMEOUT_QUIET=true
# Тайм-аут (в секундах)
GRUB_TIMEOUT="10"
# Название дистрибутива — вывод команды lsb_release или просто Debian
GRUB_DISTRIBUTOR=`lsb_release -i -s 2> /dev/null || echo Debian`
# Параметры ядра по умолчанию
GRUB_CMDLINE_LINUX_DEFAULT="quiet splash"
GRUB_CMDLINE_LINUX=""
# Раскомментируйте для отключения графического терминала
# (только для grub-pc)
#GRUB_TERMINAL=console
# Разрешение графического терминала
#GRUB_GFXMODE=640x480
# Раскомментируйте следующую опцию, если вы не хотите передавать
# параметр "root=UUID=xxx" ядру Linux
#GRUB_DISABLE_LINUX_UUID=true
# Раскомментируйте, если нужно отключить генерацию элемента меню
# режима восстановления
#GRUB_DISABLE_LINUX_RECOVERY="true"
---------------------------------------------------------------
После изменения файла /etc/default/grub не забудьте запустить команду update-grub для обновления вашего /boot/grub/grub.cfg.

Команды grub-mkconfig и update-grub

файл GRUB2 — /boot/grub/grub.cfg.

Этот конфигурационный файл не редактируется вручную, поскольку для его создания используется утилита /usr/sbin/grub-mkconfig,

которая генерирует этот конфигурационный файл на основе шаблонов, хранящихся в каталоге /etc/grub.d, и настроек из файла /etc/default/grub.

В кавычках после menuentry находится описание элемента меню — можете заменить этот текст на все, что вам нравится.

Далее следуют команды GRUB2.

Напри-мер, команда insmod ext2 загружает модуль ext2. Это не модуль ядра Linux!

Это модуль GRUB2 — файл ext2.mod, находящийся в каталоге /boot/grub.

Команда set root устанавливает загрузочное устройство.

Формат имени устройства такой же, как в случае с GRUB2.

ВНИМАНИЕ!

Мы знаем, что даже ATA-диски в новых дистрибутивах имеют имена вида /dev/sda*.

Но команда set root загрузчика GRUB2 содержит имя hd.

Это не опечатка!

Это внутреннее имя устройства GRUB, а не имя системного устройства.

После служебного слова linux задаются ядро (файл ядра) и параметры, которые будут переданы ядру.

Служебное слово initrd указывает на файл initrd.

Теперь рассмотрим файл /etc/default/grub, содержащий параметры GRUB2.

Поскольку этот файл вы будете редактировать чаще, чем grub.cfg.

---------------------------------------------------------------

# Если вы измените этот файл, введите команду 'update-grub'

# для обновления вашего файла /boot/grub/grub.cfg.

# Элемент по умолчанию, нумерация начинается с 0

GRUB_DEFAULT=0

# Чтобы увидеть меню GRUB, нужно или закомментировать следующую

# опцию, или установить значение больше 0, но в этом случае

# нужно изменить значение GRUB_HIDDEN_TIMEOUT_QUIET на false

GRUB_HIDDEN_TIMEOUT=0

GRUB_HIDDEN_TIMEOUT_QUIET=true

# Тайм-аут (в секундах)

GRUB_TIMEOUT="10"

# Название дистрибутива — вывод команды lsb_release или просто Debian

GRUB_DISTRIBUTOR=`lsb_release -i -s 2> /dev/null || echo Debian`

# Параметры ядра по умолчанию

GRUB_CMDLINE_LINUX_DEFAULT="quiet splash"

GRUB_CMDLINE_LINUX=""

# Раскомментируйте для отключения графического терминала

# (только для grub-pc)

#GRUB_TERMINAL=console

# Разрешение графического терминала

#GRUB_GFXMODE=640x480

# Раскомментируйте следующую опцию, если вы не хотите передавать

# параметр "root=UUID=xxx" ядру Linux

#GRUB_DISABLE_LINUX_UUID=true

# Раскомментируйте, если нужно отключить генерацию элемента меню

# режима восстановления

#GRUB_DISABLE_LINUX_RECOVERY="true"

---------------------------------------------------------------

После изменения файла /etc/default/grub не забудьте запустить команду update-grub для обновления вашего /boot/grub/grub.cfg.

78. Системы инициализации Linux

Для работы с виртуальным диском используется технология initrd (INITial RamDisk). 
Файл образа виртуального диска находится в каталоге /boot и называется initrd-<версия ядра>.
В процессе запуска ядра монтируется корневая файловая система и запускается программа init, которая и выполняет дальнейшую инициализацию системы. 
Программа init — часть init, самой надежной и распространенной системы инициализации Linux, которая используется многими дистрибутивами

Кроме системы инициализации init существуют и другие системы, в частности: initng, upstart и systemd:
система initng позволяет существенно ускорить запуск Linux, но, к сожалению, она так и осталась экспериментальной и не прижилась в дистрибутивах Linux.
Ни в один из современных дистрибутивов она не включена, поэтому ее мы рассматривать не будем
система upstart была специально разработана для дистрибутива Ubuntu, но ее при желании можно установить в любом дистрибутиве
система systemd — современная система инициализации, заменившая init в последних версиях дистрибутивов Fedora, openSUSE, Mandriva и некоторых других

Для работы с виртуальным диском используется технология initrd (INITial RamDisk).

Файл образа виртуального диска находится в каталоге /boot и называется initrd-<версия ядра>.

В процессе запуска ядра монтируется корневая файловая система и запускается программа init, которая и выполняет дальнейшую инициализацию системы.

Программа init — часть init, самой надежной и распространенной системы инициализации Linux, которая используется многими дистрибутивами

Кроме системы инициализации init существуют и другие системы, в частности: initng, upstart и systemd:

система initng позволяет существенно ускорить запуск Linux, но, к сожалению, она так и осталась экспериментальной и не прижилась в дистрибутивах Linux.

Ни в один из современных дистрибутивов она не включена, поэтому ее мы рассматривать не будем

система upstart была специально разработана для дистрибутива Ubuntu, но ее при желании можно установить в любом дистрибутиве

система systemd — современная система инициализации, заменившая init в последних версиях дистрибутивов Fedora, openSUSE, Mandriva и некоторых других

79. Система инициализации init

Итак, программа init читает конфигурационный файл /etc/inittab и запускает другие процессы, согласно инструкциям этого файла

Файл /etc/inittab
-----------------
id:5:initdefault:
# Инициализация системы
si::sysinit:/etc/rc.d/rc.sysinit
l0:0:wait:/etc/rc.d/rc 0
l1:1:wait:/etc/rc.d/rc 1
l2:2:wait:/etc/rc.d/rc 2
l3:3:wait:/etc/rc.d/rc 3
l4:4:wait:/etc/rc.d/rc 4
l5:5:wait:/etc/rc.d/rc 5
l6:6:wait:/etc/rc.d/rc 6
# Что делать при нажатии Ctrl-Alt-Delete
ca::ctrlaltdel:/sbin/shutdown -t3 -r now
# От UPS была получена команда, что пропало питание.
# Немного ждем и выключаем компьютер
pf::powerfail:/sbin/shutdown -f -h +2 "Power Failure; System Shutting Down"
# От UPS получена команда, что питание возобновилось
# Отменяем shutdown
pr:12345:powerokwait:/sbin/shutdown -c "Power Restored; Shutdown
Cancelled"
# Запуск gettys
1:2345:respawn:/sbin/mingetty tty1
2:2345:respawn:/sbin/mingetty tty2
3:2345:respawn:/sbin/mingetty tty3
4:2345:respawn:/sbin/mingetty tty4
5:2345:respawn:/sbin/mingetty tty5
6:2345:respawn:/sbin/mingetty tty6
# Однопользовательский режим
~~:S:wait:/bin/sh
-----------------

Одна из главных инструкций файла /etc/inittab выглядит так:
id:<число>:initdefault:

Эта инструкция задает уровень запуска по умолчанию. 
Уровень запуска определяет, какие действия будут выполнены программой init (какие процессы будут запущены). 
Всего предусмотрено шесть уровней запуска:
0 — останов системы (ясно, что в качестве уровня по умолчанию этот уровень быть не может)
1 — однопользовательский режим (в него можно перейти сразу при загрузке, передав ядру параметр single)
2 — многопользовательский режим без поддержки сети
3 — многопользовательский режим с поддержкой сети
4 — не используется
5 — многопользовательский графический режим с загрузкой X11 и поддержкой сети
6 — перезагрузка системы
В большинстве случаев в качестве уровня запуска по умолчанию устанавливается 3 или 5

Команда init
Перейти на тот или иной уровень можно и после загрузки системы. 
Для этого используется команда:
/sbin/init <уровень_запуска>

"Вычислив" уровень запуска, init поочередно запускает сценарии из каталога /etc/rc.d/rcX.d, где X — это номер уровня запуска. 
Если зайти в один из этих каталогов, например в /etc/rc.d/rc3.d, то можно увидеть ссылки формата:
S<номер><имя>

Параметр <номер> определяет порядок запуска сценария (например, S10network запустится раньше, чем S11internet), а параметр <имя> задает имя сценария. 
Сами сценарии находятся в каталоге /etc/rc.d/init.d.

Ссылки, начинающиеся на символ S, — это ссылки запуска (от англ. start), при запуске соответствующих сценариев им будет передан аргумент start. 
Например, если init обнаружила в /etc/rc.d/rc3.d файл S10network, то она выполнит команду:
/etc/rc.d/init.d/network start

Если имя ссылки начинается на букву K (от англ. kill), то это ссылка останова сервиса, например K01service. 
Данная ссылка указывает на команду:
/etc/rc.d/init.d/service stop

Вы можете запустить любой сценарий из каталога init.d непосредственно, передав ему параметры start (запуск), stop (останов) и др. (зависит от сервиса).

Команда service
А можете воспользоваться командой service:
service <имя_сервиса> <start|stop|...>

Здесь <имя_сервиса> — это имя файла в каталоге /etc/rc.d/init.d.

В openSUSE имеется удобная команда:
rc<имя_сервиса> <start|restart|stop>

Так, для запуска Apache можно использовать команду:
rcapache start

Итак, программа init читает конфигурационный файл /etc/inittab и запускает другие процессы, согласно инструкциям этого файла

Файл /etc/inittab

-----------------

id:5:initdefault:

# Инициализация системы

si::sysinit:/etc/rc.d/rc.sysinit

l0:0:wait:/etc/rc.d/rc 0

l1:1:wait:/etc/rc.d/rc 1

l2:2:wait:/etc/rc.d/rc 2

l3:3:wait:/etc/rc.d/rc 3

l4:4:wait:/etc/rc.d/rc 4

l5:5:wait:/etc/rc.d/rc 5

l6:6:wait:/etc/rc.d/rc 6

# Что делать при нажатии Ctrl-Alt-Delete

ca::ctrlaltdel:/sbin/shutdown -t3 -r now

# От UPS была получена команда, что пропало питание.

# Немного ждем и выключаем компьютер

pf::powerfail:/sbin/shutdown -f -h +2 "Power Failure; System Shutting Down"

# От UPS получена команда, что питание возобновилось

# Отменяем shutdown

pr:12345:powerokwait:/sbin/shutdown -c "Power Restored; Shutdown

Cancelled"

# Запуск gettys

1:2345:respawn:/sbin/mingetty tty1

2:2345:respawn:/sbin/mingetty tty2

3:2345:respawn:/sbin/mingetty tty3

4:2345:respawn:/sbin/mingetty tty4

5:2345:respawn:/sbin/mingetty tty5

6:2345:respawn:/sbin/mingetty tty6

# Однопользовательский режим

~~:S:wait:/bin/sh

-----------------

Одна из главных инструкций файла /etc/inittab выглядит так:

id:<число>:initdefault:

Эта инструкция задает уровень запуска по умолчанию.

Уровень запуска определяет, какие действия будут выполнены программой init (какие процессы будут запущены).

Всего предусмотрено шесть уровней запуска:

0 — останов системы (ясно, что в качестве уровня по умолчанию этот уровень быть не может)

1 — однопользовательский режим (в него можно перейти сразу при загрузке, передав ядру параметр single)

2 — многопользовательский режим без поддержки сети

3 — многопользовательский режим с поддержкой сети

4 — не используется

5 — многопользовательский графический режим с загрузкой X11 и поддержкой сети

6 — перезагрузка системы

В большинстве случаев в качестве уровня запуска по умолчанию устанавливается 3 или 5

Команда init

Перейти на тот или иной уровень можно и после загрузки системы.

Для этого используется команда:

/sbin/init <уровень_запуска>

"Вычислив" уровень запуска, init поочередно запускает сценарии из каталога /etc/rc.d/rcX.d, где X — это номер уровня запуска.

Если зайти в один из этих каталогов, например в /etc/rc.d/rc3.d, то можно увидеть ссылки формата:

S<номер><имя>

Параметр <номер> определяет порядок запуска сценария (например, S10network запустится раньше, чем S11internet), а параметр <имя> задает имя сценария.

Сами сценарии находятся в каталоге /etc/rc.d/init.d.

Ссылки, начинающиеся на символ S, — это ссылки запуска (от англ. start), при запуске соответствующих сценариев им будет передан аргумент start.

Например, если init обнаружила в /etc/rc.d/rc3.d файл S10network, то она выполнит команду:

/etc/rc.d/init.d/network start

Если имя ссылки начинается на букву K (от англ. kill), то это ссылка останова сервиса, например K01service.

Данная ссылка указывает на команду:

/etc/rc.d/init.d/service stop

Вы можете запустить любой сценарий из каталога init.d непосредственно, передав ему параметры start (запуск), stop (останов) и др. (зависит от сервиса).

Команда service

А можете воспользоваться командой service:

service <имя_сервиса> <start|stop|...>

Здесь <имя_сервиса> — это имя файла в каталоге /etc/rc.d/init.d.

В openSUSE имеется удобная команда:

rc<имя_сервиса> <start|restart|stop>

Так, для запуска Apache можно использовать команду:

rcapache start

80. Система инициализации systemd

Система systemd построена на концепции модулей (units). 
У каждого модуля есть свое имя и тип. 
Например, модуль типа nscd.service управляет сервисом (демоном) nscd.

Основными типами модулей являются:
service (сервис) — демоны, которые можно запустить, перезапустить, остановить. 
Для совместимости с SysV (пока еще не все привыкли к systemd) в системе есть возможность чтения традиционных сценариев управления демонами. 
Как обычно, они находятся в каталоге /etc/init.d. Ради справедливости нужно отметить, что в openSUSE 12.1 содержимое каталога init.d такое же, как и было раньше (при использовании init), 
поэтому сразу и не заметишь, что используется новая система инициализации. 
А вот в Fedora 16 сценариев в init.d гораздо меньше и сразу видно — что-то тут не так

socket (сокет) — реализует сокет, расположенный в файловой системе или Интернете. 
Поддерживаются сокеты AF_INET, AF_INET6, AF_UNIX. 
У каждого сокета есть связанный с ним сервис. 
Например, при попытке установки соединения с сокетом nscd.socket будет запущен сервис nscd.service. 
Вам это ничего не напоминает? 
А я вспоминаю старый суперсервер inetd и его более новую версию xinetd — они работали именно так

device (устройство) — реализует устройство в дереве устройств. 
Если устройство описано через правила udev, то его можно представить в systemd как модуль типа device

mount (точка монтирования) — реализует точку монтирования в файловой системе. 
Демон systemd контролирует все точки монтирования, их подключение и отключение. 
Теперь файл /etc/fstab не главный, а используется как дополнительный источник информации о точках монтирования, 
хотя вы по-прежнему можете описывать в нем ваши точки монтирования

automount (автоматическая точка монтирования) — реализует автоматическое монтирование файловой системы. 
Такой модуль имеет соответствующий ему модуль типа mount, который будет запущен, как только файловая система станет доступной

target (цель) — служит для логической группировки модулей других типов. 
Этот тип модуля очень важен, но в то же время он ничего не делает, а просто группирует другие модули.
В systemd больше нет уровней запуска (которые были в init), вместо них используются цели. Например, цель multi-user.target описывает, 
какие сервисы (точнее, модули, а не только сервисы) должны быть запущены в многопользовательском режиме. 
По сути, цель multi-user.target аналогична 3-му уровню запуска

snapshot (снимок) — также ничего не делает, а только ссылается на другие модули. 
Снимки используются в двух случаях. 
Первый случай — временный перевод системы в какое-то состояние, например, в однопользовательский режим, и последующий возврат из этого состояния. 
Второй — поддержка режима suspend.
Многие демоны не могут правильно переходить в этот режим. 
Во многих случаях их лучше остановить и запустить заново, после того как система проснется.


Основные особенности systemd
Перечислим основные особенности systemd:
- позволяет контролировать для каждого процесса: среду исполнения, ограничение ресурсов, рабочий каталог, корневой каталог, umask, параметр nice, ID пользователя и группы и многое другое

- синтаксис файлов конфигурации systemd очень похож на синтаксис файлов .desktop и поэтому будет знаком многим Linux-пользователям
  совместимость со сценариями SysV (правда, не могу пока сказать — временная или постоянная). 
  Если есть старая (например, /etc/init.d/avahi) и новая (/etc/systemd/system/avahi.service) конфигурации, то используется новая

- для удобства и обратной совместимости поддерживается и обрабатывается файл /etc/fstab;

- совместимость с /dev/initctl. На практике это означает, что многие системные команды вроде poweroff, shutdown будут работать с новой системой systemd

- система init использовала для инициализации множества shell-скриптов, которые для большей эффективности были переписаны на языке C и помещены непосредственно в /sbin/systemd. 
  Монтирование виртуальных файловых систем, установка имени узла — все это и многое другое делается теперь без shell-сценариев

- состояние сервиса может контролироваться через D-Bus (системе upstart такое и не снится).

Конечно, это далеко не все особенности systemd, но остальные знать и не обязательно. 


Начнем с файла /etc/inittab, который в случае с systemd представляет собой обычный текстовый файл. 
Теперь это просто набор комментариев, никак не влияющий на поведение системы

Файл /etc/inittab
-----------------
# inittab is no longer used when using systemd.
#
# ADDING CONFIGURATION HERE WILL HAVE NO EFFECT ON YOUR SYSTEM.
#
# Ctrl-Alt-Delete is handled by /etc/systemd/system/ctrl-alt-del.target
#
# systemd uses 'targets' instead of runlevels. By default,
# there are two main targets:
#
# multi-user.target: analogous to runlevel 3
# graphical.target: analogous to runlevel 5
#
# To set a default target, run:
#
# ln -s /lib/systemd/system/<target name>.target
# /etc/systemd/system/default.target
#
-----------------

Первые две строки здесь сообщают, что этот файл больше не используется systemd, и добавление в него конфигурации никак не повлияет на систему.
Далее (строка 3) сообщается, что реакция на комбинацию клавиш <Ctrl>++<Alt>+<Delete> содержится в файле /etc/systemd/system/ctrl-alt-del.target. 
Но по умолчанию этого файла нет, а нажатие комбинации <Ctrl>+<Alt>+<Delete> обрабатывается на уровне GNOME3 и теперь трактуется как выход из системы, а не перезагрузка. 
Что делать, если вы хотите отказаться от комбинации <Ctrl>++<Alt>+<Delete> вообще? 
Откройте Параметры системы, запустите апплет Клавиатура, перейдите на вкладку Комбинации клавиш и затем в группу Система. 
Вы увидите описание действия (Выйти из системы) и соответствующую ему комбинацию клавиш. 
Чтобы запретить реакцию на эту комбинацию клавиш, щелкните по действию и нажмите клавишу <Пробел>.
Желаете вернуть старое поведение системы, чтобы она перезагружалась при нажатии <Ctrl>+<Alt>+<Delete>? 
Создайте файл /etc/systemd/system/ctrl-alt-del.target, точнее не файл, а ссылку. 

Ссылаться она должна на файл /lib/systemd/system/reboot.target:
ln -s /lib/systemd/system/reboot.target /etc/systemd/system/ctrl-altdel.target

Вернемся к файлу inittab. Там сказано (строка 4), что вместо уровней запуска systemd использует цели. 
Существуют две основных цели: multi-user.target, аналогичная уровню выполнения 3, или же ц graphical.target, аналогичная 5-му уровню запуска.

Чтобы установить цель по умолчанию, нужно создать ссылку:
ln -s /lib/systemd/system/имя_цели.target /etc/systemd/system/default.target
По умолчанию default.target ссылается на /lib/systemd/system/runlevel5.target. 
В свою очередь, runlevel5.target — это просто ссылка на graphical.target.

Исследуем systemd дальше. Зайдите в каталог /etc/systemd/system. 
В нем вы найдете ряд каталогов вида <имя цели>.wants.
В этих каталогах имеются ссылки на другие модули системы systemd. 
Все они ссылаются на файлы в /lib/systemd/system. 
Зайдите в каталог multi-user.target.wants. 
В нем вы найдете список ссылок на файлы
NetworkManager.service, abrt-ccpp.service, atd-service и т. д. 

Вам это ничего не напоминает? 
Похоже на содержимое 3-го уровня запуска. 
Как видите, никаких сложностей.
Далее предлагаю продолжить знакомство с системой самостоятельно. 
Там все очень просто, даже проще, чем вы думаете.

/lib/systemd/system/graphical.target
------------------------------------
[Unit]
Description=Graphical Interface
Requires=multi-user.target
After=multi-user.target
Conflicts=rescue.target
AllowIsolate=yes
[Install]
Alias=default.target
------------------------------------

Рассмотрим самые важные параметры этого файла:
- параметр Requires указывает, что данная цель требует выполнения цели multiuser.
target (заменяет 3-й уровень запуска)

- данная цель должна быть выполнена после multi-user.target (параметр After)

- параметр Conflicts указывает на цель (или цели — в этом случае они перечисляются через пробел), с которой конфликтует данная цель.

Теперь откройте цель multi-user.target и посмотрите, от какой цели зависит она.
Вы обнаружите, что она зависит от basic.target, которая, в свою очередь, зависит от других целей. 
Просмотрите файлы целей — файл за файлом. 
Так вы существенно глубже сможете понять новую систему инициализации.

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

Система systemd построена на концепции модулей (units).

У каждого модуля есть свое имя и тип.

Например, модуль типа nscd.service управляет сервисом (демоном) nscd.

Основными типами модулей являются:

service (сервис) — демоны, которые можно запустить, перезапустить, остановить.

Для совместимости с SysV (пока еще не все привыкли к systemd) в системе есть возможность чтения традиционных сценариев управления демонами.

Как обычно, они находятся в каталоге /etc/init.d. Ради справедливости нужно отметить, что в openSUSE 12.1 содержимое каталога init.d такое же, как и было раньше (при использовании init),

поэтому сразу и не заметишь, что используется новая система инициализации.

А вот в Fedora 16 сценариев в init.d гораздо меньше и сразу видно — что-то тут не так

socket (сокет) — реализует сокет, расположенный в файловой системе или Интернете.

Поддерживаются сокеты AF_INET, AF_INET6, AF_UNIX.

У каждого сокета есть связанный с ним сервис.

Например, при попытке установки соединения с сокетом nscd.socket будет запущен сервис nscd.service.

Вам это ничего не напоминает?

А я вспоминаю старый суперсервер inetd и его более новую версию xinetd — они работали именно так

device (устройство) — реализует устройство в дереве устройств.

Если устройство описано через правила udev, то его можно представить в systemd как модуль типа device

mount (точка монтирования) — реализует точку монтирования в файловой системе.

Демон systemd контролирует все точки монтирования, их подключение и отключение.

Теперь файл /etc/fstab не главный, а используется как дополнительный источник информации о точках монтирования,

хотя вы по-прежнему можете описывать в нем ваши точки монтирования

automount (автоматическая точка монтирования) — реализует автоматическое монтирование файловой системы.

Такой модуль имеет соответствующий ему модуль типа mount, который будет запущен, как только файловая система станет доступной

target (цель) — служит для логической группировки модулей других типов.

Этот тип модуля очень важен, но в то же время он ничего не делает, а просто группирует другие модули.

В systemd больше нет уровней запуска (которые были в init), вместо них используются цели. Например, цель multi-user.target описывает,

какие сервисы (точнее, модули, а не только сервисы) должны быть запущены в многопользовательском режиме.

По сути, цель multi-user.target аналогична 3-му уровню запуска

snapshot (снимок) — также ничего не делает, а только ссылается на другие модули.

Снимки используются в двух случаях.

Первый случай — временный перевод системы в какое-то состояние, например, в однопользовательский режим, и последующий возврат из этого состояния.

Второй — поддержка режима suspend.

Многие демоны не могут правильно переходить в этот режим.

Во многих случаях их лучше остановить и запустить заново, после того как система проснется.

Основные особенности systemd

Перечислим основные особенности systemd:

- позволяет контролировать для каждого процесса: среду исполнения, ограничение ресурсов, рабочий каталог, корневой каталог, umask, параметр nice, ID пользователя и группы и многое другое

- синтаксис файлов конфигурации systemd очень похож на синтаксис файлов .desktop и поэтому будет знаком многим Linux-пользователям

совместимость со сценариями SysV (правда, не могу пока сказать — временная или постоянная).

Если есть старая (например, /etc/init.d/avahi) и новая (/etc/systemd/system/avahi.service) конфигурации, то используется новая

- для удобства и обратной совместимости поддерживается и обрабатывается файл /etc/fstab;

- совместимость с /dev/initctl. На практике это означает, что многие системные команды вроде poweroff, shutdown будут работать с новой системой systemd

- система init использовала для инициализации множества shell-скриптов, которые для большей эффективности были переписаны на языке C и помещены непосредственно в /sbin/systemd.

Монтирование виртуальных файловых систем, установка имени узла — все это и многое другое делается теперь без shell-сценариев

- состояние сервиса может контролироваться через D-Bus (системе upstart такое и не снится).

Конечно, это далеко не все особенности systemd, но остальные знать и не обязательно.

Начнем с файла /etc/inittab, который в случае с systemd представляет собой обычный текстовый файл.

Теперь это просто набор комментариев, никак не влияющий на поведение системы

Файл /etc/inittab

-----------------

# inittab is no longer used when using systemd.

# ADDING CONFIGURATION HERE WILL HAVE NO EFFECT ON YOUR SYSTEM.

# Ctrl-Alt-Delete is handled by /etc/systemd/system/ctrl-alt-del.target

# systemd uses 'targets' instead of runlevels. By default,

# there are two main targets:

# multi-user.target: analogous to runlevel 3

# graphical.target: analogous to runlevel 5

# To set a default target, run:

# ln -s /lib/systemd/system/<target name>.target

# /etc/systemd/system/default.target

-----------------

Первые две строки здесь сообщают, что этот файл больше не используется systemd, и добавление в него конфигурации никак не повлияет на систему.

Далее (строка 3) сообщается, что реакция на комбинацию клавиш <Ctrl>++<Alt>+<Delete> содержится в файле /etc/systemd/system/ctrl-alt-del.target.

Но по умолчанию этого файла нет, а нажатие комбинации <Ctrl>+<Alt>+<Delete> обрабатывается на уровне GNOME3 и теперь трактуется как выход из системы, а не перезагрузка.

Что делать, если вы хотите отказаться от комбинации <Ctrl>++<Alt>+<Delete> вообще?

Откройте Параметры системы, запустите апплет Клавиатура, перейдите на вкладку Комбинации клавиш и затем в группу Система.

Вы увидите описание действия (Выйти из системы) и соответствующую ему комбинацию клавиш.

Чтобы запретить реакцию на эту комбинацию клавиш, щелкните по действию и нажмите клавишу <Пробел>.

Желаете вернуть старое поведение системы, чтобы она перезагружалась при нажатии <Ctrl>+<Alt>+<Delete>?

Создайте файл /etc/systemd/system/ctrl-alt-del.target, точнее не файл, а ссылку.

Ссылаться она должна на файл /lib/systemd/system/reboot.target:

ln -s /lib/systemd/system/reboot.target /etc/systemd/system/ctrl-altdel.target

Вернемся к файлу inittab. Там сказано (строка 4), что вместо уровней запуска systemd использует цели.

Существуют две основных цели: multi-user.target, аналогичная уровню выполнения 3, или же ц graphical.target, аналогичная 5-му уровню запуска.

Чтобы установить цель по умолчанию, нужно создать ссылку:

ln -s /lib/systemd/system/имя_цели.target /etc/systemd/system/default.target

По умолчанию default.target ссылается на /lib/systemd/system/runlevel5.target.

В свою очередь, runlevel5.target — это просто ссылка на graphical.target.

Исследуем systemd дальше. Зайдите в каталог /etc/systemd/system.

В нем вы найдете ряд каталогов вида <имя цели>.wants.

В этих каталогах имеются ссылки на другие модули системы systemd.

Все они ссылаются на файлы в /lib/systemd/system.

Зайдите в каталог multi-user.target.wants.

В нем вы найдете список ссылок на файлы

NetworkManager.service, abrt-ccpp.service, atd-service и т. д.

Вам это ничего не напоминает?

Похоже на содержимое 3-го уровня запуска.

Как видите, никаких сложностей.

Далее предлагаю продолжить знакомство с системой самостоятельно.

Там все очень просто, даже проще, чем вы думаете.

/lib/systemd/system/graphical.target

------------------------------------

[Unit]

Description=Graphical Interface

Requires=multi-user.target

After=multi-user.target

Conflicts=rescue.target

AllowIsolate=yes

[Install]

Alias=default.target

------------------------------------

Рассмотрим самые важные параметры этого файла:

- параметр Requires указывает, что данная цель требует выполнения цели multiuser.

target (заменяет 3-й уровень запуска)

- данная цель должна быть выполнена после multi-user.target (параметр After)

- параметр Conflicts указывает на цель (или цели — в этом случае они перечисляются через пробел), с которой конфликтует данная цель.

Теперь откройте цель multi-user.target и посмотрите, от какой цели зависит она.

Вы обнаружите, что она зависит от basic.target, которая, в свою очередь, зависит от других целей.

Просмотрите файлы целей — файл за файлом.

Так вы существенно глубже сможете понять новую систему инициализации.

81. Команды системного администратора

Многие администраторы привыкли использовать команды service и chkconfig. 
Они по-прежнему работают в мире systemd

Команда init          Команда systemd                            Описание
service s start       systemctl start s.service                  Разовый запуск сер-виса s
service s stop        systemctl stop s.service                   Остановить сервис s
service s restart     systemctl restart s.service                Перезапуск сервиса s
system s status       systemctl status s.service                 Статус сервиса s
ls /etc/rc.d/init.d   ls /lib/systemd/system/*.service           Получение списка служб
                      /etc/systemd/system/*.service
chkconfig s on        systemctl enable s.service                 Включает запуск сервиса после перезагрузки (сервис s будет загружаться автоматически)
chkconfig s off       systemctl disable s.service                Отключает автоматический запуск сервиса s
chkconfig s           systemctl is-enabled s.servive             Проверяем, запускается ли s автоматически

chkconfig s --list    ls /etc/systemd/system/*.wants/s.service   Выводит список целей(уровней запуска), на которых сервис будет запускаться автоматически

Многие администраторы привыкли использовать команды service и chkconfig.

Они по-прежнему работают в мире systemd

Команда init Команда systemd Описание

service s start systemctl start s.service Разовый запуск сер-виса s

service s stop systemctl stop s.service Остановить сервис s

service s restart systemctl restart s.service Перезапуск сервиса s

system s status systemctl status s.service Статус сервиса s

ls /etc/rc.d/init.d ls /lib/systemd/system/*.service Получение списка служб

/etc/systemd/system/*.service

chkconfig s on systemctl enable s.service Включает запуск сервиса после перезагрузки (сервис s будет загружаться автоматически)

chkconfig s off systemctl disable s.service Отключает автоматический запуск сервиса s

chkconfig s systemctl is-enabled s.servive Проверяем, запускается ли s автоматически

chkconfig s --list ls /etc/systemd/system/*.wants/s.service Выводит список целей(уровней запуска), на которых сервис будет запускаться автоматически

82. Пользователь root

Пользователь root обладает максимальными полномочиями в системе. 
Система полностью подвластна этому пользователю.
Любая команда будет безоговорочно выполнена системой. 
Поэтому работать под именем пользователя root нужно с осторожностью. 
Всегда думайте над тем, что собираетесь сделать. 
Если вы дадите команду на удаление корневой файловой системы, система ее выполнит. 
Если же вы попытаетесь выполнить определенную команду, зарегистрировавшись под именем обычного пользователя, 
система сообщит вам, что у вас нет полномочий.

Представим, что кто-то решил пошутить и выложил в Интернете (записал на диск или прислал по электронной почте — не важно) вредоносную программу. 
Если вы ее запустите от имени пользователя root, система может быть уничтожена. 
Запуск этой же программы от имени обычного пользователя ничего страшного не произведет — система просто откажется ее выполнять.
Или же все может быть намного проще — вы ошибочно введете команду, которая разрушит вашу систему. Или просто отойдете ненадолго от своего компьютера, 
а тут сразу же появится доброжелатель, — имея полномочия пользователя root, уничтожить систему можно одной командой. 
Именно поэтому практически во всех современных дистрибутивах вход как root запрещен.

Отсюда можно сделать следующие выводы:
- старайтесь реже работать пользователем root
- всегда думайте, какие программы вы запускаете под именем root
- если программа, полученная из постороннего источника, требует root-полномочий, это должно насторожить
- создайте обычного пользователя (даже если вы сами являетесь единственным пользователем компьютера) и рутинные операции (с документами, использование Интернета и т. д.) производите от имени этого пользователя
- если полномочия root все же нужны, совсем необязательно заходить в систему под этим пользователем, достаточно запустить терминал и выполнить команду su. 
  После этого в терминале можно выполнять команды с правами root. 
  Если вы закроете терминал, то больше не сможете работать с правами root. 
  Очень удобно — ведь обычно права root нужны для одной-двух операций (например, выполнить команду установки программы или создать/удалить пользователя).

Пользователь root обладает максимальными полномочиями в системе.

Система полностью подвластна этому пользователю.

Любая команда будет безоговорочно выполнена системой.

Поэтому работать под именем пользователя root нужно с осторожностью.

Всегда думайте над тем, что собираетесь сделать.

Если вы дадите команду на удаление корневой файловой системы, система ее выполнит.

Если же вы попытаетесь выполнить определенную команду, зарегистрировавшись под именем обычного пользователя,

система сообщит вам, что у вас нет полномочий.

Представим, что кто-то решил пошутить и выложил в Интернете (записал на диск или прислал по электронной почте — не важно) вредоносную программу.

Если вы ее запустите от имени пользователя root, система может быть уничтожена.

Запуск этой же программы от имени обычного пользователя ничего страшного не произведет — система просто откажется ее выполнять.

Или же все может быть намного проще — вы ошибочно введете команду, которая разрушит вашу систему. Или просто отойдете ненадолго от своего компьютера,

а тут сразу же появится доброжелатель, — имея полномочия пользователя root, уничтожить систему можно одной командой.

Именно поэтому практически во всех современных дистрибутивах вход как root запрещен.

Отсюда можно сделать следующие выводы:

- старайтесь реже работать пользователем root

- всегда думайте, какие программы вы запускаете под именем root

- если программа, полученная из постороннего источника, требует root-полномочий, это должно насторожить

- создайте обычного пользователя (даже если вы сами являетесь единственным пользователем компьютера) и рутинные операции (с документами, использование Интернета и т. д.) производите от имени этого пользователя

- если полномочия root все же нужны, совсем необязательно заходить в систему под этим пользователем, достаточно запустить терминал и выполнить команду su.

После этого в терминале можно выполнять команды с правами root.

Если вы закроете терминал, то больше не сможете работать с правами root.

Очень удобно — ведь обычно права root нужны для одной-двух операций (например, выполнить команду установки программы или создать/удалить пользователя).

83. sudo \ su \ gksudo \ gksu \ Как работать без root.

Некоторые операции, например установка программного обеспечения, изменение конфигурационных файлов, требуют полномочий root. 
Чтобы их временно получить, нужно использовать команды sudo или su (эти команды, скорее всего, выбудете запускать в терминале).

Команда sudo позволяет запустить любую команду с привилегиями root. 
Использовать ее нужно так:
sudo <команда, которую нужно выполнить с правами root>
Например, вам необходимо изменить файл /etc/apt/sources.list. 

Для этого используется команда:
sudo nano /etc/apt/sources.list

ПОЯСНЕНИЕ
Программа nano — это текстовый редактор, мы ему передаем один параметр — имя файла, который нужно открыть.
Если ввести эту же команду, но без sudo (просто nano /etc/apt/sources.list), текстовый редактор тоже запустится и откроет файл, 
но сохранить изменения вы не сможете, поскольку у вас не хватит полномочий.

Программа sudo перед выполнением указанной вами команды запросит у вас пароль:
sudo nano /etc/apt/sources.list
Password:

Вы должны ввести свой пользовательский пароль — тот, который применяете для входа в систему, но не пароль пользователя root (кстати, мы его и не знаем).

ПРИМЕЧАНИЕ
Использовать команду sudo имеют право не все пользователи, а только те, которые внесены в файл /etc/sudoers. 
Администратор системы (пользователь root) может редактировать этот файл с помощью команды visudo. 
Если у вас дистрибутив, который запрещает вход под учетной записью root (следовательно, у вас нет возможности отредактировать файл sudoers), 
то в файл sudoers вносятся пользователи, которых вы добавили при установке системы.

su
Команда su позволяет получить доступ к консоли root любому пользователю (даже если пользователь не внесен в файл /etc/sudoers) при условии, что он знает пароль root. 
Понятно, что в большинстве случаев этим пользователем будет сам пользователь root — не будете же вы всем пользователям доверять свой пароль? 
Поэтому команда su предназначена в первую очередь для администратора системы, а sudo — для остальных пользователей, которым иногда нужны права root (чтобы они меньше отвлекали администратора от своей работы).

Использовать команду su просто:
После этого нужно ввести пароль пользователя root, и вы сможете работать в консоли как обычно.
Использовать su удобнее, чем sudo, потому что вам не нужно вводить su перед каждой командой, которая должна быть выполнена с правами root.
Чтобы закрыть сессию su, нужно или ввести команду exit или просто закрыть окно терминала.
В случае если вы запускаете какую-нибудь графическую программу, нуждающуюся в привилегиях root, вы увидите окно с требованием ввести свой пароль.

gksu
Если вы в терминале хотите запустить графическую программу с правами root (например, gedit), желательно использовать не программу sudo, 
а программу gksudo или gksu (для Ubuntu) и kdesu (для Kubuntu).
Графические приложения с правами root проще запускать, используя главное меню.
Но не все приложения есть в главном меню, или не все приложения вызываются с правами root — например, в главном меню есть команда вызова текстового редактора,
но нет команды для вызова текстового редактора с правами root. 
Поэтому намного проще нажать клавиатурную комбинацию <Alt>+<F2> и в открывшемся диалоговом окне Выполнить программу ввести команду в соответствующее поле
gksu <команда>


Ввод серии команд sudo
Вам надоело каждый раз вводить sudo в начале команд? 

Тогда выполните команду:
sudo –i

Данная команда запустит оболочку root, т. е. вы сможете вводить любые команды, и они будут выполнены с правами root. Обратите внимание, 
что изменится приглашение командной строки. 
До этого приглашение имело вид $, означающий, что вы работаете от имени обычного пользователя, а после выполнения программы приглашение изменилось на # — это верный признак того, 
что каждая введенная команда будет выполнена с правами root.
Опция -i позволяет так же удобно вводить команды, как если бы вы использовали команду sudo.

Преимущества и недостатки sudo
К преимуществам sudo можно отнести следующее:
- вам не нужно помнить несколько паролей (т. е. ваш пароль и пароль пользователя root) — вы помните только свой пароль и вводите его, когда нужно
- с помощью sudo вы можете выполнять практически те же действия, что и под именем root, но перед каждым действием у вас будет запрошен пароль, что позволит еще раз подумать о правильности своих действий
- каждая команда, введенная с помощью sudo, записывается в журнал /var/log/auth.log, поэтому в случае чего вы хотя бы будете знать, что случилось, прочитав этот журнал. 
  У вас также будет храниться история введенных команд с полномочиями root, в то время как при работе под именем root никакой журнал не ведется
- предположим, некто захотел взломать вашу систему. 
  Этот некто не знает, какие учетные записи есть в вашем компьютере, зато уверен, что учетная запись root есть всегда. 
  Знает он также, что, завладев паролем к этой учетной записи, можно получить неограниченный доступ к системе.
  Но не к вашей системе — у вас учетная запись root отключена!
- вы можете разрешать и запрещать другим пользователям использовать полномочия root (позже мы разберемся, как это сделать), не предоставляя пароль root, т. е.
  практически нет риска скомпрометировать учетную запись root (впрочем, риск есть всегда, ведь при неправильно настроенной системе можно легко изменить пароль root с помощью команды sudo).
  
У sudo есть и недостатки.
- Неудобно использовать перенаправление ввода/вывода, например команда sudo ls /etc > /root/somefile работать не будет, вместо нее нужно использовать команду:
  sudo bash -c "ls /etc > /root/somefile"
  Длинновато, правда?
- Имеются и неудобства, связанные с технологией NSS. 
  К счастью, она используется не очень часто, поэтому основной недостаток sudo будет связан только с перенаправлением ввода/вывода.

Некоторые операции, например установка программного обеспечения, изменение конфигурационных файлов, требуют полномочий root.

Чтобы их временно получить, нужно использовать команды sudo или su (эти команды, скорее всего, выбудете запускать в терминале).

Команда sudo позволяет запустить любую команду с привилегиями root.

Использовать ее нужно так:

sudo <команда, которую нужно выполнить с правами root>

Например, вам необходимо изменить файл /etc/apt/sources.list.

Для этого используется команда:

sudo nano /etc/apt/sources.list

ПОЯСНЕНИЕ

Программа nano — это текстовый редактор, мы ему передаем один параметр — имя файла, который нужно открыть.

Если ввести эту же команду, но без sudo (просто nano /etc/apt/sources.list), текстовый редактор тоже запустится и откроет файл,

но сохранить изменения вы не сможете, поскольку у вас не хватит полномочий.

Программа sudo перед выполнением указанной вами команды запросит у вас пароль:

sudo nano /etc/apt/sources.list

Password:

Вы должны ввести свой пользовательский пароль — тот, который применяете для входа в систему, но не пароль пользователя root (кстати, мы его и не знаем).

ПРИМЕЧАНИЕ

Использовать команду sudo имеют право не все пользователи, а только те, которые внесены в файл /etc/sudoers.

Администратор системы (пользователь root) может редактировать этот файл с помощью команды visudo.

Если у вас дистрибутив, который запрещает вход под учетной записью root (следовательно, у вас нет возможности отредактировать файл sudoers),

то в файл sudoers вносятся пользователи, которых вы добавили при установке системы.

Команда su позволяет получить доступ к консоли root любому пользователю (даже если пользователь не внесен в файл /etc/sudoers) при условии, что он знает пароль root.

Понятно, что в большинстве случаев этим пользователем будет сам пользователь root — не будете же вы всем пользователям доверять свой пароль?

Поэтому команда su предназначена в первую очередь для администратора системы, а sudo — для остальных пользователей, которым иногда нужны права root (чтобы они меньше отвлекали администратора от своей работы).

Использовать команду su просто:

После этого нужно ввести пароль пользователя root, и вы сможете работать в консоли как обычно.

Использовать su удобнее, чем sudo, потому что вам не нужно вводить su перед каждой командой, которая должна быть выполнена с правами root.

Чтобы закрыть сессию su, нужно или ввести команду exit или просто закрыть окно терминала.

В случае если вы запускаете какую-нибудь графическую программу, нуждающуюся в привилегиях root, вы увидите окно с требованием ввести свой пароль.

gksu

Если вы в терминале хотите запустить графическую программу с правами root (например, gedit), желательно использовать не программу sudo,

а программу gksudo или gksu (для Ubuntu) и kdesu (для Kubuntu).

Графические приложения с правами root проще запускать, используя главное меню.

Но не все приложения есть в главном меню, или не все приложения вызываются с правами root — например, в главном меню есть команда вызова текстового редактора,

но нет команды для вызова текстового редактора с правами root.

Поэтому намного проще нажать клавиатурную комбинацию <Alt>+<F2> и в открывшемся диалоговом окне Выполнить программу ввести команду в соответствующее поле

gksu <команда>

Ввод серии команд sudo

Вам надоело каждый раз вводить sudo в начале команд?

Тогда выполните команду:

sudo –i

Данная команда запустит оболочку root, т. е. вы сможете вводить любые команды, и они будут выполнены с правами root. Обратите внимание,

что изменится приглашение командной строки.

До этого приглашение имело вид $, означающий, что вы работаете от имени обычного пользователя, а после выполнения программы приглашение изменилось на # — это верный признак того,

что каждая введенная команда будет выполнена с правами root.

Опция -i позволяет так же удобно вводить команды, как если бы вы использовали команду sudo.

Преимущества и недостатки sudo

К преимуществам sudo можно отнести следующее:

- вам не нужно помнить несколько паролей (т. е. ваш пароль и пароль пользователя root) — вы помните только свой пароль и вводите его, когда нужно

- с помощью sudo вы можете выполнять практически те же действия, что и под именем root, но перед каждым действием у вас будет запрошен пароль, что позволит еще раз подумать о правильности своих действий

- каждая команда, введенная с помощью sudo, записывается в журнал /var/log/auth.log, поэтому в случае чего вы хотя бы будете знать, что случилось, прочитав этот журнал.

У вас также будет храниться история введенных команд с полномочиями root, в то время как при работе под именем root никакой журнал не ведется

- предположим, некто захотел взломать вашу систему.

Этот некто не знает, какие учетные записи есть в вашем компьютере, зато уверен, что учетная запись root есть всегда.

Знает он также, что, завладев паролем к этой учетной записи, можно получить неограниченный доступ к системе.

Но не к вашей системе — у вас учетная запись root отключена!

- вы можете разрешать и запрещать другим пользователям использовать полномочия root (позже мы разберемся, как это сделать), не предоставляя пароль root, т. е.

практически нет риска скомпрометировать учетную запись root (впрочем, риск есть всегда, ведь при неправильно настроенной системе можно легко изменить пароль root с помощью команды sudo).

У sudo есть и недостатки.

- Неудобно использовать перенаправление ввода/вывода, например команда sudo ls /etc > /root/somefile работать не будет, вместо нее нужно использовать команду:

sudo bash -c "ls /etc > /root/somefile"

Длинновато, правда?

- Имеются и неудобства, связанные с технологией NSS.

К счастью, она используется не очень часто, поэтому основной недостаток sudo будет связан только с перенаправлением ввода/вывода.

84. Создание, удаление и модификация пользователей стандартными средствами

Для добавления нового пользователя выполните следующие команды (от имени root):
# adduser <имя пользователя>
# passwd <имя пользователя>
Первая команда (adduser) добавляет пользователя, а вторая (passwd) изменяет его пароль. 
Ясно, что и в первом, и во втором случае вы должны указать одно и то же имя пользователя.

ПРИМЕЧАНИЕ
В некоторых дистрибутивах вместо команды adduser используется команда useradd, а команды adduser вообще не существует.
В дистрибутивах, например в Ubuntu и Debian, сценарий adduser не только добавляет пользователя, 
но позволяет указать дополнительную информацию о пользователе и сразу же задать его пароль.
В дистрибутивах (например, в openSUSE) вместо команды adduser используется команда useradd. 
Программы adduser и useradd обычно находятся в каталоге /usr/sbin.
Команду passwd может использовать не только администратор, но и сам пользователь для изменения собственного пароля.

Обратите внимание: если пароль слишком прост для подбора, программа passwd выдаст соответствующее предупреждение — BAD PASSWORD и сообщит, 
чем же наш пароль плох (в нашем случае в основе пароля лежит словарное слово, что делает пароль легким для подбора).

Для добавления нового пользователя выполните следующие команды (от имени root):

# adduser <имя пользователя>

# passwd <имя пользователя>

Первая команда (adduser) добавляет пользователя, а вторая (passwd) изменяет его пароль.

Ясно, что и в первом, и во втором случае вы должны указать одно и то же имя пользователя.

ПРИМЕЧАНИЕ

В некоторых дистрибутивах вместо команды adduser используется команда useradd, а команды adduser вообще не существует.

В дистрибутивах, например в Ubuntu и Debian, сценарий adduser не только добавляет пользователя,

но позволяет указать дополнительную информацию о пользователе и сразу же задать его пароль.

В дистрибутивах (например, в openSUSE) вместо команды adduser используется команда useradd.

Программы adduser и useradd обычно находятся в каталоге /usr/sbin.

Команду passwd может использовать не только администратор, но и сам пользователь для изменения собственного пароля.

Обратите внимание: если пароль слишком прост для подбора, программа passwd выдаст соответствующее предупреждение — BAD PASSWORD и сообщит,

чем же наш пароль плох (в нашем случае в основе пароля лежит словарное слово, что делает пароль легким для подбора).

85. Команда usermod

Для модифицирования учетной записи пользователя можно применять команду usermod. 

Формат вызова команды следующий:
usermod [параметры] LOGIN

-a, --append Добавляет пользователя в дополнительную группу.
             Используется только с параметром -G
-c, --commentКОММЕНТАРИЙ Изменяет комментарий пользователя. 
                         Комментарий удобнее изменять с помощью команды chfn
-d, --homeКАТАЛОГ Изменяет домашний каталог пользователя
-e, --expiredateДАТА Устанавливает дату отключения учетной записи. 
                     Дата устанавливается в формате ГГГГ-ММ-ДД
-f, --inactiveДНИ Устанавливает число дней после даты отключения учетной записи, на протяжении которых можно изменить пароль. 
                  Если число дней равно 0, то учетная запись блокируется сразу после устаревания пароля
-g, --gidГРУППА Задает идентификатор (число, GID) начальной группы пользователя
-G, --groupsГ1[,Г2,...[,ГN]]] Задает список дополнительных групп, в которые будет входить пользователь. 
                              Список групп задается через запятую без дополнительных пробелов. 
                              Если пользователь уже является членом группы, которой нет в списке, он будет удален из этой группы. 
                              Поведение программы можно изменить, добавив параметр -a, в этом случае пользователь просто будет добавлен в дополнительные группы, 
                              а если он уже являлся членом других групп, которых нет в списке, то он не будет удален из них
-l, --loginНОВОЕ_ИМЯ Изменяет имя пользователя
-L, --lock Заблокировать пароль пользователя. 
           Не используйте этот параметр вместе с параметрами -p или -U.
           Параметр -L блокирует только вход по паролю, но есть и другие способы аутентификации, 
           поэтому если вам нужно полностью заблокировать учетную запись, используйте параметр -e
-o, --non-unique При использовании с параметром -u позволяет задавать не уникальный идентификатор пользователя
-p, --passwordПАРОЛЬ Задает новый пароль пользователя. 
                     Нужно указать не сам пароль, а его хэш. 
                     Поэтому для смены пароля проще использовать команду passwd
-s, --shellОБОЛОЧКА Задает новую оболочку пользователя
-u, --uidUID Задает идентификатор пользователя. 
             Идентификатор должен быть уникальным, если не задан параметр -o.
             Идентификаторы 0—999 зарезервированы для системных учетных записей
-U, --unlock Разблокировать пароль пользователя

Примеры:
usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 - изменить атрибуты пользователя
usermod -L test - заблокировать пользователя test
usermod -u test - разблокировать пользователя test
usermod -d /server1/home/aborg/ -m aborg  - перемещает домашний каталог пользователя со всем содержимым. Сначала указывается новый каталог, а затем имя пользователя
usermod -s /bin/false foober - можно лишить пользователя доступа к командному процессору и все же лучше всего придерживаться варианта с passwd -l и -u
usermod -I aborg anitab    - сменить имя
usermod -u 1200 anitab     - сменить UID 

Самый частый кейс это добавление пользователя в группы:
usermod -a -G tty pi - добавляем пользователя pi  группу tty
usermod -a -G dialout pi - добавляем пользователя pi  группу  dialout
usermod -aG kvm user_name
usermod -aG libvirtd user_name

Для модифицирования учетной записи пользователя можно применять команду usermod.

Формат вызова команды следующий:

usermod [параметры] LOGIN

-a, --append Добавляет пользователя в дополнительную группу.

Используется только с параметром -G

-c, --commentКОММЕНТАРИЙ Изменяет комментарий пользователя.

Комментарий удобнее изменять с помощью команды chfn

-d, --homeКАТАЛОГ Изменяет домашний каталог пользователя

-e, --expiredateДАТА Устанавливает дату отключения учетной записи.

Дата устанавливается в формате ГГГГ-ММ-ДД

-f, --inactiveДНИ Устанавливает число дней после даты отключения учетной записи, на протяжении которых можно изменить пароль.

Если число дней равно 0, то учетная запись блокируется сразу после устаревания пароля

-g, --gidГРУППА Задает идентификатор (число, GID) начальной группы пользователя

-G, --groupsГ1[,Г2,...[,ГN]]] Задает список дополнительных групп, в которые будет входить пользователь.

Список групп задается через запятую без дополнительных пробелов.

Если пользователь уже является членом группы, которой нет в списке, он будет удален из этой группы.

Поведение программы можно изменить, добавив параметр -a, в этом случае пользователь просто будет добавлен в дополнительные группы,

а если он уже являлся членом других групп, которых нет в списке, то он не будет удален из них

-l, --loginНОВОЕ_ИМЯ Изменяет имя пользователя

-L, --lock Заблокировать пароль пользователя.

Не используйте этот параметр вместе с параметрами -p или -U.

Параметр -L блокирует только вход по паролю, но есть и другие способы аутентификации,

поэтому если вам нужно полностью заблокировать учетную запись, используйте параметр -e

-o, --non-unique При использовании с параметром -u позволяет задавать не уникальный идентификатор пользователя

-p, --passwordПАРОЛЬ Задает новый пароль пользователя.

Нужно указать не сам пароль, а его хэш.

Поэтому для смены пароля проще использовать команду passwd

-s, --shellОБОЛОЧКА Задает новую оболочку пользователя

-u, --uidUID Задает идентификатор пользователя.

Идентификатор должен быть уникальным, если не задан параметр -o.

Идентификаторы 0—999 зарезервированы для системных учетных записей

-U, --unlock Разблокировать пароль пользователя

Примеры:

usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 - изменить атрибуты пользователя

usermod -L test - заблокировать пользователя test

usermod -u test - разблокировать пользователя test

usermod -I aborg anitab - сменить имя

usermod -u 1200 anitab - сменить UID

Самый частый кейс это добавление пользователя в группы:

usermod -a -G tty pi - добавляем пользователя pi группу tty

usermod -a -G dialout pi - добавляем пользователя pi группу dialout

usermod -aG kvm user_name

usermod -aG libvirtd user_name

86. Команда userdel

Для удаления пользователя используется команда userdel:
# userdel <имя пользователя>

1 2	Для удаления пользователя используется команда userdel: # userdel <имя пользователя>

87. Подробно о создании пользователей

Давайте разберемся, что же происходит при создании новой учетной записи пользователя.
Во-первых, создается запись в файле /etc/passwd. 

Формат записи следующий:
имя_пользователя:пароль:UID:GID:полное_имя:домашний_каталог:оболочка

Рассмотрим фрагмент этого файла (две строки):
root:x:0:0:root:/root:/bin/bash
usver:x:500:500:Usver:/home/usver:/bin/bash

Здесь:
- первое поле — это логин пользователя, который он вводит для регистрации в системе. 
  Пароль в современных системах в этом файле не указывается, а второе поле осталось просто для совместимости со старыми системами. 
  Пароли хранятся в файле /etc/shadow

- третье и четвертое поля — это UID (User ID) и GID (Group ID) — идентификаторы пользователя и группы соответственно. 
  Идентификатор пользователя root всегда равен 0, как и идентификатор группы root. 
  Список групп вы найдете в файле /etc/groups

- пятое поле — это настоящее имя пользователя.
  Может быть не заполнено, а может содержать фамилию, имя и отчество пользователя — все зависит от педантичности администратора системы, т. е. от вас. 
  Если вы работаете за компьютером в гордом одиночестве, то, думаю, свою фамилию вы не забудете. 
  А вот если ваш компьютер — сервер сети, тогда просто необходимо указать Ф. И. О. каждого пользователя, 
  а то когда придет время обратиться к пользователю по имени, вы его знать не будете (попробуйте запомнить 500 фамилий и имен!)

- шестое поле содержит имя домашнего каталога. 
  Обычно это каталог /home/<имя_пользователя>

- последнее поле — это имя командного интерпретатора, который будет обрабатывать введенные вами команды, когда вы зарегистрируетесь в консоли.


В целях безопасности пароли были перенесены в файл /etc/shadow (доступен для чтения/записи только пользователю root), 
где они и хранятся в закодированном виде (используется алгоритм MD5 или — в некоторых системах — Blowfish). 
Узнать, с помощью какого алгоритма зашифрован пароль, очень просто: посмотрите на шифр — если он короткий и не начинается с символа $, 
то применен алгоритм DES (самый слабый и ненадежный — как правило, используется в старых дистрибутивах). 
Если же шифр начинается с символов $1$, то это MD5, а если в начале шифра имеются символы $2a$, то это Blowfish.

Во-вторых, при создании пользователя создается каталог /home/<имя пользователя>, в который копируется содержимое каталога /etc/skel. 
Каталог /etc/skel содержит "джентльменский набор" — файлы конфигурации по умолчанию, которые должны быть в любом пользовательском каталоге. 
Название каталога skel (от англ.skeleton) полностью оправдывает себя — он действительно содержит "скелет" домашнего каталога пользователя.

ПРИМЕЧАНИЕ
Файл /etc/passwd можно редактировать с помощью обычного текстового редактора.
То есть вы можете очень легко, не прибегая к помощи ни графического конфигуратора, ни команды usermod, 
изменить параметры учетной записи любого пользователя, например, задать для него другую оболочку или прописать его настоящую фамилию.
Однако нужно быть осторожным при изменении домашнего каталога пользователя!
Если вы это сделали, то, чтобы у пользователя не возникло проблем с правами доступа для нового каталога, нужно выполнить команду:
chown –R <пользователь> <каталог>

Давайте разберемся, что же происходит при создании новой учетной записи пользователя.

Во-первых, создается запись в файле /etc/passwd.

Формат записи следующий:

имя_пользователя:пароль:UID:GID:полное_имя:домашний_каталог:оболочка

Рассмотрим фрагмент этого файла (две строки):

root:x:0:0:root:/root:/bin/bash

usver:x:500:500:Usver:/home/usver:/bin/bash

Здесь:

- первое поле — это логин пользователя, который он вводит для регистрации в системе.

Пароль в современных системах в этом файле не указывается, а второе поле осталось просто для совместимости со старыми системами.

Пароли хранятся в файле /etc/shadow

- третье и четвертое поля — это UID (User ID) и GID (Group ID) — идентификаторы пользователя и группы соответственно.

Идентификатор пользователя root всегда равен 0, как и идентификатор группы root.

Список групп вы найдете в файле /etc/groups

- пятое поле — это настоящее имя пользователя.

Может быть не заполнено, а может содержать фамилию, имя и отчество пользователя — все зависит от педантичности администратора системы, т. е. от вас.

Если вы работаете за компьютером в гордом одиночестве, то, думаю, свою фамилию вы не забудете.

А вот если ваш компьютер — сервер сети, тогда просто необходимо указать Ф. И. О. каждого пользователя,

а то когда придет время обратиться к пользователю по имени, вы его знать не будете (попробуйте запомнить 500 фамилий и имен!)

- шестое поле содержит имя домашнего каталога.

Обычно это каталог /home/<имя_пользователя>

- последнее поле — это имя командного интерпретатора, который будет обрабатывать введенные вами команды, когда вы зарегистрируетесь в консоли.

В целях безопасности пароли были перенесены в файл /etc/shadow (доступен для чтения/записи только пользователю root),

где они и хранятся в закодированном виде (используется алгоритм MD5 или — в некоторых системах — Blowfish).

Узнать, с помощью какого алгоритма зашифрован пароль, очень просто: посмотрите на шифр — если он короткий и не начинается с символа $,

то применен алгоритм DES (самый слабый и ненадежный — как правило, используется в старых дистрибутивах).

Если же шифр начинается с символов $1$, то это MD5, а если в начале шифра имеются символы $2a$, то это Blowfish.

Во-вторых, при создании пользователя создается каталог /home/<имя пользователя>, в который копируется содержимое каталога /etc/skel.

Каталог /etc/skel содержит "джентльменский набор" — файлы конфигурации по умолчанию, которые должны быть в любом пользовательском каталоге.

Название каталога skel (от англ.skeleton) полностью оправдывает себя — он действительно содержит "скелет" домашнего каталога пользователя.

ПРИМЕЧАНИЕ

Файл /etc/passwd можно редактировать с помощью обычного текстового редактора.

То есть вы можете очень легко, не прибегая к помощи ни графического конфигуратора, ни команды usermod,

изменить параметры учетной записи любого пользователя, например, задать для него другую оболочку или прописать его настоящую фамилию.

Однако нужно быть осторожным при изменении домашнего каталога пользователя!

Если вы это сделали, то, чтобы у пользователя не возникло проблем с правами доступа для нового каталога, нужно выполнить команду:

chown –R <пользователь> <каталог>

88. Группы пользователей

Иногда пользователей объединяют в группы. 
Группы позволяют более эффективно управлять правами пользователей. 
Например, у нас есть три пользователя: igor, pavel, alex, которые должны совместно работать над проектом. 
Их достаточно объединить в одну группу — тогда пользователи будут иметь доступ к домашним каталогам друг 
друга (по умолчанию один пользователь не имеет доступ к домашнему каталогу другого пользователя, поскольку пользователи находятся в разных группах).

Создать группу, а также поместить пользователя в группу позволяют графические конфигураторы. 
Вы можете использовать их — они очень удобные, но если вы хотите стать настоящим линуксоидом, то должны знать, 
что доступные в системе группы указываются в файле /etc/group. 
Добавить новую группу в систему можно с помощью команды groupadd, но, как правило, удобнее добавить в текстовом редакторе еще одну запись в файл /etc/group, 
а изменить группу пользователя еще проще — для этого достаточно отредактировать файл /etc/passwd.

Самый частый кейс это добавление пользователя в группы:
usermod -a -G tty pi - добавляем пользователя pi  группу tty
usermod -a -G dialout pi - добавляем пользователя pi  группу  dialout
usermod -aG kvm user_name
usermod -aG libvirtd user_name

Иногда пользователей объединяют в группы.

Группы позволяют более эффективно управлять правами пользователей.

Например, у нас есть три пользователя: igor, pavel, alex, которые должны совместно работать над проектом.

Их достаточно объединить в одну группу — тогда пользователи будут иметь доступ к домашним каталогам друг

друга (по умолчанию один пользователь не имеет доступ к домашнему каталогу другого пользователя, поскольку пользователи находятся в разных группах).

Создать группу, а также поместить пользователя в группу позволяют графические конфигураторы.

Вы можете использовать их — они очень удобные, но если вы хотите стать настоящим линуксоидом, то должны знать,

что доступные в системе группы указываются в файле /etc/group.

Добавить новую группу в систему можно с помощью команды groupadd, но, как правило, удобнее добавить в текстовом редакторе еще одну запись в файл /etc/group,

а изменить группу пользователя еще проще — для этого достаточно отредактировать файл /etc/passwd.

Самый частый кейс это добавление пользователя в группы:

usermod -a -G tty pi - добавляем пользователя pi группу tty

usermod -a -G dialout pi - добавляем пользователя pi группу dialout

usermod -aG kvm user_name

usermod -aG libvirtd user_name

89. Команды квотирования

Квотирование — это механизм ограничения дискового пространства пользователей. 
Linux — многопользовательская система, поэтому без ограничения дискового пространства вам не обойтись. 
Когда вы используете компьютер в гордом одиночестве, то все дисковое пространство доступно вам и только вам. 
А вот когда пользователей несколько, нужно ограничить доступное пространство, чтобы один из пользователей не "узурпировал" все место на диске. 
Как именно вы будете ограничивать дисковое пространство, решать только вам. 
Можно поделить дисковое пространство поровну между пользователями, можно одним пользователям отдать больше места, а другим — меньше.

На домашнем компьютере квотирование вряд ли понадобится, а на сервере, как правило, для каталога /home отводится отдельный раздел жесткого диска. 
Поэтомуmбудем считать, что у нас есть отдельный раздел, который монтируется к каталогу /home.

Перед настройкой квот нужно установить пакет quota. 
Больше ничего устанавливать не нужно.
Чтобы пользователи не потеряли свои данные, перезагрузитесь в однопользовательский режим (параметр ядра single). 
Вот теперь можно приступать к редактированию квот. 
Первым делом разрешим устанавливать квоты на разделе, который содержит файлы пользователей.

Откройте /etc/fstab:
nano /etc/fstab

Далее добавьте параметр usrquota к списку параметров раздела:
/dev/sda5 /home ext4 defaults,usrquota 0 2

Затем перемонтируем /home, т. к. мы только что изменили его параметры:
mount -o remount /home

Механизм квотирования требует создания файлов aquota.user и aquota.group, но поскольку мы не будем устанавливать квоты для групп, 
а только для пользователей, то создадим только файл aquota.user:
touch /home/aquota.user
chmod 600 /home/aquota.user

После этого введите команду:
quotacheck -vagum

!!! Поскольку мы создали файл aquota.user вручную, то вы увидите сообщение об ошибке, но это только в первый раз — далее все будет нормально.

Теперь отредактируем квоты для пользователя user:
edquota -u user
Будет запущен текстовый редактор по умолчанию, и вы увидите следующий текст:
----------------------------------------------------------------------------
Disk quotas for user user (uid 1001):
Filesystem blocks soft hard inodes soft hard
/dev/sda5  16     0    0    5      0    0
----------------------------------------------------------------------------

Разберемся, что есть что:
- blocks — место в блоках, используемое пользователем (1 блок = 1 Кбайт)
- soft — максимальное дисковое пространство (в блоках по 1 Кбайт), которое может занимать пользователь. 
         Если вы включите период отсрочки (grace period), то пользователь получит только лишь сообщение о превышении квоты
- hard — жесткое ограничение, эту квоту пользователь превысить не может, даже если включен период отсрочки. 
         Предположим, что вы хотите "отдать" пользователю 500 Мбайт. 
         В качестве жесткой квоты можно установить значение 500 Мбайт (или 500 000 блоков), 
         а в качестве "мягкой" квоты установить значение 495 Мбайт (495 000 блоков). 
         Когда пользователь превысит 495 Мбайт, он получит сообщение о превышении квоты, а вот если будет превышена жесткая квота,
         то пользователь больше не сможет сохранять файлы в своем домашнем каталоге
- inodes — число используемых пользователем файлов


Настройка периода отсрочки:
edquota -t 
Вы должны вместо 7days вписать свой период отсрочки, при этом используйте названия единиц измерения времени на английском:
- seconds — секунды
- minutes — минуты
- hours — часы
- days — дни
- weeks — недели
- months — месяцы
Например:
- 24hours — 24 часа
- 2days — 2 дня
- 1weeks — 1 неделя

Для просмотра квот применяется команда repquota, например:
repquota /home

Квотирование — это механизм ограничения дискового пространства пользователей.

Linux — многопользовательская система, поэтому без ограничения дискового пространства вам не обойтись.

Когда вы используете компьютер в гордом одиночестве, то все дисковое пространство доступно вам и только вам.

А вот когда пользователей несколько, нужно ограничить доступное пространство, чтобы один из пользователей не "узурпировал" все место на диске.

Как именно вы будете ограничивать дисковое пространство, решать только вам.

Можно поделить дисковое пространство поровну между пользователями, можно одним пользователям отдать больше места, а другим — меньше.

На домашнем компьютере квотирование вряд ли понадобится, а на сервере, как правило, для каталога /home отводится отдельный раздел жесткого диска.

Поэтомуmбудем считать, что у нас есть отдельный раздел, который монтируется к каталогу /home.

Перед настройкой квот нужно установить пакет quota.

Больше ничего устанавливать не нужно.

Чтобы пользователи не потеряли свои данные, перезагрузитесь в однопользовательский режим (параметр ядра single).

Вот теперь можно приступать к редактированию квот.

Первым делом разрешим устанавливать квоты на разделе, который содержит файлы пользователей.

Откройте /etc/fstab:

nano /etc/fstab

Далее добавьте параметр usrquota к списку параметров раздела:

/dev/sda5 /home ext4 defaults,usrquota 0 2

Затем перемонтируем /home, т. к. мы только что изменили его параметры:

mount -o remount /home

Механизм квотирования требует создания файлов aquota.user и aquota.group, но поскольку мы не будем устанавливать квоты для групп,

а только для пользователей, то создадим только файл aquota.user:

touch /home/aquota.user

chmod 600 /home/aquota.user

После этого введите команду:

quotacheck -vagum

!!! Поскольку мы создали файл aquota.user вручную, то вы увидите сообщение об ошибке, но это только в первый раз — далее все будет нормально.

Теперь отредактируем квоты для пользователя user:

edquota -u user

Будет запущен текстовый редактор по умолчанию, и вы увидите следующий текст:

----------------------------------------------------------------------------

Disk quotas for user user (uid 1001):

Filesystem blocks soft hard inodes soft hard

/dev/sda5 16 0 0 5 0 0

----------------------------------------------------------------------------

Разберемся, что есть что:

- blocks — место в блоках, используемое пользователем (1 блок = 1 Кбайт)

- soft — максимальное дисковое пространство (в блоках по 1 Кбайт), которое может занимать пользователь.

Если вы включите период отсрочки (grace period), то пользователь получит только лишь сообщение о превышении квоты

- hard — жесткое ограничение, эту квоту пользователь превысить не может, даже если включен период отсрочки.

Предположим, что вы хотите "отдать" пользователю 500 Мбайт.

В качестве жесткой квоты можно установить значение 500 Мбайт (или 500 000 блоков),

а в качестве "мягкой" квоты установить значение 495 Мбайт (495 000 блоков).

Когда пользователь превысит 495 Мбайт, он получит сообщение о превышении квоты, а вот если будет превышена жесткая квота,

то пользователь больше не сможет сохранять файлы в своем домашнем каталоге

- inodes — число используемых пользователем файлов

Настройка периода отсрочки:

edquota -t

Вы должны вместо 7days вписать свой период отсрочки, при этом используйте названия единиц измерения времени на английском:

- seconds — секунды

- minutes — минуты

- hours — часы

- days — дни

- weeks — недели

- months — месяцы

Например:

- 24hours — 24 часа

- 2days — 2 дня

- 1weeks — 1 неделя

Для просмотра квот применяется команда repquota, например:

repquota /home

90. Команда dmesg: вывод сообщений ядра

wiki:
http://ru.wikipedia.org/wiki/PAE
http://ru.wikipedia.org/wiki/NX_bit
http://ru.wikipedia.org/wiki/MTRR

При загрузке Linux выводятся сообщения ядра: информационные (об имеющемся оборудовании, о поддерживаемых протоколах и технологиях и т. д.) и диагностические (например, об ошибках). 
Однако современные компьютеры настолько быстры, что вы просто не успеете заметить их появление на экране.
Не беда, все сообщения всегда можно прочитать после загрузки системы с помощью команды:
dmesg | less

Порядок загрузки ядра:
NX protection - функция запрета исполнения вредоносного кода 
Современные процессоры поддерживают функцию NX-защиты (NX — сокращение от No eXecute). 
Это защита областей памяти, которая используется для предотвращения распространения вирусов, "троянских коней" и других вредоносных программ. 
Довольно часто вредоносные программы нарочно вызывают переполнение буфера, после чего записывают свой код в область данных и передают ему управление. 
Функция NX-защиты как раз предотвращает развитие данного сценария на аппаратном уровне.
Если ваше ядро и процессор поддерживают NX-бит, то вы увидите примерно такое сообщение:
Using x86 segment limits to approximate NX protection

DMI (Direct Media Interface) - это изобретение Intel и представляет собой шину соединения южного и северного мостов материнской платы. 
По сути, DMI должно относиться только к процессорам Intel, но и  работает для процессора AMD. 
Ядро полностью выводит модель материнской платы вместе с версией BIOS

MTRR - информация о диапазонных регистрах памяти

SMP — Symmetrical MultiProcessing \ MP — MultiProcessing
SMP MP-таблица
Это означает, что либо у нас двухпроцессорный компьютер, либо у нашего компьютера двухъядерный процессор.

ЧИСЛО HIGHMEM available
ЧИСЛО LOWMEM available
Ядро сообщает объем оперативной памяти.
Складываем, округляем результат.

Kernel command line:
Сообщает откуда было запущенно ядро
Пример ядро загрузилось с диска:
Kernel command line: BOOT_IMAGE=/vmlinuz-linux root=UUID=94ddc883-2a31-47f6-9924-cc32e5a27859 rw rootfstype=ext4 loglevel=3 quiet
Пример система была запущена с LiveCD:
Kernel command line: initrd=initrd0.img root=live:CDLABEL=Live.iso rootfstype=auto ro liveimg quiet rhgb rd.luks=0 rd.md=0 rd.dm=0 xdriver=vesa nomodeset BOOT_IMAGE=vmlinuz0
Параметр ro говорит ядру о необходимости смонтировать корневую файловую систему в режиме "только чтение" (в процессе загрузки она будет перемонтирована в режим "чтение/запись", rw). Корневая файловая система задается меткой LABEL.
Параметр quiet вообще выключает сообщения, выводимые ядром, т. е. если ядру передан данный параметр, сообщений ядра при загрузке системы вы вообще не увидите. 
Зато их можно потом получить командой dmesg или просто просмотреть файл /var/log/dmesg.

Initializing CPU#0 - инициализация первого процессора, точнее, первого ядра процессора  

Memory: - подробная информация об использовании памяти 

virtual kernel memory layout - информацию о выделении виртуальной памяти ядра

Detected ЧИСЛО MHz processor. - частота процессора
tsc: Detected - частота процессора
BogoMIPS
Ядро вычисляет производительность процессора в так называемых BogoMIPS .
Здесь MIPS — аббревиатура от Millions of Instructions Per Second, а Bogo — происходит от bogus (фальшивый, поддельный). 
Префикс Bogo ставит под сомнение актуальность вычисленной ядром величины, поэтому Линус Торвальдс (кстати, BogoMIPS — это его изобретение) и назвал ее фальшивой.

Security Framework initialized
Система контроля доступа SELinux, которая может быть либо выключена, либо работать в одном из двух режимов: принудительном (permissive) или режиме предупреждений.

Еще через несколько строк вы увидите полное наименование процессора CPU0:

Потом будет выведена дата и время загрузки

А затем — строки, относящиеся к инициализации шины PCI, распределению PCI-ресурсов

Послу будут жесткие диски \ ssd \ nvme \ sdrom \ ata \ scasi \ sd

input: - Подключенные мыши \ клавиатуры \ микрофоны \ колонки \ звук \ видео \ наушники и т.д.
input: USB Optical Mouse as 
input: Logitech Wireless Mouse
input: PC Speaker
input: Logitech USB Receiver
input: HDA Intel PCH HDMI/DP
input: HDA Intel PCH Mic
input: HDA Intel PCH Headphone
i8042: PNP: PS/2 Controller
input: AT Translated Set 2 keyboard


Linux video capture interface: - веб-камера

r8169 Gigabit Ethernet driver - сетевая карта

В конце управление передается системе инициализации Linux.

wiki:

http://ru.wikipedia.org/wiki/PAE

http://ru.wikipedia.org/wiki/NX_bit

http://ru.wikipedia.org/wiki/MTRR

При загрузке Linux выводятся сообщения ядра: информационные (об имеющемся оборудовании, о поддерживаемых протоколах и технологиях и т. д.) и диагностические (например, об ошибках).

Однако современные компьютеры настолько быстры, что вы просто не успеете заметить их появление на экране.

Не беда, все сообщения всегда можно прочитать после загрузки системы с помощью команды:

dmesg | less

Порядок загрузки ядра:

NX protection - функция запрета исполнения вредоносного кода

Современные процессоры поддерживают функцию NX-защиты (NX — сокращение от No eXecute).

Это защита областей памяти, которая используется для предотвращения распространения вирусов, "троянских коней" и других вредоносных программ.

Довольно часто вредоносные программы нарочно вызывают переполнение буфера, после чего записывают свой код в область данных и передают ему управление.

Функция NX-защиты как раз предотвращает развитие данного сценария на аппаратном уровне.

Если ваше ядро и процессор поддерживают NX-бит, то вы увидите примерно такое сообщение:

Using x86 segment limits to approximate NX protection

DMI (Direct Media Interface) - это изобретение Intel и представляет собой шину соединения южного и северного мостов материнской платы.

По сути, DMI должно относиться только к процессорам Intel, но и работает для процессора AMD.

Ядро полностью выводит модель материнской платы вместе с версией BIOS

MTRR - информация о диапазонных регистрах памяти

SMP — Symmetrical MultiProcessing \ MP — MultiProcessing

SMP MP-таблица

Это означает, что либо у нас двухпроцессорный компьютер, либо у нашего компьютера двухъядерный процессор.

ЧИСЛО HIGHMEM available

ЧИСЛО LOWMEM available

Ядро сообщает объем оперативной памяти.

Складываем, округляем результат.

Kernel command line:

Сообщает откуда было запущенно ядро

Пример ядро загрузилось с диска:

Kernel command line: BOOT_IMAGE=/vmlinuz-linux root=UUID=94ddc883-2a31-47f6-9924-cc32e5a27859 rw rootfstype=ext4 loglevel=3 quiet

Пример система была запущена с LiveCD:

Kernel command line: initrd=initrd0.img root=live:CDLABEL=Live.iso rootfstype=auto ro liveimg quiet rhgb rd.luks=0 rd.md=0 rd.dm=0 xdriver=vesa nomodeset BOOT_IMAGE=vmlinuz0

Параметр ro говорит ядру о необходимости смонтировать корневую файловую систему в режиме "только чтение" (в процессе загрузки она будет перемонтирована в режим "чтение/запись", rw). Корневая файловая система задается меткой LABEL.

Параметр quiet вообще выключает сообщения, выводимые ядром, т. е. если ядру передан данный параметр, сообщений ядра при загрузке системы вы вообще не увидите.

Зато их можно потом получить командой dmesg или просто просмотреть файл /var/log/dmesg.

Initializing CPU#0 - инициализация первого процессора, точнее, первого ядра процессора

Memory: - подробная информация об использовании памяти

virtual kernel memory layout - информацию о выделении виртуальной памяти ядра

Detected ЧИСЛО MHz processor. - частота процессора

tsc: Detected - частота процессора

BogoMIPS

Ядро вычисляет производительность процессора в так называемых BogoMIPS .

Здесь MIPS — аббревиатура от Millions of Instructions Per Second, а Bogo — происходит от bogus (фальшивый, поддельный).

Префикс Bogo ставит под сомнение актуальность вычисленной ядром величины, поэтому Линус Торвальдс (кстати, BogoMIPS — это его изобретение) и назвал ее фальшивой.

Security Framework initialized

Система контроля доступа SELinux, которая может быть либо выключена, либо работать в одном из двух режимов: принудительном (permissive) или режиме предупреждений.

Еще через несколько строк вы увидите полное наименование процессора CPU0:

Потом будет выведена дата и время загрузки

А затем — строки, относящиеся к инициализации шины PCI, распределению PCI-ресурсов

Послу будут жесткие диски \ ssd \ nvme \ sdrom \ ata \ scasi \ sd

input: - Подключенные мыши \ клавиатуры \ микрофоны \ колонки \ звук \ видео \ наушники и т.д.

input: USB Optical Mouse as

input: Logitech Wireless Mouse

input: PC Speaker

input: Logitech USB Receiver

input: HDA Intel PCH HDMI/DP

input: HDA Intel PCH Mic

input: HDA Intel PCH Headphone

i8042: PNP: PS/2 Controller

input: AT Translated Set 2 keyboard

Linux video capture interface: - веб-камера

r8169 Gigabit Ethernet driver - сетевая карта

В конце управление передается системе инициализации Linux.

91. Параметры ядра

Параметры ядра позволяют управлять поведением ядра. Как уже говорилось, мы можем передать параметры ядру непосредственно при загрузке, 
используя меню загрузчика, или же прописать параметры ядра в файлах конфигурации загрузчика.
Первый случай подходит для "одноразового" использования того или иного параметра, а второй — если параметр нужен для корректной работы системы. 
Поэтому, чтобы не указывать его каждый раз при загрузке Linux, намного проще прописать его в файле конфигурации загрузчика.

Если вы используете GRUB/GRUB2, то передать параметры ядру можно так: 
сначала надо выбрать образ (метку), а затем нажать клавишу <e>. 
Появится строка, в которой вы можете отредактировать параметры ядра.

Чтобы передать ядру Linux параметры, вы должны ввести их в следующем фор-
мате:
метка параметры
Например: 
Linux noapic



root=устройство Позволяет указать корневую файловую систему.
                Например, root=/dev/sda5
rootdelay=N     Ждать N секунд перед монтированием корневой файловой системы
rootflags=флаги Задает флаги корневой файловой системы 
rootfstype=тип  Задает тип корневой файловой системы. Полезен, если не удалось определить автоматически
rootwait        Ожидание корневой файловой системы. Ядро будет ждать, пока не появится устройство с корневой ФС. 
                Полезно, когда корневая файловая система расположена на съемном носителе, например на флешке
ro              Монтирует корневую файловую систему в режиме "только чтение". Используется по умолчанию. 
                После проверки файловой системы программой fsck корневая файловая система перемонтируется в режим rw
rw              Монтирует корневую файловую систему в режиме "чтение/запись". 
                При использовании этого параметра нельзя запускать программы типа fsck. 
                Перед запуском fsck нужно перемонтировать корневую файловую систему в режиме ro
mem=            Определяет объем памяти, установленной в компьютере. 
                Иногда ядро неправильно определяет объем оперативной памяти. 
                Вы можете помочь ему в этом, указав параметр mem. 
                Только указывать его нужно правильно, например:
                mem=768M
                После числа обязательно должна следовать буква М, иначе ядро "подумает", что объем оперативной памяти 768 байтов.
                В современных дистрибутивах дела с памятью обстоят лучше.
                Скорее всего, параметр mem указывать вы не будете, но есть шанс столкнуться с иной неприятной ситуацией. 
                Компьютерная индустрия не стоит на месте, и вы можете купить компьютер с оперативной памятью более 4 Гбайт, 
                а потом обнаружить, что ваш дистрибутив видит только первые 4 Гбайт. 
                В этом случае вам нужно перекомпилировать ядро с поддержкой PAE (Physical Address Extension) или же установить ядро, 
                изначально поддерживающее PAE.
init=           Позволяет задать программу инициализации. По умолчанию используется программа /sbin/init, но вы можете задать другую программу
reboot=         Позволяет задать тип перезагрузки компьютера. 
                Возможные значения: cold и warm, т. е. "холодная" или "горячая" перезагрузка
single          Однопользовательский режим для администрирования системы, например, в случае отказа
nodmraid        Отключает программные RAID-массивы, организованные на уровне BIOS
noapic          Полезен, если вы при загрузке увидите сообщение: kernel panic — not syncing: IO-APIC + timer doesn't work!
nopcmcia        Отключает PCMCIA-карты (для ноутбуков). Полезен, если вы подозреваете, что у вас проблемы с PCMCIA-картой
nodma           Отключается DMA (Direct Memory Access, прямой доступ к памяти) для всех IDE-устройств
noapm           Отключает APM (Advanced Power Management) — расширенное управление питанием
nousb           Отключает поддержку USB
noscsi          Отключает поддержку SCSI
pci=noacpi      Не использовать ACPI (Advanced Configuration and Power Interface) для управления PCI-прерываниями
apci=off        Полностью отключает ACPI. Полезен на некоторых ноутбуках, когда не удается установить (а потом загрузить) Linux
edd=off         Отключает EDD (Enhanced Disk Drive). Если при загрузке Linux вы видите сообщение Probing EDD и загрузка на этом останавливается, тогда вам поможет параметр ядра edd=off
boot_delay=N    Сообщения ядра выводятся так быстро, что вы не успеваете их прочитать? 
                С помощью этого параметра вы можете установить задержку в N секунд перед выводом следующего сообщения ядра
elevator=планировщик Позволяет выбрать планировщик ввода/вывода 
vga=режим       Позволяет задать VGA-режим. Подробнее см. файл Documentation/svga.txt. 
                Можно также задать значение ask, чтобы ядро спросило, какой режим нужно использовать:
                vga=ask
quiet           "Тихий" режим, отключает большинство сообщений ядра



Производительность многозадачной системы в целом сильно зависит от правильного планирования процессов системы. 
Сейчас мы попытаемся с помощью параметра ядра elevator установить нужный нам алгоритм работы ядра, что позволит существенно повысить производительность системы. 

Допустимы следующие значения этого параметра:
- none — значение по умолчанию
- as — упреждающее планирование
- cfg — "честная очередь"
- deadline — планирование крайних сроков

Для домашнего компьютера больше подойдут значения as и cfq:
- в первом случае (значение as) ядро будет пытаться "угадать" ход программы, а именно: какую операцию ввода/вывода программа "захочет" выполнить в следующий раз. 
  Если ядро будет правильно "угадывать", то производительность системы должна существенно увеличиться. 
  Ясно, что работа данного алгоритма очень зависит от логики программы
- во втором случае (значение cfq) ядро будет равномерно планировать операции ввода/вывода. 
  Данный алгоритм будет работать лучше первого в случае с запутанной логикой программы, когда невозможно предугадать ее следующую операцию
- последнее значение (deadline) больше подходит для сервера, чем для рабочей станции, поэтому существенного прироста от него не ждите.

При загрузке передать параметр ядра можно так:
linux elevator=значение

Параметры ядра позволяют управлять поведением ядра. Как уже говорилось, мы можем передать параметры ядру непосредственно при загрузке,

используя меню загрузчика, или же прописать параметры ядра в файлах конфигурации загрузчика.

Первый случай подходит для "одноразового" использования того или иного параметра, а второй — если параметр нужен для корректной работы системы.

Поэтому, чтобы не указывать его каждый раз при загрузке Linux, намного проще прописать его в файле конфигурации загрузчика.

Если вы используете GRUB/GRUB2, то передать параметры ядру можно так:

сначала надо выбрать образ (метку), а затем нажать клавишу <e>.

Появится строка, в которой вы можете отредактировать параметры ядра.

Чтобы передать ядру Linux параметры, вы должны ввести их в следующем фор-

мате:

метка параметры

Например:

Linux noapic

root=устройство Позволяет указать корневую файловую систему.

Например, root=/dev/sda5

rootdelay=N Ждать N секунд перед монтированием корневой файловой системы

rootflags=флаги Задает флаги корневой файловой системы

rootfstype=тип Задает тип корневой файловой системы. Полезен, если не удалось определить автоматически

rootwait Ожидание корневой файловой системы. Ядро будет ждать, пока не появится устройство с корневой ФС.

Полезно, когда корневая файловая система расположена на съемном носителе, например на флешке

ro Монтирует корневую файловую систему в режиме "только чтение". Используется по умолчанию.

После проверки файловой системы программой fsck корневая файловая система перемонтируется в режим rw

rw Монтирует корневую файловую систему в режиме "чтение/запись".

При использовании этого параметра нельзя запускать программы типа fsck.

Перед запуском fsck нужно перемонтировать корневую файловую систему в режиме ro

mem= Определяет объем памяти, установленной в компьютере.

Иногда ядро неправильно определяет объем оперативной памяти.

Вы можете помочь ему в этом, указав параметр mem.

Только указывать его нужно правильно, например:

mem=768M

После числа обязательно должна следовать буква М, иначе ядро "подумает", что объем оперативной памяти 768 байтов.

В современных дистрибутивах дела с памятью обстоят лучше.

Скорее всего, параметр mem указывать вы не будете, но есть шанс столкнуться с иной неприятной ситуацией.

Компьютерная индустрия не стоит на месте, и вы можете купить компьютер с оперативной памятью более 4 Гбайт,

а потом обнаружить, что ваш дистрибутив видит только первые 4 Гбайт.

В этом случае вам нужно перекомпилировать ядро с поддержкой PAE (Physical Address Extension) или же установить ядро,

изначально поддерживающее PAE.

init= Позволяет задать программу инициализации. По умолчанию используется программа /sbin/init, но вы можете задать другую программу

reboot= Позволяет задать тип перезагрузки компьютера.

Возможные значения: cold и warm, т. е. "холодная" или "горячая" перезагрузка

single Однопользовательский режим для администрирования системы, например, в случае отказа

nodmraid Отключает программные RAID-массивы, организованные на уровне BIOS

noapic Полезен, если вы при загрузке увидите сообщение: kernel panic — not syncing: IO-APIC + timer doesn't work!

nopcmcia Отключает PCMCIA-карты (для ноутбуков). Полезен, если вы подозреваете, что у вас проблемы с PCMCIA-картой

nodma Отключается DMA (Direct Memory Access, прямой доступ к памяти) для всех IDE-устройств

noapm Отключает APM (Advanced Power Management) — расширенное управление питанием

nousb Отключает поддержку USB

noscsi Отключает поддержку SCSI

pci=noacpi Не использовать ACPI (Advanced Configuration and Power Interface) для управления PCI-прерываниями

apci=off Полностью отключает ACPI. Полезен на некоторых ноутбуках, когда не удается установить (а потом загрузить) Linux

edd=off Отключает EDD (Enhanced Disk Drive). Если при загрузке Linux вы видите сообщение Probing EDD и загрузка на этом останавливается, тогда вам поможет параметр ядра edd=off

boot_delay=N Сообщения ядра выводятся так быстро, что вы не успеваете их прочитать?

С помощью этого параметра вы можете установить задержку в N секунд перед выводом следующего сообщения ядра

elevator=планировщик Позволяет выбрать планировщик ввода/вывода

vga=режим Позволяет задать VGA-режим. Подробнее см. файл Documentation/svga.txt.

Можно также задать значение ask, чтобы ядро спросило, какой режим нужно использовать:

vga=ask

quiet "Тихий" режим, отключает большинство сообщений ядра

Производительность многозадачной системы в целом сильно зависит от правильного планирования процессов системы.

Сейчас мы попытаемся с помощью параметра ядра elevator установить нужный нам алгоритм работы ядра, что позволит существенно повысить производительность системы.

Допустимы следующие значения этого параметра:

- none — значение по умолчанию

- as — упреждающее планирование

- cfg — "честная очередь"

- deadline — планирование крайних сроков

Для домашнего компьютера больше подойдут значения as и cfq:

- в первом случае (значение as) ядро будет пытаться "угадать" ход программы, а именно: какую операцию ввода/вывода программа "захочет" выполнить в следующий раз.

Если ядро будет правильно "угадывать", то производительность системы должна существенно увеличиться.

Ясно, что работа данного алгоритма очень зависит от логики программы

- во втором случае (значение cfq) ядро будет равномерно планировать операции ввода/вывода.

Данный алгоритм будет работать лучше первого в случае с запутанной логикой программы, когда невозможно предугадать ее следующую операцию

- последнее значение (deadline) больше подходит для сервера, чем для рабочей станции, поэтому существенного прироста от него не ждите.

При загрузке передать параметр ядра можно так:

linux elevator=значение

92. Разделы опций ядра

General setup 
Общие параметры, например, поддержка своп-памяти, межпроцессного взаимодействия System V, Sysctl. 
Если не знаете, для чего нужна та или иная опция, выделите ее и нажмите клавишу <F1>. 
А уж если не знаете английский, то до его изучения лучше опции не выключать!

Enable loadable module support
Поддержка загружаемых модулей. 
Драйверы устройств в Linux разработаны в виде модулей ядра. 
Здесь вы можете указать, нужна ли вам поддержка модулей. 
Отключать поддержку модулей на обычных машинах не рекомендуется.
Если же вы хотите построить малообслуживаемый сервер, работающий по принципу "построил и забыл", отключение поддержки загружаемых
модулей позволит даже повысить безопасность сервера, поскольку злоумышленник не сможет добавить свой код в ядро путем загрузки модуля.
Однако в этом случае ядро будет очень громоздким, потому что вам придется все нужные вам функции, которые были реализованы в виде модулей, компилировать в ядро

Enable the block layer
В этом разделе вы можете включить поддержку больших блочных устройств размером более 2 Тбайт

Processor type and features
Здесь вы можете выбрать тип вашего процессора и включить/выключить различные функции процессора

Power management and ACPI options
Опции управления питанием (ACPI, APM)

Bus options 
Здесь вы можете включить/выключить поддержку различных системных шин, а также определить их функции

Executable file formats / Emulations
Параметры поддержки форматов исполнимых файлов 

Networking support 
Сетевые опции ядра

Device drivers 
Драйверы устройств. 
Здесь вы можете определить, какие устройства должна поддерживать ваша система, а какие — нет

Firmware drivers 
Драйверы микропрограммного обеспечения (поддержка различных BIOS)

File systems 
Здесь вы можете определить, какие файловые системы должна поддерживать ваша система, а какие — нет

Kernel Hacking 
Различные параметры, относящиеся непосредственно к ядру

Security options 
Параметры безопасности

Cryptographic API 
Параметры криптографии (поддержка различных алгоритмов шифрования данных)

Virtualization 
Параметры виртуализации

Library routines 
Поддержка различных библиотечных функций (но если заглянуть в этот раздел, то вы увидите, что все эти функции связаны с вычислением контрольной суммы CRC)

Unofficial 3rd party kernel additions
Неофициальные дополнения ядра (от посторонних разработчиков). 
Сюда разработчики дистрибутива (не ядра) могут включать дополнительные модули. 
Вообще будьте осторожны, потому что среди них могут быть экспериментальные функции, включение которых отрицательно отразится на стабильности системы


Опции ядра могут быть либо включены, либо выключены. 
Если опция выключена, то ее код исключается из ядра (при компиляции ядра он не будет учитываться).
Если же опция включена, то ее код будет включен в состав ядра. 
Но есть еще третье состояние опции: M. 
Это означает, что опция будет включена в ядро как модуль. 
После сборки ядра и модулей все опции, скомпилированные в режиме M, будут "лежать" на диске, пока не понадобятся ядру. 
А как только это произойдет, будет загружен нужный модуль.


make oldconfig
make menuconfig

General setup

Общие параметры, например, поддержка своп-памяти, межпроцессного взаимодействия System V, Sysctl.

Если не знаете, для чего нужна та или иная опция, выделите ее и нажмите клавишу <F1>.

А уж если не знаете английский, то до его изучения лучше опции не выключать!

Enable loadable module support

Поддержка загружаемых модулей.

Драйверы устройств в Linux разработаны в виде модулей ядра.

Здесь вы можете указать, нужна ли вам поддержка модулей.

Отключать поддержку модулей на обычных машинах не рекомендуется.

Если же вы хотите построить малообслуживаемый сервер, работающий по принципу "построил и забыл", отключение поддержки загружаемых

модулей позволит даже повысить безопасность сервера, поскольку злоумышленник не сможет добавить свой код в ядро путем загрузки модуля.

Однако в этом случае ядро будет очень громоздким, потому что вам придется все нужные вам функции, которые были реализованы в виде модулей, компилировать в ядро

Enable the block layer

В этом разделе вы можете включить поддержку больших блочных устройств размером более 2 Тбайт

Processor type and features

Здесь вы можете выбрать тип вашего процессора и включить/выключить различные функции процессора

Power management and ACPI options

Опции управления питанием (ACPI, APM)

Bus options

Здесь вы можете включить/выключить поддержку различных системных шин, а также определить их функции

Executable file formats / Emulations

Параметры поддержки форматов исполнимых файлов

Networking support

Сетевые опции ядра

Device drivers

Драйверы устройств.

Здесь вы можете определить, какие устройства должна поддерживать ваша система, а какие — нет

Firmware drivers

Драйверы микропрограммного обеспечения (поддержка различных BIOS)

File systems

Здесь вы можете определить, какие файловые системы должна поддерживать ваша система, а какие — нет

Kernel Hacking

Различные параметры, относящиеся непосредственно к ядру

Security options

Параметры безопасности

Cryptographic API

Параметры криптографии (поддержка различных алгоритмов шифрования данных)

Virtualization

Параметры виртуализации

Library routines

Поддержка различных библиотечных функций (но если заглянуть в этот раздел, то вы увидите, что все эти функции связаны с вычислением контрольной суммы CRC)

Unofficial 3rd party kernel additions

Неофициальные дополнения ядра (от посторонних разработчиков).

Сюда разработчики дистрибутива (не ядра) могут включать дополнительные модули.

Вообще будьте осторожны, потому что среди них могут быть экспериментальные функции, включение которых отрицательно отразится на стабильности системы

Опции ядра могут быть либо включены, либо выключены.

Если опция выключена, то ее код исключается из ядра (при компиляции ядра он не будет учитываться).

Если же опция включена, то ее код будет включен в состав ядра.

Но есть еще третье состояние опции: M.

Это означает, что опция будет включена в ядро как модуль.

После сборки ядра и модулей все опции, скомпилированные в режиме M, будут "лежать" на диске, пока не понадобятся ядру.

А как только это произойдет, будет загружен нужный модуль.

make oldconfig

make menuconfig

93. Компиляция ядра

После настройки ядра конфигуратор сообщит, что для построения ядра нужно ввести команду make, а для вывода справки — make help.
Спешить с вводом make не будем — ее ввести мы успеем всегда. 
Лучше введите "make help" для ознакомления с параметрами команды make. 
Если вы внимательно прочитаете вывод команды "make help", то узнаете, что команда make (без параметров) аналогична команде make all, которая соберет следующие цели:
- vmlinuz — собирает обычное, "большое" ядро
- modules — собирает модули ядра
- bzImage — собирает сжатое ядро, которое помещается в каталог arch/i386/boot

Теперь понятно, что мы можем просто ввести команду make — она проделает как раз то, что нам нужно: 
make

Но это еще не все. 
Мы только откомпилировали модули и ядро, но пока не устанавливали их. 
Для установки модулей введите команду:
make modules_install

После установки модулей следует установить ядро.
Это можно сделать с помощью команды:
make install

В процессе установки будет добавлена соответствующая метка в файл конфигурации загрузчика. 
После этого следует ввести команду reboot для перезагрузки.

В процессе компиляции ядра создается много ненужных после его завершения файлов (у меня такого "мусора" набралось на 3 Гбайт), 
а команда make clean позволяет весь этот "мусор" удалить. 
Так что, в заключение произведем "генеральную уборку" — откройте терминал и от имени root введите команды:
cd /usr/src/linux
make clean

После настройки ядра конфигуратор сообщит, что для построения ядра нужно ввести команду make, а для вывода справки — make help.

Спешить с вводом make не будем — ее ввести мы успеем всегда.

Лучше введите "make help" для ознакомления с параметрами команды make.

Если вы внимательно прочитаете вывод команды "make help", то узнаете, что команда make (без параметров) аналогична команде make all, которая соберет следующие цели:

- vmlinuz — собирает обычное, "большое" ядро

- modules — собирает модули ядра

- bzImage — собирает сжатое ядро, которое помещается в каталог arch/i386/boot

Теперь понятно, что мы можем просто ввести команду make — она проделает как раз то, что нам нужно:

make

Но это еще не все.

Мы только откомпилировали модули и ядро, но пока не устанавливали их.

Для установки модулей введите команду:

make modules_install

После установки модулей следует установить ядро.

Это можно сделать с помощью команды:

make install

В процессе установки будет добавлена соответствующая метка в файл конфигурации загрузчика.

После этого следует ввести команду reboot для перезагрузки.

В процессе компиляции ядра создается много ненужных после его завершения файлов (у меня такого "мусора" набралось на 3 Гбайт),

а команда make clean позволяет весь этот "мусор" удалить.

Так что, в заключение произведем "генеральную уборку" — откройте терминал и от имени root введите команды:

cd /usr/src/linux

make clean

94. Программирование на языке C.

Давайте проверим, установлен ли gcc в вашей системе. 
Введите команду:
gcc --version

Создаем файл
hello.c
-------
#include <stdio.h>
int main(int argc, char** argv) {
printf("Hello, world!\n");
return 0;
}
-------

Теперь введите команду:
gcc -o hello hello.c
Параметр -o задает имя исполняемого файла, который должен создать компилятор (по умолчанию, если имя не задано, будет создан файл a.out). 
После компиляции программы в нашем случае будет создан файл hello, который можно запустить так:
./hello


Вы увидите знакомое всем программистам приветствие: 
Hello, world!

У компилятора gcc очень много параметров, их можно разбить на следующие группы:
- общие параметры
- параметры языка
- параметры препроцессора
- параметры компоновщика
- параметры каталогов
- параметры отладки
- параметры оптимизации
К общим параметрам относятся параметры -x, -c, -v и -o. 
С параметром -o мы уже знакомы — он задает имя результирующего файла. 

Параметр -v полезен начинающим программистам, которые хотят больше знать о процессе компиляции или же компиляции сложных проектов, 
чтобы получить больше информации о самом процессе.

Параметр -x задает тип языка программы, например:
gcc -x c -o hello hello.c

В качестве типа языка программы можно указать:
c — самый обычный язык C
objective_c — язык Objective C, не нужно путать с C++
c++ — это значение нужно указать, если программа написана на C++
assembler — для программ, написанных на языке Ассемблера
Вообще, указывать тип языка необязательно, поскольку в большинстве случаев компилятор сам определит его.
Параметр -c полезен, если вы хотите только откомпилировать вашу программу, но не вызывать компоновщик. 
В результате будет создан объектный файл с "расширением" .o.

Процесс компиляции состоит из двух основных этапов: трансляции, когда создается объектный файл, и компоновки, когда создается исполняемый файл. 
Зачем вам нужен объектный файл, вы должны знать сами.
wiki:
https://ru.wikipedia.org/wiki/%D0%9A%D0%BE%D0%BC%D0%BF%D0%B8%D0%BB%D1%8F%D1%82%D0%BE%D1%80
https://ru.wikipedia.org/wiki/ANSI_C

А вот среди параметра препроцессора нашлось сразу три полезных параметра:
-include <файл> — позволяет откомпилировать указанный файл раньше, чем все остальные, иногда это полезно
-nostdinc — запрещает использовать системный каталог с заголовками. 
            При этом компилятор будет искать заголовки в каталогах, указанных с помощью параметра -I
-nostdinc++ — то же самое, но для заголовков языка C++

Самым важным параметром компоновщика является параметр -l, позволяющий указать явно библиотеку, которая будет использоваться при сборке вашей программы. 
Например:
gcc -lmy_lib hello.c

Кроме этого, вы также можете использовать параметры -nostdlib и -static. 
Первый запрещает использовать все стандартные библиотеки, при этом будут использоваться библиотеки из каталогов, которые заданы параметром -L. 
Второй параметр задает статическую линковку, учтите, что размер результирующего файла существенно увеличится.
К параметрам каталогов относятся уже знакомые нам параметры -I и -L. 
Первый задает каталог с файлами заголовков, а второй — каталог с библиотеками.
К параметрам отладки относится параметр -g, добавляющий отладочную информацию для отладчика gdb. 
Вы можете отлаживать свои программы, только если добавили отладочную информацию с помощью параметра -g.
Компилятор gcc может оптимизировать ваши программы, в результате они будут либо быстрее запускаться, либо размер исполнимого файла станет меньше. 
Поэкспериментируйте с параметрами -O1, -O2, -O3 — это различные уровни оптимизации.

Давайте проверим, установлен ли gcc в вашей системе.

Введите команду:

gcc --version

Создаем файл

hello.c

-------

#include <stdio.h>

int main(int argc, char** argv) {

printf("Hello, world!\n");

return 0;

}

-------

Теперь введите команду:

gcc -o hello hello.c

Параметр -o задает имя исполняемого файла, который должен создать компилятор (по умолчанию, если имя не задано, будет создан файл a.out).

После компиляции программы в нашем случае будет создан файл hello, который можно запустить так:

./hello

Вы увидите знакомое всем программистам приветствие:

Hello, world!

У компилятора gcc очень много параметров, их можно разбить на следующие группы:

- общие параметры

- параметры языка

- параметры препроцессора

- параметры компоновщика

- параметры каталогов

- параметры отладки

- параметры оптимизации

К общим параметрам относятся параметры -x, -c, -v и -o.

С параметром -o мы уже знакомы — он задает имя результирующего файла.

Параметр -v полезен начинающим программистам, которые хотят больше знать о процессе компиляции или же компиляции сложных проектов,

чтобы получить больше информации о самом процессе.

Параметр -x задает тип языка программы, например:

gcc -x c -o hello hello.c

В качестве типа языка программы можно указать:

c — самый обычный язык C

objective_c — язык Objective C, не нужно путать с C++

c++ — это значение нужно указать, если программа написана на C++

assembler — для программ, написанных на языке Ассемблера

Вообще, указывать тип языка необязательно, поскольку в большинстве случаев компилятор сам определит его.

Параметр -c полезен, если вы хотите только откомпилировать вашу программу, но не вызывать компоновщик.

В результате будет создан объектный файл с "расширением" .o.

Процесс компиляции состоит из двух основных этапов: трансляции, когда создается объектный файл, и компоновки, когда создается исполняемый файл.

Зачем вам нужен объектный файл, вы должны знать сами.

wiki:

https://ru.wikipedia.org/wiki/%D0%9A%D0%BE%D0%BC%D0%BF%D0%B8%D0%BB%D1%8F%D1%82%D0%BE%D1%80

https://ru.wikipedia.org/wiki/ANSI_C

А вот среди параметра препроцессора нашлось сразу три полезных параметра:

-include <файл> — позволяет откомпилировать указанный файл раньше, чем все остальные, иногда это полезно

-nostdinc — запрещает использовать системный каталог с заголовками.

При этом компилятор будет искать заголовки в каталогах, указанных с помощью параметра -I

-nostdinc++ — то же самое, но для заголовков языка C++

Самым важным параметром компоновщика является параметр -l, позволяющий указать явно библиотеку, которая будет использоваться при сборке вашей программы.

Например:

gcc -lmy_lib hello.c

Кроме этого, вы также можете использовать параметры -nostdlib и -static.

Первый запрещает использовать все стандартные библиотеки, при этом будут использоваться библиотеки из каталогов, которые заданы параметром -L.

Второй параметр задает статическую линковку, учтите, что размер результирующего файла существенно увеличится.

К параметрам каталогов относятся уже знакомые нам параметры -I и -L.

Первый задает каталог с файлами заголовков, а второй — каталог с библиотеками.

К параметрам отладки относится параметр -g, добавляющий отладочную информацию для отладчика gdb.

Вы можете отлаживать свои программы, только если добавили отладочную информацию с помощью параметра -g.

Компилятор gcc может оптимизировать ваши программы, в результате они будут либо быстрее запускаться, либо размер исполнимого файла станет меньше.

Поэкспериментируйте с параметрами -O1, -O2, -O3 — это различные уровни оптимизации.

95. Команда make: сборка проекта

Серьезные проекты состоят не из одного C-файла, а, как минимум, из нескольких.
Чтобы не вводить команды компиляции несколько раз, программисты используют
специальные файлы с именем Makefile.
В файле Makefile содержится список файлов, которые нужно откомпилировать, и опции компилятора для каждого файла.

Файл Makefile
-------------
hello: hello.c
        gcc -o hello hello.c
-------------
Первая строка — это описание файла hello.c. 
Вторая строка — команда для компиляции этого файла. 
Обратите внимание, что перед командой gcc должен быть символ табуляции. 
Именно символ табуляции, а не 8 пробелов!


Формат Makefile следующий:
цель1: список_файлов
последовательность команд
цельN: список_файлов
последовательность команд


В Makefile вы можете использовать макроопределения, например:
CC=gcc
PATH=/usr/include /usr/my/include
FLAGS=-O3 -Wall -I${PATH}
...
$(CC) $(FLAGS) -c hello.c
К макроопределению можно обратиться с помощью конструкции $(имя).
После создания Makefile (он должен находиться в одном каталоге с файлом hello.c)
для компиляции нашего проекта уже не нужно вводить команду с параметрами компилятора, 
достаточно просто ввести команду:
make


Параметры команды make:
-C каталог Перейти в указанный каталог перед началом сборки программы
-d Вывести отладочную информацию
-f файл Использовать указанный файл вместо Makefile
-i Игнорировать ошибки компилятора
-l каталог В указанном каталоге будет произведен поиск файлов, указанных в Makefile
-k Продолжить работу после ошибки, если это возможно
-o файл Пропустить указанный файл
-s Тихий режим. Не выводить команды перед их выполнением
-w Показывать текущий каталог до и после выполнения каждой команды

Серьезные проекты состоят не из одного C-файла, а, как минимум, из нескольких.

Чтобы не вводить команды компиляции несколько раз, программисты используют

специальные файлы с именем Makefile.

В файле Makefile содержится список файлов, которые нужно откомпилировать, и опции компилятора для каждого файла.

Файл Makefile

-------------

hello: hello.c

gcc -o hello hello.c

-------------

Первая строка — это описание файла hello.c.

Вторая строка — команда для компиляции этого файла.

Обратите внимание, что перед командой gcc должен быть символ табуляции.

Именно символ табуляции, а не 8 пробелов!

Формат Makefile следующий:

цель1: список_файлов

последовательность команд

цельN: список_файлов

последовательность команд

В Makefile вы можете использовать макроопределения, например:

CC=gcc

PATH=/usr/include /usr/my/include

FLAGS=-O3 -Wall -I${PATH}

...

$(CC) $(FLAGS) -c hello.c

К макроопределению можно обратиться с помощью конструкции $(имя).

После создания Makefile (он должен находиться в одном каталоге с файлом hello.c)

для компиляции нашего проекта уже не нужно вводить команду с параметрами компилятора,

достаточно просто ввести команду:

make

Параметры команды make:

-C каталог Перейти в указанный каталог перед началом сборки программы

-d Вывести отладочную информацию

-f файл Использовать указанный файл вместо Makefile

-i Игнорировать ошибки компилятора

-l каталог В указанном каталоге будет произведен поиск файлов, указанных в Makefile

-k Продолжить работу после ошибки, если это возможно

-o файл Пропустить указанный файл

-s Тихий режим. Не выводить команды перед их выполнением

-w Показывать текущий каталог до и после выполнения каждой команды

96. Команды из пакета binutils

Утилита strings, она подходит для поиска строк как в двоичных файлах, 
так и на разделах жесткого диска в случае повреждения таблицы разделов. 

Например:
strings /dev/sdaX | grep 'искомая строка'


Еще программы из пакета binutils:
ld Компоновщик (создает из объектного файла исполняемый)
nm Выводит названия идентификаторов из двоичных файлов
objcopy Копирует и транслирует двоичные файлы
objdump Выводит информацию из двоичных файлов
size Выводит размер секций двоичного файла
strings Выводит печатаемые строки из двоичных файлов

Утилита strings, она подходит для поиска строк как в двоичных файлах,

так и на разделах жесткого диска в случае повреждения таблицы разделов.

Например:

strings /dev/sdaX | grep 'искомая строка'

Еще программы из пакета binutils:

ld Компоновщик (создает из объектного файла исполняемый)

nm Выводит названия идентификаторов из двоичных файлов

objcopy Копирует и транслирует двоичные файлы

objdump Выводит информацию из двоичных файлов

size Выводит размер секций двоичного файла

strings Выводит печатаемые строки из двоичных файлов

97. Еще полезные программы для программиста:

strip — удаляет таблицу символов из объектного файла, 
что позволяет сократить размер этого файла, правда,
отладить этот файл уже не получится.

gprof — профайлер для ваших программ. 
Профайлер — это программа, позволяющая оптимизировать выполнение вашей программы. 
Для каждого вызова функции профайлер выводит время ее выполнения, 
что позволяет проанализировать, где происходит задержка выполнения, и оптимизировать код программы при необходимости.

strip — удаляет таблицу символов из объектного файла,

что позволяет сократить размер этого файла, правда,

отладить этот файл уже не получится.

gprof — профайлер для ваших программ.

Профайлер — это программа, позволяющая оптимизировать выполнение вашей программы.

Для каждого вызова функции профайлер выводит время ее выполнения,

что позволяет проанализировать, где происходит задержка выполнения, и оптимизировать код программы при необходимости.

98. Команда gdb: отладка программ

Параметры gdb:
-help      Показать краткое описание всех параметров gdb 
-nx        Запрет обработки команд файла инициализации .dgbinit
-q         Не показывать приветствие и информацию об авторских правах
-batch     Командный режим. 
           Если отладчик возвращает 0, то были выполнены все команды, которые указаны в файле, заданном параметром -x.
           Если же были ошибки, отладчик возвращает ненулевое значение
-f         Используется при отладке программ с помощью интерфейса редактора Emacs
-b bps     Устанавливает скорость обмена (в битах в секунду) информации по последовательному интерфейсу, если вы отлаживаете программу удаленно. 
           Вряд ли вы будете сейчас использовать эту опцию
-tty=терминал Использовать указанный терминал в качестве стандартного вывода отладчика и отлаживаемой программы
-s файл    Читает таблицу символов из указанного файла
-write     Разрешить запись в исполняемые файлы
-e         программа Использовать указанную программу как фильтр дампа
-se        Считать таблицу символов из указанного файла, этот файл будет использоваться в качестве исполняемого
-core=файл Указать файл дампа
-x файл    Выполнить указанные в файле команды. 
           Используется вместе с параметром -batch
-d каталог Добавить указанный каталог к списку каталогов исходного текста[prog|core|procID] 
           Отлаживаемый объект: программа (prog), файл дампа (core),
           идентификатор процесса (procID) при отладке уже запущенной программы
-p PID     Подключиться к уже запущенному процессу

Чтобы отладчик gdb мог отлаживать программу, нужно добавить служебную ин формацию к исполняемому файлу. 
Как правило, это делается при компиляции программы (параметр -g):
gcc -g -o hello hello.c

После этого вызываем отладчик так:
gdb hello

Если же программа запустилась и завершилась с ошибкой, будет создан файл дампа (core), его тоже можно "скормить" отладчику:
gdb hello core

Можно даже подключиться к уже запущенному процессу, для этого нужно знать PID этого процесса (его можно узнать с помощью команд ps и top):
gdb 1234

Процесс отладки программы осуществляется путем ввода команд отладчика.
break [файл:]функция   Установить точку останова (breakpoint)
run [параметры]        Запускает программу и передает ей указанные параметры
bt                     Обратная трассировка программы
print                  выражение Вывести значение выражения. В выражении можно использовать переменные из вашей программы
C                      Продолжить выполнение программы после остановки
next                   Выполнить следующую строку программы. 
                       Если следующая строка — вызов функции, то она будет выполнена за один шаг
step                   Выполнить следующую строку программы. 
                       Если следующая строка — вызов функции, то будут выполнены пошагово все операции функции. 
                       Команду next можно использовать, если вы точно уверены, что все ваши функции корректно работают. 
                       А вот step используется для более глубокой отладки программы
help [имя]             Выводит общую справку или справку по указанной команде
quit                   Выход


Использование gdb:
Несколько слов о самом процессе отладки. 
Сначала нужно запустить gdb и загрузить в него программу. 
Затем нужно установить точку останова, например:
break main
Далее запускаем программу:
run
Выполнение программы дойдет до функции main() и остановится. 
Затем с помощью команд next и step вы запускаете пошаговое выполнение программы, 
а с помощью команды print просматриваете значение ее переменных.

Параметры gdb:

-help Показать краткое описание всех параметров gdb

-nx Запрет обработки команд файла инициализации .dgbinit

-q Не показывать приветствие и информацию об авторских правах

-batch Командный режим.

Если отладчик возвращает 0, то были выполнены все команды, которые указаны в файле, заданном параметром -x.

Если же были ошибки, отладчик возвращает ненулевое значение

-f Используется при отладке программ с помощью интерфейса редактора Emacs

-b bps Устанавливает скорость обмена (в битах в секунду) информации по последовательному интерфейсу, если вы отлаживаете программу удаленно.

Вряд ли вы будете сейчас использовать эту опцию

-tty=терминал Использовать указанный терминал в качестве стандартного вывода отладчика и отлаживаемой программы

-s файл Читает таблицу символов из указанного файла

-write Разрешить запись в исполняемые файлы

-e программа Использовать указанную программу как фильтр дампа

-se Считать таблицу символов из указанного файла, этот файл будет использоваться в качестве исполняемого

-core=файл Указать файл дампа

-x файл Выполнить указанные в файле команды.

Используется вместе с параметром -batch

-d каталог Добавить указанный каталог к списку каталогов исходного текста[prog|core|procID]

Отлаживаемый объект: программа (prog), файл дампа (core),

идентификатор процесса (procID) при отладке уже запущенной программы

-p PID Подключиться к уже запущенному процессу

Чтобы отладчик gdb мог отлаживать программу, нужно добавить служебную ин формацию к исполняемому файлу.

Как правило, это делается при компиляции программы (параметр -g):

gcc -g -o hello hello.c

После этого вызываем отладчик так:

gdb hello

Если же программа запустилась и завершилась с ошибкой, будет создан файл дампа (core), его тоже можно "скормить" отладчику:

gdb hello core

Можно даже подключиться к уже запущенному процессу, для этого нужно знать PID этого процесса (его можно узнать с помощью команд ps и top):

gdb 1234

Процесс отладки программы осуществляется путем ввода команд отладчика.

break [файл:]функция Установить точку останова (breakpoint)

run [параметры] Запускает программу и передает ей указанные параметры

bt Обратная трассировка программы

print выражение Вывести значение выражения. В выражении можно использовать переменные из вашей программы

C Продолжить выполнение программы после остановки

next Выполнить следующую строку программы.

Если следующая строка — вызов функции, то она будет выполнена за один шаг

step Выполнить следующую строку программы.

Если следующая строка — вызов функции, то будут выполнены пошагово все операции функции.

Команду next можно использовать, если вы точно уверены, что все ваши функции корректно работают.

А вот step используется для более глубокой отладки программы

help [имя] Выводит общую справку или справку по указанной команде

quit Выход

Использование gdb:

Несколько слов о самом процессе отладки.

Сначала нужно запустить gdb и загрузить в него программу.

Затем нужно установить точку останова, например:

break main

Далее запускаем программу:

run

Выполнение программы дойдет до функции main() и остановится.

Затем с помощью команд next и step вы запускаете пошаговое выполнение программы,

а с помощью команды print просматриваете значение ее переменных.

99. Настройка bash

bash — это самая популярная командная оболочка (командный интерпретатор) Linux. 
Основное предназначение bash — выполнение команд, введенных пользователем. 
Пользователь вводит команду, bash ищет программу, соответствующую команде, в каталогах, указанных в переменной окружения PATH.
Если такая программа найдена, то bash запускает ее и передает ей введенные пользователем параметры.
В противном случае выводится сообщение о невозможности выполнения команды.

Файл /etc/profile содержит глобальные настройки bash, он влияет на всю систему — на каждую запущенную оболочку. 
Обычно /etc/profile не нуждается в изменении, а при необходимости изменить параметры bash редактируют один из файлов:
~/.bash_profile — обрабатывается при каждом входе в систему
~/.bashrc — обрабатывается при каждом запуске дочерней оболочки
~/.bash_logout — обрабатывается при выходе из системы
Файл ~/.bash_profile часто не существует, а если и существует, то в нем есть всего одна строка:
source ~/.bashrc
Данная строка означает, что нужно прочитать файл .bashrc. 
Поэтому будем считать основным конфигурационным файлом файл .bashrc. 
Но помните, что он влияет на оболочку текущего пользователя (такой файл находится в домашнем каталоге каждого пользователя, не забываем: "~" означает домашний каталог). 
Если же вдруг понадобится задать параметры, которые повлияют на всех пользователей, то нужно редактировать файл /etc/profile.
В файле .bash_history (тоже находится в домашнем каталоге) хранится история команд, введенных пользователем. 
Так что вы можете просмотреть свои же команды, которые вы накануне вводили.
Какие настройки могут быть в .bashrc? 
Как правило, в этом файле задаются псевдонимы команд, определяется внешний вид приглашения командной строки, задаются значения переменных окружения.

Псевдонимы команд задаются с помощью команды alias, вот несколько примеров:
alias h='fc -l'
alias ll='ls -laFo'
alias l='ls -l'
alias g='egrep -i'
Псевдонимы работают просто: при вводе команды l на самом деле будет выполнена команда ls -l.

Теперь рассмотрим пример изменения приглашения командной строки. 
Глобальная переменная PS1 отвечает за внешний вид командной строки. 
По умолчанию командная строка имеет формат:
пользователь@компьютер:рабочий_каталог

Значение PS1 при этом будет:
PS1='\u@\h:\w$'

\a ASCII-символ звонка (код 07). Не рекомендуется его использовать — очень скоро начнет раздражать
\d Дата в формате "день недели, месяц, число"
\h Имя компьютера до первой точки
\H Полное имя компьютера
\j Количество задач, запущенных в оболочке в данное время
\l Название терминала
\n Символ новой строки
\r Возврат каретки
\s Название оболочки
\t Время в 24-часовом формате (ЧЧ: MM: СС)
\T Время в 12-часовом формате (ЧЧ: ММ: СС)
\@ Время в 12-часовом формате (AM/PM)
\u Имя пользователя
\v Версия bash (сокращенный вариант)
\V Версия bash (полная версия: номер релиза, номер патча)
\w Текущий каталог (полный путь)
\W Текущий каталог (только название каталога, без пути)
\! Номер команды в истории
\# Системный номер команды
\$ Если UID пользователя равен 0, будет выведен символ #, иначе —символ $
\\ Обратный слэш
$ ( ) Подстановка внешней команды

Вот пример альтернативного приглашения командной строки:
PS1='[\u@\h] $(date +%m/%d/%y) \$'
Вид приглашения будет такой:
[user@host] 12/06/10 $

В квадратных скобках выводится имя пользователя и имя компьютера, 
затем используется конструкция $() для подстановки даты в нужном нам формате и символ приглашения, 
который изменяется в зависимости от идентификатора пользователя.
Установить переменную окружения можно с помощью команды export, что будет показано позже.

bash — это самая популярная командная оболочка (командный интерпретатор) Linux.

Основное предназначение bash — выполнение команд, введенных пользователем.

Пользователь вводит команду, bash ищет программу, соответствующую команде, в каталогах, указанных в переменной окружения PATH.

Если такая программа найдена, то bash запускает ее и передает ей введенные пользователем параметры.

В противном случае выводится сообщение о невозможности выполнения команды.

Файл /etc/profile содержит глобальные настройки bash, он влияет на всю систему — на каждую запущенную оболочку.

Обычно /etc/profile не нуждается в изменении, а при необходимости изменить параметры bash редактируют один из файлов:

~/.bash_profile — обрабатывается при каждом входе в систему

~/.bashrc — обрабатывается при каждом запуске дочерней оболочки

~/.bash_logout — обрабатывается при выходе из системы

Файл ~/.bash_profile часто не существует, а если и существует, то в нем есть всего одна строка:

source ~/.bashrc

Данная строка означает, что нужно прочитать файл .bashrc.

Поэтому будем считать основным конфигурационным файлом файл .bashrc.

Но помните, что он влияет на оболочку текущего пользователя (такой файл находится в домашнем каталоге каждого пользователя, не забываем: "~" означает домашний каталог).

Если же вдруг понадобится задать параметры, которые повлияют на всех пользователей, то нужно редактировать файл /etc/profile.

В файле .bash_history (тоже находится в домашнем каталоге) хранится история команд, введенных пользователем.

Так что вы можете просмотреть свои же команды, которые вы накануне вводили.

Какие настройки могут быть в .bashrc?

Как правило, в этом файле задаются псевдонимы команд, определяется внешний вид приглашения командной строки, задаются значения переменных окружения.

Псевдонимы команд задаются с помощью команды alias, вот несколько примеров:

alias h='fc -l'

alias ll='ls -laFo'

alias l='ls -l'

alias g='egrep -i'

Псевдонимы работают просто: при вводе команды l на самом деле будет выполнена команда ls -l.

Теперь рассмотрим пример изменения приглашения командной строки.

Глобальная переменная PS1 отвечает за внешний вид командной строки.

По умолчанию командная строка имеет формат:

пользователь@компьютер:рабочий_каталог

Значение PS1 при этом будет:

PS1='\u@\h:\w$'

\a ASCII-символ звонка (код 07). Не рекомендуется его использовать — очень скоро начнет раздражать

\d Дата в формате "день недели, месяц, число"

\h Имя компьютера до первой точки

\H Полное имя компьютера

\j Количество задач, запущенных в оболочке в данное время

\l Название терминала

\n Символ новой строки

\r Возврат каретки

\s Название оболочки

\t Время в 24-часовом формате (ЧЧ: MM: СС)

\T Время в 12-часовом формате (ЧЧ: ММ: СС)

\@ Время в 12-часовом формате (AM/PM)

\u Имя пользователя

\v Версия bash (сокращенный вариант)

\V Версия bash (полная версия: номер релиза, номер патча)

\w Текущий каталог (полный путь)

\W Текущий каталог (только название каталога, без пути)

\! Номер команды в истории

\# Системный номер команды

\$ Если UID пользователя равен 0, будет выведен символ #, иначе —символ $

\\ Обратный слэш

$ ( ) Подстановка внешней команды

Вот пример альтернативного приглашения командной строки:

PS1='[\u@\h] $(date +%m/%d/%y) \$'

Вид приглашения будет такой:

[user@host] 12/06/10 $

В квадратных скобках выводится имя пользователя и имя компьютера,

затем используется конструкция $() для подстановки даты в нужном нам формате и символ приглашения,

который изменяется в зависимости от идентификатора пользователя.

Установить переменную окружения можно с помощью команды export, что будет показано позже.

100. Первый сценарий на bash «Привет, мир!»

vim hello
---------
#!/bin/bash
echo "Привет, мир!"
# Комментарий
---------

Первая строка нашего сценария — это указание, что он должен быть обработан программой /bin/bash. 
Обратите внимание: если между # и ! окажется пробел, то данная директива не сработает, поскольку будет воспринята как обычный комментарий. 
Комментарии начинаются, как вы уже догадались, с решетки:
# Комментарий
Вторая строка — это оператор echo, выводящий нашу строку.

Что бы сделать сценарий исполняемым нужно выдать ему бит execute:
chmod +x hello

Для запуска сценария введите команду:
./hello

Чтобы вводить для запуска сценария просто hello (без ./), сценарий нужно скопировать в каталог /usr/bin (точнее, в любой каталог из переменной окружения PATH):
# cp ./hello /usr/bin

P.S. На самом деле можно на файл натравить сам bash
bash hello

vim hello

---------

#!/bin/bash

echo "Привет, мир!"

# Комментарий

---------

Первая строка нашего сценария — это указание, что он должен быть обработан программой /bin/bash.

Обратите внимание: если между # и ! окажется пробел, то данная директива не сработает, поскольку будет воспринята как обычный комментарий.

Комментарии начинаются, как вы уже догадались, с решетки:

# Комментарий

Вторая строка — это оператор echo, выводящий нашу строку.

Что бы сделать сценарий исполняемым нужно выдать ему бит execute:

chmod +x hello

Для запуска сценария введите команду:

./hello

Чтобы вводить для запуска сценария просто hello (без ./), сценарий нужно скопировать в каталог /usr/bin (точнее, в любой каталог из переменной окружения PATH):

# cp ./hello /usr/bin

P.S. На самом деле можно на файл натравить сам bash

bash hello

101. Использование переменных в собственных сценариях

В любом серьезном сценарии вы не обойдетесь без использования переменных. 
Переменные можно объявлять в любом месте сценария, но до места их первого применения. 
Рекомендуется объявлять переменные в самом начале сценария, чтобы потом не искать, где вы объявили ту или иную переменную.

Для объявления переменной используется следующая конструкция:
переменная=значение
ADDRESS='hostname'

Пример объявления переменной:
ADDRESS=www.dkws.org.ua
echo $ADDRESS
Обратите внимание на следующие моменты:
- при объявлении переменной знак доллара не ставится, но он обязателен при использовании переменной
- при объявлении переменной не должно быть пробелов до и после знака =

Значение для переменной указывать вручную не обязательно — его можно прочитать с клавиатуры:
read ADDRESS 
или со стандартного вывода программы:
ADDRESS='hostname'

Чтение значения переменной с клавиатуры осуществляется с помощью инструкции read. 
При этом указывать символ доллара не нужно. 
Вторая команда устанавливает в качестве значения переменной ADDRESS вывод команды hostname.

В Linux часто используются переменные окружения. 
Это специальные переменные, содержащие служебные данные. 
Вот примеры некоторых часто используемых переменных окружения:
BASH — полный путь до исполняемого файла командной оболочки bssh
BASH_VERSION — версия bash
HOME — домашний каталог пользователя, который запустил сценарий
HOSTNAME — имя компьютера
RANDOM — случайное число в диапазоне от 0 до 32 767
OSTYPE — тип операционной системы
PWD — текущий каталог
PS1 — строка приглашения
UID — ID пользователя, который запустил сценарий
USER — имя пользователя.

Для установки собственной переменной окружения используется команда export:
# присваиваем переменной значение
$ADDRESS=ww.dkws.org.ua
# экспортируем переменную — делаем ее переменной окружения
# после этого переменная ADDRESS будет доступна в других сценариях
export $ADDRESS

В любом серьезном сценарии вы не обойдетесь без использования переменных.

Переменные можно объявлять в любом месте сценария, но до места их первого применения.

Рекомендуется объявлять переменные в самом начале сценария, чтобы потом не искать, где вы объявили ту или иную переменную.

Для объявления переменной используется следующая конструкция:

переменная=значение

ADDRESS='hostname'

Пример объявления переменной:

ADDRESS=www.dkws.org.ua

echo $ADDRESS

Обратите внимание на следующие моменты:

- при объявлении переменной знак доллара не ставится, но он обязателен при использовании переменной

- при объявлении переменной не должно быть пробелов до и после знака =

Значение для переменной указывать вручную не обязательно — его можно прочитать с клавиатуры:

read ADDRESS

или со стандартного вывода программы:

ADDRESS='hostname'

Чтение значения переменной с клавиатуры осуществляется с помощью инструкции read.

При этом указывать символ доллара не нужно.

Вторая команда устанавливает в качестве значения переменной ADDRESS вывод команды hostname.

В Linux часто используются переменные окружения.

Это специальные переменные, содержащие служебные данные.

Вот примеры некоторых часто используемых переменных окружения:

BASH — полный путь до исполняемого файла командной оболочки bssh

BASH_VERSION — версия bash

HOME — домашний каталог пользователя, который запустил сценарий

HOSTNAME — имя компьютера

RANDOM — случайное число в диапазоне от 0 до 32 767

OSTYPE — тип операционной системы

PWD — текущий каталог

PS1 — строка приглашения

UID — ID пользователя, который запустил сценарий

USER — имя пользователя.

Для установки собственной переменной окружения используется команда export:

# присваиваем переменной значение

$ADDRESS=ww.dkws.org.ua

# экспортируем переменную — делаем ее переменной окружения

# после этого переменная ADDRESS будет доступна в других сценариях

export $ADDRESS

102. Передача параметров сценарию

Очень часто сценариям нужно передавать различные параметры, например режим работы или имя файла/каталога. 
Для передачи параметров используются следующие специальные переменные:
 $0 — содержит имя сценария
 $n — содержит значение параметра (n — номер параметра)
 $# — позволяет узнать количество параметров, которые были переданы
Рассмотрим небольшой пример обработки параметров сценария. 
Я понимаю, что конструкцию case-esac мы еще не рассматривали, но общий принцип должен быть понятен

Пример обработки параметров сценария
------------------------------------
# Сценарий должен вызываться так:
# имя_сценария параметр
# Анализируем первый параметр
case "$1" in
    start)
      # Действия при получении параметра start
      echo "Запускаем сетевой сервис"
      ;;
    stop)
     # Действия при получении параметра stop
     echo "Останавливаем сетевой сервис"
     ;;
 *)
 # Действия в остальных случаях
 # Выводим подсказку о том, как нужно использовать сценарий, и
 # завершаем работу сценария
 echo "Usage: $0 {start|stop }"
 exit 1
 ;;
esac
------------------------------------

Очень часто сценариям нужно передавать различные параметры, например режим работы или имя файла/каталога.

Для передачи параметров используются следующие специальные переменные:

$0 — содержит имя сценария

$n — содержит значение параметра (n — номер параметра)

$# — позволяет узнать количество параметров, которые были переданы

Рассмотрим небольшой пример обработки параметров сценария.

Я понимаю, что конструкцию case-esac мы еще не рассматривали, но общий принцип должен быть понятен

Пример обработки параметров сценария

------------------------------------

# Сценарий должен вызываться так:

# имя_сценария параметр

# Анализируем первый параметр

case "$1" in

start)

# Действия при получении параметра start

echo "Запускаем сетевой сервис"

;;

stop)

# Действия при получении параметра stop

echo "Останавливаем сетевой сервис"

;;

# Действия в остальных случаях

# Выводим подсказку о том, как нужно использовать сценарий, и

# завершаем работу сценария

echo "Usage: $0 {start|stop }"

exit 1

;;

esac

------------------------------------

103. Массивы и bash

Интерпретатор bash позволяет использовать массивы. 
Массивы объявляются подобно переменным.
ARRAY[0]=1
ARRAY[1]=2
echo $ARRAY[0]

Интерпретатор bash позволяет использовать массивы.

Массивы объявляются подобно переменным.

ARRAY[0]=1

ARRAY[1]=2

echo $ARRAY[0]

104. Циклы

Как и в любом языке программирования, в bash можно использовать циклы.
Мы рассмотрим циклы for и while, хотя вообще в bash доступны также циклы until и select, но они применяются довольно редко.

Синтаксис цикла for выглядит так:
for переменная in список
do
 команды
done

В цикле при каждой итерации переменной будет присвоен очередной элемент списка, над которым будут выполнены указанные команды. 
Чтобы было понятнее, рассмотрим небольшой пример:
for n in 1 2 3;
do
 echo $n;
done

Обратите внимание: список значений и список команд должны заканчиваться точкой с запятой.
Как и следовало ожидать, наш сценарий выведет на экран следующее:
1
2
3

Пример вложенных for:
for i in 1 2 3; do
      for n in 1 2 3; do
      #echo $i
      #echo $n
      c=$(($i + $n))
      echo "$i + $n = $c"
      done
done


Синтаксис цикла while выглядит немного иначе:
while условие
do
 команды
done


Цикл while выполняется до тех пор, пока истинно заданное условие. 
Подробно об условиях потом, а сейчас напишем аналог предыдущего цикла, т. е. нам нужно вывести 1, 2 и 3, но с помощью while, а не for:

Пример выполняем пока n меньше 4
n=1
while [ $n -lt 4 ]
do
 echo "$n "
 n=$(( $n+1 ));
done

Пример выполняем пока n=4:
n=1
while :
do
   test $n -eq 4 && break
   echo $n
   n=$(($n+1))
done

Как и в любом языке программирования, в bash можно использовать циклы.

Мы рассмотрим циклы for и while, хотя вообще в bash доступны также циклы until и select, но они применяются довольно редко.

Синтаксис цикла for выглядит так:

for переменная in список

команды

done

В цикле при каждой итерации переменной будет присвоен очередной элемент списка, над которым будут выполнены указанные команды.

Чтобы было понятнее, рассмотрим небольшой пример:

for n in 1 2 3;

echo $n;

done

Обратите внимание: список значений и список команд должны заканчиваться точкой с запятой.

Как и следовало ожидать, наш сценарий выведет на экран следующее:

Пример вложенных for:

for i in 1 2 3; do

for n in 1 2 3; do

#echo $i

#echo $n

c=$(($i + $n))

echo "$i + $n = $c"

done

Синтаксис цикла while выглядит немного иначе:

while условие

команды

done

Цикл while выполняется до тех пор, пока истинно заданное условие.

Подробно об условиях потом, а сейчас напишем аналог предыдущего цикла, т. е. нам нужно вывести 1, 2 и 3, но с помощью while, а не for:

Пример выполняем пока n меньше 4

n=1

while [ $n -lt 4 ]

echo "$n "

n=$(( $n+1 ));

done

Пример выполняем пока n=4:

n=1

while :

test $n -eq 4 && break

echo $n

n=$(($n+1))

done

105. Условные операторы

В bash доступны два условных оператора: if и case. 
Синтаксис оператора if следующий:
if условие_1 then
команды_1
elif условие_2 then
команды_2
...
elif условие_N then
команды_N
else
команды_N+1
fi

Оператор if в bash работает аналогично оператору if в других языках программирования. 
Если истинно первое условие, то выполняется первый список команд, иначе — проверяется второе условие и т. д. 
Количество блоков elif, понятно, не ограничено.
Самая ответственная задача — это правильно составить условие. 
Условия записываются в квадратных скобках. 
Вот пример записи условий:
# Переменная N = 10
[ N==10 ]
# Переменная N не равна 10
[ N!=10 ]

Операции сравнения указываются не с помощью привычных знаков > или <, а с помощью следующих выражений:
-lt — меньше
-gt — больше
-le — меньше или равно
-ge — больше или равно
-eq — равно (используется вместо ==)

Применять данные выражения нужно следующим образом:
[ переменная выражение значение|переменная ]
Например:
# N меньше 10
[ $N -lt 10 ]
# N меньше A
[ $N -lt $A ]



В квадратных скобках вы также можете задать выражения для проверки существования файла и каталога:
-e файл — условие истинно, если файл существует
-d каталог — условие истинно, если каталог существует
-x файл — условие истинно, если файл является исполняемым

С оператором case мы уже немного знакомы, но сейчас рассмотрим его синтаксис подробнее:
case переменная in
значение_1) команды_1 ;;
...
значение_N) команды_N ;;
*) команды_по_умолчанию;;
esac

Значение указанной переменной по очереди сравнивается с приведенными значениями (значение_1, ..., значение_N). 
Если есть совпадение, то будут выполнены команды, соответствующие значению. 
Если совпадений нет, то будут выполнены команды по умолчанию.

В bash доступны два условных оператора: if и case.

Синтаксис оператора if следующий:

if условие_1 then

команды_1

elif условие_2 then

команды_2

...

elif условие_N then

команды_N

else

команды_N+1

Оператор if в bash работает аналогично оператору if в других языках программирования.

Если истинно первое условие, то выполняется первый список команд, иначе — проверяется второе условие и т. д.

Количество блоков elif, понятно, не ограничено.

Самая ответственная задача — это правильно составить условие.

Условия записываются в квадратных скобках.

Вот пример записи условий:

# Переменная N = 10

[ N==10 ]

# Переменная N не равна 10

[ N!=10 ]

Операции сравнения указываются не с помощью привычных знаков > или <, а с помощью следующих выражений:

-lt — меньше

-gt — больше

-le — меньше или равно

-ge — больше или равно

-eq — равно (используется вместо ==)

Применять данные выражения нужно следующим образом:

[ переменная выражение значение|переменная ]

Например:

# N меньше 10

[ $N -lt 10 ]

# N меньше A

[ $N -lt $A ]

В квадратных скобках вы также можете задать выражения для проверки существования файла и каталога:

-e файл — условие истинно, если файл существует

-d каталог — условие истинно, если каталог существует

-x файл — условие истинно, если файл является исполняемым

С оператором case мы уже немного знакомы, но сейчас рассмотрим его синтаксис подробнее:

case переменная in

значение_1) команды_1 ;;

...

значение_N) команды_N ;;

*) команды_по_умолчанию;;

esac

Значение указанной переменной по очереди сравнивается с приведенными значениями (значение_1, ..., значение_N).

Если есть совпадение, то будут выполнены команды, соответствующие значению.

Если совпадений нет, то будут выполнены команды по умолчанию.

106. Функции

В bash можно использовать функции. Синтаксис объявления функции следующий:
имя() { список; }

Вот пример объявления и использования функции:
list_txt()
{
echo "Выводим текстовые файлы"
ls *.txt
}

В bash можно использовать функции. Синтаксис объявления функции следующий:

имя() { список; }

Вот пример объявления и использования функции:

list_txt()

{

echo "Выводим текстовые файлы"

ls *.txt

}

107. Сценарий мониторинга журнала

Начнем с простого сценария мониторинга журнала. 
Системные журналы постоянно обновляются, а наш сценарий будет каждые 3 секунды выводить последние 15 строк выбранного вами журнала. 
Сценарий будет полезен при настройке системы, когда нужно постоянно просматривать журналы, чтобы понять, как система реагирует на новые настройки. 
Для прекращения работы сценария нужно нажать комбинацию клавиш <Ctrl>+<C>.

#!/bin/bash
# Сценарий  logviever
# Для прекращения работы сценария нужно нажать комбинацию клавиш <Ctrl>+<C>
# Интервал обновления в секундах
INT=3
while [ true ]
do
 # Выводим последние 15 строк журнала
 tail -n 15 $1
 # Ждем
 sleep $INT
 # Две пустые строки
 echo; echo
done

#Формат вызова следующий:
#./сценарий файл_журнала
#Например:
#./script /var/log/messages
#./script /var/log/syslog
#bash logviever /var/log/syslog

Начнем с простого сценария мониторинга журнала.

Системные журналы постоянно обновляются, а наш сценарий будет каждые 3 секунды выводить последние 15 строк выбранного вами журнала.

Сценарий будет полезен при настройке системы, когда нужно постоянно просматривать журналы, чтобы понять, как система реагирует на новые настройки.

Для прекращения работы сценария нужно нажать комбинацию клавиш <Ctrl>+<C>.

#!/bin/bash

# Сценарий logviever

# Для прекращения работы сценария нужно нажать комбинацию клавиш <Ctrl>+<C>

# Интервал обновления в секундах

INT=3

while [ true ]

# Выводим последние 15 строк журнала

tail -n 15 $1

# Ждем

sleep $INT

# Две пустые строки

echo; echo

done

#Формат вызова следующий:

#./сценарий файл_журнала

#Например:

#./script /var/log/messages

#./script /var/log/syslog

#bash logviever /var/log/syslog

108. Переименование файлов

Следующий сценарий сложнее: он ищет файлы в текущем каталоге, в именах которых есть пробелы, и заменяет пробелы символами подчеркивания

#!/bin/bash
# Сценарий  file_renamer
# ищет файлы в текущем каталоге, в именах которых есть пробелы, и заменяет пробелы символами подчеркивания
num=0 # Сколько файлов мы переименовали
for filename in * # Перебираем все файлы в текущем каталоге
do
# Передаем имя файла фильтру grep
# Если имя файла содержит пробел, то код завершения
# последней операции равен 0
  echo "$filename" | grep -q " "
  if [ $? -eq 0 ]
  then
    # Если код завершения равен 0, переименовываем файл
    fname=$filename
    n=`echo $fname | sed -e "s/ /_/g"`
    mv "$fname" "$n"
    let "num += 1"
   fi
done
echo "Переименовано файлов: $num"
exit 0

Следующий сценарий сложнее: он ищет файлы в текущем каталоге, в именах которых есть пробелы, и заменяет пробелы символами подчеркивания

#!/bin/bash

# Сценарий file_renamer

# ищет файлы в текущем каталоге, в именах которых есть пробелы, и заменяет пробелы символами подчеркивания

num=0 # Сколько файлов мы переименовали

for filename in * # Перебираем все файлы в текущем каталоге

# Передаем имя файла фильтру grep

# Если имя файла содержит пробел, то код завершения

# последней операции равен 0

echo "$filename" | grep -q " "

if [ $? -eq 0 ]

then

# Если код завершения равен 0, переименовываем файл

fname=$filename

n=`echo $fname | sed -e "s/ /_/g"`

mv "$fname" "$n"

let "num += 1"

done

echo "Переименовано файлов: $num"

exit 0

109. Преобразование чисел dec в hex

Сейчас мы напишем простенький сценарий, преобразующий десятичное число в шестнадцатеричное с помощью программы dc. 
Самим преобразованием будет заниматься программа dc, а наш сценарий только подготовит данные для этой программы.


#!/bin/bash
# Сценарий dec_hex 
B=16 # Основание системы счисления
# Проверяем, является ли параметр $1 числом
if [ -z "$1" ]
then
 echo "Использование: dec_hex число"
 exit 1
fi
# Передаем число ($1), систему счисления программе dc
echo ""$1" "$B" o p" | dc

Сейчас мы напишем простенький сценарий, преобразующий десятичное число в шестнадцатеричное с помощью программы dc.

Самим преобразованием будет заниматься программа dc, а наш сценарий только подготовит данные для этой программы.

#!/bin/bash

# Сценарий dec_hex

B=16 # Основание системы счисления

# Проверяем, является ли параметр $1 числом

if [ -z "$1" ]

then

echo "Использование: dec_hex число"

exit 1

# Передаем число ($1), систему счисления программе dc

echo ""$1" "$B" o p" | dc

110. Проверка прав пользователя

Для сценариев, требующих полномочий root, сначала нужно проверить, какой пользователь запустил сценарий. 
UID пользователя root всегда равен 0. 
Проверка, является ли пользователь, запустивший сценарий, пользователем root.

#!/bin/bash
ROOT_UID=0
if [ "$UID" -eq "$ROOT_UID" ]
then
echo "Вы — root"
else
echo "Вы — обычный пользователь"
fi
exit 0

Для сценариев, требующих полномочий root, сначала нужно проверить, какой пользователь запустил сценарий.

UID пользователя root всегда равен 0.

Проверка, является ли пользователь, запустивший сценарий, пользователем root.

#!/bin/bash

ROOT_UID=0

if [ "$UID" -eq "$ROOT_UID" ]

then

echo "Вы — root"

else

echo "Вы — обычный пользователь"

exit 0

111. Генератор имени временного файла

Довольно часто в процессе обработки данных есть необходимость в создании временных файлов. 
Чтобы имя временного файла всегда было уникальным, мы можем применить программу mcookie, 
генерирующую случайную строку для xauth, но в своих целях. 
В листинге приведен сценарий, генерирующий имя временного файла вида "tmp_случайная_строка".

#!/bin/bash
prefix="tmp_"
suffix=`mcookie`
temp_filename=$prefix.$suffix
echo "Имя файла = \"$temp_filename\""
exit 0

Довольно часто в процессе обработки данных есть необходимость в создании временных файлов.

Чтобы имя временного файла всегда было уникальным, мы можем применить программу mcookie,

генерирующую случайную строку для xauth, но в своих целях.

В листинге приведен сценарий, генерирующий имя временного файла вида "tmp_случайная_строка".

#!/bin/bash

prefix="tmp_"

suffix=`mcookie`

temp_filename=$prefix.$suffix

echo "Имя файла = \"$temp_filename\""

exit 0

112. Чтение ввода пользователя

Для чтения ввода пользователя используется конструкция "$<", например:
echo -n "Введите строку: "
set line = "$<"

Для чтения ввода пользователя используется конструкция "$<", например:

echo -n "Введите строку: "

set line = "$<"

113. Оператор foreach

Оператор foreach удобно использовать для перебора массивов, его синтаксис:
foreach индекс_цикла (список_аргументов)
 команды
end

Также цикл foreach удобно использовать при работе с файлами, например:
foreach f ( *.txt )
 echo $f
end

Здесь мы в цикле выводим имена всех текстовых файлов в текущем каталоге. 
Конечно, для этой цели проще вызвать команду ls, но здесь мы продемонстрировали использование foreach.

Оператор foreach удобно использовать для перебора массивов, его синтаксис:

foreach индекс_цикла (список_аргументов)

команды

end

Также цикл foreach удобно использовать при работе с файлами, например:

foreach f ( *.txt )

echo $f

end

Здесь мы в цикле выводим имена всех текстовых файлов в текущем каталоге.

Конечно, для этой цели проще вызвать команду ls, но здесь мы продемонстрировали использование foreach.

114. Оператор switch

В ряде случаев использовать оператор switch намного удобнее, чем серию условных операторов. Синтаксис switch следующий:
switch (строка)
case образец1:
 команды1
 breaksw
case образец2:
команды2
breaksw
...
default:
команды по умолчанию
 breaksw
endsw

Вот пример использования данного оператора:
set string = test
switch (string)
 case test:
 echo "Строка: test"
 breaksw
 case text:
 echo "Строка: text"
 breaksw
default:
echo "Строка не опознана"
 breaksw
endsw

В ряде случаев использовать оператор switch намного удобнее, чем серию условных операторов. Синтаксис switch следующий:

switch (строка)

case образец1:

команды1

breaksw

case образец2:

команды2

breaksw

...

default:

команды по умолчанию

breaksw

endsw

Вот пример использования данного оператора:

set string = test

switch (string)

case test:

echo "Строка: test"

breaksw

case text:

echo "Строка: text"

breaksw

default:

echo "Строка не опознана"

breaksw

endsw

115. Автоматизация обработки задач средствами gawk

Сценарий awk пишется, как и сценарий для оболочек bash и tcsh: это обычный текстовый файл, в начале которого задается интерпретатор:
#!/usr/bin/awk -f

Сценарий на языке awk состоит из одной или нескольких строк вида:
образец { действие }

Образец — это строка (или регулярное выражение), которая должна быть в обрабатываемом сценарием текстовом файле. 
Действие будет применено к строке, соответствующей образцу. 
Если образец — это регулярное выражение, то он заключается в слэши:
/выражение/


Если образец не указан, то действие будет применено ко всем строкам обрабатываемого файла.
Особого внимания заслуживают образцы BEGIN и END.
Первый образец запускает команды до обработки файла, а второй — после обработки файла. 

Например:
BEGIN {
print "Мой сценарий\n"
counter=0
}
{
print "Основная программа\n"
}
END {
print "Сценарий завершен"
printf ("\nСчетчик:\t%d\n", counter)
}


Операторы:
<    Меньше
>    Больше
<=   Меньше или равно
>=   Больше или равно
==   Равно
!=   Не равно
!~   Отрицание. 
     Используется при задании образцов. 
     Означает, что поле или переменная не соответствует регулярному выражению
~    Поле или переменная соответствует регулярному выражению
||   Логическое ИЛИ (OR)
&&   Логическое И (AND)
*    Умножение
/    Деление
%    Получение остатка от деления
+    Сложение
-    Вычитание
=    Присваивает переменной значение или результат выражения
++   Увеличивает значение переменной
--   Уменьшает значение переменной


Переменные:
$0              Текущая запись (в одной переменной)
$n, n — число   Поле с номером n в текущей записи
FILENAME        Имя текущего файла, null для стандартного ввода
FS              Разделитель полей
NF              Количество полей в записи
NR              Номер записи
OFS             Разделитель полей при выводе (по умолчанию пробел)
ORS             Разделитель записей при выводе (по умолчанию символ новой строки)
RS              Разделитель записей при вводе (по умолчанию символ новой строки)

Строковые переменные инициализируются пустой строкой, а числовые переменные — нулем:
counter=0
name=""



Ассоциативные массивы:
В отличие от других языков программирования, awk поддерживает ассоциативные массивы (правда, такие массивы поддерживает еще PHP и некоторые другие языки,
но во многих языках таких массивов нет). 
В ассоциативном массиве в качестве индекса выступает не число, а строка.

Пример объявления такого массива:
массив[строка] = значение

Затем для перебора массива используется вот такая конструкция:
for (элемент in массив) действие
Например:
for (item in count) printf "%-20s%-20s\n"


Функции:
length(str)         Возвращает длину строки (количество символов в str). 
                    Если строка не указана, возвращает количество символов в текущей записи
int(num)            Возвращает целую часть числа num
index(str1,str2)    Возвращает индекс строки str2 в строке str1 или 0, если строки str2 нет в строке str1
split(str,arr,del)  Разбивает строку str на элементы массива arr, параметр del — это разделитель, который используется для разделения строки
sprintf(fmt,args)   Форматирует аргументы (параметр args) в соответствии со строкой формата fmt
substr(str,pos,len) Возвращает подстроку строки str длины len, которая начинается на позиции pos
tolower(str)        Возвращает копию строки str, где все символы будут в нижнем регистре
toupper(str)        Возвращает копию строки str, где все символы будут в верхнем регистре


Вывод с помощью printf
Команда printf используется для вывода аргументов в соответствии с заданным форматом:
printf "строка формата", аргумент1, ..., аргументN
Строка формата определяет, как будут отображены аргументы. 
В строке формата вы можете использовать \t для вставки символа табуляции и \n для новой строки на экране.
Для каждого аргумента в строке формата должен быть свой модификатор вывода.
Модификатор имеет формат:
%[–][x[.y]]conv
Символ % обязателен, и он означает, что перед нами — модификатор. 
Символ "-" означает, что вывод должен быть отформатирован по левому краю. 
x — минимальная ширина поля, а y — количество цифр после запятой (при выводе числа с дробной частью), а conv задает формат аргумента.
Параметры conv:
d Десятичное число
e Экспоненциальная запись числа
f Число с плавающей запятой
o Беззнаковое восьмеричное число
s Строка
x Беззнаковое шестнадцатеричное число



Управляющие структуры:
Условный оператор if..else
Условный оператор работает так же, как и в любом другом языке программирования:
if (условие)
  {команды1}
[else {команды2}]

Если условие истинно (значение выражения — true), то будут выполнены команды1, в противном случае будут выполнены команды2.
Вот пример условного оператора:
if (num == "one")
 print "Число: 1"
else
 print "Другое число:", num
}

Цикл while
Цикл while выполняется до тех пор, пока условие истинно.
Синтаксис цикла следующий:
while (условие)
 {команды}
Рассмотрим небольшой пример:
count = 1
while (count <= 10)
{
 print n
 n++
}

Цикл for
Синтаксис цикла for следующий:
for (инициализация; условие; инкремент)
 {команды}


Цикл for — это цикл со счетчиком. 
Он выполняется, пока истинно условие. 
Перед запуском цикла выполняются команды инициализации, как правило, сбрасывается счетчик (или инициализируется). 
Далее проверяется условие: 
если оно истинно, выполняются команды. 
После выполнения команд происходит инкремент счетчика.
Пример цикла for:
for (n=1; n <= 10; n++)
print n
Для ассоциативных массивов синтаксис цикла for немного другой:
for (элемент in массив)
{команды}
В теле цикла вы можете использовать команды break (прерывает цикл) и continue (прерывает текущую итерацию).



Теперь рассмотрим несколько примеров. 
Предположим, у нас есть файл friends с данными о наших друзьях в таком формате:
ник год_рождения e-mail icq
Количество полей, сами понимаете, может быть произвольным. 

friends 
-------
den 1983 den@localhost 111111111
evg 1982 evg@localhost 111111112
max 1987 max@localhost 111111114
fox 1980 fox@localhost 111111113
dm 1979 dm@locahost 111111119
vvv 1980 vvv@localhost 111111117
ppt 1982 ppt@localhost 111111115
-------

Самая простая программа на языке awk выглядит так:
{print}
Данная программа просто выведет весь этот файл. 
Для ее запуска введите команду:
gawk '{print}' friends


Попробуем усложнить программу и вывести данные обо всех, кто родился в 1980 году. 
Для этого нужно использовать регулярные выражения. 
Регулярные выражения заключаются в слэши:
gawk '/1980/' friends


Теперь попробуем вывести только определенные поля. 
Порядок вывода полей значения не имеет:
gawk '{print $2, $1}' friends


Можно усложнить программу и вывести только несколько полей, но которые соответствуют регулярному выражению, например:
gawk '/1980/ {print $2, $1}' friends

Выведем все записи, где в первом поле есть буква d:
gawk '$1 ~ /d/' friends

Давайте выведем записи, где поля соответствуют тому или иному регулярному выражению. 
Например, вот программа, выводящая записи, где второе поле равно 1982:
gawk '$2 == 1982' friends


Теперь напишем awk-сценарий — более сложную программу, которая не помещается в одну строку. 
Программа подсчитывает, сколько человек родилось в 1980 году. 
Данную программу можно было бы записать в одну строку, но мы используем образцы BEGIN и END для улучшения вывода программы.

#!/usr/bin/awk -f
BEGIN {
print "Список друзей"
year=0
}
{
if ($2 == "1980") year=year+1
}
END {
printf ("\tВсего записей:\t%d\n", NR)
printf ("\tВ 1980 году родилось друзей:\t%d\n", year)
}

Чтобы запустить сценарий, нужно сделать его исполнимым и передать ему файл друзей:
$ chmod +x friends.awk
$ ./friends.awk friends




Вычислим сумму столбца в текстовом файле. 
Команда достаточно проста, поэтому ее даже не буду оформлять в виде листинга. 
Здесь мы подсчитываем и выводим сумму 4-го столбца файла somefile.
cat somefile | awk '{s += $4} END {print s}'

Awk — очень гибкий язык, с его помощью можно решить практически все задачи обработки текста. 
Представим, что нам нужно найти все битые ссылки на нашем сайте. 
Можно, конечно, перелопатить все страницы и проанализировать каждую ссылку, но гораздо проще проанализировать журнал Apache, 
чтобы вывести все 404-е ошибки: 
мы найдем отсутствующие на нашем сервере ресурсы и сможем исправить ссылки (возможно, ресурсы не отсутствуют, а мы просто допустили ошибку в имени файла). 
Вывод всех 404-х ошибок достигается так:
awk '$9 == 404 {print $7}' /var/log/apache2/access_log | uniq -c | sort -rn | less
Да, мы не найдем битые ссылки, указывающие на другие ресурсы, но зато поймем, каких файлов не хватает на нашем сервере, что тоже неплохо, особенно, 
если учесть, что с этой задачей мы справились с помощью одной команды.


ps -uax | awk -F ' ' '{print $1,$2,$11}'
awk -F ';' '{ print $1,$3 }' zxc.csv  | sort | uniq 


sedfile
-------
Алексей,+2 (522) 7234-246-57
Александр,+3 (234944) 123-73-33
Ярослав,+4 (455) 62205-111-87
Максим,+5 (315) 51014-656-923
Дмитрий,+6 (2062) 6434-994-2983
Алексей,+7 (927435) 40302-1945-39844
-------
Решение:
cat zxc1.csv  | sed 's/ //g' | sed 's/-//g' | sed 's/(//' | sed 's/)//g' | sed 's/+//g' | sed 's/,/ /g'
cat zxc1.csv  | sed -e '{s/-//g}'  -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

sed - пример шаблонов
---------------------
8d - удалить 8-ю строку
/^$/d -	удалить все пустые строки
1,/^$/d	- удалить все строки до первой пустой строки, включительно
/Jones/p - вывести строки, содержащие "Jones" (с ключом -n)
s/Windows/Linux/ - в каждой строке, заменить первое встретившееся слово "Windows" на слово "Linux"
s/BSOD/stability/g - в каждой строке, заменить все встретившиеся слова "BSOD" на "stability"
s/ *$//	- удалить все пробелы в конце каждой строки
s/00*/0/g - заменить все последовательности ведущих нулей одним символом "0"
/GUI/d - удалить все строки, содержащие "GUI"
s/GUI//g - удалить все найденные "GUI", оставляя остальную часть строки без изменений
's/:.*//' - удалить от все последующие символы после двоеточия(:)
--------------------

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

Сценарий awk пишется, как и сценарий для оболочек bash и tcsh: это обычный текстовый файл, в начале которого задается интерпретатор:

#!/usr/bin/awk -f

Сценарий на языке awk состоит из одной или нескольких строк вида:

образец { действие }

Образец — это строка (или регулярное выражение), которая должна быть в обрабатываемом сценарием текстовом файле.

Действие будет применено к строке, соответствующей образцу.

Если образец — это регулярное выражение, то он заключается в слэши:

/выражение/

Если образец не указан, то действие будет применено ко всем строкам обрабатываемого файла.

Особого внимания заслуживают образцы BEGIN и END.

Первый образец запускает команды до обработки файла, а второй — после обработки файла.

Например:

BEGIN {

print "Мой сценарий\n"

counter=0

}

{

print "Основная программа\n"

}

END {

print "Сценарий завершен"

printf ("\nСчетчик:\t%d\n", counter)

}

Операторы:

< Меньше

> Больше

<= Меньше или равно

>= Больше или равно

== Равно

!= Не равно

!~ Отрицание.

Используется при задании образцов.

Означает, что поле или переменная не соответствует регулярному выражению

~ Поле или переменная соответствует регулярному выражению

|| Логическое ИЛИ (OR)

&& Логическое И (AND)

* Умножение

/ Деление

% Получение остатка от деления

+ Сложение

- Вычитание

= Присваивает переменной значение или результат выражения

++ Увеличивает значение переменной

-- Уменьшает значение переменной

Переменные:

$0 Текущая запись (в одной переменной)

$n, n — число Поле с номером n в текущей записи

FILENAME Имя текущего файла, null для стандартного ввода

FS Разделитель полей

NF Количество полей в записи

NR Номер записи

OFS Разделитель полей при выводе (по умолчанию пробел)

ORS Разделитель записей при выводе (по умолчанию символ новой строки)

RS Разделитель записей при вводе (по умолчанию символ новой строки)

Строковые переменные инициализируются пустой строкой, а числовые переменные — нулем:

counter=0

name=""

Ассоциативные массивы:

В отличие от других языков программирования, awk поддерживает ассоциативные массивы (правда, такие массивы поддерживает еще PHP и некоторые другие языки,

но во многих языках таких массивов нет).

В ассоциативном массиве в качестве индекса выступает не число, а строка.

Пример объявления такого массива:

массив[строка] = значение

Затем для перебора массива используется вот такая конструкция:

for (элемент in массив) действие

Например:

for (item in count) printf "%-20s%-20s\n"

Функции:

length(str) Возвращает длину строки (количество символов в str).

Если строка не указана, возвращает количество символов в текущей записи

int(num) Возвращает целую часть числа num

index(str1,str2) Возвращает индекс строки str2 в строке str1 или 0, если строки str2 нет в строке str1

split(str,arr,del) Разбивает строку str на элементы массива arr, параметр del — это разделитель, который используется для разделения строки

sprintf(fmt,args) Форматирует аргументы (параметр args) в соответствии со строкой формата fmt

substr(str,pos,len) Возвращает подстроку строки str длины len, которая начинается на позиции pos

tolower(str) Возвращает копию строки str, где все символы будут в нижнем регистре

toupper(str) Возвращает копию строки str, где все символы будут в верхнем регистре

Вывод с помощью printf

Команда printf используется для вывода аргументов в соответствии с заданным форматом:

printf "строка формата", аргумент1, ..., аргументN

Строка формата определяет, как будут отображены аргументы.

В строке формата вы можете использовать \t для вставки символа табуляции и \n для новой строки на экране.

Для каждого аргумента в строке формата должен быть свой модификатор вывода.

Модификатор имеет формат:

%[–][x[.y]]conv

Символ % обязателен, и он означает, что перед нами — модификатор.

Символ "-" означает, что вывод должен быть отформатирован по левому краю.

x — минимальная ширина поля, а y — количество цифр после запятой (при выводе числа с дробной частью), а conv задает формат аргумента.

Параметры conv:

d Десятичное число

e Экспоненциальная запись числа

f Число с плавающей запятой

o Беззнаковое восьмеричное число

s Строка

x Беззнаковое шестнадцатеричное число

Управляющие структуры:

Условный оператор if..else

Условный оператор работает так же, как и в любом другом языке программирования:

if (условие)

{команды1}

[else {команды2}]

Если условие истинно (значение выражения — true), то будут выполнены команды1, в противном случае будут выполнены команды2.

Вот пример условного оператора:

if (num == "one")

print "Число: 1"

else

print "Другое число:", num

}

Цикл while

Цикл while выполняется до тех пор, пока условие истинно.

Синтаксис цикла следующий:

while (условие)

{команды}

Рассмотрим небольшой пример:

count = 1

while (count <= 10)

{

print n

n++

}

Цикл for

Синтаксис цикла for следующий:

for (инициализация; условие; инкремент)

{команды}

Цикл for — это цикл со счетчиком.

Он выполняется, пока истинно условие.

Перед запуском цикла выполняются команды инициализации, как правило, сбрасывается счетчик (или инициализируется).

Далее проверяется условие:

если оно истинно, выполняются команды.

После выполнения команд происходит инкремент счетчика.

Пример цикла for:

for (n=1; n <= 10; n++)

print n

Для ассоциативных массивов синтаксис цикла for немного другой:

for (элемент in массив)

{команды}

В теле цикла вы можете использовать команды break (прерывает цикл) и continue (прерывает текущую итерацию).

Теперь рассмотрим несколько примеров.

Предположим, у нас есть файл friends с данными о наших друзьях в таком формате:

ник год_рождения e-mail icq

Количество полей, сами понимаете, может быть произвольным.

friends

-------

den 1983 den@localhost 111111111

evg 1982 evg@localhost 111111112

max 1987 max@localhost 111111114

fox 1980 fox@localhost 111111113

dm 1979 dm@locahost 111111119

vvv 1980 vvv@localhost 111111117

ppt 1982 ppt@localhost 111111115

-------

Самая простая программа на языке awk выглядит так:

{print}

Данная программа просто выведет весь этот файл.

Для ее запуска введите команду:

gawk '{print}' friends

Попробуем усложнить программу и вывести данные обо всех, кто родился в 1980 году.

Для этого нужно использовать регулярные выражения.

Регулярные выражения заключаются в слэши:

gawk '/1980/' friends

Теперь попробуем вывести только определенные поля.

Порядок вывода полей значения не имеет:

gawk '{print $2, $1}' friends

Можно усложнить программу и вывести только несколько полей, но которые соответствуют регулярному выражению, например:

gawk '/1980/ {print $2, $1}' friends

Выведем все записи, где в первом поле есть буква d:

gawk '$1 ~ /d/' friends

Давайте выведем записи, где поля соответствуют тому или иному регулярному выражению.

Например, вот программа, выводящая записи, где второе поле равно 1982:

gawk '$2 == 1982' friends

Теперь напишем awk-сценарий — более сложную программу, которая не помещается в одну строку.

Программа подсчитывает, сколько человек родилось в 1980 году.

Данную программу можно было бы записать в одну строку, но мы используем образцы BEGIN и END для улучшения вывода программы.

#!/usr/bin/awk -f

BEGIN {

print "Список друзей"

year=0

}

{

if ($2 == "1980") year=year+1

}

END {

printf ("\tВсего записей:\t%d\n", NR)

printf ("\tВ 1980 году родилось друзей:\t%d\n", year)

}

Чтобы запустить сценарий, нужно сделать его исполнимым и передать ему файл друзей:

$ chmod +x friends.awk

$ ./friends.awk friends

Вычислим сумму столбца в текстовом файле.

Команда достаточно проста, поэтому ее даже не буду оформлять в виде листинга.

Здесь мы подсчитываем и выводим сумму 4-го столбца файла somefile.

cat somefile | awk '{s += $4} END {print s}'

Awk — очень гибкий язык, с его помощью можно решить практически все задачи обработки текста.

Представим, что нам нужно найти все битые ссылки на нашем сайте.

Можно, конечно, перелопатить все страницы и проанализировать каждую ссылку, но гораздо проще проанализировать журнал Apache,

чтобы вывести все 404-е ошибки:

мы найдем отсутствующие на нашем сервере ресурсы и сможем исправить ссылки (возможно, ресурсы не отсутствуют, а мы просто допустили ошибку в имени файла).

Вывод всех 404-х ошибок достигается так:

awk '$9 == 404 {print $7}' /var/log/apache2/access_log | uniq -c | sort -rn | less

Да, мы не найдем битые ссылки, указывающие на другие ресурсы, но зато поймем, каких файлов не хватает на нашем сервере, что тоже неплохо, особенно,

если учесть, что с этой задачей мы справились с помощью одной команды.

ps -uax | awk -F ' ' '{print $1,$2,$11}'

awk -F ';' '{ print $1,$3 }' zxc.csv | sort | uniq

sedfile

-------

Алексей,+2 (522) 7234-246-57

Александр,+3 (234944) 123-73-33

Ярослав,+4 (455) 62205-111-87

Максим,+5 (315) 51014-656-923

Дмитрий,+6 (2062) 6434-994-2983

Алексей,+7 (927435) 40302-1945-39844

-------

Решение:

cat zxc1.csv | sed -e '{s/-//g}' -e '{s/(//g}' -e 's/)//g' -e '{s/+//g}' -e '{s/ //g}' -e '{s/,/ /}'

sed - пример шаблонов

---------------------

8d - удалить 8-ю строку

/^$/d - удалить все пустые строки

1,/^$/d - удалить все строки до первой пустой строки, включительно

/Jones/p - вывести строки, содержащие "Jones" (с ключом -n)

s/Windows/Linux/ - в каждой строке, заменить первое встретившееся слово "Windows" на слово "Linux"

s/BSOD/stability/g - в каждой строке, заменить все встретившиеся слова "BSOD" на "stability"

s/ *$// - удалить все пробелы в конце каждой строки

s/00*/0/g - заменить все последовательности ведущих нулей одним символом "0"

/GUI/d - удалить все строки, содержащие "GUI"

s/GUI//g - удалить все найденные "GUI", оставляя остальную часть строки без изменений

's/:.*//' - удалить от все последующие символы после двоеточия(:)

--------------------

116. Web-сервер. Установка Apache и PHP

apt-get install apache2 php

Эта команда установит Web-сервер Apache2 и интерпретатор PHP. 
После этого нужно установить следующие пакеты:
php-cli — интерпретатор PHP, работающий в режиме командной строки (command-line interpreter);
php-imap — поддержка протоколов POP/IMAP для PHP;
php-gd — поддержка графических функций PHP;
php5-mysql — поддержка функций для работы с базой данных MySQL.

Для этого введите команду:
sudo apt-get install php-cli php-imap php-gd php-mysql


Тестирование настроек Web-сервера
Протестируем Web-сервер. 
Откройте браузер и введите адрес:
http://localhost

Теперь протестируем поддержку PHP. 
Поместите файл test.php в каталог /var/www/.
Это можно сделать с помощью команды:
sudo nano /var/www/test.php
<?
phpinfo();
?>

Похоже, что поддержка PHP не установлена. Но на самом деле поддержка PHP уже установлена, 
просто нужно перезагрузить Apache — введите в терминале команду:
sudo service apache2 restart

Конфигурационные файлы сервера.
Файлы конфигурации сервера находятся в каталоге /etc/apache2. 
Основной файл конфигурации называется apache2.conf. 
По умолчанию его настройки устроят большинство пользователей.

Если вы планируете использовать Web-сервер не только локально (для экспериментов с PHP), 
но и как Web-сервер своей домашней сети, откройте файл apache2.conf и найдите директиву:

Нужно ее раскомментировать и указать имя сервера, которое будут вводить пользователи в строке браузера. 
Данное имя должно быть зарегистрировано в DNS-сервере вашей сети (или указано в файле /etc/hosts каждого компьютера сети).
Обычно здесь указывается имя компьютера, например:
ServerName user-desktop
После этого можно будет обращаться к серверу по адресу http://user-desktop/.

Для остановки и перезапуска Web-сервера используются соответственно следующие команды (перезапуск необходим после изменения конфигурационных файлов сервера):
sudo service apache2 stop
sudo service apache2 restart

apt-get install apache2 php

Эта команда установит Web-сервер Apache2 и интерпретатор PHP.

После этого нужно установить следующие пакеты:

php-cli — интерпретатор PHP, работающий в режиме командной строки (command-line interpreter);

php-imap — поддержка протоколов POP/IMAP для PHP;

php-gd — поддержка графических функций PHP;

php5-mysql — поддержка функций для работы с базой данных MySQL.

Для этого введите команду:

sudo apt-get install php-cli php-imap php-gd php-mysql

Тестирование настроек Web-сервера

Протестируем Web-сервер.

Откройте браузер и введите адрес:

http://localhost

Теперь протестируем поддержку PHP.

Поместите файл test.php в каталог /var/www/.

Это можно сделать с помощью команды:

sudo nano /var/www/test.php

phpinfo();

Похоже, что поддержка PHP не установлена. Но на самом деле поддержка PHP уже установлена,

просто нужно перезагрузить Apache — введите в терминале команду:

sudo service apache2 restart

Конфигурационные файлы сервера.

Файлы конфигурации сервера находятся в каталоге /etc/apache2.

Основной файл конфигурации называется apache2.conf.

По умолчанию его настройки устроят большинство пользователей.

Если вы планируете использовать Web-сервер не только локально (для экспериментов с PHP),

но и как Web-сервер своей домашней сети, откройте файл apache2.conf и найдите директиву:

Нужно ее раскомментировать и указать имя сервера, которое будут вводить пользователи в строке браузера.

Данное имя должно быть зарегистрировано в DNS-сервере вашей сети (или указано в файле /etc/hosts каждого компьютера сети).

Обычно здесь указывается имя компьютера, например:

ServerName user-desktop

После этого можно будет обращаться к серверу по адресу http://user-desktop/.

Для остановки и перезапуска Web-сервера используются соответственно следующие команды (перезапуск необходим после изменения конфигурационных файлов сервера):

sudo service apache2 stop

sudo service apache2 restart

117. Сервер баз данных MySQL

Для установки введите следующую команду:
sudo apt-get install mysql-server mysql-client mysql-admin

Команды управления пользователями MySQL-сервера
Для изменения пароля root (который вы ввели при установке сервера MySQL) используется следующая команда:
sudo mysqladmin -u root password ваш_пароль

Этот пароль вы будете использовать для администрирования сервера (пароль может и должен отличаться от того, который вы указываете для входа в систему).
Для обычной работы с сервером рекомендуется создать обычного пользователя.
Для этого введите команду:
mysql -u root -p mysql

Программа mysql является клиентом MySQL-сервера. Она должна подключиться к базе данных mysql (служебная база данных), используя имя пользователя root (-u root). 
Поскольку вы только что указали пароль для пользователя root (до этого пароль для root не был задан), вам нужно ввести параметр -p. 
После того как программа mysql подключится к серверу, вы увидите приглашение программы. 
В ответ на него нужно ввести следующий SQL-оператор:
insert into user(Host, User, Password, Select_priv, Insert_priv,Update_priv, Delete_priv) values ('%','username',password('123456'),'Y','Y','Y','Y');

Только что мы создали пользователя с именем username и паролем 123456. 
Этот пользователь имеет право использовать SQL-операторы select (выборка из таблицы), 
insert (добавление новой записи в таблицу), update (обновление записи),
delete (удаление записи). 

Если вам нужно, чтобы ваш пользователь имел право создавать и удалять таблицы, добавьте привилегии Create_priv и Drop_priv:
insert into user(Host, User, Password, Select_priv, Insert_priv, Update_priv, Delete_priv, Create_priv, Drop_prov) values ('%','username',password('123456'),'Y','Y','Y','Y','Y','Y');

ВНИМАНИЕ!
Этот SQL-оператор можно записать в одну строку, можно разбить на несколько строк — как вам будет удобно. Но в конце каждого SQL-оператора должна быть точка с запятой! 
Помните об этом.
Для выхода из программы mysql нужно ввести команду quit.

Кроме программы mysql в состав MySQL-клиента входит одна очень полезная программа — mysqlshow, которая может вывести список таблиц, которые находятся в той или иной базе данных. 
Кроме этого, она еще много чего может, но в данный момент нам нужен пока список таблиц — чтобы вы знали, какие таблицы есть в той или иной базе данных:
mysqlshow -p <база данных>


Команды запуска и останова сервера
Для управления сервером используется программа /etc/init.d/mysql. 
Раньше нужно было вызывать /etc/init.d/mysql непосредственно, сейчас можно вызвать управляющую программу через команду service, что намного удобнее. 
Для запуска сервера следует передать этой программе параметр start, для останова — stop, а для перезапуска — restart:
sudo service mysql start
sudo service mysql stop
sudo service mysql restart

Также для управления сервером можно использовать программу mysqladmin, узнать больше о ней можно с помощью команды:
man mysqladmin


Пройдемся по основным разделам программы MySQL Administrator:
Server Information — общая информация о сервере;
Service Control — управление запуском сервиса MySQL (здесь вы можете перезапустить сервер);
Startup Parameters — параметры, указываемые при запуске сервера;
User Administration — здесь можно добавить новых пользователей MySQL и установить права пользователей;
Server Connections — позволяет просмотреть текущие соединения с сервером;
Server Logs — журналы сервера;
Backup — создать резервную копию сервера;
Restore Backup — восстановление из резервной копии;
Replication Status — состояние репликации сервера;
Catalogs — позволяет просмотреть имеющиеся базы данных и таблицы внутри них.

Для установки введите следующую команду:

sudo apt-get install mysql-server mysql-client mysql-admin

Команды управления пользователями MySQL-сервера

Для изменения пароля root (который вы ввели при установке сервера MySQL) используется следующая команда:

sudo mysqladmin -u root password ваш_пароль

Этот пароль вы будете использовать для администрирования сервера (пароль может и должен отличаться от того, который вы указываете для входа в систему).

Для обычной работы с сервером рекомендуется создать обычного пользователя.

Для этого введите команду:

mysql -u root -p mysql

Программа mysql является клиентом MySQL-сервера. Она должна подключиться к базе данных mysql (служебная база данных), используя имя пользователя root (-u root).

Поскольку вы только что указали пароль для пользователя root (до этого пароль для root не был задан), вам нужно ввести параметр -p.

После того как программа mysql подключится к серверу, вы увидите приглашение программы.

В ответ на него нужно ввести следующий SQL-оператор:

insert into user(Host, User, Password, Select_priv, Insert_priv,Update_priv, Delete_priv) values ('%','username',password('123456'),'Y','Y','Y','Y');

Только что мы создали пользователя с именем username и паролем 123456.

Этот пользователь имеет право использовать SQL-операторы select (выборка из таблицы),

insert (добавление новой записи в таблицу), update (обновление записи),

delete (удаление записи).

Если вам нужно, чтобы ваш пользователь имел право создавать и удалять таблицы, добавьте привилегии Create_priv и Drop_priv:

insert into user(Host, User, Password, Select_priv, Insert_priv, Update_priv, Delete_priv, Create_priv, Drop_prov) values ('%','username',password('123456'),'Y','Y','Y','Y','Y','Y');

ВНИМАНИЕ!

Этот SQL-оператор можно записать в одну строку, можно разбить на несколько строк — как вам будет удобно. Но в конце каждого SQL-оператора должна быть точка с запятой!

Помните об этом.

Для выхода из программы mysql нужно ввести команду quit.

Кроме программы mysql в состав MySQL-клиента входит одна очень полезная программа — mysqlshow, которая может вывести список таблиц, которые находятся в той или иной базе данных.

Кроме этого, она еще много чего может, но в данный момент нам нужен пока список таблиц — чтобы вы знали, какие таблицы есть в той или иной базе данных:

mysqlshow -p <база данных>

Команды запуска и останова сервера

Для управления сервером используется программа /etc/init.d/mysql.

Раньше нужно было вызывать /etc/init.d/mysql непосредственно, сейчас можно вызвать управляющую программу через команду service, что намного удобнее.

Для запуска сервера следует передать этой программе параметр start, для останова — stop, а для перезапуска — restart:

sudo service mysql start

sudo service mysql stop

sudo service mysql restart

Также для управления сервером можно использовать программу mysqladmin, узнать больше о ней можно с помощью команды:

man mysqladmin

Пройдемся по основным разделам программы MySQL Administrator:

Server Information — общая информация о сервере;

Service Control — управление запуском сервиса MySQL (здесь вы можете перезапустить сервер);

Startup Parameters — параметры, указываемые при запуске сервера;

User Administration — здесь можно добавить новых пользователей MySQL и установить права пользователей;

Server Connections — позволяет просмотреть текущие соединения с сервером;

Server Logs — журналы сервера;

Backup — создать резервную копию сервера;

Restore Backup — восстановление из резервной копии;

Replication Status — состояние репликации сервера;

Catalogs — позволяет просмотреть имеющиеся базы данных и таблицы внутри них.

118 FTP-сервер

запуск:
sudo /etc/init.d/proftpd start

Основной файл конфигурации сервера ProFTPD называется /etc/proftpd/proftpd.conf.
-------------
<Anonymous /var/ftp/pub>
# Имя пользователя и группы
#(пользователь ftp создается при установке FTP-сервера)
User ftp
Group nogroup

# Определяем стандартный псевдоним anonymous
UserAlias anonymous ftp
# Отключает проверку командного интерпретатора пользователя — это лишнее
RequireValidShell off
# Максимальное количество анонимных клиентов
MaxClients 10
# Запрещаем записывать файлы в каталог /var/ftp/pub
<Directory *>
<Limit WRITE>
 DenyAll
</Limit>
</Directory>
</Anonymous>

Теперь любой пользователь сможет подключиться к вашему серверу, используя имя пользователя anonymous и любой e-mail в качестве пароля. 
Они получат доступ к файлам в каталоге /var/ftp/pub. 
Файлы можно будет только скачивать, все остальные действия (изменение, удаление) запрещены, запрещена и загрузка файлов на сервер. 
Если нужно разрешить загрузку файлов на сервер, то в конце секции Anonymous (перед </Anonymous>) добавьте следующую секцию:
<Directory incoming>
Umask 022
<Limit WRITE>
  DenyAll
</Limit>
<Limit STOR>
 AllowAll
</Limit>
</Directory>
Пользователи смогут просматривать каталог /var/ftp/pub/incoming и загружать в него новые файлы.
-------------

запуск:

sudo /etc/init.d/proftpd start

Основной файл конфигурации сервера ProFTPD называется /etc/proftpd/proftpd.conf.

-------------

# Имя пользователя и группы

#(пользователь ftp создается при установке FTP-сервера)

User ftp

Group nogroup

# Определяем стандартный псевдоним anonymous

UserAlias anonymous ftp

# Отключает проверку командного интерпретатора пользователя — это лишнее

RequireValidShell off

# Максимальное количество анонимных клиентов

MaxClients 10

# Запрещаем записывать файлы в каталог /var/ftp/pub

DenyAll

</Limit>

</Directory>

</Anonymous>

Теперь любой пользователь сможет подключиться к вашему серверу, используя имя пользователя anonymous и любой e-mail в качестве пароля.

Они получат доступ к файлам в каталоге /var/ftp/pub.

Файлы можно будет только скачивать, все остальные действия (изменение, удаление) запрещены, запрещена и загрузка файлов на сервер.

Если нужно разрешить загрузку файлов на сервер, то в конце секции Anonymous (перед </Anonymous>) добавьте следующую секцию:

Umask 022

DenyAll

</Limit>

AllowAll

</Limit>

</Directory>

Пользователи смогут просматривать каталог /var/ftp/pub/incoming и загружать в него новые файлы.

-------------

119. Программы для управления пакетами

Для управления пакетами в Debian/Ubuntu используются следующие программы:
dpkg — базовая программа, не умеет разрешать зависимости пакетов и не поддерживает источники пакетов
apt-get — поддерживает источники пакетов и умеет разрешать зависимости. Чаще всего вы будете использовать эту программу
aptitude — программа для установки пакетов с псевдографическим интерфейсом, умеет разрешать зависимости и поддерживает источники пакетов
alien — используется для установки RPM-пакетов в Debian, была рассмотрена в предыдущей главе

Установка пакетов:
apt-get install package

Программа apt-get просматривает файл /etc/apt/sources.list — в этом файле перечислены источники (репозитории) DEB-пакетов. 
В качестве источника может выступать как компакт-диск, содержащий пакеты, так и сервер в Интернете. 
Программа находит указанный пакет, читает служебную информацию о нем, 
затем разрешает зависимости (т. е. устанавливает все другие пакеты, нужные для работы программ устанавливаемого пакета), а после устанавливает нужный нам пакет. 
Все загруженные программой apt-get и менеджером Synaptic пакеты записываются в каталог /var/cache/apt/archives.


Основные команды программы apt-get
apt-get [опции] команды [пакет]
update       Синхронизирует файлы описаний пакетов (внутреннюю базу данных о пакетах) с источниками пакетов, которые указаны в файле /etc/apt/sources.list
upgrade      Обновляет указанный пакет. Может использоваться для обновления всех установленных пакетов. 
             При этом установка новых пакетов не производится, а загружаются и устанавливаются только новые версии уже установленных пакетов
dist-upgrade Обновление дистрибутива. Для обновления всех пакетов рекомендуется использовать именно эту команду
install      Установка одного или нескольких пакетов
remove       Удаление одного или нескольких пакетов
check        Используется для поиска нарушенных зависимостей
clean        Используется для очистки локального хранилища полученных пакетов (перед установкой пакет загружается в локальное хранилище, а затем устанавливается оттуда; 
             данная команда может очистить хранилище для экономии дискового пространства)
autoclean    Похожа на clean, но удаляет только те файлы пакетов, которые больше не могут быть получены и использованы


Обновление источников
После каждого изменения файла sources.list нужно вводить команду:
sudo apt-get update
Если не ввести эту команду, то изменения из файла sources.list не будут прочитаны и программа apt-get будет использовать старый список источников пакетов.


Удаление и переустановка пакетов
Для удаления пакета предназначена команда remove:
sudo apt-get remove <пакет>
Некоторые пользователи в случае сбоя программы пытаются ее переустановить.
Для этого они ее удаляют, а затем устанавливают заново. Это в корне неправильно.

Чтобы переустановить пакет, гораздо правильнее использовать следующую команду:
sudo apt-get —-reinstall install <пакет>

Если вы все-таки хотите сначала удалить пакет, а потом установить его снова, то вместо удаления нужно использовать зачистку, 
когда удаляются не только исполняемые файлы программ, но и конфигурационные файлы, что очень важно. 
Есть вероятность, что причина некорректной работы программы кроется в неправильных настройках. 
А если вы удалите программу, но оставите настройки, после повторной установки программы проблема останется. 
Для удаления и программы, и конфигурационных файлов нужно использовать опцию --purge:
sudo apt-get --purge remove <пакет>


Обновление пакета и системы
Для обновления одного пакета используется команда upgrade, а для обновления всей системы — команда dist-upgrade. 
Некоторые пользователи пытаются обновить всю систему командой upgrade, но этого не нужно делать, 
иначе велика вероятность "падения" системы после такого обновления.

Команды обновления пакета и системы выглядят так:
sudo apt-get upgrade <пакет>
sudo apt-get dist-upgrade


Очистка кэша пакетов
Как мы уже знаем, установка программы состоит из трех основных этапов: 
загрузка пакетов, установка пакетов и настройка пакетов. 
Скачанные с Интернета пакеты помещаются в каталог /var/cache/apt/archives. 
Регулярно очищайте этот каталог — этим вы сэкономите немало места на диске. 
Если же у вас соединение с учетом трафика, тогда записывайте скачанные пакеты на CD/DVD. 
Если нужно будет переустановить Ubuntu, то вы можете установить все необходимые вам программы, не загружая их повторно из Интернета. 

Удалить все DEB-пакеты из каталога /var/cache/apt/archives можно командой:
sudo rm /var/cache/apt/archives/*.deb

Вообще вместо ручного удаления можно использовать команду clean:
sudo apt-get clean

Но эта команда оставляет некоторые файлы, поэтому лучше удалить пакеты вручную. 
На некоторых системах команда sudo apt-get clean включена в автозапуск, поэтому при каждой перезагрузке скачанные пакеты будут удалены.
Если вам интересно, вот назначение каталогов локального кэша:
/var/cache/apt/archives/ — область хранения полученных файлов
/var/cache/apt/archives/partial/ — область хранения получаемых файлов (пакетов)
/var/state/apt/lists/ — область хранения информации о состоянии каждого ресурса пакетов, который задан в списке источников
/var/state/apt/lists/partial/ — временная область хранения информации в процессе скачивания

Опции программы apt-get
Иногда нужно не просто выполнить команду, а указать программе, как ее нужно выполнить. 
Например, можно попросить программу удалить пакет, а можно уточнить, что вы хотите также удалить и конфигурационные файлы, как было показано ранее. 
Для такого рода уточнений используются опции команды apt-get:
-d, --download-only    Только скачать пакеты. 
                       Пакеты будут скачаны с источника пакетов и помещены в локальный кэш пакетов, но не будут установлены
-f, --fix-broken       Программа попытается исправить систему с нарушенными зависимостями.
                       Если опция используется с командами установки и удаления пакетов, то, возможно, некоторые пакеты будут пропущены, чтобы разрешить все зависимости. 
                       Вообще apt-get не допускает нарушений зависимостей, но если вы удалили некоторые пакеты с помощью dpkg, которая не поддерживает зависимостей, 
                       то возможны нарушения зависимостей, которые можно попытаться исправить этой опцией
-m, --ignore-missing,
--fix-missing          Игнорировать отсутствующие пакеты. 
                       Позволяет пропустить некоторые пакеты при установке (например, те, которые не могут быть получены или загрузились с ошибками), 
                       но такое не всегда возможно, т. к. очень часто устанавливаемые группой пакеты зависят друг от друга
-q, --quiet            Тихий режим. 
                       Выводится минимум сообщений. 
                       Полезно для использования в сценариях bash/tcsh
-s, --simulate         Симулирует процесс установки, пакеты реально не устанавливаются. Состояние системы не изменяются, проверяется возможность установки пакетов
-y, --yes              Автоматически отвечать "да" на все вопросы программы, полезно при написании сценариев
-b, --compile, --build Откомпилировать пакеты исходного кода после их получения --no-upgrade Не производить обновление пакетов. 
                       Обычно используется вместе с install, когда при установке пакета не будет произведено обновление уже установленных пакетов
--force-yes            Принудительное выполнение заданной операции. 
                       Очень опасная операция, которая может потенциально уничтожить систему. 
                       Лучше не использовать эту опцию!
--purge                Полное удаление пакета. 
--reinstall            Переустанавливает пакет.

Корова в apt-get
Оказывается, пасхальные яйца есть не только в Windows, но и в Linux. 
Введите команду sudo apt-get moo, и вы увидите изображение... коровы

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

Для управления пакетами в Debian/Ubuntu используются следующие программы:

dpkg — базовая программа, не умеет разрешать зависимости пакетов и не поддерживает источники пакетов

apt-get — поддерживает источники пакетов и умеет разрешать зависимости. Чаще всего вы будете использовать эту программу

aptitude — программа для установки пакетов с псевдографическим интерфейсом, умеет разрешать зависимости и поддерживает источники пакетов

alien — используется для установки RPM-пакетов в Debian, была рассмотрена в предыдущей главе

Установка пакетов:

apt-get install package

Программа apt-get просматривает файл /etc/apt/sources.list — в этом файле перечислены источники (репозитории) DEB-пакетов.

В качестве источника может выступать как компакт-диск, содержащий пакеты, так и сервер в Интернете.

Программа находит указанный пакет, читает служебную информацию о нем,

затем разрешает зависимости (т. е. устанавливает все другие пакеты, нужные для работы программ устанавливаемого пакета), а после устанавливает нужный нам пакет.

Все загруженные программой apt-get и менеджером Synaptic пакеты записываются в каталог /var/cache/apt/archives.

Основные команды программы apt-get

apt-get [опции] команды [пакет]

update Синхронизирует файлы описаний пакетов (внутреннюю базу данных о пакетах) с источниками пакетов, которые указаны в файле /etc/apt/sources.list

upgrade Обновляет указанный пакет. Может использоваться для обновления всех установленных пакетов.

При этом установка новых пакетов не производится, а загружаются и устанавливаются только новые версии уже установленных пакетов

dist-upgrade Обновление дистрибутива. Для обновления всех пакетов рекомендуется использовать именно эту команду

install Установка одного или нескольких пакетов

remove Удаление одного или нескольких пакетов

check Используется для поиска нарушенных зависимостей

clean Используется для очистки локального хранилища полученных пакетов (перед установкой пакет загружается в локальное хранилище, а затем устанавливается оттуда;

данная команда может очистить хранилище для экономии дискового пространства)

autoclean Похожа на clean, но удаляет только те файлы пакетов, которые больше не могут быть получены и использованы

Обновление источников

После каждого изменения файла sources.list нужно вводить команду:

sudo apt-get update

Если не ввести эту команду, то изменения из файла sources.list не будут прочитаны и программа apt-get будет использовать старый список источников пакетов.

Удаление и переустановка пакетов

Для удаления пакета предназначена команда remove:

sudo apt-get remove <пакет>

Некоторые пользователи в случае сбоя программы пытаются ее переустановить.

Для этого они ее удаляют, а затем устанавливают заново. Это в корне неправильно.

Чтобы переустановить пакет, гораздо правильнее использовать следующую команду:

sudo apt-get —-reinstall install <пакет>

Если вы все-таки хотите сначала удалить пакет, а потом установить его снова, то вместо удаления нужно использовать зачистку,

когда удаляются не только исполняемые файлы программ, но и конфигурационные файлы, что очень важно.

Есть вероятность, что причина некорректной работы программы кроется в неправильных настройках.

А если вы удалите программу, но оставите настройки, после повторной установки программы проблема останется.

Для удаления и программы, и конфигурационных файлов нужно использовать опцию --purge:

sudo apt-get --purge remove <пакет>

Обновление пакета и системы

Для обновления одного пакета используется команда upgrade, а для обновления всей системы — команда dist-upgrade.

Некоторые пользователи пытаются обновить всю систему командой upgrade, но этого не нужно делать,

иначе велика вероятность "падения" системы после такого обновления.

Команды обновления пакета и системы выглядят так:

sudo apt-get upgrade <пакет>

sudo apt-get dist-upgrade

Очистка кэша пакетов

Как мы уже знаем, установка программы состоит из трех основных этапов:

загрузка пакетов, установка пакетов и настройка пакетов.

Скачанные с Интернета пакеты помещаются в каталог /var/cache/apt/archives.

Регулярно очищайте этот каталог — этим вы сэкономите немало места на диске.

Если же у вас соединение с учетом трафика, тогда записывайте скачанные пакеты на CD/DVD.

Если нужно будет переустановить Ubuntu, то вы можете установить все необходимые вам программы, не загружая их повторно из Интернета.

Удалить все DEB-пакеты из каталога /var/cache/apt/archives можно командой:

sudo rm /var/cache/apt/archives/*.deb

Вообще вместо ручного удаления можно использовать команду clean:

sudo apt-get clean

Но эта команда оставляет некоторые файлы, поэтому лучше удалить пакеты вручную.

На некоторых системах команда sudo apt-get clean включена в автозапуск, поэтому при каждой перезагрузке скачанные пакеты будут удалены.

Если вам интересно, вот назначение каталогов локального кэша:

/var/cache/apt/archives/ — область хранения полученных файлов

/var/cache/apt/archives/partial/ — область хранения получаемых файлов (пакетов)

/var/state/apt/lists/ — область хранения информации о состоянии каждого ресурса пакетов, который задан в списке источников

/var/state/apt/lists/partial/ — временная область хранения информации в процессе скачивания

Опции программы apt-get

Иногда нужно не просто выполнить команду, а указать программе, как ее нужно выполнить.

Например, можно попросить программу удалить пакет, а можно уточнить, что вы хотите также удалить и конфигурационные файлы, как было показано ранее.

Для такого рода уточнений используются опции команды apt-get:

-d, --download-only Только скачать пакеты.

Пакеты будут скачаны с источника пакетов и помещены в локальный кэш пакетов, но не будут установлены

-f, --fix-broken Программа попытается исправить систему с нарушенными зависимостями.

Если опция используется с командами установки и удаления пакетов, то, возможно, некоторые пакеты будут пропущены, чтобы разрешить все зависимости.

Вообще apt-get не допускает нарушений зависимостей, но если вы удалили некоторые пакеты с помощью dpkg, которая не поддерживает зависимостей,

то возможны нарушения зависимостей, которые можно попытаться исправить этой опцией

-m, --ignore-missing,

--fix-missing Игнорировать отсутствующие пакеты.

Позволяет пропустить некоторые пакеты при установке (например, те, которые не могут быть получены или загрузились с ошибками),

но такое не всегда возможно, т. к. очень часто устанавливаемые группой пакеты зависят друг от друга

-q, --quiet Тихий режим.

Выводится минимум сообщений.

Полезно для использования в сценариях bash/tcsh

-s, --simulate Симулирует процесс установки, пакеты реально не устанавливаются. Состояние системы не изменяются, проверяется возможность установки пакетов

-y, --yes Автоматически отвечать "да" на все вопросы программы, полезно при написании сценариев

-b, --compile, --build Откомпилировать пакеты исходного кода после их получения --no-upgrade Не производить обновление пакетов.

Обычно используется вместе с install, когда при установке пакета не будет произведено обновление уже установленных пакетов

--force-yes Принудительное выполнение заданной операции.

Очень опасная операция, которая может потенциально уничтожить систему.

Лучше не использовать эту опцию!

--purge Полное удаление пакета.

--reinstall Переустанавливает пакет.

Корова в apt-get

Оказывается, пасхальные яйца есть не только в Windows, но и в Linux.

Введите команду sudo apt-get moo, и вы увидите изображение... коровы

Конспект: Linux

Конспект: записки из книги «admin gnu linux»

Автор записи Автор: Evgeny Yakovlev
Дата записи 2011/06/05

00. Структура командной строки

В общем виде командная строка состоит из следующих трех частей:
 имя команды — имя исполняемого файла или встроенной команды оболочки;
 опции — дополнительные инструкции, сообщающие команде детали действий, которые она должна выполнить;
 аргументы — объекты, с которыми работает команда.

В общем виде командная строка состоит из следующих трех частей:

имя команды — имя исполняемого файла или встроенной команды оболочки;

опции — дополнительные инструкции, сообщающие команде детали действий, которые она должна выполнить;

аргументы — объекты, с которыми работает команда.

01. Популярные оболочки GNU/Linux

 bash — Bourne Again Shell (используется по умолчанию);
 pdksh — свободная реализация оболочки Korn Shell (ksh);
 tcsh — Enhanced C shell, улучшенный вариант C Shell (csh);
 zsh — Z Shell, дальнейшее развитие ksh.

bash — Bourne Again Shell (используется по умолчанию);

pdksh — свободная реализация оболочки Korn Shell (ksh);

tcsh — Enhanced C shell, улучшенный вариант C Shell (csh);

zsh — Z Shell, дальнейшее развитие ksh.

02. Файл /etc/shells — описаны все доступные оболочки:

cat /etc/shells
/bin/sh
/bin/bash
/sbin/nologin
/bin/ksh
/bin/tcsh
/bin/csh

cat /etc/shells

/bin/sh

/bin/bash

/sbin/nologin

/bin/ksh

/bin/tcsh

/bin/csh

03. Встроенные и системные команды

Системные команды обычно находятся в одном из следующих каталогов:
/bin
/sbin
/usr/bin
/usr/sbin
/usr/local/bin
/usr/local/sbin

Системные команды обычно находятся в одном из следующих каталогов:

/bin

/sbin

/usr/bin

/usr/sbin

/usr/local/bin

/usr/local/sbin

04. Для многих встроенных команд имеются системные аналоги.

Например, для встроенной Bash-команды pwd, выводящей имя текущего каталога, имеется системный аналог /bin/pwd.
Если команда вызвана без указания пути к ней, то выполняется ее встроенный в оболочку вариант (при его наличии).
Если при вызове команды указан путь, то всегда выполняется системная команда.

Например, для встроенной Bash-команды pwd, выводящей имя текущего каталога, имеется системный аналог /bin/pwd.

Если команда вызвана без указания пути к ней, то выполняется ее встроенный в оболочку вариант (при его наличии).

Если при вызове команды указан путь, то всегда выполняется системная команда.

05. Клавиатурные сочетания Bash

<Ctrl>+<B> Курсор влево
<Ctrl>+<F> Курсор вправо
<Ctrl>+<A> Курсор в начало строки
<Ctrl>+<E> Курсор в конец строки
<Ctrl>+<H> Удаление символа перед курсором
<Ctrl>+<D> Удаление символа в позиции курсора
<Ctrl>+<J> Ввод (аналогично нажатию клавиши <Enter>)
<Ctrl>+<L> Очистка экрана
<Alt>+<T>  Перемена мест аргументов
<Ctrl>+<C> Остановка выполнения команды или сброс командной строки
<Ctrl>+<Z> Приостановление выполнения задания

<Ctrl>+<B> Курсор влево

<Ctrl>+<F> Курсор вправо

<Ctrl>+<A> Курсор в начало строки

<Ctrl>+<E> Курсор в конец строки

<Ctrl>+<H> Удаление символа перед курсором

<Ctrl>+<D> Удаление символа в позиции курсора

<Ctrl>+<J> Ввод (аналогично нажатию клавиши <Enter>)

<Ctrl>+<L> Очистка экрана

<Alt>+<T> Перемена мест аргументов

<Ctrl>+<C> Остановка выполнения команды или сброс командной строки

<Ctrl>+<Z> Приостановление выполнения задания

06. Ввод нескольких команд в одной командной строке

Можно вводить несколько команд в одной строке, разделяя их символом точки с запятой (;)
Первая меняет текущий каталог на /tmp, а вторая — выводит имя текущего каталога.
!!! Внимание вторая команда будет выполнена в любом случае.
 cd /tmp; pwd

Если команды отделены друг от друга с помощью двух амперсандов (&&), то
вторая команда будет выполнена только в случае успешного выполнения первой.
 cd /tmp && pwd


При необходимости выполнять вторую команду только в случае неудачи первой следует использовать две вертикальные черты ||.
Эти синтаксические конструкции оболочки позволяют организовать условное выполнение команд.
 cd xxx  || echo -e "\n\t\t PRIVET"

Можно вводить несколько команд в одной строке, разделяя их символом точки с запятой (;)

Первая меняет текущий каталог на /tmp, а вторая — выводит имя текущего каталога.

!!! Внимание вторая команда будет выполнена в любом случае.

cd /tmp; pwd

Если команды отделены друг от друга с помощью двух амперсандов (&&), то

вторая команда будет выполнена только в случае успешного выполнения первой.

cd /tmp && pwd

При необходимости выполнять вторую команду только в случае неудачи первой следует использовать две вертикальные черты ||.

Эти синтаксические конструкции оболочки позволяют организовать условное выполнение команд.

cd xxx || echo -e "\n\t\t PRIVET"

07. Переменные оболочки и окружения переменной VAR1 присваивается значение Privet!

 VAR1=Privet!
 echo $VAR1

 VAR2='Bolshoy Privet!'
 echo $VAR2

При необходимости добавления строки к значению переменной имя переменной следует взять в фигурные скобки для отделения имени переменной от последующей строки.
Экранирование имени переменной
  VAR3=${VAR1}LOLOLOL
  echo $VAR3

# ВНИМАНИЕ ИСПОЛЬЗОВАНИЕ ДВОЙНЫХ КОВЫЕМК НЕ РЕКОМЕНДУЕТСЯ
  VAR4="${VAR1} Evgen !!!"
  echo $VAR4

Для получения списка всех переменных, определенных в текущей оболочке, следует использовать команду set без аргументов.
set

Однако можно сделать переменную доступной для дочерних процессов этой оболочки, преобразовав ее в переменную окружения с помощью команды
VAR1=Privet
export VAR1

VAR1=Privet!

echo $VAR1

VAR2='Bolshoy Privet!'

echo $VAR2

При необходимости добавления строки к значению переменной имя переменной следует взять в фигурные скобки для отделения имени переменной от последующей строки.

Экранирование имени переменной

VAR3=${VAR1}LOLOLOL

echo $VAR3

# ВНИМАНИЕ ИСПОЛЬЗОВАНИЕ ДВОЙНЫХ КОВЫЕМК НЕ РЕКОМЕНДУЕТСЯ

VAR4="${VAR1} Evgen !!!"

echo $VAR4

Для получения списка всех переменных, определенных в текущей оболочке, следует использовать команду set без аргументов.

set

Однако можно сделать переменную доступной для дочерних процессов этой оболочки, преобразовав ее в переменную окружения с помощью команды

VAR1=Privet

export VAR1

08. Важнейшие переменные окружения

HOME      Путь к домашнему каталогу пользователя
LOGNAME   Имя пользователя
USER      Имя пользователя
MAIL      Путь к почтовому ящику пользователя
PATH      Путь поиска исполняемых файлов
PS1       Вид приглашения оболочки
PWD       Имя текущего каталога
OLDPWD    Имя предыдущего каталога
SHELL     Оболочка, указанная в учетной записи
TERM      Тип терминала
LANG      Тип локализации (локаль)
HOSTNAME  Имя хоста
SHLVL     Номер оболочки (при входе в сеанс — 1, для дочерней — 2 и т. д.)

HOME Путь к домашнему каталогу пользователя

LOGNAME Имя пользователя

USER Имя пользователя

MAIL Путь к почтовому ящику пользователя

PATH Путь поиска исполняемых файлов

PS1 Вид приглашения оболочки

PWD Имя текущего каталога

OLDPWD Имя предыдущего каталога

SHELL Оболочка, указанная в учетной записи

TERM Тип терминала

LANG Тип локализации (локаль)

HOSTNAME Имя хоста

SHLVL Номер оболочки (при входе в сеанс — 1, для дочерней — 2 и т. д.)

09. Переменная окружения PS1

PS1 определяет вид приглашения оболочки
\u устанавливает вывод имени пользователя
\W устанавливает вывод имени текущего каталога
\h отображает в строке приглашения Bash имя хоста

простой пример:
echo $PS1
[\u@\h \W]\$

Пример из debian:
echo $PS1
\[\e]0;\u@\h: \w\a\]${debian_chroot:+($debian_chroot)}\[\033[01;32m\]\u@\h\[\033[00m\]:\[\033[01;34m\]\w\[\033[00m\]\$


Механизм продолжения в Bash действует не только для имен файлов и команд.
Если строка начинается с одного из символов: $, ~ или @, то Bash попытается дополнить строку как:
 имя переменной оболочки ($);
 имя пользователя (~);
 имя хоста (@).

PS1 определяет вид приглашения оболочки

\u устанавливает вывод имени пользователя

\W устанавливает вывод имени текущего каталога

\h отображает в строке приглашения Bash имя хоста

простой пример:

echo $PS1

[\u@\h \W]\$

Пример из debian:

echo $PS1

\[\e]0;\u@\h: \w\a\]${debian_chroot:+($debian_chroot)}\[\033[01;32m\]\u@\h\[\033[00m\]:\[\033[01;34m\]\w\[\033[00m\]\$

Механизм продолжения в Bash действует не только для имен файлов и команд.

Если строка начинается с одного из символов: $, ~ или @, то Bash попытается дополнить строку как:

имя переменной оболочки ($);

имя пользователя (~);

имя хоста (@).

10. Переменные окружения, общие для всех пользователей, хранятся в файле

/etc/profile

1	/etc/profile

11. Настройки, специфичные для конкретных пользователей, хранятся в одном из файлов домашнего каталога пользователя

~/.bash_profile
~/.bash_login
~/.profile
~/.bashrc

~/.bash_profile

~/.bash_login

~/.profile

~/.bashrc

12. История команд

~/.bash_history
в переменной окружения HISTFILE можно указать другой файл
history

Показать какой файл для сохранения истории используется:
echo $HISTFILE

Ко-во сохроняемых команд в истории (строк)
echo $HISTFILESIZE

history - показать историю выполнненых команд команд
ВНИМАНИЕ ЕСЛИ ПЕРЕД КОМАНДО ПОСТАВИТЬ ПРОБЕЛ ТО В ИСТОРИЮ ОНА НЕ БУДЕТ СОХРОНЕННА
!! - выполнить последнию команду
!555 - выполнить команду под номером 555
!l - история будет просмотрена с конца до тех пор, пока не будет найдена команда с подходящими первыми символами, в данном случае с буквой "l"

<Ctrl>+<R> позволяет производить поиск команд в истории по любым символам в командной строке.
Нажмите комбинацию клавиш <Ctrl>+<R>, и вам будет предложено ввести символы из командной строки,
причем найденная команда будет отображаться до своего исполнения.

~/.bash_history

в переменной окружения HISTFILE можно указать другой файл

history

Показать какой файл для сохранения истории используется:

echo $HISTFILE

Ко-во сохроняемых команд в истории (строк)

echo $HISTFILESIZE

history - показать историю выполнненых команд команд

ВНИМАНИЕ ЕСЛИ ПЕРЕД КОМАНДО ПОСТАВИТЬ ПРОБЕЛ ТО В ИСТОРИЮ ОНА НЕ БУДЕТ СОХРОНЕННА

!! - выполнить последнию команду

!555 - выполнить команду под номером 555

!l - история будет просмотрена с конца до тех пор, пока не будет найдена команда с подходящими первыми символами, в данном случае с буквой "l"

<Ctrl>+<R> позволяет производить поиск команд в истории по любым символам в командной строке.

Нажмите комбинацию клавиш <Ctrl>+<R>, и вам будет предложено ввести символы из командной строки,

причем найденная команда будет отображаться до своего исполнения.

13. Команда alias

Многие команды, требуемые в повседневной работе, слишком длинны и неудобны. Для ускорения набора часто повторяющихся сложных команд им можно назначить псевдонимы с помощью встроенной команды alias.
Команда alias, выполненная без аргументов, выводит список всех уже определенных псевдонимов.
alias
Новый псевдоним также создается командой alias.
alias ls='ls --color=tty'
alias vi='vim'
alias ls='ls --color=tty'
alias vi='vim'
alias ll='ls -l'

Многие команды, требуемые в повседневной работе, слишком длинны и неудобны. Для ускорения набора часто повторяющихся сложных команд им можно назначить псевдонимы с помощью встроенной команды alias.

Команда alias, выполненная без аргументов, выводит список всех уже определенных псевдонимов.

alias

Новый псевдоним также создается командой alias.

alias ls='ls --color=tty'

alias vi='vim'

alias ls='ls --color=tty'

alias vi='vim'

alias ll='ls -l'

14. Вычисление арифметических выражений.

В командной строке можно вычислять выражения, заключенные либо в квадратные скобки, либо в двойные круглые скобки.
Перед скобками должен стоять символ $, а результаты выражений можно передавать как аргумент какой-либо команде или назначать переменной.
echo $((192*512))
Команда echo выводит в стандартный поток вывода строку, указанную в качестве аргумента.
V1=5
V2=$(($V1/2))
echo $V2

В командной строке можно вычислять выражения, заключенные либо в квадратные скобки, либо в двойные круглые скобки.

Перед скобками должен стоять символ $, а результаты выражений можно передавать как аргумент какой-либо команде или назначать переменной.

echo $((192*512))

Команда echo выводит в стандартный поток вывода строку, указанную в качестве аргумента.

V1=5

V2=$(($V1/2))

echo $V2

15. Шаблоны подстановки и перечисление

Символ "звездочка" (*) является шаблоном для любого количества любых символов в именах файлов и даже для их отсутствия.
Единственный символ, который не удовлетворяет этому шаблону, — лидирующая точка в именах скрытых файлов.
Таким образом, подставив звездочку в качестве аргумента команде echo, мы либо увидим в результате саму звездочку,
если в каталоге нет файлов, либо оболочка подставит команде echo имена всех файлов в каталоге в командную строку.
Имеются особенные имена файлов, начинающиеся с точки, например, .bashrc.
Такие файлы называются скрытыми, т. к. их имена не выводятся командой ls без специальных опций. Шаблоном для имен скрытых файлов является .* (точка и звездочка).
Вообще, любые шаблоны для скрытых файлов должны начинаться с символа "точка".

Символ ? заменяет один символ в имени файла, который должен находиться в той позиции, где находится знак вопроса.
В примере "echo .??????" получен список скрытых файлов (имена начинаются с точки), в именах которых после точки имеется шесть любых символов.

Для того чтобы указать допустимый диапазон символов в шаблоне, необходимо использовать квадратные скобки, а в них — требуемый диапазон.
Например, [0-9] — шаблон подходит для любых цифр, а [a-zA-Z], шаблон для букв английского.
echo .[bcd]*

Если необходимо указать набор символов, не входящих во множество, следует установить знак восклицания после открывающей скобки.
Например, [!abc] — множество любых символов, кроме a, b или c.

Очень удобен, хотя и не относится к шаблонам, механизм перечисления Bash.
Он позволяет задать множество вариантов, которое должна перебрать оболочка, составляя последовательно все варианты, заданные в фигурных скобках
 echo .bash{rc,_profile}

Символ "звездочка" (*) является шаблоном для любого количества любых символов в именах файлов и даже для их отсутствия.

Единственный символ, который не удовлетворяет этому шаблону, — лидирующая точка в именах скрытых файлов.

Таким образом, подставив звездочку в качестве аргумента команде echo, мы либо увидим в результате саму звездочку,

если в каталоге нет файлов, либо оболочка подставит команде echo имена всех файлов в каталоге в командную строку.

Имеются особенные имена файлов, начинающиеся с точки, например, .bashrc.

Такие файлы называются скрытыми, т. к. их имена не выводятся командой ls без специальных опций. Шаблоном для имен скрытых файлов является .* (точка и звездочка).

Вообще, любые шаблоны для скрытых файлов должны начинаться с символа "точка".

Символ ? заменяет один символ в имени файла, который должен находиться в той позиции, где находится знак вопроса.

В примере "echo .??????" получен список скрытых файлов (имена начинаются с точки), в именах которых после точки имеется шесть любых символов.

Для того чтобы указать допустимый диапазон символов в шаблоне, необходимо использовать квадратные скобки, а в них — требуемый диапазон.

Например, [0-9] — шаблон подходит для любых цифр, а [a-zA-Z], шаблон для букв английского.

echo .[bcd]*

Если необходимо указать набор символов, не входящих во множество, следует установить знак восклицания после открывающей скобки.

Например, [!abc] — множество любых символов, кроме a, b или c.

Очень удобен, хотя и не относится к шаблонам, механизм перечисления Bash.

Он позволяет задать множество вариантов, которое должна перебрать оболочка, составляя последовательно все варианты, заданные в фигурных скобках

echo .bash{rc,_profile}

16. Помощь и документация

pwd -h
pwd --help
wc --help


help pwd
help ls
help network

help help
info network

Страницы помощи man.
от англ. manual — руководство
man ls
man -k network

Все страницы man разделены на секции.
1 Описание команды пользователя
2 Описание системных вызовов ядра
3 Описание библиотек
4 Информация о файлах устройств и иных специальных файлах
5 Форматы конфигурационных файлов
6 Помощь по играм
7 Макросы, кодировки, информация для программистов
8 Команды системного администрирования
9 Процедуры и функции ядра

man 3 zlib - Эта команда выводит информацию из третьей секции man о библиотеке zlib.
man -k zlib - Посмотреть в каких секциях еще есть zlib
man -k clock


Если необходимо в разделе NAME отыскивать точное вхождение строки, то следует использовать команду man -f или же whatis.
man -f clock
whatis clock

Стандартное место хранения страниц man — каталог /usr/share/man.

Для разработки собственных страниц man можно использовать любой текстовый редактор, однако файл страницы помощи должен следовать формату groff.

Стандартные разделы страниц man
Раздел        Назначение
NAME          Указывает информацию, которая будет использована при поиске по ключевому слову
SYNOPSIS      Формат вызова программы, опции и аргументы
DESCRIPTION   Описание объекта (программы, файла, библиотеки и т. п.)
OPTIONS       Подробное описание опций
FILES         Файлы, связанные с данной командой
AUTHOR        Имя автора с указанием адреса электронной почты
SEE-ALSO      Указатели на другие страницы man и иную документацию
COPYRIGHT     Права собственности, политика распространения и т. п.


info
Каталоги документации пакетов, установленных в системе, находятся в /usr/share/doc/packages.
Например, /usr/share/doc/httpd-2.2.13 — каталог, содержащий некоторую документацию для сервера HTTP Apache версии 2.2.13
Наиболее важные файлы в каталогах /usr/share/doc/* :
 README — краткая информация о продукте, последние изменения, не вошедшие в документацию, предупреждения и, возможно, инструкции по установке;
 INSTALL — инструкции по установке.

pwd -h

pwd --help

wc --help

help pwd

help ls

help network

help help

info network

Страницы помощи man.

от англ. manual — руководство

man ls

man -k network

Все страницы man разделены на секции.

1 Описание команды пользователя

2 Описание системных вызовов ядра

3 Описание библиотек

4 Информация о файлах устройств и иных специальных файлах

5 Форматы конфигурационных файлов

6 Помощь по играм

7 Макросы, кодировки, информация для программистов

8 Команды системного администрирования

9 Процедуры и функции ядра

man 3 zlib - Эта команда выводит информацию из третьей секции man о библиотеке zlib.

man -k zlib - Посмотреть в каких секциях еще есть zlib

man -k clock

Если необходимо в разделе NAME отыскивать точное вхождение строки, то следует использовать команду man -f или же whatis.

man -f clock

whatis clock

Стандартное место хранения страниц man — каталог /usr/share/man.

Для разработки собственных страниц man можно использовать любой текстовый редактор, однако файл страницы помощи должен следовать формату groff.

Стандартные разделы страниц man

Раздел Назначение

NAME Указывает информацию, которая будет использована при поиске по ключевому слову

SYNOPSIS Формат вызова программы, опции и аргументы

DESCRIPTION Описание объекта (программы, файла, библиотеки и т. п.)

OPTIONS Подробное описание опций

FILES Файлы, связанные с данной командой

AUTHOR Имя автора с указанием адреса электронной почты

SEE-ALSO Указатели на другие страницы man и иную документацию

info

Каталоги документации пакетов, установленных в системе, находятся в /usr/share/doc/packages.

Например, /usr/share/doc/httpd-2.2.13 — каталог, содержащий некоторую документацию для сервера HTTP Apache версии 2.2.13

Наиболее важные файлы в каталогах /usr/share/doc/* :

README — краткая информация о продукте, последние изменения, не вошедшие в документацию, предупреждения и, возможно, инструкции по установке;

INSTALL — инструкции по установке.

17. Источники информации в Интернете

The Linux Documentation Project http://www.tldp.org
HOWTO — пошаговые инструкции как сделать
FAQ — ответы на часто задаваемые вопросы ((Frequently Asked Questions)
Tutorials - разнообразные обучающие документы и программы

 http://www.debian.org — официальный сайт Debian GNU/Linux;
 http://www.ubuntu.com — сайт популярного дистрибутива Ubuntu;
 http://www.opensuse.org — популярный дистрибутив Open SUSE;
 http://www.redhat.com — сайт компании Red Hat;
 http://www.gentoo.org — сайт Gentoo Linux, изобилующий руководствами;
 http://www.howtoforge.com — неплохой набор учебных материалов;
 http://www.sf.net — база данных программного обеспечения Source Forge;
 http://www.ibm.com — на сайте IBM имеется большое количество статей и документации по GNU/Linux;
 http://www.gnu.org — сайт проекта FSF GNU;
 http://www.linuxshop.ru — форум системных администраторов;
 http://linux.slashdot.org — новостной сайт с постоянными обновлениями.
 http://www.linuxgazette.org  имеется архив разнообразных статей по тематике GNU/Linux.

The Linux Documentation Project http://www.tldp.org

HOWTO — пошаговые инструкции как сделать

FAQ — ответы на часто задаваемые вопросы ((Frequently Asked Questions)

Tutorials - разнообразные обучающие документы и программы

http://www.debian.org — официальный сайт Debian GNU/Linux;

http://www.ubuntu.com — сайт популярного дистрибутива Ubuntu;

http://www.opensuse.org — популярный дистрибутив Open SUSE;

http://www.redhat.com — сайт компании Red Hat;

http://www.gentoo.org — сайт Gentoo Linux, изобилующий руководствами;

http://www.howtoforge.com — неплохой набор учебных материалов;

http://www.sf.net — база данных программного обеспечения Source Forge;

http://www.ibm.com — на сайте IBM имеется большое количество статей и документации по GNU/Linux;

http://www.gnu.org — сайт проекта FSF GNU;

http://www.linuxshop.ru — форум системных администраторов;

http://linux.slashdot.org — новостной сайт с постоянными обновлениями.

http://www.linuxgazette.org имеется архив разнообразных статей по тематике GNU/Linux.

18. Система файлов и каталогов

Логически файловая структура в GNU/Linux организована в виде единой древовидной иерархии.
Древовидная структура организована с помощью каталогов, содержащих файлы и подкаталоги.
Каждый каталог может иметь множество подкаталогов, но у каждого подкаталога имеется только один родительский каталог.
На каких физических носителях ни хранились бы файлы, в GNU/Linux они всегда находятся на одной из ветвей единой древовидной файловой структуры.

Вершиной файловой структуры является корневой каталог (root directory).
Имя корневого каталога: /. У корневого каталога нет родительского каталога, вернее, он сам является для себя родительским.

Файлы в GNU/Linux являются основополагающими объектами, поскольку вся работа с данными,
устройствами компьютера, процессами и прочим обеспечивается посредством файлов.

Обычные файлы (plain files) обеспечивают хранение данных в компьютере.
Они представляют собой именованный набор блоков данных на устройстве хранения.

Древовидная структура образуется за счет использования каталогов, которые могут содержать файлы и другие каталоги.
Каталоги являются особым типом файлов, предназначенным для поддержки иерархической структуры файловой системы.
По сути, каталог — это таблица, содержащая перечень имен файлов, находящихся в нем.

В корневом каталоге обычно не содержатся какие-либо пользовательские файлы (чаще всего в корневом каталоге находятся исключительно подкаталоги).
Файлы пользователей принято хранить в их домашних каталогах, системные файлы хранятся в специальных каталогах и т. д.
Последовательность имен каталогов, которые требуется пройти от корневого каталога для доступа к файлу, называется путем (path).

Для разделения имен вложенных каталогов применяется символ /.

В GNU/Linux пользователь имеет большую свободу в назначении имен файлам. Единственное ограничение: имя файла не может содержать символы / и \0 (null).
Разумно назначать файлам осмысленные имена и избегать излишнего использования метасимволов (например, звездочки или решетки) в именах файлов, т. к.
это может привести к проблемам в работе многих приложений.

Прописные и строчные буквы различаются (case sensitive), т. е. имена файлов TheFile и thefile относятся к двум разным файлам.

В различных каталогах могут находиться разные файлы с одинаковыми именами.
Поэтому для однозначной идентификации файла необходимо применять полное или абсолютное имя файла.
Оно состоит из пути (path) к нему в дереве каталогов и собственно имени файла.
Таким образом, имена файлов бывают двух типов:

абсолютные — те имена, которые начинаются с символа "косая черта" (/) — корневого каталога — и указывают последовательность подкаталогов, которые необходимо пройти для достижения файла;
относительные — их имена не начинаются с косой черты и, следовательно, показывают путь доступа к файлам относительно текущего каталога.


Имя файла может содержать точки (.). В GNU/Linux, в отличие, например, от MS-DOS, никакого особого значения точки в именах файлов не имеют.
Однако для удобства принято считать часть имени файла, находящуюся после точки, — суффиксом (или иначе — расширением) имени файла.
Суффиксы сообщают пользователю информацию о типе файла.
Так, например, файл myarch.tgz является tar-архивом, сжатым утилитой gzip.
Может быть несколько суффиксов: tarball.tar.gz.

Файлы, у которых точка является первым символом в имени, являются скрытыми и командой ls не выводятся.
Тем не менее, список этих файлов можно получить, пользуясь командой ls с опцией -a (all) или опцией –A.

Для вывода списка всех файлов используется команда ls –a, в том числе и скрытых, в текущем каталоге. Эта команда выводит имя файла .hidden.
Помимо него выведены еще два имени файлов — . (точка), т. е. имя текущего каталога, и .. — имя родительского каталога. Команда ls -A также выводит имена скрытых файлов наряду с обычными именами,
но имена текущего и родительского каталога — нет.



типы файлов (листинг команды ls –l)
 - — обычные файлы;
 d — каталоги;
 l — символические ссылки (содержат указатели на другие файлы);
 b — блочные устройства (специальные файлы, предназначенные для обращения к устройствам, информация на которые записывается и считывается оттуда блоками, например, жесткий диск);
 c — символьные устройства (специальные файлы, предназначенные для посимвольного ввода/вывода с таких устройств, как терминал или мышь);
 p — именованный канал (PIPE или FIFO, они являются одним из вариантов организации меж процессного взаимодействия);
 s — сокеты (sockets, предназначенные для организации сетевого меж процессного взаимодействия).

Логически файловая структура в GNU/Linux организована в виде единой древовидной иерархии.

Древовидная структура организована с помощью каталогов, содержащих файлы и подкаталоги.

Каждый каталог может иметь множество подкаталогов, но у каждого подкаталога имеется только один родительский каталог.

На каких физических носителях ни хранились бы файлы, в GNU/Linux они всегда находятся на одной из ветвей единой древовидной файловой структуры.

Вершиной файловой структуры является корневой каталог (root directory).

Имя корневого каталога: /. У корневого каталога нет родительского каталога, вернее, он сам является для себя родительским.

Файлы в GNU/Linux являются основополагающими объектами, поскольку вся работа с данными,

устройствами компьютера, процессами и прочим обеспечивается посредством файлов.

Обычные файлы (plain files) обеспечивают хранение данных в компьютере.

Они представляют собой именованный набор блоков данных на устройстве хранения.

Древовидная структура образуется за счет использования каталогов, которые могут содержать файлы и другие каталоги.

Каталоги являются особым типом файлов, предназначенным для поддержки иерархической структуры файловой системы.

По сути, каталог — это таблица, содержащая перечень имен файлов, находящихся в нем.

В корневом каталоге обычно не содержатся какие-либо пользовательские файлы (чаще всего в корневом каталоге находятся исключительно подкаталоги).

Файлы пользователей принято хранить в их домашних каталогах, системные файлы хранятся в специальных каталогах и т. д.

Последовательность имен каталогов, которые требуется пройти от корневого каталога для доступа к файлу, называется путем (path).

Для разделения имен вложенных каталогов применяется символ /.

В GNU/Linux пользователь имеет большую свободу в назначении имен файлам. Единственное ограничение: имя файла не может содержать символы / и \0 (null).

Разумно назначать файлам осмысленные имена и избегать излишнего использования метасимволов (например, звездочки или решетки) в именах файлов, т. к.

это может привести к проблемам в работе многих приложений.

Прописные и строчные буквы различаются (case sensitive), т. е. имена файлов TheFile и thefile относятся к двум разным файлам.

В различных каталогах могут находиться разные файлы с одинаковыми именами.

Поэтому для однозначной идентификации файла необходимо применять полное или абсолютное имя файла.

Оно состоит из пути (path) к нему в дереве каталогов и собственно имени файла.

Таким образом, имена файлов бывают двух типов:

абсолютные — те имена, которые начинаются с символа "косая черта" (/) — корневого каталога — и указывают последовательность подкаталогов, которые необходимо пройти для достижения файла;

относительные — их имена не начинаются с косой черты и, следовательно, показывают путь доступа к файлам относительно текущего каталога.

Имя файла может содержать точки (.). В GNU/Linux, в отличие, например, от MS-DOS, никакого особого значения точки в именах файлов не имеют.

Однако для удобства принято считать часть имени файла, находящуюся после точки, — суффиксом (или иначе — расширением) имени файла.

Суффиксы сообщают пользователю информацию о типе файла.

Так, например, файл myarch.tgz является tar-архивом, сжатым утилитой gzip.

Может быть несколько суффиксов: tarball.tar.gz.

Файлы, у которых точка является первым символом в имени, являются скрытыми и командой ls не выводятся.

Тем не менее, список этих файлов можно получить, пользуясь командой ls с опцией -a (all) или опцией –A.

Для вывода списка всех файлов используется команда ls –a, в том числе и скрытых, в текущем каталоге. Эта команда выводит имя файла .hidden.

Помимо него выведены еще два имени файлов — . (точка), т. е. имя текущего каталога, и .. — имя родительского каталога. Команда ls -A также выводит имена скрытых файлов наряду с обычными именами,

но имена текущего и родительского каталога — нет.

типы файлов (листинг команды ls –l)

- — обычные файлы;

d — каталоги;

l — символические ссылки (содержат указатели на другие файлы);

b — блочные устройства (специальные файлы, предназначенные для обращения к устройствам, информация на которые записывается и считывается оттуда блоками, например, жесткий диск);

c — символьные устройства (специальные файлы, предназначенные для посимвольного ввода/вывода с таких устройств, как терминал или мышь);

p — именованный канал (PIPE или FIFO, они являются одним из вариантов организации меж процессного взаимодействия);

s — сокеты (sockets, предназначенные для организации сетевого меж процессного взаимодействия).

19. Создание и удаление файлов и каталогов

Простейший способ создать пустой файл заключается в использовании перенаправления "пустого ввода" в файл с помощью команды > файл.
Особенностью данного способа является то, что если файл существовал до выполнения этой команды, его содержимое будет стерто.

> empty

Команда touch дает возможность создать один или несколько файлов.
Если в качестве аргумента указан файл, который уже существует, то у этого файла в результате выполнения команды touch будет изменена дата модификации.

touch 1.txt 2.txt 3.txt

Простейший способ создать пустой файл заключается в использовании перенаправления "пустого ввода" в файл с помощью команды > файл.

Особенностью данного способа является то, что если файл существовал до выполнения этой команды, его содержимое будет стерто.

> empty

Команда touch дает возможность создать один или несколько файлов.

Если в качестве аргумента указан файл, который уже существует, то у этого файла в результате выполнения команды touch будет изменена дата модификации.

touch 1.txt 2.txt 3.txt

20. Поиск файлов

find опции места_поиска критерии модификаторы
Наиболее часто используют следующие критерии:
 -name  — поиск по имени файла или файловому шаблону;
 -iname — то же с игнорированием регистра;
 -type  — поиск по типу файла;
 -size  — для поиска по размеру или диапазону возможных размеров;
 -empty — поиск пустых файлов;
 -mtime — по дате модификации;
 -perm  — поиск по правам доступа;
 -user  — по принадлежности файла;
 -group — по принадлежности файла.

Поиск по имени файла:
find . -name "d1*"

Поиск только каталогов по заданному имени:
find . -name "d1*" -type d -ls

Поиск по критериям, объединенным условием ИЛИ:
Первый критерий — поиск файлов, начинающихся со строки d1, а второй — поиск пустых файлов (условие поиска -empty).
find . -name "d1*" -o -empty

Для поиска файлов определенного типа необходимо задавать критерий
-type тип, где тип один из:b — файл блочного устройства;
 c — файл символьного устройства;
 d — каталог;
 f — обычный файл;
 p — именованный канал;
 s — сокет;
 l — символическая ссылка.


Имеется возможность исполнять команды с найденными find файлами.
Для этого необходимо использовать модификатор –exec .
find . -name "*core*" -exec rm –f {} \;

find опции места_поиска критерии модификаторы

Наиболее часто используют следующие критерии:

-name — поиск по имени файла или файловому шаблону;

-iname — то же с игнорированием регистра;

-type — поиск по типу файла;

-size — для поиска по размеру или диапазону возможных размеров;

-empty — поиск пустых файлов;

-mtime — по дате модификации;

-perm — поиск по правам доступа;

-user — по принадлежности файла;

-group — по принадлежности файла.

Поиск по имени файла:

find . -name "d1*"

Поиск только каталогов по заданному имени:

find . -name "d1*" -type d -ls

Поиск по критериям, объединенным условием ИЛИ:

Первый критерий — поиск файлов, начинающихся со строки d1, а второй — поиск пустых файлов (условие поиска -empty).

find . -name "d1*" -o -empty

Для поиска файлов определенного типа необходимо задавать критерий

-type тип, где тип один из:b — файл блочного устройства;

c — файл символьного устройства;

d — каталог;

f — обычный файл;

p — именованный канал;

s — сокет;

l — символическая ссылка.

Имеется возможность исполнять команды с найденными find файлами.

Для этого необходимо использовать модификатор –exec .

find . -name "*core*" -exec rm –f {} \;

21. Быстрый поиск файлов locate

Индексирование базы данных производится на регулярной основе автоматически (обычно в ночное время) командой updatedb
updatedb

Эта команда не воспринимает файловые шаблоны поиска, а только строки.
locate spice

Индексирование базы данных производится на регулярной основе автоматически (обычно в ночное время) командой updatedb

updatedb

Эта команда не воспринимает файловые шаблоны поиска, а только строки.

locate spice

22. Определение содержимого файла

Часто бывает необходимо определить тип содержимого файла, что позволяет делать команда file ,
пытающаяся осуществить это с помощью базы данных сигнатур файлов, называемой magic numbers (магические числа).
Перед выводом на экран незнакомого файла рекомендуется узнать его тип с помощью команды file.
В противном случае на экран может быть выведен бинарный файл, и настройки терминала могут быть испорчены.
file /etc/issue
file /bin/ls

Часто бывает необходимо определить тип содержимого файла, что позволяет делать команда file ,

пытающаяся осуществить это с помощью базы данных сигнатур файлов, называемой magic numbers (магические числа).

Перед выводом на экран незнакомого файла рекомендуется узнать его тип с помощью команды file.

В противном случае на экран может быть выведен бинарный файл, и настройки терминала могут быть испорчены.

file /etc/issue

file /bin/ls

23. Копирование, перемещение и переименование файлов

Команда cp применяется для копирования (пример 4.14):
- команда cp srcFile tagFile копирует srcFile в tagFile;
- команда cp file1 file2 fileN dir копирует указанные файлы file1, file2, fileN в каталог dir;
- команда cp –R dir1 dir2 копирует каталог dir1 в каталог dir2 рекурсивно, создавая в каталоге dir2 копию каталога dir1 со всеми файлами, содержащимися в исходном каталоге dir1.

cp mydir/f{1,2}
С помощью команды cp mydir/f{1,2} создается копия файла f1 с именем f2 в том же каталоге mydir, где находится исходный файл.
Команда cp mydir/f{1,2} использует механизм перебора и эквивалентна команде cp mydir/f1 mydir/f2, однако она значительно короче.

Рекурсивное копирование каталога
cp -R mydir/ /tmp/

Команда mv используется для перемещения и переименования:
- команда mv oldName newName переименовывает oldName в newName;
- команда mv file1 file2 fileN dir перемещает заданные файлы в каталог dir;
- команда mv oldName newName переименовывает каталог oldName в newName.

Команда cp применяется для копирования (пример 4.14):

- команда cp srcFile tagFile копирует srcFile в tagFile;

- команда cp file1 file2 fileN dir копирует указанные файлы file1, file2, fileN в каталог dir;

- команда cp –R dir1 dir2 копирует каталог dir1 в каталог dir2 рекурсивно, создавая в каталоге dir2 копию каталога dir1 со всеми файлами, содержащимися в исходном каталоге dir1.

cp mydir/f{1,2}

С помощью команды cp mydir/f{1,2} создается копия файла f1 с именем f2 в том же каталоге mydir, где находится исходный файл.

Команда cp mydir/f{1,2} использует механизм перебора и эквивалентна команде cp mydir/f1 mydir/f2, однако она значительно короче.

Рекурсивное копирование каталога

cp -R mydir/ /tmp/

Команда mv используется для перемещения и переименования:

- команда mv oldName newName переименовывает oldName в newName;

- команда mv file1 file2 fileN dir перемещает заданные файлы в каталог dir;

- команда mv oldName newName переименовывает каталог oldName в newName.

24. Устройство файловой системы

Файловая система построена из трех основных компонентов
суперблок (superblock);
массив индексных дескрипторов (inod list);
блоки хранения данных.

устройство Файловой системы (ФС)
 _____________________________________________________
|                                                     |
|-------------Магнитный диск -------------------------|
|---------|------------------------|------------------|
|Суперблок| Массив индексных данных|     Данные       |
|---------|------------------------|Блок1|Блок2|БлокN |
|_____________________________________________________


Cуперблок содержит основную информацию, необходимую для монтирования и работы файловой системы:
 тип файловой системы;
 размер и количество блоков в файловой системе;
 количество индексных дескрипторов;
 время последнего монтирования;
 информация о том, была ли от монтирована файловая система;
 счетчик числа монтировании;
 список свободных блоков и индексных дескрипторов
 и т. п.

Если суперблок файловой системы испорчен, то монтирование файловой системы без его восстановления невозможно.
Современные файловые системы специально сохраняют в заранее известных блоках диска копии суперблока для возможности их использования при восстановлении файловой системы.
Индексные дескрипторы или, иначе, метаданные — это данные о самих файлах.
В индексных дескрипторах сохраняются следующие сведения о файлах:
 владелец и группа пользователей файла;
 права доступа к файлу;
 тип файла;
 количество имен у файла (link count);
 дата доступа к файлу (файл открыт на чтение);
 дата модификации (файл открыт на запись);
 дата изменения метаданных;
 количество блоков, занятое файлом;
 указатели на блоки данных файла.


Каталоги предоставляют собой особый тип файлов, содержащих таблицу, в которой хранятся имена файлов, находящихся в данном каталоге, и соответствующие им номера индексных дескрипторов (inode).
Эти записи связывают имена файлов с их индексными дескрипторами, а те, в свою очередь, предоставляют информацию о местонахождении блоков данных файла.
В блоках данных нет никакой информации, способной указать номер индексного дескриптора файла, которому принадлежит этот блок данных.
Точно так же, в индексном дескрипторе не хранится имя файла, который данный индексный дескриптор описывает.
Именно каталоги определяют положение файла в дереве файловой системы, т. к. сам файл не содержит информации о месте его нахождения.

На один и тот же индексный дескриптор может указывать несколько имен файлов.
Это фиксируется счетчиком имен файла (link counter) в индексном дескрипторе.
Если у файла имеется несколько имен, то говорят, что между этими именами существует жесткая связь (hard link).
То есть разные имена файлов указывают на одни метаданные и, следовательно, на одни и те же блоки данных.
Все имена файла абсолютно эквивалентны, и изменение содержимого этих файлов будет совершенно синхронным.
Нет никакой возможности определить, какое имя у файла было изначально, а какое появилось потом.


У каталогов имеются как минимум два имени:
- обычное имя каталога, находящееся в родительском каталоге (например, /home/user1);
- имя "точка" (.) — имя текущего каталога.

При появлении в любом каталоге подкаталога количество имен у этого каталога увеличивается на единицу,
т. к. в дочернем каталоге всегда содержится имя "две точки" ( ..) — имя родительского каталога.

Количество имен у файла можно определить с помощью команды ls -l , а получить номера индексных дескрипторов можно, используя ls -i
Определение номера индексного дескриптора:
ls -ldi /etc

Подробную информацию об индексном дескрипторе файла можно получить, используя команду stat
stat /etc


Зарезервированы три номера для индексных дескрипторов:
 0 — свободный индексный дескриптор (для удаленных файлов в индексный дескриптор записывается номер 0);
 1 — зарезервировано для будущего использования, но в GNU/Linux используются для файловых систем, порожденных ядром (проверьте каталоги /proc и /sys);
 2 — inode корневой файловой системы и точек монтирования файловых систем.

Файловая система построена из трех основных компонентов

суперблок (superblock);

массив индексных дескрипторов (inod list);

блоки хранения данных.

устройство Файловой системы (ФС)

_____________________________________________________

| |

|-------------Магнитный диск -------------------------|

|---------|------------------------|------------------|

|Суперблок| Массив индексных данных| Данные |

|---------|------------------------|Блок1|Блок2|БлокN |

|_____________________________________________________

Cуперблок содержит основную информацию, необходимую для монтирования и работы файловой системы:

тип файловой системы;

размер и количество блоков в файловой системе;

количество индексных дескрипторов;

время последнего монтирования;

информация о том, была ли от монтирована файловая система;

счетчик числа монтировании;

список свободных блоков и индексных дескрипторов

и т. п.

Если суперблок файловой системы испорчен, то монтирование файловой системы без его восстановления невозможно.

Современные файловые системы специально сохраняют в заранее известных блоках диска копии суперблока для возможности их использования при восстановлении файловой системы.

Индексные дескрипторы или, иначе, метаданные — это данные о самих файлах.

В индексных дескрипторах сохраняются следующие сведения о файлах:

владелец и группа пользователей файла;

права доступа к файлу;

тип файла;

количество имен у файла (link count);

дата доступа к файлу (файл открыт на чтение);

дата модификации (файл открыт на запись);

дата изменения метаданных;

количество блоков, занятое файлом;

указатели на блоки данных файла.

Каталоги предоставляют собой особый тип файлов, содержащих таблицу, в которой хранятся имена файлов, находящихся в данном каталоге, и соответствующие им номера индексных дескрипторов (inode).

Эти записи связывают имена файлов с их индексными дескрипторами, а те, в свою очередь, предоставляют информацию о местонахождении блоков данных файла.

В блоках данных нет никакой информации, способной указать номер индексного дескриптора файла, которому принадлежит этот блок данных.

Точно так же, в индексном дескрипторе не хранится имя файла, который данный индексный дескриптор описывает.

Именно каталоги определяют положение файла в дереве файловой системы, т. к. сам файл не содержит информации о месте его нахождения.

На один и тот же индексный дескриптор может указывать несколько имен файлов.

Это фиксируется счетчиком имен файла (link counter) в индексном дескрипторе.

Если у файла имеется несколько имен, то говорят, что между этими именами существует жесткая связь (hard link).

То есть разные имена файлов указывают на одни метаданные и, следовательно, на одни и те же блоки данных.

Все имена файла абсолютно эквивалентны, и изменение содержимого этих файлов будет совершенно синхронным.

Нет никакой возможности определить, какое имя у файла было изначально, а какое появилось потом.

У каталогов имеются как минимум два имени:

- обычное имя каталога, находящееся в родительском каталоге (например, /home/user1);

- имя "точка" (.) — имя текущего каталога.

При появлении в любом каталоге подкаталога количество имен у этого каталога увеличивается на единицу,

т. к. в дочернем каталоге всегда содержится имя "две точки" ( ..) — имя родительского каталога.

Количество имен у файла можно определить с помощью команды ls -l , а получить номера индексных дескрипторов можно, используя ls -i

Определение номера индексного дескриптора:

ls -ldi /etc

Подробную информацию об индексном дескрипторе файла можно получить, используя команду stat

stat /etc

Зарезервированы три номера для индексных дескрипторов:

0 — свободный индексный дескриптор (для удаленных файлов в индексный дескриптор записывается номер 0);

1 — зарезервировано для будущего использования, но в GNU/Linux используются для файловых систем, порожденных ядром (проверьте каталоги /proc и /sys);

2 — inode корневой файловой системы и точек монтирования файловых систем.

25. Использование жестких связей

Жесткая связь имеет место между несколькими именами файла, указывающими на одни и те же метаданные (inode).
Пример:
ls –li /bin/*grep
Листинг, выводимый командой ls –li /bin/*grep, показывает, что имена /bin/grep,
/bin/egrep и /bin/fgrep принадлежат одному и тому же файлу с тремя именами.
Номер inode у всех этих файлов одинаков, следовательно, они эквивалентны.
13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/grep
13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/egrep
13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/fgrep
Поскольку метаданные у файлов, между которыми установлена жесткая связь, одинаковы, то и блоки данных тоже одинаковы.
Следовательно, любые изменения, производимые с одним файлом, зеркально отразятся на файле, жестко связанном с ним.

Для создания жесткой связи с файлом применяется команда ln.
Первый аргумент команды — имя файла, а второй — имя жесткой связи с ним.
Создание жесткой связи:

ln file1 newname

Проверяем:
ls -li file1
ls -li newname
echo 'This is a hard link' > file1
cat newname

Попытка создания жесткой связи для каталога
ln dir1 dir2
будет ошибка: "ln: `dir1': не допускается создавать жесткие ссылки на каталоги"

P.S. также жесткую ссылку не возможно создать на файлы находящиеся на разных устройствах

Жесткая связь имеет место между несколькими именами файла, указывающими на одни и те же метаданные (inode).

Пример:

ls –li /bin/*grep

Листинг, выводимый командой ls –li /bin/*grep, показывает, что имена /bin/grep,

/bin/egrep и /bin/fgrep принадлежат одному и тому же файлу с тремя именами.

Номер inode у всех этих файлов одинаков, следовательно, они эквивалентны.

13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/grep

13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/egrep

13598 -rwxr-xr-x 3 root root 85228 Sep 11 2009 /bin/fgrep

Поскольку метаданные у файлов, между которыми установлена жесткая связь, одинаковы, то и блоки данных тоже одинаковы.

Следовательно, любые изменения, производимые с одним файлом, зеркально отразятся на файле, жестко связанном с ним.

Для создания жесткой связи с файлом применяется команда ln.

Первый аргумент команды — имя файла, а второй — имя жесткой связи с ним.

Создание жесткой связи:

ln file1 newname

Проверяем:

ls -li file1

ls -li newname

echo 'This is a hard link' > file1

cat newname

Попытка создания жесткой связи для каталога

ln dir1 dir2

будет ошибка: "ln: `dir1': не допускается создавать жесткие ссылки на каталоги"

P.S. также жесткую ссылку не возможно создать на файлы находящиеся на разных устройствах

26. Использование символических ссылок

Создание:
ln -s file1 slink1
Проверка:
ls -li file1 slink1

Обратите также внимание, что, во-первых, символические ссылки можно устанавливать на каталоги, а, во-вторых, при создании символической ссылки в другом каталоге следует указывать полное имя исходного файла.
Если второе требованиене выполняется, то:
либо ссылка будет оборванной (или иначе — висящей), т. е. символическая ссылка будет указывать на несуществующий файл;
либо ссылка будет указывать на существующий файл в целевом каталоге, имя которого (случайно или намеренно) совпадет с исходным файлом, однако ссылка будет указывать не на исходный файл.
Символическая ссылка может оказаться оборванной (пример 4.34) в случае, если:
файл, на который она указывает, перемещен, переименован или удален;
нет достаточных прав доступа на файл, указываемый символической ссылкой;
файл находится в файловой системе, которая сейчас не смонтирована.

Команда cp обладает специальной опцией -s, которая позволяет вместо копирования файлов создавать на них символические ссылки
cp -s ~/f??? /tmp

Если используется команда cp, для которой в качестве аргумента указаны файлы символических ссылок, то будут скопированы не файлы символических ссылок, а файлы, на которые они указывают.
Если же необходимо скопировать не исходные файлы, а именно символические ссылки, то следует использовать опцию -d команды cp

cp -d /tmp/f122 Documents/

Создание:

ln -s file1 slink1

Проверка:

ls -li file1 slink1

Обратите также внимание, что, во-первых, символические ссылки можно устанавливать на каталоги, а, во-вторых, при создании символической ссылки в другом каталоге следует указывать полное имя исходного файла.

Если второе требованиене выполняется, то:

либо ссылка будет оборванной (или иначе — висящей), т. е. символическая ссылка будет указывать на несуществующий файл;

либо ссылка будет указывать на существующий файл в целевом каталоге, имя которого (случайно или намеренно) совпадет с исходным файлом, однако ссылка будет указывать не на исходный файл.

Символическая ссылка может оказаться оборванной (пример 4.34) в случае, если:

файл, на который она указывает, перемещен, переименован или удален;

нет достаточных прав доступа на файл, указываемый символической ссылкой;

файл находится в файловой системе, которая сейчас не смонтирована.

Команда cp обладает специальной опцией -s, которая позволяет вместо копирования файлов создавать на них символические ссылки

cp -s ~/f??? /tmp

Если используется команда cp, для которой в качестве аргумента указаны файлы символических ссылок, то будут скопированы не файлы символических ссылок, а файлы, на которые они указывают.

Если же необходимо скопировать не исходные файлы, а именно символические ссылки, то следует использовать опцию -d команды cp

cp -d /tmp/f122 Documents/

27. Процессы

GNU/Linux — многопользовательская и многозадачная операционная система.
Это значит, что одновременно в системе может выполняться множество программ, запущенных различными пользователями.
Для обеспечения многозадачности процессор компьютера последовательно переключается на обработку программного кода различных приложений,
системных и прочих программ, создавая впечатление, что все они выполняются одновременно.
Рано или поздно, по истечении некоторого промежутка времени, каждая ждущая исполнения программа попадает на процессор для выполнения.
Естественно, чем больше загружена система, тем большим становится этот промежуток времени.
Сильно загруженная система может с точки зрения пользователя потерять интерактивность, т. е. она может настолько медленно отвечать на запросы пользователя,
что он будет уверен в том, что система не работает.

Программы представляют собой исполняемые файлы двух типов:
- бинарные файлы, содержащие инструкции на машинном языке;
- интерпретируемые сценарии (например, сценарии Bash и программы Perl)

Важно понимать, что программа — это некоторый код, хранящийся в обычном исполняемом файле.
Как только пользователь запускает программу на выполнение, она, в конечном итоге,
в виде соответствующего машинного кода попадает в ОЗУ и обрабатывается процессором.

Процесс — это экземпляр программы, исполняемый процессором, либо ожидающий этого момента в очереди.
Программа — это исполняемый файл, а процесс — это исполняющийся машинный код


Каждый процесс работает в собственном виртуальном адресном пространстве независимо от других процессов.
Пользовательский процесс не может получить доступ к адресному пространству другого процесса.
Но ядро Linux — этотоже процесс.
Ядро работает, переключая процессор в привилегированный режим.
Достигается это с помощью специального прерывания процессора.
Так как программы пользователей не могут получать доступ к системным ресурсам напрямую,
они вынуждены обращаться при возникновении такой необходимости к ядру.
Ядро предоставляет пользовательским процессам услуги посредством интерфейса системных вызовов.

Системные вызовы — это функции, реализованные в ядре операционной системы.
Когда пользовательский процесс осуществляет системный вызов, его выполнение производится ядром.
Код ядра при этом работает в контексте процесса.

Процессы ядра отделены от пользовательских процессов — они работают в пространстве ядра (kernel space).
Приложения работают в пользовательском пространстве (user space) за исключением времени, когда в них производятся системные вызовы.

Команда time позволяет увидеть, сколько времени исполнялась программа реально (от запуска до окончания),
сколько времени она обслуживалась ядром и сколько она работала в пользовательском пространстве.
time updatedb

В GNU/Linux одновременно выполняется множество процессов.
Процессор выделяет каждому процессу интервалы времени (time slices), в течение которых инструкции процесса выполняются процессором.
Такой режим называется разделением времени.
Используемая в Linux модель управления процессами относится к классу вытесняющей многозадачности (preemptive multitaskings).
В рамках этой модели каждый процесс имеет свой уровень важности в системе или приоритета.
Более приоритетные процессы могут вытеснять с исполнения на процессоре менее приоритетные.


Структуру процесса:
 заголовок процесса, содержащий, в частности, специальные сигнатуры, показывающие формат процесса (например, формат ELF или COFF);
 инструкции (по историческим причинам их именуют text);
 данные (data) — статические данные;
 куча (heap) — область памяти, предназначенная для выделения памяти динамическим переменным и т. п.;
 стек (stack) — структура типа LIFO (Last Input — First Output), предназначенная для вызовов подпрограмм и хранения некоторых переменных.



Процессы могут обращаться к каким-либо файлам. С каждым файлом ассоциируется целое число, называемое дескриптором файла.
Когда ядро создает процесс, с ним автоматически ассоциируются три потока ввода/вывода:
 стандартный поток ввода (stdin) — дескриптор 0;
 стандартный поток вывода (stdout) — дескриптор 1;
 стандартный поток ошибок (stderr) — дескриптор 2.


Процессы создаются другими процессами с помощью системного вызова fork().
Между процессами устанавливаются отношения наследства.
Процесс, который породил другие процессы, называется родительским (parent).
А порожденные процессы называются дочерними (child).


У каждого процесса есть один и только один родитель, но процесс может иметь несколько потомков.
Это позволяет выстраивать иерархическую древовидную систему процессов.


Когда процесс-родитель завершает свою работу, он может завершить работу своих дочерних процессов.
Если это не происходит, то "осиротевшие" процессы наследуются процессом с номером 1 — init.


Ядро Linux поддерживает специальную таблицу процессов, содержащую информацию о процессах в системе.
Таблица процессов динамически увеличивается при росте количества процессов в системе (увеличение таблицы процессов ограничено)

Важнейшие идентификаторы процесса:
 PID (Process ID) — уникальный порядковый номер процесса в системе, предназначенный для идентификации процесса;
 PPID (Parent Process ID) — PID родительского процесса, позволяющий выстроить иерархию процессов;
 UID (User ID) — идентификатор пользователя, от имени которого выполняется процесс;
 GID (Group ID) — идентификатор группы пользователей, от имени которой выполняется процесс.



Процессы принято подразделять на три категории:
- Процессы ядра. Они выполняются в kernel space.
  Примером такого процесса в Linux является процесс упорядочивания процессов в очереди (scheduling).
  Процессы ядра располагаются в оперативной памяти и не имеют соответствующих им программ в виде исполняемых файлов.
  Соответствующий им код находится в файле ядра и модулях ядра.
- Демоны — это фоновые не интерактивные процессы, запускаемые путем загрузки соответствующих им исполняемых файлов.
  Обычно они выполняют свою работу, никак не проявляя себя с точки зрения пользователей, т. к. они не ассоциированы с терминалами.
  Они предназначены для выполнения таких задач, как обслуживание соединений по какому-либо сетевому протоколу или регулярное выполнение рутинных операций в системе.
- Все остальные процессы называются прикладными.
  Они, как правило, порождаются в рамках сеанса работы пользователя.

100

GNU/Linux — многопользовательская и многозадачная операционная система.

Это значит, что одновременно в системе может выполняться множество программ, запущенных различными пользователями.

Для обеспечения многозадачности процессор компьютера последовательно переключается на обработку программного кода различных приложений,

системных и прочих программ, создавая впечатление, что все они выполняются одновременно.

Рано или поздно, по истечении некоторого промежутка времени, каждая ждущая исполнения программа попадает на процессор для выполнения.

Естественно, чем больше загружена система, тем большим становится этот промежуток времени.

Сильно загруженная система может с точки зрения пользователя потерять интерактивность, т. е. она может настолько медленно отвечать на запросы пользователя,

что он будет уверен в том, что система не работает.

Программы представляют собой исполняемые файлы двух типов:

- бинарные файлы, содержащие инструкции на машинном языке;

- интерпретируемые сценарии (например, сценарии Bash и программы Perl)

Важно понимать, что программа — это некоторый код, хранящийся в обычном исполняемом файле.

Как только пользователь запускает программу на выполнение, она, в конечном итоге,

в виде соответствующего машинного кода попадает в ОЗУ и обрабатывается процессором.

Процесс — это экземпляр программы, исполняемый процессором, либо ожидающий этого момента в очереди.

Программа — это исполняемый файл, а процесс — это исполняющийся машинный код

Каждый процесс работает в собственном виртуальном адресном пространстве независимо от других процессов.

Пользовательский процесс не может получить доступ к адресному пространству другого процесса.

Но ядро Linux — этотоже процесс.

Ядро работает, переключая процессор в привилегированный режим.

Достигается это с помощью специального прерывания процессора.

Так как программы пользователей не могут получать доступ к системным ресурсам напрямую,

они вынуждены обращаться при возникновении такой необходимости к ядру.

Ядро предоставляет пользовательским процессам услуги посредством интерфейса системных вызовов.

Системные вызовы — это функции, реализованные в ядре операционной системы.

Когда пользовательский процесс осуществляет системный вызов, его выполнение производится ядром.

Код ядра при этом работает в контексте процесса.

Процессы ядра отделены от пользовательских процессов — они работают в пространстве ядра (kernel space).

Приложения работают в пользовательском пространстве (user space) за исключением времени, когда в них производятся системные вызовы.

Команда time позволяет увидеть, сколько времени исполнялась программа реально (от запуска до окончания),

сколько времени она обслуживалась ядром и сколько она работала в пользовательском пространстве.

time updatedb

В GNU/Linux одновременно выполняется множество процессов.

Процессор выделяет каждому процессу интервалы времени (time slices), в течение которых инструкции процесса выполняются процессором.

Такой режим называется разделением времени.

Используемая в Linux модель управления процессами относится к классу вытесняющей многозадачности (preemptive multitaskings).

В рамках этой модели каждый процесс имеет свой уровень важности в системе или приоритета.

Более приоритетные процессы могут вытеснять с исполнения на процессоре менее приоритетные.

Структуру процесса:

заголовок процесса, содержащий, в частности, специальные сигнатуры, показывающие формат процесса (например, формат ELF или COFF);

инструкции (по историческим причинам их именуют text);

данные (data) — статические данные;

куча (heap) — область памяти, предназначенная для выделения памяти динамическим переменным и т. п.;

стек (stack) — структура типа LIFO (Last Input — First Output), предназначенная для вызовов подпрограмм и хранения некоторых переменных.

Процессы могут обращаться к каким-либо файлам. С каждым файлом ассоциируется целое число, называемое дескриптором файла.

Когда ядро создает процесс, с ним автоматически ассоциируются три потока ввода/вывода:

стандартный поток ввода (stdin) — дескриптор 0;

стандартный поток вывода (stdout) — дескриптор 1;

стандартный поток ошибок (stderr) — дескриптор 2.

Процессы создаются другими процессами с помощью системного вызова fork().

Между процессами устанавливаются отношения наследства.

Процесс, который породил другие процессы, называется родительским (parent).

А порожденные процессы называются дочерними (child).

У каждого процесса есть один и только один родитель, но процесс может иметь несколько потомков.

Это позволяет выстраивать иерархическую древовидную систему процессов.

Когда процесс-родитель завершает свою работу, он может завершить работу своих дочерних процессов.

Если это не происходит, то "осиротевшие" процессы наследуются процессом с номером 1 — init.

Ядро Linux поддерживает специальную таблицу процессов, содержащую информацию о процессах в системе.

Таблица процессов динамически увеличивается при росте количества процессов в системе (увеличение таблицы процессов ограничено)

Важнейшие идентификаторы процесса:

PID (Process ID) — уникальный порядковый номер процесса в системе, предназначенный для идентификации процесса;

PPID (Parent Process ID) — PID родительского процесса, позволяющий выстроить иерархию процессов;

UID (User ID) — идентификатор пользователя, от имени которого выполняется процесс;

GID (Group ID) — идентификатор группы пользователей, от имени которой выполняется процесс.

Процессы принято подразделять на три категории:

- Процессы ядра. Они выполняются в kernel space.

Примером такого процесса в Linux является процесс упорядочивания процессов в очереди (scheduling).

Процессы ядра располагаются в оперативной памяти и не имеют соответствующих им программ в виде исполняемых файлов.

Соответствующий им код находится в файле ядра и модулях ядра.

- Демоны — это фоновые не интерактивные процессы, запускаемые путем загрузки соответствующих им исполняемых файлов.

Обычно они выполняют свою работу, никак не проявляя себя с точки зрения пользователей, т. к. они не ассоциированы с терминалами.

Они предназначены для выполнения таких задач, как обслуживание соединений по какому-либо сетевому протоколу или регулярное выполнение рутинных операций в системе.

- Все остальные процессы называются прикладными.

Они, как правило, порождаются в рамках сеанса работы пользователя.

28. Фоновый режим выполнения заданий

Обычно пользователи вводят задания интерактивно с помощью команд оболочки, наблюдая на экране за ходом и результатами их выполнения.
В GNU/Linux можно запускать команды в фоновом режиме. 
Это позволяет пользователю выполнять несколько программ одновременно.
Только одно задание на терминале может работать в интерактивном режиме(foreground). 
Если на терминале имеются другие активные задания, то они выполняются в фоновом режиме (background).
Для запуска команды в фоновом режиме в конце командной строки необходимо поставить символ & (амперсанд). 
При запуске фонового задания выводится его номер в квадратных скобках, после квадратных скобок, — PID процесса
updatedb &

Для мониторинга состояний фоновых заданий предназначена команда jobs, которая позволяет просмотреть статус фоновых заданий. 
Она отображает номер задания, имя команды и статус задания.

jobs
fg
bg

Обозначения %% и %+ указывают последнее запущенное фоновое задание, а % — предпоследнее задание. 
Аналогично, информация о заданиях, выводимых командой jobs, отображает символы + и – для индикации последнего и предпоследнего заданий.
Команда fg %_номер_задания переводит задание с номером номер задания в интерактивный режим. 
Так, команда fg %1 переводит задание с номером 1в интерактивный режим.
Наоборот, для перевода задания в фоновый режим из интерактивного необходимо приостановить его выполнение нажатием комбинации клавиш<Ctrl>+<Z>, а затем выполнить команду bg с аргументом %_номер_задания.
Можно указывать задания по первым символам их командной строки, предваряя их %.

Обычно пользователи вводят задания интерактивно с помощью команд оболочки, наблюдая на экране за ходом и результатами их выполнения.

В GNU/Linux можно запускать команды в фоновом режиме.

Это позволяет пользователю выполнять несколько программ одновременно.

Только одно задание на терминале может работать в интерактивном режиме(foreground).

Если на терминале имеются другие активные задания, то они выполняются в фоновом режиме (background).

Для запуска команды в фоновом режиме в конце командной строки необходимо поставить символ & (амперсанд).

При запуске фонового задания выводится его номер в квадратных скобках, после квадратных скобок, — PID процесса

updatedb &

Для мониторинга состояний фоновых заданий предназначена команда jobs, которая позволяет просмотреть статус фоновых заданий.

Она отображает номер задания, имя команды и статус задания.

jobs

Обозначения %% и %+ указывают последнее запущенное фоновое задание, а % — предпоследнее задание.

Аналогично, информация о заданиях, выводимых командой jobs, отображает символы + и – для индикации последнего и предпоследнего заданий.

Команда fg %_номер_задания переводит задание с номером номер задания в интерактивный режим.

Так, команда fg %1 переводит задание с номером 1в интерактивный режим.

Наоборот, для перевода задания в фоновый режим из интерактивного необходимо приостановить его выполнение нажатием комбинации клавиш<Ctrl>+<Z>, а затем выполнить команду bg с аргументом %_номер_задания.

Можно указывать задания по первым символам их командной строки, предваряя их %.

29. Жизненный цикл процесса

Как было отмечено ранее, процессы создаются другими процессами. 
Когда процессу требуется создать дочерний процесс, используется системный вызов fork().
Предположим, что пользователь выполнил в оболочке команду ps -f, желая получить список процессов, запущенных на данном виртуальном терминале.
В таком случае ps -f является дочерним процессом оболочки.

Пример:
ps -f

Когда пользователь ввел в командной строке команду ps -f, эта команда была проверена оболочкой bash, не является ли она встроенной. 
Так как эта команда не является встроенной, для ее выполнения оболочка произвела системный вызов fork().
Системный вызов fork() приводит к тому, что ядро копирует адресное пространство процесса, произведшего этот вызов, в свободное адресное пространство в памяти. 
Начиная с этого момента, в системе имеются два совершенно одинаковых процесса bash. 
В обоих процессах выполнение производится с одной и той же инструкции, следующей после fork().
При создании процесса ядро назначает ему уникальный идентификатор процесса PID. 
Так и сейчас, для копии родительской оболочки — дочернего процесса bash, в нашем случае, система назначила PID 1870, а PPID новой оболочки соответствует PID породившей ее оболочки — 1751.

Итак, в настоящий момент в системе имеются два одинаковых процесса bash. 
Но требовалось получить процесс команды ps -f. 
Поэтому в дочернем процессе bash должен быть произведен системный вызов класса exec() (см. man 3 exec), 
который позволяет загрузить программу /bin/ls и поместить прочитанный исполняемый код в адресное пространство дочернего процесса.
В то же время родительский процесс bash должен быть приостановлен с помощью системного вызова wait(), ожидающего сигнала о завершении работы дочернего процесса. 
До тех пор, пока этот сигнал получен не будет, родительский процесс bash не может продолжить работу.
Как же отличить родительский и дочерний процессы bash для того, чтобы определить, в каком из них надо вызвать exec(), а в каком — wait()?
Их можно различить с помощью анализа значения, возвращаемого функциейfork(). 
Она возвращает PID дочернего процесса. Родительский процесс bash породил дочерний процесс, и, следовательно, fork() возвратил PID дочернего процесса. 
В порожденном процессе fork() возвращает 0.
После вызова exec() дочерний процесс уже не является процессом bash — он выполняет инструкции команды ps. 
Родительский процесс ждет завершения дочернего процесса.
После того как команда ps -f завершает свою работу системным вызовом exit(), ее адресное пространство освобождается. 

Родительский процесс bash, который с помощью системного вызова wait() ожидал завершения работы дочернего процесса, продолжит после этого свою работу.
Нормальный жизненный цикл процесса в системе может быть нарушен вследствие наступления какого-либо события. 
Например, процесс может получить сигнал от другого процесса, который может привести к его преждевременной остановке.
Информация о дочерних процессах в таблице процессов может быть важна для родительского процесса. 
Поэтому информация о них не стирается из таблицы процессов до вызова родительским процессом функции wait() (см. man 2 wait).

Возможна ситуация, когда дочерний процесс уже завершил свою работу, а родительский процесс не произвел еще системного вызова wait(). 
В таком случае информация об уже несуществующем дочернем процессе сохраняется в таблице процессов, т. к. эта информация может потребоваться родительскому процессу. 
Запись в таблице о завершившемся дочернем процессе помечается как defunct или, иначе, процесс-зомби (zombie).

Как было отмечено ранее, процессы создаются другими процессами.

Когда процессу требуется создать дочерний процесс, используется системный вызов fork().

Предположим, что пользователь выполнил в оболочке команду ps -f, желая получить список процессов, запущенных на данном виртуальном терминале.

В таком случае ps -f является дочерним процессом оболочки.

Пример:

ps -f

Когда пользователь ввел в командной строке команду ps -f, эта команда была проверена оболочкой bash, не является ли она встроенной.

Так как эта команда не является встроенной, для ее выполнения оболочка произвела системный вызов fork().

Системный вызов fork() приводит к тому, что ядро копирует адресное пространство процесса, произведшего этот вызов, в свободное адресное пространство в памяти.

Начиная с этого момента, в системе имеются два совершенно одинаковых процесса bash.

В обоих процессах выполнение производится с одной и той же инструкции, следующей после fork().

При создании процесса ядро назначает ему уникальный идентификатор процесса PID.

Так и сейчас, для копии родительской оболочки — дочернего процесса bash, в нашем случае, система назначила PID 1870, а PPID новой оболочки соответствует PID породившей ее оболочки — 1751.

Итак, в настоящий момент в системе имеются два одинаковых процесса bash.

Но требовалось получить процесс команды ps -f.

Поэтому в дочернем процессе bash должен быть произведен системный вызов класса exec() (см. man 3 exec),

который позволяет загрузить программу /bin/ls и поместить прочитанный исполняемый код в адресное пространство дочернего процесса.

В то же время родительский процесс bash должен быть приостановлен с помощью системного вызова wait(), ожидающего сигнала о завершении работы дочернего процесса.

До тех пор, пока этот сигнал получен не будет, родительский процесс bash не может продолжить работу.

Как же отличить родительский и дочерний процессы bash для того, чтобы определить, в каком из них надо вызвать exec(), а в каком — wait()?

Их можно различить с помощью анализа значения, возвращаемого функциейfork().

Она возвращает PID дочернего процесса. Родительский процесс bash породил дочерний процесс, и, следовательно, fork() возвратил PID дочернего процесса.

В порожденном процессе fork() возвращает 0.

После вызова exec() дочерний процесс уже не является процессом bash — он выполняет инструкции команды ps.

Родительский процесс ждет завершения дочернего процесса.

После того как команда ps -f завершает свою работу системным вызовом exit(), ее адресное пространство освобождается.

Родительский процесс bash, который с помощью системного вызова wait() ожидал завершения работы дочернего процесса, продолжит после этого свою работу.

Нормальный жизненный цикл процесса в системе может быть нарушен вследствие наступления какого-либо события.

Например, процесс может получить сигнал от другого процесса, который может привести к его преждевременной остановке.

Информация о дочерних процессах в таблице процессов может быть важна для родительского процесса.

Поэтому информация о них не стирается из таблицы процессов до вызова родительским процессом функции wait() (см. man 2 wait).

Возможна ситуация, когда дочерний процесс уже завершил свою работу, а родительский процесс не произвел еще системного вызова wait().

В таком случае информация об уже несуществующем дочернем процессе сохраняется в таблице процессов, т. к. эта информация может потребоваться родительскому процессу.

Запись в таблице о завершившемся дочернем процессе помечается как defunct или, иначе, процесс-зомби (zombie).

30. Мониторинг процессов

Основным инструментом для исследования процессов является команда ps.
Она выводит состояние процессов на момент ее выполнения в системе. 
Без опций она выводит список процессов, связанных с текущим терминалом.
Подробную информацию можно получить с помощью опции -f (full format).
Еще более подробную информацию предоставляет опция -l (long format).

PID   - отображает идентификаторы процессов
TTY   - имена терминалов 
TIME  - суммарное процессорное время, затраченное процессом с момента его старта.
CMD   - командная строка процесса
PPID  - родителе процесса
C     - фактор загрузки процессора (требуется планировщику для расчета приоритета процесса)
UID   - владельца процесса
STIME - показывает время запуска процесса

Столбец S - статус процесса, который может быть:
D - процесс приостановлен и не может быть прерван (например, ожидает окончания ввода/вывода);
R - процесс выполняется или находится в очереди;
S - процесс приостановлен;
T - процесс трассируется;
Z - процесс помечен как defunct (zombie).

Столбец NI - показывает величину nice number. 
Эта величина устанавливается пользователем и участвует в вычислении приоритета процесса планировщиком. 

Столбец SZ - количество памяти, занимаемое процессом, а WCHAN — это информация о системном вызове, произведенном процессом.

Ещё ключи ps:
ps -e - позволяющая вывести список всех процессов системе (аналог — опция –A). 
ps -ef - подробную информацию о процессах
ps -u - фильтрация по UID
ps -t - фильтрация по терминалу
ps -p - фильтрация по PID искомого процесса
ps -C - фильтрация по командной строке
ps -faxu - подробная информация о процессах, пользователях
ps aux  - подробная информация о процессах, пользователях
ps –L - для получения информации о потоках

pgrep bash
ps -f U root
ps -fLC swriter.bin

Удобно использовать также команду w, демонстрирующую список всех вошедших в сеанс пользователей и запущенные ими задания.

Основным инструментом для исследования процессов является команда ps.

Она выводит состояние процессов на момент ее выполнения в системе.

Без опций она выводит список процессов, связанных с текущим терминалом.

Подробную информацию можно получить с помощью опции -f (full format).

Еще более подробную информацию предоставляет опция -l (long format).

PID - отображает идентификаторы процессов

TTY - имена терминалов

TIME - суммарное процессорное время, затраченное процессом с момента его старта.

CMD - командная строка процесса

PPID - родителе процесса

C - фактор загрузки процессора (требуется планировщику для расчета приоритета процесса)

UID - владельца процесса

STIME - показывает время запуска процесса

Столбец S - статус процесса, который может быть:

D - процесс приостановлен и не может быть прерван (например, ожидает окончания ввода/вывода);

R - процесс выполняется или находится в очереди;

S - процесс приостановлен;

T - процесс трассируется;

Z - процесс помечен как defunct (zombie).

Столбец NI - показывает величину nice number.

Эта величина устанавливается пользователем и участвует в вычислении приоритета процесса планировщиком.

Столбец SZ - количество памяти, занимаемое процессом, а WCHAN — это информация о системном вызове, произведенном процессом.

Ещё ключи ps:

ps -e - позволяющая вывести список всех процессов системе (аналог — опция –A).

ps -ef - подробную информацию о процессах

ps -u - фильтрация по UID

ps -t - фильтрация по терминалу

ps -p - фильтрация по PID искомого процесса

ps -C - фильтрация по командной строке

ps -faxu - подробная информация о процессах, пользователях

ps aux - подробная информация о процессах, пользователях

ps –L - для получения информации о потоках

pgrep bash

ps -f U root

ps -fLC swriter.bin

Удобно использовать также команду w, демонстрирующую список всех вошедших в сеанс пользователей и запущенные ими задания.

31. Файловая система /proc

Подкаталоги /proc с именами, состоящими из цифр, соответствуют PID процессов.

Определим, например, PID текущей оболочки и исследуем соответствующий ее процессу каталог:
pgrep bash
где 1730 - PID процесса bash
ls /proc/1730
cat /proc/1730/cmdline

Файл cmdline содержит в себе командную строку процесса
файл status подробную информацию о статусе процесса

Подкаталог fd предназначен для мониторинга файлов, открытых процессом. 
В нем содержатся символические ссылки на реально открытые файлы процессом. 
Имена этих символических ссылок соответствуют номерам файловых дескрипторов открытых файлов.

Подкаталоги /proc с именами, состоящими из цифр, соответствуют PID процессов.

Определим, например, PID текущей оболочки и исследуем соответствующий ее процессу каталог:

pgrep bash

где 1730 - PID процесса bash

ls /proc/1730

cat /proc/1730/cmdline

Файл cmdline содержит в себе командную строку процесса

файл status подробную информацию о статусе процесса

Подкаталог fd предназначен для мониторинга файлов, открытых процессом.

В нем содержатся символические ссылки на реально открытые файлы процессом.

Имена этих символических ссылок соответствуют номерам файловых дескрипторов открытых файлов.

32. fuser

fuser - команда позволяющая определить, какие процессы открыли заданный файл

Команда fuser выводит следующие символы после PID процессов:
c - текущий каталог
e - исполняемый файл в момент его работы
f - открытый файл
r - корневой каталог
m - разделяемая библиотека либо отображаемый в память файл.

Опция -m команды fuser позволяет указать, что имя файла является именем смонтированного блочного устройства
fuser -m /dev/dvd

fuser - команда позволяющая определить, какие процессы открыли заданный файл

Команда fuser выводит следующие символы после PID процессов:

c - текущий каталог

e - исполняемый файл в момент его работы

f - открытый файл

r - корневой каталог

m - разделяемая библиотека либо отображаемый в память файл.

Опция -m команды fuser позволяет указать, что имя файла является именем смонтированного блочного устройства

fuser -m /dev/dvd

33. pstree

Для просмотра списка процессов в виде дерева, отображающего отношения родительских и дочерних процессов, необходимо выполнить команду pstree.

1	Для просмотра списка процессов в виде дерева, отображающего отношения родительских и дочерних процессов, необходимо выполнить команду pstree.

34. Сигналы

Сигналы — это один из способов межпроцессного взаимодействия. 
Они обеспечивают возможность обмена процессами элементарными сообщениями. 
Получив сигнал, процесс может отреагировать на него по-разному в зависимости от полученного сигнала и действий, запрограммированных в коде процесса. 
Так, например, процесс может перечитать файл конфигурации или завершить работу.
Список сигналов, используемых в системе, можно получить с помощью команды kill -l, а их подробное описание доступно с помощью man 7 signal.

Наиболее часто используются сигналы, приведенные в списке далее:
1 - HUP, разрыв связи с терминалом (Hang Up — положить трубку). 
Многие демоны используют этот сигнал, как команду перечитать их конфигурационный файл и продолжить работу с измененными настройками. 
Оболочка Bash реагирует на этот сигнал завершением сеанса

2 - INT, прерывание процесса. 
Генерируется при нажатии комбинации клавиш <Ctrl>+<C>

3 - QUIT, сброс процесса. Генерируется при нажатии комбинации клавиш <Ctrl>+<\>

15 - TERM, сигнал для корректного завершения процесса
Этот сигнал команда kill посылает по умолчанию

9 - KILL, аварийное завершение процесса

Каким образом то или иное приложение реагирует на получение некоторого сигнала, зависит от того, как эта программа написана. 
В программе получение сигнала может перехватываться и обрабатываться специальным образом.

Сигнал KILL (9) не может быть перехвачен. Этот сигнал приводит к немедленному и, таким образом, часто некорректному снятию процесса с исполнения.
При этом файлы, открытые процессом, не закрываются нормальным способом, что может привести к потере данных.

Если необходимо послать сигнал некоторым процессам, то сначала требуется узнать PID этих процессов, а затем с помощью команды kill послать им требуемый сигнал, номер которого указывается после тире. 
Если номер сигнала или его имя не задано после дефиса, то команда kill посылает целевым процессам сигнал 15 (TERM). 
Так, например, можно попытаться послать сигнал оболочке bash.

Посылать сигналы процессам могут только их владелец и суперпользователь.
Если родительским процессом получен сигнал, приводящий к его остановке, то в нормальной ситуации будут сняты с выполнения все его дочерние процессы.

Удобно пользоваться командами pkill и killall.
В отличие от команды kill, для команд pkill и killall достаточно указать имя командной строки процесса.
killall -9 httpd
pkill httpd

Сигналы — это один из способов межпроцессного взаимодействия.

Они обеспечивают возможность обмена процессами элементарными сообщениями.

Получив сигнал, процесс может отреагировать на него по-разному в зависимости от полученного сигнала и действий, запрограммированных в коде процесса.

Так, например, процесс может перечитать файл конфигурации или завершить работу.

Список сигналов, используемых в системе, можно получить с помощью команды kill -l, а их подробное описание доступно с помощью man 7 signal.

Наиболее часто используются сигналы, приведенные в списке далее:

1 - HUP, разрыв связи с терминалом (Hang Up — положить трубку).

Многие демоны используют этот сигнал, как команду перечитать их конфигурационный файл и продолжить работу с измененными настройками.

Оболочка Bash реагирует на этот сигнал завершением сеанса

2 - INT, прерывание процесса.

Генерируется при нажатии комбинации клавиш <Ctrl>+<C>

3 - QUIT, сброс процесса. Генерируется при нажатии комбинации клавиш <Ctrl>+<\>

15 - TERM, сигнал для корректного завершения процесса

Этот сигнал команда kill посылает по умолчанию

9 - KILL, аварийное завершение процесса

Каким образом то или иное приложение реагирует на получение некоторого сигнала, зависит от того, как эта программа написана.

В программе получение сигнала может перехватываться и обрабатываться специальным образом.

Сигнал KILL (9) не может быть перехвачен. Этот сигнал приводит к немедленному и, таким образом, часто некорректному снятию процесса с исполнения.

При этом файлы, открытые процессом, не закрываются нормальным способом, что может привести к потере данных.

Если необходимо послать сигнал некоторым процессам, то сначала требуется узнать PID этих процессов, а затем с помощью команды kill послать им требуемый сигнал, номер которого указывается после тире.

Если номер сигнала или его имя не задано после дефиса, то команда kill посылает целевым процессам сигнал 15 (TERM).

Так, например, можно попытаться послать сигнал оболочке bash.

Посылать сигналы процессам могут только их владелец и суперпользователь.

Если родительским процессом получен сигнал, приводящий к его остановке, то в нормальной ситуации будут сняты с выполнения все его дочерние процессы.

Удобно пользоваться командами pkill и killall.

В отличие от команды kill, для команд pkill и killall достаточно указать имя командной строки процесса.

killall -9 httpd

pkill httpd

35. Перехват и обработка сигналов в Bash

В оболочке Bash имеется встроенная команда trap, которая позволяет перехватывать сигналы и реагировать на них каким-либо заданным способом.
Первым аргументом ее является команда, которую следует выполнить при получении оболочкой сигнала. 
Второй аргумент задает сигнал, который дол жен быть обработан.

Введите команды, показанные в примере ниже, для установки ловушки сигнала INT:
$ trap "echo Получен сигнал INT" INT
$ trap -p
trap -- 'echo Получен сигнал INT' SIGINT
$ Получен сигнал INT
Команда trap установила ловушку для сигнала INT — команду echo. 
Команда trap -p вывела список установленных обработчиков сигналов. 
Далее пользователь нажал комбинацию клавиш <Ctrl>+<C>, передающую сигнал INT оболочке. 
При этом сигнал был перехвачен обработчиком, выполнившим команду echo.

В оболочке Bash имеется встроенная команда trap, которая позволяет перехватывать сигналы и реагировать на них каким-либо заданным способом.

Первым аргументом ее является команда, которую следует выполнить при получении оболочкой сигнала.

Второй аргумент задает сигнал, который дол жен быть обработан.

Введите команды, показанные в примере ниже, для установки ловушки сигнала INT:

$ trap "echo Получен сигнал INT" INT

$ trap -p

trap -- 'echo Получен сигнал INT' SIGINT

$ Получен сигнал INT

Команда trap установила ловушку для сигнала INT — команду echo.

Команда trap -p вывела список установленных обработчиков сигналов.

Далее пользователь нажал комбинацию клавиш <Ctrl>+<C>, передающую сигнал INT оболочке.

При этом сигнал был перехвачен обработчиком, выполнившим команду echo.

36. Управление приоритетом процессов

В GNU/Linux используется режим выполнения процессов с разделением времени. 
В каждый момент времени центральный процессор выполняет инструкции одного-единственного процесса, а все остальные процессы находятся в режиме ожидания. 
Все процессорное время разделено на части — time slices(другое название — TIC). 
Маловероятно, чтобы процесс находился на исполнении процессора в течение всего времени TIC. 
Он может быть снят с исполнения более "важным" для системы процессом. Поэтому говорят о приоритете процессов в GNU/Linux.
Процессы, обладающие в системе бóльшим приоритетом, исполняются быстрее. 
Процесс выполняется тем быстрее, чем: чаще процесс попадает на исполнение, чем полнее он использует промежуток времени time slice.

Работа по обслуживанию очереди процессов осуществляется планировщиком. 
Планировщик вычисляет для каждого процесса величину, которую можно увидеть в поле PRI листинга, выводимого командой ps –l . 
Чем ниже величина PRI, тем выше приоритет процесса, следовательно, быстрее он выполняется, 
поэтому для избегания путаницы далее в тексте вместо слов "увеличение и уменьшение приоритета" будут использованы, соответственно, "улучшение и уменьшение приоритета". 
Величина PRI постоянно изменяется, обеспечивая для процессов, которые давно не были на исполнении процессором, улучшение приоритета, и, наоборот, для процессов, которые были исполнены только что, — его ухудшение.

На основании вычисленной величины приоритета PRI ядро определяет, какой процесс следующим попадет на исполнение. 

Величина NI — nice number.
Это число, устанавливаемое пользователем, называется иначе относительным приоритетом.
С помощью nice number пользователь может влиять на вычисляемую планировщиком величину приоритета процесса. 

Чем ниже значение nice number, тем лучше будет приоритет процесса и тем быстрее он будет работать.
В GNU/Linux значение nice number задается в пределах от –20 до 19.
По умолчанию nice number равно 0.

Для обычных пользователей отведен диапазон положительных значений nice number. 
В область отрицательных значений эту величину может устанавливать только суперпользователь. 
То есть обычные пользователи могут жертвовать производительностью своих приложений ради общего быстродействия системы.

Значение nice number можно установить с помощью команды nice. 
После нее в качестве аргумента задается команда, которая должна быть исполнена с измененным приоритетом. 
По умолчанию команда nice увеличивает значение nice number на 10, ухудшая, таким образом, приоритет этого процесса.
Если требуется указать иное значение увеличения nice number, то его следует указать после опции -n.

nice -n 19 bash
nice
ps -l 

Для установки иного значения nice number для уже исполняющегося процесса следует использовать команду renice. 
Эта команда обычно доступна только для суперпользователя. 
Новое значение nice number указывается в качестве аргумента команды renice. 
С помощью этой команды можно изменить nice number для конкретного процесса, заданного с помощью его PID после опции -p или же в качестве второго аргумента. 

renice 10 2559
ps -l -p 2559

С помощью команды renice можно изменять приоритет всех процессов для заданного после опции -u пользователя (-g для группы пользователей)
renice 0 -u user1
renice 0 -g user1

В GNU/Linux используется режим выполнения процессов с разделением времени.

В каждый момент времени центральный процессор выполняет инструкции одного-единственного процесса, а все остальные процессы находятся в режиме ожидания.

Все процессорное время разделено на части — time slices(другое название — TIC).

Маловероятно, чтобы процесс находился на исполнении процессора в течение всего времени TIC.

Он может быть снят с исполнения более "важным" для системы процессом. Поэтому говорят о приоритете процессов в GNU/Linux.

Процессы, обладающие в системе бóльшим приоритетом, исполняются быстрее.

Процесс выполняется тем быстрее, чем: чаще процесс попадает на исполнение, чем полнее он использует промежуток времени time slice.

Работа по обслуживанию очереди процессов осуществляется планировщиком.

Планировщик вычисляет для каждого процесса величину, которую можно увидеть в поле PRI листинга, выводимого командой ps –l .

Чем ниже величина PRI, тем выше приоритет процесса, следовательно, быстрее он выполняется,

поэтому для избегания путаницы далее в тексте вместо слов "увеличение и уменьшение приоритета" будут использованы, соответственно, "улучшение и уменьшение приоритета".

Величина PRI постоянно изменяется, обеспечивая для процессов, которые давно не были на исполнении процессором, улучшение приоритета, и, наоборот, для процессов, которые были исполнены только что, — его ухудшение.

На основании вычисленной величины приоритета PRI ядро определяет, какой процесс следующим попадет на исполнение.

Величина NI — nice number.

Это число, устанавливаемое пользователем, называется иначе относительным приоритетом.

С помощью nice number пользователь может влиять на вычисляемую планировщиком величину приоритета процесса.

Чем ниже значение nice number, тем лучше будет приоритет процесса и тем быстрее он будет работать.

В GNU/Linux значение nice number задается в пределах от –20 до 19.

По умолчанию nice number равно 0.

Для обычных пользователей отведен диапазон положительных значений nice number.

В область отрицательных значений эту величину может устанавливать только суперпользователь.

То есть обычные пользователи могут жертвовать производительностью своих приложений ради общего быстродействия системы.

Значение nice number можно установить с помощью команды nice.

После нее в качестве аргумента задается команда, которая должна быть исполнена с измененным приоритетом.

По умолчанию команда nice увеличивает значение nice number на 10, ухудшая, таким образом, приоритет этого процесса.

Если требуется указать иное значение увеличения nice number, то его следует указать после опции -n.

nice -n 19 bash

nice

ps -l

Для установки иного значения nice number для уже исполняющегося процесса следует использовать команду renice.

Эта команда обычно доступна только для суперпользователя.

Новое значение nice number указывается в качестве аргумента команды renice.

С помощью этой команды можно изменить nice number для конкретного процесса, заданного с помощью его PID после опции -p или же в качестве второго аргумента.

renice 10 2559

ps -l -p 2559

С помощью команды renice можно изменять приоритет всех процессов для заданного после опции -u пользователя (-g для группы пользователей)

renice 0 -u user1

renice 0 -g user1

37. Права доступа и права владения

Любая UNIX- и GNU/Linux-система реализует политику DAC (Discretionary Access Control) — добровольное управление доступом к файлам. 
Суть ее состоит в том, что пользователи сами определяют права доступа к своим файлам.

Каждый файл имеет два идентификатора, определяющие его принадлежность — владелец файла и группа пользователей. 
Эта информация сохраняется не в самом файле, а в его метаданных (inode).

Любой файл принадлежит одному-единственному пользователю. 
Этот пользователь называется владельцем (или пользователем — user) файла. 
Когда пользователь системы создает файл, то владельцем файла устанавливается именно он.
Первичная группа пользователя (GID) в обычных условиях определяет группу пользователей, которая будет установлена для этого файла.

id - узнать свой UID \ GID

В метаданных сохраняется информация не об именах пользователя и группы, а UID и GID пользователя.
В соответствии с требованиями DAC в GNU/Linux существуют три базовых класса доступа к файлу:
User access (u) — права доступа владельца файла
Group access (g) — права доступа группы владельцев файла
Other access (o) — права доступа для всех остальных

Никакие другие категории не предусматриваются, поэтому каждый пользователь может быть либо владельцем файла, 
либо входить в группу пользователей, либо относиться к категории всех остальных.
Сами по себе права владения файлами не предоставляют информации о том, что может пользователь делать с данным файлом.

Любая UNIX- и GNU/Linux-система реализует политику DAC (Discretionary Access Control) — добровольное управление доступом к файлам.

Суть ее состоит в том, что пользователи сами определяют права доступа к своим файлам.

Каждый файл имеет два идентификатора, определяющие его принадлежность — владелец файла и группа пользователей.

Эта информация сохраняется не в самом файле, а в его метаданных (inode).

Любой файл принадлежит одному-единственному пользователю.

Этот пользователь называется владельцем (или пользователем — user) файла.

Когда пользователь системы создает файл, то владельцем файла устанавливается именно он.

Первичная группа пользователя (GID) в обычных условиях определяет группу пользователей, которая будет установлена для этого файла.

id - узнать свой UID \ GID

В метаданных сохраняется информация не об именах пользователя и группы, а UID и GID пользователя.

В соответствии с требованиями DAC в GNU/Linux существуют три базовых класса доступа к файлу:

User access (u) — права доступа владельца файла

Group access (g) — права доступа группы владельцев файла

Other access (o) — права доступа для всех остальных

Никакие другие категории не предусматриваются, поэтому каждый пользователь может быть либо владельцем файла,

либо входить в группу пользователей, либо относиться к категории всех остальных.

Сами по себе права владения файлами не предоставляют информации о том, что может пользователь делать с данным файлом.

38. Права доступа, устанавливаемые на файлы

- rwx rwx rwx
   U   G   O

d - тип файла  (d)каталог, (-)файл, (c)идентификатор, (l)символьные ссылки, (b)блочные устройства, (p)именованные каналы, (s) сокеты
r - чтение 4
w - запись 2 
x - выполнение 1

ls -l 
Например, запись rxwxr-x--x (751) обозначает, что пользователь файла имеет все права на доступ к нему (rxw или 7), группа пользователей имеет права на чтение и исполнение файла (r-x или 5), остальные имеют права на исполнение (--x или 1).

Пример использования цифр в программе chmod
chmod 0700  file_name - -rwx------  -  Владелец может читать, записывать файлы в данный каталог, а также переходить в него, все остальные пользователи не имеют к нему доступа.
chmod 0711  file_name - -rwx--x--x  -  Владелец обладает теми же правами. Все остальные могут открывать каталог, но не могут просматривать или изменять файлы в нем.
chmod 0777  file_name - -rwxrwxrwx  -  Полный доступ
chmod 0000  file_name - ----------  -  Доступ полностью закрыт

Пример использования  букв  в программе chmod
chmod go+r  file_name - -rwxr--r--  -  Добавить группе и остальным чтение
chmod a=rwx file_name - -rwxrwxrwx  -  Полный доступ  
chmod -rwx  file_name - ----------  -  Доступ полностью закрыт

- rwx rwx rwx

U G O

d - тип файла (d)каталог, (-)файл, (c)идентификатор, (l)символьные ссылки, (b)блочные устройства, (p)именованные каналы, (s) сокеты

r - чтение 4

w - запись 2

x - выполнение 1

ls -l

Например, запись rxwxr-x--x (751) обозначает, что пользователь файла имеет все права на доступ к нему (rxw или 7), группа пользователей имеет права на чтение и исполнение файла (r-x или 5), остальные имеют права на исполнение (--x или 1).

Пример использования цифр в программе chmod

chmod 0700 file_name - -rwx------ - Владелец может читать, записывать файлы в данный каталог, а также переходить в него, все остальные пользователи не имеют к нему доступа.

chmod 0711 file_name - -rwx--x--x - Владелец обладает теми же правами. Все остальные могут открывать каталог, но не могут просматривать или изменять файлы в нем.

chmod 0777 file_name - -rwxrwxrwx - Полный доступ

chmod 0000 file_name - ---------- - Доступ полностью закрыт

Пример использования букв в программе chmod

chmod go+r file_name - -rwxr--r-- - Добавить группе и остальным чтение

chmod a=rwx file_name - -rwxrwxrwx - Полный доступ

chmod -rwx file_name - ---------- - Доступ полностью закрыт

39. Права доступа к каталогам

Права доступа, устанавливаемые на каталоги, имеют несколько иной смысл, чем права на файлы. Для каталогов используются следующие права:
 
 x - (search) право обращаться к метаданным файлов в каталоге, а также входить в каталог с помощью команды cd и получать доступ к файлам, находящимся в этом каталоге;

 r - право на чтение имен файлов, находящихся в каталоге, т. е. на выполнение команды ls. 
     Без наличия права search (x) не позволяет получать подробную информацию о файлах и какой-либо доступ к ним, поскольку прав на доступ к метаданным файлов в каталоге нет;

 w - право на запись в каталог, т. е. право переименовывать, удалять, создавать файлы и пр. 
     Без наличия права search (x) не позволяет осуществлять запись в каталог, т. к. для записи требуется доступ к метаданным файлов.

Без наличия права search (x), установленного на каталог, операции обращения к файлам, находящимся в нем, не могут быть осуществлены. 
Поэтому для каталогов права доступа должны быть либо нечетные, либо отсутствовать. 

Далее приведены права доступа к каталогам, которые имеют практический смысл:
0 (---) — прав нет
1 (--x) — имеется право перехода в каталог, можно обращаться к файлам в нем, однако нельзя выполнять команду ls и осуществлять какие-либо манипуляции файлами, например, переименование или удаление
3 (-wx) — в каталог можно переходить, разрешены любые манипуляции файлами и можно к ним обращаться, однако получить список файлов командой ls невозможно
5 (r-x) — в каталог можно переходить и получать подробную информацию о файлах командой ls -l, разрешено обращаться к файлам, однако нельзя осуществлять манипуляции файлами, например, переименование или удаление
7 (rwx) — полные права

Для получения прав доступа к каталогу следует использовать команду ls –ld.

Права доступа, устанавливаемые на каталоги, имеют несколько иной смысл, чем права на файлы. Для каталогов используются следующие права:

x - (search) право обращаться к метаданным файлов в каталоге, а также входить в каталог с помощью команды cd и получать доступ к файлам, находящимся в этом каталоге;

r - право на чтение имен файлов, находящихся в каталоге, т. е. на выполнение команды ls.

Без наличия права search (x) не позволяет получать подробную информацию о файлах и какой-либо доступ к ним, поскольку прав на доступ к метаданным файлов в каталоге нет;

w - право на запись в каталог, т. е. право переименовывать, удалять, создавать файлы и пр.

Без наличия права search (x) не позволяет осуществлять запись в каталог, т. к. для записи требуется доступ к метаданным файлов.

Без наличия права search (x), установленного на каталог, операции обращения к файлам, находящимся в нем, не могут быть осуществлены.

Поэтому для каталогов права доступа должны быть либо нечетные, либо отсутствовать.

Далее приведены права доступа к каталогам, которые имеют практический смысл:

0 (---) — прав нет

1 (--x) — имеется право перехода в каталог, можно обращаться к файлам в нем, однако нельзя выполнять команду ls и осуществлять какие-либо манипуляции файлами, например, переименование или удаление

3 (-wx) — в каталог можно переходить, разрешены любые манипуляции файлами и можно к ним обращаться, однако получить список файлов командой ls невозможно

5 (r-x) — в каталог можно переходить и получать подробную информацию о файлах командой ls -l, разрешено обращаться к файлам, однако нельзя осуществлять манипуляции файлами, например, переименование или удаление

7 (rwx) — полные права

Для получения прав доступа к каталогу следует использовать команду ls –ld.

40. Изменение прав владения

chown — эта команда позволяет менять как владельца файла или каталога, так и группу пользователей файла;
chgrp — позволяет менять группу пользователей файла.

Команду chown может выполнять только суперпользователь. 
Обычный пользователь может менять командой chgrp группу для файла, если, во-первых, он владеет этим файлом и, во-вторых, он входит в группу, которую он устанавливает на файл.
chown user1 file
chgrp user1 user2 file
chown user1:sys file
chown -R user1:user1 dir
chgrp -Rv user1 dir

chown — эта команда позволяет менять как владельца файла или каталога, так и группу пользователей файла;

chgrp — позволяет менять группу пользователей файла.

Команду chown может выполнять только суперпользователь.

Обычный пользователь может менять командой chgrp группу для файла, если, во-первых, он владеет этим файлом и, во-вторых, он входит в группу, которую он устанавливает на файл.

chown user1 file

chgrp user1 user2 file

chown user1:sys file

chown -R user1:user1 dir

chgrp -Rv user1 dir

41. Автоматическая установка прав доступа к вновь создаваемым файлам

Команда umask предназначена для автоматической установки прав доступа к вновь создаваемым файлам и каталогам. 
Она позволяет задавать значение битовой маски, которая будет "вычитаться" из прав 777 для каталогов и 666 для файлов. 
При вызове этой команды без аргумента она возвратит текущее значение маски.
umask

Установка другого значения umask никоим образом не отразится на уже существующих файлах и каталогах, 
она участвует только в процессе определения прав на вновь создаваемые файлы и каталоги.
umask 002

umask  Каталоги   Файлы
002      775       664
007      770       660
022      755       644 - эта маска установлена по умолчанию во многих дистрибутивов
027      750       640
077      700       600

umask g=rwx,g=rx,o=
umask
0027

Команда umask предназначена для автоматической установки прав доступа к вновь создаваемым файлам и каталогам.

Она позволяет задавать значение битовой маски, которая будет "вычитаться" из прав 777 для каталогов и 666 для файлов.

При вызове этой команды без аргумента она возвратит текущее значение маски.

umask

Установка другого значения umask никоим образом не отразится на уже существующих файлах и каталогах,

она участвует только в процессе определения прав на вновь создаваемые файлы и каталоги.

umask 002

umask Каталоги Файлы

002 775 664

007 770 660

022 755 644 - эта маска установлена по умолчанию во многих дистрибутивов

027 750 640

077 700 600

umask g=rwx,g=rx,o=

umask

0027

42. Специальные биты прав доступа: SUID, SGID и sticky bit

Помимо битов, устанавливающих разрешения на доступ к файлу, существуют специальные атрибуты, для которых предназначена еще одна триада битов:
sticky bit (save text mode) - бит "липучка" - кодируется восьмеричной 1 (двоичная 001)
SUID - бит подмены UID - кодируется восьмеричной 4 (100)
SGID - бит подмены GID - кодируется восьмеричной 2 (010)

В символьной нотации применяются символы t для sticky bit, s для SUID и SGID.

SUID отображается в виде буквы s в старшей триаде битов, отображающей права владельца
SGID отображается в виде буквы s в средней триаде битов, отображаю щей права группы
sticky bit отображается в виде буквы t в младшей триаде битов, отображающей права для всех остальных
Прописные символы S и T выводятся при отсутствии в этих триадах прав на исполнение, что обычно сигнализирует о ненормальном состоянии прав доступа.

ls -ld /tmp /bin/ping

У каждого процесса имеются четыре идентификатора:
RUID - Real UID, который всегда равен UID пользователя, выполнившего команду
RGID - Real GID, который всегда равен GID пользователя, выполнившего команду
EUID - Effective UID, который равен либо RUID, либо если на исполняемый файл установлен бит SUID, то UID владельца файла
EGID - Effective GID, который равен либо RGID, либо если на исполняемый файл установлен бит SGID, то GID владельца файла

В подавляющем большинстве случаев подмена владельца или группы осуществляется на root или какого-либо привилегированного пользователя или группу.

Установка sticky bit на каталог, в отношении которого пользователь имеет права на чтение и на запись, позволяет запретить удалять и изменять пользователю чужие файлы в этом каталоге. 
Это используется при установке прав доступа к каталогу /tmp, открытому на запись всем, поскольку иначе пользователь может удалить чужие временные файлы, 
находящиеся в этом каталоге, что может повлечь нежелательные последствия.

При установке атрибута SGID на каталог вновь созданные файлы в этом каталоге будут наследовать группу владельцев по группе владельцев каталога(так называемый "стиль BSD"), вместо RGID процесса, создающего файл.

u+s — для установки на файл бита SUID
g+s — для установки на файл или каталог бита SGID
o+t — для установки на каталог бита sticky bit

-rws--x--x         
Эффект для каталогов: НЕТ
Эффект для файлов: Команда исполняется от имени владельца файла 

-rwx--s--x
Эффект для каталогов: НЕТ      
Эффект для файлов: Команда исполняется от имени группы пользователей файла


drwxrws---
Эффект для каталогов: На файлы, создаваемые в каталоге, будет установлена такая же группа, как у каталога
Эффект для файлов: НЕТ

drwxrwxrwt
Эффект для каталогов: В каталоге можно удалять или переименовывать только собственные файлы
Эффект для файлов: НЕТ

Помимо битов, устанавливающих разрешения на доступ к файлу, существуют специальные атрибуты, для которых предназначена еще одна триада битов:

sticky bit (save text mode) - бит "липучка" - кодируется восьмеричной 1 (двоичная 001)

SUID - бит подмены UID - кодируется восьмеричной 4 (100)

SGID - бит подмены GID - кодируется восьмеричной 2 (010)

В символьной нотации применяются символы t для sticky bit, s для SUID и SGID.

SUID отображается в виде буквы s в старшей триаде битов, отображающей права владельца

SGID отображается в виде буквы s в средней триаде битов, отображаю щей права группы

sticky bit отображается в виде буквы t в младшей триаде битов, отображающей права для всех остальных

Прописные символы S и T выводятся при отсутствии в этих триадах прав на исполнение, что обычно сигнализирует о ненормальном состоянии прав доступа.

ls -ld /tmp /bin/ping

У каждого процесса имеются четыре идентификатора:

RUID - Real UID, который всегда равен UID пользователя, выполнившего команду

RGID - Real GID, который всегда равен GID пользователя, выполнившего команду

EUID - Effective UID, который равен либо RUID, либо если на исполняемый файл установлен бит SUID, то UID владельца файла

EGID - Effective GID, который равен либо RGID, либо если на исполняемый файл установлен бит SGID, то GID владельца файла

В подавляющем большинстве случаев подмена владельца или группы осуществляется на root или какого-либо привилегированного пользователя или группу.

Установка sticky bit на каталог, в отношении которого пользователь имеет права на чтение и на запись, позволяет запретить удалять и изменять пользователю чужие файлы в этом каталоге.

Это используется при установке прав доступа к каталогу /tmp, открытому на запись всем, поскольку иначе пользователь может удалить чужие временные файлы,

находящиеся в этом каталоге, что может повлечь нежелательные последствия.

При установке атрибута SGID на каталог вновь созданные файлы в этом каталоге будут наследовать группу владельцев по группе владельцев каталога(так называемый "стиль BSD"), вместо RGID процесса, создающего файл.

u+s — для установки на файл бита SUID

g+s — для установки на файл или каталог бита SGID

o+t — для установки на каталог бита sticky bit

-rws--x--x

Эффект для каталогов: НЕТ

Эффект для файлов: Команда исполняется от имени владельца файла

-rwx--s--x

Эффект для каталогов: НЕТ

Эффект для файлов: Команда исполняется от имени группы пользователей файла

drwxrws---

Эффект для каталогов: На файлы, создаваемые в каталоге, будет установлена такая же группа, как у каталога

Эффект для файлов: НЕТ

drwxrwxrwt

Эффект для каталогов: В каталоге можно удалять или переименовывать только собственные файлы

Эффект для файлов: НЕТ

Редактор vi:

Полноэкранный текстовый редактор vi (от англ. visual) универсален, но сейчас он чаще всего используется для редактирования исходных текстов программ и конфигурационных файлов. Команды его подобраны таким образом,
что он будет работать даже на терминалах, не обладающих клавишами управления курсором. 
В современных версиях GNU/Linux обычно устанавливается редактор текста vim (vi improved), являющийся дальнейшим развитием vi.
Имеется также графическая оконная версия gvim редактора vi. 
Она предоставляет современный интерфейс меню, что значительно облегчает работу для начинающих.

Запускают vi следующим образом:
vi — в таком случае vi будет запущен для ввода текста
vi - — текст будет считан из стандартного потока ввода (stdin)
vi filename — файл будет открыт для редактирования
view filename или vi –R filename — файл будет открыт для просмотра
vi +[num] filename — курсор будет поставлен на строку с номером num или на последнюю строку, если num не указан
vi +/regexp filename — файл будет открыт для редактирования и курсор будет установлен на первое вхождение регулярного выражения regexp

ЛОЛ:
Для "срочной эвакуации" из vi следует нажать клавишу <Esc>, а затем набрать команду :q!. 
Эта команда обеспечит выход из vi без сохранения изменений.

Редактор vim обладает развитой системой помощи, которая может быть получена посредством команды :help, если ее набрать после нажатия клавиши <Esc>.

Редактор vi обладает тремя различными режимами работы.

- Командный режим, в котором vi оказывается при его запуске и при нажатии клавиши <Esc>. 
В этом режиме осуществляется перемещение курсора, просмотр и редактирование текста.

- Режим ввода текста, в который vi переходит при вызове любой из команд вставки или добавления текста, например, i. 
В этом режиме не следует пользоваться клавишами перемещения курсора по тексту. 
Этот режим используется исключительно для ввода нового текста. 
Для выхода из этого режима применяется клавиша <Esc>.

- Режим двоеточия, или, иначе, режим последней строки, в который vi переходит при нажатии клавиши <:> в командном режиме. 
В этом режиме работают такие команды, как открытие нового файла или установка нумерации строк. 
Официальное название этого режима — ex mode, т. к. в нем можно использовать команды однострочного редактора ex (развитая версия ed).


h  - смещает курсор влево на одну позицию
j  - на строку вниз
k  - на строку вверх
l  - на позицию вправо
w  - на слово вправо
b  - на слово влево
e  - установить курсор в конец слова
0  - курсор в начало строки без учета отступа, т. е. в самое начало
^  - курсор на первый символ строки, не являющийся пробелом или табуляцией
$  - курсор в конец строки
)  - курсор на начало следующего предложения
(  - курсор на начало предыдущего предложения
}  - курсор в начало следующего абзаца
{  - курсор в начало предыдущего абзаца
G  - на последнюю строку документа
#G - переместить курсор на # — номер строки (например, 20G)
H  - установить курсор на первую строку экрана
L  - курсор на последнюю строку экрана
z+ - поместить текущую строку вверх экрана
z- - поместить текущую строку вниз экрана
z. - поместить текущую строку в центр экрана

i  - переход в режим вставки в позиции курсора
I  - переход в режим вставки в начале строки
a  - добавление после текущего символа
A  - добавление в конец строки
o  - вставка строки после текущей строки с переходом в режим вставки
O  - вставка строки до текущей строки с переходом в режим вставки
r  - замена символа в текущей позиции
R  - переход в режим замещения
x  - удаление символа в позиции курсора
X  - удаление предыдущего символа
s  - замена текущего символа и переход в режим вставки
S  - переходом в режим вставки
сс - переходом в режим вставки
cw - замена слова до пробела, табуляции (обе команды) или знака препинания
cW - замена слова до пробела, табуляции (обе команды) или знака препинания
dw - удаление слова до пробела, табуляции (обе) или знака препинания
dW - удаление слова до пробела, табуляции (обе) или знака препинания
dd - Удаление строки полностью (dd)
yy - копирование сроки в буфер обмена
yw - копирование слова до пробела, табуляции (обе) или знака препинания (dw)
yW - копирование слова до пробела, табуляции (обе) или знака препинания (dw)
p  - вставка из буфера после текущей позиции
P  - вставка из буфера до текущей позиции
~  - Смена регистра текущего символа
J  - объединение строк
u  - Отмена действия (от англ. undo)

Многие команды допускают использование перед ними числовых квантификаторов. 
Они указывают, сколько раз должно быть выполнено требуемое действие.

Например, следующая команда переместит курсор на двадцать строк вверх: 20k.

Например, команда 10x удалит десять символов, начиная с текущей позиции.
Команда 2Y запомнит в буфере обмена две строки, а команда 10p десять раз произведет их вставку (только в vim).


Команды поиска и замены строк
/шаблон — для поиска с текущей позиции до конца файла
?шаблон — для поиска с текущей позиции в начало файла

Поиск с заменой найденных строк в vi осуществляется с помощью команды
режима последней строки :s/шаблон/замена/

:s/ten/10/
:s/ten/10/g

Поиск и замена с игнорированием регистра:
:s/ten/10/i

Поиск всех вхождений строки по всему файлу
:%s/ten/10/gi

Оператор % указывает диапазон поиска - весь файл. 
Модификатор i добавлен для игнорирования регистра при поиске.


Диапазон поиска можно указывать:
 номерами начальной и конечной строк, например: :3,5s/ten/10/;
 номером конечной строки для замены с текущей строки: :,5s/ten/10/;
 смещением от текущей строки: :,+5s/ten/10/;
 символом конца файла: :3,$s/ten/10/.


Команды режима двоеточия:
:q  - выход из редактора
:q! - выход из редактора без сохранения изменений
:wq - выход из редактора с сохранением изменений
:x  - выход с сохранением, если текст был изменен
:w  - сохранение редактируемого файла
:w имя - задание имени файлу и сохранение или запись с другим именем
:e имя - открытие файла для редактирования
:e! имя - открытие файла с отказом от изменений в редактируемом файле
:r имя - вставка текста из файла в позиции курсора
:r! - команда Выполнение команды оболочки и вставка ее текстового вывода в файл
:y - копирование строки в буфер (можно указывать диапазон строк)
:d - удаление строк
:set showmode - показывать текущий режим работы
:set number - показывать номера строк

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

Полноэкранный текстовый редактор vi (от англ. visual) универсален, но сейчас он чаще всего используется для редактирования исходных текстов программ и конфигурационных файлов. Команды его подобраны таким образом,

что он будет работать даже на терминалах, не обладающих клавишами управления курсором.

В современных версиях GNU/Linux обычно устанавливается редактор текста vim (vi improved), являющийся дальнейшим развитием vi.

Имеется также графическая оконная версия gvim редактора vi.

Она предоставляет современный интерфейс меню, что значительно облегчает работу для начинающих.

Запускают vi следующим образом:

vi — в таком случае vi будет запущен для ввода текста

vi - — текст будет считан из стандартного потока ввода (stdin)

vi filename — файл будет открыт для редактирования

view filename или vi –R filename — файл будет открыт для просмотра

vi +[num] filename — курсор будет поставлен на строку с номером num или на последнюю строку, если num не указан

vi +/regexp filename — файл будет открыт для редактирования и курсор будет установлен на первое вхождение регулярного выражения regexp

ЛОЛ:

Для "срочной эвакуации" из vi следует нажать клавишу <Esc>, а затем набрать команду :q!.

Эта команда обеспечит выход из vi без сохранения изменений.

Редактор vim обладает развитой системой помощи, которая может быть получена посредством команды :help, если ее набрать после нажатия клавиши <Esc>.

Редактор vi обладает тремя различными режимами работы.

- Командный режим, в котором vi оказывается при его запуске и при нажатии клавиши <Esc>.

В этом режиме осуществляется перемещение курсора, просмотр и редактирование текста.

- Режим ввода текста, в который vi переходит при вызове любой из команд вставки или добавления текста, например, i.

В этом режиме не следует пользоваться клавишами перемещения курсора по тексту.

Этот режим используется исключительно для ввода нового текста.

Для выхода из этого режима применяется клавиша <Esc>.

- Режим двоеточия, или, иначе, режим последней строки, в который vi переходит при нажатии клавиши <:> в командном режиме.

В этом режиме работают такие команды, как открытие нового файла или установка нумерации строк.

Официальное название этого режима — ex mode, т. к. в нем можно использовать команды однострочного редактора ex (развитая версия ed).

h - смещает курсор влево на одну позицию

j - на строку вниз

k - на строку вверх

l - на позицию вправо

w - на слово вправо

b - на слово влево

e - установить курсор в конец слова

0 - курсор в начало строки без учета отступа, т. е. в самое начало

^ - курсор на первый символ строки, не являющийся пробелом или табуляцией

$ - курсор в конец строки

) - курсор на начало следующего предложения

( - курсор на начало предыдущего предложения

} - курсор в начало следующего абзаца

{ - курсор в начало предыдущего абзаца

G - на последнюю строку документа

#G - переместить курсор на # — номер строки (например, 20G)

H - установить курсор на первую строку экрана

L - курсор на последнюю строку экрана

z+ - поместить текущую строку вверх экрана

z- - поместить текущую строку вниз экрана

z. - поместить текущую строку в центр экрана

i - переход в режим вставки в позиции курсора

I - переход в режим вставки в начале строки

a - добавление после текущего символа

A - добавление в конец строки

o - вставка строки после текущей строки с переходом в режим вставки

O - вставка строки до текущей строки с переходом в режим вставки

r - замена символа в текущей позиции

R - переход в режим замещения

x - удаление символа в позиции курсора

X - удаление предыдущего символа

s - замена текущего символа и переход в режим вставки

S - переходом в режим вставки

сс - переходом в режим вставки

cw - замена слова до пробела, табуляции (обе команды) или знака препинания

cW - замена слова до пробела, табуляции (обе команды) или знака препинания

dw - удаление слова до пробела, табуляции (обе) или знака препинания

dW - удаление слова до пробела, табуляции (обе) или знака препинания

dd - Удаление строки полностью (dd)

yy - копирование сроки в буфер обмена

yw - копирование слова до пробела, табуляции (обе) или знака препинания (dw)

yW - копирование слова до пробела, табуляции (обе) или знака препинания (dw)

p - вставка из буфера после текущей позиции

P - вставка из буфера до текущей позиции

~ - Смена регистра текущего символа

J - объединение строк

u - Отмена действия (от англ. undo)

Многие команды допускают использование перед ними числовых квантификаторов.

Они указывают, сколько раз должно быть выполнено требуемое действие.

Например, следующая команда переместит курсор на двадцать строк вверх: 20k.

Например, команда 10x удалит десять символов, начиная с текущей позиции.

Команда 2Y запомнит в буфере обмена две строки, а команда 10p десять раз произведет их вставку (только в vim).

Команды поиска и замены строк

/шаблон — для поиска с текущей позиции до конца файла

?шаблон — для поиска с текущей позиции в начало файла

Поиск с заменой найденных строк в vi осуществляется с помощью команды

режима последней строки :s/шаблон/замена/

:s/ten/10/

:s/ten/10/g

Поиск и замена с игнорированием регистра:

:s/ten/10/i

Поиск всех вхождений строки по всему файлу

:%s/ten/10/gi

Оператор % указывает диапазон поиска - весь файл.

Модификатор i добавлен для игнорирования регистра при поиске.

Диапазон поиска можно указывать:

номерами начальной и конечной строк, например: :3,5s/ten/10/;

номером конечной строки для замены с текущей строки: :,5s/ten/10/;

смещением от текущей строки: :,+5s/ten/10/;

символом конца файла: :3,$s/ten/10/.

Команды режима двоеточия:

:q - выход из редактора

:q! - выход из редактора без сохранения изменений

:wq - выход из редактора с сохранением изменений

:x - выход с сохранением, если текст был изменен

:w - сохранение редактируемого файла

:w имя - задание имени файлу и сохранение или запись с другим именем

:e имя - открытие файла для редактирования

:e! имя - открытие файла с отказом от изменений в редактируемом файле

:r имя - вставка текста из файла в позиции курсора

:r! - команда Выполнение команды оболочки и вставка ее текстового вывода в файл

:y - копирование строки в буфер (можно указывать диапазон строк)

:d - удаление строк

:set showmode - показывать текущий режим работы

:set number - показывать номера строк

43. Текстовые файлы и потоки

стандартный поток ввода (stdin), файловый дескриптор которого — 0
стандартный поток вывода (stdout), файловый дескриптор — 1
стандартный поток вывода ошибок (stderr), файловый дескриптор — 2

Стандартные потоки не надо специально открывать в программах, т. к. они автоматически ассоциируются с процессом при его создании.

Поток ввода открыт на чтение, а потоки вывода и ошибок — на запись.
Обычно по умолчанию стандартный поток ввода связан с клавиатурой, а стандартные потоки вывода и ошибок — с дисплеем.

Перенаправление потоков ввода/вывода:
< — оператор перенаправления стандартного потока ввода
> или 1> — операторы перенаправления стандартного потока вывода
2> — оператор перенаправления стандартного потока вывода ошибок
>> — для перенаправления потока вывода на добавление к файлу
2>> — для перенаправления потока вывода ошибок на добавление к файлу

Эффект замещения старого содержимого файлов, возникающий при перенаправлении в них потоков вывода и ошибок, часто бывает нежелателен.
Оболочка Bash позволяет исключить стирание содержимого файлов при перенаправлении в них потоков вывода или ошибок с помощью команды 
set –o noclobber.

Однако все же есть способ даже при установленной опции noclobber переписать содержимое существующего файла с помощью операции перенаправления вывода или вывода ошибок. 

Для этого можно воспользоваться операторами:
>| — перенаправление потока вывода с гарантированной перезаписью файла
2>| — перенаправление потока ошибок с гарантированной перезаписью файла


Многие команды, работающие с текстом, позволяют использовать поток ввода вместо открытия на чтение файла. 
Для завершения ввода с клавиатуры следует нажать комбинацию клавиш <Ctrl>+<D> для передачи в поток ввода символа окончания потока. 
После этого команда, читающая стандартный поток ввода, завершит свою работу, пример:
$ cat > f1
Privet
<Ctrl>+<D>
$ cat f1
Privet
В примере команда cat > f1 получила через стандартный ввод текст Privet с клавиатуры, который был записан через стандартный поток вывода в файл f1.


В сценариях оболочки часто возникает необходимость передать блок текста, находящийся непосредственно в тексте сценария, какой-либо команде этого же сценария. 
В таких случаях используют конструкцию here document (документ здесь) - << (два знака "меньше"). 
В таком случае для окончания ввода используется любой удобный символ вместо символа конца файла. 
Этот символ должен быть указан после << и должен быть единственным символом в строке.

cat > file.txt << .
Privet Medved lol
.

cat > file2.txt << "EOF"
Vot escho primer razraz
EOF

стандартный поток ввода (stdin), файловый дескриптор которого — 0

стандартный поток вывода (stdout), файловый дескриптор — 1

стандартный поток вывода ошибок (stderr), файловый дескриптор — 2

Стандартные потоки не надо специально открывать в программах, т. к. они автоматически ассоциируются с процессом при его создании.

Поток ввода открыт на чтение, а потоки вывода и ошибок — на запись.

Обычно по умолчанию стандартный поток ввода связан с клавиатурой, а стандартные потоки вывода и ошибок — с дисплеем.

Перенаправление потоков ввода/вывода:

< — оператор перенаправления стандартного потока ввода

> или 1> — операторы перенаправления стандартного потока вывода

2> — оператор перенаправления стандартного потока вывода ошибок

>> — для перенаправления потока вывода на добавление к файлу

2>> — для перенаправления потока вывода ошибок на добавление к файлу

Эффект замещения старого содержимого файлов, возникающий при перенаправлении в них потоков вывода и ошибок, часто бывает нежелателен.

Оболочка Bash позволяет исключить стирание содержимого файлов при перенаправлении в них потоков вывода или ошибок с помощью команды

set –o noclobber.

Однако все же есть способ даже при установленной опции noclobber переписать содержимое существующего файла с помощью операции перенаправления вывода или вывода ошибок.

Для этого можно воспользоваться операторами:

>| — перенаправление потока вывода с гарантированной перезаписью файла

2>| — перенаправление потока ошибок с гарантированной перезаписью файла

Многие команды, работающие с текстом, позволяют использовать поток ввода вместо открытия на чтение файла.

Для завершения ввода с клавиатуры следует нажать комбинацию клавиш <Ctrl>+<D> для передачи в поток ввода символа окончания потока.

После этого команда, читающая стандартный поток ввода, завершит свою работу, пример:

$ cat > f1

Privet

$ cat f1

Privet

В примере команда cat > f1 получила через стандартный ввод текст Privet с клавиатуры, который был записан через стандартный поток вывода в файл f1.

В сценариях оболочки часто возникает необходимость передать блок текста, находящийся непосредственно в тексте сценария, какой-либо команде этого же сценария.

В таких случаях используют конструкцию here document (документ здесь) - << (два знака "меньше").

В таком случае для окончания ввода используется любой удобный символ вместо символа конца файла.

Этот символ должен быть указан после << и должен быть единственным символом в строке.

cat > file.txt << .

Privet Medved lol

cat > file2.txt << "EOF"

Vot escho primer razraz

EOF

44. Конвейеры и фильтры

last | view -

Выводимый командой last список входивших в сеанс пользователей передан через конвейер команде просмотра view (вызов vi на чтение, нажмите :q для выхода). 
Знак "дефис" после команды view сообщает, что текст должен быть получен из потока ввода, в который передает свой вывод команда last

w | nano -

Конвейер может состоять из множества команд, причем команды в середине конвейера обязательно должны быть фильтрами. 
Фильтр — это команда, способная принимать поток данных через стандартный поток ввода, обрабатывать их и выводить обработанные данные в стандартный поток вывода.

Правила построения конвейера таковы:
1. Первая команда конвейера должна выводить информацию в поток вывода.
2. Команды, не находящиеся по краям конвейера, должны быть фильтрами.
3. Последняя команда в конвейере должна читать стандартный поток ввода.

Пример фильтра — команда tee. Она никак не меняет полученные из стандартного потока ввода данные, а лишь копирует их в стандартный поток вывода и в файлы, заданные ей в качестве аргументов

ps -o comm= -o pid= | tee ps.txt | sort
cat ps.txt

В примере команда ps выводит список процессов без заголовка в два столбца: команда и PID. 
Содержимое файла ps.txt содержит вывод команды ps, т. к. команда tee получила его из стандартного потока ввода. 
Эти же данные tee передала через поток вывода далее команде sort для сортировки.
На экран выводится сортированный список процессов, а в файле ps.txt — он не отсортированный.

Команду tee часто используют для отладки работы сложных конвейеров, состоящих из множества команд. 
Эту команду удобно устанавливать в месте конвейера, которое вызывает подозрения. 
Так как в файле, указанном в качестве аргумента tee, будет находиться та же информация, 
что была передана в данном месте конвейера, то по ней легко можно будет определить наличие и суть ошибок.

Большинство фильтров предназначено для обработки исключительно текста, но это вовсе не обязательно. 
Команда tee, например, может обрабатывать и бинарные данные. 
При этом стоит позаботиться лишь о том, чтобы бинарные данные не были выведены на экран, например, перенаправив поток вывода в /dev/null.

last | view -

Выводимый командой last список входивших в сеанс пользователей передан через конвейер команде просмотра view (вызов vi на чтение, нажмите :q для выхода).

Знак "дефис" после команды view сообщает, что текст должен быть получен из потока ввода, в который передает свой вывод команда last

w | nano -

Конвейер может состоять из множества команд, причем команды в середине конвейера обязательно должны быть фильтрами.

Фильтр — это команда, способная принимать поток данных через стандартный поток ввода, обрабатывать их и выводить обработанные данные в стандартный поток вывода.

Правила построения конвейера таковы:

1. Первая команда конвейера должна выводить информацию в поток вывода.

2. Команды, не находящиеся по краям конвейера, должны быть фильтрами.

3. Последняя команда в конвейере должна читать стандартный поток ввода.

Пример фильтра — команда tee. Она никак не меняет полученные из стандартного потока ввода данные, а лишь копирует их в стандартный поток вывода и в файлы, заданные ей в качестве аргументов

ps -o comm= -o pid= | tee ps.txt | sort

cat ps.txt

В примере команда ps выводит список процессов без заголовка в два столбца: команда и PID.

Содержимое файла ps.txt содержит вывод команды ps, т. к. команда tee получила его из стандартного потока ввода.

Эти же данные tee передала через поток вывода далее команде sort для сортировки.

На экран выводится сортированный список процессов, а в файле ps.txt — он не отсортированный.

Команду tee часто используют для отладки работы сложных конвейеров, состоящих из множества команд.

Эту команду удобно устанавливать в месте конвейера, которое вызывает подозрения.

Так как в файле, указанном в качестве аргумента tee, будет находиться та же информация,

что была передана в данном месте конвейера, то по ней легко можно будет определить наличие и суть ошибок.

Большинство фильтров предназначено для обработки исключительно текста, но это вовсе не обязательно.

Команда tee, например, может обрабатывать и бинарные данные.

При этом стоит позаботиться лишь о том, чтобы бинарные данные не были выведены на экран, например, перенаправив поток вывода в /dev/null.

45. Команда echo

Команда echo просто выводит строку, заданную ей в качестве аргумента.

echo "It's cool"
echo $PS1

Важна опция -e, позволяющая команде echo интерпретировать восьмеричные числа как символы ASCII
echo -e '\0101\t\0102'

Команда echo автоматически вставляет после выводимой строки символ перевода строки. Для отмены этого можно использовать опцию -n.
echo -ne '\033c'

Команда echo просто выводит строку, заданную ей в качестве аргумента.

echo "It's cool"

echo $PS1

Важна опция -e, позволяющая команде echo интерпретировать восьмеричные числа как символы ASCII

echo -e '\0101\t\0102'

Команда echo автоматически вставляет после выводимой строки символ перевода строки. Для отмены этого можно использовать опцию -n.

echo -ne '\033c'

46. Просмотр файлов с помощью more и less

Выход из пейджера q 
Получение встроенной помощи по командам h 
Прокрутка страницы вперед <Пробел> <PgDn>
Прокрутка страницы назад <Ctrl>+<B> <PgUp>
Прокрутка на строку вперед <Enter> <Ctrl>+<N>
Прокрутка на строку назад <Ctrl>+<P>
Переход в конец файла G
Переход в начало файла g
Поиск по шаблону (регулярному выражению) /шаблон

Выход из пейджера q

Получение встроенной помощи по командам h

Прокрутка страницы вперед <Пробел> <PgDn>

Прокрутка страницы назад <Ctrl>+<B> <PgUp>

Прокрутка на строку вперед <Enter> <Ctrl>+<N>

Прокрутка на строку назад <Ctrl>+<P>

Переход в конец файла G

Переход в начало файла g

Поиск по шаблону (регулярному выражению) /шаблон

47. head / tail / cut / awk / sed

Команды head и tail выводят по умолчанию десять первых и последних строк соответственно потока или файла. 
Требуемое количество строк может быть указано.
head -3 /etc/passwd
tail –f /var/log/messages

Вывод требуемых полей с помощью cut
cut -f1 /etc/hosts
cut -f1,3 -d: /etc/passwd

Потоковый редактор sed
Потоковый редактор sed позволяет либо прочитать входной поток для обработки из стандартного потока ввода, либо осуществить чтение текстового файла, заданного в качестве аргумента. 
Обработанный текст передается в стандартный поток вывода. 
Редактор sed работает с целыми строками текста.
- номером строки;
- диапазоном строк с указанием первого и последнего номеров строк в диапазоне через запятую (например, команда sed '2,4d' удалит в потоке строки со второй по четвертую включительно).  
  Можно указать диапазон до последней строки.
  Последняя строка обозначается символом доллара ($);
- с помощью регулярного выражения или, в простейшем случае, подстроки, которая должна находиться в адресуемых строках.

Удаление строк по подстроке
$ ps -e | sed '/tty/d'

Наиболее часто используются следующие команды языка sed:
d — удаление
p — вывод строки (от англ. print)
s — замена искомой подстроки на заданную подстроку
i — вставка строки
a — добавление строки
c — изменение всей строки на заданную строку
q — выход без дальнейшей обработки и вывода строк
y — команда транслитерации символ в символ
= — команда печати номера строки

Команда q редактора sed:
sed /daemon/q /etc/passwd

Замена строк с помощью sed:
sed s/bash/zsh/ /etc/passwd

Требуется вывести содержание файла /etc/group (файл с информацией о группах пользователей и членстве в них) следующим образом:
- должны быть выведены только группы, включающие пользователя user1;
- все знаки двоеточия должны быть заменены символом подчеркивания.

Сложная команда sed
sed -n /user1/s/:/_/gp /etc/group

Добавление строк с помощью sed
last | sed '/user1/a \#####################'


Общий вид сценария awk:
BEGIN
Команды формирования заголовка отчета
/шаблон/ { команды обработки строк }
END
Команды формирования завершения отчета

Сценарий awk может состоять из трех частей:
- команды формирования заголовка — следуют после BEGIN
- команды основного цикла обработки строк заключаются в фигурные скобки
- команды формирования завершения отчета — следуют после END

Команды могут находиться в файле сценария, имя которого должно быть указано после опции -f, либо может быть задано в качестве аргумента awk.
Если шаблон для команды не указан, то обработке подвергаются все строки. 
Если же, наоборот, шаблон задан, а команда — нет, то в stdout выводятся только строки, подходящие шаблону. Например, следующая команда выведет из файла /etc/passwd все строки, содержащие подстроку bash.

awk /bash/ /etc/passwd

Для этого необходимо вывести первое и третье поле этого файла. 
Утилита awk позволяет обращаться к полям строк, разделенных с помощью пробелов
или табуляций, следующим образом: $0 — вся строка, $1 — первое поле, $2 — второе и т. д.
В нашем случае разделителем полей является двоеточие, поэтому данный символ надо указать после опции -F
Вывод требуемых полей обеспечивает команда print.

awk -F: '/bash/{print $1,$3}' /etc/passwd

Фильтрация по числовому значению
awk -F: '$3>100{print $1,$3}' /etc/passwd

Одной из наиболее часто используемых встроенных переменных является NR — номер строки в потоке. 
Так, в предыдущем примере перед именами пользователей можно вывести номера строк, считанных из файла /etc/passwd.
awk -F: '$3>100{print NR,$1,$3}' /etc/passwd

Пример демонстрирует, как можно получить список только тех файлов, длина имен которых больше 15 символов.
ls | awk 'length($0)>15'

Команды head и tail выводят по умолчанию десять первых и последних строк соответственно потока или файла.

Требуемое количество строк может быть указано.

head -3 /etc/passwd

tail –f /var/log/messages

Вывод требуемых полей с помощью cut

cut -f1 /etc/hosts

cut -f1,3 -d: /etc/passwd

Потоковый редактор sed

Потоковый редактор sed позволяет либо прочитать входной поток для обработки из стандартного потока ввода, либо осуществить чтение текстового файла, заданного в качестве аргумента.

Обработанный текст передается в стандартный поток вывода.

Редактор sed работает с целыми строками текста.

- номером строки;

- диапазоном строк с указанием первого и последнего номеров строк в диапазоне через запятую (например, команда sed '2,4d' удалит в потоке строки со второй по четвертую включительно).

Можно указать диапазон до последней строки.

Последняя строка обозначается символом доллара ($);

- с помощью регулярного выражения или, в простейшем случае, подстроки, которая должна находиться в адресуемых строках.

Удаление строк по подстроке

$ ps -e | sed '/tty/d'

Наиболее часто используются следующие команды языка sed:

d — удаление

p — вывод строки (от англ. print)

s — замена искомой подстроки на заданную подстроку

i — вставка строки

a — добавление строки

c — изменение всей строки на заданную строку

q — выход без дальнейшей обработки и вывода строк

y — команда транслитерации символ в символ

= — команда печати номера строки

Команда q редактора sed:

sed /daemon/q /etc/passwd

Замена строк с помощью sed:

sed s/bash/zsh/ /etc/passwd

Требуется вывести содержание файла /etc/group (файл с информацией о группах пользователей и членстве в них) следующим образом:

- должны быть выведены только группы, включающие пользователя user1;

- все знаки двоеточия должны быть заменены символом подчеркивания.

Сложная команда sed

sed -n /user1/s/:/_/gp /etc/group

Добавление строк с помощью sed

last | sed '/user1/a \#####################'

Общий вид сценария awk:

BEGIN

Команды формирования заголовка отчета

/шаблон/ { команды обработки строк }

END

Команды формирования завершения отчета

Сценарий awk может состоять из трех частей:

- команды формирования заголовка — следуют после BEGIN

- команды основного цикла обработки строк заключаются в фигурные скобки

- команды формирования завершения отчета — следуют после END

Команды могут находиться в файле сценария, имя которого должно быть указано после опции -f, либо может быть задано в качестве аргумента awk.

Если шаблон для команды не указан, то обработке подвергаются все строки.

Если же, наоборот, шаблон задан, а команда — нет, то в stdout выводятся только строки, подходящие шаблону. Например, следующая команда выведет из файла /etc/passwd все строки, содержащие подстроку bash.

awk /bash/ /etc/passwd

Для этого необходимо вывести первое и третье поле этого файла.

Утилита awk позволяет обращаться к полям строк, разделенных с помощью пробелов

или табуляций, следующим образом: $0 — вся строка, $1 — первое поле, $2 — второе и т. д.

В нашем случае разделителем полей является двоеточие, поэтому данный символ надо указать после опции -F

Вывод требуемых полей обеспечивает команда print.

awk -F: '/bash/{print $1,$3}' /etc/passwd

Фильтрация по числовому значению

awk -F: '$3>100{print $1,$3}' /etc/passwd

Одной из наиболее часто используемых встроенных переменных является NR — номер строки в потоке.

Так, в предыдущем примере перед именами пользователей можно вывести номера строк, считанных из файла /etc/passwd.

awk -F: '$3>100{print NR,$1,$3}' /etc/passwd

Пример демонстрирует, как можно получить список только тех файлов, длина имен которых больше 15 символов.

ls | awk 'length($0)>15'

48. Сравнение файлов и каталогов команды diff и patch

Опция q отменяет вывод отличающихся строк и печатает только сообщение о том, имеются ли отличия. 
Опция -i применяется в случае, если необходимо игнорировать регистр в сравниваемых файлах.
Часто используемые опции -u и -c выводят информацию, соответственно, в обобщенном (unified) и контекстном (context) форматах.

ps > ps1.txt
ps > ps2.txt
diff ps1.txt ps2.txt

diff -u ps1.txt ps2.txt


Особенностью этих форматов является вывод информации об именах сравниваемых файлов. 
Эта информация может быть использована для реконструкции одного из сравниваемых файлов по-другому с помощью известных отличий этих файлов. 
Для этого используется утилита patch, позволяющая обновлять содержимое файлов с помощью так называемых "заплаток" (patches). 
Файлы-"заплатки" создаются с помощью утилиты diff, а обновление файлов производится утилитой patch.

Пример с файлами f1 и f2
0. создаем файлы f1.txt и f2.txt
cat > f1.txt << .
bad file
.
cat > f2.txt << .
good file
.
1. Сравниваем файлы
diff -Nau f1.txt f2.txt > patch-f1-from-f2
2. Применяем патч 
patch -p0 < patch-f1-from-f2


Создание и применение патча для директории
Допустим, есть две директории dir1 и dir2
diff -Naur ./dir1 ./dir2r > ./patch
Теперь, чтобы установить патч, нужно запустить:
patch -p0 < ./patch
Только не забудьте, что патчиться будет каталог ./dir1
Здесь главное, на что нужно обратить внимание, — это знак перенаправления < и -p 
Без перенаправления < программа patch будет спрашивать, какой файл патчить. 
Второй вариант — использовать ключ -i в место перенаправления <, т.е.

patch -p0 -i ./patch

Подведем итог:
patch -p0 < ./patch  - этой командой мы устанавливаем патч 
patch -p0 -i  patch1 - этой командой мы устанавливаем патч 
Но если любую из команд повторить то у нас спросят желаем ли мы откатить все обратно, и если нажмем "y" то все что сделал патч будет отменено.

Опция q отменяет вывод отличающихся строк и печатает только сообщение о том, имеются ли отличия.

Опция -i применяется в случае, если необходимо игнорировать регистр в сравниваемых файлах.

Часто используемые опции -u и -c выводят информацию, соответственно, в обобщенном (unified) и контекстном (context) форматах.

ps > ps1.txt

ps > ps2.txt

diff ps1.txt ps2.txt

diff -u ps1.txt ps2.txt

Особенностью этих форматов является вывод информации об именах сравниваемых файлов.

Эта информация может быть использована для реконструкции одного из сравниваемых файлов по-другому с помощью известных отличий этих файлов.

Для этого используется утилита patch, позволяющая обновлять содержимое файлов с помощью так называемых "заплаток" (patches).

Файлы-"заплатки" создаются с помощью утилиты diff, а обновление файлов производится утилитой patch.

Пример с файлами f1 и f2

0. создаем файлы f1.txt и f2.txt

cat > f1.txt << .

bad file

cat > f2.txt << .

good file

1. Сравниваем файлы

diff -Nau f1.txt f2.txt > patch-f1-from-f2

2. Применяем патч

patch -p0 < patch-f1-from-f2

Создание и применение патча для директории

Допустим, есть две директории dir1 и dir2

diff -Naur ./dir1 ./dir2r > ./patch

Теперь, чтобы установить патч, нужно запустить:

patch -p0 < ./patch

Только не забудьте, что патчиться будет каталог ./dir1

Здесь главное, на что нужно обратить внимание, — это знак перенаправления < и -p

Без перенаправления < программа patch будет спрашивать, какой файл патчить.

Второй вариант — использовать ключ -i в место перенаправления <, т.е.

patch -p0 -i ./patch

Подведем итог:

patch -p0 < ./patch - этой командой мы устанавливаем патч

patch -p0 -i patch1 - этой командой мы устанавливаем патч

Но если любую из команд повторить то у нас спросят желаем ли мы откатить все обратно, и если нажмем "y" то все что сделал патч будет отменено.

49. Отличия файлов / разные файлы

Если же необходимо просто выявить факт отличия файлов, пользуются командой проверки контрольной суммы sum или же командами вычисления хэш-функций md5sum, sha256sum или подобными.
sum filename
md5sum filename1
md5sum Filename2
sha256sum  filename1

Если же необходимо просто выявить факт отличия файлов, пользуются командой проверки контрольной суммы sum или же командами вычисления хэш-функций md5sum, sha256sum или подобными.

sum filename

md5sum filename1

md5sum Filename2

sha256sum filename1

50. Замена символов табуляции на пробелы

Команда expand предназначена для преобразования символов табуляции в пробелы. 
По умолчанию символ табуляции заменяется восемью пробелами, однако можно точно указать требуемое количество пробелов для замены табуляции.
Имеется команда unexpand, заменяющая пробелы символами табуляции

echo -e 'Строка\tс\tтабуляцией'
echo -e 'Строка\tс\tтабуляцией' | expand -3

Команда expand предназначена для преобразования символов табуляции в пробелы.

По умолчанию символ табуляции заменяется восемью пробелами, однако можно точно указать требуемое количество пробелов для замены табуляции.

Имеется команда unexpand, заменяющая пробелы символами табуляции

echo -e 'Строка\tс\tтабуляцией'

echo -e 'Строка\tс\tтабуляцией' | expand -3

51. Простое форматирование текста

Команда fmt предназначена для форматирования текста. 
Команда объединяет и разделяет строки так, чтобы результирующая строка имела заданную длину (по умолчанию — 75 символов). 
Команда fmt пытается разделить длинные строки, начиная с длины строки, меньшей на 7%, чем установленная максимальная длина строки. 
Опция -w позволяет указать ширину текста в символах.
Если необходимо только разделять строки, но не объединять их, то следует использовать опцию -s.


ls -l /home | fmt -w50 -s

Команда fmt предназначена для форматирования текста.

Команда объединяет и разделяет строки так, чтобы результирующая строка имела заданную длину (по умолчанию — 75 символов).

Команда fmt пытается разделить длинные строки, начиная с длины строки, меньшей на 7%, чем установленная максимальная длина строки.

Опция -w позволяет указать ширину текста в символах.

Если необходимо только разделять строки, но не объединять их, то следует использовать опцию -s.

ls -l /home | fmt -w50 -s

52. Сортировка строк

Команда sort предназначена для сортировки строк файлов — аргументов.
Если файлы не указаны, команда сортирует строки из стандартного потока ввода. 
По умолчанию команда sort сортирует строки в алфавитном порядке по возрастанию. 
При необходимости сортировки строк в порядке убывания используется опция -r .
Команда sort способна также сортировать текстовый поток не только по целым строкам, но и по отдельным полям строк. 
Разделителем полей по умолчанию считается пробел. 
Если используется иной разделитель полей, его следует указать после опции -t.
Для указания номера поля для сортировки используется опция -k.
Опция -n позволяет задать команде sort не алфавитный, а числовой порядок сортировки. 
Пример показывает, как отсортировать учетные записи пользователей, в порядке возрастания их UID.

sort -t: -k3 –n /etc/passwd

В файле /etc/passwd разделителем полей является двоеточие. 
Это установлено опцией -t. 
Сортировка была выполнена по третьему полю (опция -k3), в котором содержатся UID пользователей. 
Сортировка была проведена в числовом порядке, что было установлено опцией -n.

Команда sort предназначена для сортировки строк файлов — аргументов.

Если файлы не указаны, команда сортирует строки из стандартного потока ввода.

По умолчанию команда sort сортирует строки в алфавитном порядке по возрастанию.

При необходимости сортировки строк в порядке убывания используется опция -r .

Команда sort способна также сортировать текстовый поток не только по целым строкам, но и по отдельным полям строк.

Разделителем полей по умолчанию считается пробел.

Если используется иной разделитель полей, его следует указать после опции -t.

Для указания номера поля для сортировки используется опция -k.

Опция -n позволяет задать команде sort не алфавитный, а числовой порядок сортировки.

Пример показывает, как отсортировать учетные записи пользователей, в порядке возрастания их UID.

sort -t: -k3 –n /etc/passwd

В файле /etc/passwd разделителем полей является двоеточие.

Это установлено опцией -t.

Сортировка была выполнена по третьему полю (опция -k3), в котором содержатся UID пользователей.

Сортировка была проведена в числовом порядке, что было установлено опцией -n.

53. Вывод неповторяющихся строк

Фильтр uniq удаляет повторения строки в сортированном потоке. 
Команда в примере выведет строки файлов f1 и f2 так, что если какая-либо строка имеется в обоих файлах, то в поток вывода попадет только одна ее копия.
cat f1 f2 | sort | uniq

Опция -c команды uniq позволяет подсчитать количество вхождений каждой строки во входном потоке.
Опция -d позволяет вывести только дублирующийся строки, что помогает, например, узнать, какие строки имеются одновременно в разных файлах. 
Опция -u выводит только уникальные (не дублированные) строки. 
Для игнорирования регистра при сравнении строк можно установить опцию -i.
Если строки входного потока разделены на поля, то можно пропустить заранее заданное количество полей до определения уникальности строки. 
Для пропуска первых полей, разделенных пробелами, необходимо указать их количество после опции -f. 
Например, команда uniq –f6 пропустит шесть первых полей входного потока при определении уникальности строк.

Фильтр uniq удаляет повторения строки в сортированном потоке.

Команда в примере выведет строки файлов f1 и f2 так, что если какая-либо строка имеется в обоих файлах, то в поток вывода попадет только одна ее копия.

cat f1 f2 | sort | uniq

Опция -c команды uniq позволяет подсчитать количество вхождений каждой строки во входном потоке.

Опция -d позволяет вывести только дублирующийся строки, что помогает, например, узнать, какие строки имеются одновременно в разных файлах.

Опция -u выводит только уникальные (не дублированные) строки.

Для игнорирования регистра при сравнении строк можно установить опцию -i.

Если строки входного потока разделены на поля, то можно пропустить заранее заданное количество полей до определения уникальности строки.

Для пропуска первых полей, разделенных пробелами, необходимо указать их количество после опции -f.

Например, команда uniq –f6 пропустит шесть первых полей входного потока при определении уникальности строк.

54. Объединение строк двух файлов по общему полю

Команда join построчно объединяет содержимое заранее отсортированных файлов по общему полю. 
Выходная информация направляется в стандартный поток вывода. 
По умолчанию предполагается, что поля отделяются друг от друга пробелами или табуляцией. 
Опция -t позволяет указать требуемый символ-разделитель полей.
Объединение производится по первым полям строк файлов. 
Если необходимо произвести объединение строк файлов не по первым полям строк, 
то номера этих полей необходимо указать после опций -j1 — для первого файла и -j2 — для второго файла. 
Содержимое файлов должно быть отсортировано этим полям.
Для того чтобы вывести вместе с объединенными строками непарные строки,
которые обычно не выводятся, необходимо использовать опцию -a. 
После этой опции следует указать номер файла, из которого будут выведены непарные строки. 
Наоборот, опция -v позволяет вместо объединенных строк вывести только непарные строки того файла, 
номер которого указан после этой опции.

Команда join построчно объединяет содержимое заранее отсортированных файлов по общему полю.

Выходная информация направляется в стандартный поток вывода.

По умолчанию предполагается, что поля отделяются друг от друга пробелами или табуляцией.

Опция -t позволяет указать требуемый символ-разделитель полей.

Объединение производится по первым полям строк файлов.

Если необходимо произвести объединение строк файлов не по первым полям строк,

то номера этих полей необходимо указать после опций -j1 — для первого файла и -j2 — для второго файла.

Содержимое файлов должно быть отсортировано этим полям.

Для того чтобы вывести вместе с объединенными строками непарные строки,

которые обычно не выводятся, необходимо использовать опцию -a.

После этой опции следует указать номер файла, из которого будут выведены непарные строки.

Наоборот, опция -v позволяет вместо объединенных строк вывести только непарные строки того файла,

номер которого указан после этой опции.

55. Подсчет количества и нумерация строк

Команда wc позволяет подсчитывать количество символов, слов и строк в файле, указанном в качестве аргумента или в стандартном потоке ввода.
wc /etc/hosts
cat /etc/hosts | wc

При необходимости можно установить вывод только числа:
 строк — с использованием опции –l;
 слов — при установленной опции –w;
 символов — при использовании опции -c.

who | wc -l

Команда wc позволяет подсчитывать количество символов, слов и строк в файле, указанном в качестве аргумента или в стандартном потоке ввода.

wc /etc/hosts

cat /etc/hosts | wc

При необходимости можно установить вывод только числа:

строк — с использованием опции –l;

слов — при установленной опции –w;

символов — при использовании опции -c.

who | wc -l

56. Нумерация строк

Команда nl позволяет пронумеровать строки в тексте, считанном из файла или из потока ввода. 
Команда cat -b также нумерует строки, однако возможности команды nl намного шире. 
Опции nl позволяют устанавливать формат нумерации строк, особым образом нумеровать пустые строки, устанавливать шаг нумерации и т. п

Команда nl позволяет пронумеровать строки в тексте, считанном из файла или из потока ввода.

Команда cat -b также нумерует строки, однако возможности команды nl намного шире.

Опции nl позволяют устанавливать формат нумерации строк, особым образом нумеровать пустые строки, устанавливать шаг нумерации и т. п

57. Замена символов с помощью команды tr

Команда tr читает поток ввода и преобразует его. 
Она позволяет выполнять преобразования, приведенные далее в списке.
- Замена символов в потоке. 
  Задают два набора символов. Символы из первого набора заменяются соответствующими по порядку символами из второго набора.
- При использовании опции -d удаляются символы, указанные в наборе.
- Исключение повторения символов в потоке. 
  Символы, повторы которых должны быть исключены, задаются в наборе — опция -s.
- Замена символов в потоке с последующим устранением их повторов. 
  При этом задаются два набора символов и устанавливается опция -s. 
  Вначале команда tr заменяет символы, а затем устраняет повторения символов из второго набора.
- Удаление символов из потока с последующим устранением повторов.
  Этот режим требует установки опций -d и -s. 
  Вначале удаляются символы из первого набора, а затем устраняются повторы из второго

Слово капсом
echo tarelka | tr a-z A-Z

Удаление символов
Здесь в качестве входного потока был использован вывод команды ls /, из которого были удалены все символы перевода строк.
ls / | tr -d '\n'

Устранение повторов выполняет опция -s
echo root | tr -s o

Опция -c команды tr позволяет инвертировать смысл задаваемого множества символов, т. е. удалить при использовании -d все, 
кроме символов, указанных в наборе. Например, команда tr –dc 0-9 удалит во входном потоке все, кроме цифр
echo root | tr -cd o\\n


С опцией -t команда tr обрезает длину первого набора по длине второго, для того чтобы количество символов в них равнялось.

Можно указать класс символов из набора предопределенных символов
[:alnum:] Символы алфавита в любом регистре и цифры
[:alpha:] Символы алфавита в любом регистре
[:blank:] Пустое множество
[:cntrl:] Управляющие символы
[:digit:] Десятичные цифры
[:graph:] Все символы, которые могут быть напечатаны, кроме пробела
[:lower:] Алфавитные символы в нижнем регистре
[:print:] Все символы, которые могут быть напечатаны
[:punct:] Все символы пунктуации
[:space:] Пробел или табуляция
[:upper:] Алфавитные символы в верхнем регистре
[:xdigit:] Шестнадцатеричные цифры

echo "str" | tr [:lower:] [:upper:]

Команда tr читает поток ввода и преобразует его.

Она позволяет выполнять преобразования, приведенные далее в списке.

- Замена символов в потоке.

Задают два набора символов. Символы из первого набора заменяются соответствующими по порядку символами из второго набора.

- При использовании опции -d удаляются символы, указанные в наборе.

- Исключение повторения символов в потоке.

Символы, повторы которых должны быть исключены, задаются в наборе — опция -s.

- Замена символов в потоке с последующим устранением их повторов.

При этом задаются два набора символов и устанавливается опция -s.

Вначале команда tr заменяет символы, а затем устраняет повторения символов из второго набора.

- Удаление символов из потока с последующим устранением повторов.

Этот режим требует установки опций -d и -s.

Вначале удаляются символы из первого набора, а затем устраняются повторы из второго

Слово капсом

echo tarelka | tr a-z A-Z

Удаление символов

Здесь в качестве входного потока был использован вывод команды ls /, из которого были удалены все символы перевода строк.

ls / | tr -d '\n'

Устранение повторов выполняет опция -s

echo root | tr -s o

Опция -c команды tr позволяет инвертировать смысл задаваемого множества символов, т. е. удалить при использовании -d все,

кроме символов, указанных в наборе. Например, команда tr –dc 0-9 удалит во входном потоке все, кроме цифр

echo root | tr -cd o\\n

С опцией -t команда tr обрезает длину первого набора по длине второго, для того чтобы количество символов в них равнялось.

Можно указать класс символов из набора предопределенных символов

[:alnum:] Символы алфавита в любом регистре и цифры

[:alpha:] Символы алфавита в любом регистре

[:blank:] Пустое множество

[:cntrl:] Управляющие символы

[:digit:] Десятичные цифры

[:graph:] Все символы, которые могут быть напечатаны, кроме пробела

[:lower:] Алфавитные символы в нижнем регистре

[:print:] Все символы, которые могут быть напечатаны

[:punct:] Все символы пунктуации

[:space:] Пробел или табуляция

[:upper:] Алфавитные символы в верхнем регистре

[:xdigit:] Шестнадцатеричные цифры

echo "str" | tr [:lower:] [:upper:]

58. Слияние строк

При необходимости вывести в одну строку содержимое файла можно использовать команду paste -s. 
Так, приведенная в примере 8.45 команда выведет в виде одной строки содержимое файла /etc/hosts.
paste -s /etc/hosts

Без опции -s команда paste выводит строки файлов-аргументов параллель но, т. е. первая строка первого файла вместе с первой строкой второго файла и т. д.
Если paste должна читать из стандартного потока ввода, то вместо имени файла указывают символ тире. Колонок вывода будет столько, сколько тире.
ls / | paste - - - - - - - -

При необходимости вывести в одну строку содержимое файла можно использовать команду paste -s.

Так, приведенная в примере 8.45 команда выведет в виде одной строки содержимое файла /etc/hosts.

paste -s /etc/hosts

Без опции -s команда paste выводит строки файлов-аргументов параллель но, т. е. первая строка первого файла вместе с первой строкой второго файла и т. д.

Если paste должна читать из стандартного потока ввода, то вместо имени файла указывают символ тире. Колонок вывода будет столько, сколько тире.

ls / | paste - - - - - - - -

59. Получение дампа

Команда od позволяет получить восьмеричный, десятичный или шестнадцатеричный дамп потока или файла. 
В первом столбце команда od выводит смещение в потоке (адрес). 
Далее выводятся значения считанных из потока символов.

echo ABC | od -toC

Опции -to команды od задают вывод дампа в восьмеричном формате, а опция -C указывает, 
что входной поток должен быть интерпретирован как символьный.
Бывает удобно отобразить дамп не в виде численных значений, а с помощью "именованных символов". 
Для этого используются опции -ta

echo ABC | od -ta

Можно установить формат для вывода смещения. 
Для этого необходимо воспользоваться опцией -A, указав далее базис, где:
-Ad — десятичное знаковое целое
-Au — десятичное беззнаковое целое
-Ao — восьмеричное целое
-Ax — шестнадцатеричное целое
-An — подавить вывод адреса смещения
Аналогичные модификаторы можно использовать после опции -t для получения дампа в различных форматах.

Для всех целых базисов можно указать следующие форматы:
-C — символьный (char)
-S — короткое целое (short)
-I — целое (int)
-L — длинное целое (long)

Помимо od для получения дампов можно использовать hexdump.

hexdump

Команда od позволяет получить восьмеричный, десятичный или шестнадцатеричный дамп потока или файла.

В первом столбце команда od выводит смещение в потоке (адрес).

Далее выводятся значения считанных из потока символов.

echo ABC | od -toC

Опции -to команды od задают вывод дампа в восьмеричном формате, а опция -C указывает,

что входной поток должен быть интерпретирован как символьный.

Бывает удобно отобразить дамп не в виде численных значений, а с помощью "именованных символов".

Для этого используются опции -ta

echo ABC | od -ta

Можно установить формат для вывода смещения.

Для этого необходимо воспользоваться опцией -A, указав далее базис, где:

-Ad — десятичное знаковое целое

-Au — десятичное беззнаковое целое

-Ao — восьмеричное целое

-Ax — шестнадцатеричное целое

-An — подавить вывод адреса смещения

Аналогичные модификаторы можно использовать после опции -t для получения дампа в различных форматах.

Для всех целых базисов можно указать следующие форматы:

-C — символьный (char)

-S — короткое целое (short)

-I — целое (int)

-L — длинное целое (long)

Помимо od для получения дампов можно использовать hexdump.

hexdump

60. Разделение файлов на части

Команды split и csplit не являются текстовыми фильтрами. 
Они предназначены для разделения файлов на части, которые записываются в другие файлы со специальными именами. 
Эти файлы образуются в текущем каталоге.
Команда split разделяет содержимое файла на части, которые записываются в отдельные файлы. 
По умолчанию команда записывает в отдельный файл каждые 1000 строк текста. 
Имена файлов начинаются со строки префикса и дополняются символами нумерации, начиная с aa. 
Если префикс не указан, то используется префикс по умолчанию — символ x, а имена файлов, в которые будут записаны части разделенного файла, 
будут иметь вид: xaa, xab, xac, ...
Опция -l команды split позволяет указать, сколько строк должно содержаться в частях файла

split –l9 /etc/passwd

Опция -b команды split позволяет указать, сколько байтов должно содержаться в частях файла. 
Так можно разделять на части бинарные файлы. 
Команда split –b5K разделит файл на части, содержащие по 5 Кбайт кроме, возможно, последней части.

Опция -Cn позволяет записывать в выходные файлы столько целых строк исходного файла, сколько можно записать, так, чтобы размер выходных файлов не превысил n байт. 
Например, команда split -C1024 разделит файл на час ти, не превышающие по размеру 1 Кбайт и содержащие целые строки исходного текста.

Следует отметить, что команда csplit по умолчанию делит исходный файл на две части при удачном поиске, 
т. к. прекращает работу сразу после первого вхождения образца. 
Во второй части исходного файла могут содержаться вхождения образца, по которым исходный файл может быть разделен далее.
Можно указать число повторов поиска образца в фигурных скобках. 
Например, команда csplit file /etc/ {1} повторит поиск регулярного образца один раз. 
В случае если повторный поиск неудачен, команда csplit завершает свое выполнение с выводом сообщения об ошибке, а все части исходного файла стираются. 
Опция -k отменят удаление выходных файлов в случае ошибки повторного поиска по регулярному выражению.

Команды split и csplit не являются текстовыми фильтрами.

Они предназначены для разделения файлов на части, которые записываются в другие файлы со специальными именами.

Эти файлы образуются в текущем каталоге.

Команда split разделяет содержимое файла на части, которые записываются в отдельные файлы.

По умолчанию команда записывает в отдельный файл каждые 1000 строк текста.

Имена файлов начинаются со строки префикса и дополняются символами нумерации, начиная с aa.

Если префикс не указан, то используется префикс по умолчанию — символ x, а имена файлов, в которые будут записаны части разделенного файла,

будут иметь вид: xaa, xab, xac, ...

Опция -l команды split позволяет указать, сколько строк должно содержаться в частях файла

split –l9 /etc/passwd

Опция -b команды split позволяет указать, сколько байтов должно содержаться в частях файла.

Так можно разделять на части бинарные файлы.

Команда split –b5K разделит файл на части, содержащие по 5 Кбайт кроме, возможно, последней части.

Опция -Cn позволяет записывать в выходные файлы столько целых строк исходного файла, сколько можно записать, так, чтобы размер выходных файлов не превысил n байт.

Например, команда split -C1024 разделит файл на час ти, не превышающие по размеру 1 Кбайт и содержащие целые строки исходного текста.

Следует отметить, что команда csplit по умолчанию делит исходный файл на две части при удачном поиске,

т. к. прекращает работу сразу после первого вхождения образца.

Во второй части исходного файла могут содержаться вхождения образца, по которым исходный файл может быть разделен далее.

Можно указать число повторов поиска образца в фигурных скобках.

Например, команда csplit file /etc/ {1} повторит поиск регулярного образца один раз.

В случае если повторный поиск неудачен, команда csplit завершает свое выполнение с выводом сообщения об ошибке, а все части исходного файла стираются.

Опция -k отменят удаление выходных файлов в случае ошибки повторного поиска по регулярному выражению.

61. Команда xargs

Команда xargs использует данные, передаваемые ей из стандартного потока ввода, в качестве аргументов для конструирования команды. 
Наиболее часто она используется с командой find. 

Например, обе приведенные далее команды делают одно и то же — ищут и удаляют core-файлы, остающиеся в системе после программных сбоев.
find /usr -type f -name "core.*" -exec rm -f {} \;
find /usr -type f -name "core.*" | xargs rm -f

В первом случае обработка найденных файлов производится командой find, которая вызывает команду rm. 
Во втором случае имена найденных файлов отправляются через конвейер команде rm. 
Второй вариант обычно работает быстрее. 
Но если в командную строку подставляется слишком много аргументов, это может привести к ошибке bash.

P.S. ВНИМАНИЕ !!!
не нужно использовать команду xarx или exec для удаления файлов!!!
для этого у команды find давно придумали ключ -delete !!!
find /usr -type f -name "core.*"  -delete

Команда xargs использует данные, передаваемые ей из стандартного потока ввода, в качестве аргументов для конструирования команды.

Наиболее часто она используется с командой find.

Например, обе приведенные далее команды делают одно и то же — ищут и удаляют core-файлы, остающиеся в системе после программных сбоев.

find /usr -type f -name "core.*" -exec rm -f {} \;

find /usr -type f -name "core.*" | xargs rm -f

В первом случае обработка найденных файлов производится командой find, которая вызывает команду rm.

Во втором случае имена найденных файлов отправляются через конвейер команде rm.

Второй вариант обычно работает быстрее.

Но если в командную строку подставляется слишком много аргументов, это может привести к ошибке bash.

P.S. ВНИМАНИЕ !!!

не нужно использовать команду xarx или exec для удаления файлов!!!

для этого у команды find давно придумали ключ -delete !!!

find /usr -type f -name "core.*" -delete

62. Регулярные выражения

Регулярные выражения - это мощнейшее средство поиска текста. 
Очень часто рутинные задачи администрирования связаны с поиском строк текста, например, в файлах системных журналов. 
Поэтому умение работать с регулярными выражениями важно для эффективной работы администратора.
В этой главе вы изучите базовые и расширенные регулярные выражения и освоите важнейшие утилиты для работы с ними.

Регулярные выражения — это специальные шаблоны, используемые для указания строк, например, при поиске. 
Регулярные выражения строятся из обычных алфавитно-цифровых символов и метасимволов. 
Метасимволы позволяют адресоваться одновременно к одному или более обычным алфавитно-цифровым символам.
По историческим причинам регулярные выражения подразделяются на:
- обычные регулярные выражения (basic regexp);
- регулярные выражения с расширенным синтаксисом (extended regexp).


Не все текстовые утилиты, работающие с регулярными выражениями, поддерживают расширенный синтаксис регулярных выражений.
Метасимволы, составляющие регулярные выражения, представлены двумя классами: шаблонами и квантификаторами.
Шаблоны - специальные символы, заменяющие один или более обычных символов.
Квантификаторы - указатели количества вхождений символа или набора символов, находящихся в регулярном выражении непосредственно перед ними.

То есть шаблоны указывают на то, что должно находиться в данном месте искомой строки, а квантификаторы - сколько раз оно должно там встречаться.

Шаблон:
^  Начало строки
$  Конец строки
\< Начало слова
\> Конец слова
.  Любой символ, включая пробел
[] Набор символов
() Группировка символов
|  Инфиксный оператор (или)

Квантификатор:
*     Вхождение любое количество раз
+     Вхождение не менее одного раза
?     Вхождение не более одного раза
{n}   Вхождение n раз
{n,}  Вхождение не менее n раз
{n,m} Вхождение от n до m раз

Помимо перечисленных регулярных выражений имеется несколько расширенных их наборов.

Множества символов, задаваемые в квадратных скобках, имеют следующий смысл: 
в данном месте должен находиться один любой символ из входящих во множество. 
Например, множество [0-3] включает в себя все числа от нуля до трех, а регулярному выражению ^[0-3]$ удовлетворяют все строки, 
в которых находится единственный символ — число от нуля до трех (^ — начало строки, $ — конец строки).

Заранее определенные множества символов
[:alnum:] Множество алфавитно-цифровых символов
[:alpha:] Алфавитные символы
[:blank:] Пустые символы — пробел и табуляция
[:cntrl:] Символы с восьмеричными кодами от 000 до 037 и 177
[:digit:] Десятичные цифры
[:graph:] Изображаемые символы: алфавитно-цифровые и пунктуация
[:lower:] Буквы в нижнем регистре
[:print:] Печатаемые символы: алфавитно-цифровые, пробел и пунктуация
[:space:] Табуляция, вертикальная табуляция, пробел, перевод строки
[:upper:] Буквы в верхнем регистре
[:xdigit:] Шестнадцатеричные символы

Регулярные выражения - это мощнейшее средство поиска текста.

Очень часто рутинные задачи администрирования связаны с поиском строк текста, например, в файлах системных журналов.

Поэтому умение работать с регулярными выражениями важно для эффективной работы администратора.

В этой главе вы изучите базовые и расширенные регулярные выражения и освоите важнейшие утилиты для работы с ними.

Регулярные выражения — это специальные шаблоны, используемые для указания строк, например, при поиске.

Регулярные выражения строятся из обычных алфавитно-цифровых символов и метасимволов.

Метасимволы позволяют адресоваться одновременно к одному или более обычным алфавитно-цифровым символам.

По историческим причинам регулярные выражения подразделяются на:

- обычные регулярные выражения (basic regexp);

- регулярные выражения с расширенным синтаксисом (extended regexp).

Не все текстовые утилиты, работающие с регулярными выражениями, поддерживают расширенный синтаксис регулярных выражений.

Метасимволы, составляющие регулярные выражения, представлены двумя классами: шаблонами и квантификаторами.

Шаблоны - специальные символы, заменяющие один или более обычных символов.

Квантификаторы - указатели количества вхождений символа или набора символов, находящихся в регулярном выражении непосредственно перед ними.

То есть шаблоны указывают на то, что должно находиться в данном месте искомой строки, а квантификаторы - сколько раз оно должно там встречаться.

Шаблон:

^ Начало строки

$ Конец строки

\< Начало слова

\> Конец слова

. Любой символ, включая пробел

[] Набор символов

() Группировка символов

| Инфиксный оператор (или)

Квантификатор:

* Вхождение любое количество раз

+ Вхождение не менее одного раза

? Вхождение не более одного раза

{n} Вхождение n раз

{n,} Вхождение не менее n раз

{n,m} Вхождение от n до m раз

Помимо перечисленных регулярных выражений имеется несколько расширенных их наборов.

Множества символов, задаваемые в квадратных скобках, имеют следующий смысл:

в данном месте должен находиться один любой символ из входящих во множество.

Например, множество [0-3] включает в себя все числа от нуля до трех, а регулярному выражению ^[0-3]$ удовлетворяют все строки,

в которых находится единственный символ — число от нуля до трех (^ — начало строки, $ — конец строки).

Заранее определенные множества символов

[:alnum:] Множество алфавитно-цифровых символов

[:alpha:] Алфавитные символы

[:blank:] Пустые символы — пробел и табуляция

[:cntrl:] Символы с восьмеричными кодами от 000 до 037 и 177

[:digit:] Десятичные цифры

[:graph:] Изображаемые символы: алфавитно-цифровые и пунктуация

[:lower:] Буквы в нижнем регистре

[:print:] Печатаемые символы: алфавитно-цифровые, пробел и пунктуация

[:space:] Табуляция, вертикальная табуляция, пробел, перевод строки

[:upper:] Буквы в верхнем регистре

[:xdigit:] Шестнадцатеричные символы

63. Поиск текста с помощью grep

Команда grep производит поиск в указанных файлах строк по регулярному выражению.
grep — интерпретирует регулярные выражения с обычным (basic) синтаксисом
grep -F или fgrep — не интерпретирует регулярные выражения, воспринимая их как обычные текстовые строки
grep -E или egrep — позволяет работать с расширенным синтаксисом регулярных выражений

Опция -i позволяет производить поиск без учета регистра.
Опция -v команды grep инвертирует алгоритм поиска: команда начинает искать строки, не удовлетворяющие регулярному выражению.
Опция -c команды egrep если требуется подсчитать число вхождений регулярного выражения
Опция -w команды grep, которая устанавливает режим поиска по целому слову
Опция -x позволит отыскать все файлы, которые содержат строки, состоящие из одного символа.
Опции -n позволяет установить режим вывода номеров строк, в которых найдены искомые строки.
Опция -r заставляет команду grep работать рекурсивно, обрабатывая файлы в подкаталогах.

grep 'bash$' /etc/passwd
egrep -c '^.{1,3}:' /etc/passwd
egrep '[0-9]{1,3}(\.[0-9]{1,3}){3}' /etc/sysconfig/*
grep -w Enable /etc/sysctl.conf
grep -x '.' /etc/*
grep -r trainer /usr/share/doc/HOWTO/

ps -e | fgrep '?'
ps -e | grep -i x

grep -irns text_search

Команда grep производит поиск в указанных файлах строк по регулярному выражению.

grep — интерпретирует регулярные выражения с обычным (basic) синтаксисом

grep -F или fgrep — не интерпретирует регулярные выражения, воспринимая их как обычные текстовые строки

grep -E или egrep — позволяет работать с расширенным синтаксисом регулярных выражений

Опция -i позволяет производить поиск без учета регистра.

Опция -v команды grep инвертирует алгоритм поиска: команда начинает искать строки, не удовлетворяющие регулярному выражению.

Опция -c команды egrep если требуется подсчитать число вхождений регулярного выражения

Опция -w команды grep, которая устанавливает режим поиска по целому слову

Опция -x позволит отыскать все файлы, которые содержат строки, состоящие из одного символа.

Опции -n позволяет установить режим вывода номеров строк, в которых найдены искомые строки.

Опция -r заставляет команду grep работать рекурсивно, обрабатывая файлы в подкаталогах.

grep 'bash$' /etc/passwd

egrep -c '^.{1,3}:' /etc/passwd

egrep '[0-9]{1,3}(\.[0-9]{1,3}){3}' /etc/sysconfig/*

grep -w Enable /etc/sysctl.conf

grep -x '.' /etc/*

grep -r trainer /usr/share/doc/HOWTO/

ps -e | fgrep '?'

ps -e | grep -i x

grep -irns text_search

64. Позиционные параметры

В Bash имеется десять позиционных параметров: $0, $1, ..., $9.
параметры от $1 до $9 — значения девяти аргументов командной строки.
$0 — имя команды
$* — строка, составленная из значений всех аргументов командной строки
$@ — содержит строку, составленную из значений всех аргументов командной строки, разделенных пробелами (аналогично, но не тождественно $*)
$# — количество аргументов командной строки
$? — код возврата предыдущей команды
$$ — PID оболочки


cat param.sh
-------------
#!/bin/bash
echo $1
echo $2
-------------
./param.sh first second


cat comline.sh
--------------
#!/bin/bash
echo $*
--------------
./comline.sh 11 aa 22 bbb

При необходимости получить значения аргументов (опций) командной строки, содержащей более девяти аргументов, используют команду shift.

cat param.sh
------------
#!/bin/bash
echo $1
echo $2
echo And now all parameters are shifted.
shift
echo $1
echo $2
-----------
./param.sh first second third


Установка аргументов с помощью set
cat param.sh
------------
#!/bin/bash
echo $1
echo $2
set 1 2
echo $1
echo $2
------------
./param.sh first second

В Bash имеется десять позиционных параметров: $0, $1, ..., $9.

параметры от $1 до $9 — значения девяти аргументов командной строки.

$0 — имя команды

$* — строка, составленная из значений всех аргументов командной строки

$@ — содержит строку, составленную из значений всех аргументов командной строки, разделенных пробелами (аналогично, но не тождественно $*)

$# — количество аргументов командной строки

$? — код возврата предыдущей команды

$$ — PID оболочки

cat param.sh

-------------

#!/bin/bash

echo $1

echo $2

-------------

./param.sh first second

cat comline.sh

--------------

#!/bin/bash

echo $*

--------------

./comline.sh 11 aa 22 bbb

При необходимости получить значения аргументов (опций) командной строки, содержащей более девяти аргументов, используют команду shift.

cat param.sh

------------

#!/bin/bash

echo $1

echo $2

echo And now all parameters are shifted.

shift

echo $1

echo $2

-----------

./param.sh first second third

Установка аргументов с помощью set

cat param.sh

------------

#!/bin/bash

echo $1

echo $2

set 1 2

echo $1

echo $2

------------

./param.sh first second

65. Команда test

Команда test позволяет проверить заданные условия. 
Виды проверок, выполняемых командой test:
- проверка файлов на предмет выполнения заданных условий
- сравнение файлов
- проверка установки опций оболочки
- сравнение строк
- сравнение целых чисел
Если тест выполнен успешно, команда test передает нулевой код возврата.
Так, используя команду test -e, можно проверить существование файла

Проверка существования файла
test -e /etc/passwd
echo $?
test -e not_existent_file
echo $?

0 - файл существует
1 - файл не существует


Команда test в сценариях обычно вызывается в другой форме, совершенно эквивалентной показанной ранее. 
В этой форме вместо строки test указывают квадратные скобки и условие в них: [ условие ]. 
Задача из предыдущего примера может быть решена иным способом
[ -e /etc/passwd ]

Команда [ -e /etc/passwd ] эквивалентна команде test -e /etc/passwd

Наиболее часто используемые опции команды test, связанные с проверкой файлов:
-e — файл существует
-f — файл является обычным файлом (plain file)
-d — файл является каталогом
-h или -L — файл является символической ссылкой
-r — файл доступен для чтения
-w — файл доступен для записи
-x — файл доступен для исполнения
-s — файл не пуст
-N — файл был модифицирован


Формат вызова test, который используется при сравнении файлов:
[ file1 -nt file2 ] — возвращает истину, если первый файл имеет более позднюю дату модификации;
[ file1 -ot file2 ] — возвращает истину, если первый файл имеет более раннюю дату модификации;
[ file1 -ef file2 ] — проверка жесткой связи (hard link)

Проверка установленных опций оболочки
set -o noclobber
[ -o noclobber ]
echo $?

set +o noclobber
[ -o noclobber ]
echo $?

Для сравнения строк применяется следующий формат вызова команды test:
[ str1 = str2 ] — проверка на совпадение строк
[ str1 != str2 ] — проверка на несовпадение строк
[ str1 < str2 ] — истина, если при сортировке строка str1 окажется раньше, чем str2 (по аналогии сравнение >)
[ -z str ] — истина, если длина строки нулевая
[ -n str ] — истина, если длина строки ненулевая

Сравнение целых чисел (пример 10.23) производится с помощью следующих опций команды test:
-eq — равенство
-ne — неравенство
-lt — меньше
-le — меньше или равно
-gt — больше
-ge — больше или равно


Сравнение чисел
[ 1 -lt 2 ]
echo $?
[ 1 -eq 2 ]
echo $?

Команда test позволяет проверить заданные условия.

Виды проверок, выполняемых командой test:

- проверка файлов на предмет выполнения заданных условий

- сравнение файлов

- проверка установки опций оболочки

- сравнение строк

- сравнение целых чисел

Если тест выполнен успешно, команда test передает нулевой код возврата.

Так, используя команду test -e, можно проверить существование файла

Проверка существования файла

test -e /etc/passwd

echo $?

test -e not_existent_file

echo $?

0 - файл существует

1 - файл не существует

Команда test в сценариях обычно вызывается в другой форме, совершенно эквивалентной показанной ранее.

В этой форме вместо строки test указывают квадратные скобки и условие в них: [ условие ].

Задача из предыдущего примера может быть решена иным способом

[ -e /etc/passwd ]

Команда [ -e /etc/passwd ] эквивалентна команде test -e /etc/passwd

Наиболее часто используемые опции команды test, связанные с проверкой файлов:

-e — файл существует

-f — файл является обычным файлом (plain file)

-d — файл является каталогом

-h или -L — файл является символической ссылкой

-r — файл доступен для чтения

-w — файл доступен для записи

-x — файл доступен для исполнения

-s — файл не пуст

-N — файл был модифицирован

Формат вызова test, который используется при сравнении файлов:

[ file1 -nt file2 ] — возвращает истину, если первый файл имеет более позднюю дату модификации;

[ file1 -ot file2 ] — возвращает истину, если первый файл имеет более раннюю дату модификации;

[ file1 -ef file2 ] — проверка жесткой связи (hard link)

Проверка установленных опций оболочки

set -o noclobber

[ -o noclobber ]

echo $?

set +o noclobber

[ -o noclobber ]

echo $?

Для сравнения строк применяется следующий формат вызова команды test:

[ str1 = str2 ] — проверка на совпадение строк

[ str1 != str2 ] — проверка на несовпадение строк

[ str1 < str2 ] — истина, если при сортировке строка str1 окажется раньше, чем str2 (по аналогии сравнение >)

[ -z str ] — истина, если длина строки нулевая

[ -n str ] — истина, если длина строки ненулевая

Сравнение целых чисел (пример 10.23) производится с помощью следующих опций команды test:

-eq — равенство

-ne — неравенство

-lt — меньше

-le — меньше или равно

-gt — больше

-ge — больше или равно

Сравнение чисел

[ 1 -lt 2 ]

echo $?

[ 1 -eq 2 ]

echo $?

66. Условное исполнение команд

Операторы условного исполнения команд && и || могут быть применены для управления потоком исполнения команд. 
Они позволяют исполнять команды в зависимости от успешности выполнения предыдущих команд.
Если оператор && установлен между двумя командами, то вторая из них будет исполнена только в случае успеха предыдущей.

Выполнение команды в случае успеха предыдущей команды.
В примере первая команда проверяет наличие каталога, переход в который осуществляет вторая команда cd /tmp при условии успешного исполнения первой.
ls /tmp &> /dev/null && cd /tmp
pwd


Более изящный вариант выполнения этой же задачи заключается в использовании команды test для проверки существования целевого каталога.
Команда test в примере проверяет существование каталога.
[ -d /tmp ] && cd /tmp
pwd
/tmp


Если необходимо выполнять команду в случае неудачного завершения работы другой команды, удобно применять оператор ||. 
Например, требуется перейти в каталог d1. 
В случае отсутствия этот каталог необходимо создать и перейти в него. 
Если каталог отсутствует, то он создается.
Эту задачу можно решить следующим образом
[ -d d1 ] || mkdir d1 ; cd d1
pwd
/tmp/d1

Операторы условного исполнения команд && и || могут быть применены для управления потоком исполнения команд.

Они позволяют исполнять команды в зависимости от успешности выполнения предыдущих команд.

Если оператор && установлен между двумя командами, то вторая из них будет исполнена только в случае успеха предыдущей.

Выполнение команды в случае успеха предыдущей команды.

В примере первая команда проверяет наличие каталога, переход в который осуществляет вторая команда cd /tmp при условии успешного исполнения первой.

ls /tmp &> /dev/null && cd /tmp

pwd

Более изящный вариант выполнения этой же задачи заключается в использовании команды test для проверки существования целевого каталога.

Команда test в примере проверяет существование каталога.

[ -d /tmp ] && cd /tmp

pwd

/tmp

Если необходимо выполнять команду в случае неудачного завершения работы другой команды, удобно применять оператор ||.

Например, требуется перейти в каталог d1.

В случае отсутствия этот каталог необходимо создать и перейти в него.

Если каталог отсутствует, то он создается.

Эту задачу можно решить следующим образом

[ -d d1 ] || mkdir d1 ; cd d1

pwd

/tmp/d1

67. Команда if

Оболочка предоставляет также специальную команду if, которая позволяет управлять последовательностью исполнения целых блоков команд. 
В качестве примера предположим, что требуется обеспечить выход из некоторого сценария с ошибкой, если в командной строке установлено отличное от единицы число аргументов командной строки. 
При этом команда должна сообщать об ошибке и выдавать подсказку о правильном варианте ее использования

#!/bin/bash
if [ $# -ne 1 ]
then
     cat <<- ERR
             Недостаточно аргументов.
             Использование:
             if.sh file
             Аргумент file должен быть обычным файлом.
     ERR
     exit 1
fi
ls -l $1

Команда if исполняет блок команд после команды then, только в случае получения нулевого кода возврата команды, указанной в качестве ее аргумента.
В данном случае аргумент команды if — это команда test, которая проверяет количество аргументов сценария. 
Если количество аргументов не равно единице, то выполняется блок операторов после then до команды fi, заканчивающей if.
Конструкция cat <<- ERR — это "here document". Она позволяет указывать целый блок данных непосредственно в теле сценария, 
передавая его в данном случае в стандартный поток ввода команде cat для вывода на экран. 

Блок данных ограничен строкой ERR. В этом примере используется оператор <<- вместо << для игнорирования табуляций перед блоком данных.

./if.sh
./if.sh if.sh

Оболочка предоставляет также специальную команду if, которая позволяет управлять последовательностью исполнения целых блоков команд.

В качестве примера предположим, что требуется обеспечить выход из некоторого сценария с ошибкой, если в командной строке установлено отличное от единицы число аргументов командной строки.

При этом команда должна сообщать об ошибке и выдавать подсказку о правильном варианте ее использования

#!/bin/bash

if [ $# -ne 1 ]

then

cat <<- ERR

Недостаточно аргументов.

Использование:

if.sh file

Аргумент file должен быть обычным файлом.

ERR

exit 1

ls -l $1

Команда if исполняет блок команд после команды then, только в случае получения нулевого кода возврата команды, указанной в качестве ее аргумента.

В данном случае аргумент команды if — это команда test, которая проверяет количество аргументов сценария.

Если количество аргументов не равно единице, то выполняется блок операторов после then до команды fi, заканчивающей if.

Конструкция cat <<- ERR — это "here document". Она позволяет указывать целый блок данных непосредственно в теле сценария,

передавая его в данном случае в стандартный поток ввода команде cat для вывода на экран.

Блок данных ограничен строкой ERR. В этом примере используется оператор <<- вместо << для игнорирования табуляций перед блоком данных.

./if.sh

./if.sh if.sh

68. Команда if допускает использование команды elif для выполнения дополнительной проверки

#!/bin/bash
if [ $# -ne 1 ]
then
       cat <<- ERR
               Недостаточно аргументов.
               Использование:
               if.sh file
              Аргумент file должен быть обычным файлом.
       ERR
exit 1

elif [ ! -f $1 ]
then
    echo -n 'Тип файла '
    file $1
    exit 1
fi
ls -l $1

Если аргументом задан специальный файл, то выводится его тип
./if.sh

#!/bin/bash

if [ $# -ne 1 ]

then

cat <<- ERR

Недостаточно аргументов.

Использование:

if.sh file

Аргумент file должен быть обычным файлом.

ERR

exit 1

elif [ ! -f $1 ]

then

echo -n 'Тип файла '

file $1

exit 1

ls -l $1

Если аргументом задан специальный файл, то выводится его тип

./if.sh

69. Команда else

В команде if можно также использовать else для указания блока операторов, которые должны исполняться в случае, если предыдущие проверки не закончились успехом

#!/bin/bash
if [ $# -ne 1 ]
then
     cat <<- ERR
             Недостаточно аргументов.
             Использование:
             if.sh file
             Аргумент file должен быть обычным файлом.
     ERR
     exit 1
elif [ ! -f $1 ]
then
    echo -n 'Тип файла '
    file $1
    exit 1
else
   ls -l $1
fi

В команде if можно также использовать else для указания блока операторов, которые должны исполняться в случае, если предыдущие проверки не закончились успехом

#!/bin/bash

if [ $# -ne 1 ]

then

cat <<- ERR

Недостаточно аргументов.

Использование:

if.sh file

Аргумент file должен быть обычным файлом.

ERR

exit 1

elif [ ! -f $1 ]

then

echo -n 'Тип файла '

file $1

exit 1

else

ls -l $1

70. Команда case

При создании сценариев часто возникает задача проверить значение, содержащееся в переменной, на совпадение с заданными шаблонами. 
При этом в зависимости от шаблона, с которым произошло совпадение, должны выполняться те или иные заданные действия. 
Для выполнения такой задачи предназначена команда case. Шаблоны сравнения case такие же, как и файловые шаблоны.

Синтаксис команды case в общем показан в примере:
case слово in
   шаблон1 )
      команды
      ;;
   шаблон2 )
      команды
      ;;
esac

Сравнение слова с шаблонами производится последовательно. 
Как только найдется совпадение, выполняются соответствующие команды без дальнейших проверок.
Допустим, что в текущем каталоге располагаются символические ссылки на сценарии запуска служб GNU/Linux. 
Требуется написать сценарий, который будет запускать службы, передавая сценарию аргумент start, если в качестве аргумента будет использована символическая ссылка, 
начинающаяся с буквы S или s. 

Если же ссылка будет начинаться с буквы K или k, то службы должны останавливаться и, следовательно, их сценариям должен передаваться аргумент stop
cat case.sh
#!/bin/bash
[ $# -ne 1 ] && exit 1;
FIRST=`echo $1 | cut -c1`
case $FIRST in

            [Ss] )
                   echo "Запускается $1"
                   ./$1 start
                   ;;
            K|k )
                   echo "Останавливается $1"
                   ./$1 stop
                   ;;
            * )
                   echo "Статус $1"
                   ./$1 status
                   ;;
esac

В этом сценарии вначале проверяется количество аргументов. 
Если оно не равно 1, то осуществляется выход с ошибкой. 
Далее в переменную FIRST помещается первая буква аргумента командной строки.
Команда case проверяет соответствие содержащейся в переменной FIRST буквы шаблону [Ss]. 
Этот шаблон обозначает множество по аналогии с обычными файловыми шаблонами. 
То есть этому шаблону удовлетворяют либо S, либо s.
Если буква в FIRST удовлетворяет этому шаблону, служба запускается.
Для остановки службы используется иной шаблон, имеющий в данном случае тот же смысл: либо K, либо k. 
Вертикальная черта обозначает "ИЛИ". 
Однако ее можно применять даже для целых строк или шаблонов.
Если содержимое переменной FIRST не совпадает и с этим шаблоном, то выводится информация о текущем статусе службы.

При создании сценариев часто возникает задача проверить значение, содержащееся в переменной, на совпадение с заданными шаблонами.

При этом в зависимости от шаблона, с которым произошло совпадение, должны выполняться те или иные заданные действия.

Для выполнения такой задачи предназначена команда case. Шаблоны сравнения case такие же, как и файловые шаблоны.

Синтаксис команды case в общем показан в примере:

case слово in

шаблон1 )

команды

;;

шаблон2 )

команды

;;

esac

Сравнение слова с шаблонами производится последовательно.

Как только найдется совпадение, выполняются соответствующие команды без дальнейших проверок.

Допустим, что в текущем каталоге располагаются символические ссылки на сценарии запуска служб GNU/Linux.

Требуется написать сценарий, который будет запускать службы, передавая сценарию аргумент start, если в качестве аргумента будет использована символическая ссылка,

начинающаяся с буквы S или s.

Если же ссылка будет начинаться с буквы K или k, то службы должны останавливаться и, следовательно, их сценариям должен передаваться аргумент stop

cat case.sh

#!/bin/bash

[ $# -ne 1 ] && exit 1;

FIRST=`echo $1 | cut -c1`

case $FIRST in

[Ss] )

echo "Запускается $1"

./$1 start

;;

K|k )

echo "Останавливается $1"

./$1 stop

;;

* )

echo "Статус $1"

./$1 status

;;

esac

В этом сценарии вначале проверяется количество аргументов.

Если оно не равно 1, то осуществляется выход с ошибкой.

Далее в переменную FIRST помещается первая буква аргумента командной строки.

Команда case проверяет соответствие содержащейся в переменной FIRST буквы шаблону [Ss].

Этот шаблон обозначает множество по аналогии с обычными файловыми шаблонами.

То есть этому шаблону удовлетворяют либо S, либо s.

Если буква в FIRST удовлетворяет этому шаблону, служба запускается.

Для остановки службы используется иной шаблон, имеющий в данном случае тот же смысл: либо K, либо k.

Вертикальная черта обозначает "ИЛИ".

Однако ее можно применять даже для целых строк или шаблонов.

Если содержимое переменной FIRST не совпадает и с этим шаблоном, то выводится информация о текущем статусе службы.

71. Циклы

В случаях, когда надо организовать последовательное выполнение одного и того же набора инструкций, удобно использовать программные циклы. 
Для программирования в оболочке доступны три вида циклов:
for — эта команда позволяет создавать циклы типа перебора значений
while — цикл, выполняющийся до тех пор, пока истинно некоторое условие
until — цикл, выполняющийся до тех пор, пока некоторое условие ложно

Допустим, что имеется набор значений, которые должны быть последовательно присвоены некоторой переменной, требующейся для произведения каких-либо операций. 
В этом случае удобно использовать команду for
#!/bin/bash
for DIR in /etc /tmp /var
do
  echo -n "Права доступа к $DIR "
  ls -ld $DIR | cut -c2-11
done

В данном сценарии переменная DIR последовательно принимает три значения: /etc, /tmp и /var. 
Это делает команда for, в которой список значений указан после in. Тело цикла начинается после команды do и ограничивается done.
Если в команде for не указан список значений директивой in, то переменная цикла будет принимать значения, соответствующие аргументам командной строки.


Перебор аргументов командной строки с помощью for.
В этом сценарии переменная DIR последовательно принимает значения аргументов.
#!/bin/bash
[ $# -lt 1 ] && exit 1
for DIR
do
    if [ -d $DIR ]; then
           echo -n "Права доступа к $DIR "
           ls -ld $DIR | cut -c2-11
    elif [ ! -e $DIR ]; then
           echo "$DIR не существует"
    fi
done


Для организации итеративных циклов удобно использовать команды while и until.
Сценарий из примера в цикле выводит значения от 1 до 5 раз в секунду.
#!/bin/bash
i=1
while [ $i -le 5 ]; do
      echo –n $i ‘ ‘ ; sleep 1
      i=$((i+1))
done
echo

Цикл while работает до тех пор, пока команда, указанная в качестве ее аргумента, возвращает успешный код завершения. 
Наоборот, until работает, пока команда-аргумент заканчивается неудачей.


В качестве примера приведем сценарий, последовательно удаляющий из полного доменного имени узла (FQDN) подстроки до первой точки. 
Сначала должно быть выведено полное имя узла, затем домен, потом родительский домен, и так далее, пока строка не станет пустой.
#!/bin/bash
HN=`hostname`
until [ -z $HN ]; do
      echo $HN
      HN=`echo -n $HN | tr '.' '\n' | sed '1d' | tr '\n' '.'`
done

В сценарии используется переменная HN, которой вначале присваивается значение — доменное имя узла. 
Затем из него в цикле удаляется подстрока от начала строки до первой встретившейся точки. 
Для этого в строке — имени узла точки сначала заменяются переводами строк, затем удаляется первая строка, и в заключение переводы строки снова заменяются точками.
Цикл until работает до тех пор, пока содержимое переменной HN не станет пустым.

В случаях, когда надо организовать последовательное выполнение одного и того же набора инструкций, удобно использовать программные циклы.

Для программирования в оболочке доступны три вида циклов:

for — эта команда позволяет создавать циклы типа перебора значений

while — цикл, выполняющийся до тех пор, пока истинно некоторое условие

until — цикл, выполняющийся до тех пор, пока некоторое условие ложно

Допустим, что имеется набор значений, которые должны быть последовательно присвоены некоторой переменной, требующейся для произведения каких-либо операций.

В этом случае удобно использовать команду for

#!/bin/bash

for DIR in /etc /tmp /var

echo -n "Права доступа к $DIR "

ls -ld $DIR | cut -c2-11

done

В данном сценарии переменная DIR последовательно принимает три значения: /etc, /tmp и /var.

Это делает команда for, в которой список значений указан после in. Тело цикла начинается после команды do и ограничивается done.

Если в команде for не указан список значений директивой in, то переменная цикла будет принимать значения, соответствующие аргументам командной строки.

Перебор аргументов командной строки с помощью for.

В этом сценарии переменная DIR последовательно принимает значения аргументов.

#!/bin/bash

[ $# -lt 1 ] && exit 1

for DIR

if [ -d $DIR ]; then

echo -n "Права доступа к $DIR "

ls -ld $DIR | cut -c2-11

elif [ ! -e $DIR ]; then

echo "$DIR не существует"

done

Для организации итеративных циклов удобно использовать команды while и until.

Сценарий из примера в цикле выводит значения от 1 до 5 раз в секунду.

#!/bin/bash

i=1

while [ $i -le 5 ]; do

echo –n $i ‘ ‘ ; sleep 1

i=$((i+1))

done

echo

Цикл while работает до тех пор, пока команда, указанная в качестве ее аргумента, возвращает успешный код завершения.

Наоборот, until работает, пока команда-аргумент заканчивается неудачей.

В качестве примера приведем сценарий, последовательно удаляющий из полного доменного имени узла (FQDN) подстроки до первой точки.

Сначала должно быть выведено полное имя узла, затем домен, потом родительский домен, и так далее, пока строка не станет пустой.

#!/bin/bash

HN=`hostname`

until [ -z $HN ]; do

echo $HN

HN=`echo -n $HN | tr '.' '\n' | sed '1d' | tr '\n' '.'`

done

В сценарии используется переменная HN, которой вначале присваивается значение — доменное имя узла.

Затем из него в цикле удаляется подстрока от начала строки до первой встретившейся точки.

Для этого в строке — имени узла точки сначала заменяются переводами строк, затем удаляется первая строка, и в заключение переводы строки снова заменяются точками.

Цикл until работает до тех пор, пока содержимое переменной HN не станет пустым.

72. Функции

Написание хорошо структурированных программ требует возможности создания подпрограмм. 
В оболочке Bash это реализуется с помощью функций, представляющих собой именованные блоки кода. 
При определении функции в оболочке (даже просто в командной строке) ее можно вызвать по имени.

Синтаксис функции
function имя()
{
    команды
}



Код функции описывают в начале сценария до первого вызова функции. 
Для вызова функции достаточно просто указать ее имя.
Для демонстрации использования функций оболочки модифицируем программу if.sh.
#!/bin/bash
function err_msg()
{
        cat <<- ERR
                Недостаточно аргументов.
                Использование: if.sh file
                Аргумент file должен быть обычным файлом.
ERR
}
if [ $# -ne 1 ]
then
    err_msg
    # err_msg '001' 
    exit 1
elif [ ! -f $1 ]
then
   echo -n 'Тип файла '
   file $1
   exit 1
fi
ls -l $1

Для передачи аргументов в функцию их указывают после имени функции, разделяя пробелами. 
В теле функции обращение к переданным аргументам производится с помощью позиционных параметров.

Функции часто описывают в отдельных файлах, считывая в сценариях содержимое этих файлов с помощью inline-подстановки.

Написание хорошо структурированных программ требует возможности создания подпрограмм.

В оболочке Bash это реализуется с помощью функций, представляющих собой именованные блоки кода.

При определении функции в оболочке (даже просто в командной строке) ее можно вызвать по имени.

Синтаксис функции

function имя()

{

команды

}

Код функции описывают в начале сценария до первого вызова функции.

Для вызова функции достаточно просто указать ее имя.

Для демонстрации использования функций оболочки модифицируем программу if.sh.

#!/bin/bash

function err_msg()

{

cat <<- ERR

Недостаточно аргументов.

Использование: if.sh file

Аргумент file должен быть обычным файлом.

ERR

}

if [ $# -ne 1 ]

then

err_msg

# err_msg '001'

exit 1

elif [ ! -f $1 ]

then

echo -n 'Тип файла '

file $1

exit 1

ls -l $1

Для передачи аргументов в функцию их указывают после имени функции, разделяя пробелами.

В теле функции обращение к переданным аргументам производится с помощью позиционных параметров.

Функции часто описывают в отдельных файлах, считывая в сценариях содержимое этих файлов с помощью inline-подстановки.

73. Физическая структура накопителя на жестких магнитных дисках

Современные накопители на жестких магнитных дисках состоят из одного или нескольких магнитных дисков и магнитных головок (head). 
Каждая магнитная поверхность диска разбита на дорожки (track). 
Дорожки одного диаметра на всех магнитных поверхностях образуют цилиндр (cyl). 
Количество дорожек равно произведению количества цилиндров на количество головок:
track = cyl × head.
Каждая дорожка разбита на секторы (sect), стандартный размер которых составляет 512 байтов. 
Объем диска в байтах равен:
capacity = cyl × head × sect × 512.
Стандартное количество секторов в дорожке равняется 63. 
Поскольку количество байтов в секторе и секторов в дорожке являются постоянными величинами, 
то основными параметрами диска (так называемой геометрией) являются количества цилиндров cyl и головок head.

Команда fdisk -l выводит сведения о геометрии диска.
fdisk -l

Диск разбивается на разделы (partitions). 
Обычно каждый раздел предназначен для размещения одной операционной системы, отдельной файловой системы или области размещения страниц подкачки. 
В нулевом секторе диска хранится таблица разделов, которая указывает начальный и конечный цилиндры для каждого раздела.

Ограничения, исходно наложенные на геометрию жестких дисков, не предусматривали возможности иметь жесткие диски с размером более 520 Мбайт.
У жестких дисков того времени предусматривалось наличие максимум 16 головок и 1024 цилиндров, что и давало ограничение в 520 Мбайт.
В таблице разделов для хранения номеров цилиндров разделов предназначается только 10 бит, т. е. 1024 (210) цилиндров максимум. 
Это ограничение быстро стало не просто существенным, а критическим. 
Для его преодоления был введен так называемый режим LBA (Linear Block Addressing), в котором за счет мнимого увеличения количества головок удавалось виртуально понизить количество
цилиндров, оставляя при этом их произведение неизменным. 
Это не единственное ограничение на объем дискового пространства, пройденное с 80-х годов прошлого века. 
Подробную информацию об этом можно найти на сайте http://www.tldp.org в документе "Hard disks HOWTO".

Другое историческое ограничение связано с тем, что исходно разработчики IBM PC заложили возможность использования лишь четырех разделов на жестком диске. 
Для Linux-систем такое ограничение могло привести к не возможности создания требуемого количества файловых систем, которые должны находиться на разных разделах.
Для преодоления этого ограничения в GNU/Linux (как и в ПО от Microsoft) используются логические разделы. В этой модели четыре основных раздела называются первичными разделами (primary), 
причем один из них может быть помечен, как расширенный раздел (extended). 
В расширенном разделе может быть создано неограниченное количество логических разделов (logical partitions).

Собственно проблемы на этом не закончились.
На смену MBR пришёл GPT, так как MBR был максимальный размер диска <2Tb.


ВНИМАНИЕ!
При ошибочных действиях все данные на диске могут быть утрачены! 
Без резервной копии лучше к дискам не лезь!
При создании раздела на диске, где размещена корневая файловая система, потребуется перезагрузка после создания раздела(на самом деле не всегда, partprobe).
partprobe - выполняем просим систему перечитать таблицу разделов

Программы для работы с дисками:
https://b14esh.com/nix/disk/fdisk-2.html
https://b14esh.com/nix/disk/lvm.html
https://b14esh.com/nix/disk/fs-sfdisk-e2label-mkfs.html
https://b14esh.com/nix/disk/mdadm-spare-hot-spare-error-raid10-raid1.html
https://b14esh.com/nix/gentoo/konspect-gentoo-bios-mbr.html
https://b14esh.com/nix/gentoo/konspect-gentoo.html
https://b14esh.com/virtualization/kvm/kvm-blockresize-domblklist-guests-linux-mbr-gpt.html

Современные накопители на жестких магнитных дисках состоят из одного или нескольких магнитных дисков и магнитных головок (head).

Каждая магнитная поверхность диска разбита на дорожки (track).

Дорожки одного диаметра на всех магнитных поверхностях образуют цилиндр (cyl).

Количество дорожек равно произведению количества цилиндров на количество головок:

track = cyl × head.

Каждая дорожка разбита на секторы (sect), стандартный размер которых составляет 512 байтов.

Объем диска в байтах равен:

capacity = cyl × head × sect × 512.

Стандартное количество секторов в дорожке равняется 63.

Поскольку количество байтов в секторе и секторов в дорожке являются постоянными величинами,

то основными параметрами диска (так называемой геометрией) являются количества цилиндров cyl и головок head.

Команда fdisk -l выводит сведения о геометрии диска.

fdisk -l

Диск разбивается на разделы (partitions).

Обычно каждый раздел предназначен для размещения одной операционной системы, отдельной файловой системы или области размещения страниц подкачки.

В нулевом секторе диска хранится таблица разделов, которая указывает начальный и конечный цилиндры для каждого раздела.

Ограничения, исходно наложенные на геометрию жестких дисков, не предусматривали возможности иметь жесткие диски с размером более 520 Мбайт.

У жестких дисков того времени предусматривалось наличие максимум 16 головок и 1024 цилиндров, что и давало ограничение в 520 Мбайт.

В таблице разделов для хранения номеров цилиндров разделов предназначается только 10 бит, т. е. 1024 (210) цилиндров максимум.

Это ограничение быстро стало не просто существенным, а критическим.

Для его преодоления был введен так называемый режим LBA (Linear Block Addressing), в котором за счет мнимого увеличения количества головок удавалось виртуально понизить количество

цилиндров, оставляя при этом их произведение неизменным.

Это не единственное ограничение на объем дискового пространства, пройденное с 80-х годов прошлого века.

Подробную информацию об этом можно найти на сайте http://www.tldp.org в документе "Hard disks HOWTO".

Другое историческое ограничение связано с тем, что исходно разработчики IBM PC заложили возможность использования лишь четырех разделов на жестком диске.

Для Linux-систем такое ограничение могло привести к не возможности создания требуемого количества файловых систем, которые должны находиться на разных разделах.

Для преодоления этого ограничения в GNU/Linux (как и в ПО от Microsoft) используются логические разделы. В этой модели четыре основных раздела называются первичными разделами (primary),

причем один из них может быть помечен, как расширенный раздел (extended).

В расширенном разделе может быть создано неограниченное количество логических разделов (logical partitions).

Собственно проблемы на этом не закончились.

На смену MBR пришёл GPT, так как MBR был максимальный размер диска <2Tb.

ВНИМАНИЕ!

При ошибочных действиях все данные на диске могут быть утрачены!

Без резервной копии лучше к дискам не лезь!

При создании раздела на диске, где размещена корневая файловая система, потребуется перезагрузка после создания раздела(на самом деле не всегда, partprobe).

partprobe - выполняем просим систему перечитать таблицу разделов

Программы для работы с дисками:

https://b14esh.com/nix/disk/fdisk-2.html

https://b14esh.com/nix/disk/lvm.html

https://b14esh.com/nix/disk/fs-sfdisk-e2label-mkfs.html

https://b14esh.com/nix/disk/mdadm-spare-hot-spare-error-raid10-raid1.html

https://b14esh.com/nix/gentoo/konspect-gentoo-bios-mbr.html

https://b14esh.com/nix/gentoo/konspect-gentoo.html

https://b14esh.com/virtualization/kvm/kvm-blockresize-domblklist-guests-linux-mbr-gpt.html

74. FS / File System / файловая система

Для возможности работы с разделом накопителя на магнитных дисках в разделе должна быть создана файловая система, т. е. должно быть произведено форматирование раздела. 
При этом в новой файловой системе формируется суперблок, создается массив индексных дескрипторов и выделяется пространство для блоков данных. 
Стандартной файловой системой в GNU/Linux является ext4.

ext3 - современная версия ext2 с поддержкой журналирования, индексированием каталогов и с улучшенными показателями быстродействия;
ext4 - дальнейшее развитие ext3 с возможностью создавать очень большие файловые системы (1 экзабайт = 1018 байт), 
       ориентированная на работу с экстентами (непрерывная последовательность блоков, принадлежащих файлу) с улучшенными параметрами надежности журналирования;

XFS  - высокопроизводительная файловая система для очень больших объемов хранимой информации (8 экзабайт), разработанная в Silicon Graphics;
JFS  - высокопроизводительная файловая система от IBM, используемая при необходимости хранения больших объемов информации (32 петабайта = 32 × 1015 байт).

mke2fs — для создания файловых систем ext2, ext3 и ext4;
mkfs.xfs — для создания XFS;
mkdosfs — для создания файловой системы FAT.

Команда mkfs является удобной оболочкой, которая для создания конкретных типов файловых систем обращается к следующим командам:
/sbin/mkfs.ext2;
/sbin/mkfs.ext3;
/sbin/mkfs.ext4;
/sbin/mkfs.xfs;
/sbin/mkfs.msdos.

mkfs -t ext4 /dev/hda2
mkfs.ext4 /dev/hda2

Для возможности работы с разделом накопителя на магнитных дисках в разделе должна быть создана файловая система, т. е. должно быть произведено форматирование раздела.

При этом в новой файловой системе формируется суперблок, создается массив индексных дескрипторов и выделяется пространство для блоков данных.

Стандартной файловой системой в GNU/Linux является ext4.

ext3 - современная версия ext2 с поддержкой журналирования, индексированием каталогов и с улучшенными показателями быстродействия;

ext4 - дальнейшее развитие ext3 с возможностью создавать очень большие файловые системы (1 экзабайт = 1018 байт),

ориентированная на работу с экстентами (непрерывная последовательность блоков, принадлежащих файлу) с улучшенными параметрами надежности журналирования;

XFS - высокопроизводительная файловая система для очень больших объемов хранимой информации (8 экзабайт), разработанная в Silicon Graphics;

JFS - высокопроизводительная файловая система от IBM, используемая при необходимости хранения больших объемов информации (32 петабайта = 32 × 1015 байт).

mke2fs — для создания файловых систем ext2, ext3 и ext4;

mkfs.xfs — для создания XFS;

mkdosfs — для создания файловой системы FAT.

Команда mkfs является удобной оболочкой, которая для создания конкретных типов файловых систем обращается к следующим командам:

/sbin/mkfs.ext2;

/sbin/mkfs.ext3;

/sbin/mkfs.ext4;

/sbin/mkfs.xfs;

/sbin/mkfs.msdos.

mkfs -t ext4 /dev/hda2

mkfs.ext4 /dev/hda2

74. Проверка целостности файловой системы

Внимание!
Без резервной копии лучше к дискам не лезь!
При ошибочных действиях все данные на диске могут быть утрачены! 
Проверка целостности файловой системы должна осуществляться лишь на от монтированной файловой системе! (современный fsck скорее всего тебя предупредит, но это не точно)

Целостность файловой системы может быть нарушена в результате сбоя питания или же аппаратной неисправности. 
Если работа операционной системы была прервана и файловая система не была отмонтирована, то в суперблоке файловой системы остается специальный флаг (dirty — грязный или not clean), 
который сообщает о том, что в файловой системе возможны нарушения. 
Если же файловая система была отмонтирована правильно, то файловая система находится в состоянии clean — "чистая".

Сбой файловой системы обычно сопровождается тем, что информация, находящаяся в кэше для данной файловой системы, не попадает на диск, т. е. не синхронизируется. 
Может произойти также и следующее: операция синхронизации кэша с диском может быть не доведена до конца вследствие сбоя и
запись данных из буфера на диск может прерваться до ее завершения. 
Это способно привести к целому ряду проблем:
- искажению или потере информации в блоках данных;
- появлению в системе блоков данных, которые считаются занятыми, хотя на них не указывает ни один индексный дескриптор;
- наличию перекрестных ссылок на блоки данных;
- появлению метаданных с ненулевым счетчиком ссылок, на которые не ссылаются никакие файлы;
- наличию противоречивых записей в каталогах и т. п.

Различают два класса возможных нарушений в файловой системе:
- нарушение целостности данных;
- нарушение целостности файловой системы.

Для защиты целостности данных могут быть использованы разнообразные методы резервного хранения данных (backup). 
Утилиты восстановления целостности файловой системы не могут гарантировать восстановление данных после сбоя. 
Гарантом сохранности данных является только наличие резервных копий данных.

Для восстановления целостности файловых систем в GNU/Linux используется утилита fsck, 
которая аналогично mkfs является надстройкой над специализированными утилитами для различных файловых систем.

Если вызвать утилиту fsck без опции -t, указывающей тип файловой системы, по умолчанию запустится e2fsck, проверяющая файловые системы ext2, ext3 и ext4.
fsck -t ext3 /dev/sdb2

При этом полная проверка осуществляется далеко не всегда, а только при условии:
- наличия флага dirty в суперблоке, что бывает при сбое или выключении питания без отмонтирования файловой системы;
- достижения максимального разрешенного количества монтирований файловой системы без проверки ее целостности;
- достижения максимального срока без проверки целостности файловой системы.

При работе команды e2fsck используется специальный каталог lost+found, находящийся в корневом каталоге файловой системы устройства. 
В этом каталоге сохраняются конвертированные в файлы потерянные блоки данных.

Внимание!

Без резервной копии лучше к дискам не лезь!

При ошибочных действиях все данные на диске могут быть утрачены!

Проверка целостности файловой системы должна осуществляться лишь на от монтированной файловой системе! (современный fsck скорее всего тебя предупредит, но это не точно)

Целостность файловой системы может быть нарушена в результате сбоя питания или же аппаратной неисправности.

Если работа операционной системы была прервана и файловая система не была отмонтирована, то в суперблоке файловой системы остается специальный флаг (dirty — грязный или not clean),

который сообщает о том, что в файловой системе возможны нарушения.

Если же файловая система была отмонтирована правильно, то файловая система находится в состоянии clean — "чистая".

Сбой файловой системы обычно сопровождается тем, что информация, находящаяся в кэше для данной файловой системы, не попадает на диск, т. е. не синхронизируется.

Может произойти также и следующее: операция синхронизации кэша с диском может быть не доведена до конца вследствие сбоя и

запись данных из буфера на диск может прерваться до ее завершения.

Это способно привести к целому ряду проблем:

- искажению или потере информации в блоках данных;

- появлению в системе блоков данных, которые считаются занятыми, хотя на них не указывает ни один индексный дескриптор;

- наличию перекрестных ссылок на блоки данных;

- появлению метаданных с ненулевым счетчиком ссылок, на которые не ссылаются никакие файлы;

- наличию противоречивых записей в каталогах и т. п.

Различают два класса возможных нарушений в файловой системе:

- нарушение целостности данных;

- нарушение целостности файловой системы.

Для защиты целостности данных могут быть использованы разнообразные методы резервного хранения данных (backup).

Утилиты восстановления целостности файловой системы не могут гарантировать восстановление данных после сбоя.

Гарантом сохранности данных является только наличие резервных копий данных.

Для восстановления целостности файловых систем в GNU/Linux используется утилита fsck,

которая аналогично mkfs является надстройкой над специализированными утилитами для различных файловых систем.

Если вызвать утилиту fsck без опции -t, указывающей тип файловой системы, по умолчанию запустится e2fsck, проверяющая файловые системы ext2, ext3 и ext4.

fsck -t ext3 /dev/sdb2

При этом полная проверка осуществляется далеко не всегда, а только при условии:

- наличия флага dirty в суперблоке, что бывает при сбое или выключении питания без отмонтирования файловой системы;

- достижения максимального разрешенного количества монтирований файловой системы без проверки ее целостности;

- достижения максимального срока без проверки целостности файловой системы.

При работе команды e2fsck используется специальный каталог lost+found, находящийся в корневом каталоге файловой системы устройства.

В этом каталоге сохраняются конвертированные в файлы потерянные блоки данных.

75. Монтирование файловых систем

В GNU/Linux все файловые системы на блочных устройства сведены в единую файловую систему посредством каталогов — точек монтирования.
Процесс подключения файловой системы на блочном устройстве к корневой файловой системе называется монтированием. 
При этом корнем файловой системы на смонтированном устройстве становится точка монтирования - каталог единой корневой файловой системы GNU/Linux.
За исключением файловых систем, для которых имеются специальные настройки в файле /etc/fstab, монтирование файловых систем производится суперпользователем.
Стандарт FHS предписывает, что временные точки монтирования файловых систем должны находиться в каталоге /mnt, 
а точки монтирования подключаемых файловых систем на съемных носителях — в каталоге /media. 
Например, каталог /media/cdrom может быть точкой монтирования для CD-ROM.

Команда mount позволяет смонтировать файловую систему указанного с помощью опции -t типа (по умолчанию ext2, 
но современный mount умеет сам определить что там за fs у нас) в каталог — точку монтирования.
Первый аргумент команды mount - файл блочного устройства, на котором находится монтируемая файловая система.
Второй аргумент — точка монтирования этой файловой системы.

mount - получение списка смонтированных устройств
mount /dev/sdb2 /mnt - примонтировать раздел диска /dev/sdb2 в каталог /mnt
mount /dev/sda1 /media/usbdisk - примонтировать раздел диска /dev/sdф1 в каталог /mnt/usbdisk
mount -t iso9660 -r /dev/cdrom /media/cdrom - примонтировать сдпривод /dev/cdrom в каталог /media/cdrom


Монтирование файловой системы подменяет индексный дескриптор каталога — точки монтирования. 
До монтирования индексный дескриптор соответствует каталогу, находящемуся в файловой системе, к которой монтируется устройство. 
После монтирования индексный дескриптор каталога — точки монтирования принадлежит уже смонтированной файловой системе.


У всех каталогов — точек монтирования файловых систем индексный дескриптор имеет номер 2
ls -id / /home /media/disk 


Отмонтировать файловые системы (без специальных настроек в /etc/fstab) имеет право только суперпользователь. 
Для отмонтирования файловой системы применяется команда umount, которой в качестве аргумента должен быть задан единственный аргумент — либо точка монтирования, либо файл устройства.
ls /media/usbdisk/
umount /media/usbdisk/

Хорошим правилом является следующее: не рекомендуется хранить какие-либо файлы в каталогах, являющихся точками монтирования файловых систем.

В GNU/Linux все файловые системы на блочных устройства сведены в единую файловую систему посредством каталогов — точек монтирования.

Процесс подключения файловой системы на блочном устройстве к корневой файловой системе называется монтированием.

При этом корнем файловой системы на смонтированном устройстве становится точка монтирования - каталог единой корневой файловой системы GNU/Linux.

За исключением файловых систем, для которых имеются специальные настройки в файле /etc/fstab, монтирование файловых систем производится суперпользователем.

Стандарт FHS предписывает, что временные точки монтирования файловых систем должны находиться в каталоге /mnt,

а точки монтирования подключаемых файловых систем на съемных носителях — в каталоге /media.

Например, каталог /media/cdrom может быть точкой монтирования для CD-ROM.

Команда mount позволяет смонтировать файловую систему указанного с помощью опции -t типа (по умолчанию ext2,

но современный mount умеет сам определить что там за fs у нас) в каталог — точку монтирования.

Первый аргумент команды mount - файл блочного устройства, на котором находится монтируемая файловая система.

Второй аргумент — точка монтирования этой файловой системы.

mount - получение списка смонтированных устройств

mount /dev/sdb2 /mnt - примонтировать раздел диска /dev/sdb2 в каталог /mnt

mount /dev/sda1 /media/usbdisk - примонтировать раздел диска /dev/sdф1 в каталог /mnt/usbdisk

mount -t iso9660 -r /dev/cdrom /media/cdrom - примонтировать сдпривод /dev/cdrom в каталог /media/cdrom

Монтирование файловой системы подменяет индексный дескриптор каталога — точки монтирования.

До монтирования индексный дескриптор соответствует каталогу, находящемуся в файловой системе, к которой монтируется устройство.

После монтирования индексный дескриптор каталога — точки монтирования принадлежит уже смонтированной файловой системе.

У всех каталогов — точек монтирования файловых систем индексный дескриптор имеет номер 2

ls -id / /home /media/disk

Отмонтировать файловые системы (без специальных настроек в /etc/fstab) имеет право только суперпользователь.

Для отмонтирования файловой системы применяется команда umount, которой в качестве аргумента должен быть задан единственный аргумент — либо точка монтирования, либо файл устройства.

ls /media/usbdisk/

umount /media/usbdisk/

Хорошим правилом является следующее: не рекомендуется хранить какие-либо файлы в каталогах, являющихся точками монтирования файловых систем.

76. Работа с разделом подкачки

Раздел или файл подкачки необходим при работе GNU/Linux для обеспечения временного перемещения страниц памяти из ОЗУ в этот раздел или файл.
Такое перемещение бывает крайне необходимо при недостатке физической памяти. 
При этом страницы памяти, временно не используемые, но, тем не менее, необходимые для работы операционной системы или приложений, временно перемещаются в раздел подкачки. 
Процесс обмена страницами памяти между ОЗУ и разделом подкачки называется paging, а раздел подкачки называется swap-разделом. 
Понятия swapping и paging отличаются. 
Понятие swapping обозначает полное перемещение образа процесса из ОЗУ в раздел подкачки.
Получить информацию об использовании раздела подкачки можно с помощью команды swapon -s

Пример создание файла подкачки:
dd if=/dev/zero of=swap.file bs=1k count=131072
mkswap swap.file
mkswap -c /dev/sda2

Ну или вот так еще можно создать файл подкачки и добавить его /etc/fstab:
fallocate -l 1G /.swap
chmod 600 /.swap
mkswap /.swap
echo '/.swap none swap defaults 0 0' >> /etc/fstab
swapon /.swap

Раздел или файл подкачки необходим при работе GNU/Linux для обеспечения временного перемещения страниц памяти из ОЗУ в этот раздел или файл.

Такое перемещение бывает крайне необходимо при недостатке физической памяти.

При этом страницы памяти, временно не используемые, но, тем не менее, необходимые для работы операционной системы или приложений, временно перемещаются в раздел подкачки.

Процесс обмена страницами памяти между ОЗУ и разделом подкачки называется paging, а раздел подкачки называется swap-разделом.

Понятия swapping и paging отличаются.

Понятие swapping обозначает полное перемещение образа процесса из ОЗУ в раздел подкачки.

Получить информацию об использовании раздела подкачки можно с помощью команды swapon -s

Пример создание файла подкачки:

dd if=/dev/zero of=swap.file bs=1k count=131072

mkswap swap.file

mkswap -c /dev/sda2

Ну или вот так еще можно создать файл подкачки и добавить его /etc/fstab:

fallocate -l 1G /.swap

chmod 600 /.swap

mkswap /.swap

echo '/.swap none swap defaults 0 0' >> /etc/fstab

swapon /.swap

77. Файл информации о файловых системах /etc/fstab

При установке GNU/Linux создается файл /etc/fstab, содержащий информацию о файловых системах, 
автоматически монтируемых при загрузке или по требованию пользователя. 
Информация в файле /etc/fstab представлена в виде таблицы.
<device> <mount point> <type> <options> <dump> <pass>

Строки, начинающиеся с символа #, являются комментариями. 
Таблица, содержащаяся в файле /etc/fstab, состоит из колонок полей, назначение которых следующее:

<device> содержит имя файла монтируемого устройства;

<mount point> указывает каталог — точку монтирования;

<type> содержит тип файловой системы на данном носителе;
   
<options> содержит опции команды mount, которые должны быть использованы при монтировании данной файловой системы;
          defaults Установки: rw, suid, dev, exec, auto, nouser, asynch
          asynch Асинхронный режим ввода/вывода
          auto Монтировать во время загрузки
          noauto Не монтировать во время загрузки
          exec Разрешение выполнения файлов с машинным кодом
          noexec Запрет выполнения файлов с машинным кодом
          suid Бит SUID устанавливать можно
          nosuid Запрещена установка битов SUID
          user Обычный пользователь может монтировать устройство
          nouser Монтировать разрешено только суперпользователю
          ro Режим только для чтения
          rw Разрешено как чтение, так и запись

<dump> указывает, надо ли для данной файловой системы производить автоматическое резервное копирование (backup) командой dump.
       Если в этом поле находится 1, то резервное копирование разрешено, если 0 — нет;

<pass> предназначено для порядка проверки целостности файловых систем при загрузке операционной системы. 
      Для корневой файловой системы в этом поле должно быть значение 1. 
      Для других файловых систем которые необходимо проверять при загрузке, следует указать 2. 
      Если проверка не требуется, то 0.

Наличие записи в файле /etc/fstab означает, что данная файловая система может быть смонтирована с помощью единственного аргумента командной строки mount. 
Для монтирования файловой системы, указанной в /etc/fstab, достаточно задать либо точку монтирования, либо файл устройства.

При установке GNU/Linux создается файл /etc/fstab, содержащий информацию о файловых системах,

автоматически монтируемых при загрузке или по требованию пользователя.

Информация в файле /etc/fstab представлена в виде таблицы.

Строки, начинающиеся с символа #, являются комментариями.

Таблица, содержащаяся в файле /etc/fstab, состоит из колонок полей, назначение которых следующее:

<device> содержит имя файла монтируемого устройства;

<mount point> указывает каталог — точку монтирования;

<type> содержит тип файловой системы на данном носителе;

<options> содержит опции команды mount, которые должны быть использованы при монтировании данной файловой системы;

defaults Установки: rw, suid, dev, exec, auto, nouser, asynch

asynch Асинхронный режим ввода/вывода

auto Монтировать во время загрузки

noauto Не монтировать во время загрузки

exec Разрешение выполнения файлов с машинным кодом

noexec Запрет выполнения файлов с машинным кодом

suid Бит SUID устанавливать можно

nosuid Запрещена установка битов SUID

user Обычный пользователь может монтировать устройство

nouser Монтировать разрешено только суперпользователю

ro Режим только для чтения

rw Разрешено как чтение, так и запись

<dump> указывает, надо ли для данной файловой системы производить автоматическое резервное копирование (backup) командой dump.

Если в этом поле находится 1, то резервное копирование разрешено, если 0 — нет;

<pass> предназначено для порядка проверки целостности файловых систем при загрузке операционной системы.

Для корневой файловой системы в этом поле должно быть значение 1.

Для других файловых систем которые необходимо проверять при загрузке, следует указать 2.

Если проверка не требуется, то 0.

Наличие записи в файле /etc/fstab означает, что данная файловая система может быть смонтирована с помощью единственного аргумента командной строки mount.

Для монтирования файловой системы, указанной в /etc/fstab, достаточно задать либо точку монтирования, либо файл устройства.

78. Мониторинг дисковых ресурсов

df -h - Определение свободного пространства на дисках

Для получения информации о наличии свободных индексных дескрипторов необходимо вызвать команду df –i
df –i - получения информации о наличии свободных индексных дескрипторов

Для того чтобы узнать, сколько пространства занимают файлы в каталоге, следует использовать команду du, отображающую количество блоков, 
занимаемых каждым каталогом и каждым его подкаталогом.
Можно использовать du -h для отображения информации в удобных единицах. 
Также можно отобразить лишь суммарную информацию о каталоге, для этого применяется du –s
du -h
du –s
du -sh ~
du -sh /

df -h - Определение свободного пространства на дисках

Для получения информации о наличии свободных индексных дескрипторов необходимо вызвать команду df –i

df –i - получения информации о наличии свободных индексных дескрипторов

Для того чтобы узнать, сколько пространства занимают файлы в каталоге, следует использовать команду du, отображающую количество блоков,

занимаемых каждым каталогом и каждым его подкаталогом.

Можно использовать du -h для отображения информации в удобных единицах.

Также можно отобразить лишь суммарную информацию о каталоге, для этого применяется du –s

du -h

du –s

du -sh ~

du -sh /

79. Резервное копирование

Залог сохранности данных — это регулярное и неукоснительное выполнение резервного копирования данных. 
В этой главе читатель познакомится с основами создания политики резервного копирования, а также изучит основные программы для архивирования и сжатия данных.

Планирование резервного копирования
При планировании резервного копирования надо определить следующее:
- какие данные должны быть скопированы и где они находятся (в каких каталогах или файловых системах а также, возможно, на каких компьютерах)
- какой тип носителей данных будет использован для резервного копирования
- с какой периодичностью будет производиться копирование данных
- как будет осуществляться ротация резервных носителей данных
- кто уполномочен производить резервное копирование
- можно ли выполнять резервное копирование полностью автоматически
- в какие моменты времени должно осуществляться резервное копирование
- где и как будет производиться хранение носителей резервных копий
- каков будет порядок восстановления утраченных данных из резервных копий
- каково допустимое время, необходимое для восстановления данных

В процессе принятия решения об организации резервного копирования надо учесть частоту изменения данных в файловой системе. 
В большинстве систем содержимое следующих каталогов меняется относительно редко после установки системы:
- /boot — файлы, необходимые для загрузки ядра Linux
- /etc — конфигурационные файлы, база данных паролей и сценарии инициализации системы и запуска демонов
- /lib — основные жизненно важные библиотеки
- /opt — дополнительное программное обеспечение
- /bin и /sbin — исполняемые файлы, жизненно важные для системы
- /usr — вторичная иерархия файловой системы, содержащая статические файлы

Большинство каталогов с программным обеспечением и библиотеками устанавливается с дистрибутивных носителей, поэтому, при условии их сохранности, 
резервное копирование этих каталогов совсем не обязательно за редкими исключениями. 
Такими исключениями, например, могут явиться каталоги /usr/local и /opt, в которые может быть установлено программное обеспечение не из дистрибутивного комплекта.

Резервное копирование данных должно производиться тогда, когда эти данные не изменяются. 
В противном случае нельзя гарантировать сохранности этих данных. 
Желательно регулярно выполнять резервное копирование в часы минимальной нагрузки на систему. 
Обычно минимальная нагрузка имеет место в диапазоне от 2 часов ночи до 5 утра (в зависимости от специфики работы системы).

Резервное копирование может производиться в интерактивном режиме, требующем присутствия человека (attended backup). 
Чаще всего такой режим копирования применяется при каких-либо незапланированных ситуациях.
Другой вид резервного копирования — не интерактивный (unattended backup).
Не интерактивное резервное копирование идеально подходит для заранее запланированных регулярных процедур копирования, осуществляемых в нерабочее время.

Хорошо, если резервное копирование производится достаточно быстро, однако гораздо важнее, чтобы быстро осуществлялось восстановление данных,
поскольку обычно резервное копирование есть процедура регулярная, а восстановление данных требуется в случае сбоя системы, 
который заранее предсказать невозможно. 
Суммарное время на восстановление данных состоит как минимум из:
- времени, необходимого для поиска и доставки носителя резервной копии
- времени на поиск требуемой информации на носителе (если поиск допускается)
- времени копирования информации с резервного носителя.

Если в архивной копии находится полная копия файловой системы, то время восстановления с нее может быть недопустимо большим.
Поэтому различают два типа резервного копирования:
- полное, при котором в архив помещается полная копия файловой системы
- инкрементальное, при котором архив разбивается на несколько частей, в которых хранятся копии файлов, изменившихся с момента последнего копирования

В GNU/Linux для инкрементального резервного копирования файловых систем ext2, ext3 и ext4 применяется утилита dump.

Залог сохранности данных — это регулярное и неукоснительное выполнение резервного копирования данных.

В этой главе читатель познакомится с основами создания политики резервного копирования, а также изучит основные программы для архивирования и сжатия данных.

Планирование резервного копирования

При планировании резервного копирования надо определить следующее:

- какие данные должны быть скопированы и где они находятся (в каких каталогах или файловых системах а также, возможно, на каких компьютерах)

- какой тип носителей данных будет использован для резервного копирования

- с какой периодичностью будет производиться копирование данных

- как будет осуществляться ротация резервных носителей данных

- кто уполномочен производить резервное копирование

- можно ли выполнять резервное копирование полностью автоматически

- в какие моменты времени должно осуществляться резервное копирование

- где и как будет производиться хранение носителей резервных копий

- каков будет порядок восстановления утраченных данных из резервных копий

- каково допустимое время, необходимое для восстановления данных

В процессе принятия решения об организации резервного копирования надо учесть частоту изменения данных в файловой системе.

В большинстве систем содержимое следующих каталогов меняется относительно редко после установки системы:

- /boot — файлы, необходимые для загрузки ядра Linux

- /etc — конфигурационные файлы, база данных паролей и сценарии инициализации системы и запуска демонов

- /lib — основные жизненно важные библиотеки

- /opt — дополнительное программное обеспечение

- /bin и /sbin — исполняемые файлы, жизненно важные для системы

- /usr — вторичная иерархия файловой системы, содержащая статические файлы

Большинство каталогов с программным обеспечением и библиотеками устанавливается с дистрибутивных носителей, поэтому, при условии их сохранности,

резервное копирование этих каталогов совсем не обязательно за редкими исключениями.

Такими исключениями, например, могут явиться каталоги /usr/local и /opt, в которые может быть установлено программное обеспечение не из дистрибутивного комплекта.

Резервное копирование данных должно производиться тогда, когда эти данные не изменяются.

В противном случае нельзя гарантировать сохранности этих данных.

Желательно регулярно выполнять резервное копирование в часы минимальной нагрузки на систему.

Обычно минимальная нагрузка имеет место в диапазоне от 2 часов ночи до 5 утра (в зависимости от специфики работы системы).

Резервное копирование может производиться в интерактивном режиме, требующем присутствия человека (attended backup).

Чаще всего такой режим копирования применяется при каких-либо незапланированных ситуациях.

Другой вид резервного копирования — не интерактивный (unattended backup).

Не интерактивное резервное копирование идеально подходит для заранее запланированных регулярных процедур копирования, осуществляемых в нерабочее время.

Хорошо, если резервное копирование производится достаточно быстро, однако гораздо важнее, чтобы быстро осуществлялось восстановление данных,

поскольку обычно резервное копирование есть процедура регулярная, а восстановление данных требуется в случае сбоя системы,

который заранее предсказать невозможно.

Суммарное время на восстановление данных состоит как минимум из:

- времени, необходимого для поиска и доставки носителя резервной копии

- времени на поиск требуемой информации на носителе (если поиск допускается)

- времени копирования информации с резервного носителя.

Если в архивной копии находится полная копия файловой системы, то время восстановления с нее может быть недопустимо большим.

Поэтому различают два типа резервного копирования:

- полное, при котором в архив помещается полная копия файловой системы

- инкрементальное, при котором архив разбивается на несколько частей, в которых хранятся копии файлов, изменившихся с момента последнего копирования

В GNU/Linux для инкрементального резервного копирования файловых систем ext2, ext3 и ext4 применяется утилита dump.

80. Команда dd

Команда dd осуществляет низкоуровневое поблочное копирование из файла, указанного в командной строке после префикса if=, в файл, указанный после of=. 
По умолчанию используются блоки размером 512 байтов (один сектор).

Обычно команда dd не применяется для резервного копирования файловых систем, однако она с успехом может быть использована для создания образов
файловых систем и для восстановления файловых систем из образов. 
Так, для поблочного копирования содержимого CD в файл можно использовать команду из примера.

dd if=/dev/cdrom of=image.img bs=1k

В этом примере все содержимое CD блоками размером 1 Кбайт (аргумент bs=1k) копируется в файл image.img.
Файловые системы можно копировать с помощью dd в размонтированном состоянии.
Если аргументы с префиксами if= и of= отсутствуют, то команда dd копирует поток ввода в поток вывода.
Кроме того, часто используются следующие опции команды dd:
 count — количество блоков, которое должно быть скопировано
 skip — количество блоков во входном файле, которое надо пропустить
 seek — количество блоков в выходном файле, которое надо пропустить

Команда dd осуществляет низкоуровневое поблочное копирование из файла, указанного в командной строке после префикса if=, в файл, указанный после of=.

По умолчанию используются блоки размером 512 байтов (один сектор).

Обычно команда dd не применяется для резервного копирования файловых систем, однако она с успехом может быть использована для создания образов

файловых систем и для восстановления файловых систем из образов.

Так, для поблочного копирования содержимого CD в файл можно использовать команду из примера.

dd if=/dev/cdrom of=image.img bs=1k

В этом примере все содержимое CD блоками размером 1 Кбайт (аргумент bs=1k) копируется в файл image.img.

Файловые системы можно копировать с помощью dd в размонтированном состоянии.

Если аргументы с префиксами if= и of= отсутствуют, то команда dd копирует поток ввода в поток вывода.

Кроме того, часто используются следующие опции команды dd:

count — количество блоков, которое должно быть скопировано

skip — количество блоков во входном файле, которое надо пропустить

seek — количество блоков в выходном файле, которое надо пропустить

81. Утилиты для сжатия файлов / Команда tar

В UNIX- и GNU/Linux-системах команды архивирования отделены от утилит сжатия файлов. 
Все утилиты сжатия осуществляют компрессию файлов, указанных в качестве аргументов. 
При этом к исходным названиям файлов добавляются стандартные расширения, перечисленные далее, а права доступа и владения сохраняются.

В GNU/Linux используются следующие утилиты сжатия:
 gzip — применяется наиболее часто, сжатые файлы имеют расширения .gz
 bzip2 — часто обеспечивает лучшую степень сжатия, чем gzip, сжатые файлы имеют расширения .bz2
 compress — стандартная UNIX-утилита сжатия, в GNU/Linux используется реже, чем предыдущие, сжатые файлы имеют расширение .Z.

Команда tar
Один из наиболее часто используемых инструментов резервного копирования — команда tar (tape archive). 
Аргументы команды tar — это файлы и каталоги, которые должны быть помещены в архив. 
Имя архива указывают после опции f команды.

https://b14esh.com/nix/backup/gzip-rar-bzip-tar-zip.html
https://b14esh.com/nix/backup/backup-script.html
https://b14esh.com/devops/konspekt-linux/konspect-linux-ubuntu-1.html

Запаковать:
tar cvzpf name.tar.gz /var/www/html/name_site
Распаковать:
tar xvzf name.tar.gz -C /tmp

Посмотреть что в архиве:
tar tzvf name.tar.gz

В UNIX- и GNU/Linux-системах команды архивирования отделены от утилит сжатия файлов.

Все утилиты сжатия осуществляют компрессию файлов, указанных в качестве аргументов.

При этом к исходным названиям файлов добавляются стандартные расширения, перечисленные далее, а права доступа и владения сохраняются.

В GNU/Linux используются следующие утилиты сжатия:

gzip — применяется наиболее часто, сжатые файлы имеют расширения .gz

bzip2 — часто обеспечивает лучшую степень сжатия, чем gzip, сжатые файлы имеют расширения .bz2

compress — стандартная UNIX-утилита сжатия, в GNU/Linux используется реже, чем предыдущие, сжатые файлы имеют расширение .Z.

Команда tar

Один из наиболее часто используемых инструментов резервного копирования — команда tar (tape archive).

Аргументы команды tar — это файлы и каталоги, которые должны быть помещены в архив.

Имя архива указывают после опции f команды.

https://b14esh.com/nix/backup/gzip-rar-bzip-tar-zip.html

https://b14esh.com/nix/backup/backup-script.html

https://b14esh.com/devops/konspekt-linux/konspect-linux-ubuntu-1.html

Запаковать:

tar cvzpf name.tar.gz /var/www/html/name_site

Распаковать:

tar xvzf name.tar.gz -C /tmp

Посмотреть что в архиве:

tar tzvf name.tar.gz

82. Программы dump и restore

Программа dump предназначена для выполнения инкрементального архивирования файловых систем ext2, ext3 и ext4. 
Полный архив включает в себя копии всех файлов файловой системы, а инкрементальный — только те файлы, дата изменения которых позже некоторой заданной даты. 
Определение этой даты достигается с помощью установки уровней резервного копирования, которые задают моменты отсчета, начиная с которых проверяется актуальность файлов.

Полное копирование называется копированием нулевого уровня. 
При выполнении резервного копирования нулевого уровня все файлы помещаются в архив.

Для всех последующих уровней резервного копирования справедливо правило: 
в архив уровня N помещаются все файлы, созданные или изменившиеся за время, прошедшее с момента последнего копирования уровня M, меньшего, чем N (M < N).

Например, в архив второго уровня попадут все файлы, изменившиеся с момента последнего копирования нулевого или первого уровня.
Программа dump предлагает десять уровней копирования с 0 — полный архив до 9.

В общем виде командная строка dump выглядит следующим образом:
dump <-уровень> [опции] <файлы>
-уровень — уровень резервного копирования, например 
    -0 - полное
    -9 - отдает приоритет только резервному копированию измененных файлов файловой системы
- опции команды dump
    -f файл - файл устройства или обычный файл, куда будет помещен архив
    -z - выполнять компрессию gzip
    -L метка - задать метку тома
    -u - сделать запись о резервном копировании в файл /etc/dumpdates

dump -0u -f /dev/st0 /home - Эта команда выполнит полное резервное копирование (уровень 0) на магнитную ленту, записав информацию об этом в файл /etc/dumpdates (опция -u)
dump -2u -L 'Level2' -f /dev/st0 /dev/sda3 - Пример создания инкрементального архива второго уровня
dump 0ufz /dev/sdb5 /home - создать резервную копию файлов домашнего каталога на диск /dev/sdb5 и зжать
dump 0uaf /dev/sdb5 /dev/sdd1 - создать резервную копию диска "/dev/sdd1" на диск /dev/sdb5


Команда restore позволяет извлечь файлы из архива, созданного командой dump. 
Имеется возможность извлечь все или некоторые файлы из архива.
При использовании команды restore обязательно должен быть указан режим работы с помощью одной из опций:
-i - включение интерактивного режима работы команды
-r - режим не интерактивного восстановления всех файлов из архива
-t - вывод содержимого архива
-x - восстановление файлов с возможностью селективного выбора файлов
-f - указывают файл архива
 


restore -rf /dev/st0 - Например, имеется полный архив на магнитной ленте, необходимо его восстановить      
-r задает режим восстановления, опция -f указывает файл с архивом
-i задает интерактивный режим работы команды restore
В интерактивном режиме restore предоставляет встроенную командную строку, в которой могут быть выполнены следующие команды:
add — пометить указанный каталог или файл для восстановления
cd — сменить текущий каталог
delete — удалить указанный файл или каталог из списка на восстановление
extract — восстановить файлы
help — отобразить помощь по встроенным командам
ls — вывести список файлов
pwd — вывести полный путь к текущему каталогу
quit — выйти из программы, даже если список на восстановление не пуст
setmodes — установить права доступа и даты на восстанавливаемые файлы
verbose — включить режим подробного информирования.


Другие важные опции команды restore:
-a — подавить выдачу вопроса о номере тома, содержащего требуемые для восстановления файлы (в режимах -x и -i)
-M — работа с многотомным архивом (см. опцию -M команды dump)
-V — работа с многотомными не ленточными архивами (например, CD-ROM)
-N — симуляция восстановления файлов
-o — восстанавливать права доступа к файлам без выдачи запросов

restore -x -ao -f proceed.0.dump home/aberes/8marta/iptraf.sh
Опция -x позволяет селективно извлечь файл из архива. 
Опция -a отменяет выдачу запроса о номере тома, а -o автоматически без запроса устанавливает права доступа к восстанавливаемым файлам. 
После восстановления в текущем каталоге образовалось дерево подкаталогов, содержащее восстановленный файл.

Программа dump предназначена для выполнения инкрементального архивирования файловых систем ext2, ext3 и ext4.

Полный архив включает в себя копии всех файлов файловой системы, а инкрементальный — только те файлы, дата изменения которых позже некоторой заданной даты.

Определение этой даты достигается с помощью установки уровней резервного копирования, которые задают моменты отсчета, начиная с которых проверяется актуальность файлов.

Полное копирование называется копированием нулевого уровня.

При выполнении резервного копирования нулевого уровня все файлы помещаются в архив.

Для всех последующих уровней резервного копирования справедливо правило:

в архив уровня N помещаются все файлы, созданные или изменившиеся за время, прошедшее с момента последнего копирования уровня M, меньшего, чем N (M < N).

Например, в архив второго уровня попадут все файлы, изменившиеся с момента последнего копирования нулевого или первого уровня.

Программа dump предлагает десять уровней копирования с 0 — полный архив до 9.

В общем виде командная строка dump выглядит следующим образом:

dump <-уровень> [опции] <файлы>

-уровень — уровень резервного копирования, например

-0 - полное

-9 - отдает приоритет только резервному копированию измененных файлов файловой системы

- опции команды dump

-f файл - файл устройства или обычный файл, куда будет помещен архив

-z - выполнять компрессию gzip

-L метка - задать метку тома

-u - сделать запись о резервном копировании в файл /etc/dumpdates

dump -0u -f /dev/st0 /home - Эта команда выполнит полное резервное копирование (уровень 0) на магнитную ленту, записав информацию об этом в файл /etc/dumpdates (опция -u)

dump -2u -L 'Level2' -f /dev/st0 /dev/sda3 - Пример создания инкрементального архива второго уровня

dump 0ufz /dev/sdb5 /home - создать резервную копию файлов домашнего каталога на диск /dev/sdb5 и зжать

dump 0uaf /dev/sdb5 /dev/sdd1 - создать резервную копию диска "/dev/sdd1" на диск /dev/sdb5

Команда restore позволяет извлечь файлы из архива, созданного командой dump.

Имеется возможность извлечь все или некоторые файлы из архива.

При использовании команды restore обязательно должен быть указан режим работы с помощью одной из опций:

-i - включение интерактивного режима работы команды

-r - режим не интерактивного восстановления всех файлов из архива

-t - вывод содержимого архива

-x - восстановление файлов с возможностью селективного выбора файлов

-f - указывают файл архива

restore -rf /dev/st0 - Например, имеется полный архив на магнитной ленте, необходимо его восстановить

-r задает режим восстановления, опция -f указывает файл с архивом

-i задает интерактивный режим работы команды restore

В интерактивном режиме restore предоставляет встроенную командную строку, в которой могут быть выполнены следующие команды:

add — пометить указанный каталог или файл для восстановления

cd — сменить текущий каталог

delete — удалить указанный файл или каталог из списка на восстановление

extract — восстановить файлы

help — отобразить помощь по встроенным командам

ls — вывести список файлов

pwd — вывести полный путь к текущему каталогу

quit — выйти из программы, даже если список на восстановление не пуст

setmodes — установить права доступа и даты на восстанавливаемые файлы

verbose — включить режим подробного информирования.

Другие важные опции команды restore:

-a — подавить выдачу вопроса о номере тома, содержащего требуемые для восстановления файлы (в режимах -x и -i)

-M — работа с многотомным архивом (см. опцию -M команды dump)

-V — работа с многотомными не ленточными архивами (например, CD-ROM)

-N — симуляция восстановления файлов

-o — восстанавливать права доступа к файлам без выдачи запросов

restore -x -ao -f proceed.0.dump home/aberes/8marta/iptraf.sh

Опция -x позволяет селективно извлечь файл из архива.

Опция -a отменяет выдачу запроса о номере тома, а -o автоматически без запроса устанавливает права доступа к восстанавливаемым файлам.

После восстановления в текущем каталоге образовалось дерево подкаталогов, содержащее восстановленный файл.

83. dump / rdump / restore /rrestore

Для резервного копирования файлов на удаленную машину существует программа rdump.
rdump 0uf linux_host_for_backup:/dev/sdb5/home
linux_host_for_backup - Имя сервера для бекапов или IP-адрес
/dev/sdb5 - устройство куда мы складываем бэкапы


Резервное копирование данных в обычный файл
dd if=/dev/zero of=10g.img bs=1 count=0 seek=10G - создаем блочный файл для хранения дампа
dump 0f /media/myarchive/10g.img /home - снимаем дамп  с каталога /home в файл  /media/myarchive/10g.img

Если нам надо скопировать на внешнее устройство наш дамп, делаем следующие:
dd if=10g.img of=/dev/sdc7 bs=1M - наш бэкап 10g.img записываем на флешку /dev/sdc7

Чтобы полностью восстановить созданную выше резервную копию, мы должны запустить команду
restore rf /dev/sdc7

Чтобы восстановить резервные копии файловой системы с удаленной машины
rrestore tf  linux_host_for_backup:/dev/sdb5
linux_host_for_backup - Имя сервера для бекапов или IP-адрес
/dev/sdb5 - устройство куда мы складываем бэкапы

Для резервного копирования файлов на удаленную машину существует программа rdump.

rdump 0uf linux_host_for_backup:/dev/sdb5/home

linux_host_for_backup - Имя сервера для бекапов или IP-адрес

/dev/sdb5 - устройство куда мы складываем бэкапы

Резервное копирование данных в обычный файл

dd if=/dev/zero of=10g.img bs=1 count=0 seek=10G - создаем блочный файл для хранения дампа

dump 0f /media/myarchive/10g.img /home - снимаем дамп с каталога /home в файл /media/myarchive/10g.img

Если нам надо скопировать на внешнее устройство наш дамп, делаем следующие:

dd if=10g.img of=/dev/sdc7 bs=1M - наш бэкап 10g.img записываем на флешку /dev/sdc7

Чтобы полностью восстановить созданную выше резервную копию, мы должны запустить команду

restore rf /dev/sdc7

Чтобы восстановить резервные копии файловой системы с удаленной машины

rrestore tf linux_host_for_backup:/dev/sdb5

linux_host_for_backup - Имя сервера для бекапов или IP-адрес

/dev/sdb5 - устройство куда мы складываем бэкапы

84. Системные журналы syslog

Журналы — это важнейший источник информации о деятельности системы.
Журналы предназначены для контроля деятельности системы и ее наладки.

Конфигурационным файлом демона syslogd является /etc/syslog.conf  
Структура строк конфигурации, каждая из которых направляет некоторый поток сообщений в заданный файл (или на удаленный компьютер — сервер ведения журналов), представлена двумя полями:
- определение сообщения (selector) — поле, в котором указывают классы программ, сообщения от которых должны помещаться в данный поток
- поле действия (action) указывает, куда должен быть записан поток сообщений


Пример  Файл /etc/syslog.conf
-----------------------------
#SELECTOR ACTION
*.crit;lpr,cron,mail.none /var/log/critical
daemon.info;daemon.!err -/var/log/daemons
daemon.=err /var/log/daemons.err
authpriv.* /var/log/messages
kern.*;kern.!=info /var/log/kernel
cron.info -/var/log/cron
lpr.info -/var/log/lpr
mail.warning -/var/log/mail/mail
-----------------------------
Первая часть — источник сообщения (facility), а вторая — уровень важности (priority) сообщения.
Эти две части уникально определяют все возможные сообщения, обрабатываемые syslog.

Служба syslog работает со следующими источниками сообщений (facility):
auth — сообщения служб авторизации и безопасности
authpriv — сообщения служб авторизации и безопасности
cron — сообщения служб at и cron
daemon — сообщения, поступающие от демонов
kern — сообщения ядра
lpr — сообщения службы печати;
mail — сообщения, поступающие от служб электронной почты
mark — источник для вставки служебных меток в журналы
news — сообщения службы новостей
security — то же, что и auth;
syslog — собственные сообщения syslog
user — сообщения пользовательских программ
uucp — сообщения службы uucp;
local0, ..., local7 — произвольно используемые источники

Все сообщения разделены также по следующим уровням важности (priority), приведенным в порядке убывания важности:
emerg — система не работоспособна (другое название — panic) - очень важно
alert — требуется немедленное вмешательство
crit — критическое событие
err — ошибка (другое название — error)
warning — предупреждение (другое название — warn)
notice — нормальное, но значимое событие
info — информационное сообщение
debug — отладочная информация - все подряд

Пара источник.важность устанавливает, что сообщения от этого источника с уровнями важности, не меньшими указанного, записываются в этот канал.

Пример:
lpr.info -/var/log/lpr
При такой настройке  все сообщения службы печати с уровнями важности info и выше будут записаны в файл /var/log/lpr. 
Знак "тире" перед именем файла разрешает асинхронную запись в журнал.

При необходимости запретить передачу в канал сообщений с уровнем важности не ниже указанного ставят знак восклицания перед уровнем важности
Пример:
daemon.info;daemon.!err -/var/log/daemons
В этом случае все сообщения от демонов с уровнями важности от info до warning будут записываться в журнал /var/log/daemons, 
а сообщения с уровнями важности, начиная с err, записаны туда не будут.

Если же необходимо записывать в журнал сообщения только с одним уровнем важности, то перед уровнем важности ставят знак "равно".
Пример:
daemon.=err /var/log/daemons.err
В примере 16.4 в журнал попадут лишь сообщения об ошибках и ничего более.

Можно исключить сообщения с заданным уровнем важности.
Пример:
kern.*;kern.!=info /var/log/kernel
Информационные сообщения ядра в журнал записаны не будут.

Звездочка обозначает любые источники или любые уровни важности.
Пример:
authpriv.* /var/log/messages

Если в канал не должны быть записаны любые сообщения от каких-либо источников, то удобно использовать директиву none.
Пример: 
*.crit;lpr,cron,mail.none /var/log/critical

После внесения изменений в файл /etc/syslog.conf вовсе не обязательно перезапускать syslogd. 
Достаточно послать ему сигнал HUP.
Пример:
pkill -1 syslogd

Проверка:
Программа logger позволяет проверить настройки syslogd. 
Опция -p программы logger предназначена для указания источника и важности сообщения.
Пример:
Команда в примере пошлет сообщение в канал mail с уровнем важности err.
logger -p mail.err Proverka

Журналы — это важнейший источник информации о деятельности системы.

Журналы предназначены для контроля деятельности системы и ее наладки.

Конфигурационным файлом демона syslogd является /etc/syslog.conf

Структура строк конфигурации, каждая из которых направляет некоторый поток сообщений в заданный файл (или на удаленный компьютер — сервер ведения журналов), представлена двумя полями:

- определение сообщения (selector) — поле, в котором указывают классы программ, сообщения от которых должны помещаться в данный поток

- поле действия (action) указывает, куда должен быть записан поток сообщений

Пример Файл /etc/syslog.conf

-----------------------------

#SELECTOR ACTION

*.crit;lpr,cron,mail.none /var/log/critical

daemon.info;daemon.!err -/var/log/daemons

daemon.=err /var/log/daemons.err

authpriv.* /var/log/messages

kern.*;kern.!=info /var/log/kernel

cron.info -/var/log/cron

lpr.info -/var/log/lpr

mail.warning -/var/log/mail/mail

-----------------------------

Первая часть — источник сообщения (facility), а вторая — уровень важности (priority) сообщения.

Эти две части уникально определяют все возможные сообщения, обрабатываемые syslog.

Служба syslog работает со следующими источниками сообщений (facility):

auth — сообщения служб авторизации и безопасности

authpriv — сообщения служб авторизации и безопасности

cron — сообщения служб at и cron

daemon — сообщения, поступающие от демонов

kern — сообщения ядра

lpr — сообщения службы печати;

mail — сообщения, поступающие от служб электронной почты

mark — источник для вставки служебных меток в журналы

news — сообщения службы новостей

security — то же, что и auth;

syslog — собственные сообщения syslog

user — сообщения пользовательских программ

uucp — сообщения службы uucp;

local0, ..., local7 — произвольно используемые источники

Все сообщения разделены также по следующим уровням важности (priority), приведенным в порядке убывания важности:

emerg — система не работоспособна (другое название — panic) - очень важно

alert — требуется немедленное вмешательство

crit — критическое событие

err — ошибка (другое название — error)

warning — предупреждение (другое название — warn)

notice — нормальное, но значимое событие

info — информационное сообщение

debug — отладочная информация - все подряд

Пара источник.важность устанавливает, что сообщения от этого источника с уровнями важности, не меньшими указанного, записываются в этот канал.

Пример:

lpr.info -/var/log/lpr

При такой настройке все сообщения службы печати с уровнями важности info и выше будут записаны в файл /var/log/lpr.

Знак "тире" перед именем файла разрешает асинхронную запись в журнал.

При необходимости запретить передачу в канал сообщений с уровнем важности не ниже указанного ставят знак восклицания перед уровнем важности

Пример:

daemon.info;daemon.!err -/var/log/daemons

В этом случае все сообщения от демонов с уровнями важности от info до warning будут записываться в журнал /var/log/daemons,

а сообщения с уровнями важности, начиная с err, записаны туда не будут.

Если же необходимо записывать в журнал сообщения только с одним уровнем важности, то перед уровнем важности ставят знак "равно".

Пример:

daemon.=err /var/log/daemons.err

В примере 16.4 в журнал попадут лишь сообщения об ошибках и ничего более.

Можно исключить сообщения с заданным уровнем важности.

Пример:

kern.*;kern.!=info /var/log/kernel

Информационные сообщения ядра в журнал записаны не будут.

Звездочка обозначает любые источники или любые уровни важности.

Пример:

authpriv.* /var/log/messages

Если в канал не должны быть записаны любые сообщения от каких-либо источников, то удобно использовать директиву none.

Пример:

*.crit;lpr,cron,mail.none /var/log/critical

После внесения изменений в файл /etc/syslog.conf вовсе не обязательно перезапускать syslogd.

Достаточно послать ему сигнал HUP.

Пример:

pkill -1 syslogd

Проверка:

Программа logger позволяет проверить настройки syslogd.

Опция -p программы logger предназначена для указания источника и важности сообщения.

Пример:

Команда в примере пошлет сообщение в канал mail с уровнем важности err.

logger -p mail.err Proverka

85. Служба ротации журналов / logrotate

С течением времени накапливающиеся сообщения в файлах журналов могут переполнить файловую систему. 
Для предотвращения этого предназначена программа logrotate, обеспечивающая ротацию журналов. 
Стандартный путь вызова logrotate — запуск ее с помощью cron.
Файл /etc/logrotate.conf содержит настройки logrotate, в котором определяются действия, производимые с журналами.
Программа logrotate способна производить следующие действия с файлами журналов:
- удалять;
- переименовывать;
- сжимать с помощью программ-компрессоров;
- создавать новые пустые файлы журналов;
- посылать файлы журналов по электронной почте.

Ротация осуществляется следующим образом  для  журнала например messages:
1. При первой ротации файл messages переименовывается в messages.1.
2. При второй ротации messages.1 переименовывается в messages.2, а файл messages переименовывается в messages.1.
3. При третьей ротации файл messages.2 переименовывается в messages.3, файл messages.1 в messages.2 и т. д.

Пример ротированные журналы:
# ls -w 1 /var/log/messages*
/var/log/messages
/var/log/messages.1
/var/log/messages.2

Утилита logrotate удаляет архивные копии старых журналов по достижении заданного количества копий.
Настройки по умолчанию находятся в начале файла /etc/logrotate.conf (в современных дистрибутивах в каталоге /etc/logrotate.d)
weekly
rotate 4
create
compress
notifempty
include /etc/logrotate.d
/var/log/wtmp {
   monthly
   create 0664 root utmp
   rotate 4
}

Настройки daily, weekly и monthly определяют периодичность ротации.
Настройка rotate определяет количество старых журналов, которое должно храниться до удаления. 
А настройка create позволяет указывать права доступа и владения создаваемых журнальных файлов.

Для сжатия файлов старых журналов предназначена настройка compress.
Кроме этого, можно просто копировать файлы при помощи настройки copy, оставляя при этом оригинальные файлы журналов нетронутыми.

Настройка notifempty позволяет не осуществлять ротацию пустых файлов.

Директива include позволяет включать в файл конфигурации дополнительные настройки, указанные в файле — аргументе этой директивы. 
Если аргументом является каталог, то в основной файл конфигурации включается содержимое всех конфигурационных файлов, находящихся в этом каталоге.

Настройка mail позволяет посылать журналы по электронной почте. 
А директивы prerotate и postrotate указывают сценарии, которые будут исполнены, соответственно, до и после ротации.
С помощью настройки size можно указывать размер файла журнала, при превышении которого должна осуществляться его ротация.

С течением времени накапливающиеся сообщения в файлах журналов могут переполнить файловую систему.

Для предотвращения этого предназначена программа logrotate, обеспечивающая ротацию журналов.

Стандартный путь вызова logrotate — запуск ее с помощью cron.

Файл /etc/logrotate.conf содержит настройки logrotate, в котором определяются действия, производимые с журналами.

Программа logrotate способна производить следующие действия с файлами журналов:

- удалять;

- переименовывать;

- сжимать с помощью программ-компрессоров;

- создавать новые пустые файлы журналов;

- посылать файлы журналов по электронной почте.

Ротация осуществляется следующим образом для журнала например messages:

1. При первой ротации файл messages переименовывается в messages.1.

2. При второй ротации messages.1 переименовывается в messages.2, а файл messages переименовывается в messages.1.

3. При третьей ротации файл messages.2 переименовывается в messages.3, файл messages.1 в messages.2 и т. д.

Пример ротированные журналы:

# ls -w 1 /var/log/messages*

/var/log/messages

/var/log/messages.1

/var/log/messages.2

Утилита logrotate удаляет архивные копии старых журналов по достижении заданного количества копий.

Настройки по умолчанию находятся в начале файла /etc/logrotate.conf (в современных дистрибутивах в каталоге /etc/logrotate.d)

weekly

rotate 4

create

compress

notifempty

include /etc/logrotate.d

/var/log/wtmp {

monthly

create 0664 root utmp

rotate 4

}

Настройки daily, weekly и monthly определяют периодичность ротации.

Настройка rotate определяет количество старых журналов, которое должно храниться до удаления.

А настройка create позволяет указывать права доступа и владения создаваемых журнальных файлов.

Для сжатия файлов старых журналов предназначена настройка compress.

Кроме этого, можно просто копировать файлы при помощи настройки copy, оставляя при этом оригинальные файлы журналов нетронутыми.

Настройка notifempty позволяет не осуществлять ротацию пустых файлов.

Директива include позволяет включать в файл конфигурации дополнительные настройки, указанные в файле — аргументе этой директивы.

Если аргументом является каталог, то в основной файл конфигурации включается содержимое всех конфигурационных файлов, находящихся в этом каталоге.

Настройка mail позволяет посылать журналы по электронной почте.

А директивы prerotate и postrotate указывают сценарии, которые будут исполнены, соответственно, до и после ротации.

С помощью настройки size можно указывать размер файла журнала, при превышении которого должна осуществляться его ротация.

86. Хранение учетных записей пользователей

В GNU/Linux процедура аутентификации пользователя при входе в сеанс может быть проведена разными способами. 

Вот некоторые из них:
- хранение учетных записей в файлах
- аутентификация с помощью системы Kerberos
- аутентификация в NIS/NIS+
- аутентификация в LDAP
- использование специализированных систем аутентификации (например, TCB)

Файл /etc/passwd содержит учетные записи пользователей, а в файле /etc/shadow хранятся шифрованные пароли. 
Каждая запись в этих файлах соответствует од ному пользователю системы. 
Поля записей разделены двоеточиями.

Структура записей в файле /etc/passwd следующая:
- имя пользователя
- пароль - содержит символ x при использовании теневых паролей
- UID пользователя
- GID пользователя
- справочная информацию о пользователе
- домашний каталог пользователя
- оболочка

Использование системы теневых паролей существенно снижает эту опасность, т. к. файл /etc/shadow, 
где хранятся шифрованные пароли, не позволяет его читать никому, кроме суперпользователя.

Структура файла /etc/shadow такова:
- имя пользователя
- зашифрованный пароль
- количество дней с 1 января 1970 г. до момента последней смены пароля
- минимальное время жизни пароля
- максимальное время жизни пароля
- время до момента устаревания пароля, начиная с которого пользователь
- будет получать предупреждения о необходимости
- период времени с момента устаревания пароля, по истечении которого учетная запись пользователя будет заблокирована
- срок жизни учетной записи
- девятое поле зарезервировано и в настоящее время в GNU/Linux не используется

В GNU/Linux процедура аутентификации пользователя при входе в сеанс может быть проведена разными способами.

Вот некоторые из них:

- хранение учетных записей в файлах

- аутентификация с помощью системы Kerberos

- аутентификация в NIS/NIS+

- аутентификация в LDAP

- использование специализированных систем аутентификации (например, TCB)

Файл /etc/passwd содержит учетные записи пользователей, а в файле /etc/shadow хранятся шифрованные пароли.

Каждая запись в этих файлах соответствует од ному пользователю системы.

Поля записей разделены двоеточиями.

Структура записей в файле /etc/passwd следующая:

- имя пользователя

- пароль - содержит символ x при использовании теневых паролей

- UID пользователя

- GID пользователя

- справочная информацию о пользователе

- домашний каталог пользователя

- оболочка

Использование системы теневых паролей существенно снижает эту опасность, т. к. файл /etc/shadow,

где хранятся шифрованные пароли, не позволяет его читать никому, кроме суперпользователя.

Структура файла /etc/shadow такова:

- имя пользователя

- зашифрованный пароль

- количество дней с 1 января 1970 г. до момента последней смены пароля

- минимальное время жизни пароля

- максимальное время жизни пароля

- время до момента устаревания пароля, начиная с которого пользователь

- будет получать предупреждения о необходимости

- период времени с момента устаревания пароля, по истечении которого учетная запись пользователя будет заблокирована

- срок жизни учетной записи

- девятое поле зарезервировано и в настоящее время в GNU/Linux не используется

87. Регистрация, удаление и блокирование учетных записей пользователей

Правами регистрации пользователей в системе обладает суперпользователь.
Для добавления учетной записи пользователя применяется команда useradd.
В качестве аргумента для этой команды должно быть указано имя пользователя.
Пример:
useradd user1 - создание пользователя user1
id user1 - показать в ИД пользователя и в какие группы он входит

Регистрация пользователя приводит к появлению соответствующих записей в файлах /etc/passwd и /etc/shadow.
grep user1 /etc/passwd
grep user1 /etc/shadow

Создание приватной группы и домашнего каталога пользователя характерно для "Red Hat Linux", debian и подобных дистрибутивов.
useradd -D  - настройки команды useradd по умолчанию
GROUP=100   - GID для вновь регистрируемых пользователей — 100 (для Red Hat эта настройка игнорируется при создании приватной группы пользователя)
HOME=/home  - домашние каталоги пользователей создаются в каталоге /home
INACTIVE=-1 - блокирование учетной записи пользователя при устаревании его пароля не произойдет
EXPIRE=
SHELL=/bin/bash - оболочка для вновь регистрируемых пользователей
SKEL=/etc/skel - каталог "скелета", из которого в домашние каталоги вновь регистрируемых пользователей копируются файлы профиля и настроек

Каталог /etc/skel обычно содержит файлы профиля для вновь регистрируемых пользователей и другие служебные файлы, 
которые копируются при регистрации пользователя в его домашний каталог.

Часто используемые опции команды useradd:
-s — указывает исполняемый файл оболочки по умолчанию
-d — путь к домашнему каталогу пользователя
-m — опция, указывающая на необходимость создать домашний каталог
-M — не создавать домашний каталог
-k — путь к альтернативному каталогу скелета
-u — назначить UID пользователю
-g — назначить GID (первичную группу) пользователю
-G — список групп пользователя (через запятые)
-e — календарная дата, после которой учетная запись будет заблокирована
-f — количество дней, которое должно пройти после срока устаревания пароля до блокировки учетной записи

Пример:
useradd -M -g users -s /sbin/nologin -e 2024-02-23 classuser
регистрирует пользователя без создания для него домашнего каталога (опция -M) с первичной группой users (опция -g). 
Вход в сеанс запрещен, т. к. в качестве оболочки указан файл /sbin/nologin. 
Учетная запись пользователя будет заблокирована 23 февраля 2024 г. (опция -e).

Если пользователь не имеет право входить в сеанс, то в качестве оболочки должен быть установлен один из следующих вариантов:
/bin/false — системная команда, всегда возвращающая код ошибки
/dev/null — специальный файл-поглотитель
/sbin/nologin — системная команда, возвращающая при запуске код ошибки и сообщение о невозможности входа в сеанс

Часто возникает необходимость произвести некоторые изменения в учетной записи уже зарегистрированного пользователя, например, поменять ему оболочку по умолчанию. 
Для этого предназначена команда usermod. 
Пример:
usermod -s /bin/false classuser

Большая часть опций команд useradd и usermod совпадает.
Пример:
usermod -G "`id -G classuser | tr ' ' ','`,uucp" classuser

Команда id -G выводит список групп, в которые входит пользователь, разделенных пробелами. 
Далее пробелы заменяются запятыми с помощью команды tr, т. к. список групп для команды usermod должен быть задан через запятую.
К списку групп, в которых пользователь уже принимает участие, добавляется список новых групп, 
а далее полученный список подставляется в командную строку usermod с помощью командной подстановки.

Используя команду usermod, можно также указать для пользователя его новое имя с помощью опции -l.
А опции -L и -U позволяют, соответственно, блокировать и разблокировать возможность входа в сеанс для данного пользователя.

Удалить учетную запись пользователя можно командой userdel
Пример:
userdel classuser

Перед удалением учетной записи пользователя необходимо решить, что делать с файлами пользователя, если таковые в системе имеются. 
Сама команда userdel удаления файлов в домашнем каталоге пользователя не производит.
Поэтому все файлы пользователя, учетная запись которого подлежит удалению, должны быть найдены и либо удалены, либо помещены в архив, либо переданы другому пользователю.

Управление паролями:
Правила установки, использования и управления паролями являются важнейшей частью системной политики. 
Обычно они включают в себя, минимум, следующее:
- определение категорий пользователей, которые имеют право самостоятельного выбора паролей с помощью команды passwd
- правила выбора паролей и требования к их уровню сложности
- сроки устаревания паролей
- длительности периодов запрета на изменение паролей

Четко сформулированная политика управления паролями значительно облегчает администрирование системы. 
Так, например, установив правила выбора паролей, их минимальную длину и требуемый уровень сложности, достаточно настроить
модуль контроля паролей системы PAM для автоматической проверки соответствия выбираемого пользователем пароля требованиям безопасности.

Команда passwd помимо изменения паролей предоставляет и другие возможности. 
Далее приведен список часто применяемых опций команды passwd:
-l — блокирование учетной записи
-u — деблокирование учетной записи
-S — получение текущего состояния пароля
-d — удаление пароля
-n — период запрета смены пароля (минимальное время жизни пароля)
-x — максимальный срок использования пароля
-w — установка количества дней до момента устаревания пароля, начиная с которого будут выдаваться предупреждения о необходимости смены пароля
-i — срок с момента устаревания до блокировки пароля

Блокирование учетной записи, пример:
passwd -l user123 - блокирует учетную запись user123
ip user123 - тут мы увидим ид пользователя и его группы и не каких признаков блокировки
cat /etc/shadow - тут мы увидим что у пользователя во втором поле восклицательный знак "!"

После блокирования учетной записи в первой позиции второго поля файла /etc/shadow перед шифрованным паролем пользователя появляется знак восклицания. 
При разблокировании учетной записи он исчезает.


Управление группами пользователей
С помощью создания групп пользователей системный администратор может эффективно управлять деятельностью в системе целыми коллективами пользователей, 
предоставляя им разрешения на доступ к системным ресурсам.
Каждый файл располагает в метаданных триадой битов, кодирующей права доступа для группы пользователей. 
Следовательно, изменяя членство пользователя в группах, администратор изменяет, таким образом, привилегии пользователя на доступ к различным файлам в системе, 
не меняя при этом права пользователя на принадлежащие ему файлы.
Информация о группах пользователей хранится в файле /etc/group в виде строк.

Формат записей в /etc/group:
- имя группы
- пароль группы (при отсутствии пароля — x)
- GID группы
- список пользователей, принадлежащих к данной группе


Для добавления новой группы необходимо воспользоваться командой groupadd, которая добавляет новую запись в файл /etc/group
groupadd class
grep class /etc/group

Пользователи, для которых группа является первичной, имеют информацию об этом в GID, хранящемся в четвертом поле файла /etc/passwd. 
В то же время имена пользователей, входящих в группу, которая не является для них первичной, записываются через запятую в четвертом поле файла /etc/group
Пример:
grep sys /etc/group
sys:x:3:root,bin,adm
группу sys входят пользователи root, bin и adm

Для явного указания GID используют опцию –g
groupadd –g 512 project

Удаление группы пример:
groupdel project


Группа пользователей может быть создана для работы над каким-либо проектом. 
В таком случае бывает удобно одного из пользователей сделать администратором группы 
и делегировать ему право добавлять уже зарегистрированных в системе пользователей в эту группу и удалять их из группы при необходимости.
Назначить администратора группы можно командой gpasswd –A
Пример:
Здесь администратором группы developers назначается пользователь ivanov.
gpasswd –A ivanov developers

Системный администратор может добавлять пользователей в группу с помощью команды gpasswd –M
gpasswd –M marta,lisa developers

Администратор группы может:
- добавить пользователя в группу командой gpasswd –a
- удалить пользователя из группы командой gpasswd –d

gpasswd –a semko developers



Создание\ Добавление\ Удаление пользователей:
adduser iivanov - добавления пользователя ( юзера )
adduser --uid 1500 iivanov
useradd -m имя пользователя
useradd -m -с Ivan Ivanov,,,,iivanov
useradd -u 1500 -s tcsh iivanov
useradd -G users,cdrecord,dialout iivanov
userdel aborg         - удалить пользователя из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)
userdel -r aborg      - удалить пользователя, его почтовый ящик,и дом каталог,из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

Правами регистрации пользователей в системе обладает суперпользователь.

Для добавления учетной записи пользователя применяется команда useradd.

В качестве аргумента для этой команды должно быть указано имя пользователя.

Пример:

useradd user1 - создание пользователя user1

id user1 - показать в ИД пользователя и в какие группы он входит

Регистрация пользователя приводит к появлению соответствующих записей в файлах /etc/passwd и /etc/shadow.

grep user1 /etc/passwd

grep user1 /etc/shadow

Создание приватной группы и домашнего каталога пользователя характерно для "Red Hat Linux", debian и подобных дистрибутивов.

useradd -D - настройки команды useradd по умолчанию

GROUP=100 - GID для вновь регистрируемых пользователей — 100 (для Red Hat эта настройка игнорируется при создании приватной группы пользователя)

HOME=/home - домашние каталоги пользователей создаются в каталоге /home

INACTIVE=-1 - блокирование учетной записи пользователя при устаревании его пароля не произойдет

EXPIRE=

SHELL=/bin/bash - оболочка для вновь регистрируемых пользователей

SKEL=/etc/skel - каталог "скелета", из которого в домашние каталоги вновь регистрируемых пользователей копируются файлы профиля и настроек

Каталог /etc/skel обычно содержит файлы профиля для вновь регистрируемых пользователей и другие служебные файлы,

которые копируются при регистрации пользователя в его домашний каталог.

Часто используемые опции команды useradd:

-s — указывает исполняемый файл оболочки по умолчанию

-d — путь к домашнему каталогу пользователя

-m — опция, указывающая на необходимость создать домашний каталог

-M — не создавать домашний каталог

-k — путь к альтернативному каталогу скелета

-u — назначить UID пользователю

-g — назначить GID (первичную группу) пользователю

-G — список групп пользователя (через запятые)

-e — календарная дата, после которой учетная запись будет заблокирована

-f — количество дней, которое должно пройти после срока устаревания пароля до блокировки учетной записи

Пример:

useradd -M -g users -s /sbin/nologin -e 2024-02-23 classuser

регистрирует пользователя без создания для него домашнего каталога (опция -M) с первичной группой users (опция -g).

Вход в сеанс запрещен, т. к. в качестве оболочки указан файл /sbin/nologin.

Учетная запись пользователя будет заблокирована 23 февраля 2024 г. (опция -e).

Если пользователь не имеет право входить в сеанс, то в качестве оболочки должен быть установлен один из следующих вариантов:

/bin/false — системная команда, всегда возвращающая код ошибки

/dev/null — специальный файл-поглотитель

/sbin/nologin — системная команда, возвращающая при запуске код ошибки и сообщение о невозможности входа в сеанс

Часто возникает необходимость произвести некоторые изменения в учетной записи уже зарегистрированного пользователя, например, поменять ему оболочку по умолчанию.

Для этого предназначена команда usermod.

Пример:

usermod -s /bin/false classuser

Большая часть опций команд useradd и usermod совпадает.

Пример:

usermod -G "`id -G classuser | tr ' ' ','`,uucp" classuser

Команда id -G выводит список групп, в которые входит пользователь, разделенных пробелами.

Далее пробелы заменяются запятыми с помощью команды tr, т. к. список групп для команды usermod должен быть задан через запятую.

К списку групп, в которых пользователь уже принимает участие, добавляется список новых групп,

а далее полученный список подставляется в командную строку usermod с помощью командной подстановки.

Используя команду usermod, можно также указать для пользователя его новое имя с помощью опции -l.

А опции -L и -U позволяют, соответственно, блокировать и разблокировать возможность входа в сеанс для данного пользователя.

Удалить учетную запись пользователя можно командой userdel

Пример:

userdel classuser

Перед удалением учетной записи пользователя необходимо решить, что делать с файлами пользователя, если таковые в системе имеются.

Сама команда userdel удаления файлов в домашнем каталоге пользователя не производит.

Поэтому все файлы пользователя, учетная запись которого подлежит удалению, должны быть найдены и либо удалены, либо помещены в архив, либо переданы другому пользователю.

Управление паролями:

Правила установки, использования и управления паролями являются важнейшей частью системной политики.

Обычно они включают в себя, минимум, следующее:

- определение категорий пользователей, которые имеют право самостоятельного выбора паролей с помощью команды passwd

- правила выбора паролей и требования к их уровню сложности

- сроки устаревания паролей

- длительности периодов запрета на изменение паролей

Четко сформулированная политика управления паролями значительно облегчает администрирование системы.

Так, например, установив правила выбора паролей, их минимальную длину и требуемый уровень сложности, достаточно настроить

модуль контроля паролей системы PAM для автоматической проверки соответствия выбираемого пользователем пароля требованиям безопасности.

Команда passwd помимо изменения паролей предоставляет и другие возможности.

Далее приведен список часто применяемых опций команды passwd:

-l — блокирование учетной записи

-u — деблокирование учетной записи

-S — получение текущего состояния пароля

-d — удаление пароля

-n — период запрета смены пароля (минимальное время жизни пароля)

-x — максимальный срок использования пароля

-w — установка количества дней до момента устаревания пароля, начиная с которого будут выдаваться предупреждения о необходимости смены пароля

-i — срок с момента устаревания до блокировки пароля

Блокирование учетной записи, пример:

passwd -l user123 - блокирует учетную запись user123

ip user123 - тут мы увидим ид пользователя и его группы и не каких признаков блокировки

cat /etc/shadow - тут мы увидим что у пользователя во втором поле восклицательный знак "!"

После блокирования учетной записи в первой позиции второго поля файла /etc/shadow перед шифрованным паролем пользователя появляется знак восклицания.

При разблокировании учетной записи он исчезает.

Управление группами пользователей

С помощью создания групп пользователей системный администратор может эффективно управлять деятельностью в системе целыми коллективами пользователей,

предоставляя им разрешения на доступ к системным ресурсам.

Каждый файл располагает в метаданных триадой битов, кодирующей права доступа для группы пользователей.

Следовательно, изменяя членство пользователя в группах, администратор изменяет, таким образом, привилегии пользователя на доступ к различным файлам в системе,

не меняя при этом права пользователя на принадлежащие ему файлы.

Информация о группах пользователей хранится в файле /etc/group в виде строк.

Формат записей в /etc/group:

- имя группы

- пароль группы (при отсутствии пароля — x)

- GID группы

- список пользователей, принадлежащих к данной группе

Для добавления новой группы необходимо воспользоваться командой groupadd, которая добавляет новую запись в файл /etc/group

groupadd class

grep class /etc/group

Пользователи, для которых группа является первичной, имеют информацию об этом в GID, хранящемся в четвертом поле файла /etc/passwd.

В то же время имена пользователей, входящих в группу, которая не является для них первичной, записываются через запятую в четвертом поле файла /etc/group

Пример:

grep sys /etc/group

sys:x:3:root,bin,adm

группу sys входят пользователи root, bin и adm

Для явного указания GID используют опцию –g

groupadd –g 512 project

Удаление группы пример:

groupdel project

Группа пользователей может быть создана для работы над каким-либо проектом.

В таком случае бывает удобно одного из пользователей сделать администратором группы

и делегировать ему право добавлять уже зарегистрированных в системе пользователей в эту группу и удалять их из группы при необходимости.

Назначить администратора группы можно командой gpasswd –A

Пример:

Здесь администратором группы developers назначается пользователь ivanov.

gpasswd –A ivanov developers

Системный администратор может добавлять пользователей в группу с помощью команды gpasswd –M

gpasswd –M marta,lisa developers

Администратор группы может:

- добавить пользователя в группу командой gpasswd –a

- удалить пользователя из группы командой gpasswd –d

gpasswd –a semko developers

Создание\ Добавление\ Удаление пользователей:

adduser iivanov - добавления пользователя ( юзера )

adduser --uid 1500 iivanov

useradd -m имя пользователя

useradd -m -с Ivan Ivanov,,,,iivanov

useradd -u 1500 -s tcsh iivanov

useradd -G users,cdrecord,dialout iivanov

userdel aborg - удалить пользователя из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

userdel -r aborg - удалить пользователя, его почтовый ящик,и дом каталог,из всех системных файлов (/etc/passwd, /etc/shadow, /etc/group)

88. Профили пользователей

При запуске оболочка Bash последовательно пытается найти пользовательский профиль в файлах, сначала исполняется общий для
всех пользователей файл /etc/profile, а затем индивидуальный профиль пользователя, находящийся в его домашнем каталоге.
Файлы:
/etc/profile
~/.bash_profile
~/.bash_login
~/.profile

В файлах профилей обычно устанавливаются такие переменные окружения, как:
PATH — имена каталогов, в которых Bash ищет исполняемые файлы
TERM — тип терминала
USER — имя пользователя (устанавливается с помощью id -un)
HOME — путь к домашнему каталогу пользователя
MAIL — путь к почтовому ящику пользователя

При необходимости исполнить файл профиля из командной строки следует использовать команду source.
source /etc/profile

Итак, далее приведен список действий, которые обычно выполняются автоматически при входе в сеанс Bash:
1. Исполняется общесистемный скрипт профиля /etc/profile
2. Выполняется пользовательский скрипт профиля в его домашнем каталоге(например, ~/.bash_profile)
3. В пользовательском профиле проверяется наличие в домашнем каталоге файла ресурсов оболочки ~/.bashrc, и, при его наличии, он исполняется
4. Если исполняется файл ресурсов оболочки, то обычно в нем вызывается общесистемный файл ресурсов /etc/bashrc
5. При запуске оболочки из командной строки выполняются пункты 3 и 4 списка

При запуске оболочка Bash последовательно пытается найти пользовательский профиль в файлах, сначала исполняется общий для

всех пользователей файл /etc/profile, а затем индивидуальный профиль пользователя, находящийся в его домашнем каталоге.

Файлы:

/etc/profile

~/.bash_profile

~/.bash_login

~/.profile

В файлах профилей обычно устанавливаются такие переменные окружения, как:

PATH — имена каталогов, в которых Bash ищет исполняемые файлы

TERM — тип терминала

USER — имя пользователя (устанавливается с помощью id -un)

HOME — путь к домашнему каталогу пользователя

MAIL — путь к почтовому ящику пользователя

При необходимости исполнить файл профиля из командной строки следует использовать команду source.

source /etc/profile

Итак, далее приведен список действий, которые обычно выполняются автоматически при входе в сеанс Bash:

1. Исполняется общесистемный скрипт профиля /etc/profile

2. Выполняется пользовательский скрипт профиля в его домашнем каталоге(например, ~/.bash_profile)

3. В пользовательском профиле проверяется наличие в домашнем каталоге файла ресурсов оболочки ~/.bashrc, и, при его наличии, он исполняется

4. Если исполняется файл ресурсов оболочки, то обычно в нем вызывается общесистемный файл ресурсов /etc/bashrc

5. При запуске оболочки из командной строки выполняются пункты 3 и 4 списка

89. Установка нового оборудования:

Подключение оборудования в компьютерах с архитектурой x86/64 может
быть произведено двумя основными способами:
- установкой плат дополнительного оборудования в слоты расширения
- с помощью подключения к внешним шинам или портам

При установке оборудования в слоты расширения на материнской плате это оборудование непосредственно подключается к локальным шинам компьютера. 
Оборудование, подключаемое к внешним шинам, часто подключается к системе посредством плат расширения, включенных в локальную шину.
Как локальные, так и внешние шины компьютера с помощью согласующего оборудования и контроллеров управления подключаются к центральному процессору.

Для того чтобы оборудование могло осуществлять операции ввода/вывода, ему должны быть выделены следующие ресурсы:
IRQ — канал прерывания
IO/Base — базовый адрес ввода/вывода
DMA — канал прямого доступа к ОЗУ

Прерывание (IRQ) идентифицируется своим номером и позволяет сигнализировать о завершении операции ввода/вывода, осуществляемой данным устройством. 
При получении прерывания процессор должен приостановить выполнение текущего задания и переключиться на обработку прерывания с помощью специальной программы (interrupt handler). Список прерываний, использованных установленными в системе устройствами, можно увидеть в файле /proc/interrupts.

Регистры памяти, имеющиеся в устройствах расширения, отображаются в специальную область ОЗУ, доступную ядру операционной системы и называемую памятью устройств. 
Эта память предназначена для реализации операций ввода/вывода, т. е. в нее записывается передаваемая при этих операциях информация. 
Базовый адрес ввода/вывода IO/Base указывает начало области памяти для операций ввода/вывода данного устройства. 
Принято записывать адреса ввода/вывода в шестнадцатеричном виде. 
Увидеть занятые устройствами адреса ввода/вывода можно в файле /proc/ioports.

Подключение оборудования в компьютерах с архитектурой x86/64 может

быть произведено двумя основными способами:

- установкой плат дополнительного оборудования в слоты расширения

- с помощью подключения к внешним шинам или портам

При установке оборудования в слоты расширения на материнской плате это оборудование непосредственно подключается к локальным шинам компьютера.

Оборудование, подключаемое к внешним шинам, часто подключается к системе посредством плат расширения, включенных в локальную шину.

Как локальные, так и внешние шины компьютера с помощью согласующего оборудования и контроллеров управления подключаются к центральному процессору.

Для того чтобы оборудование могло осуществлять операции ввода/вывода, ему должны быть выделены следующие ресурсы:

IRQ — канал прерывания

IO/Base — базовый адрес ввода/вывода

DMA — канал прямого доступа к ОЗУ

Прерывание (IRQ) идентифицируется своим номером и позволяет сигнализировать о завершении операции ввода/вывода, осуществляемой данным устройством.

При получении прерывания процессор должен приостановить выполнение текущего задания и переключиться на обработку прерывания с помощью специальной программы (interrupt handler). Список прерываний, использованных установленными в системе устройствами, можно увидеть в файле /proc/interrupts.

Регистры памяти, имеющиеся в устройствах расширения, отображаются в специальную область ОЗУ, доступную ядру операционной системы и называемую памятью устройств.

Эта память предназначена для реализации операций ввода/вывода, т. е. в нее записывается передаваемая при этих операциях информация.

Базовый адрес ввода/вывода IO/Base указывает начало области памяти для операций ввода/вывода данного устройства.

Принято записывать адреса ввода/вывода в шестнадцатеричном виде.

Увидеть занятые устройствами адреса ввода/вывода можно в файле /proc/ioports.

90. Модули ядра

Работа с модулями ядра
Современные ядра Linux построены в соответствии с модульной архитектурой. 
Ядра Linux поддерживают включение модулей ядра без необходимости пересборки ядра и перезагрузки системы. 
Это позволяет изменять функциональность ядра в работающей системе, а также включать в ядро и удалять драйверы устройств "на лету".
Модули ядра представляют собой объектные файлы с кодом, который можно подключать к работающему ядру Linux. 
Модуля ядра компилируются при сборке ядра. 
Процедура сборки ядра будет рассмотрена далее в этой главе.
Модули располагаются в каталоге /lib/modules/<имя ядра>. 
Имена подката логов /lib/modules всегда точно соответствуют именам ядер, имеющихся в системе. 
Имя работающего сейчас ядра можно узнать, выполнив команду
uname –r
ls /lib/modules

Обратите внимание, что в каталоге /lib/modules имеется подкаталог (или подкаталоги) с именем ядра.
Основная часть модулей ядра содержится в подкаталоге kernel/.
arch — модули ядра, зависящие от архитектуры
crypto — криптографические модули ядра
drivers — драйверы для различных устройств
fs — модули поддержки файловых систем
kernel — служебный модуль
lib — библиотеки, используемые ядром
net — поддержка сетевой инфраструктуры
sound — поддержка звуковой инфраструктуры

Для получения списка модулей, установленных в настоящее время в ядро, следует выполнить команду /sbin/lsmod, которая выводит в форматированном виде информацию из файла /proc/modules.
lsmod

Информацию о модуле выводит команда /sbin/modinfo
modinfo vboxdrv
modinfo nvme_core



Новые модули могут быть загружены в работающее ядро Linux с помощью команды/sbin/insmod. 
Установить модуль в ядро может только суперпользователь. В качестве аргумента для команды insmod указывают имя файла модуля.
Пример:
!!! Не используйте insmod, он устарел, требует указания точного пути, не удобен, используйте modprobe.
insmod /lib/modules/2.6.31.8-0.1-desktop/kernel/drivers/scsi/scsi_debug.ko
lsmod | grep scsi

Вместо команд insmod и rmmod предпочтительнее вызывать команду modprobe, обеспечивающую более интеллектуальное поведение.
Эта команда использует файл modules.dep для автоматического учета зависимостей модулей, что позволяет загружать модули ядра, не задумываясь об их зависимостях. 
Они будут учтены, и требуемые модули будут загружены.
Одна из приятных вещей, которую делает modprobe это автоматическая загрузка всех необходимых зависимостей для данного модуля. 
Кроме того, вам не нужно указывать полный путь и расширение загружаемого модуля.
rmmod - выгружает модуль
Пример:
# rmmod fat
# lsmod | grep fat
# modprobe fat
# lsmod | grep fat

Часто модули ядра для работоспособности требуют наличия других модулей ядра. 
В каталоге, содержащем модули ядра (/lib/modules/`uname -r`), находится текстовый файл modules.dep с зависимостями модулей друг от друга.
Файл modules.dep генерируется с помощью утилиты /sbin/depmod.

По умолчанию команда modprobe устанавливает модуль в ядро, при вызове с опцией -r она способна удалять модули.
Опция -v была использована для вывода информации о загрузке модулей.
modprobe -v -r fat
modprobe -v fat

При необходимости выгрузить все модули ядра, не использующиеся в настоящий момент, можно использовать команду modprobe -r без аргументов.


Одно из полезных свойств команды modprobe — способность находить файлы модулей, имена которых соответствуют заданному шаблону. 
И не везде работает :( 
Для этого следует использовать опцию -l. В именах модулей в таком случае допускается использовать шаблоны, аналогичные шаблонам для имен файлов в оболочке.
modprobe -l 'e100*'

Если модуль требует передачи ядру некоторой информации, то ее можно указывать в качестве аргументов команды modprobe
modprobe e1000 speed=100

Команда modprobe имеет конфигурационный файл /etc/modprobe.conf.
modprobe -c

Работа с модулями ядра

Современные ядра Linux построены в соответствии с модульной архитектурой.

Ядра Linux поддерживают включение модулей ядра без необходимости пересборки ядра и перезагрузки системы.

Это позволяет изменять функциональность ядра в работающей системе, а также включать в ядро и удалять драйверы устройств "на лету".

Модули ядра представляют собой объектные файлы с кодом, который можно подключать к работающему ядру Linux.

Модуля ядра компилируются при сборке ядра.

Процедура сборки ядра будет рассмотрена далее в этой главе.

Модули располагаются в каталоге /lib/modules/<имя ядра>.

Имена подката логов /lib/modules всегда точно соответствуют именам ядер, имеющихся в системе.

Имя работающего сейчас ядра можно узнать, выполнив команду

uname –r

ls /lib/modules

Обратите внимание, что в каталоге /lib/modules имеется подкаталог (или подкаталоги) с именем ядра.

Основная часть модулей ядра содержится в подкаталоге kernel/.

arch — модули ядра, зависящие от архитектуры

crypto — криптографические модули ядра

drivers — драйверы для различных устройств

fs — модули поддержки файловых систем

kernel — служебный модуль

lib — библиотеки, используемые ядром

net — поддержка сетевой инфраструктуры

sound — поддержка звуковой инфраструктуры

Для получения списка модулей, установленных в настоящее время в ядро, следует выполнить команду /sbin/lsmod, которая выводит в форматированном виде информацию из файла /proc/modules.

lsmod

Информацию о модуле выводит команда /sbin/modinfo

modinfo vboxdrv

modinfo nvme_core

Новые модули могут быть загружены в работающее ядро Linux с помощью команды/sbin/insmod.

Установить модуль в ядро может только суперпользователь. В качестве аргумента для команды insmod указывают имя файла модуля.

Пример:

!!! Не используйте insmod, он устарел, требует указания точного пути, не удобен, используйте modprobe.

insmod /lib/modules/2.6.31.8-0.1-desktop/kernel/drivers/scsi/scsi_debug.ko

lsmod | grep scsi

Вместо команд insmod и rmmod предпочтительнее вызывать команду modprobe, обеспечивающую более интеллектуальное поведение.

Эта команда использует файл modules.dep для автоматического учета зависимостей модулей, что позволяет загружать модули ядра, не задумываясь об их зависимостях.

Они будут учтены, и требуемые модули будут загружены.

Одна из приятных вещей, которую делает modprobe это автоматическая загрузка всех необходимых зависимостей для данного модуля.

Кроме того, вам не нужно указывать полный путь и расширение загружаемого модуля.

rmmod - выгружает модуль

Пример:

# rmmod fat

# lsmod | grep fat

# modprobe fat

# lsmod | grep fat

Часто модули ядра для работоспособности требуют наличия других модулей ядра.

В каталоге, содержащем модули ядра (/lib/modules/`uname -r`), находится текстовый файл modules.dep с зависимостями модулей друг от друга.

Файл modules.dep генерируется с помощью утилиты /sbin/depmod.

По умолчанию команда modprobe устанавливает модуль в ядро, при вызове с опцией -r она способна удалять модули.

Опция -v была использована для вывода информации о загрузке модулей.

modprobe -v -r fat

modprobe -v fat

При необходимости выгрузить все модули ядра, не использующиеся в настоящий момент, можно использовать команду modprobe -r без аргументов.

Одно из полезных свойств команды modprobe — способность находить файлы модулей, имена которых соответствуют заданному шаблону.

И не везде работает :(

Для этого следует использовать опцию -l. В именах модулей в таком случае допускается использовать шаблоны, аналогичные шаблонам для имен файлов в оболочке.

modprobe -l 'e100*'

Если модуль требует передачи ядру некоторой информации, то ее можно указывать в качестве аргументов команды modprobe

modprobe e1000 speed=100

Команда modprobe имеет конфигурационный файл /etc/modprobe.conf.

modprobe -c

91. Файлы устройств и udev

GNU/Linux предоставляет доступ к устройствам посредством файлов устройств.
Устройства бывают двух типов: символьные и блочные.
Команда "ls -l" вместо размера файла выводит два значения мажор и минор. 
Мажор — это номер драйвера для данного устройства в ядре
Минор — дополнительный параметр, чаще всего нумерующий экземпляр устройства.

Пример:
# ls -l /dev/nvme0
crw------- 1 root root 239, 0 May 29 22:57 /dev/nvme0
# grep 239 /proc/devices 
239 nvme


Традиционно файлы устройств создавались с помощью команды mknod и размещались в каталоге /dev. 
Причем из соображений универсальности создавались файлы устройств для аппаратуры, не установленной в компьютере. 
Однако разнообразных файлов устройств становится все больше и больше, поэтому при использовании статически созданных файлов устройств возникают три проблемы:
- нехватка мажоров и миноров для адресации файлов устройств
- загромождение /dev файлами отсутствующих реально устройств (например, в Fedora 1 в каталоге /dev имелось порядка 1800 файлов устройств)
- неудобство в работе подключаемых на лету устройств (hot-pluggable devices) например, USB.


Проблема нехватки мажоров и миноров решается относительно просто, но проблема загромождения /dev не так проста. 
Для ее решения во многих UNIX-системах используют динамически создаваемые файлы устройств с помощью файловой системы devfs. 
Идея такова: в ядре имеется информация, какие устройства установлены в системе (при наличии соответствующих драйверов). 
Если в системе появляется новое устройство, для него динамически создается новый файл устройства.
Есть еще одна проблема: 
поскольку имена файлов устройств, создаваемых devfs, не являются жестко связанными с конкретными аппаратными средствами, это очень затрудняет работу множества средств автоматизации.
Например, если для USB-флэш один раз создается файл устройства /dev/sdb, а другой — /dev/sdc, то как определить точку монтирования?
Для решения этих проблем в ядрах 2.6.13 и выше используется udev — дальнейшее развитие devfs, 
предоставляющее возможность "стабилизации" именования динамически создаваемых файлов устройств с помощью специальных правил (rules).

Ядро Linux предоставляет файловую систему sysfs, монтируемую в каталог /sys. 
В этой файловой системе хранится служебная информация, с помощью которой udev создает и удаляет файлы устройств в /dev.

Содержимое каталога /dev находится на временной файловой системе, и файлы устройств создаются там динамически. 
Статические файлы устройств копируются в /dev при старте системы из /lib/udev/. 

Конфигурационные файлы для udev размещаются в /etc/udev. 
Прежде всего это правила (rules), с помощью которых определяются имена для создаваемых файлов устройств. 
Всякий раз, когда устройство добавляется или удаляется из системы, ядро генерирует событие uevent для информирования демона udevd, 
который в соответствии с правилами в /etc/udev/rules.d/*.rules создает или удаляет файлы устройств.
Каждому устройству сопоставляется специальный идентификатор MODALIAS.
Список поддерживаемых устройств конкретным драйвером находится в соответствующем этому драйверу модуле ядра. 
Программа depmod читает эти идентификаторы и записывает их в файл modules.alias в каталоге с модулями ядра /lib/modules.

Наличие файла /lib/modules/modules.alias обеспечивает автоматическое подключение требуемых модулей ядра для устройств, опознанных udev. Причем на ранних
стадиях загрузки полная инициализация /dev невозможна, т. к. при этом может быть еще не готова инфраструктура udev. 
Поэтому после полной инициализации udev производит сбор информации в специальных триггерах для устройств в каталоге /sys о событиях uevent, 
которые были отложены для последующей обработки udev.
Получить информацию об устройстве, опознанном udev, можно с помощью команды udevinfo.

Если подключенное устройство не опознается системой, первое, что имеет смысл сделать — изучить сообщения ядра с помощью команды dmesg.
dmesg

Система udev фиксирует имена сетевых устройств для того, чтобы при их добавлении или удалении сетевым адаптерам назначались старые имена и их настройка не сбилась. 
Привязка имен к интерфейсам достигается с помощью MAC-адресов в файле правил udev /etc/udev/rules.d/70-persistent-net.rules


ethtool -h | less - отображает параметры команды ethtool
ethtool eth0 - отображает информацию о сетевом интерфейсе eth0
ethtool -i eth0 - выводит информацию о драйвере eth0
ethtool -S eth0 - отображает статистику NIC интерфейса eth0

GNU/Linux предоставляет доступ к устройствам посредством файлов устройств.

Устройства бывают двух типов: символьные и блочные.

Команда "ls -l" вместо размера файла выводит два значения мажор и минор.

Мажор — это номер драйвера для данного устройства в ядре

Минор — дополнительный параметр, чаще всего нумерующий экземпляр устройства.

Пример:

# ls -l /dev/nvme0

crw------- 1 root root 239, 0 May 29 22:57 /dev/nvme0

# grep 239 /proc/devices

239 nvme

Традиционно файлы устройств создавались с помощью команды mknod и размещались в каталоге /dev.

Причем из соображений универсальности создавались файлы устройств для аппаратуры, не установленной в компьютере.

Однако разнообразных файлов устройств становится все больше и больше, поэтому при использовании статически созданных файлов устройств возникают три проблемы:

- нехватка мажоров и миноров для адресации файлов устройств

- загромождение /dev файлами отсутствующих реально устройств (например, в Fedora 1 в каталоге /dev имелось порядка 1800 файлов устройств)

- неудобство в работе подключаемых на лету устройств (hot-pluggable devices) например, USB.

Проблема нехватки мажоров и миноров решается относительно просто, но проблема загромождения /dev не так проста.

Для ее решения во многих UNIX-системах используют динамически создаваемые файлы устройств с помощью файловой системы devfs.

Идея такова: в ядре имеется информация, какие устройства установлены в системе (при наличии соответствующих драйверов).

Если в системе появляется новое устройство, для него динамически создается новый файл устройства.

Есть еще одна проблема:

поскольку имена файлов устройств, создаваемых devfs, не являются жестко связанными с конкретными аппаратными средствами, это очень затрудняет работу множества средств автоматизации.

Например, если для USB-флэш один раз создается файл устройства /dev/sdb, а другой — /dev/sdc, то как определить точку монтирования?

Для решения этих проблем в ядрах 2.6.13 и выше используется udev — дальнейшее развитие devfs,

предоставляющее возможность "стабилизации" именования динамически создаваемых файлов устройств с помощью специальных правил (rules).

Ядро Linux предоставляет файловую систему sysfs, монтируемую в каталог /sys.

В этой файловой системе хранится служебная информация, с помощью которой udev создает и удаляет файлы устройств в /dev.

Содержимое каталога /dev находится на временной файловой системе, и файлы устройств создаются там динамически.

Статические файлы устройств копируются в /dev при старте системы из /lib/udev/.

Конфигурационные файлы для udev размещаются в /etc/udev.

Прежде всего это правила (rules), с помощью которых определяются имена для создаваемых файлов устройств.

Всякий раз, когда устройство добавляется или удаляется из системы, ядро генерирует событие uevent для информирования демона udevd,

который в соответствии с правилами в /etc/udev/rules.d/*.rules создает или удаляет файлы устройств.

Каждому устройству сопоставляется специальный идентификатор MODALIAS.

Список поддерживаемых устройств конкретным драйвером находится в соответствующем этому драйверу модуле ядра.

Программа depmod читает эти идентификаторы и записывает их в файл modules.alias в каталоге с модулями ядра /lib/modules.

Наличие файла /lib/modules/modules.alias обеспечивает автоматическое подключение требуемых модулей ядра для устройств, опознанных udev. Причем на ранних

стадиях загрузки полная инициализация /dev невозможна, т. к. при этом может быть еще не готова инфраструктура udev.

Поэтому после полной инициализации udev производит сбор информации в специальных триггерах для устройств в каталоге /sys о событиях uevent,

которые были отложены для последующей обработки udev.

Получить информацию об устройстве, опознанном udev, можно с помощью команды udevinfo.

Если подключенное устройство не опознается системой, первое, что имеет смысл сделать — изучить сообщения ядра с помощью команды dmesg.

dmesg

Система udev фиксирует имена сетевых устройств для того, чтобы при их добавлении или удалении сетевым адаптерам назначались старые имена и их настройка не сбилась.

Привязка имен к интерфейсам достигается с помощью MAC-адресов в файле правил udev /etc/udev/rules.d/70-persistent-net.rules

ethtool -h | less - отображает параметры команды ethtool

ethtool eth0 - отображает информацию о сетевом интерфейсе eth0

ethtool -i eth0 - выводит информацию о драйвере eth0

ethtool -S eth0 - отображает статистику NIC интерфейса eth0

92. Устройства PCI

Для получения списка PCI-устройств, работающих в системе, достаточно выполнить команду lspci.
lspci

Можно также получить подробную информацию об устройстве.
lspci -s 04:00.0 -v
–v - подробный вывод 
–s - выбор устройства, где 04:00.0 устройство, этот номер мы можем получить просто введя lspci

Чаще всего просто исползают. 
lspci -v

Для получения списка PCI-устройств, работающих в системе, достаточно выполнить команду lspci.

lspci

Можно также получить подробную информацию об устройстве.

lspci -s 04:00.0 -v

–v - подробный вывод

–s - выбор устройства, где 04:00.0 устройство, этот номер мы можем получить просто введя lspci

Чаще всего просто исползают.

lspci -v

93. SCSI-устройств

SCSI расшифровывается как Small Computer Systems Interface — системный интерфейс для малых компьютеров. 
Современный интерфейс SAS (Serial Attached SCSI) — дальнейшее развитие этого стандарта. 
Наиболее распространенными типами SCSI-устройств являются накопители на магнитных дисках.
Собственно некоторые современны SSD диски туда тоже записались.
sd - драйвер жестких магнитных дисков SCSI, модуль ядра sd_mod.ko
sr - драйвер SCSI CD/DVD-дисков, модуль ядра sr_mod.ko
st - драйвер для ленточных устройств, модуль st.ko
sg - условное обобщенное символьное SCSI-устройство, модуль sg.ko
nvme - m.2 SSD, модуль nvme.ko
Средний обобщающий функциональность SCSI-уровень — scsi_mod.ko.
Нижний уровень представлен драйверами для хост-адаптеров SCSI, модули для которых находятся в каталоге /lib/modules/`uname -r`/kernel/drivers/scsi/.
Команда lsscsi выводит список установленных SCSI-устройств.
lsscsi
lsscsi -v 8:0:0:0

SCSI расшифровывается как Small Computer Systems Interface — системный интерфейс для малых компьютеров.

Современный интерфейс SAS (Serial Attached SCSI) — дальнейшее развитие этого стандарта.

Наиболее распространенными типами SCSI-устройств являются накопители на магнитных дисках.

Собственно некоторые современны SSD диски туда тоже записались.

sd - драйвер жестких магнитных дисков SCSI, модуль ядра sd_mod.ko

sr - драйвер SCSI CD/DVD-дисков, модуль ядра sr_mod.ko

st - драйвер для ленточных устройств, модуль st.ko

sg - условное обобщенное символьное SCSI-устройство, модуль sg.ko

nvme - m.2 SSD, модуль nvme.ko

Средний обобщающий функциональность SCSI-уровень — scsi_mod.ko.

Нижний уровень представлен драйверами для хост-адаптеров SCSI, модули для которых находятся в каталоге /lib/modules/`uname -r`/kernel/drivers/scsi/.

Команда lsscsi выводит список установленных SCSI-устройств.

lsscsi

lsscsi -v 8:0:0:0

94. Работа со звуковыми картами

Проверяем что там у нас за модуль ядра и драйвер работает
ls -l /dev/snd/*
grep ID-dev /proc/devices
grep 116 /proc/devices
lspci -s ID_PCI -v

В ядрах серии 2.6 звуковая подсистема реализована с помощью ALSA, причем она обеспечивает поддержку старой системы OSS.
Драйвер ALSA для звуковых карт ISA поддерживает расширение ISA PnP, поэтому необходимость конфигурирования ее с помощью утилит пакета isapnptools отпадает. 
При использовании ALSA параметры звуковых карт можно просматривать и изменять с помощью файловой системы /proc в подкаталоге asound/.
В ALSA основным модулем является snd.ko, он требуется для всех остальных драйверов ALSA. Все имена модулей драйверов ALSA начинаются с префикса snd-.
Для эмуляции PCM OSS применяется модуль snd-pcm-oss.ko. 
Для обеспечения работы звуковых карт USB в ALSA используется модуль snd-usbaudio.ko.

Проверяем что там у нас за модуль ядра и драйвер работает

ls -l /dev/snd/*

grep ID-dev /proc/devices

grep 116 /proc/devices

lspci -s ID_PCI -v

В ядрах серии 2.6 звуковая подсистема реализована с помощью ALSA, причем она обеспечивает поддержку старой системы OSS.

Драйвер ALSA для звуковых карт ISA поддерживает расширение ISA PnP, поэтому необходимость конфигурирования ее с помощью утилит пакета isapnptools отпадает.

При использовании ALSA параметры звуковых карт можно просматривать и изменять с помощью файловой системы /proc в подкаталоге asound/.

В ALSA основным модулем является snd.ko, он требуется для всех остальных драйверов ALSA. Все имена модулей драйверов ALSA начинаются с префикса snd-.

Для эмуляции PCM OSS применяется модуль snd-pcm-oss.ko.

Для обеспечения работы звуковых карт USB в ALSA используется модуль snd-usbaudio.ko.

95. USB устройства

Считывать и изменять настройки USB-устройств можно в /proc/bus/usb. 
Однако имеется специальная команда lsusb, выводящая список USB-устройств.
lsusb
Подробная инфа:
lsusb -d 147e:2016 -v

Считывать и изменять настройки USB-устройств можно в /proc/bus/usb.

Однако имеется специальная команда lsusb, выводящая список USB-устройств.

lsusb

Подробная инфа:

lsusb -d 147e:2016 -v

96. Сборка и установка ядра Linux

Самостоятельная сборка действительно рабочего ядра Linux - длительный и кропотливый процесс, требующий высокого профессионализма. 
Разработчики дистрибутива добиваются наилучшей работы ядра, тщательно интегрируя его с программным обеспечением, входящим в дистрибутив. 
Нет никакой гарантии, что самостоятельно собранное ядро, которое на первый взгляд кажется рабочим, действительно будет обеспечивать стабильную работу системы. 
Собирать ядро необходимо лишь при наличии действительно обоснованной необходимости и только после тщательного изучения документации от производителя используемого дистрибутива.

Чаще всего необходимость пере сборки ядра в системах, не связанных с разработкой новых ядер Linux, возникает вследствие следующих причин:
- в коде ядра, используемого в системе, обнаруживается серьезная уязвимость
- необходимость обновления кода ядра, связанная с используемым ПО
- отсутствие или несоответствие драйвера для какого-либо устройства
- отсутствие кода в ядре или модулях ядра для поддержки какой-либо функции
- необходимость расширения функциональности ядра
- необходимость оптимизации работы ядра

Для пере сборки ядра требуется:
- наличие компилятора, пригодного для пере сборки ядра
- наличие GNU-пакета make
- наличие исходного кода ядра и, возможно, пакетов обновления (patches)
- при пере сборке ядра из дистрибутива необходимо иметь пакеты с исходным кодом ядра и заголовочными файлами
- порядка 2 Гбайт дискового пространства
- достаточные вычислительные ресурсы
- время на конфигурирование и сборку ядра

Получить архив с исходным кодом ядра можно с сайтов www.kernel.org, ftp.kernel.org или с зеркал

Пример установки ядра и патча на него:
Скачали ядро:
wget ftp://ftp.kernel.org/pub/linux/kernel/v2.6/linux-2.6.32.tar.bz2
Скачали патч:
wget ftp://ftp.kernel.org/pub/linux/kernel/v2.6/patch-2.6.32.3.bz2
Распаковали ядро
tar xjf linux-2.6.32.tar.bz2
Перешли в каталог ядра:
cd linux-2.6.32
Установили патч:
bzcat ../patch-2.6.32.3.bz2 | patch -p1

Конфигурирование ядра заключается в создании текстового файла .config с настройками для сборки. 
Для конфигурирования ядра следует выпол нить одну из этих команд:
- make — команда построения ядра и модулей
- make oldconfig — построение конфигурационного файла по умолчанию или на основе предыдущих настроек
- make silentoldconfig — то же, что и предыдущее, но без выдачи запросов
- make menuconfig — программа конфигурации ядра с интерфейсом меню
- make xconfig — программа конфигурации ядра с графическим интерфейсом
- make gconfig — то же самое, но с интерфейсом Gtk
- make modules_install install — команда установки модулей ядра и самого ядра. 
                                 После нее модули ядра будут записаны в каталог /lib/modules, а само ядро будет установлено в /boot. 
                                 Конфигурация загрузчика также обновляется
- make clean — эта команда удаляет оставшиеся от предыдущих шагов или процедур сборки объектные файлы, файлы ядра, модулей и прочего. 
               Эта команда производит чистку только в подкаталогах каталога с исходным кодом ядра и не предназначается для удаления файлов в каталогах /boot и /lib/modules.
- make mrproper — предварительная очистка и удаление ненужных файлов. Используется при неудачной сборке

Пример сборки:
make oldconfig
make menuconfig
make modules
make -j2 V=s # вывод "-j2" будет использовать два ядра CPU, "V=s" подробный вывод сборки 
make modules_install 
make install

После успешной сборки и установки ядра следует проверить настройки загрузчика, т. к. они обновляются автоматически. 
Далее можно перезагрузиться и испытать новое ядро.

Самостоятельная сборка действительно рабочего ядра Linux - длительный и кропотливый процесс, требующий высокого профессионализма.

Разработчики дистрибутива добиваются наилучшей работы ядра, тщательно интегрируя его с программным обеспечением, входящим в дистрибутив.

Нет никакой гарантии, что самостоятельно собранное ядро, которое на первый взгляд кажется рабочим, действительно будет обеспечивать стабильную работу системы.

Собирать ядро необходимо лишь при наличии действительно обоснованной необходимости и только после тщательного изучения документации от производителя используемого дистрибутива.

Чаще всего необходимость пере сборки ядра в системах, не связанных с разработкой новых ядер Linux, возникает вследствие следующих причин:

- в коде ядра, используемого в системе, обнаруживается серьезная уязвимость

- необходимость обновления кода ядра, связанная с используемым ПО

- отсутствие или несоответствие драйвера для какого-либо устройства

- отсутствие кода в ядре или модулях ядра для поддержки какой-либо функции

- необходимость расширения функциональности ядра

- необходимость оптимизации работы ядра

Для пере сборки ядра требуется:

- наличие компилятора, пригодного для пере сборки ядра

- наличие GNU-пакета make

- наличие исходного кода ядра и, возможно, пакетов обновления (patches)

- при пере сборке ядра из дистрибутива необходимо иметь пакеты с исходным кодом ядра и заголовочными файлами

- порядка 2 Гбайт дискового пространства

- достаточные вычислительные ресурсы

- время на конфигурирование и сборку ядра

Получить архив с исходным кодом ядра можно с сайтов www.kernel.org, ftp.kernel.org или с зеркал

Пример установки ядра и патча на него:

Скачали ядро:

wget ftp://ftp.kernel.org/pub/linux/kernel/v2.6/linux-2.6.32.tar.bz2

Скачали патч:

wget ftp://ftp.kernel.org/pub/linux/kernel/v2.6/patch-2.6.32.3.bz2

Распаковали ядро

tar xjf linux-2.6.32.tar.bz2

Перешли в каталог ядра:

cd linux-2.6.32

Установили патч:

bzcat ../patch-2.6.32.3.bz2 | patch -p1

Конфигурирование ядра заключается в создании текстового файла .config с настройками для сборки.

Для конфигурирования ядра следует выпол нить одну из этих команд:

- make — команда построения ядра и модулей

- make oldconfig — построение конфигурационного файла по умолчанию или на основе предыдущих настроек

- make silentoldconfig — то же, что и предыдущее, но без выдачи запросов

- make menuconfig — программа конфигурации ядра с интерфейсом меню

- make xconfig — программа конфигурации ядра с графическим интерфейсом

- make gconfig — то же самое, но с интерфейсом Gtk

- make modules_install install — команда установки модулей ядра и самого ядра.

После нее модули ядра будут записаны в каталог /lib/modules, а само ядро будет установлено в /boot.

Конфигурация загрузчика также обновляется

- make clean — эта команда удаляет оставшиеся от предыдущих шагов или процедур сборки объектные файлы, файлы ядра, модулей и прочего.

Эта команда производит чистку только в подкаталогах каталога с исходным кодом ядра и не предназначается для удаления файлов в каталогах /boot и /lib/modules.

- make mrproper — предварительная очистка и удаление ненужных файлов. Используется при неудачной сборке

Пример сборки:

make oldconfig

make menuconfig

make modules

make -j2 V=s # вывод "-j2" будет использовать два ядра CPU, "V=s" подробный вывод сборки

make modules_install

make install

После успешной сборки и установки ядра следует проверить настройки загрузчика, т. к. они обновляются автоматически.

Далее можно перезагрузиться и испытать новое ядро.

98. Сеть. протокол TCP/IP , UDP

Стандартной отправной точкой для изучения стека TCP/IP является общепризнанная модель OSI (Open System Interconnection), определившая семь уровней.
- Прикладной уровень (application layer). 
  На этом уровне осуществляется взаимодействие пользователя с программным обеспечением.
- Уровень представления (presentation layer). 
  Здесь осуществляются преобразования данных, необходимые для предоставления информации, передаваемой программами нижележащих уровней, в требуемом для прикладного уровня виде.
- Сеансовый уровень (session layer). 
  На этом уровне работают программы, обеспечивающие аутентификацию, вход и выход из сеанса.
- Транспортный уровень (transport layer). 
   Программы этого уровня обеспечивают прием/передачу данных с заданной надежностью.
- Сетевой уровень (network layer). 
  Этот уровень определяет адреса сетей и узлов в сети, а также определяет передачи данных между сетями.
- Канальный уровень (data link). 
  На этом уровне обеспечивается передача информации как форматированного потока битов.
- Физический уровень (physical layer) — самый нижний уровень сетевого взаимодействия, 
  обеспечивающий передачу потока битов посредством сетевого аппаратного обеспечения и физического носителя, связывающего вычислительные системы.

Если отобразить стек протоколов TCP/IP на модель OSI, то окажется, что в нем реализованы лишь четыре уровня сетевого взаимодействия.
- Прикладной. (application layer)
  Этот уровень в TCP/IP представлен прикладными протоколами, например: HTTP, FTP, SMTP, POP3 и т. д. 
  С помощью этих протоколов обеспечивается функционирование прикладного программного обеспечения.
- Транспортный. (transport layer)
  В TCP/IP имеются два транспортных протокола: 
  надежный и ориентированный на соединение протокол TCP (Transmission Control Protocol) и более быстрый, 
  но не надежный, протокол UDP (User Datagram Protocol).
- Сетевой. (network layer).
  Данный уровень представлен протоколом IP (Internet Protocol).
  Этот протокол обеспечивает передачу пакетов между узлами и сетями.
- Канальный уровень.  (data link)
  Он представлен в TCP/IP протоколами адресации физических устройств, такими, как ARP (Address Resolution Protocol).


Достоинством вертикально структурированных стеков протоколов является то, 
что при реализации программ для конкретного уровня не требуется учитывать детали реализации программ, принадлежащих другим уровням.
Данные, сформированные программой прикладного уровня, разбиваются на пакеты, которые упаковываются в пакеты нижележащего уровня (инкапсуляция). 
При приеме этих упакованных пакетов происходит обратный процесс:
принятые пакеты распаковываются и извлекаются из более пакетов нижележащего уровня (декапсуляция).

Существуют документы, описывающие функционирование стека протоколов TCP/IP, Интернета и стандартных сетевых служб. 
Эти документы называются RFC (Request For Comments). 
Список RFC размещен на сайте IETF (Internet Engineering Task Force) www.ietf.org, www.rfc.net или www.rfc-editor.org.
Список разнообразных протоколов находится в файле /etc/protocols

Маршрутизаторы являются устройствами, передающими IP-пакеты между различными сетями. 
Решение о передаче IP-пакета в ту или иную сеть принимается маршрутизатором на основе анализа адреса сети назначения IP-пакета.
В памяти маршрутизатора имеется таблица (таблица маршрутизации), в которой адресам сетей сопоставлены IP-адреса других маршрутизаторов, 
позволяющих передать пакет непосредственно в требуемую сеть или же передать другим маршрутизаторам, находящимся "ближе" к сети назначения.

В одну и ту же сеть могут вести несколько маршрутов. 
Обычно среди них имеются более "короткие" и более "протяженные".
Так как сложно составить таблицу маршрутизации, содержащую пути ко всем сетям, то используется маршрутизатор по умолчанию (default gateway).
В качестве такового назначают маршрутизатор, позволяющий передавать пакеты в большее число сетей (в Интернете). 
Для обозначения адреса назначения "по умолчанию" (default) используется IP-адрес 0.0.0.0. 
Этот адрес указывают в качестве номера сети, в которую способен передавать пакеты маршрутизатор "по умолчанию" (default gateway).


Имеются следующие блоки приватных адресов:
10.0.0.0—10.255.255.255, одна сеть
172.16.0.0—172.31.255.255, шестнадцать сетей
192.168.0.0—192.168.255.255, двести пятьдесят шесть сетей

Стандартной отправной точкой для изучения стека TCP/IP является общепризнанная модель OSI (Open System Interconnection), определившая семь уровней.

- Прикладной уровень (application layer).

На этом уровне осуществляется взаимодействие пользователя с программным обеспечением.

- Уровень представления (presentation layer).

Здесь осуществляются преобразования данных, необходимые для предоставления информации, передаваемой программами нижележащих уровней, в требуемом для прикладного уровня виде.

- Сеансовый уровень (session layer).

На этом уровне работают программы, обеспечивающие аутентификацию, вход и выход из сеанса.

- Транспортный уровень (transport layer).

Программы этого уровня обеспечивают прием/передачу данных с заданной надежностью.

- Сетевой уровень (network layer).

Этот уровень определяет адреса сетей и узлов в сети, а также определяет передачи данных между сетями.

- Канальный уровень (data link).

На этом уровне обеспечивается передача информации как форматированного потока битов.

- Физический уровень (physical layer) — самый нижний уровень сетевого взаимодействия,

обеспечивающий передачу потока битов посредством сетевого аппаратного обеспечения и физического носителя, связывающего вычислительные системы.

Если отобразить стек протоколов TCP/IP на модель OSI, то окажется, что в нем реализованы лишь четыре уровня сетевого взаимодействия.

- Прикладной. (application layer)

Этот уровень в TCP/IP представлен прикладными протоколами, например: HTTP, FTP, SMTP, POP3 и т. д.

С помощью этих протоколов обеспечивается функционирование прикладного программного обеспечения.

- Транспортный. (transport layer)

В TCP/IP имеются два транспортных протокола:

надежный и ориентированный на соединение протокол TCP (Transmission Control Protocol) и более быстрый,

но не надежный, протокол UDP (User Datagram Protocol).

- Сетевой. (network layer).

Данный уровень представлен протоколом IP (Internet Protocol).

Этот протокол обеспечивает передачу пакетов между узлами и сетями.

- Канальный уровень. (data link)

Он представлен в TCP/IP протоколами адресации физических устройств, такими, как ARP (Address Resolution Protocol).

Достоинством вертикально структурированных стеков протоколов является то,

что при реализации программ для конкретного уровня не требуется учитывать детали реализации программ, принадлежащих другим уровням.

Данные, сформированные программой прикладного уровня, разбиваются на пакеты, которые упаковываются в пакеты нижележащего уровня (инкапсуляция).

При приеме этих упакованных пакетов происходит обратный процесс:

принятые пакеты распаковываются и извлекаются из более пакетов нижележащего уровня (декапсуляция).

Существуют документы, описывающие функционирование стека протоколов TCP/IP, Интернета и стандартных сетевых служб.

Эти документы называются RFC (Request For Comments).

Список RFC размещен на сайте IETF (Internet Engineering Task Force) www.ietf.org, www.rfc.net или www.rfc-editor.org.

Список разнообразных протоколов находится в файле /etc/protocols

Маршрутизаторы являются устройствами, передающими IP-пакеты между различными сетями.

Решение о передаче IP-пакета в ту или иную сеть принимается маршрутизатором на основе анализа адреса сети назначения IP-пакета.

В памяти маршрутизатора имеется таблица (таблица маршрутизации), в которой адресам сетей сопоставлены IP-адреса других маршрутизаторов,

позволяющих передать пакет непосредственно в требуемую сеть или же передать другим маршрутизаторам, находящимся "ближе" к сети назначения.

В одну и ту же сеть могут вести несколько маршрутов.

Обычно среди них имеются более "короткие" и более "протяженные".

Так как сложно составить таблицу маршрутизации, содержащую пути ко всем сетям, то используется маршрутизатор по умолчанию (default gateway).

В качестве такового назначают маршрутизатор, позволяющий передавать пакеты в большее число сетей (в Интернете).

Для обозначения адреса назначения "по умолчанию" (default) используется IP-адрес 0.0.0.0.

Этот адрес указывают в качестве номера сети, в которую способен передавать пакеты маршрутизатор "по умолчанию" (default gateway).

Имеются следующие блоки приватных адресов:

10.0.0.0—10.255.255.255, одна сеть

172.16.0.0—172.31.255.255, шестнадцать сетей

192.168.0.0—192.168.255.255, двести пятьдесят шесть сетей

99. Адресация IPv6

Протокол IPv4 не обеспечивает достаточного адресного пространства. 
По этому был разработан новый протокол IPv6. 
Его особенности:
- расширенное адресное пространство. В IPv6 вместо 32-разрядных адресов IPv4 используются 128-разрядные адреса
- в адресах IPv6 нет понятия класса сети. 
  Неудачный выбор схемы классовой адресации в IPv4 был основной причиной дефицита адресов в Интернете
- упрощенный формат заголовка IP-пакета, позволяющий более эффективно обрабатывать IPv6-пакеты на маршрутизаторах
- заголовки расширения, позволяющие после основного IPv6-заголовка пакета включать заголовки с дополнительной информацией в стандартном виде
- поддержка качества обслуживания QOS (Quality Of Service)
- встроенная поддержка IPSec, позволяющая создавать виртуальные частные сети
- поддержка IPMobile, удобная для перемещающихся пользователей
  В IPv6 имеются три типа адресов:
- Unicast — аналогичны обычным адресам IPv4, назначаемым интерфейсам
- Multicast — адреса группового вещания
- Anycast — адреса для достижения любого из устройств.
  Широковещательных адресов в IPv6 нет, поскольку в IPv4 в связи с использованием широковещания возникает множество проблем. 
  В том числе и с безопасностью.
В IPv6 можно использовать транспортные протоколы TCP и UDP. 
Имеется также собственный транспортный протокол, ориентированный на надежную работу с потоками информации — SCTP.

Формат представления адресов IPv6 описан в RFC 2373, в котором установлено, 
что IPv6-адреса записывают в виде последовательности из шестнадцати пар, шестнадцатеричных чисел. 
Каждые две пары шестнадцатеричных чисел разделяют двоеточием (два байта). 
Таким образом, в IPv6-адресе должно быть восемь четырехразрядных шестнадцатеричных чисел, разделенных двоеточиями
fe80:0000:0000:0000:0250:8bff:fe5f:7ceb

Так как в большинстве IPv6-адресов имеются длинные последовательности нулей, то записывать их в полном виде не удобно. 
Вместо этого предлагается пользоваться сокращенной нотацией. 
В ней непрерывные последовательности нулей могут быть сокращены. 
При этом в IPv6-адресах в месте, где были сокращены нули, записывают два двоеточия :: . 
Сокращение нулей можно проводить лишь один раз.
fe80::250:8bff:fe5f:7ceb

Адрес loopback-интерфейса в IPv6 в сокращенном виде записывают: ::1, т. к. в нем 127 нулей и последняя единица.

Если IPv6-адрес начинается с fe80, значит, этот адрес получен с помощью процедуры автоматического конфигурирования из MAC-адреса сетевого интерфейса. 
То есть такие адреса не надо назначать вручную, они определяются автоматически.

Допустим, у Ethernet-интерфейса имеется MAC-адрес 00:50:8B:5F:7C:EB.
Тогда автоматически сконфигурированный IPv6-адрес будет fe80::250:8bff:fe5f:7ceb. 
IPv6-адрес формируется автоматически добавлением после третьего байта MAC-адреса (с правой стороны) двух байтов FFFE, что заметно в приведенных адресах.

Настройка маршрутизатора по умолчанию
Если компьютер должен обмениваться IP-пакетами лишь в пределах локальной сети или соединения "точка — точка", то маршрутизацию настраивать не требуется. 
Сетевой интерфейс, которому назначен IP-адрес, принадлежит соответствующей сети.
Маршрутизатор — это компьютер или специализированное устройство, позволяющее передавать пакеты из одной сети в другую. 
Для того чтобы компьютер мог быть маршрутизатором, он должен иметь как минимум два сетевых интерфейса (не обязательно физических). 
Кроме этого, ядро должно обеспечивать передачу IP-пакетов между интерфейсами (forwarding).

Таблица маршрутизации находится в ядре, и в ней указаны маршруты направления IP-пакетов в различные сети. 
Маршрут связывает адрес сети назначения, адрес маршрутизатора и интерфейс, через который можно достичь этой сети.

Протокол ARP предназначен для преобразования IP-адресов в MAC-адреса сетевых устройств. 
Результаты этого преобразования кэшируются. 
Кэш ARP можно просмотреть с помощью команды arp –an.

Маршрутизатор по умолчанию
route add default gw 192.168.1.1
netstat -rn
route -n 
traceroute -n  8.8.8.8

Протокол IPv4 не обеспечивает достаточного адресного пространства.

По этому был разработан новый протокол IPv6.

Его особенности:

- расширенное адресное пространство. В IPv6 вместо 32-разрядных адресов IPv4 используются 128-разрядные адреса

- в адресах IPv6 нет понятия класса сети.

Неудачный выбор схемы классовой адресации в IPv4 был основной причиной дефицита адресов в Интернете

- упрощенный формат заголовка IP-пакета, позволяющий более эффективно обрабатывать IPv6-пакеты на маршрутизаторах

- заголовки расширения, позволяющие после основного IPv6-заголовка пакета включать заголовки с дополнительной информацией в стандартном виде

- поддержка качества обслуживания QOS (Quality Of Service)

- встроенная поддержка IPSec, позволяющая создавать виртуальные частные сети

- поддержка IPMobile, удобная для перемещающихся пользователей

В IPv6 имеются три типа адресов:

- Unicast — аналогичны обычным адресам IPv4, назначаемым интерфейсам

- Multicast — адреса группового вещания

- Anycast — адреса для достижения любого из устройств.

Широковещательных адресов в IPv6 нет, поскольку в IPv4 в связи с использованием широковещания возникает множество проблем.

В том числе и с безопасностью.

В IPv6 можно использовать транспортные протоколы TCP и UDP.

Имеется также собственный транспортный протокол, ориентированный на надежную работу с потоками информации — SCTP.

Формат представления адресов IPv6 описан в RFC 2373, в котором установлено,

что IPv6-адреса записывают в виде последовательности из шестнадцати пар, шестнадцатеричных чисел.

Каждые две пары шестнадцатеричных чисел разделяют двоеточием (два байта).

Таким образом, в IPv6-адресе должно быть восемь четырехразрядных шестнадцатеричных чисел, разделенных двоеточиями

fe80:0000:0000:0000:0250:8bff:fe5f:7ceb

Так как в большинстве IPv6-адресов имеются длинные последовательности нулей, то записывать их в полном виде не удобно.

Вместо этого предлагается пользоваться сокращенной нотацией.

В ней непрерывные последовательности нулей могут быть сокращены.

При этом в IPv6-адресах в месте, где были сокращены нули, записывают два двоеточия :: .

Сокращение нулей можно проводить лишь один раз.

fe80::250:8bff:fe5f:7ceb

Адрес loopback-интерфейса в IPv6 в сокращенном виде записывают: ::1, т. к. в нем 127 нулей и последняя единица.

Если IPv6-адрес начинается с fe80, значит, этот адрес получен с помощью процедуры автоматического конфигурирования из MAC-адреса сетевого интерфейса.

То есть такие адреса не надо назначать вручную, они определяются автоматически.

Допустим, у Ethernet-интерфейса имеется MAC-адрес 00:50:8B:5F:7C:EB.

Тогда автоматически сконфигурированный IPv6-адрес будет fe80::250:8bff:fe5f:7ceb.

IPv6-адрес формируется автоматически добавлением после третьего байта MAC-адреса (с правой стороны) двух байтов FFFE, что заметно в приведенных адресах.

Настройка маршрутизатора по умолчанию

Если компьютер должен обмениваться IP-пакетами лишь в пределах локальной сети или соединения "точка — точка", то маршрутизацию настраивать не требуется.

Сетевой интерфейс, которому назначен IP-адрес, принадлежит соответствующей сети.

Маршрутизатор — это компьютер или специализированное устройство, позволяющее передавать пакеты из одной сети в другую.

Для того чтобы компьютер мог быть маршрутизатором, он должен иметь как минимум два сетевых интерфейса (не обязательно физических).

Кроме этого, ядро должно обеспечивать передачу IP-пакетов между интерфейсами (forwarding).

Таблица маршрутизации находится в ядре, и в ней указаны маршруты направления IP-пакетов в различные сети.

Маршрут связывает адрес сети назначения, адрес маршрутизатора и интерфейс, через который можно достичь этой сети.

Протокол ARP предназначен для преобразования IP-адресов в MAC-адреса сетевых устройств.

Результаты этого преобразования кэшируются.

Кэш ARP можно просмотреть с помощью команды arp –an.

Маршрутизатор по умолчанию

route add default gw 192.168.1.1

netstat -rn

route -n

traceroute -n 8.8.8.8

100. Настройка сетевого интерфейса Ethernet

ifconfig - проверка состояния сетевых интерфейсов
ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)
ifconfig eth0 down - отключить сетевой интерфейс eth0 (команда устарела)
ifocnfig eth0 up - включить сетевой интерфейс eth0 (команда устарела)
 
ifdown eth0 - отключить сетевой интерфейс
ifup eth0 - включить сетевой интерфейс
 
ip - управление сетевыми интерфейсами (замена ifconfig)
ip help - помощь по команде ip
ip addr help - помощь
ip route help - помощь
ip tunnel help - помощь
ip addr show - получение информации о всех сетевых интерфейсах
ip a - получение информации о всех сетевых интерфейсах
ip addr show eth0 - отобразит информацию о eth0
 
ipcalc -bmn 192.168.1.100/27 - расчет маски под сети хост-компьютерам с помощью  CIDR IP- адреса

задать ip:
ifconfig eth3 192.168.1.100 netmask 255.255.255.0
ip a a 192.168.1.100/24 dev eth3


маршруты:
route -n - показать таблицу маршрутов
route add default gw 192.168.0.1 - задать маршрут по умолчанию
route add -net 192.168.0.0 netmask 255.255.0.0 gw 192.168.1.1 - создать маршрут
route del -net 192.168.0.0 netmask 255.255.255.0 eth0 - удалить маршрут
traceroute -n ya.ru - покажет маршрут
traceroute -ln ya.ru - покажет маршрут как в windows покажет

dns:
host ya.ru - все о DNS ya.ru
dig ya.ru  - все о DNS ya.ru
nslookup ya.ru - все о DNS ya.ru
nslookup ya.ru 8.8.8.8 - все о DNS ya.ru спросили у 8.8.8.8


мониторинг:
ping 192.168.0.1 - пинг
ping -c 1 -s 134 8.8.8.8 - послать 1 пакет размером 134

lsof -i udp информация кто использует UDP 
lsof -i :22 информация кто использует 22 порт


netstat -nt
netstat -nlp |grep :25
netstat -i
netstat -apn --inet
netstat -ltpn --inet
netstat -tuep информация кто использует TCP и UDP (а также процесс и только для установленных соединений)

ss -s Мониторинг сетевых соединений. похожа на netstat
ss -l Информация об ожидающих соединений сокетах
ss -lp Информация об ожидающих соединений сокетах, а также именах процессов, их использующих
ss -at Информация обо всех задействованных TCP сокетах
ss -au Информация обо всех задействованных UDP сокетах
ss -o state established '( dport = :smtp or sport = :smtp )' Информация обо всех установленных SMTP-соединениях
ss -o state established '( dport = :http or sport = :http )' Информация обо всех установленных HTTP-соединениях:
ss -x src /tmp/.X11-unix/* Локальные процессы, подключённые к X-серверу:
ss -o state fin-wait-1 '( sport = :http or sport = :https )' dst 202.54.1/24 TCP-сокеты, находящиеся в состоянии FIN-WAIT-1 для соединений из подсети

сканирование:
nmap -v -A 192.168.0.101
nmap -v -sP 192.168.0.101/24
nmap -O target.host.com
nmap -vv host.target.com
nmap -sP 192.168.1.0/24 - Узнать занятые IP в сети 1.0/24 (IP, MAC, hostname)
nmap -sS -sV -O tager.ru - Скрытое SYN сканирование с определением типа и версии ОС
nmap -sX -p 22 192.168.10.10-250 -oN /data/host.txt  - Сканирование машин с ip от 10 по 250  и запись результата

Включить forward между интерфейсами:
echo 1 > /proc/sys/net/ipv4/ip_forward


Снифер:
tcpdump -i eth0
tcpdump -n -i eth0 ether host mac
tcpdump -nl -i eth0 not port ssh and src \(192.168.1.10 or 192.168.1.15\)
tcpdump -n -i eth0 net 192.168.1.15  - трафик с/на IP
tcpdump -n -i eth0 net 192.168.1.0/24  - трафик с/в сеть
tcpdump -l > dump && tail -f dump  - Вывод с записью в файл
tcpdump -i eth0 -w traffic.eth0  - Информация о трафике записывается в бинарный файл traffic.eth0
tcpdump -i eth0 -s 0 -w traffic.eth0 - Запись + загрузка в бинарник
tcpdump -r traffic.eth0  - Читаем из файла
tcpdump port 80  - Весь трафик на 80 порт и ответы
tcpdump host google.com - Весь с/на google.com
tcpdump -i eth0 -X port \(110 or 143\) - Проверка pop и imap на безопасность
tcpdump -n -i eth0 icmp - Ловим pings
tcpdump -i eth0 -s 0 -A port 80 | grep GET - (-s 0 весь пакет, -A для ASCII)

ifconfig - проверка состояния сетевых интерфейсов

ifconfig -a - покажет все сетевые интерфейсы (неактивные в том числе)

ifconfig eth0 down - отключить сетевой интерфейс eth0 (команда устарела)

ifocnfig eth0 up - включить сетевой интерфейс eth0 (команда устарела)

ifdown eth0 - отключить сетевой интерфейс

ifup eth0 - включить сетевой интерфейс

ip - управление сетевыми интерфейсами (замена ifconfig)

ip help - помощь по команде ip

ip addr help - помощь

ip route help - помощь

ip tunnel help - помощь

ip addr show - получение информации о всех сетевых интерфейсах

ip a - получение информации о всех сетевых интерфейсах

ip addr show eth0 - отобразит информацию о eth0

ipcalc -bmn 192.168.1.100/27 - расчет маски под сети хост-компьютерам с помощью CIDR IP- адреса

задать ip:

ifconfig eth3 192.168.1.100 netmask 255.255.255.0

ip a a 192.168.1.100/24 dev eth3

маршруты:

route -n - показать таблицу маршрутов

route add default gw 192.168.0.1 - задать маршрут по умолчанию

route add -net 192.168.0.0 netmask 255.255.0.0 gw 192.168.1.1 - создать маршрут

route del -net 192.168.0.0 netmask 255.255.255.0 eth0 - удалить маршрут

traceroute -n ya.ru - покажет маршрут

traceroute -ln ya.ru - покажет маршрут как в windows покажет

dns:

host ya.ru - все о DNS ya.ru

dig ya.ru - все о DNS ya.ru

nslookup ya.ru - все о DNS ya.ru

nslookup ya.ru 8.8.8.8 - все о DNS ya.ru спросили у 8.8.8.8

мониторинг:

ping 192.168.0.1 - пинг

ping -c 1 -s 134 8.8.8.8 - послать 1 пакет размером 134

lsof -i udp информация кто использует UDP

lsof -i :22 информация кто использует 22 порт

netstat -nt

netstat -nlp |grep :25

netstat -i

netstat -apn --inet

netstat -ltpn --inet

netstat -tuep информация кто использует TCP и UDP (а также процесс и только для установленных соединений)

ss -s Мониторинг сетевых соединений. похожа на netstat

ss -l Информация об ожидающих соединений сокетах

ss -lp Информация об ожидающих соединений сокетах, а также именах процессов, их использующих

ss -at Информация обо всех задействованных TCP сокетах

ss -au Информация обо всех задействованных UDP сокетах

ss -o state established '( dport = :smtp or sport = :smtp )' Информация обо всех установленных SMTP-соединениях

ss -o state established '( dport = :http or sport = :http )' Информация обо всех установленных HTTP-соединениях:

ss -x src /tmp/.X11-unix/* Локальные процессы, подключённые к X-серверу:

ss -o state fin-wait-1 '( sport = :http or sport = :https )' dst 202.54.1/24 TCP-сокеты, находящиеся в состоянии FIN-WAIT-1 для соединений из подсети

сканирование:

nmap -v -A 192.168.0.101

nmap -v -sP 192.168.0.101/24

nmap -O target.host.com

nmap -vv host.target.com

nmap -sP 192.168.1.0/24 - Узнать занятые IP в сети 1.0/24 (IP, MAC, hostname)

nmap -sS -sV -O tager.ru - Скрытое SYN сканирование с определением типа и версии ОС

nmap -sX -p 22 192.168.10.10-250 -oN /data/host.txt - Сканирование машин с ip от 10 по 250 и запись результата

Включить forward между интерфейсами:

echo 1 > /proc/sys/net/ipv4/ip_forward

Снифер:

tcpdump -i eth0

tcpdump -n -i eth0 ether host mac

tcpdump -nl -i eth0 not port ssh and src $192.168.1.10 or 192.168.1.15$

tcpdump -n -i eth0 net 192.168.1.15 - трафик с/на IP

tcpdump -n -i eth0 net 192.168.1.0/24 - трафик с/в сеть

tcpdump -l > dump && tail -f dump - Вывод с записью в файл

tcpdump -i eth0 -w traffic.eth0 - Информация о трафике записывается в бинарный файл traffic.eth0

tcpdump -i eth0 -s 0 -w traffic.eth0 - Запись + загрузка в бинарник

tcpdump -r traffic.eth0 - Читаем из файла

tcpdump port 80 - Весь трафик на 80 порт и ответы

tcpdump host google.com - Весь с/на google.com

tcpdump -i eth0 -X port $110 or 143$ - Проверка pop и imap на безопасность

tcpdump -n -i eth0 icmp - Ловим pings

tcpdump -i eth0 -s 0 -A port 80 | grep GET - (-s 0 весь пакет, -A для ASCII)

101. Разрешения имен / резолв / DNS

Сетевое имя машины, работающей под управлением GNU/Linux, может быть получено и установлено с помощью команды hostname

Имена узлов используются для более понятного указания их в сети. 
Для человека гораздо более удобно использовать имена компьютеров вместо их IP-адресов. 
Таким образом, требуется специальная служба для разрешения имен узлов, т. е. преобразования имени узла в его IP-адрес. 
Часто требуется также осуществить обратное преобразование: из IP-адреса в имя узла. 
Преобразование осуществляется с помощью специальной библиотеки resolver.
Существуют следующие способы преобразования:
- с помощью файла /etc/hosts. Этот способ подходит для небольших сетей;
- с помощью обращения к службе DNS (Domain Name Service);
- с помощью обращения к службам NIS, NIS+, LDAP и прочим.

Создание статичного списка соответствий IP-адресов именам узлов сети наиболее простой способ получения разрешения имен. 
Он годится для небольших сетей, т. к. на каждом узле сети должны быть копии файла /etc/hosts. 
В каждой строке этого файла указывают IP-адрес и имена узла.
Пример:
cat /etc/hosts
127.0.0.1 localhost
192.168.1.100 mycomp.mynet.net mycomp

Если имена узлов и их IP-адреса указаны верно, то в этом случае resolver обеспечит преобразование имен узлов в их адреса
Пример:
ping –c2 mycomp
PING mycomp (192.168.1.100) 56(84) bytes of data.
64 bytes from mycomp (192.168.1.100): icmp_seq=1 ttl=64 time=0.245 ms

Настройки resolver хранятся в файле /etc/resolver.conf
cat /etc/resolv.conf
nameserver 192.168.1.254
search mydom.com, mydom.net

Директива nameserver задает IP-адрес DNS-сервера, обслуживающего данный компьютер. 
С помощью последней директивы — search — задают список доменов, имена которых будут автоматически подставляться к именам узлов при их поиске.
Таким образом, в большинстве случаев для преобразования имени узла в его IP-адрес требуется либо указать его адрес и имя в /etc/hosts, 
либо настроить доступ к DNS-серверу, указав его IP-адрес в файле /etc/resolv.conf.
Имеются еще два конфигурационных файла, настройки которых влияют на поведение библиотеки resolver — /etc/host.conf и /etc/nsswitch.conf.

Для resolver они важны с точки зрения порядка разрешения имен: 
будет ли сначала произведено обращение к файлу /etc/hosts или же к DNS

Пример:
cat /etc/host.conf
order host, bind
multi on

Здесь задан следующий порядок работы resolver: 
при разрешении имени узла сначала осуществляется просмотр записей в файле /etc/hosts, а затем — обращение к DNS.
Директива multi on заставляет resolver выводить все адреса узлов, имеющих несколько IP-адресов. 
Файл /etc/nsswitch.conf (Name Service Switch) предназначен для сообщения библиотеке resolver и другим системным вызовам, 
где искать требуемую информацию. Файл /etc/nsswitch.conf содержит централизованную конфигурационную информацию о доменах и связанных с ними базах данных:
aliases — почтовые псевдонимы почтового транспортного агента
ethers — источник информации о MAC-адресах
group — источник информации о группах пользователей
hosts — порядок разрешения имен узлов
netgroup — список пользователей каждого хоста для службы NIS
network — источник информации об именах и адресах сетей
passwd — список поиска источников паролей пользователей
protocols — список поиска протоколов, используемых в сети
publickey — местоположение ключей шифрования
rpc — список поиска имен и номеров вызываемых удаленных процедур
services — список поиска сетевых служб
shadow — список поиска шифрованных паролей

При использовании DNS и /etc/hosts в файле /etc/nsswitch.conf должны содержаться строки, представленные в примере
hosts: files dns
networks: files dns
Первая настройка задает порядок разрешения имен узлов: 
сначала будет произведено обращение к /etc/hosts, а далее — к DNS. 
Вторая настройка задает аналогичный порядок для сетей: сначала к /etc/networks, а затем к DNS.

Сетевое имя машины, работающей под управлением GNU/Linux, может быть получено и установлено с помощью команды hostname

Имена узлов используются для более понятного указания их в сети.

Для человека гораздо более удобно использовать имена компьютеров вместо их IP-адресов.

Таким образом, требуется специальная служба для разрешения имен узлов, т. е. преобразования имени узла в его IP-адрес.

Часто требуется также осуществить обратное преобразование: из IP-адреса в имя узла.

Преобразование осуществляется с помощью специальной библиотеки resolver.

Существуют следующие способы преобразования:

- с помощью файла /etc/hosts. Этот способ подходит для небольших сетей;

- с помощью обращения к службе DNS (Domain Name Service);

- с помощью обращения к службам NIS, NIS+, LDAP и прочим.

Создание статичного списка соответствий IP-адресов именам узлов сети наиболее простой способ получения разрешения имен.

Он годится для небольших сетей, т. к. на каждом узле сети должны быть копии файла /etc/hosts.

В каждой строке этого файла указывают IP-адрес и имена узла.

Пример:

cat /etc/hosts

127.0.0.1 localhost

192.168.1.100 mycomp.mynet.net mycomp

Если имена узлов и их IP-адреса указаны верно, то в этом случае resolver обеспечит преобразование имен узлов в их адреса

Пример:

ping –c2 mycomp

PING mycomp (192.168.1.100) 56(84) bytes of data.

64 bytes from mycomp (192.168.1.100): icmp_seq=1 ttl=64 time=0.245 ms

Настройки resolver хранятся в файле /etc/resolver.conf

cat /etc/resolv.conf

nameserver 192.168.1.254

search mydom.com, mydom.net

Директива nameserver задает IP-адрес DNS-сервера, обслуживающего данный компьютер.

С помощью последней директивы — search — задают список доменов, имена которых будут автоматически подставляться к именам узлов при их поиске.

Таким образом, в большинстве случаев для преобразования имени узла в его IP-адрес требуется либо указать его адрес и имя в /etc/hosts,

либо настроить доступ к DNS-серверу, указав его IP-адрес в файле /etc/resolv.conf.

Имеются еще два конфигурационных файла, настройки которых влияют на поведение библиотеки resolver — /etc/host.conf и /etc/nsswitch.conf.

Для resolver они важны с точки зрения порядка разрешения имен:

будет ли сначала произведено обращение к файлу /etc/hosts или же к DNS

Пример:

cat /etc/host.conf

order host, bind

multi on

Здесь задан следующий порядок работы resolver:

при разрешении имени узла сначала осуществляется просмотр записей в файле /etc/hosts, а затем — обращение к DNS.

Директива multi on заставляет resolver выводить все адреса узлов, имеющих несколько IP-адресов.

Файл /etc/nsswitch.conf (Name Service Switch) предназначен для сообщения библиотеке resolver и другим системным вызовам,

где искать требуемую информацию. Файл /etc/nsswitch.conf содержит централизованную конфигурационную информацию о доменах и связанных с ними базах данных:

aliases — почтовые псевдонимы почтового транспортного агента

ethers — источник информации о MAC-адресах

group — источник информации о группах пользователей

hosts — порядок разрешения имен узлов

netgroup — список пользователей каждого хоста для службы NIS

network — источник информации об именах и адресах сетей

passwd — список поиска источников паролей пользователей

protocols — список поиска протоколов, используемых в сети

publickey — местоположение ключей шифрования

rpc — список поиска имен и номеров вызываемых удаленных процедур

services — список поиска сетевых служб

shadow — список поиска шифрованных паролей

При использовании DNS и /etc/hosts в файле /etc/nsswitch.conf должны содержаться строки, представленные в примере

hosts: files dns

networks: files dns

Первая настройка задает порядок разрешения имен узлов:

сначала будет произведено обращение к /etc/hosts, а далее — к DNS.

Вторая настройка задает аналогичный порядок для сетей: сначала к /etc/networks, а затем к DNS.

102. Поиск и устранение проблем с сетью

Прохождение пакетов командой ping нужно производить в следующем порядке:
1. Проверить работоспособность сетевой инфраструктуры в ядре ping  127.0.0.1.
2. Проверить работоспособность сетевого адаптера с помощью команды ping, которой указан IP-адрес, привязанный к данному адаптеру.
3. Проверить прохождение пакетов в пределах данной сети, послав командой ping ICMP-пакеты любому узлу в данной сети или маршрутизатору.
4. Проверить прохождение пакетов к внешнему сетевому адаптеру маршрутизатора.
5. Послать ICMP-пакеты по любому известному IP-адресу сети.


В качестве последней проверки можно протестировать работоспособность библиотеки resolver, выполнив ping с указанием имени компьютера в качестве аргумента.

Задача протокола ARP состоит в сопоставлении IP-адресов сетевых интерфейсов их MAC-адресам, поэтому в информации, выводимой командой arp –a,
должны содержаться правильные соответствия. 
В противном случае неверные записи должны быть стерты с помощью команды arp -d <имя узла>.

Невозможность приема и передачи ICMP-пакетов (как и других пакетов IP) может быть вызвана их блокированием на передающем и/или принимающем узле.

Проверьте файрволл iptables
iptables -S 
iptables-save


При этом следует проверить правильность указания IP-адреса DNS-сервера в файле /etc/resolv.conf и правильность соответствий IP-адресов в файле /etc/hosts.
Имеются специальные команды: host, dig и nslookup, позволяющие тестировать правильность работы DNS.
При необходимости получения административной информации о каком-либо домене DNS можно использовать команду whois

Прохождение пакетов командой ping нужно производить в следующем порядке:

1. Проверить работоспособность сетевой инфраструктуры в ядре ping 127.0.0.1.

2. Проверить работоспособность сетевого адаптера с помощью команды ping, которой указан IP-адрес, привязанный к данному адаптеру.

3. Проверить прохождение пакетов в пределах данной сети, послав командой ping ICMP-пакеты любому узлу в данной сети или маршрутизатору.

4. Проверить прохождение пакетов к внешнему сетевому адаптеру маршрутизатора.

5. Послать ICMP-пакеты по любому известному IP-адресу сети.

В качестве последней проверки можно протестировать работоспособность библиотеки resolver, выполнив ping с указанием имени компьютера в качестве аргумента.

Задача протокола ARP состоит в сопоставлении IP-адресов сетевых интерфейсов их MAC-адресам, поэтому в информации, выводимой командой arp –a,

должны содержаться правильные соответствия.

В противном случае неверные записи должны быть стерты с помощью команды arp -d <имя узла>.

Невозможность приема и передачи ICMP-пакетов (как и других пакетов IP) может быть вызвана их блокированием на передающем и/или принимающем узле.

Проверьте файрволл iptables

iptables -S

iptables-save

При этом следует проверить правильность указания IP-адреса DNS-сервера в файле /etc/resolv.conf и правильность соответствий IP-адресов в файле /etc/hosts.

Имеются специальные команды: host, dig и nslookup, позволяющие тестировать правильность работы DNS.

При необходимости получения административной информации о каком-либо домене DNS можно использовать команду whois

103. Сервисы сети

Процесс взаимодействия программ в сети проходит в соответствии с требованиями протокола прикладного уровня (Application Layer). 
В TCP/IP для идентификации служб, которые могут быть запущены на каком-либо узле сети, используются номера портов в диапазоне от 0 до 65 535 (шестнадцать битов).
Номера портов назначаются IANA (Internet Assigned Numbers Authority).

Многие номера портов, меньшие 1024 и некоторые большие, закреплены за определенными службами сети (Well Known Services). 
Вот список некоторых:
20 — данные, передаваемые сервисом FTP
21 — управляющая информация для сервиса FTP
22 — протокол SSH
25 — транспортный почтовый протокол SMTP
23 — удаленный доступ с помощью Telnet
53 — протокол DNS
80 — протокол HTTP
110 — доставка почты по протоколу POP3
119 — служба доставки новостей NNTP
139 — протокол NetBIOS
143 — удаленный доступ к почтовым ящикам по протоколу IMAP
161 — протокол управления сетью SNMP
389 — протокол доступа к службам каталогов LDAP

Список имен служб находится в файле /etc/services

Службы, номера портов которых меньше 1024, называются привилегированными. 
Серверные приложения, открывающие данные порты, могут быть запущены лишь суперпользователем. 
В противоположность привилегированным портам порты с номерами от 1024 до 65 535 называют эфемерными, 
поскольку большинство из них не закреплено за какими-либо службами сети и используются клиентскими приложениями для связи с серверами.

Для связи между двумя сетевыми приложениями каждое из них должно открыть сокет (socket). 
Список активных соединений выводит команда netstat.
Если необходимо получить список не только установленных соединений, но и перечень портов, открытых для соединения, 
то можно использовать опцию -a команды netstat. 
Ограничить вводимую информацию лишь TCP- или UDP- портами можно, используя опции, соответственно, -t или -u
netstat -ta
ss -tupln

Открытые, но не используемые порты, представляют собой брешь в системе безопасности, поскольку каждый прослушиваемый порт представляет собой потенциальную цель атаки.

Процесс взаимодействия программ в сети проходит в соответствии с требованиями протокола прикладного уровня (Application Layer).

В TCP/IP для идентификации служб, которые могут быть запущены на каком-либо узле сети, используются номера портов в диапазоне от 0 до 65 535 (шестнадцать битов).

Номера портов назначаются IANA (Internet Assigned Numbers Authority).

Многие номера портов, меньшие 1024 и некоторые большие, закреплены за определенными службами сети (Well Known Services).

Вот список некоторых:

20 — данные, передаваемые сервисом FTP

21 — управляющая информация для сервиса FTP

22 — протокол SSH

25 — транспортный почтовый протокол SMTP

23 — удаленный доступ с помощью Telnet

53 — протокол DNS

80 — протокол HTTP

110 — доставка почты по протоколу POP3

119 — служба доставки новостей NNTP

139 — протокол NetBIOS

143 — удаленный доступ к почтовым ящикам по протоколу IMAP

161 — протокол управления сетью SNMP

389 — протокол доступа к службам каталогов LDAP

Список имен служб находится в файле /etc/services

Службы, номера портов которых меньше 1024, называются привилегированными.

Серверные приложения, открывающие данные порты, могут быть запущены лишь суперпользователем.

В противоположность привилегированным портам порты с номерами от 1024 до 65 535 называют эфемерными,

поскольку большинство из них не закреплено за какими-либо службами сети и используются клиентскими приложениями для связи с серверами.

Для связи между двумя сетевыми приложениями каждое из них должно открыть сокет (socket).

Список активных соединений выводит команда netstat.

Если необходимо получить список не только установленных соединений, но и перечень портов, открытых для соединения,

то можно использовать опцию -a команды netstat.

Ограничить вводимую информацию лишь TCP- или UDP- портами можно, используя опции, соответственно, -t или -u

netstat -ta

ss -tupln

Открытые, но не используемые порты, представляют собой брешь в системе безопасности, поскольку каждый прослушиваемый порт представляет собой потенциальную цель атаки.

104. tcpd

Программа tcpd (TCP Wrapper) представляет собой средство фильтрации IP-пакетов, позволяющее ограничить список IP-адресов, 
с которых могут поступать запросы на сервисы, предоставляемые супердемоном inetd.

Поведение tcpd задается с помощью двух файлов:
- /etc/hosts.allow — разрешает соединения
- /etc/hosts.deny — запрещает соединения



Порядок работы директив в /etc/hosts.allow и /etc/hosts.deny приведен далее.
1. Если в файле /etc/hosts.allow для заданной пары "узел сети — служба" находится совпадение, то для данного узла доступ к этой службе разрешается.
2. Если в предыдущем файле совпадение не найдено, то осуществляется просмотр файла /etc/hosts.deny. 
При наличии в нем совпадения для заданной пары "узел сети — служба" доступ к данной службе с этого узла запрещается.
3. При отсутствии совпадений в обоих файлах доступ разрешается.
Формат записей в файлах /etc/hosts.allow и /etc/hosts.deny таков:
имя демона: список доступа

В списке доступа определяются группы адресов, с которых могут поступать запросы на конкретные сервисы:
ALL — все адреса
EXCEPT — исключения из списка
KNOWN — хосты, соответствие IP-адресов именам которых можно проверить
LOCAL — локальный адрес
PARANOID — хосты, имена которых не соответствуют их IP-адресам (для проверки используется обратное преобразование имен в DNS: из IP-адресав имя хоста)
UNKNOWN — хосты, имена которых не могут быть разрешены, а также сюда относятся пользователи, не зарегистрированные в целевой системе.

cat /etc/hosts.deny
ALL: mail.yahoo.com, .badspammers.org
ALL EXCEPT ftp: comp1.smallnet.ru, .rcpmk.ru
telnet: ALL EXCEPT LOCAL

Для проверки правильности конфигурации файлов /etc/hosts.allow и /etc/hosts.deny используется команда tcpdchk. 
Кроме этого, имеется утилита tcpdmatch, которая пытается определить, каким образом tcpd будет отрабатывать запросы к inetd. 
Ее удобно использовать при наличии сложных правил фильтрации.

Программа tcpd (TCP Wrapper) представляет собой средство фильтрации IP-пакетов, позволяющее ограничить список IP-адресов,

с которых могут поступать запросы на сервисы, предоставляемые супердемоном inetd.

Поведение tcpd задается с помощью двух файлов:

- /etc/hosts.allow — разрешает соединения

- /etc/hosts.deny — запрещает соединения

Порядок работы директив в /etc/hosts.allow и /etc/hosts.deny приведен далее.

1. Если в файле /etc/hosts.allow для заданной пары "узел сети — служба" находится совпадение, то для данного узла доступ к этой службе разрешается.

2. Если в предыдущем файле совпадение не найдено, то осуществляется просмотр файла /etc/hosts.deny.

При наличии в нем совпадения для заданной пары "узел сети — служба" доступ к данной службе с этого узла запрещается.

3. При отсутствии совпадений в обоих файлах доступ разрешается.

Формат записей в файлах /etc/hosts.allow и /etc/hosts.deny таков:

имя демона: список доступа

В списке доступа определяются группы адресов, с которых могут поступать запросы на конкретные сервисы:

ALL — все адреса

EXCEPT — исключения из списка

KNOWN — хосты, соответствие IP-адресов именам которых можно проверить

LOCAL — локальный адрес

PARANOID — хосты, имена которых не соответствуют их IP-адресам (для проверки используется обратное преобразование имен в DNS: из IP-адресав имя хоста)

UNKNOWN — хосты, имена которых не могут быть разрешены, а также сюда относятся пользователи, не зарегистрированные в целевой системе.

cat /etc/hosts.deny

ALL: mail.yahoo.com, .badspammers.org

ALL EXCEPT ftp: comp1.smallnet.ru, .rcpmk.ru

telnet: ALL EXCEPT LOCAL

Для проверки правильности конфигурации файлов /etc/hosts.allow и /etc/hosts.deny используется команда tcpdchk.

Кроме этого, имеется утилита tcpdmatch, которая пытается определить, каким образом tcpd будет отрабатывать запросы к inetd.

Ее удобно использовать при наличии сложных правил фильтрации.