| README.md | ||
Содержание
- Основные операции
1.1. Файловые операции
1.2. Текстовые операции
1.3. Операции с каталогами
1.4. SSH, системная информация и сетевые операции
1.5. Операции по мониторингу процессов - Основы программирования в командной строке
2.1. Переменные
2.2. Массивы
2.3. Замена строк
2.4. Функции
2.5. Условные выражения
2.6. Циклы - Трюки
- Отладка (Debug)
1. Основные операции
a. export
Отображает все переменные среды. Если вы хотите получить подробную информацию о конкретной переменной, используйте echo $VARIABLE_NAME.
export
Пример:
$ export
AWS_HOME=/Users/adnanadnan/.aws
LANG=en_US.UTF-8
LC_CTYPE=en_US.UTF-8
LESS=-R
$ echo $AWS_HOME
/Users/adnanadnan/.aws
b. whatis
whatis показывает описание для пользовательских команд, системных вызовов, библиотечных функций и другое на страницах руководства.
whatis something
Пример:
$ whatis bash
bash (1) - GNU Bourne-Again SHell
c. whereis
whereis ищет исполняемые файлы, исходные файлы и страницы руководства, используя базу данных, созданную системой автоматически.
whereis name
Пример:
$ whereis php
/usr/bin/php
d. which
which ищет исполняемые файлы в каталогах, заданных переменной среды PATH. Эта команда будет печатать полный путь к исполняемому файлу.
which program_name
Пример:
$ which php
/c/xampp/php/php
e. clear
Очищает содержимое окна.
1.1. Файловые операции
| cat | chmod | chown | cp | diff | file | find | gunzip | gzcat | gzip | head |
| lpq | lpr | lprm | ls | more | mv | rm | tail | touch |
a. cat
Может использоваться для следующих целей в UNIX или Linux.
- Отображение текстовых файлов на экране
- Копирование текстовых файлов
- Объединение текстовых файлов
- Создание новых текстовых файлов
cat filename
cat file1 file2
cat file1 file2 > newcombinedfile
cat < file1 > file2 #copy file1 to file2
b. chmod
Команда chmod позволяет вам изменять права на чтение, запись и выполнение для ваших файлов и папок. Для получения дополнительной информации об этой команде пройдите по ссылке.
chmod -options filename
c. chown
Команда chown означает «владелец прав и позволяет вам изменять владельца данного файла или папки, которые могут быть пользователем и группой. Пользоваться просто, сначала пользователь (владелец), а затем группа, разделенная двоеточием.
chown -options user:group filename
d. cp
Копирует файл из одного места в другое.
cp filename1 filename2
Где filename1 является исходным путем к файлу и filename2 путь назначения к файлу.
e. diff
Сравнивает файлы и перечисляет их различия.
diff filename1 filename2
f. file
Определяет тип файла.
file filename
Пример:
$ file index.html
index.html: HTML document, ASCII text
g. find
Поиск файлов в каталоге.
find directory options pattern
Пример:
$ find . -name README.md
$ find /home/user1 -name '*.png'
h. gunzip
Разархивирует файлы сжатые gzip.
gunzip filename
i. gzcat
Позволяет просматривать файлы архива gzipped без необходимости его разархивирования.
gzcat filename
j. gzip
Архивирование файлов.
gzip filename
k. head
Выводит первые 10 строк файла
head filename
l. lpq
Проверка очереди вывода.
lpq
Пример:
$ lpq
Rank Owner Job File(s) Total Size
active adnanad 59 demo 399360 bytes
1st adnanad 60 (stdin) 0 bytes
m. lpr
Печать файла.
lpr filename
n. lprm
Удалить что-то из очереди печати.
lprm jobnumber
o. ls
Список файлов. ls имеет множество опций: -l список файлов в 'длинном формате', который содержит точный размер файла, имя владельца файла, который имеет право просматривать его и время последнего изменения. -a список файлов, включая скрытые файлы. Для получения дополнительной информации об этой команде перейдите по ссылке.
ls option
Пример:
$ ls -la rwxr-xr-x 33 adnan staff 1122 Mar 27 18:44 . drwxrwxrwx 60 adnan staff 2040 Mar 21 15:06 .. -rw-r--r--@ 1 adnan staff 14340 Mar 23 15:05 .DS_Store -rw-r--r-- 1 adnan staff 157 Mar 25 18:08 .bumpversion.cfg -rw-r--r-- 1 adnan staff 6515 Mar 25 18:08 .config.ini -rw-r--r-- 1 adnan staff 5805 Mar 27 18:44 .config.override.ini drwxr-xr-x 17 adnan staff 578 Mar 27 23:36 .git -rwxr-xr-x 1 adnan staff 2702 Mar 25 18:08 .gitignore
p. more
Показывает первую часть файла (перемещайтесь нажимая пробел и нажмите q для выхода).
more filename
q. mv
Перемещает файл из одного места в другое.
mv filename1 filename2
Где filename1 является исходным путем к файлу и filename2 путь назначения к файлу.
Также может использоваться для переименования файла.
mv old_name new_name
r. rm
Удаляет файл. Использование этой команды для каталога приводит к ошибке.
rm: directory: is a directory
Чтобы удалить каталог необходимо ввести -r который будет рекурсивно удалять содержимое каталога. При желании вы можете использовать -f флаг для принудительного удаления, то есть без каких-либо подтверждений и т.д.
rm filename
s. tail
Выводит последние 10 строк файла. Используйте -f для вывода добавленных данных по мере роста файла.
tail filename
t. touch
Обновляет отметки времени создания и изменения файла. Если он не существует, он будет создан.
touch filename
Пример:
$ touch trick.md
1.2. Текстовые операции
| awk | cut | echo | egrep | fgrep | fmt | grep | nl | sed | sort |
| tr | uniq | wc |
a. awk
awk является наиболее полезной командой для обработки текстовых файлов. Работает по строкам. По умолчанию для разделения полей используется пробел. Наиболее распространенным синтаксисом для команды awk является
awk '/search_pattern/ { action_to_take_if_pattern_matches; }' file_to_parse
Возьмем следующий файл /etc/passwd. Вот пример данных, которые содержит этот файл:
root:x:0:0:root:/root:/usr/bin/zsh
daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin
bin:x:2:2:bin:/bin:/usr/sbin/nologin
sys:x:3:3:sys:/dev:/usr/sbin/nologin
sync:x:4:65534:sync:/bin:/bin/sync
Итак, теперь вы можете получить только имя пользователя из этого файла. Где -F указывает на какой основе мы собираемся разделить поля. В нашем случае :. {print $ 1} означает вывод первого поля соответствия.
awk -F':' '{ print $1 }' /etc/passwd
После выполнения указанной команды вы получите следующий вывод.
root
daemon
bin
sys
sync
Подробнее о том, как использовать awk, перейдите по ссылке.
b. cut
Удалить разделы из каждой строки файлов.
example.txt
red riding hood went to the park to play
покажите мне столбцы 2, 7 и 9 с пробелом в качестве разделителя
cut -d " " -f2,7,9 example.txt
riding park play
c. echo
Отображение строки текста
отобразить «Hello World»
echo Hello World
Hello World
отобразите «Hello World» каждое слово с новой строки
echo -ne "Hello\nWorld\n"
Hello
World
d. egrep
Вывод строк, соответствующие шаблону - Extended Expression (псевдоним для: 'grep -E')
example.txt
Lorem ipsum
dolor sit amet,
consetetur
sadipscing elitr,
sed diam nonumy
eirmod tempor
invidunt ut labore
et dolore magna
aliquyam erat, sed
diam voluptua. At
vero eos et
accusam et justo
duo dolores et ea
rebum. Stet clita
kasd gubergren,
no sea takimata
sanctus est Lorem
ipsum dolor sit
amet.
отобразить строки в которых есть «Lorem», либо «dolor».
egrep '(Lorem|dolor)' example.txt
or
grep -E '(Lorem|dolor)' example.txt
Lorem ipsum
dolor sit amet,
et dolore magna
duo dolores et ea
sanctus est Lorem
ipsum dolor sit
e. fgrep
Вывод строк, соответствующие шаблону - FIXED pattern matching (псевдоним для: 'grep -F')
example.txt
Lorem ipsum
dolor sit amet,
consetetur
sadipscing elitr,
sed diam nonumy
eirmod tempor
foo (Lorem|dolor)
invidunt ut labore
et dolore magna
aliquyam erat, sed
diam voluptua. At
vero eos et
accusam et justo
duo dolores et ea
rebum. Stet clita
kasd gubergren,
no sea takimata
sanctus est Lorem
ipsum dolor sit
amet.
Найти строку с '(Lorem|dolor)' в example.txt
fgrep '(Lorem|dolor)' example.txt
or
grep -F '(Lorem|dolor)' example.txt
foo (Lorem|dolor)
f. fmt
Простое форматирование текста
Пример: example.txt (1 строка)
Lorem ipsum dolor sit amet, consetetur sadipscing elitr, sed diam nonumy eirmod tempor invidunt ut labore et dolore magna aliquyam erat, sed diam voluptua. At vero eos et accusam et justo duo dolores et ea rebum. Stet clita kasd gubergren, no sea takimata sanctus est Lorem ipsum dolor sit amet.
выводить строки example.txt шириной 20 символов
cat example.txt | fmt -w 20
Lorem ipsum
dolor sit amet,
consetetur
sadipscing elitr,
sed diam nonumy
eirmod tempor
invidunt ut labore
et dolore magna
aliquyam erat, sed
diam voluptua. At
vero eos et
accusam et justo
duo dolores et ea
rebum. Stet clita
kasd gubergren,
no sea takimata
sanctus est Lorem
ipsum dolor sit
amet.
g. grep
Ищет текст внутри файлов. Вы можете использовать grep для поиска строк текста, которые соответствуют одному или нескольким регулярным выражениям, и выводит только соответствующие строки.
grep pattern filename
Пример:
$ grep admin /etc/passwd
_kadmin_admin:*:218:-2:Kerberos Admin Service:/var/empty:/usr/bin/false
_kadmin_changepw:*:219:-2:Kerberos Change Password Service:/var/empty:/usr/bin/false
_krb_kadmin:*:231:-2:Open Directory Kerberos Admin Service:/var/empty:/usr/bin/false
Вы также можете игнорировать словосочетания с помощью опции -i. -r может использоваться для поиска всех файлов в указанном каталоге, пример:
$ grep -r admin /etc/
И -w для поиска только слов. Более подробно о grep, перейдите по ссылке.
h. nl
Номер строк в файле
example.txt
Lorem ipsum
dolor sit amet,
consetetur
sadipscing elitr,
sed diam nonumy
eirmod tempor
invidunt ut labore
et dolore magna
aliquyam erat, sed
diam voluptua. At
vero eos et
accusam et justo
duo dolores et ea
rebum. Stet clita
kasd gubergren,
no sea takimata
sanctus est Lorem
ipsum dolor sit
amet.
вывести example.txt с номерами строк
nl -s". " example.txt
1. Lorem ipsum
2. dolor sit amet,
3. consetetur
4. sadipscing elitr,
5. sed diam nonumy
6. eirmod tempor
7. invidunt ut labore
8. et dolore magna
9. aliquyam erat, sed
10. diam voluptua. At
11. vero eos et
12. accusam et justo
13. duo dolores et ea
14. rebum. Stet clita
15. kasd gubergren,
16. no sea takimata
17. sanctus est Lorem
18. ipsum dolor sit
19. amet.
i. sed
Потоковый редактор для фильтрации и преобразования текста.
example.txt
Hello This is a Test 1 2 3 4
заменить все пробелы дефисом
sed 's/ /-/g' example.txt
Hello-This-is-a-Test-1-2-3-4
заменить все цифры на "d"
sed 's/[0-9]/d/g' example.txt
Hello This is a Test d d d d
j. sort
Сортирует строки в текстовом файле.
example.txt
f
b
c
g
a
e
d
сортировать example.txt
sort example.txt
a
b
c
d
e
f
g
рандомизировать отсортированный example.txt
sort example.txt | sort -R
b
f
a
c
d
g
e
k. tr
Переводит или удаляет символы.
example.txt
Hello World Foo Bar Baz!
заменяет все буквы нижнего регистра в верхний регистр
cat example.txt | tr 'a-z' 'A-Z'
HELLO WORLD FOO BAR BAZ!
превращает все пробелы в новые строки
cat example.txt | tr ' ' '\n'
Hello
World
Foo
Bar
Baz!
l. uniq
Сообщает об повторяющиеся строках или пропускает их.
example.txt
a
a
b
a
b
c
d
c
показавыет только уникальные строки example.txt (сначала нужно отсортировать его, иначе он не увидит совпадения)
sort example.txt | uniq
a
b
c
d
показавает уникальные элементы для каждой строки и сообщает, сколько экземпляров найдено
sort example.txt | uniq -c
3 a
2 b
2 c
1 d
m. wc
Сообщает, сколько строк, слов и символов содержит файл.
wc filename
Пример:
$ wc demo.txt
7459 15915 398400 demo.txt
Где 7459 линий, 15915 слов и 398400 символов.
1.3. Операции с каталогами
| cd | mkdir | pwd |
a. cd
Moves you from one directory to other. Running this
$ cd
moves you to home directory. This command accepts an optional dirname, which moves you to that directory.
cd dirname
b. mkdir
Makes a new directory.
mkdir dirname
c. pwd
Tells you which directory you currently are in.
pwd
1.4. SSH, системная информация и сетевые операции
| bg | cal | date | df | dig | du | fg | finger | jobs | last |
| man | passwd | ping | ps | quota | scp | ssh | top | uname | uptime |
| w | wget | whoami | whois |
a. bg
Список остановленных или фоновых заданий; возобновление работы в фоновом режиме.
b. cal
Показывает календарь месяца.
c. date
Показывает текущую дату и время.
d. df
Показывает использование диска.
e. dig
Получает информацию DNS для домена.
dig domain
f. du
Показывает дисковое использование файлов или каталогов. Для получения дополнительной информации об этой команде перейдите по этой ссылке
du [option] [filename|directory]
Опции:
-h(человекочитаемое) Отображает вывод его в килобайтах (К), мегабайтах (М) и гигабайтах (G).-s(сжатое или общее) Выводит общее дисковое пространство каталога и отчеты для подкаталогов.
Пример:
du -sh pictures
1.4M pictures
g. fg
Команда возобновления работы задачи.
h. finger
Отображает информацию о пользователе.
finger username
i. jobs
Список заданий, выполняемые в фоновом режиме, указывая номер задания.
j. last
Список последних авторизаций указанного пользователя.
last yourUsername
k. man
Показывает руководство для указанной команды.
man command
l. passwd
Позволяет текущему зарегистрированному пользователю изменить свой пароль.
m. ping
Запрашивает хост и выводит результаты.
ping host
n. ps
Перечисляет процессы.
ps -u yourusername
Используйте флаг ef. e для каждого процесса и f для полного списка.
ps -ef
o. quota
Показывает, какова ваша дисковая квота.
quota -v
p. scp
Передача файлов между локальным хостом и удаленным хостом или между двумя удаленными узлами.
копирование с локального хоста на удаленный хост
scp source_file user@host:directory/target_file
копирование с удаленного хоста на локальный хост
scp user@host:directory/source_file target_file
scp -r user@host:directory/source_folder target_folder
Эта команда также принимает опцию -P, которая может использоваться для подключения к определенному порту.
scp -P port user@host:directory/source_file target_file
q. ssh
ssh (SSH client) - это программа для входа в систему и выполнения команд на удаленном компьютере.
ssh user@host
Эта команда также принимает опцию -p, которая может использоваться для подключения к определенному порту.
ssh -p port user@host
r. top
Отображает текущие активные процессы.
s. uname
Показывает информацию о ядре.
uname -a
t. uptime
Показывает текущее время бесперебойной работы.
u. w
Отображает, кто в сети.
v. wget
Скачать файл.
wget file
w. whoami
Вернуть текущий логин.
x. whois
Получает информацию whois для домена.
whois domain
1.5. Операции по мониторингу процессов
| kill | killall | & | nohup |
a. kill
Убивает (завершает) процессы с указанным идентификатором.
kill PID
b. killall
Убейте все процессы по имени.
killall processname
c. &
Символ & инструктирует команду работать как фоновый процесс в подоболочке.
command &
d. nohup
nohup означает «No Hang Up (без зависаний)». Это позволяет запускать сценарий команд / процессов или оболочки, которые могут продолжаться в фоновом режиме после выхода из оболочки.
nohup command
Объедините его с & для создания фоновых процессов
nohup command &
2. Основы программирования в командной строке
The first line that you will write in bash script files is called shebang. This line in any script determines the script's ability to be executed like a standalone executable without typing sh, bash, python, php etc beforehand in the terminal.
#!/usr/bin/env bash
2.1. Переменные
Creating variables in bash is similar to other languages. There are no data types. A variable in bash can contain a number, a character, a string of characters, etc. You have no need to declare a variable, just assigning a value to its reference will create it.
Пример:
str="hello world"
The above line creates a variable str and assigns "hello world" to it. The value of variable is retrieved by putting the $ in the beginning of variable name.
Пример:
echo $str # hello world
2.2. Массивы
Like other languages bash has also arrays. An array is variable containing multiple values. There's no maximum limit on the size of array. Array in bash are zero based. The first element is indexed with element 0. There are several ways for creating arrays in bash. Which are given below.
Examples:
array[0] = val
array[1] = val
array[2] = val
array=([2]=val [0]=val [1]=val)
array=(val val val)
To display a value at specific index use following syntax:
${array[i]} # where i is the index
If no index is supplied, array element 0 is assumed. To find out how many values there are in the array use the following syntax:
${#array[@]}
Bash has also support for the ternary conditions. Check some examples below.
${varname:-word} # if varname exists and isn't null, return its value; otherwise return word
${varname:=word} # if varname exists and isn't null, return its value; otherwise set it word and then return its value
${varname:+word} # if varname exists and isn't null, return word; otherwise return null
${varname:offset:length} # performs substring expansion. It returns the substring of $varname starting at offset and up to length characters
2.3 Замена строк
Check some of the syntax on how to manipulate strings
${variable#pattern} # if the pattern matches the beginning of the variable's value, delete the shortest part that matches and return the rest
${variable##pattern} # if the pattern matches the beginning of the variable's value, delete the longest part that matches and return the rest
${variable%pattern} # if the pattern matches the end of the variable's value, delete the shortest part that matches and return the rest
${variable%%pattern} # if the pattern matches the end of the variable's value, delete the longest part that matches and return the rest
${variable/pattern/string} # the longest match to pattern in variable is replaced by string. Only the first match is replaced
${variable//pattern/string} # the longest match to pattern in variable is replaced by string. All matches are replaced
${#varname} # returns the length of the value of the variable as a character string
2.4. Функции
As in almost any programming language, you can use functions to group pieces of code in a more logical way or practice the divine art of recursion. Declaring a function is just a matter of writing function my_func { my_code }. Calling a function is just like calling another program, you just write its name.
function name() {
shell commands
}
Пример:
#!/bin/bash
function hello {
echo world!
}
hello
function say {
echo $1
}
say "hello world!"
When you run the above example the hello function will output "world!". The above two functions hello and say are identical. The main difference is function say. This function, prints the first argument it receives. Arguments, within functions, are treated in the same manner as arguments given to the script.
2.5. Условные выражения
The conditional statement in bash is similar to other programming languages. Conditions have many form like the most basic form is if expression then statement where statement is only executed if expression is true.
if [ expression ]; then
will execute only if expression is true
else
will execute if expression is false
fi
Sometime if conditions becoming confusing so you can write the same condition using the case statements.
case expression in
pattern1 )
statements ;;
pattern2 )
statements ;;
...
esac
Expression Examples:
statement1 && statement2 # both statements are true
statement1 || statement2 # at least one of the statements is true
str1=str2 # str1 matches str2
str1!=str2 # str1 does not match str2
str1<str2 # str1 is less than str2
str1>str2 # str1 is greater than str2
-n str1 # str1 is not null (has length greater than 0)
-z str1 # str1 is null (has length 0)
-a file # file exists
-d file # file exists and is a directory
-e file # file exists; same -a
-f file # file exists and is a regular file (i.e., not a directory or other special type of file)
-r file # you have read permission
-s file # file exists and is not empty
-w file # you have write permission
-x file # you have execute permission on file, or directory search permission if it is a directory
-N file # file was modified since it was last read
-O file # you own file
-G file # file's group ID matches yours (or one of yours, if you are in multiple groups)
file1 -nt file2 # file1 is newer than file2
file1 -ot file2 # file1 is older than file2
-lt # less than
-le # less than or equal
-eq # equal
-ge # greater than or equal
-gt # greater than
-ne # not equal
2.6. Циклы
There are three types of loops in bash. for, while and until.
Different for Syntax:
for x := 1 to 10 do
begin
statements
end
for name [in list]
do
statements that can use $name
done
for (( initialisation ; ending condition ; update ))
do
statements...
done
while Syntax:
while condition; do
statements
done
until Syntax:
until condition; do
statements
done
3. Трюки
Set an alias
Open bash_profile by running following command nano ~/.bash_profile
alias dockerlogin='ssh www-data@adnan.local -p2222' # add your alias in .bash_profile
To quickly go to a specific directory
nano ~/.bashrc
export hotellogs="/workspace/hotel-api/storage/logs"
source ~/.bashrc
cd $hotellogs
Exit traps
Make your bash scripts more robust by reliably performing cleanup.
function finish {
# your cleanup here. e.g. kill any forked processes
jobs -p | xargs kill
}
trap finish EXIT
Saving your environment variables
When you do export FOO = BAR, your variable is only exported in this current shell and all its children, to persist in the future you can simply append in your ~/.bash_profile file the command to export your variable
echo export FOO=BAR >> ~/.bash_profile
Accessing your scripts
You can easily access your scripts by creating a bin folder in your home with mkdir ~/bin, now all the scripts you put in this folder you can access in any directory.
If you can not access, try append the code below in your ~/.bash_profile file and after do source ~/.bash_profile.
# set PATH so it includes user's private bin if it exists
if [ -d "$HOME/bin" ] ; then
PATH="$HOME/bin:$PATH"
fi
4. Отладка (Debug)
You can easily debug the bash script by passing different options to bash command. For example -n will not run commands and check for syntax errors only. -v echo commands before running them. -x echo commands after command-line processing.
bash -n scriptname
bash -v scriptname
bash -x scriptname
Как помочь
Переводы
License
