Skip to content

Latest commit

 

History

History
378 lines (249 loc) · 6.97 KB

notes.md

File metadata and controls

378 lines (249 loc) · 6.97 KB

CLI Notes

CLI : Command-Line Interface

References

www.gnu.org/software/coreutils/manual/html_node/[COMMAND_NAME]-invocation.html

Others

todo oneday

https://www.tldp.org/LDP/Bash-Beginners-Guide/html/sect_10_02.html

Temporary

tree ( mock ) : list directory content

find <directory_path> | sed -e "s/[^-][^\/]*\//  |/g" -e "s/|\([^ ]\)/|── \1/"

unix / linux 不同的程序仓库代表什么

  • /bin
  • /sbin
  • /usr/bin
  • /usr/sbin
  • /usr/local/bin
  • /usr/local/sbin
  • /usr/local/go/bin
  • /Users/USERNAME/.composer/vendor/bin
  • ……

jq

Command-line JSON processor

  • … | jq -r 'join(",")'
    • 原来错的命令行是 … | jq -r '.[]|join(",")'
    • .[] 表达式，遍历显示所有 value！
  • … | jq -r '.playlists | .[].id'
    • 将 playlists 数组中的每个元素的 id 提取出来
  • ref : http://hyperpolyglot.org/json

cat /etc/*-release 查看 Linux ( Distribution ) 发行版

测量整条命令的运行时间

  • 还是用 perf stat -r N -d 比较靠谱和精确
  • 用 bash 的 time 命令一来系统误差较大（可能高达 2 毫秒），二来精度不足，只到毫秒精度
  • 当然，perf stat 还能输出很多其他有用的信息
    • 比如 dcache 命中率还有 branch misprediction 比例等很多方面的 CPU 统计信息

删除无用的 Docker containers

docker ps -a | grep Exited | awk '{ print $1 }' | xargs docker rm
# better
docker ps -a -q | xargs docker rm

mktemp 创建临时文件

  • 那么 mktemp || bail 有什么用？

重启 dockerd

kill -SIGHUP $(pidof dockerd)

压缩图片

sips -Z 640 *.jpg

将 PNG 图片转换成 JPG

mogrify -format jpg *.png

https://devhints.io

  • 命令行输出 0 标准输入流 stdin 1 标准输出流 stdout 2 标准错误输出 stderr
  • 2>>/dev/null 把错误流写进/dev/null 中， /dev/null 是类 Unix 系统中的一个特殊文件设备， 作用是接受一切输入它的数据，并丢弃这些数据
  • $? 上个命令的退出状态，或函数的返回值

tcpdump

tcpdump -i any -nnX -w file_name

解压缩 http://alex09.iteye.com/blog/647128

# .gz
## compress
gzip <file_path>
## de-compress
gzip -d <file_path>.gz
gunzip <file_path>.gz

# .rar
## compress
rar a <file_path>.rar <dir_path>
## de-compress
rar x <file_path>.rar

# .tar
## compress
tar cvf <file_path>
## de-compress
tar xvf <file_path>

# .tar.Z
## compress
tar cZvf <file_path>
## de-compress
tar xZvf <file_path>.tar.Z

# Z
## compress
compress <file_path>
## de-compress
uncompress <file_path>.Z

# .zip
## compress
zip <file_path>.zip <dir_path>
## de-compress
unzip <file_path>.zip

bash

bash 脚本

-ex

bash -ex 同 set -ex

  • -e 有命令执行错误就退出
  • -x 打印执行的命令行

参考 https://www.peterbe.com/plog/set-ex

bash 的威力

循环语句

#!/bin/bash

for i in {03..23}; do
    echo processing access.log.20181007-$i

    gunzip access.log.20181007-$i.gz

    grep 'playlists/video_stream.json' access.log.20181007-$i >> access_log_video_stream
    wc -l access_log_video_stream

    grep 'playlists/list.json' access.log.20181007-$i >> access_log_list
    wc -l access_log_list

    grep 'playlists/show.json' access.log.20181007-$i >> access_log_show
    wc -l access_log_show

    gzip access.log.20181007-$i
done

Art of CLI

The Art of Command Line : 命令行的艺术

Process

  • ack
  • ag
  • awk
  • sed
  • xargs

Others

  • export
  • gdb
  • make
  • rsync

rsync -goDp

  • source
  • strace
  • ltrace
  • screen
  • top
  • z

lock

chattr +i file
chattr -i file
lsattr 查锁

Useful

统计每秒访问量

grep 'interface_name' localhost_access_log |awk '{print $5}' |sort |uniq -c |sort -n -r |head -n 20

开启编辑器，用来编辑一个复杂命令并执行

ctrl-x e

开启一个简易计时器

time read

把上一个命令存为 sh 文件

echo "!!" > foo.sh

为特别复杂的语句添加 label，以后可以在 ctrl+R 时直接搜索 label

some_very_long_and_complex_command # label

删除非.foo,.bar.baz 的文件

rm !(*.foo|*.bar|*.baz)

去掉重复行（不需要排序）

awk '!x[$0]++' file

输出文件的 10-20 行

sed -n '10,20p' file

显示当前正在使用网络的连接。

ss -p

显示当前文件夹下最大的 10 个文件/文件夹。

du -s * | sort -n | tail

同 ctrl+x e

fc

显示进程树

ps awwfux | less -S

对比当前和 10 秒后进程打开文件的情况（同理可对比其它命令）

diff <(lsof -p 1234) <(sleep 10; lsof -p 1234)

重复执行上一个命令直到执行成功

util !!;do :;done

在某种文件类型中搜索关键字

find . -name "*.[ch]" -exec grep -i -H "search pharse" {} \;

删除 1，3 列

awk '{$1=$3=""}1' file

切换到上一个命令最后一个参数指向的目录（:t 是文件）

cd !$:h

计算 299 秒是多少分钟

bc <<< 'obase=60;299'

sed

#!/bin/sh

for arg in $*
do
    grep -E '(?:class )(.*?)(?:Sniff)' $arg \
        | awk '{ print $2; }' \
        | awk -F 'Sniff' '{ print "    <!-- ## Squiz.Operators."$1" -->"; }' \
        >> ~/Desktop/tmp.txt

    sed -n '3p' $arg \
        | sed 's/^...//g; s/\.$//g' \
        | awk '{ print "    <!-- "$0" -->"; }' \
        >> ~/Desktop/tmp.txt

    echo >> ~/Desktop/tmp.txt
done

ab

Apache Bench

References

Install

https://blog.csdn.net/kingofworld/article/details/41774079

Usage

Options

  • -c concurrent?
  • -n request times
  • -t duration second
  • -g output data

http_load

Bash

GNU Bourne-Again SHell

Bash Cheatsheet https://devhints.io/bash

References

TEMP

confirm.sh

#!/bin/bash

read -r -p "Are You Sure? [Y/n]"
echo

if [[ $REPLY =~ ^[yY]$ ]]; then
    echo 'Yes'
elif [[ $REPLY =~ ^[nN]$ ]]; then
    echo 'No'
else
    echo 'Invalid Input!'
fi