Day5-命令查找、文件内容处理命令
一、命令查找
which ls #查找ls命令的绝对路径
当我们想要查看命令的绝对路径 #which command 查询绝对路径
whereis ls //查找命令的路径，帮助手册
-b 不显示帮助信息，仅显示所在绝对路径
whereis -b ls //仅显示命令所在的路径
对于内核相关的一些命令,使用which whereis是无法查询到,需要使 用type命令查询 # type -a ls #查看命令的绝对路径(包括别名)
二、联网下载文件(wget、curl),文件上传与下载(rz、sz)
wget
1.虚拟机系统默认没有wget命令，需要进行安装命令 yum installwget -y
2.找到需要下载的资源 复制资源的连接地址
3.在linux上使用wget命令进行下载(默认下载到当前目录）
wget http://fj.xuliangwei.com/public/weixin.py
4.使用wget下载资源时,指定保存的位置,并重新命名 wget -O /opt/tt.png http://fj.xuliangwei.com/public/ks.jpeg
5.下载资源时,如果不想重新命名只想修改保存的路径,请带上原有的名称 [root@oldboyedu ~]# wget -O /opt/ks.jpeg http://fj.xuliangwei.com/public/ks.jpeg
curl 浏览网络上的资源
1.在线浏览网站资源内容(源代码) curl http://fj.xuliangwei.com/public/weixin.py
2.使用curl将内容保存至本地,并重命名(如果没有明确指定路径,则表示 当前目录)
curl -o wei.txt http://fj.xuliangwei.com/public/weixin.py
3.将资源保存至指定的路径
curl -o /opt/weixin.py http://fj.xuliangwei.com/public/weixin.py
#练习: 使用两种方式下载如下的两个文件 #1.wget保存至本地 /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo [root@oldboyedu ~]# wget -O /etc/yum.repos.d/CentOSBase.repo http://mirrors.aliyun.com/repo/Centos-7.repo
#2.curl保存至本地 /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo [root@oldboyedu ~]# curl -o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo
#3.最后执行一条命令检查 yum makecache
rzsz上传下载文件
rz #只能上传文件，不支持上传文件夹，不支持大于4个G上传，也不支持断点续传
# sz /path/file #只能下载文件 (任意单个文件)，不支持下载文件夹
sort排序
在有些情况下，需要对应一个无序的文本文件进行数据的排序，这时 就需要使用sort进行排序了。
sort 选项 文件
-r #倒序
-n #按数字排序
-t #指定分隔符
说明: 对p.txt的ip地址进行排序。# -t是定义字符 # -k3.1,3.1 第三列的第1项
# -k4.1,4.3 第四列的第1-3项 # -n是按数字排序
-k #指定第几列， 指定几列几字符(指定1.1 3.1，3.3) 第一列的第一项 第三项的第1-3项
#首先创建一个文件，写入一写无序的内容
cat >> file.txt <<EOF
b:3
c:2
a:4
e:5
d: 1
f:11
EOF
#2.使用sort下面对输出的内容进行排序 sort file.txt
a:4
b:3
c:2
d:1
e:5
f:11
#结果并不是按照数字排序，而是按字母排序。
#可以使用-t指定分隔符, 使用-k指定需要排序的列。
sort -t ":" -k2 sort.txt
d:1
f:11
#第二行为什么是11？不应该按照顺序排列？
c:2
b:3
a:4
e:5
#按照排序的方式, 只会看到第一个字符,11的第一个字符是1, 按照字符 来排序确实比2小。
-n #按照数字的方式进行排序
sort -t ":" -n -k2 p.txt
d:1
c:2
b:3
a:4
e:5
f:11
#测试案例，下载文件 http://fj.xuliangwei.com/public/ip.txt，对该文件进行排序
wget http://fj.xuliangwei.com/public/ip.txt
sort -t. -k3.1,3.1nr -k4.1,4.3nr ip.txt
第三列的第1-3项，第四列的1-3项
uniq去重 去重前必须用sort先排序。
如果文件中有多行完全相同的内容，当前是希望能删除重复的行，同 时还可以统计出完全相同的行出现的总次数, 那么就可以使用uniq命 令解决这个问题(但是必须配合sort使用)。
-c 计算重复的行
选项：-c 计算重复的行
1.创建一个file.txt文件:
cat >>file1.txt <<EOF
abc
123
abc
123
EOF
2.uniq需要和sort一起使用, 先使用sort排序, 让重复内容连续在一 起
sort file.txt
123
123
abc
abc
3.使用uniq去除相邻重复的行
sort file.txt |uniq
123
abc
4.-c参数能统计出文件中每行内容重复的次数
sort file.txt |uniq -c
2 123
2 abc
cut截取字段
wc统计行号
-l #显示文件行数
wc -l /etc/fstab #统计/etc/fstab文件有多少行
wc -l /etc/services #统计/etc/services 文件行号
例题: 过滤出/etc/passwd以nologin结尾的内容，并统计有多少行
1.先筛选出目标的行
2.然后进行统计
grep "nologin$" /etc/passwd | wc l -l扩展统计文件行号的方法
cat -n /etc/services | tail -1
grep -n ".*" /etc/services | tail -1
#习题 1 分析如下日志，统计每个域名被访问的次数
cat >> web.log <<EOF http://www.xuliangwei.com/index.html http://www.xuliangwei.com/1.html http://post.xuliangwei.com/index.html http://mp3.xuliangwei.com/index.html http://www.xuliangwei.com/3.html http://post.xuliangwei.com/2.html EOF
cut -d "/" -f 3 web.log | sort | uniq -c | sort -nr
awk -F "/" '{print $3}' web.log |sort |uniq -c |sort -nr
习题2: 使用awk取出系统的IP地址，思路如下:
1.我要取的值在哪里 ifconfig ens32
2.如何缩小取值范围(行)
3.如何精确具体内容(列)
先拿到结果,然后提取有关键字那一行,最后使用awk取出那一列 [root@oldboyedu ~]# ifconfig ens32|grep "netmask" | awk '{print $2}' 10.0.0.200
ifconfig ens32 | awk '/netmask/ {print $2}'
10.0.0.200
awk
awk 用于取出文件中的列或关键字
-F 设定分隔符
awk -F "." {print $1,$2} + 文件名或路径
#以.为间隔符，打印输出第1列和第2列
#awk 也用于提取关键字的行
awk '/root/' /etc/passwd 在/etc/passwd # 文件中提取带root关键字的行
