shell脚本(命令)放后台
 sleep 300& 放到后台运行,脚本或命令要全路径
nohup:用户推出系统进程继续工作
【功能说明】
 nohup 命令可以将程序以忽略挂起信号的方式运行起来,被运行程序的输出信息将不会显示到终端
 如果当前目录的nohup.out文件不可写,输出重定向到$HOME/nohup.out文件中
企业应用:
nohup 路径/shell脚本 &
方法:screen
 总结:让程序进入后台运行方法
 1.ctrl+z,jobs,fg,bg前台的程序,进入后台,后台运行 ##临时用
2.使用screen (推荐) ##管理员常用,下班了想回家,xshell有没有执行完的任务。
3.使用&符号 ##后台运行脚本常用
screen命令
作用:保持操作过的窗口连接状态。
[root@calms ~]# yum install screen -y
2.开启一个screen窗口,指定名称
[root@calms ~]# screen -S sleep
3.在screen窗口中执行任务即可
while true;do echo wulin>>/tmp/wulin.log;sleep 1;done
 #每隔一秒向/tmp/wulin.log追加wulin
4.平滑的退出screen,但不会终止screen中的任务。
ctrl+a+d
 注意: 如果使用exit 才算真的关闭screen窗口
5.关闭xshell模拟下班回家,
第二天重开xshell连接。
 查看当前正在运行的screen有哪些
[root@wulin ~]# screen -list

6.此时需要进入昨晚的会话,进入正在运行的screen
[root@calms ~]# screen -r sleep
 
[root@calms ~]# screen -r 2259
常用screen参数 screen -S yourname #新建一个叫yourname的session screen -ls
#列出当前所有的session screen -r yourname #回到yourname这个session screen -d yourname #远程detach某个session screen -d -r yourname
#结束当前session并回到yourname这个session
重点总结:
 #1.创建screen 创建
screen 或 screnn -S 窗口名称
#2.退出窗口
ctrl+a+d
#3.显示当前所有screen窗口
screen -ls
#4.恢复,重新进入
screnn -r id
什么是进程优先级?
进程执行时候是排队执行的,需要插队,要调整。
 进程重要性高,需要优先多分配CPU。调整优先级。
#记住用途
nice: 调整【程序运行时】的优先级 renice:调整【运行中的进程】的优先级
区别:
 nice命令常用于修改未运行的程序再运行时的优先级,
 但是对于正在运行的进程,若想要修改优先级,就需要用到renice命令。
strace:跟踪进程的系统调用
系统调用:系统为应用程序提供的连接接口
 进程执行:调用很多接口。。
为什么要跟踪进程的系统调用?
查找进程执行异常的原因:
PHP进程,JAVA进程,cpu%100,怎么排查?
进程执行:调用很多接口,接口如果异常,进程就会不正常
strace是Linux环境下的一款程序调试工具,用来检查一个应用程序所使用的系统调用及它所接收的系统信息。strace会追踪程序运行时的整个生命周期,
输出每一个系统调用的名字、参数、返回值和执行消耗的时间等, 是高级运维和开发人员的排查问题的杀手锏。
-p pid 指定要跟踪的进程pid, 要同时跟踪多个pid, 重复多次-p选项即可※
 -f 跟踪目标进程,以及目标进程创建的所有子进程※
 -tt 在输出中的每一行前加上时间信息,精确到微秒。例子:11:18:59.759546※
只跟踪和文件操作有关的系统调用。
 命令结果输出太多了,很容易看花眼,因此可以使用过滤器,过滤掉无关信息,比如只查看文件操作信息。
 [root@LNMP ~]# strace -tt -f -e trace=file /application/nginx/sbin/nginx
 #<==-e trace=file的作用为只跟踪和文件操作有关的系统调用。
[root@calms ~]# strace -tt -p 80008
跟踪系统调用统计。
 strace不仅能追踪系统调用,使用选项-c还能将进程所有的系统调用做一个统计分析。
 [root@LNMP ~]# strace -c /application/nginx/sbin/nginx
 #<==使用-c参数给进程所有的系统调用做一个统计分析。
 
使用-o选项将strace的结果输出到文件中
 strace -c -o tongji.log /application/nginx/sbin/nginx
小结:strace命令很适合程序僵尸、命令执行报错等的问题,如果从程序日志和系统日志中看不出问题出现的原因,
就可以strace一下,也许有答案,不过也需要使用者有足够的耐心去查看输出!
给/etc/passwd加锁,然后用strace追踪。
 [root@calms ~]# chattr +i /etc/passwd
 [root@calms ~]# strace -f useradd abc
 发现问题:无法打开/etc/passwd
 open(“/etc/passwd”, O_RDWR|O_NOCTTY|O_NONBLOCK|O_NOFOLLOW) = -1 EACCES (Permission denied)
 write(2, “useradd: cannot open /etc/passwd”…, 33useradd: cannot open /etc/passwd
企业案例:PHP进程CPU百分百了怎么解决?
1)pgrep 进程,获取进程号
 2)strace -p 进程号 发现问题。
用户案例: 公司服务器CPU占用过高,报警了,第一反应是登录服务器, top 命令查看当前进程,输入 P 按cpu排序 :
看到有多个php-fmp进程占用cpu过高,都达到100%了于是打算监听一下进程,看看在执行什么操作,使用 strace 命令:
#监听进程
strace -o /tmp/output.txt -T -tt -F -e trace=all -p 7757
#查看log
tail -f /tmp/output.txt
结果没有看出来,cpu占用率太高了通过php慢日志开启条件,需要php-fpm.conf配置:request_slowlog_timeout = 3 #脚本超时秒数 slowlog =
/var/log/php.log.slow #记录慢日志路径
tail -n 1000 /var/log/php.log.slow
然后进行优化代码
strace关键词。
 
 
企业生产经验:
资源不够用:网站运行慢。
 1.没有给充足资源。
 上线前压测,提前测出来承受能力。
 提前预警。70% 预警时间是(资源增加的最长周期+当下百分比<80%)。
2.开发代码上线,BUG异常消耗资源,导致100%
 strace,gdb.后知后觉。
3.公司推广部门(合作广告),大流量过来,广告页(CDN),(提前准备)。
 运维感受到的:服务器流量增加,压力增大,CPU ,内存,磁盘都压力很大了。
所有和网站相关的部门,开发,运维、运营、市场,客服(查询 离线查询,和生产用户访问库,分开)
 对于外部用户,检测,根据趋势预判。
ltrace:跟踪进程调用函数
 ltrace:能够跟踪进程的库函数调用,它会显示出那个库函数调用,而strace则是跟踪进程的每一个系统调用
 [root@calms ~]# ltrace /application/nginx/sbin/nginx

 -e expr输出过滤器,通过表达式,可以过滤掉你不想要的输出
 -e printf 表示之查看print函数的调用,而strace则是跟踪进程的每个系统调用
 -e !printf表示查看除了printf 函数以外的所有函数调用
 -f 跟踪子进程
 -o filename将ltrace输出写入文件filename
 -p pid指定跟踪的进程pid
[root@calms ~]# ltrace - o nginx.log /application/nginx/sbin/nginx
进程管理总结:
- 找出问题的进程
 top ps
- 调整优先级
 nice renice
- 进程在干什么(nginx,php,mysql)
 strace lstrace gdb
- 杀进程
 kill killall pkill
- 继承前后台切换
 ctrl+z bg fg jobs kill %1
 &后台运行
 nohup 配合&,让程序放到后台运行,并且打印输出到日志里
 screen 保持操作的对话,其不中断(运维人员客户端xshell用)
平均负载(load average)

 查看负载命令:
 top,w,uptime
 平时只看负载就使用uptime
也可以查看对应的文件:
 
什么是平均负载?
衡量系统繁忙的一个综合性指标,主要是cpu/io的繁忙程度;在工作中非常常用。
工作中非常的常用,具体是哪一个指标繁忙
 ps,top,sar看cpu
 iostat,iotop看磁盘
一个进程的产生会占用很多的资源:
 1.PID 2.内存 3.文件描述符 4. cpu 5.磁盘
平均负载是指单位时间内,系统处于可运行状态的平均进程数,也就是平均活跃进程数;(在特定的时间间隔内cpu运行队列中的平均进程数)
举例子
 车:进程 桥:cpu队列
 系统负载为0的时候(意味着一辆车没有)
 0.5的时候(意味着大桥一半的路段有车)
 1.0的时候(大桥的所有路段都有车,虽然桥上车辆是满的,但是此时的大桥还能进行顺畅流通)
 1.7(车辆太多,大桥已经被占满了,后面等着上桥的车辆为前面车辆的70%)
 2.0(桥上的车辆与桥面一样多)
 3.0(等待桥上的车辆时桥面的2倍)
大桥的同行能力就是cpu的最大工作量,一个桥为1个cpu队列,2个桥为2个cpu队列
平均负载数字和cpu核数想等的时候就是cpu处理进程的临界点
2棵,每一颗4核,8核负载为8的时候,临界点为8*70%=5.6(5-8)慢的临界点
可运行状态进程:正在使用cpu或正在等待cpu处理的进程,ps命令看到处于R状态对的进程
不可中断进程:系统最常见的硬件设备的I/o相应
ps命令看到的d状态进程
最终解释(单位时间内的活跃进程数)
2颗,单颗四核cpu为例
 1分钟:0.0.7 cpu处理进程1分钟的繁忙程度,忙碌1分钟
 5分钟:8.0.1 cpu处理进程5分钟的繁忙程度,忙碌了5分钟
 15分钟:5.05 cpu处理进程15分钟的繁忙程度,忙碌了连续15分钟,15分钟内平均为5个点
总结:
 负载数值/总的核心数=1 开始慢的临界点,实际上1✖70%=关注的临界点;大于1就说明有问题。
需要关注负载的值:总的核数乘以70%(关注的点)
如何查cpu核心数?
 查看物理cpu个数:
 grep “physical id” /proc/cpuinfo|wc -l
 grep -c "physical id " /proc/cpuinfo
 查看每个物理cpu的core的个数(核数)
 gfrep “cpu cores” /proc/cpuinfo|wc -l
查看逻辑cpu的个数(用以计算负载)
 grep “processor” /proc/cpuinfo|wc -l
平均负载案例分析实战
用stress,mpstat,pidstat等工具,找出平均负载升高的根源
stress是Linux系统压力测试和工具,这里我们用作异常进程模拟平均负载升高的场景
 mpstat是多核心cpu性能分析工具,用来临时查看每一个cpu的性能指标,以及所有的cpu平均指标
 pidstat是一个常用的进程性能分析工具,用来实时查看进程的cpu,内存,I/O及上下文切换等性能指标
yum install stress -y
 yum install sysstat -y
 
 平均负载与cpu
 :平均负载提供了一个快速查看系统整体性能的手段,反映了整体的负载情况。但只看平均负载本身,并不能直接发现,到底是哪里出现了瓶颈。
 平均负载阿公有可能是cpu密集型进程导致的;平均负载高并不一定代表cpu使用率高,还可能是I/O更加繁忙了;当发现负载高的时候,可以使用mpstat,pidstat工具,辅助分析负载来源
1.平均负载是运行队列中活跃的进程数
 2.平均负载;1,5,15分钟内的负载
 3.需要关注负载的值:总的核心数*70%关注的点
 4.辅助opt,ps,uptime,sar,mpstat,pidstat,iostat,排查问题
 5.starce跟踪进程系统调用
面试官会问:
 你在工作中遇到过那些生产故障,是怎么解决的?
 最好与数据库相关(负载高),web相关(php进程100%,java内存泄漏)
Linux系统服务管理
什么是运行级别?
 就是Linux启动时处于不同的状态标识的集合
 (文本模式,图形模式,重启模式,关机模式都会对应不同的运行级别)
面试可能会到:
 
 查看运行级别:
 
ls -l /usr/lib/systemd/system/runlevel[0-9].target
如何切换运行级别?
 C6:init
 
 startx 切换到桌面
c7:
 启动时加载的文件
 systemctl get-default
 
 设置默认运行级别方式:
 systemctl set-default TARGET.target
cnetos7之前是/etc/inittab里面设置的
 id:3:initdefault系统启动时,将linux设定固定的运行级别的配置行(面试可能会问到)
Linux系统systemd知识
系统管理守护进程,工具和库的进程,早期是init进程。
 功能:用于集中管理守护进程,工具和库的集合
 systemd是centos7系统启动的第一个进程,其他所有的进程是它的子进程
 
 为什么要用systemd?
 init启动方式缺点:
- 启动时间长,串行执行,启动完成后再启动另外的
- 启动脚本复杂,依赖关系很杂,靠脚本自己处理
- 相关的管理命令很多很杂
centos5-centos7启动过程
 
 systemd相关路径文件
 
 查看不同文件运行级别的文件路径:
 
 systemctl管理服务相关命令
 systemctl start crond(定时任务)
 
 使用systemctl启动一个守护进程之后,可以通过systemctl status查看守护进程状态
 
 systemctl设置服务开机启动,不启动,查看各个级别下服务启动状态常用命令
 
 systemctl enable crond.service 原理就是创建一个软链接
 systemctl enable crond.service 移除一个软链接
启动图解:

 手工设置开机自启动:
 (enable与disabled原理:对应级别的target下面做一个服务的软链接,然后在启动这个服务的时候,它会加载这个级别下的所有软链接,所有软链接就会找到程序启动的所有路径)
[root@calms ~]# rm -f /etc/systemd/system/multi-user.target.wants/crond.service
[root@calms ~l#systemctlstatus crondcrond.service -Command SchedulerEv:kunlun991
Loaded: loaded (/usr/lib/systemd/system/crond.service; disabled; vendor preset: enabled)
Active:inactive(dead)
[root@calms ~]# ln -s /usr/lib/systemd/system/crond.service/etc/systemd/system/multi-user.target.wants/crond.servicerootd
[root@calms ~]#systemctlstatus crond
Crond.service -Command SchedulerLoaded: loaded (/usr/lib/systemd/system/crond.service; enabled; vendor preset: enabled)Active:inactive (dead)root
[root@calms ~]#rm -f /etc/systemd/system/multi-user.target.wants/crond.service
[root@calms ~]#systemctl status crond
Crond.service -Command Scheduler
Loaded: loaded (/usr/lib/systemd/system/crond,service; disabled; vendor preset: enabled)
systemd文件格式
- systemctl文件路径说明:
  
- 说明
 Unit 定义通用的选项,描述信息,依赖关系
 Srevice 特殊的服务类型,具体启动,关闭,重启选项都在此部分配置
 Install 定义开机自启和不开机自启动命令实现的选项
unit常用段:
 description 描述信息
 documentation 说明文档的在线地址
 after 定义自启动顺序,表示当前配置的服务应该晚于那些服务之后启动
 wants 依赖其他的关系
serivce段常用说明
 Type#定义服务类型
 forking#需要父进程启动子进程的服务类型为forking
 PIDFile#定义PID 文件路径(进程 PID)
 ExecStart#指定启动服务命令绝对路径
ExecReload#指定重新加载服务的配置文件的命令绝对路径
 ExecStop#指定停止服务命令绝对路径
 ExecStartPre#在启动之前运行的命令
 ExecStartPost#在启动之后运行的命令
install:
 WantedBy#哪些服务需要被依赖
nginx的systemd启动文件解释:
 
 自定义服务启动文件(条件):
 PIDFile=/var/run/nginx.pid #pid 文件的绝对路径
ExecStart=/usr/sbin/nginx-c
/etc/nginx/nginx.conf
 ExecStop=/bin/sh-c “/bin/kil1 -s TERM $ (/bin/cat /var/run/nginx.pid)”
 #启动命令的绝对路径#停止服务命令的绝对路径
centos6:
| centos6 | centos7 | 
|---|---|
| /etc/init.d/nginx start(shell脚本) | systemctl start nginx(systemd启动文件) | 
| serivce nginx start | |
| chkconfig nginx on chkconfid nginx off | systemctl enable nginx systemctl disable nginx | 
| chkconfig - -list grep 3:on | systemctl list-unit-files | 
面试题:
开发了一个nginx脚本/etc/init.d/nginx start如何配置脚本,能让那个脚本使用chkconfig进行开机自启动设置
 答:chkconfig:2345 21 81
 description:rsync service start and stop scripts
自定义一个nginx脚本
cat >/usr/lib/systemd/system/wulinnginx…service << EOF
 [Unit]
 Description=DIY nginx
 Documentation=https://www.wulin.com/
 After=network-online.target remote-fs.target nss-lookup.target
 Wants=network-online.target
[Service]
 Type=forking
 PIDFile=/application/nginx/pid/nginx.pid
 Execstart=lapplication/nginx/sbin/nginx-c /application/nginx/conf/nginx.conf
ExecReload=/appalication/nginx/sbin/nginx -s reload
 Execstop=/application/nginx/sbin/nginx -s stop
 ExecStartPre=/bin/sh -c “/usr/bin/chown -R www:www /application/nginx/”
[Install]
 wantedBy=multi-user.target
 EOF
重新加载systemd配置:
 systemctl daemon-reload
启动我们自己的服务
 systemctl start wulinnginx
这一篇小编先写到这里了,更多内容请关注小编专栏!!!

