第230817期 - 运维工程师面试汇总

X

# Linux

1. linux系统启动流程

• 第一步：开机自检，加载BIOS
• 第二步：读取ＭＢＲ
• 第三步：Boot Loader　grub引导菜单
• 第四步：加载kernel内核
• 第五步：init进程依据inittab文件夹来设定运行级别
• 第六步：init进程执行rc.sysinit
• 第七步：启动内核模块
• 第八步：执行不同运行级别的脚本程序
• 第九步：执行/etc/rc.d/rc.lo

2. linux文件类型

文件属性	文件类型
-	常规文件，即file
d	目录文件
b	block device 即块设备文件，如硬盘;支持以block为单位进行随机访问
c	character device 即字符设备文件，如键盘支持以character为单位进行线性访问
l	symbolic link 即符号链接文件，又称软链接文件
p	pipe 即命名管道文件
s	socket 即套接字文件，用于实现两个进程进行通信

3. centos6和7怎么将源码安装的程序添加到开机自启动？

• 通用方法：编辑/etc/rc.d/rc.local文件，在文件末尾添加启动服务命令

• centos6：①进入到/etc/rc.d/init.d目录下，②新建一个服务启动脚本，脚本中指定chkconfig参数，③添加执行权限，④执行chkconfig —add 添加服务自启动

• centos7：①进入到/usr/lib/systemd/system目录下，②新建自定义服务文件，文件中包含[Unit] [Service] [Install]相关配置，然后添加下执行权限，③执行systemctl enable 服务名称 简述lvm，如何给使用lvm的/分区扩容？

4. 简述lvm，如何给使用lvm的/分区扩容？

• 功能：可以对磁盘进行动态管理。动态按需调整大小
• 概念：
  • ①PV - 物理卷：物理卷在逻辑卷管理中处于最底层，它可以是实际物理硬盘上的分区，也可以是整个物理硬盘，也可以是raid设备。
  • ②VG - 卷组：卷组建立在物理卷之上，一个卷组中至少要包括一个物理卷，在卷组建立之后可动态添加物理卷到卷组中。一个逻辑卷管理系统工程中可以只有一个卷组，也可以拥有多个卷组。
  • ③LV - 逻辑卷：逻辑卷建立在卷组之上，卷组中的未分配空间可以用于建立新的逻辑卷，逻辑卷建立后可以动态地扩展和缩小空间。系统中的多个逻辑卷可以属于同一个卷组，也可以属于不同的多个卷组。

• 给/分区扩容步骤：
  • ①添加磁盘
  • ②使用fdisk命令对新增加的磁盘进行分区
  • ③分区完成后修改分区类型为lvm
  • ④使用pvcreate创建物理卷
  • ⑤使用vgextend命令将新增加的分区加入到根目录分区中
  • ⑥使用lvextend命令进行扩容
  • ⑦使用xfs_growfs调整卷分区大小

5. 为何du和df统计结果不一致？

• 用户删除了大量的文件被删除后，在文件系统目录中已经不可见了，所以du就不会再统计它。
• 然而如果此时还有运行的进程持有这个已经被删除的文件句柄，那么这个文件就不会真正在磁盘中被删除，分区超级块中的信息也就不会更改，df仍会统计这个被删除的文件。
• 可通过 lsof命令查询处于deleted状态的文件，被删除的文件在系统中被标记为deleted。如果系统有大量deleted状态的文件，会导致du和df统计结果不一致。

6. 如何升级内核？

方法一：

# 添加第三方yum源进行下载安装。
Centos 6 YUM源：http://www.elrepo.org/elrepo-release-6-6.el6.elrepo.noarch.rpm
Centos 7 YUM源：http://www.elrepo.org/elrepo-release-7.0-2.el7.elrepo.noarch.rpm
# 先导入elrepo的key，然后安装elrepo的yum源：
rpm -import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org
rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-2.el7.elrepo.noarch.rpm
# 查看可用的内核相关包
yum --disablerepo="*" --enablerepo="elrepo-kernel" list available 
yum -y --enablerepo=elrepo-kernel install

方法二：

# 通过下载kernel image的rpm包进行安装。
官方 Centos 6: http://elrepo.org/linux/kernel/el6/x86_64/RPMS/
官方 Centos 7: http://elrepo.org/linux/kernel/el7/x86_64/RPMS/
# 获取下载链接进行下载安装即可
wget https://elrepo.org/linux/kernel/el7/x86_64/RPMS/kernel-lt-4.4.185-1.el7.elrepo.x86_64.rpm
rpm -ivh kernel-lt-4.4.185-1.el7.elrepo.x86_64.rp
# 查看默认启动顺序
[root@localhost ~]# awk -F\' '$1=="menuentry " {print $2}' /etc/grub2.cfg
CentOS Linux (5.2.2-1.el7.elrepo.x86_64) 7 (Core)
CentOS Linux (4.4.182-1.el7.elrepo.x86_64) 7 (Core)
CentOS Linux (3.10.0-957.21.3.el7.x86_64) 7 (Core)
CentOS Linux (3.10.0-957.10.1.el7.x86_64) 7 (Core)
CentOS Linux (3.10.0-327.el7.x86_64) 7 (Core)
CentOS Linux (0-rescue-e34fb4f1527b4f2d9fc75b77c016b6e7) 7 (Core)
由上面可以看出新内核(4.12.4)目前位置在0，原来的内核(3.10.0)目前位置在1
# 设置默认启动
[root@localhost ~]# grub2-set-default 0　　// 0代表当前第一行，也就是4.12.4版本
# 重启验证

7. nginx日志访问量前十的ip怎么统计？

awk '{array[$1]++}END{for (ip in array)print ip,array[ip]}' access.log |sort -k2 -rn|head

8. 如何删除/var/log/下.log结尾的30天前的日志？

find /var/log/ -type f -name .*.log -mtime 30|xargs rm -f

9. ansible有哪些模块？功能是什么？

模块	功能
copy	拷贝文件到被控端
cron	定时任务
fetch	拷贝被控端文件到本地
file	文件模块
group	用户组模块
user	用户模块
hostname	主机名模块
script	脚本模块
service	服务启动模块
command	远程执行命令模块
shell	远程执行命令模块，command高级用法
yum	安装包组模块
setup	查看主机系统信息

10. nginx为什么比apache快？

• nginx采用epoll模型
• apache采用select模型

11. 四层负载和七层负载区别是什么？

• 四层基于IP+端口进行转发
• 七层就是基于URL等应用层信息的负载均衡

12. lvs有哪些工作模式？哪个性能高？

• dr：直接路由模式，请求由 LVS 接受，由真实提供服务的服务器直接返回给用户，返回的时候不经过 LVS。（性能最高）

• tun：隧道模式，客户端将访问vip报文发送给LVS服务器。LVS服务器将请求报文重新封装，发送给后端真实服务器。后端真实服务器将请求报文解封，在确认自身有vip之后进行请求处理。后端真实服务器在处理完数据请求后，直接响应客户端。

• nat：网络报的进出都要经过 LVS 的处理。LVS 需要作为 RS 的网关。当包到达 LVS 时，LVS 做目标地址转换（DNAT），将目标 IP 改为 RS 的 IP。RS 接收到包以后，仿佛是客户端直接发给它的一样。RS 处理完，返回响应时，源 IP 是 RS IP，目标 IP 是客户端的 IP。这时 RS 的包通过网关（LVS）中转，LVS 会做源地址转换（SNAT），将包的源地址改为 VIP，这样，这个包对客户端看起来就仿佛是 LVS 直接返回给它的。客户端无法感知到后端 RS 的存在。

• fullnat模式：fullnat模式和nat模式相似，但是与nat不同的是nat模式只做了两次地址转换，fullnat模式却做了四次。

13. tomcat各个目录含义，如何修改端口，如何修改内存数？

• bin 存放tomcat命令
• conf 存放tomcat配置文件
• lib 存放tomcat运行需要加载的jar包
• log 存在Tomcat运行产生的日志
• temp 运行过程中产生的临时文件
• webapps 站点目录
• work 存放tomcat运行时的编译后的文件
• conf/server.xml 修改端口号
• bin/catalina.sh 修改jvm内存

14. nginx反向代理时，如何使后端获取真正的访问来源ip？

    在location配置段添加以下内容：

    proxy_set_header Host $http_host;

    proxy_set_header X-Real-IP $remote_addr;

    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

    proxy_set_header X-Forwarded-Proto $scheme;

15. nginx负载均衡算法有哪些？

• rr 轮训
• weight 加权轮训
• ip_hash 静态调度算法
• fair 动态调度算法
• url_hash url哈希
• leat_conn 最小连接数

16. 如何进行压力测试？

    例如：模拟10个用户，对百度首页发起总共100次请求。

    测试命令： ab -n 100 -c 10 https://www.baidu.com/index.htm

17. curl命令如何发送https请求？如何查看response头信息？如何发送get和post表单信息？

• 发送https请求：curl —tlsv1 ‘https://www.bitstamp.net/api/v2/transactions/btcusd/’

• response头信息 ：curl -I

• get：curl 请求地址?key1=value1&key2=value2&key3=value3

• post： curl -d “key1=value1&key2=value2&key3=value3”

Mysql

1. 索引为什么使查询加快？有啥缺点？

默认的方式是根据搜索条件进行全表扫描，遇到匹配条件的就加入搜索结果集合。如果我们对某一字段增加索引，查询时就会先去索引列表中一次定位到特定值的行数，大大减少遍历匹配的行数，所以能明显增加查询的速度 缺点：

• 创建索引和维护索引要耗费时间，这种时间随着数据量的增加而增加
• 索引需要占物理空间，除了数据表占用数据空间之外，每一个索引还要占用一定的物理空间，如果需要建立聚簇索引，那么需要占用的空间会更大
• 以表中的数据进行增、删、改的时候，索引也要动态的维护，这就降低了整数的维护速度

2. sql语句左外连接 右外连接 内连接 全连接区别

3. mysql数据备份方式，如何恢复？你们的备份策略是什么？

• 物理完全备份

备份所有数据库文件：/var/lib/mysql/*

备份所有binlog文件: /var/lib/mysql/mysql-bin.*

备份选项文件: /etc/my.cnf

• mysqldump逻辑备份

mysqldump -uroot -p —all-databases > /backup/mysqldump/all.db

• 物理备份恢复

mv /var/lib/mysql /var/lib/mysql.old #先把原来的数据目录改名

cp -a /backups/mysql /var/lib

• 逻辑备份数据恢复

mysql > use db_name

mysql > source /backup/mysqldump/db_name.db

4. 如何配置数据库主从同步，实际工作中是否遇到数据不一致问题？如何解决？

为每个服务器配置唯一值的server-id

• 主库 开启binlog日志 创建主从复制用户 查看master的状态

• 从库 change master to设置主库信息 start slave开始复制

5. mysql约束有哪些？

• 非空约束
• 唯一约束
• 主键约束
• 外键约束

6. 二进制日志（binlog）用途？

BINLOG记录数据库的变更过程。例如创建数据库、建表、修改表等DDL操作、以及数据表的相关DML操作，这些操作会导致数据库产生变化，开启binlog以后导致数据库产生变化的操作会按照时间顺序以“事件”的形式记录到binlog二进制文件中 mysql数据引擎有哪些？

7. mysql数据引擎有哪些？

• 常用的 myisam、innodb

• 区别：

  InnoDB 支持事务，MyISAM 不支持，这一点是非常之重要。事务是一种高级的处理方式，如在一些列增删改中只要哪个出错还可以回滚还原，而 MyISAM就不可以了；

  MyISAM 适合查询以及插入为主的应用，InnoDB 适合频繁修改以及涉及到安全性较高的应用；

  InnoDB 支持外键，MyISAM 不支持；

  MyISAM 是默认引擎，InnoDB 需要指定；

  InnoDB 不支持 FULLTEXT 类型的索引；

  InnoDB 中不保存表的行数，如 select count() from table 时，InnoDB；需要扫描一遍整个表来计算有多少行，但是 MyISAM 只要简单的读出保存好的行数即可。注意的是，当 count()语句包含 where 条件时 MyISAM 也需要扫描整个表；

  对于自增长的字段，InnoDB 中必须包含只有该字段的索引，但是在 MyISAM表中可以和其他字段一起建立联合索引；

  清空整个表时，InnoDB 是一行一行的删除，效率非常慢。MyISAM 则会重建表；

  InnoDB 支持行锁（某些情况下还是锁整表，如 update table set a=1 where user like ‘%lee%’

8. 如何查询mysql数据库存放路径？

 show variables like 'datadir%';

9. mysql数据库文件后缀名有哪些？用途什么？

• myisam .frm文件：保护表的定义 .myd：保存表的数据 .myi：表的索引文件

• innodb .frm：保存表的定义 .ibd：表空间

10. 如何修改数据库用户的密码？

• mysql8之前

set password for 用户名@localhost = password('新密码'); 
mysqladmin -u用户名 -p旧密码 password 新密码  
update user set password=password('123') where user='root' and host='localhost';

• mysql8之后

# mysql8初始对密码要求高，简单的字符串不让改。先改成:MyNewPass@123;
alter user 'root'@'localhost' identified by 'MyNewPass@123';
# 降低密码难度
set global validate_password.policy=0;
set global validate_password.length=4;
# 修改成简易密码
alter user 'root'@'localhost'IDENTIFIED BY '1111';

11. 如何修改用户权限？如何查看？

• 授权：

grant all on *.* to user@'%' identified by 'passwd'

• 查看权限

show grants for user@'%';

nosql

1. redis数据持久化有哪些方式？

• rdb
• aof

2. redis集群方案有哪些？

• 官方cluster方案
• twemproxy代理方案
• 哨兵模式
• codis 客户端分片

3. redis如何进行数据备份与恢复？

• 备份

redis 127.0.0.1:6379> SAVE 创建 redis 备份文件也可以使用命令 BGSAVE，该命令在后台执行。

• 还原

只需将备份文件 (dump.rdb) 移动到 redis 安装目录并启动服务即可 redis 127.0.0.1:6379> CONFIG GET dir

1. “dir”
2. “/usr/local/redis/bin”

4. MongoDB如何进行数据备份？

mongoexport / mongoimport

mongodump / mongorestore

5. kafka为何比redis rabbitmq快？

Kafka相比Redis和RabbitMQ具有更高的消息处理速度主要基于以下几点原因:

1. Kafka采用顺序写磁盘方式,可以充分利用磁盘序列读写的高效性,而Redis和RabbitMQ都需要进行随机读写。
2. Kafka的消息存储格式更加优化,其数据结构和序列化方式都针对高吞吐率进行了优化。
3. Kafka基于分区模型,可以方便地进行水平扩展,而Redis和RabbitMQ都存在扩展瓶颈。
4. Kafka消费者采用push模式,能主动推送数据到消费者,减少网络延迟。
5. Kafka使用Zero-copy技术,可以避免不必要的数据拷贝。
6. Kafka的消息处理模型非常简单,以降低维护成本和性能开销。
7. Kafka提供了高性能的压缩编码方式,可以减少消息大小。
8. Kafka可以批量发送消息,以增加吞吐量。

四 docker

1. dockerfile有哪些关键字？用途是什么？

指令	描述
FROM	构建新镜像是基于哪个镜像
MAINTAINER	镜像维护者姓名或邮箱地址
RUN	构建镜像时运行的Shell命令
COPY	拷贝文件或目录到镜像中
ENV	设置环境变量
USER	为RUN、CMD和ENTRYPOINT执行命令指定运行用户
EXPOSE	声明容器运行的服务端口
HEALTHCHECK	容器中服务健康检查
WORKDIR	为RUN、CMD、ENTRYPOINT、COPY和ADD设置工作目录
ENTRYPOINT	运行容器时执行，如果有多个ENTRYPOINT指令，最后一个生效运行容器时执行，如果有多个CMD指令，最后一个生效

2. 如何减小dockerfile生成镜像体积？

• 尽量选取满足需求但较小的基础系统镜像，例如大部分时候可以选择debian:wheezy或debian:jessie镜像，仅有不足百兆大小；
• 清理编译生成文件、安装包的缓存等临时文件；
• 安装各个软件时候要指定准确的版本号，并避免引入不需要的依赖；
• 从安全角度考虑，应用要尽量使用系统的库和依赖；
• 如果安装应用时候需要配置一些特殊的环境变量，在安装后要还原不需要保持的变量值；

3. dockerfile中CMD与ENTRYPOINT区别是什么？

• CMD 和 ENTRYPOINT 指令都是用来指定容器启动时运行的命令。

• 指定 ENTRYPOINT 指令为 exec 模式时，CMD指定的参数会作为参数添加到 ENTRYPOINT 指定命令的参数列表中。

4. dockerfile中COPY和ADD区别是什么？

• COPY指令和ADD指令都可以将主机上的资源复制或加入到容器镜像中
• 区别是ADD可以从 远程URL中的资源不会被解压缩。
• 如果是本地的压缩包ADD进去会被解压缩

5. docker的cs架构组件有哪些？

6. docker网络类型有哪些？

• host模式
• container模式
• none模式
• bridge模式

7. 如何配置docker远程访问？

• vim /lib/systemd/system/docker.service

• 在ExecStart=后添加配置，注意，需要先空格后，再输入 -H tcp://0.0.0.0:2375 -H unix:///var/run/docker.sock

8. docker核心namespace CGroups 联合文件系统功能是什么？

• namespace：资源隔离
• cgroup：资源控制
• 联合文件系统：支持对文件系统的修改作为一次提交来一层层的叠加，同时可以将不同目录挂载到同一个虚拟文件系统下

9. 命令相关：导入导出镜像，进入容器，设置重启容器策略，查看镜像环境变量，查看容器占用资源

• 导入镜像 docker load -i xx.tar
• 导出镜像docker save -o xx.tar image_name
• 进入容器docker exec -it 容器命令 /bin/bash
• 设置容器重启策略启动时 —restart选项
• 查看容器环境变量 docker exec {containerID} env
• 查看容器资源占用docker stats test2

10. 构建镜像有哪些方式？

• dockerfile
• 容器提交为镜像

11. docker和vmware虚拟化区别？

虚拟化方式不同:

Docker属于操作系统层虚拟化,不需要 Hypervisor,直接利用宿主机的操作系统来运行隔离的应用进程。

VMware属于硬件虚拟化,需要在物理服务器上运行Hypervisor,在其上创建虚拟机,每个虚拟机拥有自己的操作系统。

资源占用不同:

Docker容器共享宿主机OS,有较少的资源占用。

VMware虚拟机需要占用更多资源来运行完整的OS。

启动速度不同:

Docker容器启动很快,可以秒级启动。

VMware虚拟机启动较慢,需要启动完整的OS。

隔离级别不同:

Docker容器隔离性较弱。

VMware虚拟机提供完全隔离的硬件虚拟化环境。

适用场景不同:

Docker适用于需要高效利用资源的高密度部署。

VMware适用于完全隔离和模拟 heterogeneous 环境的场景。

五 kubernetes

1. k8s的集群组件有哪些？功能是什么？

Kubernetes集群主要由以下组件构成:

1. etcd:一个高可用的分布式键值存储,用于保存Kubernetes集群所有的状态数据。

2. API Server:Kubernetes集群的管理入口和REST API接口,服务注册和发现、数据校验等功能。

3. Controller Manager:维护集群状态,比如副本控制器、节点控制器等。

4. Scheduler:根据特定调度算法将Pod调度到集群节点上运行。

5. kubelet:在集群的每个node节点上运行的agent,负责本机Pod生命周期管理。

6. Container Runtime:Pod中容器的真正运行时,包括Docker、containerd等。

7. kube-proxy:在每个节点上运行的网络代理程序,维护节点上的网络规则。

8. Ingress Controller:外部请求的entrada服务,支持访问集群的负载均衡、SSL终止等功能。

9. Heapster:监控统计功能组件。

10. Federation:支持跨可用区部署集群。

11. kubectl命令相关：如何修改副本数，如何滚动更新和回滚，如何查看pod的详细信息，如何进入pod交互？

• 修改副本数 kubectl scale deployment redis —replicas=3
• 活动更新kubectl set image deployments myapp-deploy myapp=myapp:v2
• 回滚kubectl rollout undo deployments myapp-deploy
• 查看pod详细信息kubectl describe pods/pod-name
• 进入pod交互kubectl exec -it pod-name -c container-name bash

3. etcd数据如何备份？

• etcdctl —endpoints=“https://192.168.32.129:2379,https://192.168.32.130:2379,192.168.32.128:2379” —cacert=/etc/kubernetes/cert/ca.pem —key=/etc/etcd/cert/etcd-key.pem —cert=/etc/etcd/cert/etcd.pem snapshot save snashot1.db

• Snapshot saved at snashot1.db

4. k8s控制器有哪些？

• 副本集（ReplicaSet）
• 部署（Deployment）
• 状态集（StatefulSet）
• Daemon集（DaemonSet）
• 一次任务（Job）
• 计划任务（CronJob）
• 有状态集（StatefulSet）

5. 哪些是集群级别的资源？

• Namespace
• Node
• Role
• ClusterRole
• RoleBinding
• ClusterRoleBinding

6. pod状态有哪些？

• Pending 等待中
• Running 运行中
• Succeeded 正常终止
• Failed 异常停止
• Unkonwn 未知状态

7. pod创建过程是什么？

8. 用户通过 Kubernetes API 创建 Pod 对象,发送请求给 API Server。

9. API Server 验证请求参数是否合法。

10. Scheduler 根据调度算法为 Pod 选择一个运行的 Node 节点。

11. kubelet 在选中的 Node 上接收到要创建的 Pod。

12. kubelet 与容器运行时(如Docker)通信,pull 镜像,创建容器。

13. 容器运行时启动容器,进行镜像提取、容器创建、启动等操作。

14. kubelet 挂载外部存储卷到容器。

15. kubelet 为 Pod 网络配置 iptables 等,配置完成后将 Pod 置为 Running 状态。

16. kubelet 继续监控 Pod 状态,保证其处于运行状态。

17. 用户可以通过 Kubectl 查看 Pod 运行状态和详情。

。

8. pod重启策略有哪些？

Pod的重启策略有3种，默认值为Always。

• Always ： 容器失效时，kubelet 自动重启该容器；
• OnFailure ： 容器终止运行且退出码不为0时重启；
• Never ： 不论状态为何， kubelet 都不重启该容器

9. 资源探针有哪些？

• ExecAction：在容器中执行一个命令，并根据其返回的状态码进行诊断的操作称为Exec探测，状态码为0表示成功，否则即为不健康状态。

• TCPSocketAction：通过与容器的某TCP端口尝试建立连接进行诊断，端口能够成功打开即为正常，否则为不健康状态。

• HTTPGetAction：通过向容器IP地址的某指定端口的指定path发起HTTP GET请求进行诊断，响应码为2xx或3xx时即为成功，否则为失败。

10. requests和limits用途是什么？

• “requests”属性定义其请求的确保可用值，即容器运行可能用不到这些额度的资源，但用到时必须要确保有如此多的资源可用
• ”limits”属性则用于限制资源可用的最大值，即硬限制

11. kubeconfig文件包含什么内容，用途是什么？

包含集群参数（CA证书、API Server地址），客户端参数（上面生成的证书和私钥），集群context 信息（集群名称、用户名）。

12. RBAC中role和clusterrole区别，rolebinding和 clusterrolebinding区别？

• Role 可以定义在一个 namespace 中，如果想要跨 namespace则可以创建ClusterRole，ClusterRole 具有与 Role相同的权限角色控制能力，不同的是 ClusterRole 是集群级别的
• RoleBinding 适用于某个命名空间内授权，而 ClusterRoleBinding 适用于集群范围内的授权

13. ipvs为啥比iptables效率高？

IPVS模式与iptables同样基于Netfilter，但是ipvs采用的hash表，iptables采用一条条的规则列表。iptables又是为了防火墙设计的，集群数量越多iptables规则就越多，而iptables规则是从上到下匹配，所以效率就越是低下。因此当service数量达到一定规模时，hash查表的速度优势就会显现出来，从而提高service的服务性能

14. sc pv pvc用途，容器挂载存储整个流程是什么？

• PVC：Pod 想要使用的持久化存储的属性，比如存储的大小、读写权限等。
• PV ：具体的 Volume 的属性，比如 Volume 的类型、挂载目录、远程存储服务器地址等。
• StorageClass：充当 PV 的模板。并且，只有同属于一个 StorageClass 的 PV 和 PVC，才可以绑定在一起。当然，StorageClass 的另一个重要作用，是指定 PV 的 Provisioner（存储插件）。这时候，如果你的存储插件支持 Dynamic Provisioning 的话，Kubernetes 就可以自动为你创建 PV 了。

15. nginx ingress的原理本质是什么？

-ngress controller通过和kubernetes api交互，动态的去感知集群中ingress规则变化，

• 然后读取它，按照自定义的规则，规则就是写明了哪个域名对应哪个service，生成一段nginx配置，
• 再写到nginx-ingress-controller的pod里，这个Ingress controller的pod里运行着一个Nginx服务，控制器会把生成的nginx配置写入/etc/nginx.conf文件中，
• 然后reload一下使配置生效。以此达到域名分配置和动态更新的问题。

16. k8s网络类型，描述不同node上的Pod之间的通信流程

Kubernetes 中的网络主要分为以下几种类型:

1. Underlay网络:基于物理网络,需要配置节点网络路由。包括Flannel, Calico等。

2. Overlay网络:在物理网络之上创建Overlay虚拟网络。包括Canal, Cilium等。

3. LoadBalancer服务:将服务代理到Node端口或外部Load Balancer。

4. Ingress服务:外部可访问的entrada服务。

不同节点上的Pod通信主要流程:

1. 同一节点内部的Pod可以直接通过lo接口互联,无需经过物理设备。

2. 不同节点Pod之间的通信需要经过虚拟网络设备(flannel.1等),封装目标Pod IP并转发。

3. Overlay网络会在各节点上创建Network Namespace,并分配Pod子网段CIDR。

4. 跨Node的Pod通信最终转发到真实Node节点上,再通过 iptables 路由到目的Pod。

5. kube-proxy会在各节点上维护访问规则。

6. 外部请求会通过 Ingress 或 LoadBalancer 转发到后端Pod。

所以Kubernetes的网络实现让不同节点 Pod 能够互联互通,并提供了服务发现与负载均衡能力。

17. k8s集群节点需要关机维护，需要怎么操作

• 进行pod驱逐：kubelet drain <node_name>
• 检查node上是否无pod运行，切被驱逐的pod已经在其他节点运行正常
• 关机维护
• 开机启动相关服务（注意启动顺序）
• 解除node节点不可调度：kubectl uncordon node
• 创建测试pod，并使用节点标签测试节点可以被正常调度

18. Calico和flannel区别

• Flannel（简单、使用居多）：基于Vxlan技术（叠加网络+二层隧道），不支持网络策略
• Calico（较复杂，使用率少于Flannel）：也可以支持隧道网络，但是是三层隧道（IPIP），支持网络策略
• Calico项目既能够独立地为Kubernetes集群提供网络解决方案和网络策略，也能与flannel结合在一起，由flannel提供网络解决方案，而Calico此时仅用于提供网络策略。

六 prometheus

1. prometheus对比zabbix有哪些优势？

Prometheus相比Zabbix主要有以下几个优势:

1. 原生设计用于动态、非均匀环境,更适合云原生架构。Zabbix更针对静态物理环境。

2. Prometheus采用拉模式主动获取数据,而Zabbix使用推模式被动接收,Prometheus可以根据需要改变监控对象,更灵活。

3. Prometheus的多维数据模型可以更灵活地进行切片和聚合,查询更方便。

4. Prometheus支持更丰富的监控数据格式,例如StatsD、Graphite等。

5. Prometheus集成了更强大的警报管理和查询语言PromQL。表达式灵活过滤聚合。

6. Prometheus体系组件实现模块化,各组件间集成良好,可自定义扩展,生态更丰富。

7. Prometheus开源免费,社区活跃,迭代速度快。

8. Prometheus资源占用较少,适合小规模监控。Zabbix更占用资源。

综上,Prometheus在云原生环境下更具优势,适合规模和指标频繁变化的场景。但Zabbix可管理更复杂环境,适用于大规模稳定静态监控。需根据实际情况选择。

2. prometheus组件有哪些，功能是什么？

Prometheus主要包含以下组件:

Prometheus Server:主要监控程序,可通过HTTP协议拉取和存储时间序列数据。

exporters:用于暴露监控数据的采集器,可以将各种数据格式转换为Prometheus可以抓取的格式。

Pushgateway:支持短生命的job主动推送指标数据到Prometheus。

AlertManager:用于实现报警相关的功能,包括报警规则、告警抑制、路由等。

图形界面工具:例如Grafana,用于数据可视化展示。

客户端库:不同语言的客户端库,用于编写采集指标的程序。

其中,Prometheus Server是核心组件,用于收集和存储时间序列数据。Exporters抓取各种系统和服务数据,Pushgateway推送瞬态数据。AlertManager实现报警,Grafana提供展示,客户端库用于自定义监控。各组件配合使用构成完整的监控解决方案。 3. 指标类型有哪些？

• Counter（计数器）
• Guage（仪表盘）
• Histogram（直方图）
• Summary（摘要）

4. 在应对上千节点监控时，如何保障性能 （降低采集频率，缩小历史数据保存天数，使用集群联邦和远程存储）

• 降低采集频率
• 缩小历史数据保存天数，
• 使用集群联邦和远程存储

5. 简述从添加节点监控到grafana成图的整个流程

• 被监控节点安装exporter
• prometheus服务端添加监控项
• 查看prometheus web界面——status——targets
• grafana创建图表

6. 在工作中用到了哪些exporter

• node-exporter监控linux主机
• cAdvisor监控容器
• MySQLD Exporter监控mysql
• Blackbox Exporter网络探测
• Pushgateway采集自定义指标监控
• process exporter进程监控

七 ELK

1. Elasticsearch的数据如何备份与恢复？

Elasticsearch的数据备份和恢复可以通过以下几种方式实现:

1. 快照(Snapshot):内置的备份机制,可以对索引的快照进行备份和恢复。

2. 重建索引:使用之前发送到Elasticsearch的数据对索引进行重新索引建立。

3. 日志备份:通过Logstash、Filebeat等工具收集Elasticsearch日志,再恢复的时候重新执行生成索引。

4. 批量查询导出:使用Elasticsearch API,循环导出所有文档再导入。

5. 直接备份数据目录:直接拷贝Elasticsearch的数据目录,恢复时替换目录。

6. 同步复制集群:设置一个同步的复制集群,数据同步后可直接读取。

7. 外部储存仓库备份:使用共享文件系统或者对象存储作为快照仓库。

8. 第三方工具:一些开源工具或商业工具可以备份封装ES数据。

综上,建议正常情况下使用快照功能;大数据量情况下可以使用增量导出、外部仓库快照等方式。数据完全丢失时可以尝试重建索引或日志恢复。

2. 你们项目中使用的logstash过滤器插件是什么？实现哪些功能？

• date 日期解析
• grok 正则匹配解析
• overwrite 写某个字段
• dissect 分隔符解析
• mutate 对字段做处理
• json 解析
• geoip 地理位置解析
• ruby 修改logstash event

3. 是否用到了filebeat的内置module？用了哪些？

nginx，system，mysql，redis

4. elasticsearch分片副本是什么？你们配置的参数是多少？

Elasticsearch中的分片(shard)和副本(replica)是实现扩容和高可用的重要机制。

分片是指将索引中的数据分散存储在多个分片中,可以实现海量数据的横向扩展。副本是每个主分片的复制,保证主分片失效时服务不中断。

我们的Elasticsearch集群配置是:

• 每个索引默认3个主分片。这可以支持初始化数据扩展到3个节点,合理配置分片数可以平衡数据分布。

• 每个主分片默认1个副本。保证每个主分片数据至少有1份冗余备份,当主分片不可用时可以快速切换到副本。

• 故障转移时间配置为1分钟。如果主分片失效超过1分钟,则自动激活对应的副本分片。

• 扩容时可以配置滚动分片迁移,逐步将分片数据均匀分布。

我们会根据集群规模、业务需求和数据量大小动态调整分片和副本数量配置,以达到扩展性好、高可用性的目标。但需要在性能消耗和数据冗余之间找到平衡。

八 运维开发

1. 备份系统中所有镜像

#备份镜像列表
docker images|awk 'NR>1{print $1":"$2}'|sort > images.list。
#导出所有镜像为当前目录下文件：
while read img; do
    echo $img
    file="${img/\//-}"
    sudo docker save --output $file.tar $img
done < images.list
#将本地镜像文件导入为Docker镜像：
while read img; do
    echo $img
    file="${img/\//-}"
    docker load < $file.tar
done < images.list

2. 编写脚本，定时备份某个库，然后压缩，发送异机

• 公共部分定义函数，如获取时间戳，配置报警接口
• 多使用if判断是否存在异常并处理，如数据库大，检测任务是否完成。检测生成文件大小是否是空文件

3. 批量获取所有主机的系统信息

• 使用python的paramiko库，ssh登陆主机执行查询操作
• 使用shell脚本批量ssh登陆主机并执行命令
• 使用ansible的setup模块获取主机信息
• prometheus的node_exporter收集主机资源信息

4. django的mtv模式流程
5. python如何导出、导入环境依赖包

导出环境 pip freeze >> requirements.txt

导入环境 pip install -r requirement.txt

6. python创建，进入，退出，查看虚拟环境

安装软件包 pip3 install virtualenv

检测安装是否成功 virtualenv —version

创建虚拟环境 cd到要创建虚拟环境的目录 cd github/test/venv/

创建虚拟环境 virtualenv test

激活虚拟环境 source test/bin/activate(activate路径)

退出虚拟环境 deactivate

7. flask和django区别，应用场景

• Django功能大而全，Flask只包含基本的配置 Django的一站式解决的思路，能让开发者不用在开发之前就在选择应用的基础设施上花费大量时间。Django有模板，表单，路由，认证，基本的数据库管理等等内建功能。与之相反，Flask只是一个内核，默认依赖于两个外部库： Jinja2 模板引擎和 Werkzeug WSGI 工具集，其他很多功能都是以扩展的形式进行嵌入使用。

• Flask 比 Django 更灵活 用Flask来构建应用之前，选择组件的时候会给开发者带来更多的灵活性 ，可能有的应用场景不适合使用一个标准的ORM(Object-Relational Mapping 对象关联映射)，或者需要与不同的工作流和模板系统交互。

8. flask开发一个hello word页面流程

使用Flask开发一个展示”Hello World”的简单web页面的流程如下:

1. 安装Flask

pip install flask

2. 创建一个app.py文件,添加代码:

from flask import Flask
app = Flask(__name__)

@app.route('/')
def hello():
    return 'Hello World!'

if __name__ == '__main__':
    app.run()

3. 运行app.py

python app.py

4. 访问本地5000端口

使用浏览器访问:http://localhost:5000

会看到页面显示”Hello World!”

这就是使用Flask的基本流程:

• 导入Flask类
• 创建Flask应用实例
• 使用route装饰器定义路由及视图函数
• 运行应用
• 访问对应路由

Flask让web应用的开发和运行变得简单快速。我们可以继续在app.py中添加更多路由和视图来丰富web应用的功能。

9. 列举常用的git命令

$ git init
$ git config
$ git add
$ git commit
$ git branch
$ git checkout
$ git tag
$ git push
$ git status
$ git log

10. git gitlab jenkins的CICD流程如何配置

• 开发者git提交代码至gitlab仓库
• jenkins从gitlab拉取代码，触发镜像构建
• 镜像上传至harbor私有仓库
• 镜像下载至执行机器
• 镜像运行

九 日常工作

1. 在日常工作中遇到了什么棘手的问题，如何排查 （①redis弱口令导致中挖矿病毒，排查，优化②k8s中开发的程序在用户上传文件时开启进程，未及时关闭，导致节点超出最大进程数）

2. 日常故障处理流程

• 查看报警内容，快速定位大致故障主机，服务，影响范围
• 告知运维经理故障，并开始排查
• 如果需要修改配置文件，重启服务器等操作，告知相关开发人员
• 完成故障处理

3. 修改线上业务配置文件流程

• 先告知运维经理和业务相关开发人员
• 在测试环境测试，并备份之前的配置文件
• 测试无误后修改生产环境配置
• 观察生产环境是否正常，是否有报警
• 完成配置文件更改

4. 业务pv多少？集群规模多少？怎么保障业务高可用？

1. 业务PV:

我们业务的平均PV在50万级别,高峰时段可达到100万PV。这需要后端系统具备足够的扩展能力。

2. 集群规模:

目前业务集群包含3个Master节点,10个Work节点。使用Kubernetes进行集群管理和调度。

Master节点主要运行Core服务如API Server等。

Work节点用于运行业务Pod。每个节点可以运行超过100个Pod。

储存使用分布式文件系统,提供高可用共享存储。

3. 保障高可用:

• 使用LB并设置keepalive,避免主机单点故障。

• Core服务如API Server部署多副本,负载均衡。

• 业务Pod配置多副本,存在Pod故障可以快速重启。

• 基础设施和主机监控,发现故障快速响应和修复。

• 关键数据持久化存储,存在节点失效可以快速恢复。

• 配置弹性伸缩,大流量时快速增减节点。

• 核心流程设置有重试机制, faulty tolerance。

• 灰度发布,减少发布风险。

我们会继续根据业务需求评估和优化集群,确保可以提供稳定可靠的高可用服务。

十 开放性问题

1. 你认为初级运维工程师和高级运维工程师的区别？（初级干活的，会操作，顺利完成领导安排的任务。高级优化架构，研究如何避免问题，研究新技术并引用）
2. 你认为未来运维发展方向（自动化，智能化）

---