1. 说明自动化运维的路径,原理,实践方法.

所谓自动化运维是指通过将日常IT运维中大量的重复性工作(小到简单的日常检查、配置变更和软件安装,大到整个变更流程的组织调度)由过去的手工执行转为标准化、流程化和自动化操作。

企业实际应用场景分析

  Dev开发环境

    使用者:程序员

    功能:程序员个人的办公电脑或项目的开发测试环境,部署开发软件,测试个人或项目整体的BUG的环 境

    管理者:程序员

  测试环境

    使用者:QA测试工程师

    功能:测试经过Dev环境测试通过的软件的功能和性能,判断是否达到项目的预期目标,生成测试报告

    管理者:运维

    说明:测试环境往往有多套,测试环境满足测试功能即可,不宜过多;测试人员希望测试环境有多套,公司的产品多产品线并发,即多个版本,意味着多个版本同步测试;通常测试环境有多少套和产品线数量保持一样

  预发布环境

    使用者:运维

    功能:使用和生产环境一样的数据库,缓存服务等配置,测试是否正常

  发布环境

    包括代码发布机,有些公司为堡垒机(安全屏障)

    使用者:运维

    功能:发布代码至生产环境

    管理者:运维(有经验)

    发布机:往往需要有2台(主备)

  生产环境

    使用者:运维,少数情况开放权限给核心开发人员,极少数公司将权限完全开放给开发人员并其维护

    功能:对用户提供公司产品的服务

    管理者:只能是运维

    生产环境服务器数量:一般比较多,且应用非常重要。往往需要自动工具协助部署配置应用

  灰度环境

    属于生产环境的一部分

    使用者:运维

    功能:在全量发布代码前将代码的功能面向少量精准用户发布的环境,可基于主机或用户执行灰度发布

    案例:共100台生产服务器,先发布其中的10台服务器,这10台服务器就是灰度服务器

    管理者:运维

    灰度环境:往往该版本功能变更较大,为保险起见特意先让一部分用户优化体验该功能,待这部分用户 使用没有重大问题的时候,再全量发布至所有服务器

2. 搭建pxe集群

节点1:10.0.0.156;节点2:10.0.0.157;节点3:10.0.0.158

#节点1
[root@centos7 ~]# vim /etc/yum.repos.d/pxc.repo
[percona]
name=percona_repo
baseurl = https://mirrors.tuna.tsinghua.edu.cn/percona/release/$releasever/RPMS/$basearch
enabled = 1
gpgcheck = 0
[root@centos7 ~]#scp /etc/yum.repos.d/pxc.repo 10.0.0.157:/etc/yum.repos.d
[root@centos7 ~]#scp /etc/yum.repos.d/pxc.repo 10.0.0.158:/etc/yum.repos.d
#在三个节点安装PXC
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
[root@centos7 ~]# yum install Percona-XtraDB-Cluster-57 -y
#修改配置
[root@centos7 ~]# vim /etc/percona-xtradb-cluster.conf.d/wsrep.cnf

[mysqld]
# Path to Galera library
wsrep_provider=/usr/lib64/galera3/libgalera_smm.so

# Cluster connection URL contains IPs of nodes
#If no IP is found, this implies that a new cluster needs to be created,
#in order to do that you need to bootstrap this node
wsrep_cluster_address=gcomm://10.0.0.156,10.0.0.157,10.0.0.158

# In order for Galera to work correctly binlog format should be ROW
binlog_format=ROW

# MyISAM storage engine has only experimental support
default_storage_engine=InnoDB

# Slave thread to use
wsrep_slave_threads= 8

wsrep_log_conflicts

# This changes how InnoDB autoincrement locks are managed and is a requirement for Galera
innodb_autoinc_lock_mode=2

# Node IP address
wsrep_node_address=10.0.0.156
# Cluster name
wsrep_cluster_name=pxc-cluster-zmy

#If wsrep_node_name is not specified, then system hostname will be used
wsrep_node_name=pxc-cluster-node-1

#pxc_strict_mode allowed values: DISABLED,PERMISSIVE,ENFORCING,MASTER
pxc_strict_mode=ENFORCING

# SST method
wsrep_sst_method=xtrabackup-v2

#Authentication for SST method
wsrep_sst_auth="sstuser:s3cretPass"

#标黄需要修改

#其余两个节点相同操作

启动第一个节点

[root@centos7 ~]# systemctl start mysql@bootstrap.service
[root@centos7 ~]# grep "temporary password" /var/log/mysqld.log
2022-08-20T08:52:35.405492Z 1 [Note] A temporary password is generated for root@localhost: njQVMfRt;4wB
[root@centos7 ~]# mysql -uroot -p'njQVMfRt;4wB'
ysql> alter user 'root'@'localhost' identified by '123456';
Query OK, 0 rows affected (0.00 sec)
mysql> create user 'sstuser'@'localhost' identified by 's3cretPass';
Query OK, 0 rows affected (0.00 sec)
mysql> grant reload,lock tables,process,replication client on *.* to 'sstuser'@'localhost';
Query OK, 0 rows affected (0.01 sec)

启动其余两个节点

[root@centos7 ~]# systemctl start mysql

[root@centos7 ~]# systemctl start mysql

节点一
mysql> show status like 'wsrep%'\G;
*************************** 66. row ***************************
Variable_name: wsrep_cluster_size
Value: 3
已连接

测试

#节点三
mysql> create database db158;
Query OK, 1 row affected (0.00 sec) #其余节点查看是否成功
mysql> show databases;#节点一
+--------------------+
| Database |
+--------------------+
| information_schema |
| db1 |
| db158 |
| mysql |
| performance_schema |
| sys |
+--------------------+
6 rows in set (0.00 sec) #节点二
mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| db1 |
| db158 |
| mysql |
| performance_schema |
| sys |
+--------------------+
6 rows in set (0.00 sec)

冲突测试

#节点二
mysql> use db158;
Database changed
mysql> create table t1(id int);
Query OK, 0 rows affected (0.01 sec) #节点一
mysql> create table t1(id int);
ERROR 1046 (3D000): No database selected #节点三
mysql> create table t1(id int);
ERROR 1046 (3D000): No database selected

3. playbook常用模块总结;一个简单的playbook完成安装httpd服务。

主机清单

[root@centos7 ~]# grep -v '^#' /etc/ansible/hosts
[local]
10.0.0.156 ansible_connection=local [websrvs]
10.0.0.157
10.0.0.159 [dbsrvs]
10.0.0.159
10.0.0.158 [appsrvs]
10.0.0.156
10.0.0.157
10.0.0.158

Ansible模块:

shell模块:在远程主机执行命令,用shell执行命令,支持各种符号,比如:*,$, >

[root@centos7 ~]# ansible websrvs -m shell -a "echo $HOSTNAME"
10.0.0.157 | CHANGED | rc=0 >>
centos7.linux.org
10.0.0.159 | CHANGED | rc=0 >>
centos7.linux.org

Copy 模块:从ansible服务器主控端复制文件到远程主机。src=file 如果是没指明路径,则为当前目录或当前目录下的files目录下的file文件

ansible websrvs -m copy -a "src=/etc dest=/backup"

File 模块:设置文件属性,创建软链接等

ansible all -m file  -a 'path=/data/test.txt state=touch'
ansible all -m file -a 'path=/data/test.txt state=absent'

Yum 和 Apt 模块:yum 管理软件包,只支持RHEL,CentOS,fedora,不支持Ubuntu其它版本;apt 模块管理 Debian 相关版本的软件包

ansible websrvs -m yum -a 'name=httpd state=present'  #安装
ansible websrvs -m yum -a 'name=nginx state=present enablerepo=epel' #启用epel源
进行安装
ansible websrvs -m yum -a 'name=* state=lastest exclude=kernel*,foo*' #升级除
kernel和foo开头以外的所有包

playbook完成安装httpd

[root@centos7 ~]# cat httpd.yml
---
- hosts: websrvs
remote_user: root
gather_facts: no tasks:
- name: install httpd
yum: name=httpd state=present
- name: copy html
copy: src=/data/index.html /var/www/html/index.html
- name: start httpd
service: name=httpd state=started enabled=yes

4. httpd协议的工作过程。

1、建立连接:接收或拒绝连接请求

2、接收请求:接收客户端请求报文中对某资源的一次请求的过程

3、处理请求:服务器对请求报文进行解析,并获取请求的资源及请求方法等相关信息,根据方法,资 源,首部和可选的主体部分对请求进行处理 常用请求Method: GET、POST、HEAD、PUT、DELETE、TRACE、OPTIONS

4、访问资源: 服务器获取请求报文中请求的资源web服务器,即存放了web资源的服务器,负责向请求者提供对方 请求的静态资源,或动态运行后生成的资源

5、构建响应报文: 一旦Web服务器识别除了资源,就执行请求方法中描述的动作,并返回响应报文。响应报文中 包含 有响应状态码、响应首部,如果生成了响应主体的话,还包括响应主体

1)响应实体:如果事务处理产生了响应主体,就将内容放在响应报文中回送过去。响应报文中通常包括:

  描述了响应主体MIME类型的Content-Type首部

  描述了响应主体长度的Content-Length

  实际报文的主体内容

2)URL重定向:web服务构建的响应并非客户端请求的资源,而是资源另外一个访问路径

3)MIME类型: Web服务器要负责确定响应主体的MIME类型。多种配置服务器的方法可将MIME类型 与资源管理起来

  魔法分类:Apache web服务器可以扫描每个资源的内容,并将其与一个已知模式表(被称为魔法文 件)进行匹配,以决定每个文件的MIME类型。这样做可能比较慢,但很方便,尤其是文件没有标准 扩展名时

  显式分类:可以对Web服务器进行配置,使其不考虑文件的扩展名或内容,强制特定文件或目录内 容拥有某个MIME类型

  类型协商: 有些Web服务器经过配置,可以以多种文档格式来存储资源。在这种情况下,可以配 置Web服务器,使其可以通过与用户的协商来决定使用哪种格式(及相关的MIME类型)"最好"

6、发送响应报文

Web服务器通过连接发送数据时也会面临与接收数据一样的问题。服务器可能有很多条到各个客户 端的连接,有些是空闲的,有些在向服务器发送数据,还有一些在向客户端回送响应数据。服务器要记 录连接的状态,还要特别注意对持久连接的处理。对非持久连接而言,服务器应该在发送了整条报文之 后,关闭自己这一端的连接。对持久连接来说,连接可能仍保持打开状态,在这种情况下,服务器要正 确地计算Content-Length首部,不然客户端就无法知道响应什么时候结束

7、记录日志 最后,当事务结束时,Web服务器会在日志文件中添加一个条目,来描述已执行的事务

5. 以apache/lamp架构,借助ansible实现自动化运维小案例。

ansible:10.0.0.156 ;

mysql:10.0.0.152;

apache、php:10.0.0.153

[root@ansible ~]# mkdir /data/ansible
[root@ansible ~]# cd /data/ansible
[root@ansible ansible]# vim hosts
[root@ansible ansible]# cat /data/ansible/hosts
[mysql]
10.0.0.152 [AP]
10.0.0.153
root@ansible ansible]# mkdir roles
root@ansible ansible]# cp /etc/ansible/ansible.cfg ./ [root@ansible ansible]# vim ansible.cfg
[root@ansible ansible]# grep -v '^#' ansible.cfg
inventory = /data/ansible/hosts
roles_path = /data/ansible/roles
remote_user = root [root@ansible ansible]# ansible all -m ping -k
SSH password:
10.0.0.152 | SUCCESS => {
"ansible_facts": {
"discovered_interpreter_python": "/usr/libexec/platform-python"
},
"changed": false,
"ping": "pong"
}
10.0.0.153 | SUCCESS => {
"ansible_facts": {
"discovered_interpreter_python": "/usr/libexec/platform-python"
},
"changed": false,
"ping": "pong"
}
[root@ansible ansible]# cd roles
[root@ansible roles]# ansible-galaxy init apache
- Role apache was created successfully
[root@ansible roles]# ansible-galaxy init php
- Role php was created successfully
[root@ansible roles]# ansible-galaxy init mysql
- Role mysql was created successfully
#httpd
[root@ansible roles]# cd apache
[root@ansible apache]# vim files/httpd.conf
[root@ansible apache]# cat files/httpd.conf
DirectoryIndex index.php
ProxyRequests Off
ProxyPassMatch ^/(.*\.php)$ fcgi://10.0.0.153/data/html/$1
ProxyPassMatch ^/(fpm_status|ping) fcgi://10.0.0.153
[root@ansible apache]# cat tasks/main.yml
---
# tasks file for apache
- name: install
yum: name=httpd state=present
- name: copy config
copy: src=httpd.conf dest=/etc/httpd/conf.d/
- name: start service
service: name=httpd state=started enabled=yes #php-fpm
[root@ansible php]# cat files/www.conf
user apache
group apache
pm.status_path = /fpm_status
ping.path = /ping
[root@ansible php]# vim tasks/main.yml
[root@ansible php]# cat tasks/main.yml
---
# tasks file for php - name: install php
yum: name=php-fpm state=present
- name: install php2
yum: name=php-json state=present
- name: copy config
copy: src=www.conf dest=/etc/php-fpm.d/www.conf
- name: mkdir
file: path=/var/www/html state=directory owner=apache group=apache
- name: copy phpinfo
copy: src=info.php dest=/data/html/info.php owner=apache group=apache
- name: start service
service: name=php-fpm state=started enabled=yes #mysql
[root@ansible mysql]# vim tasks/main.yml
[root@ansible mysql]# cat tasks/main.yml
---
# tasks file for mysql
- name: install mariadb
yum: name=mariadb-server state=present
- name: start mariadb
service: name=mariadb state=started enabled=yes
- name: change password
shell: mysql -uroot -e " alter user root@'localhost' identified by '123456';"
[root@ansible ansible]# vim lamp.yml
[root@ansible ansible]# cat lamp.yml
- name: apache
hosts: AP
roles:
- apache - name: php
hosts: AP
roles:
- php - name: mysql
hosts: mysql
roles:
- mysql

最新文章

  1. android基础知识进阶
  2. IE 11 如何设置“用户代理字符串”
  3. 分布式消息系统:Kafka
  4. 安装CocoaPods报错 - [!] The dependency `AFNetworking (~> 3.1.0)` is not used in any concrete target.
  5. lua 获取文件名和扩展名
  6. python (11)文件的读写 按行读文件
  7. js从富文本中找出固定电话、手机号码、邮箱并添加上链接。
  8. eclipse 或MyEclipse将工程进行移动的时候会对@Override报错的处理方法
  9. Java实现敏感词过滤(转)
  10. 【jquery】获取元素高度
  11. 201521123001《Java程序设计》第9周学习总结
  12. js代码细嚼慢咽
  13. ajax和跨域
  14. 使用Dockerfile创建一个tomcat镜像,并运行一个简单war包
  15. java学习——JDK1.8接口和实现类
  16. Django REST framework基础:认证、权限、限制
  17. day11.装饰器初识
  18. 视频转GIF动态图怎样实现
  19. [APUE]进程控制(下)
  20. 【PyQt5-Qt Designer】PyQt5+eric6 安装和配置

热门文章

  1. virtualenv 配置(windows)
  2. 【转载】EXCEL VBA 工作簿(表)合并拆分
  3. 痞子衡嵌入式:Farewell, 我的写博故事2016-2019
  4. .Net引用根目录子文件夹下的dll文件
  5. centos7.6在防火墙放开端口
  6. 如何在 pyqt 中使用动画实现平滑滚动的 QScrollArea
  7. 第一个C程序
  8. SQL优化的一些方法
  9. java入门与进阶-P1.1+P1.2
  10. 报错One record is expected, but the query result is multiple records