当前位置: 首页 > news >正文

实训日记day29

MySQL读写分离

1、读写分离的目的

数据库负载均衡:

当数据库请求增多时,单例数据库不能够满足业务 需求。需要进行数据库实例的扩容。多台数据库同时相 应请求。也就是说需要对数据库的请求,进行负载均衡 但是由于数据库服务特殊原因,数据库扩容基本要 求为:数据的一致性和完整性。所以要保证多台数据库 实例的数据一致性和完整性,以MySQL为例来说,官方 提供了主从复制机制。

读写分离:

数据库的负载均衡不同于其他服务的负载均衡,数 据要求一致性。基于主从复制的基础上,常见的数据库 负载均衡使用的是读写分离方式。写入主数据库,读取 到从数据库。可以认为数据库读写分离,是一种特殊的 负载均衡实现。
实际业务中,读写分离存在的一个问题,不够实时性。 
对于要求实时性高的业务 
①缓存 写主库 写缓存 读缓存 
②可以读主 
③添加完数据之后,有一个跳转等待的时间(5s),数 据正在审核中

2、读写分离常见的实现方式

①业务代码的读写分离

需要在业务代码中,判断数据操作是读还是写,读连接 从数据服务器操作,写连接主数据库服务器操作 以当前LNMP为例,需要通过PHP代码实现读写分离。

②中间件代理方式的读写分离

在业务代码中,数据库的操作,不直接连接数据库,而 是先请求到中间件服务器(代理) 由代理服务器,判断是读操作去从数据服务器,写操作 去主数据服务器, 也就是如下图示架构:
问:如何选择? 
①业务实现读写分离,操作方便,成本低,当前的开发 框架基本支持读写分离 
②中间件代理服务器,除了能够实现读写分离,还可以 作为数据库集群的管理平台

MySQL读写分离案列实现

0、搭建M-S复制: 主从复制的原理 :主服务器开启bin-log(记录了写操 作) 从服务器获取到主服务器的bin-log 记录到relaylog中。从服务器在通过异步的线程方式,对于relay-log 进行重放操作。
1、master配置
①在master服务器授权,slave服务器replication slave权限
slave是通过MySQL连接登录到master上来读取二进制 日志的,因此需要在 master上给slave配置权限
mysql > grant replication slave on *.* to 'slave'@'192.168.17.%'identified by '123456';
②master服务器打开bin-log日志,并标识server-id
shell > vim /etc/my.cnf
配置文件内容
[mysqld] 
log-bin = mysql-index 
server-id = 1
注意重启mysql使配置生效
③制作一个完整的备份( 如果确认主从的数据库,默认开始数据是一致的,可以 不做备份 )
shell > mysqldump -uroot -p'123456' --alldatabases > /root/mysql.sql
④查看master上的bin-log及其position位置
mysql > show master status;
查看并记录File的值,Position的值。之后需要在从服务 器上,指向这些信息
File 记录到的bin-log日志文件名称 
Position bin-log日志文件所记录的位置
2、slave配置
①恢复备份文件( 如果slave和master的数据本身就是相同的,可以不选择 备份和导入 )
②配置server-id,标识服务器
shell > vim /etc/my.cnf
配置文件内容
[mysqld] 
server-id=2
由于是克隆获取的MySQL实例,所以auto.conf里记录的 UUID一样,需要删除/usr/local/mysql/data/auto.conf 文件,否则主从无法识别互相身份,重启自动生成新的 即可。
③配置slave replication
mysql > stop slave; 
mysql> change master to 
master_host='192.168.17.101' ,master_user='sl ave1' ,master_password='123456' ,master_log_fi le='mysql-bin.000002' ,master_log_pos=333; 
mysql > start slave;
参数说明 
master_host 主master的IP 
master_user 主master允许登录,拥有replication slave权限 
master_password 用户的密码 
需要通过mysql > show master status; 在master执行 
master_log_file 主master记录的bin-log日志文件名称 
master_log_pos 主master记录的bin-log日志文件对 应的位置
④启动replication,并检查结果
mysql > show slave status\G;
查看到两个yes,主从复制成功。否则,查看显示最下面 信息,通过error信息进行排查问题。

简单业务代码实现

示例语法代码:
将此代码上传到web服务器,测试是否可以实现读写分离。注意修改对应的连接地址、用户名称、密码等信息。
#命令行执行php代码的方式
#php需要提前配置环境变量 xxx.php为需要执行的php 脚本文件
shell > php xxx.php

框架配置实现读写分离

①通过查看thinkphp5手册找到处理方案 
②修改项目配置文件 (一定要先去确定主从数据库的数据一致(tp5shop), 用户名称和密码可以进行登录使用)
shell > vim /usr/local/nginx/html/tp5shop/application/da tabase.php
配置文件示例
return [// 数据库类型'type' => 'mysql' ,// 服务器地址// 1、主从数据库的连接地址 主在前 从在后'hostname' => '192.168.17.100,192.168.17.105' ,// 2、主从数据库的名称、用户、密码一样的话,只 配置一份即可。如果不一样,按照先后顺序,逗号分隔// 数据库名'database' => 'tp5shop' ,// 用户名'username' => 'tp5shop' ,// 密码'password' => '$Abc3721' ,// 端口'hostport' => '3306' ,// 连接dsn 'dsn' => '' ,// 数据库连接参数'params' => [],// 数据库编码默认采用utf8'charset' => 'utf8' ,// 数据库表前缀'prefix' => 'tpshop_' ,// 数据库调试模式'debug' => true,// 3、项目框架的业务代码实现读写分离,使用的是 分布式(主从服务器) 配置为1// 数据库部署方式:0 集中式(单一服务器),1 分布 式(主从服务器)'deploy' => 1,// 4、数据库读写分离是业务代码实现的,配置为 true// 数据库读写是否分离 主从式有效'rw_separate' => true,// 读写分离后 主服务器数量'master_num' => 1,// 指定从服务器序号'slave_no' => '' ,// 是否严格检查字段是否存在
测试down主库,看从库是否可以访问。thinkphp5中, 如果slave宕机,master提供读服务。

MyCAT实现读写分离

jdk安装

①下载安装jdk 
https://www.oracle.com/technetwork/java/javase/do wnloads/jdk8-downloads-2133151.html 
选择下载x64架构.tar.gz包 
上传mycat和jdk到soft目录下 
②配置环境变量 
shell > tar xvf jdk-8u192-linux-x64.tar.gz
shell > mv jdk1.8.0_192 /usr/local/java
②配置环境变量
#追加环境变量
shell > echo
"PATH=/usr/local/java/bin:$PATH" >> /etc/profile
shell > source /etc/profile
#检测java环境变量 如果看到版本信息即为成功
shell > java -version

mycat安装和测试启动

①解压安装MyCAT( 上传jdk和mycat安装包 )
shell > tar xvf Mycat-server-1.6.5-release20180122220033-linux.tar.gz -C /usr/local
#解压并且添加到指定的位置
[root@mycat ~]# ls 
anaconda-ks.cfg 
frp 
initserver.sh 
jdk1.8.0_192 
jdk-8u192-linux-x64.tar.gz 
mycat 
Mycat-server-1.6.5-release20180122220033-linux.tar.gz 
[root@mycat ~]# cp -r jdk1.8.0_192/ /usr/local/jdk 
[root@mycat ~]# cp -r mycat/ /usr/local/
②软件目录介绍
bin 相关软件管理命令等 
conf 配置文件目录 
logs 日志目录
③ 查看并且配置jdk环境
[root@mycat ~]# ls /usr/local/jdk/
bin             man
COPYRIGHT       README.html
include         release
javafx-src.zip  src.zip
jre             THIRDPARTYLICENSEREADME-JAVAFX.txt
lib             THIRDPARTYLICENSEREADME.txt
LICENSE
[root@mycat ~]# sed -i '$aexport JAVA_HOME=/usr/local/jdk' /etc/profile
[root@mycat ~]# source /etc/profile
[root@mycat ~]# $JAVA_HOME
-bash: /usr/local/jdk: 是一个目录
[root@mycat ~]# sed -i '$aexport PATH=$PATH:$JAVA_HOME/bin' /etc/profile
[root@mycat ~]# source /etc/profile
[root@mycat ~]# $PATH
-bash: /usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin:/usr/local/jdk/bin: 没有那个文件或目录
④ 测试启动myca就可以了
[root@mycat ~]# ls /usr/local/mycat/ bin catlet conf lib logs version.txt
[root@mycat ~]# ll /usr/local/mycat/
[root@mycat ~]# ls /usr/local/mycat/bin/
[root@mycat ~]# /usr/local/mycat/bin/mycat console
找到server.xml和schema.xml更改
shell > /usr/local/mycat/conf 
shell > vim server.xml
schema=>dataNode=>dataHost=>writeHost=>rea dHost
⑥ 启动服务
/usr/local/mycat/bin/mycat start
⑦ 检查启动的是否成功
[root@mycat ~]# netstat -lnput|grep 8066 
tcp6 0 0 :::8066 
:::* LISTEN 
4547/java
⑧ 连接测试
[root@client ~]# cd mysql-8.0.33-linuxglibc2.12-x86_64/ 
[root@client mysql-8.0.33-linuxglibc2.12-x86_64]# cd bin/ 
[root@client bin]# ./mysql -h10.1.1.60 - P8066 -uzhangmin -pzhangmin

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • 主成分分析(PCA)
  • 自然语言处理(NLP)--数据增强
  • 文本纠错实现定位与标记
  • JMeter进阶技巧:参数化与数据驱动测试
  • Polars简明基础教程八:Series 和 DataFrame 以及它们之间的转换_B
  • Qt窗口交互场景、子窗口数据获取
  • AcWing 723. PUM
  • 改善工作流
  • Spring Boot如何实现数据脱敏?
  • 在Spring Boot中使用MyBatis实现复杂查询和分页功能
  • Java基础之循环嵌套
  • K8S学习笔记(自用,不定期更新)
  • Docker-命令
  • Tomcat初篇
  • Java 网络编程练习
  • Debian下无root权限使用Python访问Oracle
  • GitUp, 你不可错过的秀外慧中的git工具
  • JS基础篇--通过JS生成由字母与数字组合的随机字符串
  • rabbitmq延迟消息示例
  • Spring思维导图,让Spring不再难懂(mvc篇)
  • vagrant 添加本地 box 安装 laravel homestead
  • webpack入门学习手记(二)
  • 成为一名优秀的Developer的书单
  • 简单基于spring的redis配置(单机和集群模式)
  • 解决iview多表头动态更改列元素发生的错误
  • 利用DataURL技术在网页上显示图片
  • 前端技术周刊 2019-02-11 Serverless
  • 入门级的git使用指北
  • 深入浅出webpack学习(1)--核心概念
  • 使用docker-compose进行多节点部署
  • 跳前端坑前,先看看这个!!
  • 小而合理的前端理论:rscss和rsjs
  • 用quicker-worker.js轻松跑一个大数据遍历
  • 再次简单明了总结flex布局,一看就懂...
  • 正则表达式
  • 1.Ext JS 建立web开发工程
  • ​二进制运算符:(与运算)、|(或运算)、~(取反运算)、^(异或运算)、位移运算符​
  • #define
  • #gStore-weekly | gStore最新版本1.0之三角形计数函数的使用
  • (floyd+补集) poj 3275
  • (k8s)Kubernetes 从0到1容器编排之旅
  • (动手学习深度学习)第13章 计算机视觉---微调
  • (附源码)springboot电竞专题网站 毕业设计 641314
  • (十二)springboot实战——SSE服务推送事件案例实现
  • (转载)CentOS查看系统信息|CentOS查看命令
  • .gitignore文件忽略的内容不生效问题解决
  • .net core + vue 搭建前后端分离的框架
  • .net core 控制台应用程序读取配置文件app.config
  • .NET 除了用 Task 之外,如何自己写一个可以 await 的对象?
  • .net 受管制代码
  • .NET 直连SAP HANA数据库
  • .net8.0与halcon编程环境构建
  • @requestBody写与不写的情况
  • @Validated和@Valid校验参数区别
  • [ vulhub漏洞复现篇 ] JBOSS AS 5.x/6.x反序列化远程代码执行漏洞CVE-2017-12149