Mysql数据库进阶之(分表分库,主从分离)

时间:2022-01-28 13:09:43

前言:数据库的优化是一个程序员的分水岭,作为小白我也得去提前学习这方面的数据的

(一)  三范式和逆范式

  听起范式这个迟非常专业我来举个简单的栗子:

  第一范式就是:  把能够关联的每条数据都拆分成一个表

  第二范式就是:把能够关联的每条数据写在一个表格中去

  第三范式就是:把一些重复的字段再划分多一个表来存(这样做查询数据时候只能连表来操作)给查询带来压力

  逆范式就是:宁愿牺牲一些冗余的数据把所有的字段都往一个表格里面存,这样有利于提高查询速度.

(二)垂直分表和水平分表设计

  1.水平分表

create table cakes
(
id int unsigned primary key auto_increment,
cakename varchar(16)
)charset=utf8 partition by range(id)(
#分表名称cake1000,范围是id=1 to id=999
partition cake1000 values less than(1000),
#分表名称cake1000,范围是id=1000 to id=1999
partition cake2000 values less than(2000)
); 说明这里通过id标识来分表,主要表格的id如果超过了规定的值就会进入下一个表格
//这个功能主要是用在表格已经生成了但是后面添加的
alter table 表名 add partition (
partition 分表名称 values less than (范围)
) //删除分表的功能
alter table 表名 drop partition 分表名称;

  2.垂直分表

create table goods
(
id int unsigned comment '不能在list分表使用索引',
proname varchar(10) not null,
source varchar(20) comment '原料',
`money` varchar(10) not null,
addtime datetime not null comment '2018-03-25 11:22:33'
)charset=utf8 partition by list( month(addtime) )(
partition spring values in(3,4,5), #春季
partition summer values in(6,7,8), #夏季
partition autumn values in(9,10,11), #秋季
partition winter values in(12,1,2) #冬季
); //注意这里是以月份进行分表的,并且id这个字段不能为主键和唯一键索引
//这个功能主要是用在表格已经生成了但是后面添加的
alter table 表名 add partition (
partition 分表名称 values in (范围)
) create index normal_id on goodsYear(id); //通常都是以普通键索引来做为ID
alter table 表名 drop partition 分表名称;

(三) MySQL 的 Grant 用户授权

  即:在 MySQL 中默认存在一个本地用户访问的机制,其他服务器是无法访问的另一台服务器的MySQL 数据库,是会报没有权限的

如果希望当前服务器被其他服务器访问就需要使用 Grant 用户授权技术
//授权语句
GRANT ALL PRIVILEGES ON *.* TO '授权用户名'@'被授权服务器的IP' IDENTIFIED BY '授权密码';
//立即生效
FLUSH PRIVILEGES;
//如果授权成功效果,通过命令查看mysql中的系统用户表:
select host,user from mysql.user where user=授权用户名
//测试是否能在别的服务器访问本服务器的数据库
mysql -u授权的用户名 -p授权的密码 -h访问的主机

(四)binlog 日志

  1. show variables like 'log_bin' : 该函数主要用于查看binlog日志是否已经开启

  2. show master status : 该函数主要查看用于Master数据库正在使用的binlog日志情况

  3. show slave status \G: 该函数主要用于Slave数据库是否已经同步

  以上函数如果不用于主从复制和读写分离的配置当中,等同没用

(五)读写分离和主从复制

  1.主从首要条件:①关闭 selinux ②关闭 iptables ③ master 已经对 slave 进行 grant 授权

create database php32 charset utf8;

在 master 服务器中开启 binlog 日志和设置要发生主从同步数据库(my.cnf)

#mysql的bin-log 日志配置选项,假设 做读写(主从)分离,这个选项在从服务器必须关闭

log-bin=mysql-bin

#1.主服务器的id,这个 id 不一定设为 1,只要主从不一样就行

server-id=1

#2.要做同步的数据库名字,可以是多个数据库,之间用分号分割

binlog-do-db=php32

#3.保存重启mysql
service mysqld restart #4.显示状态(里面显示的数据用在从服务器使用)
show master status;
#从服务器
servir-id = 2 (这里只要和主服务器不同就行了)
#登录
mysql -uxxx -pxxx
#认证从服务器
change master to master_host='主服务器的IP地址',
master_port=3306,#端口
master_user='xxx',#主服务器授权的用户名
master_password='xxx',#主服务器授权的用户密码
master_log_file='mysql-bin.000007',#主服务器上的bin-log日志
master_log_pos=106;#主服务器上的 bin-log日志值 #启动主从服务
start slave;
stop slave; -- 停止
reset slave; -- 重置
start slave; -- 启动 #登录slave服务器中,查看show slave status\G,看到如下选项代表主从复制同步成功:
show slave status\G

最后注意:如果开发中写的操作发生slave当中,主从同步马上宣告失败,因此开发中,我们必须清楚 master 和 slave 服务器,slave 我们只是让它负责 select,但是 slave 是可以 insert 数据的,但是清楚风险所在.

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)

Mysql数据库进阶之(分表分库,主从分离)的更多相关文章

  1. mysql数据库为什么要分表和分区?

    一般下载的源码都带了MySQL数据库的,做个真正意义上的网站没数据库肯定不行. 数据库主要存放用户信息(注册用户名密码,分组,等级等),配置信息(管理权限配置,模板配置等),内容链接(html ,图片 ...

  2. 由mysql分区想到的分表分库的方案

    在分区分库分表前一定要了解分区分库分表的动机. 对实时性要求比较高的场景,使用数据库的分区分表分库. 对实时性要求不高的场景,可以考虑使用索引库(es/solr)或者大数据hadoop平台来解决(如数 ...

  3. mysql大数据解决方案--分表分库(0)

    引言 对于一个大型的互联网应用,海量数据的存储和访问成为了系统设计的瓶颈问题,对于系统的稳定性和扩展性造成了极大的问题.通过数据切分来提高网站性能,横向扩展数据层已经成为架构研发人员首选的方式. •水 ...

  4. sharding sphere 分表分库 读写分离

    sharding jdbc: sharding sphere 的 一部分,可以做到 分表分库,读写分离. 和 mycat 不同的 是 sharding jdbc 是 一个 jdbc 驱动 在 驱动这个 ...

  5. mysql数据库分区和分表

    转载自 https://www.cnblogs.com/miketwais/articles/mysql_partition.html https://blog.csdn.net/vbirdbest/ ...

  6. 什么是分表和分区 MySql数据库分区和分表方法

    1.为什么要分表和分区 日常开发中我们经常会遇到大表的情况,所谓的大表是指存储了百万级乃至千万级条记录的表.这样的表过于庞大,导致数据库在查询和插入的时候耗时太长,性能低下,如果涉及联合查询的情况,性 ...

  7. 12-2 MySQL数据库备份(分表)

    #!/bin/bash source /etc/profile DATE="$(date +%F_%H-%M-%S)" DB_IP="172.16.1.122" ...

  8. mycat 安装 分表 分库 读写分离

    简单的 理解 一下 mycat :如图 mycat 是一个 连接数据库的中介.一个独立安装的 工具,他连接着真实的数据库,并且 把自己伪装成一个数据库. 程序连接 mycat ,mycat 连接 到真 ...

  9. efcore使用ShardingCore实现分表分库下的多租户

    efcore使用ShardingCore实现分表分库下的多租户 介绍 本期主角:ShardingCore 一款ef-core下高性能.轻量级针对分表分库读写分离的解决方案,具有零依赖.零学习成本.零业 ...

随机推荐

  1. Linux学习之CentOS(二十一)--Linux系统启动详解

      在这篇随笔里面将对Linux系统的启动进行一个详细的解释!我的实验机器是CentOS6.4,当然对于现有的Linux发行版本,其系统的启动基本上都是一样的! 首先我们来看下Linux系统启动的几个 ...

  2. 观 GT Java语言管理系统的感悟

    继上次java系统考核完... 坦白说,我对我自己写的例子还是很满意的,虽说学长们给的评价不高 ,但我一直以为是学长们对我们的要求太高,以他们的眼光在看待我们,所以我对学长们给的评价并没有太过在意,当 ...

  3. 【redis】redis 在 windows 下安装使用

    1.安装 windows 下 redis 可用客户端 : http://redisdesktop.com/download ; 或在 github 上下载 redis zip 包,解压包到某个目录并在 ...

  4. TP框架实现分页

    TP框架自带分页的实现方法,所以使用这个分页方案,不用再重新造* 1,先看效果图 2,源码 /** * TODO 基础分页的相同代码封装,使前台的代码更少 * @param $m 模型,引用传递 * ...

  5. SQL server数据库内置账户SA登录设置

    SQL server数据库内置账户SA登录不了   设置SQL Server数据库给sa设置密码的时候  提示18456 解决步骤:   第二步:右击sa,选择属性: 第三步:点击状态选项卡:勾选授予 ...

  6. 不要怂,就是GAN (生成式对抗网络) (六):Wasserstein GAN(WGAN) TensorFlow 代码

    先来梳理一下我们之前所写的代码,原始的生成对抗网络,所要优化的目标函数为: 此目标函数可以分为两部分来看: ①固定生成器 G,优化判别器 D, 则上式可以写成如下形式: 可以转化为最小化形式: 我们编 ...

  7. C# 串口操作系列(4) -- 协议篇,文本协议数据解析

    C# 串口操作系列(4) -- 协议篇,文本协议数据解析 标签: c#uiobjectstringbyte 2010-06-09 01:50 19739人阅读 评论(26) 收藏 举报  分类: 通讯 ...

  8. DDD 学习记录

    1.领域模型建立    set 最好是受保护 2.CQRS   建议   查询可以直接从数据层获取: 3.领域服务 包含 不合适放在其他实体里面的方法,包含比较多实体操作的方法: 4.实体 里面的方法 ...

  9. C++向量 vector动态数组

    需要包含头文件, #include  <vector>    using namespace std; vector 容器与数组相比其优点在于它能够根据需要随时自动调整自身的大小以便容下所 ...

  10. 006&lowbar;nginx动态upstream和安全检查模块

    一.参考Tengine   http://tengine.taobao.org/document_cn/http_dyups_cn.html ngx_http_dyups_module Descrip ...