• mysql主从基于docker实现,django实现读写分离


    1.主从搭建

    从同步的流程或原理

    1)master会将变动记录到二进制日志里面;
    2)master有一个I/O线程将二进制日志发送到slave;
    3) slave有一个I/O线程把master发送的二进制写入到relay日志里面;
    4)slave有一个SQL线程,按照relay日志处理slave的数据;

    实操

    创建两个文件夹 

    1. mkdir -p /home/mysql/data/
    2. mkdir -p /home/mysql/conf.d
    3. touch /home/mysql/my.cnf
    4. mkdir -p /home/mysql2/data/
    5. mkdir -p /home/mysql2/conf.d
    6. touch /home/mysql2/my.cnf

    修改配置文件

    主库的配置文件,server-id和开启binlog日志

    vim  /home/mysql/my.cnf
    
    1. [mysqld]
    2. user=mysql
    3. character-set-server=utf8
    4. default_authentication_plugin=mysql_native_password
    5. secure_file_priv=/var/lib/mysql
    6. expire_logs_days=7
    7. sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
    8. max_connections=1000
    9. server-id=100
    10. log-bin=mysql-bin
    11. [client]
    12. default-character-set=utf8
    13. [mysql]
    14. default-character-set=utf8

    从库的配置

    # 多了下面两行

    log-bin=mysql-slave-bin  # 指定日志
    relay_log=edu-mysql-relay-bin 指定中继日志

    vim  /home/mysql2/my.cnf
    1. [mysqld]
    2. user=mysql
    3. character-set-server=utf8
    4. default_authentication_plugin=mysql_native_password
    5. secure_file_priv=/var/lib/mysql
    6. expire_logs_days=7
    7. sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
    8. max_connections=1000
    9. server-id=101
    10. log-bin=mysql-slave-bin
    11. relay_log=edu-mysql-relay-bin
    12. [client]
    13. default-character-set=utf8
    14. [mysql]
    15. default-character-set=utf8

    拉起两个mysql容器

    1. #启动主库容器(挂载外部目录,端口映射成33307,密码设置为123456
    2. docker run -di -v /home/mysql/data/:/var/lib/mysql -v /home/mysql/conf.d:/etc/mysql/conf.d -v /home/mysql/my.cnf:/etc/mysql/my.cnf -p 33307:3306 --name mysql-master -e MYSQL_ROOT_PASSWORD=123456 yuanmengqiang/mysql_utf-8:v1
    3. #启动从库容器(挂载外部目录,端口映射成33306,密码设置为123456
    4. docker run -di -v /home/mysql2/data/:/var/lib/mysql -v /home/mysql2/conf.d:/etc/mysql/conf.d -v /home/mysql2/my.cnf:/etc/mysql/my.cnf -p 33306:3306 --name mysql-slave -e MYSQL_ROOT_PASSWORD=123456 yuanmengqiang/mysql_utf-8:v1

    连接主库,创建test用户,并授权

    1. # 在主库创建用户并授权
    2. mysql -h 106.14.42.253 -P 33307 -uroot -p123456
    1. #在主库创建用户并授权
    2. ##创建test用户
    3. create user 'test'@'%' identified by '123';
    4. ##授权用户
    5. grant all privileges on *.* to 'test'@'%' ;
    6. ###刷新权限
    7. flush privileges;
    8. #查看主服务器状态(显示如下图)
    9. show master status;
    10. # 可以看到日志文件的名字,和现在处在哪个位置

    连接从库,配置连接主库

    master_log_file 可能不一样 ,用这个命令查看show slave status\G;

    1. # 连接从库
    2. mysql -h 106.14.42.253 -P 33306 -uroot -p123456
    1. #配置详解
    2. /*
    3. change master to
    4. master_host='MySQL主服务器IP地址',
    5. master_user='之前在MySQL主服务器上面创建的用户名',
    6. master_password='之前在MySQL主服务器上面创建的用户名的密码',
    7. master_log_file='MySQL主服务器状态中的二进制文件名',
    8. master_log_pos='MySQL主服务器状态中的position值';
    9. */
    10. # 输入命令如下
    11. change master to master_host='101.133.225.166',master_port=33307,master_user='test',master_password='123',master_log_file='mysql-bin.000003',master_log_pos=0;
    12. # 启用从库
    13. start slave;
    14. # 查看从库状态(如下图)
    15. show slave status\G;
    16. ####这两个是yes表示配成功 ####
    17. Slave_IO_Running: Yes
    18. Slave_SQL_Running: Yes

    测试

    1. #在主库上创建数据库test1
    2. create database test1;
    3. use test1;
    4. #创建表
    5. create table tom (id int not null,name varchar(100)not null ,age tinyint);
    6. #插入数据
    7. insert tom (id,name,age) values(1,'xxx',20),(2,'yyy',7),(3,'zzz',23);

    django实现读写分离(创建数据库,要手动命令行去创建)

    settings.py配置

    1. #1 在setting中配置
    2. DATABASES = {
    3. # 主库
    4. 'default': {
    5. 'ENGINE': 'django.db.backends.mysql',
    6. 'NAME': 'lqz1',
    7. 'USER': 'root',
    8. 'PASSWORD': '123456',
    9. 'HOST': '101.133.225.166',
    10. 'PORT': 33307,
    11. },
    12. # 从库
    13. 'db1': {
    14. 'ENGINE': 'django.db.backends.mysql',
    15. 'NAME': 'lqz1',
    16. 'USER': 'root',
    17. 'PASSWORD': '123456',
    18. 'HOST': '101.133.225.166',
    19. 'PORT': 33306,
    20. },
    21. }

    手动指定读写分离

    1. ####手动来做
    2. # 向default库写,主库
    3. res=models.Book.objects.using('default').create(name='金瓶梅',price=33.4)
    4. # 去从库查
    5. res=models.Book.objects.using('db1').all().first()
    6. print(res.name)

    自动指定(写router和配置setting)

    在根目录下创建一个db_router.py

    1. class Router1:
    2. def db_for_read(self, model, **hints):
    3. print('读')
    4. return 'db1'
    5. def db_for_write(self, model, **hints):
    6. print('写')
    7. return 'default'

    在setting中注册

    1. # 注册一下 # 4 以后只要是写操作,就会用default,只要是读操作自动去db1
    2. DATABASE_ROUTERS = ['app01.db_router.Router1']

    视图测试

    1. def t8(request):
    2. data = models.Text_one.objects.get(id=1)
    3. models.Text_one.objects.create(name='xx', title='aa')
    4. return HttpResponse('ok')

    更细粒度(分库分表时需要)

    1. class Router1:
    2. def db_for_read(self, model, **hints):
    3. if model._meta.model_name == 'book':
    4. return 'db1'
    5. else:
    6. return 'default'
    7. def db_for_write(self, model, **hints):
    8. return 'default'

    在数据库迁移时,可以指定把哪个app的表结构迁移到哪个库

    # django默认是default

    python manage.py migrate app01 --database=default

  • 相关阅读:
    C++模板初阶
    MongoDB--- 客户端操作 与 复制集
    线程安全问题 的小案例
    c++ 之 socket udp与tcp client server实现
    STM32 HAL库F103系列之ADC实验(三)
    在vue-cli项目中打包的 dist 静态文件不能直接双击打开访问解决方法-直接打开访问是空白的解决方法
    Windows使用模拟器启动AOSP源码编译的镜像
    Unreal&LatentAction的能与不能
    【论文阅读】CVPR2021: MP3: A Unified Model to Map, Perceive, Predict and Plan
    GBase 8a修改端口
  • 原文地址:https://blog.csdn.net/qq_52385631/article/details/126502470