Rumah  >  Artikel  >  Java  >  Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

PHPz
PHPzke hadapan
2023-05-16 13:31:061528semak imbas

    1. MySQL master-slave replication

    Tetapi jika kita melihat dengan teliti, kita akan mendapati bahawa apabila projek kita semua menggunakan satu pangkalan data, maka Terdapat mungkin menjadi masalah berikut:

    • Semua tekanan membaca dan menulis ditanggung oleh satu pangkalan data, Tekanan tinggi

    • Pelayan pangkalan data kerosakan cakera bermakna kehilangan data dan satu titik kegagalan

    Untuk menyelesaikan dua masalah yang dinyatakan di atas, kita boleh menyediakan dua (lebih) MySQL, satu The master (Tuan) pelayan, hamba (Hamba) pelayan, pangkalan data utama perubahan data (tulis, kemas kini, padam operasi), perlu Segerakkan ke pangkalan data hamba (replikasi tuan-hamba). Apabila pengguna mengakses projek kami, jika ia adalah operasi tulis (sisipkan, kemas kini, padam), mereka akan mengendalikan terus pustaka utama jika ia adalah operasi baca (pilih ), kemudian kendalikan perpustakaan hamba secara langsung Struktur ini adalah pemisahan membaca dan menulis.

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    Dalam struktur pemisahan baca-tulis ini, boleh terdapat berbilang perpustakaan hamba

    1.1 Pengenalan

    Replikasi Master Slave MySQL ialah Proses replikasi tak segerak Lapisan bawah adalah berdasarkan fungsi log binari yang disertakan dengan pangkalan data Mysql. Ini bermakna bahawa satu atau lebih pangkalan data MySQL (hamba, iaitu pangkalan data hamba) menyalin log daripada pangkalan data MySQL yang lain (induk, iaitu pangkalan data utama), dan kemudian menghuraikan log dan Gunakannya kepada dirinya sendiri, dan akhirnya menyedari bahawa data pangkalan data hamba konsisten dengan data pangkalan data utama. Replikasi hamba induk MySQL ialah fungsi terbina dalam pangkalan data MySQL dan tidak memerlukan penggunaan alat pihak ketiga.

    Log binari:

    Log binari (BINLOG) merekodkan semua pernyataan DDL (bahasa definisi data) dan DML (bahasa manipulasi data), tetapi tidak termasuk pernyataan pertanyaan data. Log ini memainkan peranan yang sangat penting dalam pemulihan data semasa bencana replikasi tuan-hamba MySQL dilaksanakan melalui binlog ini. Secara lalai, MySQL tidak mendayakan log ini.

    Proses replikasi MySQL dibahagikan kepada tiga langkah:
    • Induk MySQL menulis perubahan data pada log binari ( log binari )

    • hamba menyalin log perduaan tuan ke log gegantinya (log geganti)

    • hamba membuat semula peristiwa dalam log geganti, mencerminkan data berubah kepada datanya sendiri

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    1.2. Pembinaan perpustakaan tuan-hamba

    Sebelum menyediakan persekitaran, kita perlu sediakan Terdapat dua pelayan Jika anda menjalani kehidupan yang kaya dan menggunakan dua pelayan awan, ingat untuk membuka kumpulan keselamatan, iaitu, tembok api jika anda menjalani kehidupan yang lebih baik daripada saya tetapi masih menggunakan mesin maya, ingat untuk tidak memulakan dengan memori yang begitu banyak. Ia adalah skrin biru (jangan tanya bagaimana anda mengetahuinya)

    Saya tidak akan menunjukkan kepada anda pemasangan pangkalan data dan pengendalian firewall saya rasa terdapat banyak sumber di Internet yang boleh memenuhi masalah yang dihadapi Ketika membina perpustakaan tuan-hamba Kadang-kadang saya melihat di Internet bahawa versi MySQL harus konsisten dan hanya beroperasi pada MySQL sebelumnya .

    1.2.1. Konfigurasi perpustakaan utama

    Pelayan: 192.168.150.100 (jangan cuba menggodamnya, ini IP mesin maya)

    1. Ubah suai fail konfigurasi pangkalan data Mysql vim /etc/my.cnf

    在打开的文件中加入下面两行,其中的server-id不一定是100,确保唯一即可
    log-bin=mysql-bin   #[必须]启用二进制日志
    server-id=100       #[必须]服务器唯一ID

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    2 🎜>di sini Terdapat tiga kaedah untuk memulakan semula MySQL Yang paling mudah sudah pasti adalah untuk mematikan dan menghidupkannya:

    net stop mysql;net start mysql;
    systemctl restart mysqld
    service mysqld restart

    3 >

    Selepas log masuk ke MySQL Untuk dapat melaksanakan arahan berikut, kerana ini adalah arahan SQL, Linux tidak tahu apa benda ini.

    GRANT REPLICATION SLAVE ON *.* to '用户名'@'开放的地址' identified by '密码';
    eg: GRANT REPLICATION SLAVE ON *.* to 'masterDb'@'%' identified by 'Master@123456';
    记得刷一下权限
    FLUSH PRIVILEGES;

    4. Semak status penyegerakan induk

    Pada masa ini, tidak perlu keluar dari MySQL, kerana arahan berikut masih merupakan arahan SQL , laksanakan SQL berikut, kita boleh mendapatkan dua parameter penting yang kita perlukan kemudian.

    show master status;

    Selepas melaksanakan ayat SQL ini, == jangan kendalikan pangkalan data utama lagi! Jangan kendalikan perpustakaan utama lagi! Jangan kendalikan perpustakaan utama lagi! == Perkara penting harus dikatakan tiga kali, kerana mengendalikan perpustakaan utama boleh menyebabkan dua nilai atribut

    dalam kotak merah berubah

    Jika ralat berlaku kemudian, ia mungkin sama dengan kedua-duanya sen di sini. Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    1.2.2、从库配置

    服务器:192.168.150.101(别试了黑不了的,这也是虚拟机的ip)

    1、 修改Mysql数据库的配置文件 vim /etc/my.cnf

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    这里要注意server-id和主库以及其他从库都不能相同,否则后面将会配置不成功。

    2、重启Mysql服务

    这里有三个方法都能重启MySQL,最简单的无疑就是一关一开:

    net stop mysql;net start mysql;
    systemctl restart mysqld
    service mysqld restart

    3、设置主库地址及同步位置

    登录进去MySQL之后才能够执行下面的命令,因为这是SQL命令

    设置主库地址和同步位置
    change master to master_host='192.168.150.100',master_user='masterDb',master_password='Master@123456',master_log_file='mysql-bin.000010',master_log_pos=68479;
    记得记得开启从库配置
    start slave;

    参数说明:

    • master_host: 主库的 IP地址

    • master_user: 访问主库进行主从复制的 用户名 ( 上面在主库创建的 )

    • master_password: 访问主库进行主从复制的用户名对应的 密码

    • master_log_file: 从哪个 日志文件 开始同步 ( 即1.2.1中第4步获取的 File )

    • master_log_pos: 从指定日志文件的哪个 位置 开始同步 ( 即1.2.1中第4步获取的 Position )

    4、查看从数据库的状态

    这个时候还 不用退出MySQL ,因为下面的命令还是SQL命令,执行下面的SQL,可以看到从库的状态信息。通过状态信息中的 Slave_IO_running 和 Slave_SQL_running 可以看出主从同步是否就绪,如果这两个参数全为 Yes ,表示主从同步已经配置完成。

    show slave status\G;

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    1.3、坑位介绍

    1.3.1、UUID报错

    这可能是由于linux 是复制出来的,MySQL中还有一个 server_uuid 是一样的,我们也需要修改。 vim /var/lib/mysql/auto.cnf

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    1.3.2、server_id报错

    这应该就是各位大牛设置server_id的时候不小心设置相同的id了,修改过来就行,步骤在上面的配置中。

    1.3.3、同步异常解决

    这是狗子在操作过程中搞出来的一个错误……

    出错的原因是在主库中删除了用户信息,但是在从库中同步的时候失败导致同步停止,下面记录自己的操作(是在进入MySQL的操作且是从库)。

    MASTER_LOG_POS
    STOP SLAVE;
    SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1;
    START SLAVE;
    SHOW SLAVE STATUS\G;

    在数据库中操作时,一定要注意当前所在的数据库是哪个,作为一个良好的实践:在SQL语句前加 USE dbname 。

    操作不规范,亲人两行泪……

    2、项目中实现

    2.1、ShardingJDBC

    Sharding-JDBC定位为 轻量级Java框架 ,在Java的JDBC层提供的额外服务。 它使用客户端直连数据库,以 jar包 形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动, 完全兼容JDBC和各种ORM框架 。

    使用Sharding-JDBC可以在程序中轻松的实现数据库 读写分离 。

    Sharding-JDBC具有以下几个特点:

    • 适用于任何基于JDBC的ORM框架,如:JPA, Hibernate, Mybatis, Spring JDBC Template或直接使用JDBC。

    • 支持任何第三方的数据库连接池,如:DBCP, C3P0, BoneCP, Druid, HikariCP等。

    • 支持任意实现JDBC规范的数据库。目前支持MySQL,Oracle,SQLServer,PostgreSQL以及任何遵循SQL92标准的数据库。

    下面我们将用ShardingJDBC在项目中实现MySQL的读写分离。

    2.2、依赖导入

    在pom.xml文件中导入ShardingJDBC的依赖坐标

    <!--sharding-jdbc-->
    <dependency>
        <groupId>org.apache.shardingsphere</groupId>
        <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
        <version>4.0.0-RC1</version>
    </dependency>

    2.3、配置文件

    在application.yml中增加数据源的配置

    spring:
      shardingsphere:
        datasource:
          names:
            master,slave
          # 主数据源
          master:
            type: com.alibaba.druid.pool.DruidDataSource
            driver-class-name: com.mysql.cj.jdbc.Driver
            url: jdbc:mysql://192.168.150.100:3306/db_test?useUnicode=true&characterEncoding=utf-8&useSSL=false
            username: root
            password: 123456
          # 从数据源
          slave:
            type: com.alibaba.druid.pool.DruidDataSource
            driver-class-name: com.mysql.cj.jdbc.Driver
            url: jdbc:mysql://192.168.150.101:3306/db_test?useUnicode=true&characterEncoding=utf-8&useSSL=false
            username: root
            password: 123456
        masterslave:
          # 读写分离配置,设置负载均衡的模式为轮询
          load-balance-algorithm-type: round_robin
          # 最终的数据源名称
          name: dataSource
          # 主库数据源名称
          master-data-source-name: master
          # 从库数据源名称列表,多个逗号分隔
          slave-data-source-names: slave
        props:
          sql:
            show: true #开启SQL显示,默认false
      # 覆盖注册bean,后面创建数据源会覆盖前面创建的数据源
      main:
        allow-bean-definition-overriding: true

    2.4、测试跑路

    这时我们就可以对我们项目中的配置进行一个测试,下面分别调用一个更新接口和一个查询接口,通过查看日志中记录的数据源来判断是否能够按照我们预料中的跑。

    • 更新操作(写操作)

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    • 查询操作(读操作)

    Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot

    Selesai! ! ! Program ini berjalan seperti biasa dan berjaya seperti yang kami jangkakan, dan berjaya menggunakan ShardingJDBC untuk merealisasikan pemisahan membaca dan menulis pangkalan data dalam projek kami.

    Atas ialah kandungan terperinci Bagaimana untuk merealisasikan pemisahan baca dan tulis MySQL dalam projek SpringBoot. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

    Kenyataan:
    Artikel ini dikembalikan pada:yisu.com. Jika ada pelanggaran, sila hubungi admin@php.cn Padam