mysql高并发设计

mysql高并发设计

一、部署方案

https://blog.csdn.net/weixin_37519752/article/details/138728036

方案1：双主

1、优点
写入扩展性：两个节点都可以处理写入操作，提高了写入操作的扩展性。
高可用性：在任一节点故障时，另一个节点仍可继续提供服务，包括写入操作。
故障转移：无需复杂的故障转移机制，因为两个节点都是活跃的。
2、缺点
数据一致性：需要复杂的冲突检测和解决机制来保持数据一致性。
网络要求：对网络稳定性和延迟有较高要求，因为节点间的实时同步对网络质量敏感。
额外开销：实时同步带来的额外网络和磁盘I/O开销。
3、适用场景
分布式应用：需要在不同地理位置提供写入能力的应用。
高写入负载：需要分散写入负载以提高性能的场景。
实时数据需求：需要在多个节点实时同步数据的应用。

方案2：主从复制

一主一从，或者一主多从 mysql5.7以上版本支持

1、优点
数据冗余：提供了数据的热备份，降低了数据丢失的风险。
性能提升：一主多从，不同用户从不同数据库读取，性能提升。
扩展性：流量增大时，可以方便地增加从服务器，不影响系统使用。
负载均衡：一主多从相当于分担了主机任务，做了负载均衡。
2、缺点
数据延迟：由于复制是异步的，存在数据复制延迟的风险。
复杂性增加：增加了系统的复杂性，需要更多的维护和管理。
额外资源消耗：需要额外的硬件资源来部署从服务器。
写入性能影响：所有写入操作都在主服务器上执行，可能成为性能瓶颈。
3、适用场景
读写分离：适用于读操作远多于写操作的场景。
数据备份：用于数据的实时备份，以防止数据丢失。
高可用性需求：需要保证服务连续性的关键应用

二、mysql性能优化

1、使用索引
索引是对表中数据进行高效查询的关键。在MySQL中，可以使用B-Tree索引或哈希索引来加速查询操作
示例：

CREATE INDEX index_name ON table_name (column1, column2, ...);

2、优化查询语句
优化查询可以提高MySQL性能。可以通过合适的查询语句、索引和缓存机制来减少查询的执行时间，避免全表扫描和不必要的数据操作
示例：

# 通过使用索引和合适的查询语句
SELECT * FROM table_name WHERE column1 = "value" AND column2 = "value";

# 避免使用通配符查询，可以使用索引来加速查询
SELECT * FROM table_name WHERE column1 LIKE "value%";

# 避免在查询条件中使用函数，函数会导致索引失效
SELECT * FROM table_name WHERE DATE(column1) > "2021-01-01";

3、缓存优化
MySQL的缓存机制可以提高查询性能。通过适当设置查询缓存和系统缓存，可以减少磁盘IO操作，加快查询的执行速度。使用MySQL的查询缓存、InnoDB的缓冲池等

# 启用查询缓存
query_cache_type =1
query_cache_size = 64M

4、分区分表
当数据量非常大时，可以考虑使用分区和分表来提高查询性能。分区将数据划分成多个较小的逻辑部分，每个部分可以独立地进行查询和维护。而分表是将一个大表拆分成多个小表，每个小表存储一部分数据。

# 分区
CREATE TABLE table_name (...
)
PARTITION BY RANGE (column_name)(
    PARTITION p1 VALUES LESS THAN (value1),
    PARTITION p2 VALUES LESS THAN (value2),
    ...
)# 分表
CREATE TABLE table_name (...
)
PARTITION BY HASH (column_name) PARTITIONS 4;

5、参数调优
https://blog.51cto.com/u_12196/6967500
https://blog.51cto.com/u_13259/6936668
6、连接池管理
连接池是一种管理数据库连接的技术，可以有效地减少连接的创建和销毁开销。在高并发环境下，连接池可以提前创建好一定数量的连接，并将其保存在连接池中。当有新的请求到来时，可以从连接池中获取连接，而不需要每次都重新创建连接。这样可以大大提高并发处理能力。
7、硬件优化：
使用高性能的硬件设备，如高速CPU、大容量内存和高速磁盘，以提升数据库的处理能力