如何设计秒杀模块的数据库? (秒杀模块数据库设计)

随着电商平台的普及和消费者需求的增加,秒杀活动成为了越来越多电商平台的必备活动。然而,通过研究发现,大量的访问和请求会给系统造成严重的压力,导致服务器崩溃和用户体验差。

为了保证秒杀活动的顺利进行,设计一个高效可靠的数据库是至关重要的。本文将探讨如何设计秒杀模块的数据库以提高系统效率和运行稳定性。

1. 数据库选择

在设计秒杀模块的数据库时,我们要选择一个高性能、高可用性的数据库。在使用数据库时,我们要特别注意以下几个方面:

a) 数据库连接数

数据库连接数是指在同一时刻可与数据库建立的连接数目。因此,我们需要设置合理的连接数以避免系统崩溃。建议采用连接池来解决高并发请求的问题。

b) 内存管理

在数据库运行中,内存管理是非常重要的。因此,我们需要合理地分配内存,确保数据库的运行效率。

c) 数据库选型

在设计秒杀模块的数据库时,我们要选择一款效率高、性能好的数据库。目前更流行的关系型数据库是MySQL和Oracle,非关系型数据库中更流行的是MongoDB和Redis。

2. 数据库设计

在数据库设计时,我们要遵循以下几个原则:

a) 冗余处理

冗余处理可以提高系统的运行效率。例如,在秒杀模块中,我们可以将商品数量写在商品表里,同时将缓存中的商品数量实时更新,使库存数据实时的与实际数据一致。

b) 数据库分表

在高并况下,数据的查询和更新需要更快的效率。因此,采用数据库分表的方法,可以各个击破,提高查询效率。

c) 数据缓存

数据缓存可以提高系统运行效率。将热门数据、用户信息等缓存到内存中,可以大大减少数据库查询次数,提高系统效率。

3. 数据库优化

在数据库运行中,我们要注意以下几个方面:

a) 查询优化

快速的查询速度有利于系统运行效率。优化查询语句、建立索引、减少无效查询都是加快查询速度的有效措施。

b) 预编译语句

使用预编译语句可以避免重复编译语句,提高系统效率。

c) 事务管理

事务管理是保证数据库运行稳定性的关键。合理的事务控制可以减少数据丢失、重复提交等问题的发生。

结论:

对于一个秒杀模块来说,设计高效可靠的数据库非常关键。通过上述措施,我们可以有效的提高系统的运行效率,保证活动的顺利进行。虽然数据库设计需要大量的工作,但如果关注好每一个细节,最终的结果一定是值得的。

相关问题拓展阅读:

数据库表结构设计,常见的数据库管理系统

一、数据场景 1、表结构简介 任何工具类的东西都是为了解决某个场景下的问题,比如Redis缓存系统热点数据,ClickHouse解决海量数据的实时分析,MySQL关系型数据库存储结构化数据。数据的存储则需要设计对应的表结构,清楚的表结构,有助于快速开发业务,和理解系统。表结构的设计通常从下面几个方面考虑:业务场景、设计规范、表结构、字段属性、数据管理。

2、用户场景

例如存储用户基础信息数据,通常都会下面几个相关表结构:用户信息表、单点登录表、状态管理表、支付账户表等。

用户信息表

存储用户三要素相关信息:姓名,手机号,身份证,登录密码,邮箱等。

CREATE TABLE `ms_user_center` ( `id` int(11) NOT NULL AUTO_INCREMENT COMMENT ‘用户ID’, `user_name` varchar(20) NOT NULL COMMENT ‘用户名’, `real_name` varchar(20) DEFAULT NULL COMMENT ‘真实姓名’, `pass_word` varchar(32) NOT NULL COMMENT ‘密码’, `phone` varchar(20) NOT NULL COMMENT ‘手机号’, `email` varchar(32) DEFAULT NULL COMMENT ‘邮箱’, `head_url` varchar(100) DEFAULT NULL COMMENT ‘用户头像URL’, `card_id` varchar(32) DEFAULT NULL COMMENT ‘身份证号’, `user_sex` int(1) DEFAULT ‘1’ COMMENT ‘用户性别:0-女,1-男’, `create_time` datetime DEFAULT NULL COMMENT ‘创建时间’, `update_time` datetime DEFAULT NULL COMMENT ‘更新时间’, `state` int(1) DEFAULT ‘1’ COMMENT ‘是否可用,0-不可用,1-可用’, PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=’用户表’; 单点登录表

用意是在多个业务系统中,用户登录一次就可以访问所有相互信任的业务子系统,是聚合业务平台常用的解决方案。

CREATE TABLE `ms_user_sso` ( `user_id` int(11) NOT NULL COMMENT ‘用户ID’, `sso_id` varchar(32) NOT NULL COMMENT ‘单点信息编号ID’, `sso_code` varchar(32) NOT NULL COMMENT ‘单点登录码,唯一核心标识’, `log_ip` varchar(32) DEFAULT NULL COMMENT ‘登录IP地址’, `create_time` datetime DEFAULT NULL COMMENT ‘创建时间’, `update_time` datetime DEFAULT NULL COMMENT ‘更新时间’, `state` int(1) DEFAULT ‘1’ COMMENT ‘是否可用,0-不可用,1-可用’, PRIMARY KEY (`user_id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=’用户单点登录表’; 状态管理表

系统用户在使用时候可能出现多个状态,例如账户冻结、密码锁定等,把状态聚合到一起,可以更加方便的管理和验证。

CREATE TABLE `ms_user_status` ( `user_id` int(11) NOT NULL COMMENT ‘用户ID’, `account_status` int(1) DEFAULT ‘1’ COMMENT ‘账户状态:0-冻结,1-未冻结’, `real_name_status` int(1) DEFAULT ‘0’ COMMENT ‘实名认证状态:0-未实名,1-已实名’, `pay_pass_status` int(1) DEFAULT ‘0’ COMMENT ‘支付密码是否设置:0-未设置,1-设置’, `wallet_pass_status` int(1) DEFAULT ‘0’ COMMENT ‘钱包密码是否设置:0-未设置,1-设置’, `wallet_status` int(1) DEFAULT ‘1’ COMMENT ‘钱包是否冻结:0-冻结,1-未冻结’, `email_status` int(1) DEFAULT ‘0’ COMMENT ‘邮箱状态:0-未激活,1-激活’, `message_status` int(1) DEFAULT ‘1’ COMMENT ‘短信提醒开启:0-未开启,1-开启’, `letter_status` int(1) DEFAULT ‘1’ COMMENT ‘站内信提醒开启:0-未开启,1-开启’, `emailmsg_status` int(1) DEFAULT ‘0’ COMMENT ‘邮件提醒开启:0-未开启,1-开启’, `create_time` datetime DEFAULT NULL COMMENT ‘创建时间’, `update_time` datetime DEFAULT NULL COMMENT ‘更新时间’, `state` int(1) DEFAULT ‘1’ COMMENT ‘是否可用,0-不可用,1-可用’, PRIMARY KEY (`user_id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=’用户状态表’; 支付账户表

用户交易的核心表,存储用户相关的账户资金信息。

CREATE TABLE `ms_user_wallet` ( `wallet_id` int(11) NOT NULL AUTO_INCREMENT COMMENT ‘钱包ID’, `user_id` int(11) NOT NULL COMMENT ‘用户ID’, `wallet_pwd` varchar(32) DEFAULT NULL COMMENT ‘钱包密码’, `total_account` decimal(20,2) DEFAULT ‘0.00’ COMMENT ‘账户总额’, `usable_money` decimal(20,2) DEFAULT ‘0.00’ COMMENT ‘可用余额’, `freeze_money` decimal(20,2) DEFAULT ‘0.00’ COMMENT ‘冻结金额’, `freeze_time` datetime DEFAULT NULL COMMENT ‘冻结时间’, `thaw_time` datetime DEFAULT NULL COMMENT ‘解冻时间’, `create_time` datetime DEFAULT NULL COMMENT ‘创建时间’, `update_time` datetime DEFAULT NULL COMMENT ‘更新时间’, `state` int(1) DEFAULT ‘1’ COMMENT ‘是否可用,0-不可用,1-可用’, PRIMARY KEY (`wallet_id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=’用户钱包’; 二、设计规范 1、涉及模块

通过上面几个表设计的案例,可以看到表设计关联到数据库的各个方面知识:数据类型,索引,编码,存储引擎等。表设计是一个很大的命题,不过也遵循一个基本规范:三范式。

2、三范式 基础概念

一范式

表的列的具有原子性,不可再分解,即列的信息,不能分解,关系型数据库MySQL、Oracle等自动的满足。

二范式

每个事实的数据记录只会出现一次, 不会冗余, 通常设计一个主键来实现。

三范式

要求一个表中不包含已经存在于其它表的非主键信息,例如部门和员工的信息,员工表包含部门表的主键ID,则可以关联获取相关信息,没必要在员工表保存相关信息。

优缺点对比

范式化设计

范式化结构设计通常更新快,因为冗余数据较少,表结构轻巧,也更好的写入内存中。但是查询起来涉及到关联,代价非常高,非常损耗查询性能。

反范式化设计

所有的数据都在一张表中,避免关联查询,索引的有效性更高,但是数据的冗余性极高。

建议结论

上述的两种设计方式在实际开发中都是不存在的,在实际开发中都是混合使用。比如汇总统计,缓存数据,都会基于反范式化的设计。

三、字段属性

合适的字段类型对于高性能来说非常重要,基本原则如下:简单的类型占用资源更少;在可以正确存储数据的情况下,选最小的数据类型。

1、数据类型选择 整数类型

TINYINT、ALLINT、MEDIUMINT、INT、BIGINT,根据数据类型范围合理选择即可。

实数类型

FLOAT、DOUBLE、DECIMAL,建议资金货币相关类型使用高精度DECIMAL存储,或者把数据成倍扩大为整数,采用BIGINT存储,不过处理相对麻烦。

字符类型

CHAR、VARCHAR,长度不确定建议采用VARCHAR存储,不过VARCHAR类型需要额外开销记录字符串长度。CHAR适合存储短字符,或者定长字符串,例如MD5的加密结构。

时间类型

DATETIME、TIMESTAMP,DATETIME保存大范围的值,精度秒。TIMESTAMP以时间戳的格式,范围相对较小,效率也相对较高,所以通常情况建议使用。

MySQL的字段类型有很多种,可以根据数据特性选择合适的,这里只描述常见的几种类型。

2、基础用法操作 数据类型

修改字段类型

ALTER TABLE ms_user_sso MODIFY state CHAR(1) DEFAULT ‘0’ ; ALTER TABLE ms_user_sso MODIFY state INT(1) DEFAULT ‘1’ COMMENT ‘状态:0不可用,1可用’;

修改名称位置

ALTER TABLE ms_user_sso CHANGE log_ip login_ip VARCHAR(32) AFTER update_time ; 索引使用

索引类型:主键索引,普通索引,唯一索引,组合索引,全文索引。这里演示普通索引的操作。MySQL的核心模块,后续详说。

添加索引

ALTER TABLE ms_user_wallet ADD INDEX user_id_index(user_id) ; CREATE INDEX state_index ON ms_user_wallet(state) ;

查看索引

SHOW INDEX FROM ms_user_wallet;

删除索引

DROP INDEX state_index ON ms_user_wallet ;

修改索引

不具有真正意义上的修改,可以把原有的索引删除之后,再次添加索引。

外键关联

用处:外键关联的作用保证多个数据表的数据一致性和完整性,建表时先有主表,后有从表;删除数据表,需要先删从表,再删主表。复杂场景不建议使用,实际开发中用的也不多。

添加外键

ALTER TABLE ms_user_wallet ADD CONSTRAINT user_id_out_key FOREIGN KEY(user_id) REFERENCES ms_user_center(id) ;

删除外键

ALTER TABLE ms_user_wallet DROP FOREIGN KEY user_id_out_key ; 四、表结构管理 1、查看结构 DESC ms_user_status ; SHOW CREATE TABLE ms_user_status ; 2、字段结构 添加字段 ALTER TABLE ms_user_status ADD `delete_time` datetime DEFAULT NULL COMMENT ‘删除时间’ ; 删除字段 ALTER TABLE ms_user_status DROP COLUMN delete_time ; 3、修改表名 ALTER TABLE ms_user_center RENAME ms_user_info ; 4、存储引擎 存储引擎 SELECT VERSION() ; SHOW ENGINES ;

MySQL 5.6 支持的存储引擎有InnoDB、MyISAM、Memory、Archive、CSV、BLACKHOLE等。一般默认使用InnoDB,支持事务管理。该模块MySQL核心,后续详解。

修改引擎

数据量大的场景下,存储引擎修改是一个难度极大的操作,容易会导致表的特性变动,引起各种后续反应,后续会详说。

ALTER TABLE ms_user_sso ENGINE = MyISAM ; 5、修改编码

表字符集默认使用utf8,通用,无乱码风险,汉字3字节,英文1字节,utf8mb4是utf8的超集,有存储4字节例如表情符号时使用。

查看编码 SHOW VARIABLES LIKE ‘character%’; 修改编码 ALTER TABLE ms_user_sso DEFAULT CHARACTER SET utf8mb4; 五、数据管理 1、增删改查

添加数据

INSERT INTO ms_user_sso ( user_id,sso_id,sso_code,create_time,update_time,login_ip,state ) VALUES ( ‘1’,’SSO’,’SSO’, ‘:56:57′,’:57:01′,’127.0.0.1′,’1′ );

更新数据

UPDATE ms_user_sso SET user_id = ‘1’,sso_id = ‘SSO’,sso_code = ‘SSO’, create_time = ‘:56:57’,update_time = ‘:57:01’, login_ip = ‘127.0.0.1’,state = ‘1’ WHERE user_id = ‘1’;

查询数据

一般情况下都是禁止使用 select* 操作。

SELECT user_id,sso_id,sso_code,create_time,update_time,login_ip,state FROM ms_user_sso WHERE user_id = ‘1’;

删除数据

DELETE FROM ms_user_sso WHERE user_id = ‘2’ ;

不带where条件,就是删除全部数据。原则上不允许该操作,优化篇会详解。TRUNCATE TABLE也是清空表数据,但是占用的资源相对较少。

2、数据安全 不可逆加密

这类加密算法,多用来做数据验证操作,比如常见的密码验证。

SELECT MD5(‘cicada’)=’94454b1241ad2cfbd0c44efda1b6b6ba’ ; SELECT SHA(‘cicada’)=’a2e4fd34e1d14015fc4dedc7d’; SELECT PASSWORD(‘ile’)=’*B4FB95D86DCFC3F33ADC742CD’ ; 可逆加密

安全性要求高的系统,需要做三级等保,对数据的安全性极高,数据在存储时必须加密入库,取出时候需要解密,这些就需要可逆加密。

SELECT DECODE(ENCODE(‘123456′,’key_salt’),’key_salt’) ; SELECT AES_DECRYPT(AES_ENCRYPT(‘cicada’,’salt123′),’salt123′);

上述数据安全的管理,也可以基于应用系统的服务(代码)层进行处理,相对专业的流程是从数据生成源头处理,规避数据传递过程泄露,造成不必要的风险。

在系统设计中,对数据库的设计应考虑哪些设计原则?

数据库是整个软件应用的根基,是软件设计的起点,它起着决定性的质变作用,因此我们必须对数据库设计高度重视起来,培养设计良好数据库的习惯,是一个优秀的软件设计师所必须具备的基本素质条件!

那么我们要做到什么程度才是对的呢?下面就说说数据库设计的原则:

1、数据库设计最起码要占用整个项目开发的40%以上的时间

数据库是需求的直观反应和表现,因此设计时必须要切实符合用户的需求,要多次与用户沟通交流来细化需求,将需求中的要求和每一次的变化都要一一体现在数据库的设计当中。如果需求不明确,就要分析不确定的因素,设计表时就要事先预留出可变通的字段,正所谓“有备无患”。

2、数据库设计不仅仅停留于页面demo的表面

页面内容所需要的字段,在数据库设计中只是一部分,还有系统运转、模块交互、中转数据、表之间的联系等等所需要的字段,因此数据库设计绝对不是简单的基本数据存储,还有逻辑数据存储。

3、数据库设计完成后,项目80%的设计开发在你脑海中就已经完成了

每个字段的设计都是有他必要的意义的,你在设计每一个字段的同时,就应该已经想清楚程序中如何去运用这些字段,多张表的联系在程序中是如何体现的。换句话说,你完成数据库设计后,程序中所有的实现思路和实现方式在你的脑海中就已经考虑过了。如果达不到这种程度,那当进入编码阶段后,才发现要运用的技术或实现的方式数据库无法支持,这时再改动数据库就会很麻烦,会造成一系列不可预测的问题。

4、数据库设计时就要考虑到效率和优化问题

一开始就要分析哪些表会存储较多的数据量,对于数据量较大的表的设计往往是粗粒度的,也会冗余一些必要的字段,已达到尽量用最少的表、最弱的表关系去存储海量的数据。并且在设计表时,一般都会对主键建立聚集索引,含有大数据量的表更是要建立索引以提供查询性能。对于含有计算、数据交互、统计这类需求时,还要考虑是否有必要采用存储过程。

5、添加必要的(冗余)字段

像“创建时间”、“修改时间”、“备注”、“操作用户IP”和一些用于其他需求(如统计)的字段等,在每张表中必须都要有,不是说只有系统中用到的数据才会存到数据库中,一些冗余字段是为了便于日后维护、分析、拓展而添加的,这点是非常重要的,比如黑客攻击,篡改了数据,我们便就可以根据修改时间和操作用户IP来查找定位。

6、设计合理的表关联

若多张表之间的关系复杂,建议采用第三张映射表来关联维护两张表之间的关系,以降低表之间的直接耦合度。若多张表涉及到大数据量的问题,表结构尽量简单,关联也要尽可能避免。

7、设计表时不加主外键等约束性关联,系统编码阶段完成后再添加约束性关联

这样做的目的是有利于团队并行开发,减少编码时所遇到的问题,表之间的关系靠程序来控制。编码完成后再加关联并进行测试。不过也有一些公司的做法是干脆就不加表关联。

8、选择合适的主键生成策略

秒杀模块数据库设计的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于秒杀模块数据库设计,如何设计秒杀模块的数据库?,数据库表结构设计,常见的数据库管理系统,在系统设计中,对数据库的设计应考虑哪些设计原则?的信息别忘了在本站进行查找喔。


数据运维技术 » 如何设计秒杀模块的数据库? (秒杀模块数据库设计)