发表于: 2017-09-08 23:04:56
1 790
今天完成的事情:梳理一下数据库建表的相关事项,调整状态
数据库建表规则
第一范式:消除组中的重复,也就是说列中是否存储了其他列中的信息(字段不可再分)
第二范式:消除部分依赖列,也就是说是否有依赖于一部分主键的列 (非主键字段完全依赖主键字段)
第三范式:消除非依赖列,是否有依赖于非主键的列 (消除传递依赖)
例如:
学生信息表
学生ID,姓名,地址,城市,邮政编码,所在年级,性别,参加课程,课程级别,课程ID,名称,描述,教师ID,教师姓名,时间表,地点,先决课程
如果这么多字段在同一个表里,那么这种设计会被认为没有正规化,这里有很多重复的信息,为了把数据库设计转化 为第一范式,需要把信息分成两个表,并在两个表之间建立关系,如下:
学生表
学生ID,姓名,地址,城市,邮政编码,所在年级,性别
学生课程表
学生ID,课程ID,名称,描述,教师ID,教师姓名,时间表,地点
通过把学生从课程中分离,我们可以消除由不同的逻辑组引入的重复,我们必须满足消除信息重复的目标。接下来, 从第一范式到第二范式,我们需要消除表中仅仅部分依赖主键的列,这些列应该被分割到不同的表中。在学生课程表中,许多列仅仅依赖于课程ID,而不依赖于学生ID,这个表的主键是学生ID+课程ID,因此把这个表分成两个表,如下:
学生课程表
学生ID,课程ID,课程级别
课程表
课程ID,名称,描述,教师ID,教师姓名,先决课程,时间表,地点
既然对主键的部分依赖已经消除,数据库就已经满足第二范式了。为了进一步把数据库转化为第三范式,需要把表中对构成主键的列的不依赖部分分离出去,教师姓名依赖于教师ID,而不依赖于课程ID,索引,这些列应该被分离以形成一个新表,如下:
教师表
教师ID,教师姓名
最终的课程表如下
课程ID,名称,描述,教师ID,时间表,地点
归结起来3句话:
1NF:字段不可分;
2NF:有主键,非主键字段依赖主键;
3NF:非主键字段不能相互依赖;
解释:
1NF:原子性 字段不可再分,否则就不是关系数据库;
2NF:唯一性 一个表只说明一个事物;
3NF:每列都与主键有直接关系,不存在传递依赖;
数据库建表规范
一、 表设计
1.库名、表名、字段名必须使用小写字母,“_”分割。
2.库名、表名、字段名必须不超过12个字符。
3.库名、表名、字段名见名知意,建议使用名词而不是动词。
4.建议使用InnoDB存储引擎。
5.存储精确浮点数必须使用DECIMAL替代FLOAT和DOUBLE。
6.建议使用UNSIGNED存储非负数值。
7.建议使用INT UNSIGNED存储IPV4。
8.整形定义中不添加长度,比如使用INT,而不是INT(4)。
9.使用短数据类型,比如取值范围为0-80时,使用TINYINT UNSIGNED。
10.不建议使用ENUM类型,使用TINYINT来代替。
11.尽可能不使用TEXT、BLOB类型。
12.VARCHAR(N),N表示的是字符数不是字节数,比如VARCHAR(255),可以最大可存储255个汉字,需要根据实际的宽度来选择N。
13.VARCHAR(N),N尽可能小,因为MySQL一个表中所有的VARCHAR字段最大长度是65535个字节,进行排序和创建临时表一类的内存操作时,会使用N的长度申请内存。
14.表字符集选择UTF8。
15.使用VARBINARY存储变长字符串。
16.存储年使用YEAR类型。
17.存储日期使用DATE类型。
18.存储时间(精确到秒)建议使用TIMESTAMP类型,因为TIMESTAMP使用4字节,DATETIME使用8个字节。
19.建议字段定义为NOT NULL。
20.将过大字段拆分到其他表中。
21.禁止在数据库中使用VARBINARY、BLOB存储图片、文件等。
二、 索引
1.非唯一索引必须按照“idx_字段名称_字段名称[_字段名]”进行命名。
2.唯一索引必须按照“uniq_字段名称_字段名称[_字段名]”进行命名。
3.索引名称必须使用小写。
4.索引中的字段数建议不超过5个。
5.单张表的索引数量控制在5个以内。
6.唯一键由3个以下字段组成,并且字段都是整形时,使用唯一键作为主键。
7.没有唯一键或者唯一键不符合5中的条件时,使用自增(或者通过发号器获取)id作为主键。
8.唯一键不和主键重复。
9.索引字段的顺序需要考虑字段值去重之后的个数,个数多的放在前面。
10.ORDER BY,GROUP BY,DISTINCT的字段需要添加在索引的后面。
11.使用EXPLAIN判断SQL语句是否合理使用索引,尽量避免extra列出现:Using File Sort,UsingTemporary。
12.UPDATE、DELETE语句需要根据WHERE条件添加索引。
13.不建议使用%前缀模糊查询,例如LIKE “%weibo”。
14.对长度过长的VARCHAR字段建立索引时,添加crc32或者MD5 Hash字段,对Hash字段建立索引。
15.合理创建联合索引(避免冗余),(a,b,c) 相当于 (a) 、(a,b) 、(a,b,c)。
16.合理利用覆盖索引。
17.SQL变更需要确认索引是否需要变更并通知DBA。
三、 SQL语句
1.使用prepared statement,可以提供性能并且避免SQL注入。
2.SQL语句中IN包含的值不应过多。
3.UPDATE、DELETE语句不使用LIMIT。
4.WHERE条件中必须使用合适的类型,避免MySQL进行隐式类型转化。
5.SELECT语句只获取需要的字段。
6.SELECT、INSERT语句必须显式的指明字段名称,不使用SELECT *,不使用INSERTINTO table()。
7.使 用SELECT column_name1, column_name2 FROM table WHERE[condition]而不是SELECT column_name1 FROM table WHERE[condition]和SELECT column_name2 FROM table WHERE [condition]。
8.WHERE条件中的非等值条件(IN、BETWEEN、<、<=、>、>=)会导致后面的条件使用不了索引。
9.避免在SQL语句进行数学运算或者函数运算,容易将业务逻辑和DB耦合在一起。
10.INSERT语句使用batch提交(INSERT INTO tableVALUES(),(),()……),values的个数不应过多。
11.避免使用存储过程、触发器、函数等,容易将业务逻辑和DB耦合在一起,并且MySQL的存储过程、触发器、函数中存在一定的bug。
12.避免使用JOIN。
13.使用合理的SQL语句减少与数据库的交互次数。
14.不使用ORDER BY RAND(),使用其他方法替换。
15.建议使用合理的分页方式以提高分页的效率。
16.统计表中记录数时使用COUNT(*),而不是COUNT(primary_key)和COUNT(1)。
17.禁止在从库上执行后台管理和统计类型功能的QUERY。
四、 散表
1.每张表数据量建议控制在5000w以下。
2.可以结合使用hash、range、lookup table进行散表。
3.散表如果使用md5(或者类似的hash算法)进行散表,表名后缀使用16进制,比如user_ff。
4.推荐使用CRC32求余(或者类似的算术算法)进行散表,表名后缀使用数字,数字必须从0开始并等宽,比如散100张表,后缀从00-99。
5.使用时间散表,表名后缀必须使用特定格式,比如按日散表user_20110209、按月散表user_201102。
明天计划的事情:对自己写的sql进行检查,写出方案终稿
遇到的问题:这几天状态不好,感谢张帆师兄的开导,已经解决。
收获:调整状态
评论