发表于: 2017-09-08 23:04:56

1 789


今天完成的事情:梳理一下数据库建表的相关事项,调整状态

数据库建表规则  

第一范式:消除组中的重复,也就是说列中是否存储了其他列中的信息(字段不可再分) 

第二范式:消除部分依赖列,也就是说是否有依赖于一部分主键的列 (非主键字段完全依赖主键字段) 

第三范式:消除非依赖列,是否有依赖于非主键的列 (消除传递依赖) 

例如: 


学生信息表 

学生ID,姓名,地址,城市,邮政编码,所在年级,性别,参加课程,课程级别,课程ID,名称,描述,教师ID,教师姓名,时间表,地点,先决课程 

       如果这么多字段在同一个表里,那么这种设计会被认为没有正规化,这里有很多重复的信息,为了把数据库设计转化 为第一范式,需要把信息分成两个表,并在两个表之间建立关系,如下: 

学生表 

学生ID,姓名,地址,城市,邮政编码,所在年级,性别 

学生课程表 

学生ID,课程ID,名称,描述,教师ID,教师姓名,时间表,地点 

 

      通过把学生从课程中分离,我们可以消除由不同的逻辑组引入的重复,我们必须满足消除信息重复的目标。接下来, 从第一范式到第二范式,我们需要消除表中仅仅部分依赖主键的列,这些列应该被分割到不同的表中。在学生课程表中,许多列仅仅依赖于课程ID,而不依赖于学生ID,这个表的主键是学生ID+课程ID,因此把这个表分成两个表,如下: 

学生课程表 

学生ID,课程ID,课程级别 

课程表 

课程ID,名称,描述,教师ID,教师姓名,先决课程,时间表,地点 

       

       既然对主键的部分依赖已经消除,数据库就已经满足第二范式了。为了进一步把数据库转化为第三范式,需要把表中对构成主键的列的不依赖部分分离出去,教师姓名依赖于教师ID,而不依赖于课程ID,索引,这些列应该被分离以形成一个新表,如下: 

教师表 

教师ID,教师姓名 

最终的课程表如下 

课程ID,名称,描述,教师ID,时间表,地点 

归结起来3句话: 

1NF:字段不可分; 

2NF:有主键,非主键字段依赖主键; 

3NF:非主键字段不能相互依赖; 

解释: 

1NF:原子性 字段不可再分,否则就不是关系数据库; 

2NF:唯一性 一个表只说明一个事物; 

3NF:每列都与主键有直接关系,不存在传递依赖; 


数据库建表规范

一、 表设计

1.库名、表名、字段名必须使用小写字母,“_”分割。

2.库名、表名、字段名必须不超过12个字符。

3.库名、表名、字段名见名知意,建议使用名词而不是动词。

4.建议使用InnoDB存储引擎。

5.存储精确浮点数必须使用DECIMAL替代FLOAT和DOUBLE。

6.建议使用UNSIGNED存储非负数值。

7.建议使用INT UNSIGNED存储IPV4。

8.整形定义中不添加长度,比如使用INT,而不是INT(4)。

9.使用短数据类型,比如取值范围为0-80时,使用TINYINT UNSIGNED。

10.不建议使用ENUM类型,使用TINYINT来代替。

11.尽可能不使用TEXT、BLOB类型。

12.VARCHAR(N),N表示的是字符数不是字节数,比如VARCHAR(255),可以最大可存储255个汉字,需要根据实际的宽度来选择N。

13.VARCHAR(N),N尽可能小,因为MySQL一个表中所有的VARCHAR字段最大长度是65535个字节,进行排序和创建临时表一类的内存操作时,会使用N的长度申请内存。

14.表字符集选择UTF8。

15.使用VARBINARY存储变长字符串。

16.存储年使用YEAR类型。

17.存储日期使用DATE类型。

18.存储时间(精确到秒)建议使用TIMESTAMP类型,因为TIMESTAMP使用4字节,DATETIME使用8个字节。

19.建议字段定义为NOT NULL。

20.将过大字段拆分到其他表中。

21.禁止在数据库中使用VARBINARY、BLOB存储图片、文件等。


二、 索引

1.非唯一索引必须按照“idx_字段名称_字段名称[_字段名]”进行命名。

2.唯一索引必须按照“uniq_字段名称_字段名称[_字段名]”进行命名。

3.索引名称必须使用小写。

4.索引中的字段数建议不超过5个。

5.单张表的索引数量控制在5个以内。

6.唯一键由3个以下字段组成,并且字段都是整形时,使用唯一键作为主键。

7.没有唯一键或者唯一键不符合5中的条件时,使用自增(或者通过发号器获取)id作为主键。

8.唯一键不和主键重复。

9.索引字段的顺序需要考虑字段值去重之后的个数,个数多的放在前面。

10.ORDER BY,GROUP BY,DISTINCT的字段需要添加在索引的后面。

11.使用EXPLAIN判断SQL语句是否合理使用索引,尽量避免extra列出现:Using File Sort,UsingTemporary。

12.UPDATE、DELETE语句需要根据WHERE条件添加索引。

13.不建议使用%前缀模糊查询,例如LIKE “%weibo”。

14.对长度过长的VARCHAR字段建立索引时,添加crc32或者MD5 Hash字段,对Hash字段建立索引。

15.合理创建联合索引(避免冗余),(a,b,c) 相当于 (a) 、(a,b) 、(a,b,c)。

16.合理利用覆盖索引。

17.SQL变更需要确认索引是否需要变更并通知DBA。


三、 SQL语句

1.使用prepared statement,可以提供性能并且避免SQL注入。

2.SQL语句中IN包含的值不应过多。

3.UPDATE、DELETE语句不使用LIMIT。

4.WHERE条件中必须使用合适的类型,避免MySQL进行隐式类型转化。

5.SELECT语句只获取需要的字段。

6.SELECT、INSERT语句必须显式的指明字段名称,不使用SELECT *,不使用INSERTINTO table()。

7.使 用SELECT column_name1, column_name2 FROM table WHERE[condition]而不是SELECT column_name1 FROM table WHERE[condition]和SELECT column_name2 FROM table WHERE [condition]。

8.WHERE条件中的非等值条件(IN、BETWEEN、<、<=、>、>=)会导致后面的条件使用不了索引。

9.避免在SQL语句进行数学运算或者函数运算,容易将业务逻辑和DB耦合在一起。

10.INSERT语句使用batch提交(INSERT INTO tableVALUES(),(),()……),values的个数不应过多。

11.避免使用存储过程、触发器、函数等,容易将业务逻辑和DB耦合在一起,并且MySQL的存储过程、触发器、函数中存在一定的bug。

12.避免使用JOIN。

13.使用合理的SQL语句减少与数据库的交互次数。

14.不使用ORDER BY RAND(),使用其他方法替换。

15.建议使用合理的分页方式以提高分页的效率。

16.统计表中记录数时使用COUNT(*),而不是COUNT(primary_key)和COUNT(1)。

17.禁止在从库上执行后台管理和统计类型功能的QUERY。


四、 散表

1.每张表数据量建议控制在5000w以下。

2.可以结合使用hash、range、lookup table进行散表。

3.散表如果使用md5(或者类似的hash算法)进行散表,表名后缀使用16进制,比如user_ff。

4.推荐使用CRC32求余(或者类似的算术算法)进行散表,表名后缀使用数字,数字必须从0开始并等宽,比如散100张表,后缀从00-99。

5.使用时间散表,表名后缀必须使用特定格式,比如按日散表user_20110209、按月散表user_201102。


明天计划的事情:对自己写的sql进行检查,写出方案终稿

遇到的问题:这几天状态不好,感谢张帆师兄的开导,已经解决。

收获:调整状态


返回列表 返回列表
评论

    分享到