sql开发规范

0. 规范目标

  1. 数据库开发、运维人员日常工作指导;
  2. 后端业务开发人员涉及数据库、编写SQL语句时的指导;
  3. 产品发布时涉及数据库的操作流程和管理规范;

1. 基础规范

  1. 如无特殊需要,尽量使用InnoDB存储引擎;
    【解读】支持事务、行级锁、并发性能更好、CPU及内存缓存页优化使得资源利用率更高;
  2. 如无特殊需要,请使用UTF8mb4字符集;
    【解读】万国码,无需转码,无乱码风险,节省空间;
  3. 数据表、数据字段必须加入中文注释;
    【解读】字段修改后,也要相应修改中文注释,避免不一致;
  4. 避免使用存储过程、视图、触发器、Event;
    【解读】高并发大数据的互联网业务,架构设计思路是“解放数据库CPU,将计算转移到服务层”,并发量大的情况下,这些功能很可能将数据库拖死,业务逻辑放到服务层具备更好的扩展性,能够轻易实现“增机器就加性能”。数据库擅长存储与索引,CPU计算上移;
  5. 禁止存储大文件或者大照片;
    【解读】存储大文件和图片不是数据库擅长的,应该存储在文件系统,数据库里存URI或文件ID,禁止使用text blob字段类型;

2. 命名规范

  1. 英文命名,必须有意义;
  2. 库名、表名、字段名:小写,下划线风格,不超过32个字符,必须见名知意,禁止拼音英文混用;
  3. 表名t_xxx,非唯一索引名idx_xxx,唯一索引名uniq_xxx;

3. 表设计规范

  1. 单实例表数目必须小于500;
  2. 单表列数目必须小于30;
  3. 表必须有主键,例如自增主键;
    【解读】
    a)主键递增,数据行写入可以提高插入性能,可以避免page分裂,减少表碎片提升空间和内存的使用;
    b)主键要选择较短的数据类型, Innodb引擎普通索引都会保存主键的值,较短的数据类型可以有效的减少索引的磁盘空间,提高索引的缓存效率;
    c) 无主键的表删除,在row模式的主从架构,会导致备库夯住;
  4. 示例;

    CREATE TABLE `t_user_info` (
    `主键` int(11) unsigned NOT NULL AUTO_INCREMENT COMMENT '用户ID' (必要可更改名称字段),

    `del_flag` tinyint(11) NOT NULL DEFAULT '0' COMMENT '删除标志:0:未删除,1:已删除' (必要不可更改字段),
    `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间' (必要不可更改字段),
    `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间' ,
    PRIMARY KEY (`主键`)
    ) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci COMMENT='用户基础信息表';

4. 字段设计规范

  1. 必须把字段定义为NOT NULL并且提供默认值;
    【解读】

    a)null的列使索引/索引统计/值比较都更加复杂,对MySQL来说更难优化;
    b)null 这种类型MySQL内部需要进行特殊处理,增加数据库处理记录的复杂性;同等条件下,表中有较多空字段的时候,数据库的处理性能会降低很多;
    c)null值需要更多的存储空,无论是表还是索引中每行中的null的列都需要额外的空间来标识;
    d)对null 的处理时候,只能采用is null或is not null,而不能采用=、in、<、<>、!=、not in这些操作符号。如:where name!=’shenjian’,如果存在name为null值的记录,查询结果就不会包含name为null值的记录;

  2. 禁止使用TEXT、BLOB类型;
    【解读】会浪费更多的磁盘和内存空间,非必要的大量的大字段查询会淘汰掉热数据,导致内存命中率急剧降低,影响数据库性能;
  3. 必须使用varchar(20)存储手机号;
    【解读】
    a)涉及到区号或者国家代号,可能出现+-()
    b)手机号会去做数学运算么?
    c)varchar可以支持模糊查询,例如:like“138%”;
  4. 禁止使用ENUM,可使用TINYINT代替;
    【解读】
    a)增加新的ENUM值要做DDL操作;
    b)ENUM的内部实际存储就是整数,实际上并不是自定义的字符串;

 

5. 索引设计规范

 

  1. 单表索引建议控制在5个以内;
  2. 单索引字段数不允许超过5个;
    【解读】字段超过5个时,实际已经起不到有效过滤数据的作用了;
  3. 禁止在更新十分频繁、区分度不高的属性上建立索引;
    【解读】
    a)更新会变更B+树,更新频繁的字段建立索引会大大降低数据库性能;
    b)“性别”这种区分度不大的属性,建立索引是没有什么意义的,不能有效过滤数据,性能与全表扫描类似;
  4. 建立组合索引,必须把区分度高的字段放在前面;
    【解读】能够更加有效的过滤数据; 

6. SQL设计规范

  1. 禁止使用SELECT *,只获取必要的字段,需要显示说明列属性,表关联必须使用“表名.字段名”;
    【解读】
    a)读取不需要的列会增加CPU、IO、NET消耗;
    b)不能有效的利用覆盖索引;
    c)使用SELECT *容易在增加或者删除字段后出现程序BUG;

  2. 禁止使用INSERT INTO t_xxx VALUES(xxx),必须显示指定插入的列属性;
    【解读】容易在增加或者删除字段后出现程序BUG;
  3. 禁止使用属性隐式转换;
    【解读】举例:SELECT uid FROM t_user WHERE phone=13812345678 会导致全表扫描,而不能命中phone索引,猜猜为什么?(这个线上问题不止出现过一次)建立组合索引,必须把区分度高的字段放在前面;
  4. 禁止在WHERE条件的属性上使用函数或者表达式;
    【解读】
    举例:SELECT uid FROM t_user WHERE from_unixtime(day)>='2017-02-15' 会导致全表扫描;
    正确的写法是:SELECT uid FROM t_user WHERE day>= unix_timestamp('2017-02-15 00:00:00');
  5. 禁止负向查询,以及%开头的模糊查询;
    【解读】
    a)负向查询条件:NOT、!=、<>、!<、!>、NOT IN、NOT LIKE等,会导致全表扫描;
    b)%开头的模糊查询,会导致全表扫描;
  6. 禁止大表使用JOIN查询,禁止大表使用子查询;
    【解读】会产生临时表,消耗较多内存与CPU,极大影响数据库性能;
  7. 禁止使用OR条件,必须改为IN查询;
    【解读】
    a)旧版本Mysql的OR查询是不能命中索引的,即使能命中索引,为何要让数据库耗费更多的CPU帮助实施查询优化呢?
    b)IN(1,2,3....) 个数限制100以内;

  8. 应用程序必须捕获SQL异常,并有相应处理;
    总结:大数据量高并发的互联网业务,极大影响数据库性能的都不让用,不让用哟。

7. SQL优化规范

  1. 慢SQL形成原因之一:未建索引或写法低效;
  2. 产品业务开发设计不当,例如时间段查询跨度过大,OLTP数据库报表类需求过于复杂;
    【解读】
    a)由数据库人员协助优化;
    b)调整业务逻辑,定时任务,分批次计算数据等;
  3. 业务开发人员明确目标责任;
    【解读】
    a)实时下单业务,数据库与开发人员必须优化到2秒以内;
    b)运营后台报表业务,OLTP数据库可以放宽在5秒以内;

8. 数据库上线规范

  1. 开发过程中涉及到以下内容时,需要申请DBA进行操作:
    • 申请数据库人员直接更改生产数据,update/delete;
    • 申请更改表结构;
    • 生产发布内容涉及到数据库相关;
    • 数据库人员需要自行调整数据库架构;
posted @ 2017-04-05 18:12  cyt1153  阅读(588)  评论(0编辑  收藏  举报