记录工作过程中一次业务优化

1需求

用户需要输入身份证和姓名进行登录,登录时需要判断是否存在在数据库存在,登录成功后需要记录登录的信息以及微信Id,如果用到不同的微信账号,需要记录多次记录。

2设计

2.1数据库设计

CREATE TABLE `ExamDefine`  (
  `Id` varchar(36) NOT NULL COMMENT '主键编码',
  `ExamName` varchar(100) NOT NULL COMMENT '任务名称',
  PRIMARY KEY (`Id`)
);
CREATE TABLE `ExamStu`  (
  `Id` varchar(36) NOT NULL COMMENT '主键编码',
  `ExamDefineId` varchar(36) NOT NULL COMMENT '任务编码',
  `StuName` varchar(100) NOT NULL COMMENT '考生姓名',
  `CertificateType` int NOT NULL COMMENT '证件类型',
  `IdentificationID` varchar(50) NOT NULL COMMENT '证件号码',
  PRIMARY KEY (`Id`)
);
CREATE TABLE `StuLogin`  (
  `Id` varchar(36) NOT NULL COMMENT '主键编码',
  `StuName` varchar(100) NOT NULL COMMENT '考生姓名',
  `IdentificationID` varchar(50) NOT NULL COMMENT '证件号码',
  `LoginTime` datetime NOT NULL COMMENT '登录时间',
  `wxId` varchar(100) NOT NULL COMMENT '微信Id',
  PRIMARY KEY (`Id`)
);
ALTER TABLE `ExamStu` ADD CONSTRAINT `ExamDefineId` FOREIGN KEY (`ExamDefineId`) REFERENCES `ExamDefine` (`Id`);

2.2业务流程

2.3业务统计需求

1.统计任务考生人数,已登录人数,未登录人数,多账号登录人数

2.按照曲线方式统计每天登录人数、累计登录人数

2.3.1Sql语句

  • 统计任务考生人数,已登录人数,未登录人数,多账号登录人数

    SELECT
    count( 1 ) StuCount,
    Sum( LoginCount > 0 ) LoginCount,
    Sum( LoginCount > 1 ) MultipleLogins
    FROM
    ExamStu
    LEFT JOIN ( SELECT IdentificationID, count( 1 ) LoginCount FROM StuLogin GROUP BY IdentificationID ) lg ON ExamStu.IdentificationID = lg.IdentificationID
    WHERE
    ExamDefineId = @ExamDefineId

ExamStu表120w记录,StuLogin表60w记录,多账号登录6w执行需要4s多(数据仅供参考)

  • 按照曲线方式统计每天登录人数、累计登录人数

    SELECT
    ROW_NUMBER ( ) Over ( ORDER BY LoginTime DESC ) AS Sort,
    LoginTime,
    Count( lg.RepeatCount > 0 ) AS LoginCount
    FROM
    ExamStu
    LEFT JOIN ( SELECT IdentificationID, DATE_FORMAT(Max(LoginTime), '%Y-%m-%d %H') AS LoginTime, Count( * ) AS RepeatCount FROM StuLogin GROUP BY IdentificationID ) lg ON ExamStu.IdentificationID = lg.IdentificationID
    WHERE
    ExamStu.ExamDefineId = @ExamDefineId
    GROUP BY
    LoginTime
    ORDER BY
    LoginTime DESC

两个表关联,又使用内置函数,需要的时间也比较久

2.4优化思路

  • 减少表关联,能尽量在一个表中统计就在一个表中进行统计
  • 减少函数使用,考虑增加冗余字段

2.4.1修改后表数据库设计

在ExamStu表中增加登录时间(LoginTime yyyy-MM-dd HH格式),增加登录次数,默认登录次数为0。

2.4.2修改后流程数据

考生登录时,同步更新考生表中登录时间和登录次数

2.4.3修改后Sql语句

  • 统计任务考生人数,已登录人数,未登录人数,多账号登录人数

    SELECT
    count( 1 ) StuCount,
    Sum( LoginCount > 0 ) LoginCount,
    Sum( LoginCount > 1 ) MultipleLogins
    FROM
    ExamStu
    WHERE
    ExamDefineId = @ExamDefineId

  • 按照曲线方式统计每天登录人数、累计登录人数

    SELECT
    ROW_NUMBER ( ) Over ( ORDER BY LoginTime DESC ) AS Sort,
    LoginTime,
    Count( LoginCount > 1 ) AS LoginCount
    FROM
    ExamStu
    WHERE
    ExamStu.ExamDefineId = @ExamDefineId
    GROUP BY
    LoginTime
    ORDER BY
    LoginTime DESC

总结

大部分人面对的编程不复杂,多注意细节。